PMTSeg

PMTSeg: Photo-Guided Tooth Segmentation on 3D Oral Scan（CVPR 2026）— 2D 口内照片引导 3D 扫描牙齿分割。

Overview

• 发布时间：CVPR 2026
• 关键词：牙科 · 牙齿分割 · 跨模态引导 · 口内照片 · 3D 扫描
• 核心问题：3D 口内扫描（IOS）缺乏纹理和颜色信息，牙齿与牙龈边界模糊。2D 口内照片包含丰富的颜色和纹理线索，但视角有限。

架构

相机对齐模块（Camera Alignment Module）

• 将 2D 口内照片与 3D 扫描进行精确配准
• 建立 2D-3D 像素-顶点对应关系

特征过滤门（Feature Filtering Gate）

• 自适应多视图选择：从多个口内照片视图中选择信息量最大的视图
• 过滤低质量或视角不佳的 RGB 特征

一致特征学习（Consistent Feature Learning）

• 纹理-几何对应：学习 2D 纹理特征与 3D 几何特征的联合表示
• 跨模态一致性约束，增强分割边界清晰度

关键创新

1. 照片引导分割：用便捷采集的口内照片辅助 3D 扫描分割
2. 自适应多视图选择：自动过滤无用视图
3. 纹理-几何联合学习：跨模态特征对齐

Related

• taligndiff — TAlignDiff 自动排牙
• oralgpt-omni — OralGPT-Omni 牙科多模态大模型
• oralgpt-plus — OralGPT-Plus 牙科 Agent VLM

Sources

• PMTSeg, CVPR 2026