增强现实辅助牙体雕刻系统(AR-ATCS)可识别三维物体标记,并将虚拟牙体模型叠加到真实的蜡块上,为初学者牙科学生在牙体雕刻过程中提供三维视觉参考。
增强现实辅助牙体雕刻系统(AR-ATCS)可识别三维物体标记,并将虚拟牙体模型叠加到真实的蜡块上,为初学者牙科学生在牙体雕刻过程中提供三维视觉参考。
本实验方案旨在通过开发和应用一种增强现实辅助的牙齿雕刻系统(AR-ATCS),提升牙体解剖学的教学效果。牙体形态学是牙科教育中的基础内容,要求学生掌握复杂的三维(3D)解剖结构和功能标志点,这些知识对于修复牙科和牙髓治疗等临床操作至关重要。传统上,学生通过蜡块雕刻练习来获得这些技能;然而,这种方法常受限于教学效率低下,以及学生在将二维(2D)教科书图示转化为三维实体结构时面临较大的认知鸿沟。为应对这些挑战,本方案描述了将增强现实(AR)技术整合到手工牙齿雕刻训练中的方法。该系统利用三维物体追踪和计算机视觉算法,将高保真的虚拟3D牙齿模型叠加至实际操作空间中。通过移动设备摄像头识别专用的追踪标记,系统可将数字引导模型以正确的比例和方向直接投射到蜡块上。这种虚实对齐使学生能够实时观察目标牙齿的形态,并在雕刻过程中即时发现偏差。本方案提供了建立增强现实环境、对齐虚拟模型与实物材料,以及将该系统用作自主训练工具的详细操作流程。通过提供交互式、多角度的视觉反馈,该系统减少了对教师持续示范的依赖,并降低了不可逆雕刻错误的影响。总体而言,这种增强现实辅助方法为传统的牙体解剖学训练提供了一种补充性的视觉引导工具,有助于初学者在牙齿雕刻过程中获得支持,并为牙体形态学练习提供了更高效的训练框架。
牙体形态学是口腔医学教育的核心组成部分,旨在帮助学生系统地理解牙齿解剖形态及其三维结构特征1,2。牙体雕刻实践作为牙体形态学教学的重要环节,不仅反映学生对牙齿解剖知识的掌握程度,同时也训练其手部灵活性和操作技能3,4。该实践为临床操作,特别是修复治疗,奠定了重要基础2,5。
传统的牙体雕刻训练通常在教师指导下进行,学生使用蜡块或肥皂块雕刻前牙和后牙的解剖形态3,5。然而,师生数量之间的不平衡使得教师在有限的教学时间内难以提供充分的个性化指导4,5。此外,学生在将二维图像转化为三维形态时常面临较大的认知困难,这可能降低学习效率和教学效果2,5,6。
近年来,随着数字技术的快速发展,三维打印、增强现实、虚拟现实等数字技术已逐渐应用于医学解剖学教育和牙科实验室教学6,7,8,9。这些技术克服了传统二维图谱、实体模型观察和教师示教在空间展示方面的局限性,为学生提供了更加直观、动态和三维的学习体验5,6,9。
增强现实(AR)是一种可视化技术,能够将计算机生成的虚拟信息实时叠加到真实环境中,从而实现虚实融合与人机交互。通过在真实场景中补充三维数据和空间信息,AR 可以扩展观察者对复杂空间结构的感知能力10,11。这一特性使 AR 特别适用于需要空间理解与手眼协调能力的实践教学场景。目前,AR 技术已在解剖学教育中初步应用,并获得了积极反馈11,12,13。除教育领域外,AR 还已应用于临床牙科。例如,Macrì 等人报道了使用 AR 辅助手术暴露阻生牙的案例,证明基于 AR 的空间配准与实时虚实叠加技术可应用于口腔手术导航14。该临床应用为将 AR 引导的空间可视化引入牙体形态学训练提供了进一步支持。
在本实验方案中,增强现实(AR)技术被用于辅助牙齿雕刻训练,通过在练习过程中为学生提供持续、直观的三维视觉参考,可作为传统教师指导的补充。为此,联合开发了一套AR辅助牙齿雕刻系统,主要由AR软件、高清摄像头、蜡块承载底座以及四个独立制作的三维物体追踪标记组成。这些标记被组装在承载底座上,底座用于将蜡块固定在预设位置。在操作过程中,系统通过摄像头采集实际操作区域的图像。当识别到底座上的一个三维物体标记后,虚拟牙齿模型便会实时叠加显示在屏幕界面中蜡块的对应位置,从而为学生提供雕刻过程中的视觉参考。
基于该系统,开展了一次单样本验证。一名已完成牙体解剖学课程的学生在增强现实辅助方案的指导下完成了牙齿雕刻操作。雕刻完成的牙齿被扫描并处理为三维模型,通过与标准牙体模型进行对比,开展了客观的形态偏差分析。初步的单样本结果表明,增强现实牙体雕刻训练系统(AR-ATCS)作为牙体形态学教学的辅助工具具有可行性。
1. 标准数字化牙模的建立
注意:在本方案中,以左侧下颌第一磨牙作为目标牙齿,以演示增强现实(AR)辅助牙齿雕刻工作流程的可行性。对于其他牙齿位置,可在导入相应的标准牙齿数字模型并重新定义其与三维物体标记的空间关系后,应用该工作流程。此步骤大约需要 10 min。
2. 蜡块托架与增强现实追踪底座的设计
注意:三维物体追踪标记和增强现实(AR)追踪蜡块基座为定制组件。其设计可能因设计目的和建模策略的不同而有所变化。因此,本方案中描述的基座并非唯一可行的设计,只要保持蜡块固定、标记识别和操作舒适性,可进行适当修改。此步骤约需 30 分钟。
3. 模型的3D打印与后处理
注意:使用本方案中所述的打印机和打印参数,打印一套完整的模型大约需要 70 分钟。
4. 增强现实软件设置与虚实配准
注意:在本方案中,使用了增强现实(AR)软件导入标准的数字化牙齿模型,并生成虚实融合图像。采用高清RGB相机以每秒30帧的速度采集1080p分辨率的RGB图像。相机的深度感知功能未用于跟踪或配准(图3A、B)。将虚拟模型导入软件并设置模型颜色与透明度耗时不足1分钟。配准过程耗时少于5秒,成功配准后即可立即实现实时导航。
5. 增强现实辅助的牙齿雕刻步骤
AR-ATCS 成功识别了基座上的三维物体追踪标记,并实时稳定地将虚拟牙体模型叠加到蜡块的对应位置。该虚拟模型准确呈现了主要解剖结构、形态边界和表面轮廓,包括牙尖、窝、沟、边缘嵴、轴面轮廓以及牙冠外形线。当缓慢旋转基座且追踪标记未被遮挡时,虚拟牙体模型与蜡块之间仍能保持稳定的配准。这使得操作者能够从多个视角观察目标牙齿的形态,包括颊面、舌面、近中面、远中面和咬合面。这些结果表明,该系统可提供连续的三维视觉参考,有助于在牙体雕刻过程中识别局部形态偏差。
当追踪标记被操作者的手或雕刻工具部分遮挡,或基座旋转过快时,标记识别会中断,导致虚拟模型叠加层丢失。重新放置基座并移除遮挡物后,可恢复标记识别,重新建立稳定的虚实注册,从而继续雕刻操作。
采用二维图像平面叠加偏差分析方法评估虚拟-现实叠加误差。每次配准试验中,相机位置保持固定,将带有物体追踪标记的牙齿雕刻基座移至相机视野中心。当虚拟标记轮廓与物理标记轮廓大致重合时,系统自动完成配准。随后采集一幅二维叠加图像。从每幅采集的图像中选取牙齿雕刻基座的四个角点解剖标志,记录对应的物理坐标与虚拟坐标(图4)。每对物理-虚拟点之间的欧氏距离即为二维叠加偏差。 对每个表面重复进行10次配准试验,每次试验测量四对相应的物理-虚拟标志点。因此,每个表面共分析40个点对,五个表面总计分析200个点对。对于颊面、远中面、近中面和舌面,使用对应表面的物体追踪标记进行配准。对于咬合面,首先利用其他表面的标记完成配准,然后旋转基座以获取咬合视角的叠加图像。这一额外的旋转操作可能导致该视角下观测到的偏差较大。总体二维叠加偏差的平均值为0.679 ± 0.381 mm,均方根(RMS)偏差为0.778 mm。咬合面表现出最大的偏差和变异性,而颊面、远中面、近中面和舌面的叠加偏差较小(Table 1)。
此处展示的雕刻结果来自一名刚完成牙体解剖学课程的学生,在增强现实辅助牙体雕刻系统(AR-ATCS)的持续指导下,于2小时内完成了牙齿雕刻操作;因此,定量偏差分析代表单样本数据。通过将扫描获得的雕刻牙齿模型与标准牙齿模型进行对比,进行了三维偏差分析。设定±0.5 mm的预定义容差范围,有52.26%的表面点位于该范围内。有符号平均偏差为0.1025 mm,均方根(RMS)偏差为0.7434 mm。最大正偏差和负偏差分别为+1.9275 mm和−1.9272 mm。彩色编码的偏差图显示,形态差异最显著的区域主要集中在咬合面及部分轴面轮廓区域(图5)。这些偏差值反映了三维扫描与模型配准后,最终雕刻牙齿模型与标准牙齿模型之间的累积差异,而非雕刻误差、增强现实配准误差或扫描误差的独立测量值。
这些初步的单样本结果证实了AR-ATCS工作流程在技术上的可行性。在观察到的牙齿雕刻过程中,系统将虚拟牙齿模型实时叠加到物理蜡块上,为牙齿形态及相关解剖特征提供了三维参考。

图1:标准蜡牙数字化模型的制备。(A)标准蜡牙的三维扫描。(B)标准蜡牙及其周围结构的初始扫描数据。(C)经修整和表面优化后处理的标准牙数字化模型。(D)将标准牙模型与虚拟蜡块基底对齐,以确定其在增强现实(AR)系统中的空间位置。请点击此处查看该图的放大版本。
图2:蜡块托架基座的设计与制作。(A)蜡块托架基座的三维设计模型,以及单独设计的三维物体追踪标记。(B)标准牙齿数字模型与蜡块托架基座之间的空间关系设置。(C)3D打印的蜡块托架基座,以及单独打印的物体追踪标记。(D)将蜡块安装在3D打印的托架基座上,用于后续的增强现实(AR)辅助牙体雕刻。

图3增强现实辅助牙体雕刻的工作流程 (A增强现实导航软件界面,显示导入的标准牙齿数字模型和三维物体追踪标记。B) 在识别到基座上的三维物体标记后,系统将虚拟的标准牙模型实时叠加至物理蜡块的相应位置。C在增强现实(AR)引导下,以虚拟牙体模型作为三维形态参考进行初步牙体预备。D在增强现实(AR)引导下,对局部解剖结构进行精细调整,包括牙尖、窝沟、副沟、边缘嵴以及轴面轮廓。 请点击此处查看此图的放大版本。

图4:AR 配准后二维图像平面叠加偏差的测量。在自动 AR 配准后,捕获了一幅二维叠加图像。P1–P4 表示在实体牙雕基座上选定的四个角点标志,P1′–P4′ 表示在虚拟叠加图像上选定的对应标志。请点击此处查看此图的放大版本。

图5:雕刻牙模与标准牙模的三维偏差分析。 从颊侧视图显示三维偏差图(A舌侧视图 (B),咬合面观(C),近中面观(D)和远端视图(E). 请点击此处以查看该图的放大版本。
| 表面 | 点对数量,n | 均值 ± 标准差 (mm) | 均方根 (mm) | 最小值 (mm) | 最大值 (mm) |
| 颊面 | 40 | 0.711 ± 0.226 | 0.745 | 0.235 | 1.174 |
| 远中面 | 40 | 0.489 ± 0.156 | 0.513 | 0.146 | 0.913 |
| 近中面 | 40 | 0.510 ± 0.207 | 0.549 | 0.194 | 0.856 |
| 舌面 | 40 | 0.540 ± 0.262 | 0.599 | 0.181 | 1.098 |
| 咬合面 | 40 | 1.145 ± 0.494 | 1.245 | 0.27 | 2.401 |
| 总体 | 200 | 0.679 ± 0.381 | 0.778 | 0.146 | 2.401 |
表1:增强现实虚实注册的二维图像平面叠加偏差。
牙体解剖学教育历经发展,已形成结合理论教学与实践训练的经典教学模式。准确掌握牙齿解剖形态是口腔临床实践的重要基础,尤其在修复治疗、牙体牙髓治疗、咬合重建及种植修复等操作中至关重要。因此,研究人员持续探索新的教学方法与技术,以支持解剖知识体系的建立。以往的研究主要通过优化教学方法以及探索不同雕刻材料的适用性来改进牙体解剖学教学。随着数字技术的发展,三维扫描、三维重建、3D打印、虚拟现实和增强现实技术逐渐从临床应用拓展至医学教育领域,为学生理解复杂的三维结构提供了新的工具15。未来,随着人工智能与移动计算技术的进步,这些技术有望以更低的成本和更高的便捷性融入常规教学。
在此系统中,标准牙科模型可重复使用。三维物体追踪标记可在三维建模软件中进行设计,并在直接导入增强现实(AR)软件前确定其空间关系。整个工作流程随后可通过3D打印牙体雕刻基座完成。值得注意的是,使用3D打印的牙科模型作为牙体雕刻训练的实体参考已显示出教育价值,具有成本低、形态直观、可反复观察等优势。然而,AR技术可提供实时视觉导航,能够在实际蜡块雕刻环境中提供实时、可旋转且透明度可调的三维视觉参考13。随着技术的不断发展,AR有望以成本更低、操作更简单便捷的形式应用于教育领域。因此,AR辅助教学具有广阔的发展潜力。
对于增强现实(AR)系统而言,可视化质量、跟踪稳定性以及配准精度是决定虚实融合可靠性和用户体验的关键技术因素16。以往的研究已探索了将AR系统应用于牙体雕刻教学,但大多数采用的是图像跟踪技术5,13。相比之下,本系统采用三维物体跟踪技术。图像标记跟踪具有准备简便、成本低、易于部署的优点,在标记清晰可见且处于合适视角范围内时,能够实现稳定的识别。在牙体雕刻过程中,蜡块通常需要被旋转,以便操作者从多个角度观察目标牙体形态。在此情况下,图像标记可能无法始终完全处于相机视野内,从而导致标记识别中断,限制实时AR指导的连续性。与主要依赖平面图像标记的图像跟踪相比,三维物体跟踪基于物体的几何轮廓和自然视觉特征来估计其空间位姿,从而使系统能够从多个视角将虚拟牙模型与实体蜡块基座进行配准,更贴近实际雕刻过程中操作者需旋转并观察蜡块的操作场景。然而,这种方法通常需要提供跟踪对象的CAD模型或三维扫描模型,并进行3D打印与组装,相较于平面图像标记跟踪,增加了模型准备的复杂性。因此,一种实用的策略是将蜡块固定在一个具有明显几何结构和视觉特征的基座上。基于该跟踪方式,系统通过依赖于集成在基座中的标记,优化了跟踪策略,使用户可在矩形视野范围内观察虚拟牙模型。在系统迭代过程中,增加了配准阈值调节功能,以平衡识别灵敏度与叠加精度:较低的阈值可提高识别成功率,但可能降低叠加稳定性;较高的阈值可提升配准精度,但可能增加识别难度。此外,跟踪界面允许用户实时切换跟踪模型并调节透明度,从而简化操作。
然而,该系统仍存在若干局限性。首先,当前系统依赖于计算机和外部高清摄像头,设备连接与空间布局相对复杂,限制了其在大班教学中的应用。为降低成本并提高可及性,目前正致力于将系统适配至平板电脑和智能手机等移动设备。其次,识别性能受光照条件、摄像头角度、标记物遮挡以及底座旋转速度的影响。当标记物被遮挡或底座旋转过快时,系统可能无法识别,需重新暴露标记物后方可恢复识别。本实验方案的另一局限性在于,模型设计、网格处理和增强现实(AR)配准过程中使用了多个商业或定制软件包。其中部分功能或可由开源或低成本替代方案部分取代。例如,可采用 FreeCAD 或 Blender 进行三维模型的设计与编辑,使用 MeshLab 或 CloudCompare 进行网格处理。此外,Unity 结合 Vuforia Engine 可能为基于三维物体识别的增强现实应用(如基于模型目标的跟踪)提供潜在的开发框架。然而,要复现本方案中所使用的增强现实工作流程,仍需额外的软件开发、参数优化与验证。因此,尽管建模与网格处理步骤或可借助替代软件部分重现,但本方案中实现的增强现实跟踪与配准模块尚无法在未经进一步开发与验证的情况下,直接由现有的开源软件包替代。
最后,二维图像平面叠加偏差分析只能部分反映系统的叠加精度。由于牙体雕刻是一种三维操作过程,当前的数据尚无法充分展示精细牙体雕刻训练所需的三维配准精度。标记物遮挡、相机角度、光照条件以及旋转速度对配准性能的影响也未被单独评估。因此,该系统是否能够为精细牙体雕刻提供足够的引导精度仍不明确。最后,本研究仅完成了单样本的工作流程验证,其在提升学生雕刻质量及学习效果方面的能力,仍有待通过大样本的对照研究加以证实。
综上所述,本研究提出了一种基于三维物体跟踪的增强现实辅助牙体雕刻方案。单样本验证结果表明,该工作流程可实现标准牙模与实体蜡块操作场景之间的增强现实叠加,为牙体雕刻训练提供直观的三维视觉参考。尽管目前的结果尚无法直接证明其教学效果优于传统方法,但该方案展示了进一步研究增强现实技术在牙体雕刻训练中应用的可行性与价值。随着移动设备、三维识别算法及人工智能技术的进步,增强现实辅助的牙体雕刻教学有望以更低的成本、更高的便捷性和更强的可扩展性融入牙科实验教学中。
作者声明无任何利益冲突。
本工作由昆明医科大学颅颌面复杂畸形诊疗团队(2024XKTDTS08)、云南省临床医学中心研究项目(2024YNLCYXZX0227,2024YNLCYXZX0229)、云南省口腔疾病临床研究中心(202505AJ310001)以及云南省高层次人才培养支持计划(YNWR-MY-2020-086)资助。
| 姓名 | 公司 | 目录编号 | 评论 |
|---|---|---|---|
| 3D 扫描仪 | SHINING 3D | AutoScanEPCG-BD032G26 | 用于标准蜡牙的三维扫描。 |
| 摄像头 | Intel RealSense | D415 | 用于获取实时视野,以识别三维物体标记。 |
| 牙科蜡雕刻工具 | 用于雕刻蜡块。 | ||
| E3D CMF | 湖南六维金航数字科技有限公司,中国湖南 | https://www.e3d-med.com/ | 增强现实导航软件。 |
| FDM 3D 打印机 | Bambu Lab | 31B8BP631300564 | 用于制作蜡块托盘基座和三维物体追踪标记。 |
| Geomagic Wrap | 3D Systems Corporation | 版本 2021 | 用于处理标准蜡牙的三维扫描数据。 |
| PLA 线材 | Bambu Lab | 10105 | 用于 FDM 3D 打印。 |
| SOLIDWORKS | Dassault Systèmes | 版本 2025 | 用于蜡块托盘基座和物体追踪标记的三维建模。 |
| 蜡块 | 用于牙齿雕刻练习。 |
申请许可以重复使用本 JoVE 文章的文本或图表
申请许可