ARTICLE SIGNAL

增强现实(AR)重塑下颌骨重建手术:无标记虚拟手术导板的表面配准技术

最新研究提出一种基于HoloLens 2的无标记增强现实(AR)替代方案,通过表面几何特征将虚拟手术导板与下颌骨配准,以取代传统3D打印物理导板,降低成本并提高下颌骨重建手术的灵活性。

type
status
date
slug
summary
tags
category
icon
password
网址
下颌骨重建手术通常在节段性切除术后进行,以恢复患者的面部连续性和口腔功能。在常规的临床工作流中,外科医生主要依靠3D打印的患者专属手术切割导板,将基于计算机断层扫描(CT)的手术计划带入真实手术室,并利用其三维信息进行精确切割。然而,物理导板存在显著弊端:它们增加了高昂的制造成本和等待时间、在制造完成后无法根据术中突发情况灵活调整,且如果在手术中失去无菌状态,甚至可能会被迫中断手术进程。为解决这一痛点,在 arXiv (cs.CV) 上公布的一项最新研究,提出了一种基于增强现实(AR)的无标记替代方案。该方案利用虚拟现实技术,直接将虚拟切割导板配准到患者暴露的下颌骨上。

事实梳理:基于表面几何的无标记配准工作流

在这项由研究人员 Yue Yang 和 Jie Ying Wu 提出的新方法中,系统通过扩展表面配准技术以适应经口手术环境,并特别利用“牙齿”这一最明显、最易辨认的可见表面特征作为核心参考。整个系统的运行机制如下:
首先完成相机校准,随后使用微软 HoloLens 2 的飞行时间(ToF)深度摄像头捕获术中下颌骨的局部点云数据。在操作层面,用户(外科医生)只需提供一个粗略的基于头部的对齐指令,系统即可自动裁剪出感兴趣的区域(ROI)。
接下来,系统进入自动化配准的核心阶段。第一阶段是一个“以牙齿为权重的全局阶段”,该阶段负责计算特征对应关系,并求解截断最小二乘刚性对齐。第二阶段则采用非对称的点到平面迭代最近点(ICP)算法,将完整的术前CT下颌骨模型与局部的深度点云目标进行精细融合与配准。根据导板到下颌骨的变换矩阵,系统能够在 HoloLens 的真实世界坐标系中精准放置虚拟导板,并通过姿态更新和插值算法实时跟随目标的移动。

影响或用法:告别物理导板与基准标记

这项技术对传统医疗流程的颠覆是显而易见的。为了验证系统的有效性,研究团队设计了一个盲法体模(Phantom)协议,设置了30个目标配准误差(TRE)测试点。实验结果显示,在完全暴露、部分暴露(中等)和仅牙齿暴露的情况下,系统的中位 TRE 分别为 4.05 毫米、6.10 毫米和 7.10 毫米,而中位的运动到显示的系统延迟仅为 0.805 秒。
这些测试数据强有力地支持了使用增强现实技术取代传统物理3D打印导板的可行性。对于外科医生而言,这意味着可以完全抛弃繁杂的安装基准标记物(Fiducials)的步骤,也不再需要手动选择和比对解剖标志点。虚拟导板可以在术中随时根据实际情况进行数字调整,极大地提高了手术的灵活度和效率,同时消除了物理导板带来的前置时间和消毒风险。

风险限制:精度与延迟的临床博弈

尽管概念验证结果令人鼓舞,但将基于AR的虚拟切割导板直接应用于真实的手术室环境仍面临一些客观存在的风险与限制。
首先是配准精度问题。在“仅暴露牙齿”的最极端情况下,中位误差达到了 7.10 毫米。对于某些对缝合和骨骼对接精度要求极高的下颌骨重建手术而言,几毫米的误差可能会影响最终的骨骼愈合与面部对称性。因此,底层ICP和点云匹配算法仍需进一步优化,以将极端情况下的误差控制在临床可接受的微小范围内。
其次,0.805 秒的系统延迟虽然在静态下颌骨操作中尚可接受,但如果患者头部或手术台发生突然移动,这种接近一秒的延迟可能导致AR投影的虚拟导板与真实骨骼发生短暂的视觉错位,从而干扰外科医生的下刀判断。此外,目前的数据完全基于体模(Phantom)测试,真实的临床环境往往伴随血液覆盖、软组织遮挡、强烈的无影灯光照以及雾气等因素,这些都将对 HoloLens 2 ToF摄像头的实时点云捕捉能力提出严苛挑战。

结论

该研究成功展示了基于增强现实的表面配准技术在下颌骨重建手术中的巨大潜力。通过结合 HoloLens 2 的深度传感能力与创新的无标记点云配准算法,它为经口的切割引导提供了一条可测试且高度数字化的新路径。虽然距离全面进入活体临床应用仍需在微观精度和复杂环境适应性上进行打磨,但其“无标记”、“零物理耗材”的理念无疑代表了未来计算机辅助外科手术的重要发展方向。关注 aigc.bar,我们将为您持续追踪医疗AI与空间计算的深度融合进展。
Loading...

没有找到文章