基于增强现实的切除肿瘤标本可视化

将切除的肿瘤标本放置在连接至计算机的3D扫描台上，扫描其前表面和后表面，以生成3D图像。

当此三维图像与实物标本匹配后，即可在增强现实（AR）软件中将其打开。

佩戴头戴式显示器（HMD），并通过无线方式连接至增强现实（AR）软件。

这使得通过头戴式显示器设备将标本的三维图像以虚拟全息图的形式呈现出来。

对全息图进行对齐和固定，以确保其在增强现实环境中的空间准确性，然后应用纹理以增强真实感。

使用语音指令在虚拟环境中打开全息图像，并通过手势重新定位、旋转和调整其大小。

或者，使用语音命令进行免提调节。

这种基于增强现实的可视化技术可生成肿瘤全息图像，有助于在手术部位精确定位切缘。

首先，轻轻拍干已冲洗过的切除肿瘤标本。拍摄标本的前面和后面表面的二维照片。

将标本放置在3D扫描仪的塑料覆盖转盘上。 对标本的前表面和后表面进行扫描，以获得3D图像。

使用三点数据交叉配准来对齐两组扫描数据。当扫描结果与3D ex vivo 标本相似时，单击保存您的扫描，将扫描结果保存为.obj 和 .jpeg 文件。

接下来启动增强现实软件，打开Augmented Reality VISE程序包。将桌面上的.obj和.jpeg文件拖放到Project Assets框中。   

戴上头戴式显示器（HMD），抬起非优势手的手腕，以在HMD环境中打开菜单。当出现方形图标时，将手指指向该图标并轻敲。

菜单出现后，依次单击文件，然后选择显示所有应用，并打开全息远程处理应用程序。在顶部工具栏中，选择混合现实，然后按下远程处理和播放模式的全息远程处理。

输入头戴式显示器（HMD）的IP地址，然后确保HMD与设备连接至同一WiFi网络后，点击播放。 此时头戴设备应显示正在接收…

将 3D 对象模型拖入左侧的层级栏中，打开下拉菜单，然后将default拖入替换对象下的调整轴心弹出窗口中。

现在点击 应用选定对象 然后打开 医学对象 下拉菜单中的 层级 菜单并选择 锚点 选择 将 Medical_Object 的轴心点移至此处 在 调整支点 弹窗.

将纹理文件拖入(Texture 2D)框中，在Adjust Pivot弹窗内选择应用所选纹理文件，然后点击播放按钮。

现在使用语音命令Open初始化全息图像，使用Reposition将物体移至视野中央（如果物体不可见），使用Lock Size锁定物体当前大小，使用Unlock Size调整物体尺寸，以及使用Back to Scale将物体恢复至解剖学实际大小。

用食指和拇指捏合以调整物体的大小、移动和旋转。 使用语音命令免手操作控制物体：说Right或Left以旋转，说Bigger或Smaller以调整大小，说Increase或Decrease transparency以调节透明度。

为重新对齐全息图像，请将拇指和食指并拢以抓取物体，然后将其与切除床对齐，并在所需的虚拟位置释放物体。 最后，使用语音命令Lock或Unlock将全息图像固定在相应位置。