[发明专利]基于医学影像的术中辅助显示方法、装置及存储介质

说明书

本发明提供一种基于医学影像的术中辅助显示方法及装置、设备及存储介质，所述方法包括：根据获取到的目标CT影像信息，生成三维重建模型；根据所述三维重建模型，生成不同人体组织对应的虚拟组织；在所述三维重建模型中生成用于进行模拟手术的虚拟手术器械；接收用户对所述虚拟手术器械的操作指令，执行对所三维重建模型中的目标虚拟组织的模拟手术，并记录所述模拟手术过程信息；在进行实际手术过程中，显示所述模拟手术过程信息，以供用户进行手术指导。以用于辅助手术，提高手术效率。

技术领域

本发明涉及CDN技术领域，尤涉及一种基于医学影像的术中辅助显示方法、装置、设备及存储介质。

背景技术

以色列RealView在完成了世界上第一个对介入心脏病学中的实时3D全息成像进行评估的人体临床试验后，2019年推出第一款医疗全息产品，旨在支持使用3D成像的介入临床程序的所有阶段。全息显示器已经过人体工程学设计，用于所有临床环境，如介入室、混合手术室和诊断诊所。

美国Zebra Imaging公司设计了ZScape桌面式全息显示系统作为医学学生在缺少尸体时解剖尸体的替代方法。借助该系统，学生可以导航整个身体，研究呼吸或心血管系统等不同身体部位。

发明人发现，上述产品在对手术进行辅助显示时，会存在如下问题：

头戴显示器的全息显示方案无法在术中达到无菌要求，且通常是用于手术前，无法实际应用于手术中；而裸眼全息仅能提供单个部位或者器官的重建显示效果，但不便于对于术中可能涉及的复杂的多器官之间的关系机进行清晰地了解，无法确定手术路径的规划。由此，亟需一种基于医学影像的术中辅助显示方法，以用于辅助手术，提高手术效率。

发明内容

有鉴于此，本发明提供了一种基于医学影像的术中辅助显示方法、装置、设备及存储介质。

第一方面，本发明实施例提供一种基于医学影像的术中辅助显示方法，所述方法包括如下步骤：

根据获取到的目标CT影像信息，生成三维重建模型；

根据所述三维重建模型，生成不同人体组织对应的虚拟组织；

在所述三维重建模型中生成用于进行模拟手术的虚拟手术器械；

接收用户对所述虚拟手术器械的操作指令，执行对所三维重建模型中的目标虚拟组织的模拟手术，并记录所述模拟手术过程信息；

在进行实际手术过程中，显示所述模拟手术过程信息，以供用户进行手术指导。

在一个实施方式中，所述基于医学影像的术中辅助显示方法还包括：

识别所述用户的手部位置，在所述三维重建模型中生成相匹配的模拟手；

其中，所述接收用户对所述虚拟手术器械的操作指令，执行对所三维重建模型中的目标虚拟组织的模拟手术，并记录所述模拟手术过程信息，包括：

实时采集所述用户手持手术器械进行模拟手术的过程图像，在所述三维重建模型中生成与之相一致的模拟手术过程信息。

在一个实施方式中，所述基于医学影像的术中辅助显示方法还包括：

接收用户的语音命令，其中，所述语音命令用于对所述模拟手术过程的模拟手术位置进行纠偏。

在一个实施方式中，所述目标CT影像信息中携带有贴片标记，其中，所述贴片标记为在进行人体CT扫描时贴附在人体相应位置处的光学标记贴片在影像上的点位；所述方法还包括：

在进行实际手术过程中，利用摄像机采集人体图像；

将所述摄像机捕捉到的贴片位置与所述目标CT影像信息中的贴片标记进行位置配准；