[发明专利]基于术前图像的手术视频检索

权利要求书

1.一种系统，包括：

显示器，适于示出手术视频；

数据库，包括手术视频、从医学成像设备获得的人体中器官的图像以及从医学成像设备获得的人体中疾病的图像；以及

控制器，包括耦合到存储器、数据库和显示器的处理器，其中，存储器存储信息，当由处理器执行时，所述信息使系统执行操作，所述操作包括：

用处理器从器官的图像确定第一器官信息，所述第一器官信息包括器官的形状、器官的大小或器官的位置中的至少一个；

用处理器从疾病的图像确定第一疾病信息，所述第一疾病信息包括疾病的形状、疾病的位置、疾病的大小或疾病的阶段中的至少一个；

用处理器计算分别从器官的图像和疾病的图像导出的第一器官信息和第一疾病信息与索引到手术视频的第二疾病信息和第二器官信息之间的相似度分数；

用处理器基于相似度分数选择手术视频中的一个或多个手术视频；以及

在显示器上显示手术视频中的所述一个或多个手术视频。

2.根据权利要求1所述的系统，其中，所述医学成像设备包括计算机断层摄影(CT)扫描机、磁共振成像(MRI)机、超声机、正电子发射断层摄影(PET)机或X射线机中的一个。

3.根据权利要求1所述的系统，其中，所述存储器包括机器学习算法，并且其中，确定第一器官信息包括使用机器学习算法来分割器官的图像。

4.根据权利要求3所述的系统，其中，所述机器学习算法包括监督网络。

5.根据权利要求3所述的系统，其中，经由三元组损失方法来训练所述机器学习算法用于确定相似度分数。

6.根据权利要求3所述的系统，其中，所述机器学习算法包括多个深度学习模型，其中，所述多个深度学习模型中的每个深度学习模型被训练以识别不同类型的疾病。

7.根据权利要求1所述的系统，其中，所述存储器还存储信息，当由处理器执行时，所述信息使系统执行操作，所述操作包括：

在处理器选择手术视频中的一个或多个之前，从处理器的考虑中去除手术视频中的一个或多个不相关视频。

8.根据权利要求7所述的系统，其中，所述一个或多个不相关视频描绘了与器官的图像和疾病的图像中示出的患者相比，不同疾病、不同患者性别、不同患者体型、不同疾病位置或不同患者年龄中的至少一个。

9.根据权利要求1所述的系统，其中，计算相似度分数包括使用元数据，所述元数据包括患者年龄、患者体重指数、疾病类型、患者性别或患者先存条件中的至少一个。

10.根据权利要求1所述的系统，其中，所述数据库中的手术视频中的每一个具有存储在数据库中的至少一个关联的术前图像，并且其中，第二疾病信息和第二器官信息从所述至少一个关联的术前图像导出，并且其中，至少一个术前图像包括计算机断层摄影(CT)扫描、磁共振成像(MRI)扫描、超声图像、正电子发射断层摄影扫描或X射线中的至少一个。

11.一种用于检索手术视频的方法，包括：

用耦合到存储器和数据库的处理器，接收人体中器官的一个或多个图像以及疾病的一个或多个图像，其中，用医学成像设备捕获器官的一个或多个图像以及疾病的一个或多个图像，并且其中，所述数据库包括手术视频；

用处理器从器官的一个或多个图像确定第一器官信息，所述第一器官信息包括器官的形状、器官的大小或器官的位置中的至少一个；

用处理器从疾病的一个或多个图像确定第一疾病信息，所述第一疾病信息包括疾病的形状、疾病的位置、疾病的大小或疾病的阶段中的至少一个；

用处理器计算分别从器官的图像和疾病的图像导出的第一器官信息和第一疾病信息与索引到手术视频的第二疾病信息和第二器官信息之间的相似度分数；

用处理器基于相似度分数从数据库选择手术视频中的一个或多个手术视频；以及

在显示器上显示手术视频中的所述一个或多个手术视频。