[发明专利]利用具有图形用户界面的手术工具器械的系统和方法

权利要求书

1.一种系统，包括：

至少一个处理器；以及

存储器介质，所述存储器介质联接至所述至少一个处理器、并且包括指令，所述指令在被所述至少一个处理器执行时使所述系统：

经由显示器显示图形用户界面；

接收第一用户输入，所述第一用户输入指示将使用手术工具器械作为与所述图形用户界面相关联的指针；

接收来自至少一个图像传感器的第一多个图像；并且

根据所述第一多个图像来确定所述手术工具器械的数字模型，所述数字模型包括所述手术工具器械的模式。

2.如权利要求1所述的系统，其中，为了根据所述第一多个图像来确定所述手术工具器械的数字模型，所述指令进一步使所述系统至少基于所述第一多个图像来训练所述数字模型。

3.如权利要求2所述的系统，其中，为了至少基于所述第一多个图像来训练所述数字模型，所述指令进一步使所述系统在所述第一多个图像中的每个图像的一部分中确定与所述手术工具器械相关联的数据。

4.如权利要求3所述的系统，其中，为了经由所述显示器来显示所述图形用户界面，所述指令进一步使所述系统经由所述图形用户界面来指示与所述第一多个图像中的每个图像的每个部分相关联的区域。

5.如权利要求1所述的系统，其中，所述指令进一步使所述系统：

经由所述至少一个图像传感器来接收第二多个图像；并且

根据所述第二多个图像和所述数字模型来确定所述手术工具器械的移动模式，所述移动模式可用于选择所述图形用户界面的图标。

6.至少一种非暂态计算机可读存储介质，所述存储介质包括指令，所述指令在被系统的处理器执行时使所述系统：

经由显示器显示图形用户界面；

接收第一用户输入，所述第一用户输入指示将使用手术工具器械作为与所述图形用户界面相关联的指针；

接收来自至少一个图像传感器的第一多个图像；并且

根据所述第一多个图像来确定所述手术工具器械的数字模型，所述数字模型包括所述手术工具器械的模式。

7.如权利要求6所述的至少一种非暂态计算机可读存储介质，其中，为了根据所述第一多个图像来确定所述手术工具器械的数字模型，所述指令进一步使所述系统至少基于所述第一多个图像来训练所述数字模型。

8.如权利要求7所述的至少一种非暂态计算机可读存储介质，其中，为了至少基于所述第一多个图像来训练所述数字模型，所述指令进一步使所述系统在所述第一多个图像中的每个图像的一部分中确定与所述手术工具器械相关联的数据。

9.如权利要求8所述的至少一种非暂态计算机可读存储介质，其中，为了经由所述显示器来显示所述图形用户界面，所述指令进一步使所述系统经由所述图形用户界面来指示与所述第一多个图像中的每个图像的每个部分相关联的区域。

10.如权利要求6所述的至少一种非暂态计算机可读存储介质，其中，所述指令进一步使所述系统：

经由所述至少一个图像传感器来接收第二多个图像；并且

根据所述第二多个图像和所述数字模型来确定所述手术工具器械的移动模式，所述移动模式可用于选择所述图形用户界面的图标。

11.一种方法，包括：

经由显示器来显示图形用户界面；

接收第一用户输入，所述第一用户输入指示将使用手术工具器械作为与所述图形用户界面相关联的指针；

接收来自至少一个图像传感器的第一多个图像；并且

根据所述第一多个图像来确定所述手术工具器械的数字模型，所述数字模型包括所述手术工具器械的模式。

12.如权利要求11所述的方法，其中，根据所述第一多个图像来确定所述手术工具器械的数字模型包括：至少基于所述第一多个图像来训练所述数字模型。