[发明专利]手术流程识别方法、装置、系统及计算机可读存储介质

权利要求书

1.一种手术流程识别方法，其特征在于，所述方法包括：

获取手术视频中的第一图像；

将所述第一图像输入第一空间信息提取子模型，输出所述第一图像对应的第一空间信息，所述第一空间信息提取子模型为第一深度学习模型包括的一个子模型，所述第一空间信息用于表征所述第一图像的语义特征；

将所述第一图像对应的第一空间信息和历史阶段信息输入第一分类子模型，输出所述第一图像所属的目标手术主阶段，所述第一分类子模型为所述第一深度学习模型包括的一个子模型，所述第一深度学习模型包括所述第一空间信息提取子模型与所述第一分类子模型串联而成的一个分支；或者，将所述第一图像对应的第一空间信息输入第一时序信息提取子模型，通过所述第一时序信息提取子模型对所述第一图像对应的第一空间信息和第一历史图像对应的空间信息进行处理，输出所述第一图像对应的第一时序信息，将所述第一图像对应的第一时序信息和历史阶段信息输入所述第一分类子模型，输出所述第一图像所属的目标手术主阶段，所述第一时序信息提取子模型为所述第一深度学习模型包括的一个子模型，所述第一深度学习模型包括所述第一空间信息提取子模型、所述第一时序信息提取子模型与所述第一分类子模型串联而成的一个分支；

其中，所述第一历史图像包括所述手术视频中在所述第一图像之前的图像，所述第一历史图像对应的空间信息基于所述第一空间信息提取子模型得到，所述第一时序信息用于表征从所述第一历史图像到所述第一图像的空间信息变化情况，所述目标手术主阶段为手术过程涉及的多个主阶段中的一个，所述历史阶段信息用于表征在采集所述第一图像之前经历的手术阶段；

在确定所述目标手术主阶段之后，根据所述第一图像对应的器械存在信息，确定所述第一图像所属的手术子阶段，所述器械存在信息用于表征所述第一图像中存在的器械，所述手术子阶段为所述目标手术主阶段包括的子阶段中的一个。

2.根据权利要求1所述的方法，其特征在于，所述多个主阶段中至少一个主阶段包括子阶段，任一子阶段具有对应的器械；

所述多个主阶段包括观察搜索阶段、术野暴露分离阶段、手术主体阶段、标本取出阶段、冲洗与引流阶段、关闭套管口阶段；

其中，所述手术主体阶段包括切除子阶段、结扎子阶段、吻合与钉合子阶段、缝合子阶段；

所述切除子阶段对应的器械包括电刀类工具，所述结扎子阶段对应的器械包括血管夹和纱条类工具，所述吻合与钉合子阶段对应的器械包括疝钉类工具，所述缝合子阶段对应的器械包括缝合针和缝合线。

3.根据权利要求1所述的方法，其特征在于，将所述历史阶段信息输入所述第一分类子模型之前，还包括：

将所述第一图像对应的第一空间信息输入第二分类子模型，通过所述第二分类子模型包括的全连接层输出所述第一图像对应的历史阶段信息，所述第二分类子模型为所述第一深度学习模型的一个子模型，所述第一深度学习模型还包括所述第一空间信息提取子模型与所述第二分类子模型串联而成的一个分支。