[发明专利]用于分析图像流的系统和方法

说明书

根据本披露内容的各方面，一种系统包括至少一个处理器和至少一个存储有指令的存储器，这些指令当由该(多个)处理器执行时使该系统进行以下操作：获取由胶囊内窥镜装置捕捉的胃肠道(GIT)的一部分的图像；对于这些图像中的每张图像，通过深度学习神经网络提供将该图像分类为该GIT的连续区段中的每一个的得分；将这些图像中得分满足置信度标准的子集的每张图像分类为该GIT的连续区段之一；通过处理与该子集中的图像的分类相对应的随时间变化的信号，细化该子集中的图像的分类；以及基于该子集中的图像的细化分类，在该子集中的图像当中估计该GIT的两个相邻区段之间的转变(1010)。

相关申请的交叉引用

本申请要求于2020年5月1日提交的美国临时申请号63/018,890的权益和优先权，该美国临时申请通过引用以其全文结合于此。

技术领域

本披露内容涉及图像分析方法和系统，并且更具体地，涉及用于基于景色变化来分析图像流的系统和方法。

背景技术

胶囊内窥镜(CE)允许通过内窥镜检查整个胃肠道(GIT)。有一些胶囊内窥镜系统和方法旨在检查GIT的特定部分，比如小肠(SB)或结肠。CE是一种无创手术，不需要患者入院，并且患者可以在胶囊在其体内的同时继续进行大多数日常活动。

在典型的CE手术中，患者是由医师转诊去做手术的。然后患者到达医疗机构(例如诊所或医院)进行手术。在医疗机构的健康专家(例如，护士或医师)的监督下，患者吞下大约复合维生素大小的胶囊，并为患者提供可穿戴装置，例如，放置在袋子和带子中以放置在患者的肩膀上的传感器带和记录器。可穿戴装置通常包括存储装置。患者可以得到指导和/或指示，然后出院开始他的日常活动。

胶囊在自然通过GIT时捕捉图像。然后将图像和附加数据(例如，元数据)传输到患者佩戴的记录器。胶囊通常是一次性的并且随着排便自然排出。手术数据(例如，捕捉的图像或其一部分以及附加元数据)存储在可穿戴装置的存储装置上。

可穿戴装置通常与其上存储的手术数据一起由患者返还给医疗机构。然后将手术数据下载到通常位于医疗机构的计算装置，该计算装置上存储有引擎软件。然后由引擎将接收到的手术数据处理为汇编研究报告(或“研究报告”)。通常，一份研究报告包括数千张图像(大约6,000张)。通常，要处理的图像数量为数万张，平均约为90,000张。

读者(可能是手术监督医师、专门的医师或转诊医师)可以经由读者应用程序获取研究报告。然后，读者审阅研究报告，评估手术，并经由读者应用程序提供他的输入。由于读者需要审阅数千张图像，因此一份研究报告的阅读时间可能通常平均需要半小时到一个小时，阅读任务可能会令人厌烦。然后，读者应用程序会基于汇编研究报告和读者的输入生成报告。平均而言，生成一份报告需要一个小时。报告可以包括例如感兴趣的图像，例如，由读者选择的被识别为包括病理的图像；基于手术数据(即，研究报告)和/或读者提供的随访和/或治疗建议对患者的医疗状况进行的评估或诊断。然后可以将报告转发给转诊医师。转诊医师可以基于报告决定所需的随访或治疗。

发明内容

本披露内容涉及用于分析胃肠道(GIT)的图像流的系统和方法。更具体地，本披露内容涉及确定图像流中对应于特定GIT区段之间的转变的点，比如胃与小肠之间的转变，或小肠与结肠之间的转变。尽管关于由胶囊内窥镜装置在体内捕捉的图像示出和描述了示例，但是所披露的技术可以应用于由其他装置或机构捕捉的图像，包括例如由MRI捕捉的解剖图像。