[发明专利]用于基于患者的医学图像生成报告的系统、方法和介质

说明书

本公开涉及用于基于患者的医学图像生成报告的系统、方法和介质。示例性系统包括配置为接收由图像采集装置获取的医学图像的通信接口。所述系统还包括至少一个处理器。所述至少一个处理器配置为接收用户对至少一个视图中的至少一幅医学图像的选择。所述至少一个处理器还配置为基于包括串联连接的卷积神经网络和递归神经网络的学习网络自动生成描述所选择的医学图像的关键词。所述至少一个处理器还配置为接收在所生成的关键词中的关键词选择并基于所述关键词选择生成报告。所述系统另外包括被配置为显示所选择的医学图像和所述报告的显示器。

相关申请的交叉引用

本申请基于并要求2017年11月6日提交的美国临时申请No.62/582,092的优先权的利益，并且其是2018年10月8日提交的美国申请No.16/154,681的部分继续申请，这两个申请均以引用的方式整体并入本文。

技术领域

本公开涉及诊断报告系统，更具体地，涉及诊断报告系统，该诊断报告系统基于用户对医学图像的关注的视图和/或区域的选择来生成医学诊断报告，生成描述医学图像的关键词，并根据用户对关键词的选择来创建诊断报告。

背景技术

放射科医生解读医学图像，以观察异常并对疾病进行诊断。撰写诊断报告也是放射科医师/临床医生日常工作的一部分。例如，医学诊断报告描述和总结了医学图像(例如X射线图像、计算机断层扫描(CT)图像、磁共振成像(MRI)图像、超声图像等)中的重要发现。患者的医学诊断报告通常被认为是患者的医学概况的非常重要的组成部分。然而，目前可用于生成医学诊断报告的过程是低效的。

具体地，当前可用于生成医学诊断报告的过程是耗时的，这主要是由于两个原因。首先，当前可用的过程需要在能够记录任何发现之前仔细地人工肉眼检查患者的一个或数幅医学图像。与稀疏分布的病变相比，医学图像可能非常大，因此搜索可疑区域可能花费大量时间。其次，发现和初步结论可能需要被手动构建成报告，该报告只能由经授权的医学专业人员(如放射科医生或临床医生)书写或录音(口述)。

本公开的实施例通过提供能够自动分析医学图像、检测可疑区域并生成诊断报告的诊断报告系统来解决上述问题。

发明内容

本公开的实施例提供一种用于基于患者的医学图像生成报告的系统。所述系统包括配置为接收由图像采集装置获取的医学图像的通信接口。所述系统还包括至少一个处理器。所述至少一个处理器配置为接收用户对至少一个视图中的至少一幅医学图像的选择。所述至少一个处理器还配置为基于包括串联连接的卷积神经网络和递归神经网络的学习网络自动生成描述所选择的医学图像的关键词。所述至少一个处理器还配置为接收在所生成的关键词中的关键词选择并基于所述关键词选择生成报告。所述系统另外包括被配置为显示所选择的医学图像和所述报告的显示器。

本公开的实施例还提供一种用于基于患者的医学图像生成报告的方法。所述方法包括由通信接口接收由图像采集装置获取的医学图像。所述方法还包括接收用户对至少一个视图中的至少一幅医学图像的选择。所述方法还包括由至少一个处理器基于学习网络自动生成描述所选择的医学图像的关键词，所述学习网络包括串联连接的卷积神经网络和递归神经网络。所述方法还包括接收在所生成的关键词中的关键词选择，由所述至少一个处理器基于所述关键词选择生成所述报告，并且在显示器上显示所选择的医学图像和所述报告。

本公开的实施例还提供一种非暂时性计算机可读介质，其具有存储在其上的指令，所述指令在由至少一个处理器运行时，使得所述至少一个处理器执行用于基于患者的医学图像生成报告的方法。所述方法包括接收由图像采集装置获取的医学图像。所述方法还包括接收用户对至少一个视图中的至少一幅医学图像的选择。所述方法还包括基于学习网络自动生成描述所选择的医学图像的关键词，所述学习网络包括串联连接的卷积神经网络和递归神经网络。所述方法还包括接收对所生成的关键词中的关键词选择，基于所述关键词选择生成所述报告，并且在显示器上显示所选择的医学图像和所述报告。