[发明专利]内窥镜图像检测方法、装置、存储介质及电子设备

权利要求书

1.一种内窥镜图像检测方法，其特征在于，所述方法包括：

获取待检测的内窥镜图像；

通过内窥镜图像检测模型对所述内窥镜图像执行多个目标任务，得到所述内窥镜图像对应的多个任务检测结果，所述内窥镜图像检测模型用于通过如下方式执行所述多个目标任务：

通过任务特征网络从所述内窥镜图像中提取所述目标任务对应的图像特征，通过交互特征网络将提取到的每一所述图像特征和预训练的质控图像特征进行融合计算，得到每一所述目标任务对应的融合特征，针对每一所述目标任务，通过目标任务网络根据所述目标任务对应的所述融合特征，确定所述目标任务对应的任务检测结果；

所述内窥镜图像检测模型的训练过程包括：

通过所述任务特征网络从样本内窥镜图像中提取所述目标任务对应的样本图像特征，其中所述样本内窥镜图像标注有每一所述目标任务对应的实际检测结果；

通过所述交互特征网络将提取到的每一所述样本图像特征与本次训练过程中的所述质控图像特征进行融合计算，得到每一所述目标任务对应的样本融合特征，并针对每一所述目标任务，通过所述目标任务网络根据所述目标任务对应的所述样本融合特征，确定所述目标任务对应的预估检测结果；

根据每一所述目标任务对应的所述预估检测结果与所述实际检测结果，计算每一所述目标任务对应的损失函数，并根据每一所述目标任务对应的所述损失函数的计算结果，调整所述内窥镜图像检测模型的参数，所述参数包括用于表征所述质控图像特征的向量参数。

2.根据权利要求1所述的方法，其特征在于，所述通过任务特征网络从所述内窥镜图像中提取所述目标任务对应的图像特征，包括：

将所述内窥镜图像划分为多个内窥镜子图像；

通过线性特征提取器对每一所述内窥镜子图像提取二维图像特征，并将提取到的每一所述二维图像特征转换为一维特征向量；

针对每一所述内窥镜子图像对应的一维特征向量，通过编码器进行特征处理，得到每一所述内窥镜子图像对应的任务特征子向量；

将同一所述任务特征网络输出的所述任务特征子向量相加，得到所述目标任务对应的图像特征向量。

3.根据权利要求1所述的方法，其特征在于，所述根据每一所述目标任务对应的所述损失函数的计算结果，调整所述内窥镜图像检测模型的参数，包括：

确定每一所述目标任务对应的自适应权重，其中每一所述目标任务的自适应权重与所述目标任务对应的预估检测结果的指标数值负相关，所述预估检测结果的指标数值用于表征所述预估检测结果的准确性；

根据每一所述目标任务对应的所述损失函数的计算结果和每一所述目标任务对应的所述自适应权重，计算所述内窥镜图像检测模型的总损失函数，并根据所述总损失函数的计算结果，调整所述内窥镜图像检测模型的参数。

4.根据权利要求3所述的方法，其特征在于，所述内窥镜图像检测模型的训练过程为迭代训练的过程，所述确定每一所述目标任务对应的自适应权重，包括：

针对每一所述目标任务，确定上次迭代过程中所述目标任务对应的预估检测结果的历史指标数值和本次迭代过程中所述目标任务对应的预估检测结果的当前指标数值；

根据预设衰减因子、所述历史指标数值和所述当前指标数值，确定每一所述目标任务对应的预估检测结果的目标指标数值，并根据所述目标指标数值和负相关对应关系，确定每一所述目标任务的自适应权重，其中所述负相关对应关系用于表征所述自适应权重与所述目标指标数值负相关。

5.根据权利要求3所述的方法，其特征在于，所述确定每一所述目标任务对应的自适应权重，包括：

在所述内窥镜图像检测模型的训练过程中，按照如下公式确定每一所述目标任务对应的自适应权重：

其中，表征第i个目标任务对应的自适应权重，表征第i个目标任务对应的预估检测结果的指标数值，表征第i个目标任务的预设权重调节参数。

6.根据权利要求1或2所述的方法，其特征在于，所述多个目标任务包括肠道清洁度评估任务、寻腔进镜任务、息肉检测任务、回盲识别任务和内窥镜图像质量监控任务中的至少两者。