[发明专利]一种图像推理的方法及装置

权利要求书

1.一种图像推理的方法，其特征在于，包括：

获取待推理图像；

将所述待推理图像进行缩放，生成至少一个缩放图像；

将所述至少一个缩放图像输入至图像推理模型中的特征提取模型，得到每个所述缩放图像对应的图像特征；将每个所述缩放图像对应的图像特征分别经由自注意力层进行处理，得到每个所述缩放图像对应的自注意力图像特征；将每个所述缩放图像对应的自注意力图像特征以及参考特征输入至图像推理模型中的特征推理模型，获得每个缩放图像对应的输出特征；

将所述至少一个缩放图像对应的输出特征进行融合，得到所述待推理图像的融合特征，并基于所述融合特征生成所述待推理图像的表达式。

2.如权利要求1所述的方法，其特征在于，将每个所述缩放图像对应的自注意力图像特征以及参考特征输入至所述特征推理模型，获得每个缩放图像对应的输出特征，包括：

将每个所述缩放图像对应的自注意力图像特征以及初始参考特征输入至特征推理模型，获得每个缩放图像对应的第一次的输出特征；或

将每个所述缩放图像对应的自注意力图像特征以及前一次生成的融合特征输入所述特征推理模型，获得每个缩放图像对应的当前次的输出特征。

3.如权利要求1所述的方法，其特征在于，所述特征推理模型为时序模型。

4.如权利要求1所述的方法，其特征在于，将所述至少一个缩放图像对应的输出特征进行融合，得到所述待推理图像的融合特征，包括：

将所述至少一个缩放图像对应的当前次的输出特征输入至融合单元，以使所述融合单元根据融合策略生成所述待推理图像对应的当前次的融合特征。

5.如权利要求1所述的方法，其特征在于，基于所述融合特征生成所述待推理图像的表达式，包括：

基于第一个到最后一个所述融合特征生成所述待推理图像的表达式。

6.一种图像推理的装置，其特征在于，包括：

图像获取模块，被配置为获取待推理图像；

图像缩放模块，被配置为将所述待推理图像进行缩放，生成至少一个缩放图像；

图像推理模块，被配置为将所述至少一个缩放图像输入至图像推理模型中的特征提取模型，得到每个所述缩放图像对应的图像特征；将每个所述缩放图像对应的图像特征分别经由自注意力层进行处理，得到每个所述缩放图像对应的自注意力图像特征；将每个所述缩放图像对应的自注意力图像特征以及参考特征输入至图像推理模型中的特征推理模型，获得每个缩放图像对应的输出特征；

特征融合模块，被配置为将所述至少一个缩放图像对应的输出特征进行融合，得到所述待推理图像的融合特征，并基于所述融合特征生成所述待推理图像的表达式。

7.一种计算设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机指令，其特征在于，所述处理器执行所述指令时实现权利要求1-5任意一项所述方法的步骤。

8.一种计算机可读存储介质，其存储有计算机指令，其特征在于，该指令被处理器执行时实现权利要求1-5任意一项所述方法的步骤。