[发明专利]图像处理方法和装置

说明书

本申请实施例提供了一种图像处理方法和装置，在对图像进行渲染时，获取待处理视频中各帧图像的纹理特征点信息，和各帧图像中的标志物信息；并根据各帧图像的纹理特征点信息，和各帧图像中的标志物信息，确定待处理视频中相机的位姿和各标志物中目标标志物的位姿；根据相机的位姿和目标标志物的位姿，确定预设虚拟图像在各帧图像中的目标位置；基于目标位置，对各帧图像进行渲染，得到包含预设虚拟图像的各帧目标图像。这样通过图像中的纹理特征点信息和标志物信息共同确定相机的位姿，能够避免因纹理特征信息较少而使得确定出的相机位姿的准确度较低，提高了相机位姿的准确度，从而提高了对原始图像的渲染结果的准确度。

技术领域

本申请涉及增强现实技术领域，尤其涉及一种图像处理方法和装置。

背景技术

增强现实(Augmented Reality，简称AR)技术是一种将虚拟信息与真实世界巧妙融合的技术，增强现实技术在生活娱乐，智能家居，工业制造等领域下的应用越来越广泛，特别是增强现实中的三维注册技术，其通过相机对现实场景的拍摄采集场景信息，让设备得到现实场景中关键物体的位置并对相机位置的变化进行跟踪。

现有技术中，通常使用即时定位与地图构建(simultaneous localization andmapping，简称SLAM)的三维注册方法，该方案通过相机等设备采集现实环境的信息，并提取现实环境信息中的纹理特征信息；根据特征提取算法提取纹理特征信息中的特征点信息，再基于特征点信息确定相机姿态，从而根据相机姿态对原始图像进行渲染，得到虚实融合的图像。

但是，在基于特征点信息确定相机姿态时，会存在因现实环境中的纹理特征信息较少而使得确定出的相机位姿的准确度较低，从而导致对原始图像的渲染结果的准确度较低。

发明内容

本申请实施例提供了一种图像处理方法和装置，提高了相机位姿的准确度，从而提高了对原始图像的渲染结果的准确度。

第一方面，本申请实施例提供了一种图像处理方法，所述图像处理方法包括：

获取待处理视频中各帧图像的纹理特征点信息，和所述各帧图像中的标志物信息。

根据所述各帧图像的纹理特征点信息，和所述各帧图像中的标志物信息，确定所述待处理视频中相机的位姿和所述各标志物中目标标志物的位姿。

根据所述相机的位姿和所述目标标志物的位姿，确定预设虚拟图像在所述各帧图像中的目标位置。

基于所述目标位置，对所述各帧图像进行渲染，得到包含所述预设虚拟图像的各帧目标图像。

在一种可能的实现方式中，所述根据所述相机的位姿和所述目标标志物的位姿，确定预设虚拟图像在所述各帧图像中的目标位置，包括：

对所述相机的位姿和所述目标标志物的位姿进行解析，建立所述相机的位姿和所述目标标志物的位姿之间的转换关系。

根据所述转换关系以及所述预设虚拟图像的参数，确定所述预设虚拟图像在所述各帧图像中的目标位置。

在一种可能的实现方式中，标志物信息包括所述标志物的特征点，所述根据所述各帧图像的纹理特征点信息，和所述各帧图像中的标志物信息，确定所述待处理视频中相机的位姿和所述各标志物中目标标志物的位姿，包括：

将所述待处理视频中任意连续两帧图像中的目标标志物的特征点进行匹配。

将特征点匹配度最高的两帧图像确定为连续两帧待使用图像。

根据所述各帧图像的纹理特征点信息和所述连续两帧待使用图像中的目标标志物，确定所述待处理视频中相机的位姿和所述各标志物中目标标志物的位姿。