[发明专利]一种视觉特性与行为特性融合的全景图像显著图生成方法及系统

权利要求书

1.一种视觉特性与行为特性融合的全景图像显著图生成方法，其步骤包括：

1)将全景图像从等矩形域转换到球面域、再从球面域转换到视角域，得到该全景图像对应的视角平面图像；

2)使用高斯差分滤波处理该视角平面图像，得到该视角平面图像中每个像素在视觉空间的DoG值；

3)利用每个像素对应的DoG值与平均DoG值之间的欧几里德距离值表示对应像素在整幅全景图像上的视觉特征显著性，得到该全景图像对应的视觉特征显著图S_V；

4)根据用户的实际头部运动数据得到用户观看全景图像的行为特性显著图S_b；其中，行为特性显著图表示全景图像上的纬度；

5)将该视觉特征显著图S_V与该行为特性显著图S_b融合得到最终的全景图像显著图S。

2.如权利要求1所述的方法，其特征在于，视角域中的点(m，n)的所述DoG值为其中，σ₁和σ₂是高斯滤波器的标准差。

3.如权利要求2所述的方法，其特征在于，σ₁＝1.6σ₂。

4.如权利要求1所述的方法，其特征在于，视觉特征显著图其中，D_V(u，v)是全景图像中的点(u，v)对应的DoG值，是全景图像中所有点对应的DoG值的平均DoG值。

5.如权利要求1所述的方法，其特征在于，全景图像显著图S＝max(N(S_V)，N(S_b))；其中，N()表示归一化操作。

6.如权利要求1所述的方法，其特征在于，利用公式将全景图像从等矩形域转换到球面域，然后利用公式将球面域转换到视角域；其中，(u，v)表示等矩形域表示的全景图像中的一个点，(x，y，z)表示全景图像中的点(u，v)在球面上的笛卡尔坐标，(m，n)是全景图像中的点(u，v)在视角投影上的二维齐次坐标；(m₀,n₀)是视角域的中心点Q的坐标；f是全景图像球面的半径，w、h分别是视角平面图像的宽度和高度，fov_x、fov_y分别为头戴式显示器中每只眼睛的水平视野和垂直视野，R为旋转矩阵。

7.如权利要求6所述的方法，其特征在于，旋转矩阵其中，θ为点Q的经度，为点Q的纬度。

8.一种视觉特性与行为特性融合的全景图像显著图生成系统，其特征在于，包括坐标转换模块、视觉特征显著图S_V生成模块、行为特性显著图S_b生成模块和融合模块；其中，

坐标转换模块，用于将全景图像从等矩形域转换到球面域、再从球面域转换到视角域，得到该全景图像对应的视角平面图像；

视觉特征显著图S_V生成模块，利用高斯差分滤波处理该视角平面图像，得到该视角平面图像中每个像素在视觉空间的DoG值；然后利用每个像素对应的DoG值与平均DoG值之间的欧几里德距离值表示对应像素在整幅全景图像上的视觉特征显著性，得到该全景图像对应的视觉特征显著图S_V；

行为特性显著图S_b生成模块，用于根据用户的实际头部运动数据得到用户观看全景图像的行为特性显著图S_b；其中，行为特性显著图表示全景图像上的纬度；

融合模块，用于将该视觉特征显著图S_V与该行为特性显著图S_b融合得到最终的全景图像显著图S。

9.如权利要求8所述的系统，其特征在于，视角域中的点(m，n)的所述DoG值为其中，σ₁和σ₂是高斯滤波器的标准差；视觉特征显著图其中，D_V(u，v)是全景图像中的点(u,v)对应的DoG值，是全景图像中所有点对应的DoG值的平均DoG值。