[发明专利]图像处理设备和方法

说明书

本公开涉及一种可以改善在查看内容期间姿势估计相对于投影图像的鲁棒性的图像处理设备和方法。对拍摄图像和模拟图像之间的相似度进行评估，该拍摄图像是通过成像单元使已经通过投影单元投影的投影图像成像而获得的，该模拟图像模拟了应该是通过成像单元使已经通过投影单元投影的投影图像成像而获得的拍摄图像，并且基于对相似度的估计结果来设置投影单元或者成像单元的姿势或者投影单元和成像单元两者的姿势。本公开可以应用于例如，图像处理设备、投影装置、成像装置、投影成像装置、控制装置、投影成像系统等。

技术领域

本公开涉及一种图像处理设备和方法，并且具体涉及一种能够在查看内容期间改善姿势估计相对于投影图像的鲁棒性的图像处理设备和方法。

背景技术

照惯例，为了减少由投影仪投影的投影图像的失真和对通过多个投影仪获得的投影图像进行定位，存在一种通过相机来使投影图像成像，通过使用拍摄图像来估计投影仪的位置、姿势、投影表面形状等，并且根据估计来对投影图像执行几何校正的方法。

作为当时估计投影仪的位置、姿势等的方法，已经设想了一种使用图像的特征量(诸如，投影中的内容)的方法(例如，见非专利文献1)。

引文列表

非专利文献

非专利文献1：2006年David G.Lowe的“What and Where:3D Object Recognitionwith Accurate Pose”

发明内容

本发明要解决的问题

然而，在该方法中，姿势估计的性能严重依赖于投影图像，并且如果不能从投影图像中提取出大量特征点或者提取的特征点的位置被偏置，则姿势估计变得困难。

鉴于这种情况形成了本公开，改善了在查看内容期间姿势估计相对于投影图像的鲁棒性。

问题解决方案

根据本技术的一个方面的图像处理设备是包括以下单元的图像处理设备：相似度评估单元，该相似度评估单元配置为对拍摄图像和模拟图像之间的相似度进行评估，该拍摄图像是通过成像单元使已经通过投影单元投影的投影图像成像而获得的，该模拟图像模拟了应该是通过成像单元使已经通过投影单元投影的投影图像成像而获得的拍摄图像，以及姿势设置单元，该姿势设置单元配置为基于通过相似度评估单元得到的对相似度的评估结果来将投影单元或者成像单元的姿势或者投影单元和成像单元两者的姿势设置为估计结果。

姿势设置单元可以将投影单元或者成像单元的姿势或者投影单元和成像单元两者的姿势设置为估计结果，相似度评估单元已经将姿势评估为具有最佳相似度。

相似度评估单元可以获得模拟图像与拍摄图像之间的像素的亮度值的绝对值的差值之和作为指示相似度的评估值，并且姿势设置单元可以将投影单元或者成像单元的姿势或者投影单元和成像单元两者的姿势设置为估计结果，姿势具有最小评估值。

相似度评估单元可以获得模拟图像与拍摄图像之间的像素的亮度值的差值的平方和作为指示相似度的评估值，并且姿势设置单元可以将投影单元或者成像单元的姿势或者投影单元和成像单元两者的姿势设置为估计结果，姿势具有最小评估值。

相似度评估单元可以获得模拟图像与拍摄图像之间的归一化互相关作为指示相似度的评估值，并且姿势设置单元可以将投影单元或者成像单元的姿势或者投影单元和成像单元两者的姿势设置为估计结果，姿势具有最大评估值。

相似度评估单元可以获得模拟图像与拍摄图像之间的零均值归一化互相关作为指示相似度的评估值，并且姿势设置单元可以将投影单元或者成像单元的姿势或者投影单元和成像单元两者的姿势设置为估计结果，姿势具有最大评估值。