[发明专利]在增强现实中使用多个尺度下的特征以用于色彩传递

说明书

本发明揭示一种用于使用多个尺度下的色彩测量特征以用于色彩传递技术的方法及设备。在一个实施例中，所实施的功能包含：将地面实况图像目标帧调整大小到多个不同尺度；从处于所述多个不同尺度中的每一者下的所述地面实况图像目标帧选择一或多个色彩测量特征；针对所述地面实况图像目标帧中的每一色彩测量特征进行色彩测量；及至少部分地基于所述色彩测量调整经增强帧中的虚拟对象的色彩。

对相关申请的交叉引用

本申请要求2015年2月18日提交的标题为“在增强现实中使用多个尺度下的特征以用于色彩传递(USING FEATURES AT MULTIPLE SCALES FOR COLOR TRANSFER INAUGMENTED REALITY)”的美国专利申请第14/625,380号的优先权，所述申请以引用的方式并入本文中。

技术领域

本文中所揭示的主题涉及电子装置，且更特定来说，涉及用于与由电子装置实施的增强现实环境一起使用的方法及设备。

背景技术

在增强现实技术的情况下，实时或预记录的视频内容或一系列相关图像可用一或多个虚拟对象进行增强。用虚拟对象增强的视频内容、视频内容的帧或相关图像在下文可被称为图像目标。虚拟对象叠加在图像目标上，从而使得虚拟对象看起来好像为图像目标在现实世界场景中的部分。图像目标的姿态可用已知方法进行跟踪，且虚拟对象的姿态可进行相应地调整以维持虚拟对象的现实性。

当图像目标中的光照条件改变时，名称为色彩传递的已知技术可用于通过调整虚拟对象的色彩，从而使得虚拟对象的色彩反映图像目标中的光照条件改变来维持虚拟对象的现实性。具有中性光照条件的图像目标帧可用作地面实况(即，基线)以用于测量光照条件改变。广义地说，色彩传递技术测量传入图像目标帧的色彩与地面实况图像目标帧的色彩之间的色差，并相应地调整虚拟对象的色彩。色彩传递函数可在所述过程中导出并利用，且色彩传递函数可考虑地面实况图像目标帧的色彩、传入图像目标帧的色彩及虚拟对象在调整之前的色彩，并为虚拟对象提供合适的经调整色彩。

已知色彩传递技术可在某些情形下带来不正确的、出乎意料的或不太理想的结果。举例来说，其可易受到遮挡：当(例如)地面实况图像目标帧中并不存在的例如手的遮挡对象出现在传入图像目标帧中时，色彩传递过程中的色差测量可不正确或冲突。当遮挡对象的色彩与地面实况的色彩由于其并不与同一实际物件相关联而不类似时，可通过已知色彩传递过程将遮挡对象的色彩相比于地面实况的色彩以导出色差，此带来不正确的色差测量。在使用这些不正确的色差测量的情况下，已知色彩传递技术可将错误的色彩调整施加到虚拟对象。当传入图像目标帧存在尺度改变时(例如，当传入图像目标帧表示放大视图或缩小视图时)，已知色彩传递技术也可产生不太理想的结果。

发明内容

本文中所揭示的实施例可包含一种用于使用多个尺度下的色彩测量特征以用于色彩传递技术的方法，其包括：将地面实况图像目标帧调整大小到多个不同尺度；从处于所述多个不同尺度中的每一者下的所述地面实况图像目标帧选择一或多个色彩测量特征；针对所述地面实况图像目标帧中的每一色彩测量特征进行色彩测量；及至少部分地基于所述色彩测量调整经增强帧中的虚拟对象的色彩。

本文中所揭示的另一实施例可包含一种用于使用多个尺度下的色彩测量特征以用于色彩传递技术的设备，其包括：存储器；及处理器，所述处理器经配置以：将地面实况图像目标帧调整大小到多个不同尺度，从处于所述多个不同尺度中的每一者下的所述地面实况图像目标帧选择一或多个色彩测量特征，针对所述地面实况图像目标帧中的每一色彩测量特征进行色彩测量，及至少部分地基于所述色彩测量调整经增强帧中的虚拟对象的色彩。