[发明专利]用于生成AR/VR数字内容的数字图像适合性确定

说明书

描述了用于生成增强现实/虚拟现实(AR/VR)数字内容的图像适合性确定技术。接收二维数字图像。使用机器学习，做出关于由二维数字图像捕获的对象是否适合生成用于在AR/VR环境中显示的AR/VR数字内容的确定。如果对象适合生成用于在AR/VR环境中显示的AR/VR数字内容，则提供指示，并且提供在AR/VR环境中观看对象的选项。如果对象不适合生成用于在AR/VR环境中显示的AR/VR数字内容，则提供指示为何捕获的对象不适合生成用于在AR/VR环境中显示的AR/VR数字内容的意见以及/或者指示如何对后续数字图像中对象的捕获进行校正以使得其适合生成AR/VR数字内容的意见。

相关申请的交叉引用

本申请要求于2019年10月8日提交的并且题为“Digital Image SuitabilityDetermination to Generate AR/VR Digital Content”的美国申请16/596,394的优先权，该美国申请要求于2018年10月9日提交的并且题为“Innovations in E-Commerce”的美国临时申请62/743,468的优先权，这两个申请的全部公开内容通过引用并入本文。

背景技术

已经开发了增强和虚拟现实(AR/VR)环境来增加计算装置的用户可用的功能的数量。在增强现实环境中，AR/VR数字内容用于“增强”用户对其中设置有计算装置的物理环境的直接观看。例如，配备有数字摄像机的移动装置(例如，移动电话或平板计算机)可以用于观看真实世界场景，并且使用AR/VR数字内容作为虚拟对象或部件来增强真实世界场景。在VR环境中，物理环境可以被重新创建(即，“虚拟化”)并由用户观看，其中，AR/VR数字内容用于生成在该环境中观看的对象。在这两种情况下，AR/VR环境可以利用计算装置、使用AR/VR数字内容支持沉浸式用户体验。

然而，用于生成AR/VR数字内容的常规技术面临各种挑战。这些挑战包括如何以适合作为AR/VR环境的一部分(例如，看起来“好像它真的在那里”)呈现的形式来生成AR/VR数字内容、如何对AR/VR数字内容进行建模以及如何确定AR/VR数字内容在环境内的大小和位置。用于生成AR/VR数字内容的源是否适合这样做，进一步加剧了这些挑战。因此，用于生成AR/VR数字内容的常规技术通常限于由使用复杂工具的老练用户使用，或者迫使不老练的用户重复地尝试创建适合的AR/VR数字内容。因此，如使用常规技术和系统生成的AR/VR数字内容受限于不能在广泛的场景中使用，这些场景的示例包括社交媒体系统、产品和服务陈列、数字服务等。

发明内容

为了克服这些问题，利用数字图像适合性确定来生成用于在AR/VR环境中显示的AR/VR数字内容。首先，接收对象的二维数字图像，并且使用计算机视觉和机器学习技术，做出关于对象的图像是适合还是不适合生成用于在AR/VR环境中显示的AR/VR数字内容的确定。如果对象的数字图像被确定为适合生成用于在AR/VR环境中显示的AR/VR数字内容，则生成对象的AR/VR数字内容，并且将所生成的AR/VR数字内容提供给用户以在AR/VR环境中显示。如果确定对象的二维数字图像不适合生成用于在AR/VR环境中显示的AR/VR数字内容，则提供对象的图像不适合生成AR/VR数字内容的指示，以及/或者关于如何改进对象的后续数字图像以使其适合生成用于在AR/VR环境中显示的AR/VR数字内容的意见。另外，可以提供对对象的后续数字图像进行自动校正的选项，或者可以自动地并且在没有用户干预的情况下捕获包括校正的后续图像，以确保适合生成用于在AR/VR环境中显示的AR/VR数字内容。

另外，提供了用于在在线市场中提供非模态端到端AR/VR体验的技术。在非模态AR/VR环境中，用户可以搜索物品、选择物品、添加多个物品、删除物品、缩放物品、移动物品以及以其他方式修改和操纵物品、以及接收推荐、购买物品等，所有这些操作都在AR/VR环境内。

本发明内容以简化形式介绍了将在下面的具体实施方式中进一步描述的一系列构思。因此，本发明内容不旨在标识所要求保护的主题的必要特征，也不旨在用作对确定所要求保护的主题的范围的帮助。

附图说明