[发明专利]箱体图像三维重建方法、计算设备及存储介质

权利要求书

1.一种箱体图像三维重建方法，其特征在于，所述方法包括：

采集箱体在多个视角上的二维箱体图像，所述二维箱体图像包含三维重建的全部图像信息，包括角度、光照、阴影、物体表面细节；

将摄像机光线穿过三维场景生成一组三维采样点；

将三维场景中采样点的五维参数输入到全连接深度网络，获得所述采样点的体积密度和RGB值，通过优化所述全连接深度网络各层权值，将输入的每个五维参数映射到对应的体积密度和RGB值上；其中，五维参数包括所述采样点的X,Y,Z坐标及采样点上的观察方向；

约束体积密度仅与位置X,Y,Z相关，RGB值同时与位置X,Y,Z和观察方向相关，以保证多视角的一致性；

通过体渲染技术将所述体积密度和所述RGB值叠加到所述二维箱体图像上，形成三维箱体图像。

2.根据权利要求1所述的方法，其特征在于，所述将三维场景中采样点的五维参数输入到全连接深度网络，获得所述采样点的体积密度和RGB值，包括：

所述全连接深度网络采用8个全连接层处理输入的坐标X,Y,Z，输出所述体积密度及256维特征向量；

将所述256维特征向量和观察方向进行串联，输入到4个附加全连接层，输出RGB值。

3.根据权利要求2所述的方法，其特征在于，所述8个全连接层使用ReLU激活且每层设置256个通道，所述4个附加全连接层采用ReLU激活，每层设置128个通道。

4.根据权利要求1所述的方法，其特征在于，所述通过体渲染技术将所述体积密度和所述RGB值叠加到所述二维箱体图像上，形成三维箱体图像，包括：

将摄像机光线的上下限范围[tn，tf] 分成N个均匀分布的容器，并从每个容器内随机均匀地抽取一个样本ti；

根据ti估算穿过摄像机的每个像素的摄像机光线的积分C（r），以渲染穿过场景的任何光线的颜色。

5.根据权利要求1所述的方法，其特征在于，所述方法进一步包括：

在所述三维箱体图像中插入虚拟对象，所述虚拟对象用于对箱体部件进行验伤提示和/或标注表示。

6.根据权利要求5所述的方法，其特征在于，所述虚拟对象具有交互能力，提供隐藏、移动或链接跳转功能。

7.一种计算设备，其特征在于，所述计算设备包括：摄像头、处理器、存储器、通信接口、通信总线和输出单元，所述摄像头、所述处理器、所述存储器、所述通信接口和所述输出单元通过所述通信总线完成相互间的通信；

所述存储器用于存放至少一可执行指令，所述可执行指令用于控制所述计算设备执行以下操作：

采集箱体在多个视角上的二维箱体图像，所述二维箱体图像包含三维重建的全部图像信息，包括角度、光照、阴影、物体表面细节；

将摄像机光线穿过三维场景生成一组三维采样点；

将三维场景中采样点的五维参数输入到全连接深度网络，获得所述采样点的体积密度和RGB值，通过优化所述全连接深度网络各层权值，将输入的每个五维参数映射到对应的体积密度和RGB值上；其中，五维参数包括所述采样点的X,Y,Z坐标及采样点上的观察方向；

约束体积密度仅与位置X,Y,Z相关，RGB值同时与位置X,Y,Z和观察方向相关，以保证多视角的一致性；

通过体渲染技术将所述体积密度和所述RGB值叠加到所述二维箱体图像上，形成三维箱体图像。

8.一种计算机存储介质，所述计算机存储介质中存储有至少一可执行指令，其特征在于，所述可执行指令用于执行以下操作：

采集箱体在多个视角上的二维箱体图像，所述二维箱体图像包含三维重建的全部图像信息，包括角度、光照、阴影、物体表面细节；

将摄像机光线穿过三维场景生成一组三维采样点；

将三维场景中采样点的五维参数输入到全连接深度网络，获得所述采样点的体积密度和RGB值，通过优化所述全连接深度网络各层权值，将输入的每个五维参数映射到对应的体积密度和RGB值上；其中，五维参数包括所述采样点的X,Y,Z坐标及采样点上的观察方向；

约束体积密度仅与位置X,Y,Z相关，RGB值同时与位置X,Y,Z和观察方向相关，以保证多视角的一致性；

通过体渲染技术将所述体积密度和所述RGB值叠加到所述二维箱体图像上，形成三维箱体图像。