[发明专利]一种多目全景相机全景防抖方法及系统在审
申请号: | 201911218079.4 | 申请日: | 2019-12-03 |
公开(公告)号: | CN110933309A | 公开(公告)日: | 2020-03-27 |
发明(设计)人: | 王士博;赖忠安;李盛 | 申请(专利权)人: | 深圳市圆周率软件科技有限责任公司 |
主分类号: | H04N5/232 | 分类号: | H04N5/232 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 518052 广东省深圳市南山区*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 全景 相机 方法 系统 | ||
1.一种多目全景相机全景防抖方法,其特征在于,所述方法包括:
录制全景视频时,获取惯性测量单元采集的重力加速度、陀螺仪、磁力计的合成数据,通过四元数转矩阵运算公式将所述合成数据转换成4x4旋转矩阵M;
发送所述旋转矩阵M至GPU处理器;
所述GPU处理器运载片段着色器防抖计算程序,将当前录制的全景视频的帧视频的每个像素坐标值和旋转矩阵M相乘,得到向量补差防抖后的像素坐标值,输出与所述向量补差防抖后的所述像素坐标值对应的处理视频至所述多目全景相机的屏幕。
2.如权利要求1所述的方法,其特征在于,所述获取惯性测量单元采集的重力加速度、陀螺仪、磁力计的合成数据之前,还包括:
初始化所述惯性测量单元采集的数据类型和采样频率,所述采集的数据类型包括重力加速度数据、陀螺仪数据、磁力计数据;
获取所述惯性测量单元分别采集的重力加速度数据、陀螺仪数据、磁力计数据,以及创建存放所述惯性测量单元采集的合成数据的存放队列;
所述获取惯性测量单元采集的重力加速度、陀螺仪、磁力计的合成数据之后,还包括:
保存所述惯性测量单元采集的所述合成数据至所述存放队列。
3.如权利要求2所述的方法,其特征在于,所述保存所述惯性测量单元采集的所述合成数据至所述存放队列之后,所述方法还包括:
提取所述录制视频的每一帧视频时间戳;
根据所述视频时间戳查找所述存放队列中最接近所述当前时间戳的所述合成数据,以通过四元数转矩阵运算公式将所述合成数据转换成4x4旋转矩阵M。
4.如权利要求1所述的方法,其特征在于,所述合成数据为四元数,所述四元数的值为(x,y,z,w),所述4x4旋转矩阵M为:
5.如权利要求1所述的方法,其特征在于,所述片段着色器防抖计算程序运载时执行如下计算公式:
normal.x=-M*sin(coord.x);
normal.y=M*cos(coord.x);
normal.z=sin(coord.y);
uv.x=atan(normal.z/normal.x);
uv.y=asin(normal.y);
所述normal.x表示待计算的与所述向量补差防抖后的所述像素坐标值的横坐标所使用的横坐标中间值;
所述normal.z表示待计算的与所述向量补差防抖后的所述像素坐标值的横坐标所使用的竖坐标中间值;
所述normal.y表示待计算的与所述向量补差防抖后的所述像素坐标值的纵坐标所使用的纵坐标中间值;
所述uv.x表示与所述向量补差防抖后的所述像素坐标值的横坐标;
所述uv.y表示与所述向量补差防抖后的所述像素坐标值的纵坐标;
其中,所述coord表示所述帧视频的每个像素坐标值,所述像素坐标值范围在(0.0,0.0)到(1.0,1.0)之间。
6.一种多目全景相机全景防抖系统,其特征在于,所述系统位于所述多目全景相机,所述系统包括:
获取单元,用于在所述多目全景相机录制全景视频时,获取惯性测量单元采集的重力加速度、陀螺仪、磁力计的合成数据,通过四元数转矩阵运算公式将所述合成数据转换成4x4旋转矩阵M;
发送单元,用于发送所述旋转矩阵M至GPU处理器;
所述GPU处理器,用于运载片段着色器防抖计算程序,将当前录制的全景视频的帧视频的每个像素坐标值和旋转矩阵M相乘,得到向量补差防抖后的像素坐标值,输出与所述向量补差防抖后的所述像素坐标值对应的处理视频至所述多目全景相机的屏幕。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市圆周率软件科技有限责任公司,未经深圳市圆周率软件科技有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911218079.4/1.html,转载请声明来源钻瓜专利网。
- 上一篇:基于图片的地下电缆三维建模方法和装置
- 下一篇:一种食品包装一体化设备