[发明专利]一种基于颜色恒量和几何不变特征的视频稳像方法有效

专利信息
申请号: 201410064930.3 申请日: 2014-02-25
公开(公告)号: CN103841298B 公开(公告)日: 2017-05-10
发明(设计)人: 张华熊;康锋;胡洁;韩永华 申请(专利权)人: 浙江理工大学
主分类号: H04N5/21 分类号: H04N5/21;H04N5/14
代理公司: 杭州天勤知识产权代理有限公司33224 代理人: 胡红娟
地址: 310018 浙江*** 国省代码: 浙江;33
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 基于 颜色 恒量 几何 不变 特征 视频 方法
【权利要求书】:

1.一种基于颜色恒量和几何不变特征的视频稳像方法,包括如下步骤:

(1)将视频图像从RGB模式转换为颜色恒量模式,得到对应的颜色恒量图像,具体过程如下:

A1.对于视频图像中的任一像素点,根据以下算式计算该像素点的光谱分量EA、EB和EC

<mrow><mfenced open = "(" close = ")"><mtable><mtr><mtd><msub><mi>E</mi><mi>A</mi></msub></mtd></mtr><mtr><mtd><msub><mi>E</mi><mi>B</mi></msub></mtd></mtr><mtr><mtd><msub><mi>E</mi><mi>C</mi></msub></mtd></mtr></mtable></mfenced><mo>=</mo><mfenced open = "(" close = ")"><mtable><mtr><mtd><mn>0.06</mn></mtd><mtd><mn>0.63</mn></mtd><mtd><mn>0.27</mn></mtd></mtr><mtr><mtd><mn>0.30</mn></mtd><mtd><mn>0.04</mn></mtd><mtd><mrow><mo>-</mo><mn>0.35</mn></mrow></mtd></mtr><mtr><mtd><mn>0.34</mn></mtd><mtd><mrow><mo>-</mo><mn>0.60</mn></mrow></mtd><mtd><mn>0.17</mn></mtd></mtr></mtable></mfenced><mfenced open = "(" close = ")"><mtable><mtr><mtd><mi>R</mi></mtd></mtr><mtr><mtd><mi>G</mi></mtd></mtr><mtr><mtd><mi>B</mi></mtd></mtr></mtable></mfenced></mrow>

其中:R、G和B分别对应像素点在红色、绿色和蓝色通道上的亮度值;

A2.根据光谱分量EA、EB和EC通过以下算式计算像素点的颜色恒量值ICI

<mrow><msub><mi>I</mi><mrow><mi>C</mi><mi>I</mi></mrow></msub><mo>=</mo><mrow><mo>(</mo><mi>&alpha;</mi><mo>,</mo><mi>&beta;</mi><mo>,</mo><mi>&gamma;</mi><mo>)</mo></mrow><mfenced open = "(" close = ")"><mtable><mtr><mtd><msub><mover><mi>E</mi><mo>^</mo></mover><mn>1</mn></msub></mtd></mtr><mtr><mtd><msub><mover><mi>E</mi><mo>^</mo></mover><mn>2</mn></msub></mtd></mtr><mtr><mtd><msub><mover><mi>E</mi><mo>^</mo></mover><mn>3</mn></msub></mtd></mtr></mtable></mfenced></mrow>

E1=EA

其中:和分别对应E1、E2和E3归一化后的值,α、β和γ分别为预设的权重系数;

A3.根据步骤A1~A2遍历视频图像中的每一像素点,得到视频图像对应的颜色恒量图像;

(2)根据所述的颜色恒量图像,建立视频图像的三层高斯金字塔图像,具体过程如下:

B1.使颜色恒量图像作为三层高斯金字塔图像的底层子图P0

B2.根据以下算式确定三层高斯金字塔图像的第1层子图P1和第2层子图P2,其中上层子图的行列数均为下层子图行列数的一半;

<mrow><msub><mi>P</mi><mi>l</mi></msub><mrow><mo>(</mo><mi>i</mi><mo>,</mo><mi>j</mi><mo>)</mo></mrow><mo>=</mo><munderover><mo>&Sigma;</mo><mrow><mi>m</mi><mo>=</mo><mn>0</mn></mrow><mn>4</mn></munderover><munderover><mo>&Sigma;</mo><mrow><mi>n</mi><mo>=</mo><mn>0</mn></mrow><mn>4</mn></munderover><mi>W</mi><mrow><mo>(</mo><mi>m</mi><mo>,</mo><mi>n</mi><mo>)</mo></mrow><msub><mi>P</mi><mrow><mi>l</mi><mo>-</mo><mn>1</mn></mrow></msub><mrow><mo>(</mo><mn>2</mn><mi>i</mi><mo>+</mo><mi>m</mi><mo>-</mo><mn>2</mn><mo>,</mo><mn>2</mn><mi>j</mi><mo>+</mo><mi>n</mi><mo>-</mo><mn>2</mn><mo>)</mo></mrow></mrow>

其中:Pl(i,j)为第l层子图Pl中第i行第j列像素点的颜色恒量值,Pl-1(2i+m-2,2j+n-2)为第l-1层子图Pl-1中第2i+m-2行第2j+n-2列像素点的颜色恒量值,W(m,n)为高斯低通滤波算子W中第m行第n列元素的元素值,l=1或2,i和j分别为第k层子图Pk的行列序号,m和n均为自然数且0≤m≤4,0≤n≤4;所述的高斯低通滤波算子W的表达形式如下:

<mrow><mi>W</mi><mo>=</mo><mfenced open = "(" close = ")"><mtable><mtr><mtd><mn>0.0000</mn></mtd><mtd><mn>0.0000</mn></mtd><mtd><mn>0.0002</mn></mtd><mtd><mn>0.0000</mn></mtd><mtd><mn>0.0000</mn></mtd></mtr><mtr><mtd><mn>0.0000</mn></mtd><mtd><mn>0.0113</mn></mtd><mtd><mn>0.0837</mn></mtd><mtd><mn>0.0113</mn></mtd><mtd><mn>0.0000</mn></mtd></mtr><mtr><mtd><mn>0.0002</mn></mtd><mtd><mn>0.0837</mn></mtd><mtd><mn>0.6187</mn></mtd><mtd><mn>0.0837</mn></mtd><mtd><mn>0.0002</mn></mtd></mtr><mtr><mtd><mn>0.0000</mn></mtd><mtd><mn>0.0113</mn></mtd><mtd><mn>0.0837</mn></mtd><mtd><mn>0.0113</mn></mtd><mtd><mn>0.0000</mn></mtd></mtr><mtr><mtd><mn>0.0000</mn></mtd><mtd><mn>0.0000</mn></mtd><mtd><mn>0.0002</mn></mtd><mtd><mn>0.0000</mn></mtd><mtd><mn>0.0000</mn></mtd></mtr></mtable></mfenced></mrow>

(3)提取三层高斯金字塔图像每一层子图中的角点,且将其他两层子图中的角点坐标映射到底层子图中并对角点进行非最大值抑制以剔除重复角点,进而建立每一角点的FREAK描述子;对角点进行非最大值抑制的具体过程如下:对于底层子图中任一3*3的像素区域,若该像素区域存在不止一个角点,则根据以下算式计算区域中每个角点与周围像素点颜色恒量值的差和ρ,保留其中差和ρ最大的角点并剔除其他角点;

<mrow><mi>&rho;</mi><mo>=</mo><munderover><mo>&Sigma;</mo><mrow><mi>x</mi><mo>=</mo><mn>1</mn></mrow><mn>8</mn></munderover><mo>|</mo><mi>I</mi><mrow><mo>(</mo><mi>x</mi><mo>)</mo></mrow><mo>-</mo><mi>I</mi><mo>|</mo></mrow>

其中:I为当前角点的颜色恒量值,I(x)为当前角点周围8个像素点中第x个像素点的颜色恒量值;

(4)根据步骤(1)至(3)遍历每帧视频图像,以得到每帧视频图像各角点的FREAK描述子;进而根据FREAK描述子对前后两帧视频图像进行角点匹配,具体过程如下:

C1.对于当前帧视频图像的任一角点,根据FREAK描述子计算该角点与前一帧视频图像各角点的汉明距;

C2.提取前一帧视频图像中与该角点汉明距最小的角点Jmin,若该最小汉明距小于预设的距离阈值,则使该角点与角点Jmin匹配且该被匹配的角点Jmin不再与接下去的任何角点做匹配;否则,则表明该角点匹配失败;

C3.根据步骤C1~C2,遍历当前帧视频图像的所有角点;

(5)根据前后两帧视频图像的角点匹配关系,利用MSAC算法对前后两帧视频图像进行帧间运动估计,以求得前后两帧视频图像的仿射变换矩阵,并依此进行遍历;

(6)以第一帧视频图像作为参考帧Z1,根据以下算式对当前帧视频图像进行稳像处理:

Z′k=Tk·Zk

其中:Zk表示当前帧视频图像,Z′k表示当前帧视频图像Zk稳像处理后的输出图像,k表示当前帧视频图像的帧序号,Tp,p-1表示第p帧视频图像Zp与第p-1帧视频图像Zp-1的仿射变换矩阵。

2.根据权利要求1所述的视频稳像方法,其特征在于:所述的步骤(3)中采用FAST-9检测算法提取三层高斯金字塔图像每一层子图中的角点。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江理工大学,未经浙江理工大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201410064930.3/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top