[发明专利]一种图像处理方法、装置、移动终端及存储介质有效

专利信息
申请号: 201811505805.6 申请日: 2018-12-10
公开(公告)号: CN109788190B 公开(公告)日: 2021-04-06
发明(设计)人: 王顺利 申请(专利权)人: 北京奇艺世纪科技有限公司
主分类号: H04N5/232 分类号: H04N5/232
代理公司: 北京润泽恒知识产权代理有限公司 11319 代理人: 莎日娜
地址: 100080 北京市海淀*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 图像 处理 方法 装置 移动 终端 存储 介质
【权利要求书】:

1.一种图像处理方法,应用于移动终端,其特征在于,包括:

依据所述移动终端的取景界面,采集用户的人脸图像序列;

确定所述人脸图像序列中各人脸图像中的人脸关键点集,所述人脸关键点集为人脸关键点对应的坐标集合;

依据所述人脸关键点集,确定位移阈值,及所述人脸图像序列中任意相邻两帧人脸图像对应的人脸关键点集的平均位移;其中,所述位移阈值为根据用户两个人眼中心点之间的距离预先计算得到的位移值;

依据所述位移阈值和所述平均位移对学习率进行更新,得到更新学习率,包括:获取所述位移阈值和所述平均位移中的最小值,计算所述最小值与所述位移阈值的比值的平方,得到所述更新学习率;

依据所述更新学习率对各所述人脸图像对应的人脸关键点集进行调整,包括:依据所述人脸图像序列,获取当前帧人脸图像;计算所述当前帧人脸图像对应的人脸形状预测关键点集坐标;获取位于所述当前帧人脸图像的上一帧人脸图像;获取所述上一帧人脸图像对应的人脸形状估计关键点集坐标;依据所述人脸形状估计关键点集坐标、所述人脸形状预测关键点集坐标和所述更新学习率,对所述当前帧人脸图像对应的人脸关键点集进行调整。

2.根据权利要求1所述的方法,其特征在于,所述依据所述人脸关键点集,确定位移阈值,包括:

从所述人脸图像序列中选择一目标人脸图像;

依据所述目标人脸图像对应的人脸关键点集,确定用户的两个人眼中心点分别对应的左关键点和右关键点;

获取所述左关键点对应的第一坐标,及所述右关键点对应的第二坐标;

依据所述第一坐标和所述第二坐标,计算得到眼间距;

依据所述眼间距和两个预设常数,计算得到所述位移阈值。

3.根据权利要求1所述的方法,其特征在于,所述人脸图像序列中任意相邻两帧人脸图像包括第一帧人脸图像和第二帧人脸图像,依据所述人脸关键点集确定所述人脸图像序列中任意相邻两帧人脸图像对应的人脸关键点集的平均位移,包括:

获取所述第一帧人脸图像对应的人脸关键点集中各关键点的第三坐标;

获取所述第二帧人脸图像对应的人脸关键点集中各关键点的第四坐标;

依据各所述第三坐标和各所述第四坐标,计算得到所述平均位移。

4.根据权利要求1所述的方法,其特征在于,所述依据所述人脸形状估计关键点集坐标、所述人脸形状预测关键点集坐标和所述更新学习率,对所述当前帧人脸图像对应的人脸关键点集进行调整,包括:

依据所述人脸形状估计关键点集坐标、所述人脸形状预测关键点集坐标和所述更新学习率,计算得到平滑值;

依据所述平滑值,对所述人脸形状预测关键点集坐标进行调整。

5.一种图像处理装置,应用于移动终端,其特征在于,包括:

人脸图像序列采集模块,用于依据所述移动终端的取景界面,采集用户的人脸图像序列;

关键点集确定模块,用于确定所述人脸图像序列中各人脸图像中的人脸关键点集,所述人脸关键点集为人脸关键点对应的坐标集合;

阈值位移确定模块,用于依据所述人脸关键点集,确定位移阈值,及所述人脸图像序列中任意相邻两帧人脸图像对应的人脸关键点集的平均位移;其中,所述位移阈值为根据用户两个人眼中心点之间的距离预先计算得到的位移值;

学习率更新模块,用于依据所述位移阈值和所述平均位移对学习率进行更新,得到更新学习率,所述学习率更新模块包括:最小值获取子模块,用于获取所述位移阈值和所述平均位移中的最小值;更新学习率获取子模块,用于计算所述最小值与所述位移阈值的比值的平方,得到所述更新学习率;

关键点集调整模块,用于依据所述更新学习率对各所述人脸图像对应的人脸关键点集进行调整,所述关键点集调整模块包括:当前帧人脸图像获取子模块,用于依据所述人脸图像序列,获取当前帧人脸图像;预测关键点集坐标计算子模块,用于计算所述当前帧人脸图像对应的人脸形状预测关键点集坐标;上一帧人脸图像获取子模块,用于获取位于所述当前帧人脸图像的上一帧人脸图像;估计关键点集坐标获取子模块,用于获取所述上一帧人脸图像对应的人脸形状估计关键点集坐标;关键点集调整子模块,用于依据所述人脸形状估计关键点集坐标、所述人脸形状预测关键点集坐标和所述更新学习率,对所述当前帧人脸图像对应的人脸关键点集进行调整。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇艺世纪科技有限公司,未经北京奇艺世纪科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201811505805.6/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top