[发明专利]非接触式生理检测机器人的6自由度人脸追踪方法和装置有效

专利信息
申请号: 202110604889.4 申请日: 2021-05-31
公开(公告)号: CN113297997B 公开(公告)日: 2022-08-02
发明(设计)人: 李霄剑;张浩然;丁帅;樊秉政;欧阳波;展航;张晓曼 申请(专利权)人: 合肥工业大学
主分类号: G06V40/16 分类号: G06V40/16;G06F17/16;A61B5/00
代理公司: 北京久诚知识产权代理事务所(特殊普通合伙) 11542 代理人: 余罡
地址: 230009 安*** 国省代码: 安徽;34
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 接触 生理 检测 机器人 自由 度人 追踪 方法 装置
【说明书】:

发明提供了一种非接触式生理检测机器人的6自由度人脸追踪方法和装置,涉及视觉伺服技术领域。本发明在接收到人脸位姿信息后,首先根据机器人的末端姿态,将人脸位姿信息转换到基坐标系,根据约束求得机器人末端的最优目标位姿,然后计算当前面部信息和理想面部姿态的误差。然后使用比例控制器求得相机的期望位姿,并求逆运动学解。最后,控制机器人移动到目标姿态。并在每接收到一组面部信息时,重复这个过程。因此本发明采用的6自由度控制和基于位置的视觉伺服,能够保证追踪效果并简化处理过程,实现主动配合患者完成人脸图像采集,完成非接触式生理检测任务。

技术领域

本发明涉及视觉伺服技术领域,具体涉及一种非接触式生理检测机器人的6自由度人脸追踪方法和装置。

背景技术

在对患者进行非接触式的生理检测时,通常需要采集患者的人脸图像来获取相关的生理信息,而现有的非接触式的生理检测机器人多为静态检测,如果遇到患者卧床不便配合非接触式生理检测机器人进行人脸图像采集时,就需要一套人脸追踪子系统来主动配合患者进行检测。

对于人脸的动态追踪,现有的人脸追踪系统大多是基于二自由度云台或者基于三自由度单目相机和基于图像的视觉伺服(IBVS)来追踪人脸。

但现有方法进行人脸追踪时,通常是基于图像的视觉伺服(IBVS)会造成算法复杂,运行效率低下,实时性受到影响,且三自由度相机会存在追踪效果不好,无法在多数情况下达到正对人脸的效果,灵活性差的问题。

发明内容

(一)解决的技术问题

针对现有技术的不足,本发明提供了一种非接触式生理检测机器人的6自由度人脸追踪方法和装置,解决了现有的动态人脸追踪的运行效率低下,追踪效果不好的问题。

(二)技术方案

为实现以上目的,本发明通过以下技术方案予以实现:

第一方面,提供了一种非接触式生理检测机器人的6自由度人脸追踪方法,该方法包括:

将相机固定在机器人末端;

基于相机采集的人脸影像进行实时的面部特征点检测和跟踪,得到相机坐标系O3下的人脸位姿信息pface

将人脸位姿信息pface转化为人脸在基坐标系O1下的位姿Tb

基于人脸在基坐标系O1下的位姿Tb计算机器人末端的最优目标位姿Tt

基于人脸在基坐标系O1下的位姿Tb和机器人末端的最优目标位姿Tt进行比例控制,得到期望位姿ptarget

基于期望位姿ptarget求逆运动学解,得到机器人目标关节角βtargetjoint,并基于机器人目标关节角βtargetjoint对机器人进行控制。

进一步的,所述基于相机采集的人脸影像进行实时的面部特征点检测和跟踪,得到相机坐标系O3下的人脸位姿信息pface,包括:

使用多任务卷积神经网络面部检测器和改进的卷积专家约束局部模型进行面部特征点检测和跟踪;

得到的人脸位姿信息为:

其中,表示旋转的三个欧拉角;

表示人脸在相机坐标系O3下的位置三维坐标;

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于合肥工业大学,未经合肥工业大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110604889.4/2.html,转载请声明来源钻瓜专利网。

同类专利
专利分类
×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top