[发明专利]一种基于计算机视觉手势的液压挖掘机控制方法及系统在审
| 申请号: | 201910217800.1 | 申请日: | 2019-03-21 |
| 公开(公告)号: | CN109933203A | 公开(公告)日: | 2019-06-25 |
| 发明(设计)人: | 张树忠;黄豪杰;陈汉林;张兰;刘喜涛;李苏;方卫东;陈丙三;晏岱 | 申请(专利权)人: | 福建工程学院 |
| 主分类号: | G06F3/01 | 分类号: | G06F3/01;E02F9/20 |
| 代理公司: | 杭州千克知识产权代理有限公司 33246 | 代理人: | 裴金华 |
| 地址: | 350118 福建省福州*** | 国省代码: | 福建;35 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 液压挖掘机 手势 计算机视觉 挖掘机 数据处理单元 数据分析单元 数据采集单元 智能控制技术 手势数据库 动作执行 动作指令 方法控制 工作效率 计算平台 检测结果 实时获取 手势动作 指令传输 便捷性 自定义 发送 门槛 智能 | ||
1.一种基于计算机视觉手势的液压挖掘机控制方法,其特征在于,包括以下步骤:
S1:建立计算平台,将数据采集单元和执行器分别与计算平台进行连接;
S2:数据采集单元实时获取驾驶员手势动作指令信息,发送至计算平台上的数据处理单元;
S3:数据处理单元对手势动作指令信息进行识别检测,将检测结果输入至计算平台上的数据分析单元;
S4:数据分析单元判断检测结果与手势数据库中设定手势相识度是否高于预定阈值,若是则生成动作指令,将指令传输给执行器进行挖掘机控制;否则执行步骤S3;
S5:挖掘机动作执行完毕,重复执行步骤S2。
2.根据权利要求1所述的一种基于计算机视觉手势的液压挖掘机控制方法,其特征在于:
执行步骤S1时,数据采集单元为标清摄像机或者红外补光器搭配单目摄像头,且数据采集单元安装在指挥人员前上方。
3.根据权利要求1所述的一种基于计算机视觉手势的液压挖掘机控制方法,其特征在于:
执行步骤S2时,数据处理单元为预先训练好的多任务级联卷积神经网络。
4.根据权利要求1所述的一种基于计算机视觉手势的液压挖掘机控制方法,其特征在于:
执行步骤S3时,数据处理单元对手势动作指令信息进行识别检测之前,采用中值滤波单元对图像进行预处理。
5.根据权利要求1所述的一种基于计算机视觉手势的液压挖掘机控制方法,其特征在于:
执行步骤S4之前,建立手势数据库,用以存储根据用户的手势习惯为其设定特定的手势;且根据用户的手势习惯为其设定特定的手势比对数据生成预定阈值数值。
6.根据权利要求5所述的一种基于计算机视觉手势的液压挖掘机控制方法,其特征在于:
执行步骤S4时,手势数据库设置有手势数据库更新单元,为指定用户设定的特定手势比对数据更新至手势数据库中。
7.一种基于计算机视觉手势的液压挖掘机控制系统,其特征在于,包括:
数据采集单元;
数据处理单元;
数据分析单元;
执行器;
数据采集单元实时获取驾驶员手势动作指令信息,发送至的数据处理单元,数据处理单元对手势动作指令信息进行识别检测,将检测结果输入至数据分析单元,数据分析单元判断检测结果与手势数据库中设定手势相识度是否高于预定阈值,若是则生成动作指令,将指令传输给执行器进行挖掘机控制。
8.根据权利要求7所述的一种基于计算机视觉手势的液压挖掘机控制系统,其特征在于,该系统还包括:
中值滤波单元,用于在数据处理单元对手势动作指令信息进行识别检测之前,对图像进行预处理。
9.根据权利要求7所述的一种基于计算机视觉手势的液压挖掘机控制系统,其特征在于,该系统还包括:
智能生成模块,根据用户的手势习惯为其设定特定的手势生成建立手势数据库进行存储,且根据用户的手势习惯为其设定特定的手势比对数据生成预定阈值数值。
10.根据权利要求7所述的一种基于计算机视觉手势的液压挖掘机控制系统,其特征在于,该系统还包括:
手势数据库更新单元,用于将指定用户设定的特定手势比对数据更新至手势数据库中。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于福建工程学院,未经福建工程学院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910217800.1/1.html,转载请声明来源钻瓜专利网。





