[发明专利]显示设备及手势控制方法有效
| 申请号: | 202110179848.5 | 申请日: | 2021-02-08 |
| 公开(公告)号: | CN113158757B | 公开(公告)日: | 2023-04-07 |
| 发明(设计)人: | 祝欣培;李文超 | 申请(专利权)人: | 海信视像科技股份有限公司 |
| 主分类号: | G06V40/20 | 分类号: | G06V40/20;G06V10/762;G06V10/82;G06V10/80;G06N3/0464;G06N3/08;G06F3/04883;G06F3/01;G06F3/0481 |
| 代理公司: | 北京弘权知识产权代理有限公司 11363 | 代理人: | 郭放;许伟群 |
| 地址: | 266555 山东省青*** | 国省代码: | 山东;37 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 显示 设备 手势 控制 方法 | ||
1.一种显示设备,其特征在于,包括:
显示器;
控制器,与所述显示器连接,所述控制器被配置为:
采集包含手势的待识别图像;利用已训练好的手势识别网络对所述待识别图像进行手势识别,得到所述待识别图像中的手势类型;所述手势识别网络包括第一层卷积网络~第五层卷积网络;所述第一层卷积网络包括顺序连接的恒等映射模块和降采样模块,所述恒等映射模块包括依次链接的二维卷积模块、Prelu模块、第一深度可分离卷积模块、Prelu模块和二位卷积模块,其中,所述恒等映射模块的输入与输出相连接;所述降采样模块包括依次连接的二维卷积模块、Prelu模块、第二深度可分离卷积模块、Prelu模块和二维卷积模块,其中,所述第二深度可分离卷积模块的卷积间隔为所述第一深度可分离卷积模块的卷积间隔的两倍;第二~第五层卷积网络包括顺序连接的恒等映射模块和降采样模块;所述第一层卷积网络~所述第五层卷积网络顺序连接;第二~第五卷积网络的输出端分别连接有一个头部卷积模块,所述头部卷积模块包括卷积核为3*3的卷积模块;第三~第五层卷积网络的头部卷积模块分别通过一个加法模块连接至上一层的头部卷积模块的输出端,第三层的卷积网络对应的加法模块的输出端与手势预测模块连接,所述手势预测模块被配置为通过第三层卷积网络对应的加法模块输出的特征图进行手势预测;
根据所述手势类型对应的预设响应动作进行响应。
2.根据权利要求1所述的显示设备,其特征在于,在采集包含手势的待识别图像之前,所述控制器还被配置为:
在摄像头处于工作状态时,监测手势控制控件是否为开启状态。
3.根据权利要求1所述的显示设备,其特征在于,所述控制器还被配置为:
在根据所述手势类型对应的预设响应动作进行响应后,控制所述显示器显示所述手势类型对应的操作成功的提示信息。
4.根据权利要求1所述的显示设备,其特征在于,所述手势识别网络的训练方法包括:
根据多种距离下的包含手势的图片得到手势图片样本集;
对所述手势图片样本集中的手势框进行聚类分析,生成多个锚点框;
将所述手势图片样本集中的图片输入手势识别网络,基于所述锚点框和手势框将手势识别网络训练至收敛。
5.根据权利要求4所述的显示设备,其特征在于,所述对所述手势图片样本集中的手势框进行聚类分析,生成多个锚点框,包括:
通过K-means聚类法对所述手势图片样本集中的手势框进行聚类,得到多个类别数量下的聚类框;
利用肘部法则确定所述聚类框的目标类别数量,将所述目标类别数量下的聚类框作为锚点框。
6.一种手势控制方法,用于显示设备,其特征在于,包括:
采集包含手势的待识别图像;
利用已训练好的手势识别网络对所述待识别图像进行手势识别,得到所述待识别图像中的手势类型;所述手势识别网络包括第一层卷积网络~第五层卷积网络;所述第一层卷积网络包括顺序连接的恒等映射模块和降采样模块,所述恒等映射模块包括依次链接的二维卷积模块、Prelu模块、第一深度可分离卷积模块、Prelu模块和二位卷积模块,其中,所述恒等映射模块的输入与输出相连接;所述降采样模块包括依次连接的二维卷积模块、Prelu模块、第二深度可分离卷积模块、Prelu模块和二维卷积模块,其中,所述第二深度可分离卷积模块的卷积间隔为所述第一深度可分离卷积模块的卷积间隔的两倍;第二~第五层卷积网络包括顺序连接的恒等映射模块和降采样模块;所述第一层卷积网络~所述第五层卷积网络顺序连接;第二~第五卷积网络的输出端分别连接有一个头部卷积模块,所述头部卷积模块包括卷积核为3*3的卷积模块;第三~第五层卷积网络的头部卷积模块分别通过一个加法模块连接至上一层的头部卷积模块的输出端,第三层的卷积网络对应的加法模块的输出端与手势预测模块连接,所述手势预测模块被配置为通过第三层卷积网络对应的加法模块输出的特征图进行手势预测;
根据所述手势类型对应的预设响应动作进行响应。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于海信视像科技股份有限公司,未经海信视像科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110179848.5/1.html,转载请声明来源钻瓜专利网。





