[发明专利]一种输入方法及装置在审
申请号: | 201910828531.2 | 申请日: | 2019-09-03 |
公开(公告)号: | CN112446265A | 公开(公告)日: | 2021-03-05 |
发明(设计)人: | 王丹;崔欣 | 申请(专利权)人: | 北京搜狗科技发展有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06F3/01 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 柳欣 |
地址: | 100084 北京市海淀区中关*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 输入 方法 装置 | ||
1.一种输入方法,其特征在于,所述方法包括:
采集用户视频数据,所述用户视频数据包括用户面部视频数据和/或用户手部视频数据;
识别所述用户视频数据包括的表达信息;
将所述表达信息作为候选项进行显示。
2.根据权利要求1所述的方法,其特征在于,所述识别所述用户视频数据包括的表达信息,包括:
对所述用户视频数据进行分类,获得视频分类结果;
根据所述视频分类结果识别所述用户视频数据包括的表达信息。
3.根据权利要求2所述的方法,其特征在于,所述根据所述视频分类结果识别所述用户视频数据包括的表达信息,包括:
当所述视频分类结果包括面部表情视频数据时,根据所述面部表情视频数据中的用户面部特征确定对应的表达信息;
当所述视频分类结果包括唇语视频数据时,根据所述唇语视频数据中的唇形特征确定发音,并根据所述发音确定对应的表达信息;
当所述视频分类结果包括手势视频数据时,根据所述手势视频数据包括的用户手部特征确定对应的表达信息;
当所述视频分类结果包括手语视频数据时,根据所述手语视频数据中的用户手部特征确定对应的语义,并根据所述语义确定对应的表达信息。
4.根据权利要求3所述的方法,其特征在于,所述对所述用户视频数据进行分类,获得视频分类结果,包括:
从所述用户视频数据提取用户面部特征和/或用户手部特征;
根据所述用户面部特征和/所述用户手部特征,确定所述视频分类结果。
5.根据权利要求4所述的方法,其特征在于,所述根据所述用户面部特征和/或所述用户手部特征,确定所述视频分类结果,包括:
当所述用户视频数据包括所述用户面部特征时,如果所述用户面部特征中唇形特征连续变化,所述视频分类结果包括唇语视频数据;否则,所述视频分类结果包括面部表情视频数据;
当所述用户视频数据包括所述用户手部特征时,如果所述用户手部特征连续变化,所述视频分类结果包括手语视频数据;否则,所述视频分类结果包括手势视频数据。
6.根据权利要求1所述的方法,其特征在于,所述识别所述用户视频数据包括的表达信息,包括:
识别所述用户视频数据中是否包括用户面部特征,如果包括所述用户面部特征,根据所述用户面部特征确定对应的表达信息;
识别所述用户视频数据中是否包括用户面部特征,如果包括所述用户面部特征,判断所述用户面部特征中的唇形特征是否连续变化,如果所述唇形特征连续变化,根据所述唇形特征确定发音,并根据所述发音确定对应的表达信息;
识别所述用户视频数据中是否包括用户手部特征,如果包括所述用户手部特征,根据所述用户手部特征确定对应的表达信息;
识别所述用户手部视频数据中是否包括用户手部特征,如果包括所述用户手部特征,判断所述用户手部特征是否连续变化,如果所述用户手部特征连续变化,根据所述用户手部特征确定对应的语义,并根据所述语义确定对应的表达信息。
7.根据权利要求1-6任一项所述的方法,其特征在于,所述表达信息包括表达文本、图像、表情中的一个或多个。
8.一种输入装置,其特征在于,所述装置包括:
采集单元,用于采集用户视频数据,所述用户视频数据包括用户面部视频数据和/或用户手部视频数据;
识别单元,用于识别所述用户视频数据包括的表达信息;
显示单元,用于将所述表达信息作为候选项进行显示。
9.一种用于输入的装置,其特征在于,包括有存储器,以及一个或者一个以上的程序,其中一个或者一个以上程序存储于存储器中,且经配置以由一个或者一个以上处理器执行所述一个或者一个以上程序包含用于进行以下操作的指令:
采集用户视频数据,所述用户视频数据包括用户面部视频数据和/或用户手部视频数据;
识别所述用户视频数据包括的表达信息;
将所述表达信息作为候选项进行显示。
10.一种计算机可读介质,其上存储有指令,当由一个或多个处理器执行时,使得装置执行如权利要求1至7中任一项所述的输入方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京搜狗科技发展有限公司,未经北京搜狗科技发展有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910828531.2/1.html,转载请声明来源钻瓜专利网。