[发明专利]一种输入方法及装置在审
申请号: | 201910828531.2 | 申请日: | 2019-09-03 |
公开(公告)号: | CN112446265A | 公开(公告)日: | 2021-03-05 |
发明(设计)人: | 王丹;崔欣 | 申请(专利权)人: | 北京搜狗科技发展有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06F3/01 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 柳欣 |
地址: | 100084 北京市海淀区中关*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 输入 方法 装置 | ||
本申请实施例公开了一种输入方法及装置,具体为,当用户不方便进行语音或拼音输入时,输入法客户端采集用户视频数据,该用户视频数据中可以包括用户面部视频数据和/或用户手部视频数据。同时,客户端对用户视频数据进行识别,获得该用户视频数据包括的表达信息,进而将该表达信息作为候选项进行显示,以使得用户选择所要表达的候选项。即,本申请当用户不方便拼音或语音输入时,可以通过面部视频数据,如面部表情、唇语等,和/或用户手部视频数据,如手势或手语等操作完成语句的输入,提高输入的灵活性以及用户多方面的输入体验。
技术领域
本申请涉及互联网技术领域,具体涉及一种输入方法及装置。
背景技术
随着终端设备的普及,用户会在终端设备中进行大量输入操作。通常可以利用输入法进行输入,输入法指将各种符号输入计算机或其他设备而采用的编码方法。在现有技术中,使用输入法可以实现拼音输入或者语音输入来达到输入的目的。但是,受到使用场景的限制,例如双手忙碌且不方便说话时,则无法实现输入。
发明内容
有鉴于此,本申请实施例提供一种输入方法及装置,以实现更为灵活的输入。
为解决上述问题,本申请实施例提供的技术方案如下:
在本申请实施例第一方面,提供了一种输入方法,该方法采集用户视频数据,所述用户视频数据包括用户面部视频数据和/或用户手部视频数据;
识别所述用户视频数据包括的表达信息;
将所述表达信息作为候选项进行显示。
在一种可能的实现方式中,所述识别所述用户视频数据包括的表达信息,包括:
对所述用户视频数据进行分类,获得视频分类结果;
根据所述视频分类结果识别所述用户视频数据包括的表达信息。
在一种可能的实现方式中,所述根据所述视频分类结果识别所述用户视频数据包括的表达信息,包括:
当所述视频分类结果包括面部表情视频数据时,根据所述面部表情视频数据中的用户面部特征确定对应的表达信息;
当所述视频分类结果包括唇语视频数据时,根据所述唇语视频数据中的唇形特征确定发音,并根据所述发音确定对应的表达信息;
当所述视频分类结果包括手势视频数据时,根据所述手势视频数据包括的用户手部特征确定对应的表达信息;
当所述视频分类结果包括手语视频数据时,根据所述手语视频数据中的用户手部特征确定对应的语义,并根据所述语义确定对应的表达信息。
在一种可能的实现方式中,所述对所述用户视频数据进行分类,获得视频分类结果,包括:
从所述用户视频数据提取用户面部特征和/或用户手部特征;
根据所述用户面部特征和/所述用户手部特征,确定所述视频分类结果。
在一种可能的实现方式中,所述根据所述用户面部特征和/或所述用户手部特征,确定所述视频分类结果,包括:
当所述用户视频数据包括所述用户面部特征时,如果所述用户面部特征中唇形特征连续变化,所述视频分类结果包括唇语视频数据;否则,所述视频分类结果包括面部表情视频数据;
当所述用户视频数据包括所述用户手部特征时,如果所述用户手部特征连续变化,所述视频分类结果包括手语视频数据;否则,所述视频分类结果包括手势视频数据。
在一种可能的实现方式中,所述识别所述用户视频数据包括的表达信息,包括:
识别所述用户视频数据中是否包括用户面部特征,如果包括所述用户面部特征,根据所述用户面部特征确定对应的表达信息;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京搜狗科技发展有限公司,未经北京搜狗科技发展有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910828531.2/2.html,转载请声明来源钻瓜专利网。