[发明专利]基于人脸识别SDK的多模态大屏交互系统

说明书

本发明涉及客厅互动娱乐领域，公开了一种基于人脸识别SDK的多模态大屏交互系统，包括机顶盒装置、云端应用分析模块和移动终端，机顶盒装置连接大屏电视HDMI高清视频传输接口，云端应用分析模块与机顶盒装置连接，移动终端通过互联网与云端应用分析模块连接，移动终端中安装有终端应用软件，机顶盒装置包括人脸采集模块、人脸识别模块和个性化设置模块，人脸采集模块采集各家庭成员的人脸二维图像并发送给人脸识别模块，人脸识别模块通过人脸识别SDK算法对人脸二维图像进行分析，识别人脸特征并标定家庭成员用户角色，人脸识别模块与云端应用分析模块连接，个性化设置模块与终端应用软件连接。本发明操作简单、智能化较高、充分个性化。

技术领域

本发明涉及客厅互动娱乐领域，特别涉及一种基于人脸识别SDK(SoftwareDevelopment Kit，软件开发工具包)的多模态大屏交互系统。

背景技术

随着人民生活水平的快速提高，大屏电视在家庭中扮演着至关重要的角色。不同家庭成员在不同时段对大屏电视的需求存在着巨大差异，以一个典型三代同堂家庭的不同角色成员为例：老人在工作日的白天偏向于观看养生类节目、不同类型电视剧，同时老人通常对电子产品的使用熟练度较低，对复杂交互的培训成本很高；工作族成员在傍晚下班回家后喜欢看新闻类、电影等应用，他们通常是大屏电视的购买决策者；小孩在周末通常由父母安排一起观看早教类节目、或一起玩益智类游戏等教育类资讯节目，更重要的是家长通常对小孩对电视的使用时长有严格限制，对防沉迷有很高诉求。

为了满足家庭成员对大屏电视的不同需求，一些有实力的传统智能电视厂商和机顶盒厂商研发了针对电视大屏的专用操作系统：提供类似手机操作系统中的应用商店，由家庭成员根据自身需求来搜索、下载和安装不同类型应用。此类专用操作系统通常附带一个带有物理按键的遥控器完成与操作系统的信息交互，技术实现简单、制造成本低廉，但是这种交互方式操作复杂，上手门槛较高、交互效率较低，且无法充分满足不同家庭成员在不同时间段的个性化使用诉求，从而导致实际智能化程度较低。

发明内容

本发明要解决的技术问题在于，针对现有技术的上述操作复杂、智能化不高、不够个性化的缺陷，提供一种操作简单、智能化较高、充分个性化的基于人脸识别SDK的多模态大屏交互系统。

本发明解决其技术问题所采用的技术方案是：构造一种基于人脸识别SDK的多模态大屏交互系统，包括机顶盒装置、云端应用分析模块和移动终端，所述机顶盒装置连接大屏电视HDMI高清视频传输接口，所述云端应用分析模块通过互联网与所述机顶盒装置连接，所述移动终端通过互联网与所述云端应用分析模块连接，所述移动终端中安装有终端应用软件，所述机顶盒装置包括人脸采集模块、人脸识别模块和个性化设置模块，所述人脸采集模块采集各家庭成员的人脸二维图像并将其发送给所述人脸识别模块，所述人脸识别模块通过人脸识别SDK算法对所述人脸二维图像进行分析，识别人脸特征并标定家庭成员用户角色，所述人脸识别模块通过互联网与所述云端应用分析模块连接，所述个性化设置模块通过互联网与所述终端应用软件连接、用于提供系统级和应用级个性化设置。

在本发明所述的基于人脸识别SDK的多模态大屏交互系统中，所述人脸识别模块提取所述人脸二维图像中的人脸特征模型，通过基于模板匹配的人脸识别算法与预先定义的目标人脸模型进行相似度匹配，标定出家庭成员用户角色。

在本发明所述的基于人脸识别SDK的多模态大屏交互系统中，所述云端应用分析模块设置在因特网服务器中。

在本发明所述的基于人脸识别SDK的多模态大屏交互系统中，所述机顶盒装置的输入端通过所述大屏电视HDMI高清视频传输接口与大屏电视的HDMI传输接口连接，所述机顶盒装置的输出端通过网线或Wi-Fi无线网络与所述云端应用分析模块连接，所述云端应用分析模块根据所述人脸识别模块判定家庭成员身份，通过分析不同家庭成员用户的个性化诉求，将适应不同家庭成员用户的系统配置和应用通过云端自动下发至所述机顶盒装置供用户使用。