[发明专利]一种智能决策会议机器人有效
| 申请号: | 202010456687.5 | 申请日: | 2020-05-26 |
| 公开(公告)号: | CN111768773B | 公开(公告)日: | 2023-08-29 |
| 发明(设计)人: | 陈森;王坚;凌卫青 | 申请(专利权)人: | 同济大学 |
| 主分类号: | G10L15/22 | 分类号: | G10L15/22;G10L15/02;G10L15/25;G10L15/26;G10L25/24;G06F40/30 |
| 代理公司: | 上海科盛知识产权代理有限公司 31225 | 代理人: | 叶敏华 |
| 地址: | 200092 *** | 国省代码: | 上海;31 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 智能 决策 会议 机器人 | ||
1.一种智能决策会议机器人,其特征在于,包括放置于会议室内空间的机器人机身本体(1),所述机身本体(1)上安装有分别与中央处理器(2)相连接的摄像头(3)、触摸显示屏(4),所述中央处理器(2)还连接有存储器(5)以及包括多个麦克风的麦克风阵列(6),所述摄像头(3)用于采集会议参与者的面部图像;
所述麦克风阵列(6)中各麦克风均配置有对应的发言编码,且每个麦克风分别对应于一位会议参与者,以分别对应采集各会议参与者的语音数据;
所述中央处理器(2)用于对各会议参与者的语音数据依次进行语音识别和观点分析,并生成会议记录数据表和会议决策知识图谱;
所述触摸显示屏(4)用于协助用户进行人机交互操作,以及显示来自中央处理器(2)输出的数据信息;
所述存储器(5)用于存储会议记录数据和会议决策知识图谱;
所述中央处理器(2)内设有语音识别单元(201)、观点分析单元(202)、数据整理单元(203)和决策图谱生成单元(204),所述语音识别单元(201)的输入端与麦克风阵列(6)相连接,以获取对应于发言编码的语音数据,所述语音识别单元(201)用于识别并输出对应于语音数据的文本数据,所述语音识别单元(201)的输出端连接至观点分析单元(202),以对文本数据进行观点倾向性分析,得到对应的观点分析数据,所述观点分析单元(202)分别与数据整理单元(203)和决策图谱生成单元(204)相连接,由数据整理单元(203)生成会议记录数据、决策图谱生成单元(204)输出会议决策知识图谱;
所述数据整理单元(203)还分别与摄像头(3)和存储器(5)相连接,以分别接收会议参与者的面部图像、将会议记录数据传输至存储器(5)进行存储,所述决策图谱生成单元(204)与存储器(5)相连接,以将会议决策知识图谱传输至存储器(5)进行存储;
所述中央处理器(2)的具体工作过程包括以下步骤:
S1、数据整理单元(203)从摄像头(3)获取对应于发言编码的会议参与者面部图像;
S2、语音识别单元(201)从麦克风阵列(6)获取对应于发言编码的语音数据,并对语音数据依次进行预处理、特征提取和语音解码搜索,以输出对应的文本数据给观点分析单元(202);
S3、观点分析单元(202)对文本数据进行观点倾向分析,得到观点分析数据,并将该文本数据及对应的观点分析数据分别传输给数据整理单元(203)和决策图谱生成单元(204);
S4、基于发言编码及对应的会议参与者面部图像、文本数据、观点分析数据,由数据整理单元(203)生成会议记录数据表,并将该会议记录数据表传输给存储器(5);
S5、基于各会议参与者发言的文本数据和观点分析数据,由知识图谱生成单元生成会议决策知识图谱,并将该会议决策知识图谱传输给存储器(5);
所述步骤S2中预处理具体是切除语音数据的首尾端静音以及使用移动窗函数对语音数据进行声音分帧操作;
特征提取具体是基于Mel倒谱系数,将每一帧声音波形变成一个包含声音信息的多维向量;
语音解码搜索具体是根据预先训练好的声学模型和语言模型,结合字典对提取特征后的语音数据进行解码,从而得到对应的文本数据。
2.根据权利要求1所述的一种智能决策会议机器人,其特征在于,所述会议记录数据包含对应于发言编码的会议参与者面部图像、会议参与者发言文本数据和会议参与者观点分析数据。
3.根据权利要求1所述的一种智能决策会议机器人,其特征在于,所述步骤S3中观点分析单元(202)对文本数据进行观点倾向分析的具体过程为:
S31、将文本数据分割为若干语义段;
S32、针对各语义段,采用条件随机场模型进行主观内容提取和观点倾向识别,以确定各语义段的观点倾向值;
S33、计算各语义段的权重值,结合各语义段的观点倾向值,即可得到该文本数据的观点分析数据。
4.根据权利要求1所述的一种智能决策会议机器人,其特征在于,所述步骤S5中会议决策知识图谱中的实体包括会议参与者和观点分析数据,会议决策知识图谱中的关系为各会议参与者分别与各个观点分析数据之间到的关系。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于同济大学,未经同济大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010456687.5/1.html,转载请声明来源钻瓜专利网。





