[发明专利]面向问答系统的数据纠错方法及装置有效
申请号: | 201510870038.9 | 申请日: | 2015-12-02 |
公开(公告)号: | CN105468468B | 公开(公告)日: | 2018-07-27 |
发明(设计)人: | 孙永超 | 申请(专利权)人: | 北京光年无限科技有限公司 |
主分类号: | G06F11/07 | 分类号: | G06F11/07 |
代理公司: | 北京聿华联合知识产权代理有限公司 11611 | 代理人: | 张文娟;朱绘 |
地址: | 100000 北京市石景山区石景山*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 面向 问答 系统 数据 纠错 方法 装置 | ||
1.一种面向问答系统的数据纠错方法,其特征在于,包括:
接收用户输入信息,并将所述用户输入信息转换为标准文本格式信息,其中,所述用户输入信息包括语音信息和/或文本信息;
对所述标准文本格式信息进行去噪处理,并获得第一信息;
利用错误词库对所述第一信息进行错误判别;
当所述第一信息中包含错误内容时,提取所述第一信息中的所述错误内容;
对所述错误内容按照错误类型进行分类,在分类结果下,针对所述错误内容生成多条待选纠错内容,以按照整体句法分析及上下文系统对所述多条待选纠错内容排序,并根据所述排序结果,生成纠错内容,以利用所述纠错内容,对所述错误内容进行替换;
根据替换结果获得第二信息并输出。
2.根据权利要求1所述的面向问答系统的数据纠错方法,其特征在于,所述利用错误词库对所述第一信息进行错误判别,包括:
针对第一信息在错误词库检索,当所述第一信息中包含有错误词库中存储的错误内容,判别所述第一信息中包含错误内容;
还包括:
当所述检索失败时,通过正确语料基准模型计算所述第一信息中包含错误内容的概率;
当所述概率超过预设阈值时,判别所述第一信息中包含错误内容。
3.根据权利要求2所述的面向问答系统的数据纠错方法,其特征在于,还包括:采集标注为正确的语料,对所述正确语料基准模型进行训练。
4.根据权利要求2所述的面向问答系统的数据纠错方法,其特征在于,还包括:
将所述错误内容输入至错误词库中。
5.一种面向问答系统的数据纠错装置,其特征在于,包括:
用户信息接收模块,用于接收用户输入信息,并将所述用户输入信息转换为标准文本格式信息,其中,所述用户输入信息包括语音信息和/或文本信息;
预处理模块,用于对所述标准文本格式信息进行去噪处理,并获得第一信息;
错误判别模块,用于利用错误词库对所述第一信息进行错误判别;
错误内容提取模块,用于当所述第一信息中包含错误内容时,提取所述第一信息中的所述错误内容;
预设处理算法模块,用于对所述错误内容按照错误类型进行分类,在分类结果下,针对所述错误内容生成多条待选纠错内容,以按照整体句法分析及上下文系统对所述多条待选纠错内容排序,并根据所述排序结果,生成纠错内容,以利用所述纠错内容,对所述错误内容进行替换;
正确内容输出模块,用于根据替换结果获得第二信息并输出。
6.根据权利要求5所述的面向问答系统的数据纠错装置,其特征在于,所述错误判别模块还包括:
错误内容概率计算子模块,用于针对第一信息在错误词库检索失败时,通过正确语料基准模型计算所述第一信息中包含错误内容的概率;
错误内容判别子模块,用于当所述概率超过预设阈值时,判别所述第一信息中包含错误内容。
7.根据权利要求5所述的面向问答系统的数据纠错装置,其特征在于,所述预设处理算法模块,包括:
待选纠错内容获取子模块,用于对所述错误内容按照错误类型进行分类,在分类结果下,针对错误内容生成多条待选纠错内容;
待选纠错内容排序子模块,用于按照整体句法分析及上下文系统对所述多条待选纠错内容排序;
纠错内容生成子模块,用于根据所述排序结果,生成纠错内容;
替换子模块,利用所述纠错内容,对所述错误内容进行替换。
8.根据权利要求6所述的面向问答系统的数据纠错装置,其特征在于,还包括,正确语料训练模块,用于采集标注为正确的语料,对所述正确语料基准模型进行训练。
9.根据权利要求5-8任一所述的面向问答系统的数据纠错装置,其特征在于,还包括,错误语料补充模块,用于将所述错误内容输入至错误词库中。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京光年无限科技有限公司,未经北京光年无限科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201510870038.9/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置