[发明专利]文本纠错方法、装置、设备以及存储介质在审
申请号: | 202110251825.0 | 申请日: | 2021-03-08 |
公开(公告)号: | CN112926306A | 公开(公告)日: | 2021-06-08 |
发明(设计)人: | 李浩;庞敏辉;赵志新;冯婧超 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06F40/232 | 分类号: | G06F40/232;G06K9/62 |
代理公司: | 北京英赛嘉华知识产权代理有限责任公司 11204 | 代理人: | 王达佐;马晓亚 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 文本 纠错 方法 装置 设备 以及 存储 介质 | ||
本申请公开了文本纠错方法、装置、设备以及存储介质,涉及云计算、自然语言处理领域。具体实现方案为:接收目标文本;利用预先训练的文本纠错模型,对目标文本进行纠错,得到纠错文本;利用预先训练的分类模型,确定纠错文本的误纠概率;响应于确定误纠概率小于预设阈值,输出纠错文本。本实现方式可以提高文本纠错的正确率,降低误纠率,更贴近用户的真实诉求。
技术领域
本申请涉及计算机技术领域,具体涉及云计算、自然语言处理领域,尤其涉及文本纠错方法、装置、设备以及存储介质。
背景技术
文本纠错的目的是将文本中出现的错字、错词等错误纠正过来,改正成正确的字、词。文本纠错是希望可以实现将一个错误句子纠正成一个正确句子的功能。
因为在日常的客服对话系统,搜索系统等许多系统中,都需要用户输入文本或者输入语音再转换为文本,在得到文本信息后需要对文本进行处理,识别,完成对话,搜索等功能。如果文本本身存在错误那么对于下游的处理任务来说,会在很大程度上降低下游任务的准确率,召回率等等指标。所以通过文本纠错就可以对用户输入文本信息中的拼写错误等进行纠正,从而得到用户想表达的真实含义。
在工业落地场景上因为对并发以及处理速度有着很严格的要求,所以要求纠错算法的复杂度较低,任务处理时间较短。并且在满足性能要求的前提上,希望纠正的召回率较高,误纠(指将正确的字符纠正为错误字符)率较低,从而更贴近用户的真实诉求,为下游任务提供更加真实的文本数据。
发明内容
提供了一种文本纠错方法、装置、设备以及存储介质。
根据第一方面,提供了一种文本纠错方法,包括:接收目标文本;利用预先训练的文本纠错模型,对目标文本进行纠错,得到纠错文本;利用预先训练的分类模型,确定纠错文本的误纠概率;响应于确定误纠概率小于预设阈值,输出纠错文本。
根据第二方面,提供了一种文本纠错装置,包括:文本接收单元,被配置成接收目标文本;文本纠错单元,被配置成利用预先训练的文本纠错模型,对目标文本进行纠错,得到纠错文本;误纠判断单元,被配置成利用预先训练的分类模型,确定纠错文本的误纠概率;文本输出单元,被配置成响应于确定误纠概率小于预设阈值,输出纠错文本。
根据第三方面,提供了一种文本纠错电子设备,包括:至少一个处理器;以及与上述至少一个处理器通信连接的存储器;其中,存储器存储有可被至少一个处理器执行的指令,上述指令被至少一个处理器执行,以使至少一个处理器能够执行如第一方面所描述的方法。
根据第四方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,上述计算机指令用于使计算机执行如第一方面所描述的方法。
根据第五方面,一种计算机程序产品,包括计算机程序,上述计算机程序在被处理器执行时实现如第一方面所描述的方法。
根据本申请的技术可以提高文本纠错的正确率,降低误纠率,更贴近用户的真实诉求。
应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
附图用于更好地理解本方案,不构成对本申请的限定。其中:
图1是本申请的一个实施例可以应用于其中的示例性系统架构图;
图2是根据本申请的文本纠错方法的一个实施例的流程图;
图3是根据本申请的文本纠错方法的一个应用场景的示意图;
图4是根据本申请的文本纠错方法的另一个实施例的流程图;
图5是根据本申请的文本纠错装置的一个实施例的结构示意图;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110251825.0/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种多功能按摩帽及按摩方法
- 下一篇:一种缓释药剂检验用分离设备