[发明专利]敏感词过滤的方法、装置、移动终端及存储介质在审
| 申请号: | 201711414090.9 | 申请日: | 2017-12-25 |
| 公开(公告)号: | CN108228760A | 公开(公告)日: | 2018-06-29 |
| 发明(设计)人: | 邱振东 | 申请(专利权)人: | 湛江正信科技服务有限公司 |
| 主分类号: | G06F17/30 | 分类号: | G06F17/30;G10L13/08 |
| 代理公司: | 广州广信知识产权代理有限公司 44261 | 代理人: | 张文雄 |
| 地址: | 524022 广东省湛江市*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 敏感词 文本文件 过滤 音频数据文件 转换 音频数据库 移动终端 计算机可读存储介质 存储 发送 比对步骤 存储介质 接收终端 信息过滤 有机状态 转换函数 计算量 树结构 文本库 自动机 比对 查找 | ||
本发明公开了一种敏感词过滤的方法,包括步骤:第一转换步骤:将敏感词文本库转换成敏感词音频数据库,根据敏感词查找树结构建立确定有机状态自动机中各个敏感词的转换函数,将所述敏感词音频数据库中的敏感词构建成敏感词树;接收步骤:接收待发送的文本文件,并存储为临时文本文件;第二转换步骤:将临时文本文件转换成临时音频数据文件并存储;比对步骤:将所述敏感词树分别与临时音频数据文件进行比对;过滤步骤:对临时文本文件进行过滤,并将过滤后的临时文本文件发送至接收终端。本发明还公开了一种敏感词过滤的装置、移动终端和计算机可读存储介质。本发明在很大程度上满足信息过滤的要求,而且计算量小、速度快。
技术领域
本发明涉及信息过滤技术领域,尤其涉及一种敏感词过滤的方法、装置、移动终端及存储介质。
背景技术
目前先有的文本文件内容主要有四种敏感词过滤技术,即基于因特网内容分级平台(PICS)过滤、敏感词数据库过滤、关键字或词过滤以及智能内容理解过滤。
由于信息传送者一般不会主动给其与发送的文本文件按照PICS标准贴标签,所以基于PICS过滤在实际应用中效果不大;敏感词数据库过滤方式为现有技术中应用作为广泛的方式,其将长期积累的敏感词形成的敏感词数据库(敏感词文本库)对文本内容进行逐个排查,当与敏感词一致时,则对其进行过滤,但是,由于敏感词数据库是共用或为大家所熟知的,因此,信息传送者可以采用修改待发送文本文件的方式进行规避,例如在发送文本文件中带有的敏感词中间增加空格或特殊符号,或者敏感词中部分字、词以拼音替代,这样,敏感词数据库无法对其进行识别和过滤;关键字或词过滤能够实现较快的过滤速度,但是往往不考虑文本内容,漏报、错报率较高,而且关键字词更容易规避;智能内容理解过滤技术发展不成熟,同时其计算量大、速度慢。
发明内容
为了克服现有技术的不足,本发明的目的之一在于提供一种敏感词过滤的方法,其在现有敏感词文本库的基础上,将待发送文本文件以及敏感词文本库均通过文本-语音转换后形成音频数据文件和敏感词音频数据库,然后再进行比对,在很大程度上满足信息过滤的要求,而且计算量小、速度快。
本发明的目的之二在于提供一种敏感词过滤的装置,其在现有敏感词文本库的基础上,将待发送文本文件以及敏感词文本库均通过文本-语音转换后形成音频数据文件和敏感词音频数据库,然后再进行比对,在很大程度上满足信息过滤的要求,而且计算量小、速度快。
本发明的目的之三在于提供一种实现上述敏感词过滤的方法的移动终端。
本发明的目的之四在于提供一种存储上述敏感词过滤的方法的计算机可读存储介质。
本发明的目的之一采用如下技术方案实现:
一种敏感词过滤的方法,包括步骤:
第一转换步骤:通过文本-语音转换将敏感词文本库转换成敏感词音频数据库,根据敏感词查找树结构建立确定有机状态自动机中各个敏感词的转换函数,将所述敏感词音频数据库中的敏感词构建成敏感词树;
接收步骤:接收待发送的文本文件,并存储为临时文本文件;
第二转换步骤:通过文本-语音转换将临时文本文件转换成临时音频数据文件并存储,所述临时文本文件和临时音频数据文件相关联;
比对步骤:将所述敏感词树分别与临时音频数据文件进行比对,获得所述临时音频数据文件中具有的敏感词树,组成音频过滤集合,并记录这些敏感词树在临时音频数据文件中的位置;
过滤步骤:对临时文本文件进行过滤,并将过滤后的临时文本文件发送至接收终端,所述对临时文本文件进行过滤的方法是将临时文本文件中与所述位置相对应的文本内容进行删除。
进一步地,所述敏感词查找树结构为:
根节点不包含任何字符;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于湛江正信科技服务有限公司,未经湛江正信科技服务有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711414090.9/2.html,转载请声明来源钻瓜专利网。





