[发明专利]一种数据处理方法、装置和用于数据处理的装置在审
申请号: | 201910730444.3 | 申请日: | 2019-08-08 |
公开(公告)号: | CN112347775A | 公开(公告)日: | 2021-02-09 |
发明(设计)人: | 龚良泉;叶祺;李刚 | 申请(专利权)人: | 北京搜狗科技发展有限公司 |
主分类号: | G06F40/289 | 分类号: | G06F40/289;G06F40/295;G06F40/30;G06K9/62;G06N3/04;G06N3/08 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 郑傲日 |
地址: | 100084 北京市海淀区中关*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据处理 方法 装置 用于 | ||
本发明实施例提供了一种数据处理方法、装置和用于数据处理的装置。其中的方法具体包括:对文本进行分词,以得到所述文本对应的分词结果;将所述分词结果输入标签提取模型,所述标签提取模型为根据收集的样本数据对训练得到的深度神经网络模型;其中,所述样本数据对包括:样本文本、所述样本文本对应的短语标签;通过所述标签提取模型对所述分词结果进行标签提取,以得到所述分词结果对应的短语标签。本发明实施例可以提高推荐的准确性。
技术领域
本发明涉及计算机技术领域,尤其涉及一种数据处理方法、装置和用于数据处理的装置。
背景技术
随着互联网技术的发展,人们可以通过检索系统或者推荐系统获取各种网络信息。
在进行检索或者推荐的过程中,标签扮演着重要的角色。目前主要通过如下方式获取网络内容对应的标签:首先可以建立实体词表,其中可以包括美食类、经济类等常用的实体词;然后对网络内容进行识别,如果其中包含实体词表中的实体词,再将该网络内容打上该实体词相对应的标签。
然而,这样获取的标签可能存在语义不够准确或者存在歧义的情况,例如,对于标签“李白”,由于该标签较短,语义不够丰富,可能会引起歧义,该标签可以指王者荣耀的李白,也可以指历史上的诗人李白。由此,将会进一步影响检索或者推荐的准确性。
发明内容
本发明实施例提供一种数据处理方法、装置和用于数据处理的装置,可以提高推荐的准确性。
为了解决上述问题,本发明实施例公开了一种数据处理方法,所述方法包括:
对文本进行分词,以得到所述文本对应的分词结果;
将所述分词结果输入标签提取模型,所述标签提取模型为根据收集的样本数据对训练得到的深度神经网络模型;其中,所述样本数据对包括:样本文本、所述样本文本对应的短语标签;
通过所述标签提取模型对所述分词结果进行标签提取,以得到所述分词结果对应的短语标签。
另一方面,本发明实施例公开了一种数据处理装置,所述装置包括:
分词模块,用于对文本进行分词,以得到所述文本对应的分词结果;
输入模块,用于将所述分词结果输入标签提取模型,所述标签提取模型为根据收集的样本数据对训练得到的深度神经网络模型;其中,所述样本数据对包括:样本文本、所述样本文本对应的短语标签;
提取输出模块,用于通过所述标签提取模型对所述分词结果进行标签提取,以得到所述分词结果对应的短语标签。
再一方面,本发明实施例公开了一种用于数据处理的装置,包括有存储器,以及一个或者一个以上的程序,其中一个或者一个以上程序存储于存储器中,且经配置以由一个或者一个以上处理器执行所述一个或者一个以上程序包含用于进行以下操作的指令:
对文本进行分词,以得到所述文本对应的分词结果;
将所述分词结果输入标签提取模型,所述标签提取模型为根据收集的样本数据对训练得到的深度神经网络模型;其中,所述样本数据对包括:样本文本、所述样本文本对应的短语标签;
通过所述标签提取模型对所述分词结果进行标签提取,以得到所述分词结果对应的短语标签。
又一方面,本发明实施例公开了一种机器可读介质,其上存储有指令,当由一个或多个处理器执行时,使得装置执行如前述一个或多个所述的数据处理方法。
本发明实施例包括以下优点:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京搜狗科技发展有限公司,未经北京搜狗科技发展有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910730444.3/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种虚拟功能按钮显示方法及装置
- 下一篇:高度调节装置及洗碗机