[发明专利]词典降维方法及装置、信息分类方法及装置在审
申请号: | 201510874528.6 | 申请日: | 2015-12-02 |
公开(公告)号: | CN105512104A | 公开(公告)日: | 2016-04-20 |
发明(设计)人: | 张昊;朱频频 | 申请(专利权)人: | 上海智臻智能网络科技股份有限公司 |
主分类号: | G06F17/27 | 分类号: | G06F17/27 |
代理公司: | 工业和信息化部电子专利中心 11010 | 代理人: | 秦莹 |
地址: | 201803 上海市嘉*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种词典降维方法及装置、信息分类方法及装置。该词典降维方法包括:对从问答日志中获取的语料进行预处理,得到文本数据;对文本数据进行分词处理,得到多个语料词语;对语料词语进行过滤处理,得到包括多个关键词的词典;根据问答日志统计语料涉及到的信息分类,计算词典中每个关键词的信息熵,将信息熵小于信息熵阈值的关键词从词典中删除,其中,信息熵表示该关键词在各信息分类中出现的概率。借助于本发明的技术方案,能够快速的过滤对分类无用的词语对词典进行降维,降维后的词典对于分类结果具有很好的准确率。 | ||
搜索关键词: | 词典 方法 装置 信息 分类 | ||
【主权项】:
一种词典降维方法,其特征在于,包括:对从问答日志中获取的语料进行预处理,得到文本数据;对所述文本数据进行分词处理,得到多个语料词语;对所述语料词语进行过滤处理,得到包括多个关键词的词典;根据所述问答日志统计所述语料涉及到的信息分类,计算所述词典中每个关键词的信息熵,将信息熵小于信息熵阈值的关键词从所述词典中删除,其中,所述信息熵表示该关键词在各信息分类中出现的概率。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海智臻智能网络科技股份有限公司,未经上海智臻智能网络科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201510874528.6/,转载请声明来源钻瓜专利网。
- 信息记录介质、信息记录方法、信息记录设备、信息再现方法和信息再现设备
- 信息记录装置、信息记录方法、信息记录介质、信息复制装置和信息复制方法
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录设备、信息重放设备、信息记录方法、信息重放方法、以及信息记录介质
- 信息存储介质、信息记录方法、信息重放方法、信息记录设备、以及信息重放设备
- 信息存储介质、信息记录方法、信息回放方法、信息记录设备和信息回放设备
- 信息记录介质、信息记录方法、信息记录装置、信息再现方法和信息再现装置
- 信息终端,信息终端的信息呈现方法和信息呈现程序
- 信息创建、信息发送方法及信息创建、信息发送装置