[发明专利]基于文本内容特征的公众号信息存储方法及检索系统在审
| 申请号: | 201910392857.5 | 申请日: | 2019-05-13 |
| 公开(公告)号: | CN111046129A | 公开(公告)日: | 2020-04-21 |
| 发明(设计)人: | 刘春阳;梁汝锋;张旭;张传新;刘正阳;刘巨安 | 申请(专利权)人: | 国家计算机网络与信息安全管理中心;北京蓝光汇智网络科技有限公司 |
| 主分类号: | G06F16/31 | 分类号: | G06F16/31;G06F16/953;G06Q50/00 |
| 代理公司: | 北京远大卓悦知识产权代理事务所(普通合伙) 11369 | 代理人: | 史霞 |
| 地址: | 100029*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 基于 文本 内容 特征 公众 信息 存储 方法 检索系统 | ||
1.基于文本内容特征的公众号信息存储方法,其特征在于,包括:
采集公众号文章,提取公众号文章的唯一标识和特征文本,将特征文本转化为特征标识,并将公众号文章与特征标识关联存储;
根据公众号文章确定索引字段,建立索引字段与公众号文章的关联关系,生成索引数据,所述索引字段至少包括唯一标识;
为多个索引节点分别配置唯一标识范围,将索引数据按照其唯一标识存储至相应的索引节点。
2.如权利要求1所述的基于文本内容特征的公众号信息存储方法,其特征在于,还包括:
当采集到新的公众号文章,则将其唯一标识与已存储的公众号文章的唯一标识对比,若一致,则不存储。
3.如权利要求1所述的基于文本内容特征的公众号信息存储方法,其特征在于,选取公众号文章的最长文段作为特征文本;
若公众号文章文段数小于5,并且最长文段的字数小于200字,则选取标题作为特征文本。
4.如权利要求1或3所述的基于文本内容特征的公众号信息存储方法,其特征在于,用MurmurHash算法将特征文本转换为哈希值,将哈希值作为特征标识。
5.如权利要求4所述的基于文本内容特征的公众号信息存储方法,其特征在于,将唯一标识加上预设字符串,然后用MurmurHash算法转换为哈希值,将该哈希值和特征标识均作为索引字段。
6.基于文本内容特征的公众号信息检索系统,其特征在于,包括:
采集装置,其用于采集公众号文章和对应的唯一标识;
特征分析装置,其用于取公众号文章的特征文本,将特征文本转化为特征标识,并将特征标识与公众号文章关联;
存储装置,其用于存储已关联特征标识的公众号文章,建立索引字段与公众号文章的关联关系,生成索引数据,所述索引字段至少包括唯一标识;
多个索引节点;
节点控制装置,其为多个索引节点分别配置唯一标识范围,将索引数据按照其唯一标识存储至相应的索引节点。
7.如权利要求6所述的基于文本内容特征的公众号信息检索系统,其特征在于,还包括:
缓存器,其用于缓存公众号文章的唯一标识;
当采集到新的公众号文章的唯一标识已缓存在缓存器内,则不存储该公众号文章。
8.如权利要求7所述的基于文本内容特征的公众号信息检索系统,其特征在于,索引字段包括唯一标识和特征标识。
9.如权利要求8所述的基于文本内容特征的公众号信息检索系统,其特征在于,还包括:
结果显示装置,其用于接受检索请求;
其中,节点控制装置将检索请求发送至各索引节点,并将返回的索引数据合并,并利用合并的索引数据中的唯一标识字段至存储装置内检索,结果显示装置以特征标识为分组条件分组显示检索结果。
10.如权利要求6所述的基于文本内容特征的公众号信息检索系统,其特征在于,用MurmurHash算法将特征文本转换为哈希值,将该哈希值作为特征标识;
将唯一标识加上预设字符串,然后用MurmurHash算法转换为哈希值。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于国家计算机网络与信息安全管理中心;北京蓝光汇智网络科技有限公司,未经国家计算机网络与信息安全管理中心;北京蓝光汇智网络科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910392857.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种矫正坐姿和预防近视的装置与方法
- 下一篇:真空吸尘器
- 内容再现系统、内容提供方法、内容再现装置、内容提供装置、内容再现程序和内容提供程序
- 内容记录系统、内容记录方法、内容记录设备和内容接收设备
- 内容服务系统、内容服务器、内容终端及内容服务方法
- 内容分发系统、内容分发装置、内容再生终端及内容分发方法
- 内容发布、内容获取的方法、内容发布装置及内容传播系统
- 内容提供装置、内容提供方法、内容再现装置、内容再现方法
- 内容传输设备、内容传输方法、内容再现设备、内容再现方法、程序及内容分发系统
- 内容发送设备、内容发送方法、内容再现设备、内容再现方法、程序及内容分发系统
- 内容再现装置、内容再现方法、内容再现程序及内容提供系统
- 内容记录装置、内容编辑装置、内容再生装置、内容记录方法、内容编辑方法、以及内容再生方法





