[发明专利]基于文本内容特征的公众号信息存储方法及检索系统在审

专利信息
申请号: 201910392857.5 申请日: 2019-05-13
公开(公告)号: CN111046129A 公开(公告)日: 2020-04-21
发明(设计)人: 刘春阳;梁汝锋;张旭;张传新;刘正阳;刘巨安 申请(专利权)人: 国家计算机网络与信息安全管理中心;北京蓝光汇智网络科技有限公司
主分类号: G06F16/31 分类号: G06F16/31;G06F16/953;G06Q50/00
代理公司: 北京远大卓悦知识产权代理事务所(普通合伙) 11369 代理人: 史霞
地址: 100029*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 基于 文本 内容 特征 公众 信息 存储 方法 检索系统
【权利要求书】:

1.基于文本内容特征的公众号信息存储方法,其特征在于,包括:

采集公众号文章,提取公众号文章的唯一标识和特征文本,将特征文本转化为特征标识,并将公众号文章与特征标识关联存储;

根据公众号文章确定索引字段,建立索引字段与公众号文章的关联关系,生成索引数据,所述索引字段至少包括唯一标识;

为多个索引节点分别配置唯一标识范围,将索引数据按照其唯一标识存储至相应的索引节点。

2.如权利要求1所述的基于文本内容特征的公众号信息存储方法,其特征在于,还包括:

当采集到新的公众号文章,则将其唯一标识与已存储的公众号文章的唯一标识对比,若一致,则不存储。

3.如权利要求1所述的基于文本内容特征的公众号信息存储方法,其特征在于,选取公众号文章的最长文段作为特征文本;

若公众号文章文段数小于5,并且最长文段的字数小于200字,则选取标题作为特征文本。

4.如权利要求1或3所述的基于文本内容特征的公众号信息存储方法,其特征在于,用MurmurHash算法将特征文本转换为哈希值,将哈希值作为特征标识。

5.如权利要求4所述的基于文本内容特征的公众号信息存储方法,其特征在于,将唯一标识加上预设字符串,然后用MurmurHash算法转换为哈希值,将该哈希值和特征标识均作为索引字段。

6.基于文本内容特征的公众号信息检索系统,其特征在于,包括:

采集装置,其用于采集公众号文章和对应的唯一标识;

特征分析装置,其用于取公众号文章的特征文本,将特征文本转化为特征标识,并将特征标识与公众号文章关联;

存储装置,其用于存储已关联特征标识的公众号文章,建立索引字段与公众号文章的关联关系,生成索引数据,所述索引字段至少包括唯一标识;

多个索引节点;

节点控制装置,其为多个索引节点分别配置唯一标识范围,将索引数据按照其唯一标识存储至相应的索引节点。

7.如权利要求6所述的基于文本内容特征的公众号信息检索系统,其特征在于,还包括:

缓存器,其用于缓存公众号文章的唯一标识;

当采集到新的公众号文章的唯一标识已缓存在缓存器内,则不存储该公众号文章。

8.如权利要求7所述的基于文本内容特征的公众号信息检索系统,其特征在于,索引字段包括唯一标识和特征标识。

9.如权利要求8所述的基于文本内容特征的公众号信息检索系统,其特征在于,还包括:

结果显示装置,其用于接受检索请求;

其中,节点控制装置将检索请求发送至各索引节点,并将返回的索引数据合并,并利用合并的索引数据中的唯一标识字段至存储装置内检索,结果显示装置以特征标识为分组条件分组显示检索结果。

10.如权利要求6所述的基于文本内容特征的公众号信息检索系统,其特征在于,用MurmurHash算法将特征文本转换为哈希值,将该哈希值作为特征标识;

将唯一标识加上预设字符串,然后用MurmurHash算法转换为哈希值。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于国家计算机网络与信息安全管理中心;北京蓝光汇智网络科技有限公司,未经国家计算机网络与信息安全管理中心;北京蓝光汇智网络科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201910392857.5/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top