[发明专利]分布式系统的数据提取方法、装置、服务器和存储介质有效
| 申请号: | 201911018401.9 | 申请日: | 2019-10-24 |
| 公开(公告)号: | CN110727654B | 公开(公告)日: | 2022-02-18 |
| 发明(设计)人: | 张超;刘涛;张志远;万月亮 | 申请(专利权)人: | 北京锐安科技有限公司 |
| 主分类号: | G06F16/182 | 分类号: | G06F16/182;G06F16/172;G06F16/16 |
| 代理公司: | 北京品源专利代理有限公司 11332 | 代理人: | 孟金喆 |
| 地址: | 100044 北京市海淀区西小口*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 分布式 系统 数据 提取 方法 装置 服务器 存储 介质 | ||
1.一种分布式系统的数据提取方法,其特征在于,包括:
从新增数据中提取第一数据和第一数据关系,所述第一数据关系为第一数据之间的第一关联关系;
获取历史数据,所述历史数据包括第二数据和第二数据关系,所述第二数据关系为第二数据之间的第二关联关系;
对所述第一数据和第二数据进行匹配,同时对所述第一数据关系和第二数据关系进行匹配,以生成匹配结果;
根据所述匹配结果将所述新增数据和所述历史数据合并后进行存储;
所述对所述第一数据和第二数据进行匹配,同时对所述第一数据关系和第二数据关系进行匹配,以生成匹配结果之前,包括:
以所述第一数据作为第一节点;
以所述第一数据关系作为第一连接线;
将所述第一节点和第一连接线组成第一关系图;
以所述第二数据作为第二节点;
以所述第二数据关系作为第二连接线;
将所述第二节点和第二连接线组成第二关系图;
所述对所述第一数据和第二数据进行匹配,同时对所述第一数据关系和第二数据关系进行匹配,以生成匹配结果,包括:
将所述第一节点与第二节点依次进行比对,判断每个所述第一节点与所述第二节点是否重复;
若重复,则删去所述第一节点,将所述第二节点保存为第三节点;
若不重复,则将所述第一节点与所述第二节点合并为所述第三节点;
将所述第一连接线与第二连接线依次进行比对,判断每个所述第一连接线与所述第二连接线是否重复;
若重复,则删去所述第一连接线,将所述第二连接线保存为第三连接线;
若不重复,则将所述第一连接线与所述第二连接线合并为所述第三连接线;
基于所述第三节点和第三连接线生成第三关系图。
2.根据权利要求1所述的分布式系统的数据提取方法,其特征在于,所述对所述第一数据和第二数据进行匹配,同时对所述第一数据关系和第二数据关系进行匹配,以生成匹配结果,包括:
将所述第一数据与第二数据依次进行比对,判断每个所述第一数据与所述第二数据是否重复;
若重复,则删去所述第一数据,将所述第二数据保存为第三数据;
若不重复,则将所述第一数据与所述第二数据合并为所述第三数据;
将所述第一数据关系与第二数据关系依次进行比对,判断每个所述第一数据关系与所述第二数据关系是否重复;
若重复,则删去所述第一数据关系,将所述第二数据关系保存为所述第三数据关系;
若不重复,则将所述第一数据关系与所述第二数据关系合并为所述第三数据关系。
3.根据权利要求2所述的分布式系统的数据提取方法,其特征在于,在所述根据所述匹配结果将所述新增数据和所述历史数据合并后进行存储之前,还包括:
在所述第三数据中标记所述第一数据和第一数据关系。
4.根据权利要求1所述的分布式系统的数据提取方法,其特征在于,所述从新增数据中提取第一数据和第一数据关系,包括:
基于第一数据模板,从所述新增数据中提取第一数据;
基于第一关系模板,从所述新增数据中提取第一数据关系。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京锐安科技有限公司,未经北京锐安科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911018401.9/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





