[发明专利]安全多方数据融合与联邦共享方法、装置、设备及介质有效
申请号: | 202010708220.5 | 申请日: | 2020-07-22 |
公开(公告)号: | CN111737364B | 公开(公告)日: | 2020-12-11 |
发明(设计)人: | 李宏宇;李晓林 | 申请(专利权)人: | 同盾控股有限公司 |
主分类号: | G06F16/27 | 分类号: | G06F16/27;G06F16/28;G06F16/22;G06F21/62 |
代理公司: | 杭州创智卓英知识产权代理事务所(普通合伙) 33324 | 代理人: | 唐超文 |
地址: | 311121 浙江省杭州市余*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 安全 多方 数据 融合 联邦 共享 方法 装置 设备 介质 | ||
1.一种安全多方数据融合与联邦共享方法,其特征在于:包括以下步骤:
获取数据集成需求;
根据所述数据集成需求得到对应的多个数据源,其中,每个数据源具有数据库,所述数据库包括描述原始数据的元数据以及对应表示所述元数据含义的数据表字段;
基于预先存储的第一数据集成视图和第一数据映射表从所述多个数据源的数据库中加载第一目标数据,包括:从所述第一数据集成视图中的多个候选字段中确定目标字段,根据所述第一数据映射表得到所述目标字段与所述多个数据源的数据库中的各数据表字段之间的映射关系,根据所述多个数据源的数据库中各数据表字段与元数据间的对应关系以及所述映射关系,得到与所述目标字段对应的元数据并将与所述目标字段对应的元数据描述的原始数据作为第一目标数据,其中,将从每个数据源的数据库中加载的原始数据记为子目标数据,所述第一目标数据包括从各数据源的数据库中对应加载的子目标数据;其中,所述第一数据集成视图通过下述方式生成:对多个所述数据源中表示相同含义的各数据表字段进行标准化处理得到与各数据表字段具有相同含义的候选字段;由表示不同含义的多个候选字段构成所述第一数据集成视图;
将所述第一目标数据对应存储至所述多个数据源的内存上生成第一数据仓库;
获取新数据集成需求,根据所述新数据集成需求得到对应的新数据源,基于所述新数据源得到第二数据仓库,将所述第二数据仓库与所述第一数据仓库进行关联得到新数据仓库,以使所述数据集成需求与所述新数据集成需求联邦共享所述第一数据仓库;
其中,所述将所述第一目标数据对应存储至所述多个数据源的内存上生成第一数据仓库,包括:将所述子目标数据存储至对应数据源的内存上;由所述多个数据源的内存构成所述第一数据仓库,以实现多方数据在逻辑上的融合,其中,所述第一数据仓库存储多个所述子目标数据。
2.如权利要求1所述的一种安全多方数据融合与联邦共享方法,其特征在于:所述第一数据映射表通过下述方式生成,包括:
将所述多个数据源的数据库中表示相同含义的各数据表字段与各所述数据表字段表示相同含义的候选字段建立映射关系,生成所述第一数据映射表。
3.如权利要求2所述的一种安全多方数据融合与联邦共享方法,其特征在于:从所述第一数据集成视图中的多个候选字段中确定目标字段,包括:在所述多个数据源的数据库中查询是否有与各所述候选字段具有映射关系的数据表字段表示的元数据,若是,将所述候选字段作为目标字段。
4.如权利要求1所述的一种安全多方数据融合与联邦共享方法,其特征在于:基于所述新数据源得到第二数据仓库,包括:
基于所述新数据源生成第二数据集成视图和第二数据映射表,其中,所述第二数据集成视图基于所述新数据源生成的方式与所述第一数据集成视图基于多个所述数据源生成的方式相同;
基于所述第二数据集成视图和所述第二数据映射表从所述新数据源的数据库中加载第二目标数据;
将所述第二目标数据存储至所述新数据源的内存上生成第二数据仓库;
所述第二数据映射表与所述第一数据映射表包含相同候选字段;将所述第二数据仓库与所述第一数据仓库进行关联,包括:将所述相同候选字段作为相同目标字段;将所述相同目标字段对应的第二目标数据和第一目标数据进行关联。
5.如权利要求2所述的一种安全多方数据融合与联邦共享方法,其特征在于:还包括:
获取新数据集成需求;
根据所述新数据集成需求和所述多个数据源得到新候选字段,包括:根据所述新数据集成 需求查询所述多个数据源得到对应的元数据;对所述元数据进行字段分析得到所述新候选字段,包括:由表示所述元数据相同含义的各数据表字段生成所述新候选字段;
将所述新候选字段添加到所述第一数据集成视图中,更新所述第一数据集成视图和所述第一数据映射表;
基于更新后的第一数据集成视图和第一数据映射表从所述多个数据源的数据库中加载第三目标数据;
将所述第三目标数据存储至所述多个数据源的内存上,并由所述第三目标数据和所述第一目标数据构成新数据仓库。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于同盾控股有限公司,未经同盾控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010708220.5/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置