[发明专利]一种数据同步方法和系统在审
| 申请号: | 201711403716.6 | 申请日: | 2017-12-22 |
| 公开(公告)号: | CN108133007A | 公开(公告)日: | 2018-06-08 |
| 发明(设计)人: | 戴万乾;喻波;王志海;韩振国;安鹏 | 申请(专利权)人: | 北京明朝万达科技股份有限公司 |
| 主分类号: | G06F17/30 | 分类号: | G06F17/30 |
| 代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 莎日娜 |
| 地址: | 100097 北京市海淀*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 输出数据结构 输入数据信息 目标数据项 输入数据项 数据结构 数据同步 数据处理技术 异构数据类型 输入数据源 数据交互 数据识别 数据转换 兼容性 同步的 映射 加载 存储 转换 | ||
1.一种数据同步方法,其特征在于,所述方法包括:
加载待同步的输入数据源并进行数据识别,确定输入数据信息,所述输入数据信息包括输入数据结构和输入数据项;
依据所述输入数据结构进行映射,确定输出数据结构;
依据所述输出数据结构,对所述输入数据项进行数据转换,生成目标数据项;
对所述目标数据项进行存储。
2.根据权利要求1所述的方法,其特征在于,所述加载待同步的输入数据源并进行数据识别,确定输入数据信息,包括:
依据预设的接入配置项信息,确定待同步的输入数据源;
对所述输入数据源进行加载,得到输入数据项;
对所述输入数据源进行数据结构识别,确定输入数据结构。
3.根据权利要求1或2所述的方法,其特征在于,所述依据所述输入数据结构进行映射,确定输出数据结构,包括:
基于预设的映射配置信息,对所述输入数据结构进行匹配映射,得到映射后的目标数据字段和目标数据类型;
依据所述目标数据字段和目标数据类型,确定输出数据结构。
4.根据权利要求3所述的方法,其特征在于,所述基于预设的映射配置信息,对所述输入数据结构进行匹配映射,得到映射后的目标数据字段和目标数据类型,包括:
基于所述映射配置信息,确定所述输入数据结构中的待合并字段;
依据所述待合并字段进行字段合并,得到合并后的目标数据字段;
基于待合并字段中的数据类型,确定所述目标数据字段对应的目标数据类型。
5.根据权利要求3所述的方法,其特征在于,所述基于预设的映射配置信息,对所述输入数据结构进行匹配映射,得到映射后的目标数据字段和目标数据类型,包括:
基于所述映射配置信息,确定所述输入数据结构中的源数据字段;
依据所述源数据字段进行字段映射,得到目标数据字段以及所述目标数据字段对应的目标数据类型。
6.一种数据同步系统,其特征在于,包括:
加载识别模块,用于加载待同步的输入数据源并进行数据识别,确定输入数据信息,所述输入数据信息包括输入数据结构和输入数据项;
映射模块,用于依据所述输入数据结构进行映射,确定输出数据结构;
数据转换模块,用于依据所述输出数据结构,对所述输入数据项进行数据转换,生成目标数据项;
存储模块,用于对所述目标数据项进行存储。
7.根据权利要求6所述的系统,其特征在于,所述加载识别模块包括:
确定子模块,用于依据预设的接入配置项信息,确定待同步的输入数据源;
加载子模块,用于对所述输入数据源进行加载,得到输入数据项;
识别子模块,用于对所述输入数据源进行数据结构识别,确定输入数据结构。
8.根据权利要求6或7所述的系统,其特征在于,所述映射模块包括:
匹配映射子模块,用于基于预设的映射配置信息,对所述输入数据结构进行匹配映射,得到映射后的目标数据字段和目标数据类型;
结构确定子模块,用于依据所述目标数据字段和目标数据类型,确定输出数据结构。
9.根据权利要求8所述的系统,其特征在于,所述匹配映射子模块包括:
字段确定单元,用于基于所述映射配置信息,确定所述输入数据结构中的待合并字段;
字段合并单元,用于依据所述待合并字段进行字段合并,得到合并后的目标数据字段;
数据类型单元,用于基于待合并字段中的数据类型,确定所述目标数据字段对应的目标数据类型。
10.根据权利要求8所述的系统,其特征在于,所述匹配映射子模块包括:
源数据字段单元,用于基于所述映射配置信息,确定所述输入数据结构中的源数据字段;
字段映射单元,用于依据所述源数据字段进行字段映射,得到目标数据字段以及所述目标数据字段对应的目标数据类型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京明朝万达科技股份有限公司,未经北京明朝万达科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711403716.6/1.html,转载请声明来源钻瓜专利网。





