[发明专利]一种数据整合管理方法、装置、系统和用户终端在审
| 申请号: | 201810338365.3 | 申请日: | 2018-04-16 |
| 公开(公告)号: | CN108595571A | 公开(公告)日: | 2018-09-28 |
| 发明(设计)人: | 陈通;李云峰;王云峰 | 申请(专利权)人: | 深圳零壹云医科技有限公司 |
| 主分类号: | G06F17/30 | 分类号: | G06F17/30 |
| 代理公司: | 广州市合本知识产权代理事务所(普通合伙) 44421 | 代理人: | 谭启斌 |
| 地址: | 518000 广东省深圳*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 主索引 标准化数据 目标数据 数据整合 用户终端 综合信息 绑定 引擎 数据源采集 获取数据 基础数据 数据匹配 统一标准 资源共享 不兼容 服务端 兼容性 可视化 数据源 可用 配置 预设 整合 清洗 标准化 发送 管理 | ||
本发明提供了一种数据整合管理方法、装置、系统和用户终端,其中所述方法包括:获取数据源中的目标数据的综合信息;对综合信息进行标准化整理,得到标准化数据;通过主索引引擎获取与目标数据对应的主索引,并将主索引与标准化数据绑定;根据主索引导入与主索引绑定的标准化数据,并将标准化数据发送至服务端。本发明所提供的方法通过使用可视化实施引擎进行数据匹配,从而通过数据源采集到全面“有效、有用、可用”的基础数据,并按照预设统一标准进行有效的清洗整合,以满足对于数据源的资源共享的需求,方法配置简单,兼容性强,避免了传统技术中,需要依靠实施人员编写sql脚本,增加配置难度,容易因为个人失误导致目标数据集不兼容的缺陷。
技术领域
本发明涉及网络信息技术领域,更具体地说,涉及一种数据整合管理方法、装置、系统和用户终端。
背景技术
数据集成是把不同来源、格式、特点性质的数据在逻辑上或物理上有机地集中,从而为企业提供全面的数据共享。在企业数据集成领域,已经有了很多成熟的框架可以利用。目前通常采用联邦式、基于中间件模型和数据仓库等方法来构造集成的系统,这些技术在不同的着重点和应用上解决数据共享和为企业提供决策支持。
目前医疗数据集成主要是以ETL(是英文Extract-Transform-Load的缩写,用来描述将数据从来源端经过抽取(extract)、转换(transform)、加载(load)至目的端的过程)工具从数据源抽取出所需的数据,经过数据清洗,最终按照预先定义好的数据仓库模型,将数据加载到数据仓库中去,但传统的方式需要依靠实施人员编写sql脚本,增加配置难度,容易因为个人失误导致目标数据集不兼容。
发明内容
有鉴于此,本发明提供一种数据整合管理方法、装置、系统和用户终端以解决现有技术的不足。
为解决上述问题,本发明提供一种数据整合管理方法,包括:
获取数据源中的目标数据的综合信息;
对所述综合信息进行标准化整理,得到标准化数据;
通过主索引引擎获取与所述目标数据对应的主索引,并将所述主索引与所述标准化数据绑定;
根据所述主索引导入与所述主索引绑定的所述标准化数据,并将所述标准化数据发送至服务端。
优选地,所述“获取数据源中的目标数据的综合信息”包括:
基于数据查询方式或数据接口方式,判断所述目标数据对应的数据是否为待解析数据;
若是,则通过解析引擎对所述待解析数据进行结构化,生成综合信息。
若否,则获取数据源中的目标数据的增量变化数据,并将所述增量变化数据作为综合信息。
优选地,所述“对所述综合信息进行标准化整理,得到标准化数据”包括:
清除所述综合信息中的无效信息;
对清除无效信息后的所述综合信息中的编码数据依据预设统一标准进行转换,得到所述标准化数据。
优选地,所述“通过主索引引擎获取与所述目标数据对应的主索引,并将所述主索引与所述标准化数据绑定”之前,还包括:
将所述标准化数据加密传输至任务调度中心,以便于所述任务调度中心通过主索引引擎对所述主索引与所述标准化数据的绑定。
优选地,所述“根据所述主索引导入与所述主索引绑定的所述标准化数据,并将所述标准化数据发送至服务端”,包括:
基于所述主索引,将与所述主索引绑定的所述标准化数据进行批量数据导入;
若在批量数据导入时,存在无法导入的标准化数据,则将所述无法导入的标准化数据先进行缓冲,再将缓冲后的所述无法导入的标准化数据批量提交;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳零壹云医科技有限公司,未经深圳零壹云医科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810338365.3/2.html,转载请声明来源钻瓜专利网。





