[发明专利]云计算平台下实现异构数据处理功能的ETL系统及其处理方法在审
申请号: | 201910525080.5 | 申请日: | 2019-06-18 |
公开(公告)号: | CN110263081A | 公开(公告)日: | 2019-09-20 |
发明(设计)人: | 骆宇园;何政文;张志平 | 申请(专利权)人: | 普元信息技术股份有限公司 |
主分类号: | G06F16/25 | 分类号: | G06F16/25;H04L29/08 |
代理公司: | 上海智信专利代理有限公司 31002 | 代理人: | 王洁;郑暄 |
地址: | 201203 上海市浦东新区中*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明涉及一种云计算平台下实现异构数据处理功能的ETL系统,包括WEB应用前端处理模块,用于进行门户管理,配置数据源配置、采集器信息、采集任务的配置、采集产物浏览管理以及浏览操作日志;ETL数据处理模块;数据存储及交互模块。本发明还涉及一种实现云计算平台下的异构数据处理方法。采用了本发明的云计算平台下实现异构数据处理功能的ETL系统及其处理方法,采用了该发明中的实现异构数据处理的ETL系统,通过本系统就能处理多种异构数据,从中提取有用的信息,并且在与外部系统的数据交互中,也能减少数据格式转换带来的麻烦,能使有用的数据快速流转,在简化开发工作量的同时提升了业务处理的效率。 | ||
搜索关键词: | 异构 云计算平台 数据处理功能 数据处理 采集 前端处理模块 数据处理模块 数据格式转换 交互模块 门户管理 配置数据 数据存储 数据交互 外部系统 业务处理 异构数据 浏览操作 浏览管理 采集器 源配置 日志 流转 工作量 配置 开发 | ||
【主权项】:
1.一种云计算平台下实现异构数据处理功能的ETL系统,其特征在于,所述的系统包括:WEB应用前端处理模块,用于进行门户管理,配置数据源配置、采集器信息、采集任务的配置、采集产物浏览管理以及浏览操作日志;ETL数据处理模块,与所述的WEB应用前端处理模块相连接,用于采集异构数据,根据WEB应用发起的采集任务来采集不同的异构数据;数据存储及交互模块,与所述的WEB应用前端处理模块和ETL数据处理模块均相连接,用于进行数据存储以及与其他模块进行数据交互。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于普元信息技术股份有限公司,未经普元信息技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910525080.5/,转载请声明来源钻瓜专利网。