[发明专利]一种数据源融合计算方法、组件及装置有效
申请号: | 201911188323.7 | 申请日: | 2019-11-28 |
公开(公告)号: | CN110647518B | 公开(公告)日: | 2020-04-28 |
发明(设计)人: | 侯良伟;陶亮;王纯斌;赵神州 | 申请(专利权)人: | 成都四方伟业软件股份有限公司 |
主分类号: | G06F16/21 | 分类号: | G06F16/21;G06F16/22;G06F16/28 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 610041 四川省*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种数据源融合计算方法、组件及装置,在本技术方案中不需要预先创建外部表,只需依赖数据源连接信息就可以直接展开多数据源计算。首先,我们会解析用户的SQL语句;然后,根据解析结果只从源数据库中抽取用户业务中需要的数据;最后,将这些数据在DTC‑FUSION上展开融合计算,并将结果输出到用户指定的目标数据库。解决了在现有的技术中一般通过Spark进行数据融合计算,其支持的数据源种类受限,而且每个数据源的表数据是全量读取,然后在内存中计算,这样参与计算的数据量巨大,对内存和网络I/O的压力非常大的问题。 | ||
搜索关键词: | 一种 数据源 融合 计算方法 组件 装置 | ||
【主权项】:
1.一种数据源融合计算方法,包括源数据库、目标数据库和解析器,其特征在于:还包括以下步骤:/nS1、解析器接收用户发送的SQL语句;/nS2、解析器对接收到的SQL语句进行解析得到作业;/nS3、解析器将步骤S2得到的作业发布到DTC-SERVER服务;/nS4、DTC-SERVER服务管理并调度作业,提交作业到DTC-FUSION执行;/nS5、DTC-FUSION执行接收到的作业,并将计算结果输出到目标数据库。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于成都四方伟业软件股份有限公司,未经成都四方伟业软件股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201911188323.7/,转载请声明来源钻瓜专利网。