[发明专利]数据传输方法、装置、计算机设备以及存储介质在审
申请号: | 201910631136.5 | 申请日: | 2019-07-12 |
公开(公告)号: | CN110489469A | 公开(公告)日: | 2019-11-22 |
发明(设计)人: | 曹红姣 | 申请(专利权)人: | 中国平安人寿保险股份有限公司 |
主分类号: | G06F16/25 | 分类号: | G06F16/25 |
代理公司: | 44242 深圳市精英专利事务所 | 代理人: | 林燕云<国际申请>=<国际公布>=<进入 |
地址: | 518000 广东省深圳市福田区益田路5033号*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 目标数据 二进制 加载 数据传输 第一类对象 表结构 创建 二进制数据形式 第二类对象 计算机设备 目标数据库 传输数据 传输效率 存储介质 获取目标 数据库 存储 保存 保证 | ||
本发明实施例公开了一种数据传输方法、装置、计算机设备以及存储介质,所述方法包括:确定目标数据库中所存储的目标数据表,并获取目标数据表的表结构;根据所获取的表结构在本地数据库中创建相对应的本地数据表;创建第一类对象加载目标数据表,其中,所述第一类对象被指定以二进制数据形式加载目标数据表中的目标数据,得到二进制的目标数据;创建第二类对象加载二进制的目标数据,以将所述二进制的目标数据加载至指定域中进行保存;使用SQL语句从所述指定域中获取所述二进制的目标数据,并将所述二进制的目标数据插入至对应的本地数据表。本发明提供一种数据传输方法,能够批量地传输数据以提高数据的传输效率,保证数据传输的及时性。
技术领域
本发明涉及计算机技术领域,尤其涉及一种数据传输方法、装置、计算机设备以及存储介质。
背景技术
现有数据的传输机制大部分是通过ETL(Extract-Transform-Load)镜像的方式进行传输,其中,ETL用于描述将数据从数据来源端(例如,外部数据库)经过提取、转换、加载至目的端(例如,本地数据库)的过程,随着大数据环境的不断发展,现有的数据传输机制在对接大量的外部数据时,数据的清洗过程会耗费相当长的时间,此外,现有的数据传输机制,数据无法批量传输,只能按照预定的数据量进行处理。
发明内容
有鉴于此,本发明实施例提供一种数据传输方法、装置、计算机设备以及存储介质,能够批量地传输数据以提高数据的传输效率,保证数据传输的及时性。
一方面,本发明实施例提供了一种数据传输方法,该方法包括:
确定目标数据库中所存储的目标数据表,并获取所述目标数据表的表结构;
根据所获取的表结构在本地数据库中创建相对应的本地数据表;
创建第一类对象加载所述目标数据表,其中,所述第一类对象被指定以二进制数据形式加载所述目标数据表中的目标数据,得到二进制的目标数据;
创建第二类对象加载所述二进制的目标数据,以将所述二进制的目标数据加载至指定域中进行保存;
使用SQL语句从所述指定域中获取所述二进制的目标数据,并将所述二进制的目标数据插入至对应的本地数据表。
另一方面,本发明实施例提供了一种数据传输装置,所述装置包括:
确定单元,用于确定目标数据库中所存储的目标数据表,并获取所述目标数据表的表结构;
第一创建单元,用于根据所获取的表结构在本地数据库中创建相对应的本地数据表;
第二创建单元,用于创建第一类对象加载所述目标数据表,其中,所述第一类对象被指定以二进制数据形式加载所述目标数据表中的目标数据,得到二进制的目标数据;
第三创建单元,用于创建第二类对象加载所述二进制的目标数据,以将所述二进制的目标数据加载至指定域中进行保存;
插入单元,用于使用SQL语句从所述指定域中获取所述二进制的目标数据,并将所述二进制的目标数据插入至对应的本地数据表。
又一方面,本发明实施例还提供了一种计算机设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如上所述的数据传输方法。
再一方面,本发明实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有一个或者一个以上计算机程序,所述一个或者一个以上计算机程序可被一个或者一个以上的处理器执行,以实现如上所述的数据传输方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国平安人寿保险股份有限公司,未经中国平安人寿保险股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910631136.5/2.html,转载请声明来源钻瓜专利网。