[发明专利]一种数据导出的方法及设备在审
申请号: | 201910973879.0 | 申请日: | 2019-10-14 |
公开(公告)号: | CN110851249A | 公开(公告)日: | 2020-02-28 |
发明(设计)人: | 丁永 | 申请(专利权)人: | 中国平安财产保险股份有限公司 |
主分类号: | G06F9/48 | 分类号: | G06F9/48 |
代理公司: | 深圳中一专利商标事务所 44237 | 代理人: | 冷仔 |
地址: | 518000 广东省深圳市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 导出 方法 设备 | ||
本发明适用于数据处理技术领域,提供了一种数据导出的方法及设备,包括:若满足预设的数据导出触发条件,则获取数据导出触发任务关联的所有数据导出任务;统计数据导出任务的任务个数,以及检测本地的线程池内的线程个数;基于任务个数以及线程个数,将线程池内的空闲线程划分为查询线程以及导出线程;调用查询线程从数据库中提取各个数据导出任务关联的目标数据,并通过导出线程将目标数据写入预设的任务数据文档。本发明能够将设备内的硬件资源划分为不同的类型,一部分执行数据查询操作,而另一部分执行数据导出操作,从而避免了所有硬件资源全部用于进行数据写入操作,从而导致CPU占用瞬时升高,提高了设备的稳定性。
技术领域
本发明属于数据处理技术领域,尤其涉及一种数据导出的方法及设备。
背景技术
随着各种各样文件均实行电子化,数据库中包含的数据量也越来越庞大。用户在日常工作以及生活中,常常需要通过数据库查询以及导出相应的数据,因此如何有效导出所需的数据显得尤为重要。特别地,当所需导出的数据数量较多的时候,由于大部分数据库在响应导出数据任务时,往往需要从数据库中查询所需导出的数据,查询得到所有目标数据后,再执行数据导出操作,从而在数据导出的过程,由于写入数据量巨大,会导致CPU占用升高,占用大量的硬件资源,降低了设备的稳定性,并且在数据查询期间,大量数据写入资源闲置,降低了资源的利用率。
发明内容
有鉴于此,本发明实施例提供了一种数据导出的方法及设备,以解决现有的数据导出的响应技术,当所需导出的数据数量较多的时候,由于写入数据量巨大,会导致CPU占用升高,占用大量的硬件资源,降低了设备的稳定性,并且在数据查询期间,大量数据写入资源闲置,降低了资源的利用率的问题。
本发明实施例的第一方面提供了一种数据导出的方法,包括:
若满足预设的数据导出触发条件,则获取所述数据导出触发任务关联的所有数据导出任务;
统计所述数据导出任务的任务个数,以及检测本地的线程池内的线程个数;
基于所述任务个数以及所述线程个数,将所述线程池内的空闲线程划分为查询线程以及导出线程;
调用所述查询线程从数据库中提取各个所述数据导出任务关联的目标数据,并通过所述导出线程将所述目标数据写入预设的任务数据文档。
本发明实施例的第二方面提供了一种数据导出的设备,包括:
数据导出触发单元,用于若满足预设的数据导出触发条件,则获取所述数据导出触发任务关联的所有数据导出任务;
线程个数统计单元,用于统计所述数据导出任务的任务个数,以及检测本地的线程池内的线程个数;
线程划分单元,用于基于所述任务个数以及所述线程个数,将所述线程池内的空闲线程划分为查询线程以及导出线程;
数据导出执行单元,用于调用所述查询线程从数据库中提取各个所述数据导出任务关联的目标数据,并通过所述导出线程将所述目标数据写入预设的任务数据文档。
本发明实施例的第三方面提供了一种终端设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现第一方面的各个步骤。
本发明实施例的第四方面提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现第一方面的各个步骤。
实施本发明实施例提供的一种数据导出的方法及设备具有以下有益效果:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国平安财产保险股份有限公司,未经中国平安财产保险股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910973879.0/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置