[发明专利]一种数据处理方法、装置、服务器及介质在审
| 申请号: | 202010054694.2 | 申请日: | 2020-01-17 |
| 公开(公告)号: | CN111259045A | 公开(公告)日: | 2020-06-09 |
| 发明(设计)人: | 杨志华;熊维;余宝春 | 申请(专利权)人: | 金证财富南京科技有限公司 |
| 主分类号: | G06F16/2453 | 分类号: | G06F16/2453;G06F16/2458;G06F16/2455 |
| 代理公司: | 深圳中一联合知识产权代理有限公司 44414 | 代理人: | 任敏 |
| 地址: | 210012 江苏省南京*** | 国省代码: | 江苏;32 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 数据处理 方法 装置 服务器 介质 | ||
本申请适用于数据处理技术领域,提供了一种数据处理方法、装置、服务器及介质,所述方法包括:接收中央服务器发送的数据汇总指令;根据所述数据汇总指令对节点服务器存储的数据进行分组汇总,并将汇总数据上报至所述中央服务器;接收所述中央服务器发送的临界值,所述临界值由所述中央服务器根据多个节点服务器的汇总数据确定;根据所述临界值对所述节点服务器存储的数据进行处理。通过上述方法,能够提高数据处理的效率,节省存储空间。
技术领域
本申请属于数据处理技术领域,尤其涉及一种数据处理方法、装置、服务器及介质。
背景技术
在计算机技术领域,经常需要对大量的数据进行处理。例如进行数据采集、数据排序和数据筛选。当需要处理的数据量很大时,整个数据处理的过程消耗资源多且需要时间长。
分布式计算能够将一个大问题拆分成多个子问题,然后在各个分节点解决子问题,从而缩短解决整个大问题的时间。但是,目前虽然可以利用分布式计算采集数据,但在进行数据排序和筛选时,还是要将大量数据集中处理,对所有的数据采用同一个计算设备进行顺序处理,需要耗费大量的网络传输和存储资源,而且计算时间比较长。
发明内容
本申请实施例提供了一种数据处理方法、装置、服务器及介质,可以解决数据处理消耗资源多、效率低的问题。
第一方面,本申请实施例提供了一种数据处理方法,应用于节点服务器,所述方法包括:
接收中央服务器发送的数据汇总指令;
根据所述数据汇总指令对节点服务器存储的数据进行分组汇总,并将汇总数据上报至所述中央服务器;
接收所述中央服务器发送的临界值,所述临界值由所述中央服务器根据多个节点服务器的汇总数据确定;
根据所述临界值对所述节点服务器存储的数据进行处理。
第二方面,本申请实施例提供了一种数据处理方法,应用于中央服务器,所述方法包括:
向与所述中央服务器关联的多个节点服务器发送数据汇总指令;
接收所述多个节点服务器根据所述数据汇总指令返回的汇总数据,所述汇总数据由每个节点服务器对存储的数据进行分组汇总获得;
根据所述多个节点服务器返回的汇总数据确定临界值;
将所述临界值发送至所述多个节点服务器,以指示所述多个节点服务器根据所述临界值对存储的数据进行处理。
第三方面,本申请实施例提供了一种数据处理装置,应用于节点服务器,所述装置包括:
指令接收模块,用于接收中央服务器发送的数据汇总指令;
数据汇总模块,用于根据所述数据汇总指令对节点服务器存储的数据进行分组汇总,并将汇总数据上报至所述中央服务器;
临界值接收模块,用于接收所述中央服务器发送的临界值,所述临界值由所述中央服务器根据多个节点服务器的汇总数据确定;
数据处理模块,用于根据所述临界值对所述节点服务器存储的数据进行处理。
第四方面,本申请实施例提供了一种数据处理装置,应用于中央服务器,所述装置包括:
指令发送模块,用于向与所述中央服务器关联的多个节点服务器发送数据汇总指令;
数据接收模块,用于接收所述多个节点服务器根据所述数据汇总指令返回的汇总数据,所述汇总数据由每个节点服务器对存储的数据进行分组汇总获得;
临界值确定模块,用于根据所述多个节点服务器返回的汇总数据确定临界值;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于金证财富南京科技有限公司,未经金证财富南京科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010054694.2/2.html,转载请声明来源钻瓜专利网。





