[发明专利]一种数据处理方法、装置和服务器在审
申请号: | 201710154242.X | 申请日: | 2017-03-15 |
公开(公告)号: | CN106850849A | 公开(公告)日: | 2017-06-13 |
发明(设计)人: | 李栋 | 申请(专利权)人: | 联想(北京)有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08;G06F9/50 |
代理公司: | 北京集佳知识产权代理有限公司11227 | 代理人: | 王宝筠 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据处理 方法 装置 服务器 | ||
1.一种数据处理方法,其特征在于,所述方法包括:
对待处理数据进行计算处理;
将所述计算处理的中间计算结果存储到服务器的本地内存中;
如果检测到所述服务器的本地内存空间不足时,从分布式内存集群中,确定可用的目标内存空间,所述分布式内存集群包括分布于多个服务器中的内存空间;
将所述计算处理中产生的且未存储的中间计算结果存储到所述目标内存空间。
2.根据权利要求1所述的数据处理方法,其特征在于,所述从分布式内存集群中,确定可用的目标内存空间,包括:
向管理所述分布式内存集群的管理服务器发送内存分配请求;
获取所述管理服务器返回的目标内存空间的地址,所述目标内存空间为从所述分布式内存集群中确定出的可用的内存空间。
3.根据权利要求1所述的数据处理方法,其特征在于,所述从分布式内存集群中,确定可用的目标内存空间,包括:
依据管理所述分布式内存集群的管理服务器上报的内存占用情况,从所述分布式内存集群中确定可用的目标内存空间。
4.根据权利要求3所述的数据处理方法,其特征在于,还包括:
接收所述管理服务器在所述分布式内存集群中空闲内存发生变化时所上报的内存占用情况;
存储所述内存占用情况。
5.根据权利要求1所述的数据处理方法,其特征在于,所述将所述计算处理中产生的且未存储的中间计算结果存储到所述目标内存空间,包括:
通过所述目标内存空间所在的服务器提供的访问接口,将所述计算处理中产生的且未存储的中间计算结果存储到所述目标内存空间。
6.一种服务器,其特征在于,包括:
处理器,用于对待处理数据进行计算处理;
内存储器,用于存储所述处理器进行所述计算处理的中间计算结果;
所述处理器,还用于如果检测到内存储器的空间不足时,从分布式内存集群中,确定可用的目标内存空间,所述分布式内存集群包括分布于多个服务器中的内存空间;
通信接口,用于在所述内存储器的空间不足时,将所述处理器进行所述计算处理中产生的且未存储的中间计算结果存储到所述目标内存空间。
7.根据权利要求6所述的服务器,其特征在于,所述通信接口还用于,向管理所述分布式内存集群的管理服务器发送内存分配请求;获取所述管理服务器返回的内存空间的地址,所述管理服务器返回的内存空间为从所述分布式内存集群中确定出的可用的内存空间;
所述处理器在从分布式内存集群中,确定可用的目标内存空间时,具体用于:将所述管理服务器返回的内存空间的地址确定为所述分布式内存集群中,可用的目标内存空间。
8.根据权利要求1所述的服务器,其特征在于,所述通信接口,还用于获取所述分布式内存集群的管理服务器上报的内存占用情况;
所述处理器在从分布式内存集群中,确定可用的目标内存空间时,具体用于,依据所述管理服务器上报的内存占用情况,从所述分布式内存集群中确定可用的目标内存空间。
9.根据权利要求8所述的服务器,其特征在于,所述通信接口,还用于接收所述管理服务器在所述分布式内存集群中空闲内存发生变化时所上报的内存占用情况;
所述服务器还包括:存储器,用于存储所述内存占用情况。
10.根据权利要求6所述的服务器,其特征在于,所述通信接口在将所述计算处理中产生的且未存储的中间计算结果存储到所述目标内存空间时,具体用于,通过所述目标内存空间所在的服务器提供的访问接口,将所述计算处理中产生的且未存储的中间计算结果存储到所述目标内存空间。
11.一种数据处理装置,其特征在于,所述装置包括:
数据计算单元,用于对待处理数据进行计算处理;
第一数据存储单元,用于将所述计算处理的中间计算结果存储到服务器的本地内存中;
外部内存确定单元,用于如果检测到所述服务器的本地内存空间不足时,从分布式内存集群中,确定可用的目标内存空间,所述分布式内存集群包括分布于多个服务器中的内存空间;
第二数据存储单元,用于将所述计算处理中产生的且未存储的中间计算结果存储到所述目标内存空间。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于联想(北京)有限公司,未经联想(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710154242.X/1.html,转载请声明来源钻瓜专利网。