[发明专利]一种数据处理的方法及装置在审

专利信息
申请号: 201810798612.8 申请日: 2018-07-19
公开(公告)号: CN109062508A 公开(公告)日: 2018-12-21
发明(设计)人: 甄凤远;徐洪志;郭平加 申请(专利权)人: 郑州云海信息技术有限公司
主分类号: G06F3/06 分类号: G06F3/06
代理公司: 北京集佳知识产权代理有限公司 11227 代理人: 王宝筠
地址: 450018 河南省郑州市*** 国省代码: 河南;41
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 存储区域 待处理数据 数据处理 存储 存储数据 占用率 并行 数据处理效率 多核处理器 处理数据 串行处理 预设 申请
【说明书】:

本申请实施例公开了一种数据处理的方法及装置,通过获取待处理数据及待处理数据所在的存储区域,若存储区域的占用率大于或等于第一预设值,则将存储区域进行拆分,形成多个存储块,并行对多个存储块中的存储数据进行处理。由于存储区域的占用率较大时,可以说明待处理数据较多,若对待处理数据进行串行处理,需要花费较长的时间,此时可以对存储区域进行拆分,形成存储块,并行对拆分后的存储块中的存储数据进行处理,可以提高多核处理器的利用率,减少数据处理时间,提高数据处理效率。

技术领域

本申请涉及计算机领域,尤其涉及一种数据处理的方法及装置。

背景技术

随着信息技术的发展,信息存储方式逐渐多样化,数据存储介质或数据存储结构也具有多种形式,基于不同的数据存储介质或不同数据存储结构,对数据的处理也可能不同。

现有的数据处理方式,通常采用串行的方式进行。举例来说,对于数据的删除,可以为采用串行删除的方式,即按照一定的顺序逐个进行删除,以数据的树形存储结构为例,通常从树形结构的根节点开始,顺序的进行每一个节点的数据的删除。然而,这种串行的数据处理方式效率较低。

发明内容

为了解决现有技术中数据处理方式效率较低的问题,本申请实施例提供了一种数据处理的方法及装置。

本申请实施例提供了一种数据处理的方法,所述方法包括:

获取待处理数据及所述待处理数据所在的存储区域;

若所述存储区域的占用率大于或等于第一预设值,则将所述存储区域进行拆分,形成多个存储块;

并行对所述多个存储块中的存储数据进行处理,所述存储数据包括所述待处理数据。

可选的,所述并行对所述多个存储块中的存储数据进行处理,包括:

通过多个处理器,分别对所述多个存储块中的存储数据进行处理。

可选的,所述将所述存储区域进行拆分,形成多个存储块,包括:

根据所述处理器的数量,对所述存储区域进行拆分,形成多个存储块,其中每个存储块均有对应的处理器。

可选的,所述方法还包括:

若所述存储区域的占用率小于或等于第二预设值,则根据所述待处理数据的数据结构,对所述待处理数据进行处理。

可选的,所述存储区域包括存储区域网络设备中的逻辑卷;所述待处理数据包括所述逻辑卷中的元数据。

本申请实施例提供了一种数据处理的装置,所述装置包括:

获取单元,用于获取待处理数据及所述待处理数据所在的存储区域;

拆分单元,用于若所述存储区域的占用率大于或等于第一预设值,则将所述存储区域进行拆分,形成多个存储块;

第一处理单元,用于并行对所述多个存储块中的存储数据进行处理,所述存储数据包括所述待处理数据。

可选的,所述处理单元包括:

处理子单元,用于通过多个处理器,分别对所述多个存储块中的存储数据进行处理。

可选的,所述拆分单元包括:

拆分子单元,用于根据所述处理器的数量,对所述存储区域进行拆分,形成多个存储块,其中每个存储块均有对应的处理器。

可选的,所述装置还包括:

第二处理单元,用于若所述存储区域的占用率小于或等于第二预设值,则根据所述待处理数据的数据结构,对所述待处理数据进行处理。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于郑州云海信息技术有限公司,未经郑州云海信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201810798612.8/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top