[发明专利]一种数据处理的方法及装置在审
| 申请号: | 201810798612.8 | 申请日: | 2018-07-19 |
| 公开(公告)号: | CN109062508A | 公开(公告)日: | 2018-12-21 |
| 发明(设计)人: | 甄凤远;徐洪志;郭平加 | 申请(专利权)人: | 郑州云海信息技术有限公司 |
| 主分类号: | G06F3/06 | 分类号: | G06F3/06 |
| 代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 王宝筠 |
| 地址: | 450018 河南省郑州市*** | 国省代码: | 河南;41 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 存储区域 待处理数据 数据处理 存储 存储数据 占用率 并行 数据处理效率 多核处理器 处理数据 串行处理 预设 申请 | ||
本申请实施例公开了一种数据处理的方法及装置,通过获取待处理数据及待处理数据所在的存储区域,若存储区域的占用率大于或等于第一预设值,则将存储区域进行拆分,形成多个存储块,并行对多个存储块中的存储数据进行处理。由于存储区域的占用率较大时,可以说明待处理数据较多,若对待处理数据进行串行处理,需要花费较长的时间,此时可以对存储区域进行拆分,形成存储块,并行对拆分后的存储块中的存储数据进行处理,可以提高多核处理器的利用率,减少数据处理时间,提高数据处理效率。
技术领域
本申请涉及计算机领域,尤其涉及一种数据处理的方法及装置。
背景技术
随着信息技术的发展,信息存储方式逐渐多样化,数据存储介质或数据存储结构也具有多种形式,基于不同的数据存储介质或不同数据存储结构,对数据的处理也可能不同。
现有的数据处理方式,通常采用串行的方式进行。举例来说,对于数据的删除,可以为采用串行删除的方式,即按照一定的顺序逐个进行删除,以数据的树形存储结构为例,通常从树形结构的根节点开始,顺序的进行每一个节点的数据的删除。然而,这种串行的数据处理方式效率较低。
发明内容
为了解决现有技术中数据处理方式效率较低的问题,本申请实施例提供了一种数据处理的方法及装置。
本申请实施例提供了一种数据处理的方法,所述方法包括:
获取待处理数据及所述待处理数据所在的存储区域;
若所述存储区域的占用率大于或等于第一预设值,则将所述存储区域进行拆分,形成多个存储块;
并行对所述多个存储块中的存储数据进行处理,所述存储数据包括所述待处理数据。
可选的,所述并行对所述多个存储块中的存储数据进行处理,包括:
通过多个处理器,分别对所述多个存储块中的存储数据进行处理。
可选的,所述将所述存储区域进行拆分,形成多个存储块,包括:
根据所述处理器的数量,对所述存储区域进行拆分,形成多个存储块,其中每个存储块均有对应的处理器。
可选的,所述方法还包括:
若所述存储区域的占用率小于或等于第二预设值,则根据所述待处理数据的数据结构,对所述待处理数据进行处理。
可选的,所述存储区域包括存储区域网络设备中的逻辑卷;所述待处理数据包括所述逻辑卷中的元数据。
本申请实施例提供了一种数据处理的装置,所述装置包括:
获取单元,用于获取待处理数据及所述待处理数据所在的存储区域;
拆分单元,用于若所述存储区域的占用率大于或等于第一预设值,则将所述存储区域进行拆分,形成多个存储块;
第一处理单元,用于并行对所述多个存储块中的存储数据进行处理,所述存储数据包括所述待处理数据。
可选的,所述处理单元包括:
处理子单元,用于通过多个处理器,分别对所述多个存储块中的存储数据进行处理。
可选的,所述拆分单元包括:
拆分子单元,用于根据所述处理器的数量,对所述存储区域进行拆分,形成多个存储块,其中每个存储块均有对应的处理器。
可选的,所述装置还包括:
第二处理单元,用于若所述存储区域的占用率小于或等于第二预设值,则根据所述待处理数据的数据结构,对所述待处理数据进行处理。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于郑州云海信息技术有限公司,未经郑州云海信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810798612.8/2.html,转载请声明来源钻瓜专利网。
- 上一篇:心电数据的处理储存方法及装置
- 下一篇:固态硬盘的数据处理方法以及相关装置





