[发明专利]数据文件分配方法及装置、智能设备和计算机存储介质在审
申请号: | 202110404424.4 | 申请日: | 2021-04-14 |
公开(公告)号: | CN113515495A | 公开(公告)日: | 2021-10-19 |
发明(设计)人: | 张继连;翁健;吴永东;耿光刚 | 申请(专利权)人: | 暨南大学 |
主分类号: | G06F16/182 | 分类号: | G06F16/182;G06F16/16;G06F16/13 |
代理公司: | 深圳市世纪恒程知识产权代理事务所 44287 | 代理人: | 丁志新 |
地址: | 510632 广*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据文件 分配 方法 装置 智能 设备 计算机 存储 介质 | ||
1.一种数据文件分配方法,其特征在于,所述方法包括:
按照各个数据文件的访问频率对数据文件进行排序,所述排序方式包括升序或者降序;
按照排序后的顺序将所述数据文件分割为至少两个数据块,其中,各个数据块的数据文件的数量相等;
对每个数据块中的数据文件进行两两合并以更新所述数据文件;
返回执行所述按照各个数据文件的访问频率对数据文件进行排序的步骤,直至所述数据文件的数量达到分布式节点的数量;
将所述数据文件放置至对应的分布式节点。
2.如权利要求1所述的数据文件分配方法,其特征在于,所述按照排序后的顺序将所述数据文件分割为至少两个数据块的步骤包括:
根据所述数据文件的数量以及所述分布式节点的数量确定目标数量;
按照排序后的顺序将所述数据文件分割为所述目标数量的数据块。
3.如权利要求2所述数据文件分配方法,其特征在于,所述根据所述数据文件的数量以及所述分布式节点的数量确定目标数量的步骤包括:
获取所述数据文件的数量与所述分布式节点的数量的倍数之间的第一比值;
将所述第一比值作为所述目标数量。
4.如权利要求1所述的数据文件分配方法,其特征在于,所述按照各个数据文件的访问频率对数据文件进行排序的步骤之前,还包括:
获取所述数据文件的数量与所述分布式节点的数量之间的第二比值;
在所述第二比值为非整数时,生成虚拟文件作为所述数据文件,并将生成的所述数据文件的访问频率设置为零。
5.如权利要求1所述数据文件分配方法,其特征在于,所述对每个数据块中的数据文件进行两两合并以更新所述数据文件的步骤包括:
将所述数据块中由数据文件组成的数据列中的第一目标文件和第二目标文件合并以得到更新后的所述数据文件,在首次合并时,所述第一目标文件为所述数据列首位的数据文件,所述第二目标文件为所述数据列末尾的数据文件;
将所述数据列中当前的所述第一目标文件中的下一数据文件更新为所述第一目标文件,将所述数据列中当前的所述第二目标文件中的前一数据文件更新为所述第二目标文件;
返回执行所述将所述数据块中由数据文件组成的数据列中的第一目标文件和第二目标文件合并以得到更新后的所述数据文件,直至合并完所述数据块中的所有所述数据文件。
6.如权利要求1所述数据文件分配方法,其特征在于,合并得到的新的所述数据文件的访问频率为合并前的两个数据文件的访问频率之和。
7.如权利要求5所述数据文件分配方法,其特征在于,所述将所述数据文件放置至对应的分布式节点的步骤包括:
将所述数据块中由数据文件组成的数据列中的第一目标文件和第二目标文件放置至第一分布式节点;
将所述数据列中当前的所述第一目标文件中的下一数据文件以及所述数据列中当前的所述第二目标文件中的前一数据文件放置至第二分布式节点,直至放置完所有数据块中的所有所述数据文件。
8.一种数据文件分配装置,其特征在于,所述装置包括:
排序模块,用于按照各个数据文件的访问频率对数据文件进行排序,所述排序方式包括升序或者降序;
划分模块,用于按照排序后的顺序将所述数据文件分割为至少两个数据块,其中,各个数据块的数据文件的数量相等;
合并模块,用于对每个数据块中的数据文件进行两两合并得到以更新所述数据文件;
放置模块,用于将所述数据文件放置至对应的分布式节点。
9.一种智能设备,其特征在于,所述智能设备包括存储器、处理器以及存储在所述存储器并可在所述处理器上运行的数据文件分配程序,所述数据文件分配程序被所述处理器执行时实现如权利要求1-7任一项所述的数据文件分配方法的各个步骤。
10.一种计算机存储介质,其特征在于,所述计算机存储介质存储有数据文件分配程序,所述数据文件分配程序被处理器执行时实现如权利要求1-7任一项所述的数据文件分配方法的各个步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于暨南大学,未经暨南大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110404424.4/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种液压正反馈电液比例节流阀
- 下一篇:基于灯带的隧道定位系统及测距方法