[发明专利]一种基于Hadoop的海量小文件缓存方法有效
| 申请号: | 201810500093.2 | 申请日: | 2018-05-22 |
| 公开(公告)号: | CN108932288B | 公开(公告)日: | 2022-04-12 |
| 发明(设计)人: | 魏文国;彭建烽;谢桂园;戴青云;蔡君;赵慧民 | 申请(专利权)人: | 广东技术师范大学 |
| 主分类号: | G06F16/172 | 分类号: | G06F16/172;G06F16/13;G06F16/182 |
| 代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 梁顺宜;郝传鑫 |
| 地址: | 510665 广东*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | 本发明公开了一种基于Hadoop的海量小文件缓存方法,该方法包括:获取用户访问日志记录,并从用户访问日志记录中统计得出活跃用户集;结合对数线性模型,计算出活跃用户集中每个活跃用户访问过的文件的热度预测值,并按照热度预测值由大到小将各文件进行排序,将排名前20%的文件标记为热点文件;获取所述热点文件,并采用Hbase数据库缓存所述热点文件的相关信息。采用本发明技术方案能提高缓存的命中率,加快文件的读取效率。 | ||
| 搜索关键词: | 一种 基于 hadoop 海量 文件 缓存 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广东技术师范大学,未经广东技术师范大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201810500093.2/,转载请声明来源钻瓜专利网。





