一种基于Hadoop的海量小文件缓存方法
授权
摘要

本发明公开了一种基于Hadoop的海量小文件缓存方法,该方法包括:获取用户访问日志记录,并从用户访问日志记录中统计得出活跃用户集;结合对数线性模型,计算出活跃用户集中每个活跃用户访问过的文件的热度预测值,并按照热度预测值由大到小将各文件进行排序,将排名前20%的文件标记为热点文件;获取所述热点文件,并采用Hbase数据库缓存所述热点文件的相关信息。采用本发明技术方案能提高缓存的命中率,加快文件的读取效率。

基本信息
专利标题 :
一种基于Hadoop的海量小文件缓存方法
专利标题(英):
暂无
公开(公告)号 :
CN108932288A
申请号 :
CN201810500093.2
公开(公告)日 :
2018-12-04
申请日 :
2018-05-22
授权号 :
CN108932288B
授权日 :
2022-04-12
发明人 :
魏文国彭建烽谢桂园戴青云蔡君赵慧民
申请人 :
广东技术师范学院
申请人地址 :
广东省广州市天河区中山大道293号
代理机构 :
广州三环专利商标代理有限公司
代理人 :
梁顺宜
优先权 :
CN201810500093.2
主分类号 :
G06F17/30
IPC分类号 :
G06F17/30  
法律状态
2022-04-12 :
授权
2022-03-29 :
著录事项变更
IPC(主分类) : G06F 16/172
变更事项 : 申请人
变更前 : 广东技术师范学院
变更后 : 广东技术师范大学
变更事项 : 地址
变更前 : 510665 广东省广州市天河区中山大道293号
变更后 : 510665 广东省广州市天河区中山大道293号
2018-12-28 :
实质审查的生效
IPC(主分类) : G06F 17/30
申请日 : 20180522
2018-12-04 :
公开
注:本法律状态信息仅供参考,即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载
  • 联系电话
    电话:023-6033-8768
    QQ:1493236332
  • 联系 Q Q
    电话:023-6033-8768
    QQ:1493236332
  • 关注微信
    电话:023-6033-8768
    QQ:1493236332
  • 收藏
    电话:023-6033-8768
    QQ:1493236332