一种日志数据处理方法及装置
实质审查的生效
摘要

本发明提供了一种日志数据处理方法,应用于映射归约系统,规约系统包括映射模块和规约模块,该方法包括:通过映射模块获取目标文件,确定目标文件中各用户对应的初始日志;根据各用户的初始日志数量和规约模块的平均处理量为各初始日志分配盐值;按照各初始日志所对应的用户和盐值将初始日志分发至不同规约模块中,其中,属于同一用户,但盐值不同的初始日志分发至不同规约模块中;规约模块对接收到的初始日志进行规约处理,得到输出日志文件,通过执行本发明避免了数据倾斜,加快了日志处理系统的并行处理速度,提高了日志处理系统的处理效率。

基本信息
专利标题 :
一种日志数据处理方法及装置
专利标题(英):
暂无
公开(公告)号 :
CN114461381A
申请号 :
CN202111613815.3
公开(公告)日 :
2022-05-10
申请日 :
2021-12-27
授权号 :
暂无
授权日 :
暂无
发明人 :
王志华唐中平张武生彭华杰汪聘谭运保
申请人 :
天翼云科技有限公司
申请人地址 :
北京市东城区青龙胡同甲1号、3号2幢2层205-32室
代理机构 :
代理人 :
优先权 :
CN202111613815.3
主分类号 :
G06F9/50
IPC分类号 :
G06F9/50  G06F16/18  
IPC结构图谱
G
G部——物理
G06
计算;推算或计数
G06F
电数字数据处理
G06F9/00
程序控制装置,例如,控制单元
G06F9/06
应用存入的程序的,即应用处理设备的内部存储来接收程序并保持程序的
G06F9/46
多道程序装置
G06F9/50
资源分配,例如,中央处理单元的
法律状态
2022-05-27 :
实质审查的生效
IPC(主分类) : G06F 9/50
申请日 : 20211227
2022-05-10 :
公开
注:本法律状态信息仅供参考,即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载
  • 联系电话
    电话:023-6033-8768
    QQ:1493236332
  • 联系 Q Q
    电话:023-6033-8768
    QQ:1493236332
  • 关注微信
    电话:023-6033-8768
    QQ:1493236332
  • 收藏
    电话:023-6033-8768
    QQ:1493236332