一种前端监控系统中数据流控制的方法
公开
摘要

本发明公开了一种前端监控系统中数据流控制的方法,具体包括以下:采样和去重方案,数据上报量较大时,可以在采集端针对非关键日志加入随机采样,比如性能日志、请求成功的日志和pv日志;实际日志总量≈查询到的数量/采样率;在采集端,每个上报事件的结构大致是相同的,可以根据事件主要内容,字段内容做哈希,得到哈希ID,对于短时间内大量哈希ID相同的事件,维护哈希ID对应的事件内容。本发明通过采样、去重、实时流量控制多种手段,能够减小数据上报量、降低存储资源和数据处理的性能开销;而且能够实时控制上报数据流量大小,而无需重新发布前端应用;结合限流策略,可用避免短时间大量数据上报,造成服务不可用的风险。

基本信息
专利标题 :
一种前端监控系统中数据流控制的方法
专利标题(英):
暂无
公开(公告)号 :
CN114553743A
申请号 :
CN202111633376.2
公开(公告)日 :
2022-05-27
申请日 :
2021-12-28
授权号 :
暂无
授权日 :
暂无
发明人 :
童长胜丁丹丹鲁嘉睿
申请人 :
天翼电子商务有限公司
申请人地址 :
北京市昌平区未来科技城南区中国电信集团公司院内
代理机构 :
代理人 :
优先权 :
CN202111633376.2
主分类号 :
H04L43/0876
IPC分类号 :
H04L43/0876  H04L43/06  H04L43/04  G06F16/23  G06F16/22  G06F16/215  H04L67/60  H04L69/22  
法律状态
2022-05-27 :
公开
注:本法律状态信息仅供参考,即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载
  • 联系电话
    电话:023-6033-8768
    QQ:1493236332
  • 联系 Q Q
    电话:023-6033-8768
    QQ:1493236332
  • 关注微信
    电话:023-6033-8768
    QQ:1493236332
  • 收藏
    电话:023-6033-8768
    QQ:1493236332