数据采集方法、装置、电子设备及存储介质
实质审查的生效
摘要

本发明涉及数据处理领域,揭露一种数据采集方法,包括:识别数据采集需求的数据类别,数据类别包括行为数据和业务数据;在数据类别为业务数据时,从业务数据库中获取待采集数据,采用主备复制的方式将业务数据库的待采集数据加载至数据同步组件,基于预构建的容错机制将数据同步组件的数据存储至消息中间件;在数据类别为行为数据时,从前端页面中获取待采集数据,采用故障转移的方式将前端页面中的待采集数据加载至日志采集系统的数据采集层,将数据采集层中的数据存入缓存队列;将缓存队列的数据加载至日志采集系统的分发层,基于预构建的容错机制将分发层的数据存储至消息中间件中。本发明可以实现数据采集的零丢失,保障数据采集的完整性。

基本信息
专利标题 :
数据采集方法、装置、电子设备及存储介质
专利标题(英):
暂无
公开(公告)号 :
CN114371962A
申请号 :
CN202210056348.7
公开(公告)日 :
2022-04-19
申请日 :
2022-01-18
授权号 :
暂无
授权日 :
暂无
发明人 :
李志敏
申请人 :
平安国际智慧城市科技股份有限公司
申请人地址 :
广东省深圳市前海深港合作区妈湾兴海大道3048号前海自贸大厦1-34层
代理机构 :
深圳市沃德知识产权代理事务所(普通合伙)
代理人 :
高杰
优先权 :
CN202210056348.7
主分类号 :
G06F11/14
IPC分类号 :
G06F11/14  G06F11/34  G06F16/178  G06F16/18  G06F9/54  
IPC结构图谱
G
G部——物理
G06
计算;推算或计数
G06F
电数字数据处理
G06F11/00
错误检测;错误校正;监控
G06F11/07
响应错误的产生,例如,容错
G06F11/14
用运算中的冗余作数据的错误检测或校正,例如,通过采用导致相同结果的不同运算序列
法律状态
2022-05-06 :
实质审查的生效
IPC(主分类) : G06F 11/14
申请日 : 20220118
2022-04-19 :
公开
注:本法律状态信息仅供参考,即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载
  • 联系电话
    电话:023-6033-8768
    QQ:1493236332
  • 联系 Q Q
    电话:023-6033-8768
    QQ:1493236332
  • 关注微信
    电话:023-6033-8768
    QQ:1493236332
  • 收藏
    电话:023-6033-8768
    QQ:1493236332