一种分布式海量数据聚合采集方法

授权

摘要

本发明提供一种分布式海量数据聚合采集方法，采用SolrCloud分布式全文检索系统作为Flume Sink子组件的目标存储，由于SolrCloud集群的节点和Collection等配置信息使用的Zookeeper集群保存的特性，通过利用对相应znode节点注册Watcher的方法实现了近实时读取Collection的Schema信息，减少了一些冗余的配置项，实现了不需要重启Flume Agent即可获取最新的Schema配置信息；减少了发送到SolrCloud集群的数据量，提升了数据写入的效率。

基本信息

专利标题：

一种分布式海量数据聚合采集方法

专利标题（英）：

暂无

公开（公告）号：

CN108073705A

申请号：

CN201711365638.5

公开（公告）日：

2018-05-25

申请日：

2017-12-18

授权号：

CN108073705B

授权日：

2022-06-14

发明人：

苑晓龙

申请人：

郑州云海信息技术有限公司

申请人地址：

河南省郑州市郑东新区心怡路278号16层1601室

代理机构：

济南舜源专利事务所有限公司

代理人：

张亮

优先权：

CN201711365638.5

主分类号：

G06F17/30

IPC分类号：

G06F17/30

法律状态

2022-06-14 ：

授权

2022-04-05 ：

著录事项变更

IPC(主分类) : G06F 16/242
变更事项 : 申请人
变更前 : 浪潮云信息技术有限公司
变更后 : 浪潮云信息技术股份公司
变更事项 : 地址
变更前 : 250000 山东省济南市高新区浪潮路1036号浪潮科技园S01号楼
变更后 : 250000 山东省济南市高新区浪潮路1036号浪潮科技园S01号楼

2020-06-12 ：

专利申请权、专利权的转移

专利申请权的转移IPC(主分类) : G06F 17/30
登记生效日 : 20200522
变更事项 : 申请人
变更前权利人 : 郑州云海信息技术有限公司
变更后权利人 : 浪潮云信息技术有限公司
变更事项 : 地址
变更前权利人 : 450000 河南省郑州市郑东新区心怡路278号16层1601室
变更后权利人 : 250000 山东省济南市高新区浪潮路1036号浪潮科技园S01号楼

2018-06-19 ：

实质审查的生效

IPC(主分类) : G06F 17/30
申请日 : 20171218

2018-05-25 ：

公开

注：本法律状态信息仅供参考，即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。

文件下载

暂无PDF文件可下载