一种基于列式存储数据仓库的轻量级分布式ETL架构方法
实质审查的生效
摘要
一种基于列式存储数据仓库的轻量级分布式ETL架构方法，通过Kettle工具集对数据库服务器的数据源进行抽取、转换，同时Airflow分布式调度平台结合Celery分布式消息队列调度作业，并采用Redis集群服务器作为代理在客户端和多个工作节点之间通信，保证了轻量级分布式ETL架构数据的一致性、并通过对象存储KS3服务器进行数据的保存与备份，保证数据的安全性，同时提高了调度作业的水平伸缩性及查询能力。
基本信息
专利标题 ：
一种基于列式存储数据仓库的轻量级分布式ETL架构方法
专利标题（英）：
暂无
公开（公告）号 ：
CN114528336A
申请号 ：
CN202111633433.7
公开（公告）日 ：
2022-05-24
申请日 ：
2021-12-28
授权号 ：
暂无
授权日 ：
暂无
发明人 ：
魏铭濡王里程
申请人 ：
鞍钢集团自动化有限公司
申请人地址 ：
辽宁省鞍山市高新区越岭路259号
代理机构 ：
鞍山嘉讯科技专利事务所(普通合伙)
代理人 ：
张群
优先权 ：
CN202111633433.7
主分类号 ：
G06F16/25
IPC分类号 ：
G06F16/25 G06F16/242 G06F16/23 G06F16/22 G06F16/27 G06F16/28
IPC结构图谱
G
G部——物理
G06
计算；推算或计数
G06F
电数字数据处理
G06F16/25
••涉及数据库管理系统的集合或接口系统
法律状态
2022-06-10 ：
实质审查的生效
IPC(主分类) : G06F 16/25
申请日 : 20211228
申请日 : 20211228
2022-05-24 ：
公开
注：本法律状态信息仅供参考，即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载
