一种面向多源大数据流的分布式索引方法
授权
摘要
本发明公开了一种面向多源大数据流的分布式索引方法，可实现数据流高效存储、索引快速构建，并提供高并发的近实时查询服务。针对多源大数据流特点，本发明提出了三层的分布式索引结构：最底层是基于数据流元组的索引，中间层是基于数据流时间窗口的索引，顶层是基于数据源的索引。由于单个计算节点的资源和处理能力有限，无法有效应对潜在规模无限和实时到达的数据流应用场景，本发明设计出主从结构和P2P结构相结合的集群架构。集群中主要由索引构建节点，查询节点，查询分发节点，存储节点，主控节点这五种节点组成，同时考虑集群中的数据存储、负载均衡、可扩展性因素，使得各个节点相互协作，稳定运转，从而提供高效的服务。
基本信息
专利标题 ：
一种面向多源大数据流的分布式索引方法
专利标题（英）：
暂无
公开（公告）号 ：
CN108920552A
申请号 ：
CN201810630231.9
公开（公告）日 ：
2018-11-30
申请日 ：
2018-06-19
授权号 ：
CN108920552B
授权日 ：
2022-04-29
发明人 ：
杨良怀卢晨曦范玉雷
申请人 ：
浙江工业大学
申请人地址 ：
浙江省杭州市下城区朝晖六区潮王路18号
代理机构 ：
杭州浙科专利事务所(普通合伙)
代理人 ：
周红芳
优先权 ：
CN201810630231.9
主分类号 ：
G06F17/30
IPC分类号 ：
G06F17/30
法律状态
2022-04-29 ：
授权
2018-12-25 ：
实质审查的生效
IPC(主分类) : G06F 17/30
申请日 : 20180619
申请日 : 20180619
2018-11-30 ：
公开
注：本法律状态信息仅供参考，即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载
