RocksDB数据快速压缩方法及系统
公开
摘要
本发明特别涉及一种RocksDB数据快速压缩方法及系统。该RocksDB数据快速压缩方法及系统，首先跳过中间层级向最低层直接合并压缩，以减少数据导入时写放大；同时逻辑拆分L0层，使L0层支持并行压缩，以提升数据导入效率，减少合并压缩时间；使用树结构代替链表，重写RocksDB的LSM的文件数据结构，使RocksDB支持乱序导入到baseLevel；每次生成新版本时创建sublevel数据，用于在数据合并时选择不重复的L0层文件，使得能运行更多的数据合并任务；同时生成SplitKey，在内存数据持久化时物理拆分成不重叠的SST文件。该RocksDB数据快速压缩方法及系统，使RocksDB在乱序导入时支持底层导入，加快了数据合并压缩，减少了导入需要的时间，极大地提高了数据压缩效率。
基本信息
专利标题 ：
RocksDB数据快速压缩方法及系统
专利标题（英）：
暂无
公开（公告）号 ：
CN114297164A
申请号 ：
CN202111608633.7
公开（公告）日 ：
2022-04-08
申请日 ：
2021-12-26
授权号 ：
暂无
授权日 ：
暂无
发明人 ：
刘金伟刘佳星刘芳蕾张炜刚
申请人 ：
山东浪潮科学研究院有限公司
申请人地址 ：
山东省济南市高新浪潮路1036号S02号楼
代理机构 ：
济南信达专利事务所有限公司
代理人 ：
郗艳荣
优先权 ：
CN202111608633.7
主分类号 ：
G06F16/174
IPC分类号 ：
G06F16/174 G06F16/16
IPC结构图谱
G
G部——物理
G06
计算；推算或计数
G06F
电数字数据处理
G06F16/174
•••文件系统执行的冗余消失
法律状态
2022-04-08 ：
公开
注：本法律状态信息仅供参考，即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载
