一种设有内存置换的海量数据聚合方法及系统

实质审查的生效

摘要

本发明涉及一种设有内存置换的海量数据聚合方法及系统，其中数据聚合方法包括：步骤1：输入记录，获取记录聚合维度组合的桶值BucketV，经过略图计算，获得桶的最大频次值MaxV；步骤2：判断记录的桶值BucketV是否在最小堆中，若是，则更新最小堆中的桶的频次为新的MaxV，并在内存中寻找桶，进行数据聚合统计，否则，执行步骤3；步骤3：判断MaxV是否比最小堆的堆顶元素小，若是，则直接从磁盘中加载数据并进行聚合统计，统计完成后更新到磁盘中，完成数据聚合，否则，执行步骤4；步骤4：进行内存置换，并在内存中进行数据聚合统计，完成数据聚合。与现有技术相比，本发明具有数据处理效率高、能够保证常用数据存储在内存中等优点。

基本信息

专利标题：

一种设有内存置换的海量数据聚合方法及系统

专利标题（英）：

暂无

公开（公告）号：

CN114528232A

申请号：

CN202210100669.2

公开（公告）日：

2022-05-24

申请日：

2022-01-27

授权号：

暂无

授权日：

暂无

发明人：

阳华

申请人：

中银金融科技有限公司

申请人地址：

上海市浦东新区中国(上海)自由贸易试验区银城中路200号4层408室

代理机构：

上海科盛知识产权代理有限公司

代理人：

赵志远

优先权：

CN202210100669.2

主分类号：

G06F12/12

IPC分类号：

G06F12/12

IPC结构图谱

G部——物理

G06

计算；推算或计数

G06F

电数字数据处理

G06F12/00

安装在筛选装置之上的在存储器系统或体系结构内的存取、寻址或分配

G06F12/02

寻址或地址分配；地址的重新分配

G06F12/08

在分级结构的存储系统中的寻址、地址分配、或地址的重新分配，例如，虚拟存储系统

G06F12/12

替换控制

法律状态

2022-06-10 ：

实质审查的生效

IPC(主分类) : G06F 12/12
申请日 : 20220127

2022-05-24 ：

公开

注：本法律状态信息仅供参考，即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。

文件下载

暂无PDF文件可下载