数据处理方法及装置、计算机存储介质、电子设备
实质审查的生效
摘要
本公开涉及计算机技术领域,提供了一种数据处理方法、数据处理装置、计算机存储介质、电子设备,应用于数据分片终端,所述数据分片终端与多个参数服务器通信连接,所述参数服务器用于维护待存储数据,其中,数据处理方法包括:按照预设分片数目将待存储数据划分为带有分片序号的多个分片;根据所述预设分片数目和所述参数服务器的数目,确定分配至各所述参数服务器的分片序号,以使各所述参数服务器加载所述分片序号对应的分片,并为所述分片创建索引。本公开能够在参数服务器数目变更时,避免数据重分片操作,提高数据的加载效率,从而提升模型训练和模型上线的效率。
基本信息
专利标题 :
数据处理方法及装置、计算机存储介质、电子设备
专利标题(英):
暂无
公开(公告)号 :
CN114443658A
申请号 :
CN202210088857.8
公开(公告)日 :
2022-05-06
申请日 :
2022-01-25
授权号 :
暂无
授权日 :
暂无
发明人 :
邢召龙刘近光王文生张克丰包勇军刘倩欣张林贺旭熊俊
申请人 :
北京沃东天骏信息技术有限公司;北京京东世纪贸易有限公司
申请人地址 :
北京市大兴区北京经济技术开发区科创十一街18号院2号楼4层A402室
代理机构 :
北京律智知识产权代理有限公司
代理人 :
王辉
优先权 :
CN202210088857.8
主分类号 :
G06F16/22
IPC分类号 :
G06F16/22 G06F16/23 G06F16/2455
IPC结构图谱
G
G部——物理
G06
计算;推算或计数
G06F
电数字数据处理
G06F16/22
••索引;数据结构;存储结构
法律状态
2022-05-24 :
实质审查的生效
IPC(主分类) : G06F 16/22
申请日 : 20220125
申请日 : 20220125
2022-05-06 :
公开
注:本法律状态信息仅供参考,即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载