面向神经网络计算的分布式数据路由的建模方法和装置
公开
摘要
本发明提供了一种面向神经网络计算的分布式数据路由的建模方法和装置,包括如下步骤:S1:设计物理张量的分布式属性:将逻辑张量与物理张量的映射关系抽象为广播属性、散播属性和局部规约属性三种分布式属性;S2:推演输出张量的分布式属性:指定输入张量的分布式属性,然后根据已知的输入张量的分布式属性推演输出张量的合法分布式属性;S3:根据分布式属性情形判断是否需要插入中间通信原语得到局部物理张量的分布式属性;利用所述的面向神经网络计算的分布式数据路由的建模方法和装置搭建模型,分布式设计和开发的难度低,推动了深度神经网络大模型落地应用的发展。
基本信息
专利标题 :
面向神经网络计算的分布式数据路由的建模方法和装置
专利标题(英):
暂无
公开(公告)号 :
CN114598631A
申请号 :
CN202210455426.0
公开(公告)日 :
2022-06-07
申请日 :
2022-04-28
授权号 :
暂无
授权日 :
暂无
发明人 :
王宏升何水兵鲍虎军陈光
申请人 :
之江实验室
申请人地址 :
浙江省杭州市余杭区之江实验室南湖总部
代理机构 :
北京志霖恒远知识产权代理事务所(普通合伙)
代理人 :
奚丽萍
优先权 :
CN202210455426.0
主分类号 :
H04L45/00
IPC分类号 :
H04L45/00 H04L45/44 G06N3/08
法律状态
2022-06-07 :
公开
注:本法律状态信息仅供参考,即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载