面向大规模AI数据流处理的集群汇集通信系统

授权

摘要

本发明涉及一种面向大规模AI数据流处理的集群汇集通信系统，运用统一的流配置和路由机制，屏蔽了应用程序对内网节点、汇集节点、GPU计算节点、外部传感节点的物理地址信息，只需按照功能类别和流的名字编写通信应用，大大地降低了应用的复杂度；基于组确认通信机制，大大减少了通信确认而造成的额外开销，实现了大规模并发数据流的可靠通信，克服了基于连接的可靠通信机制耗费通信资源的弱点，大大提高了并行通信的效率；采用动态配置机制，可灵活分配传感节点、汇集节点、GPU计算节点的网络关系和网络拓扑结构，适应性强；汇集并发AI数据流提交GPU计算，充分发挥了GPU计算的SPMD优势；汇集并发数据流，充分利用DMA通信机制，大大提高了通信效率。

基本信息

专利标题：

面向大规模AI数据流处理的集群汇集通信系统

专利标题（英）：

暂无

公开（公告）号：

CN111400048A

申请号：

CN202010207619.5

公开（公告）日：

2020-07-10

申请日：

2020-03-23

授权号：

CN111400048B

授权日：

2022-06-07

发明人：

陈庆奎那丽春涂聪姜海粟王季喜梁荣欣吴明杰龚慧林庄松林

申请人：

上海理工大学

申请人地址：

上海市杨浦区军工路516号

代理机构：

上海申汇专利代理有限公司

代理人：

徐颖

优先权：

CN202010207619.5

主分类号：

G06F9/50

IPC分类号：

G06F9/50 G06F13/28 H04L29/08