一种分布式的数据分析任务调度系统及方法
公开
摘要
本发明公开了一种分布式的数据分析任务调度系统及方法，所述的方法包括：获取数据分析任务信息和处理节点信息；将所述的数据分析任务拆分成若干个计算片段，并根据所述的计算片段设定数据处理任务，将所述的数据处理任务发送至各个处理节点进行运算；识别所有的处理节点的ID信息，判断是否存在闲置节点，所述的闲置节点为未在执行所述的数据处理任务的处理节点；获取所述的闲置节点的信息和所述的工作节点的数据处理任务的信息，从所述的数据处理任务中拆分出若干个子任务，分配至所述的闲置节点进行运算。相比于传统方式，本发明可以在处理任务的过程中任意增加处理节点的数量，从而提高工作效率。
基本信息
专利标题 ：
一种分布式的数据分析任务调度系统及方法
专利标题（英）：
暂无
公开（公告）号 ：
CN114625542A
申请号 ：
CN202210315450.4
公开（公告）日 ：
2022-06-14
申请日 ：
2022-03-28
授权号 ：
暂无
授权日 ：
暂无
发明人 ：
肖英黄银秀穆炜炜刘其琛冯馨欧阳广李倩倩
申请人 ：
湖南化工职业技术学院（湖南工业高级技工学校）
申请人地址 ：
湖南省株洲市石峰区清石路2号
代理机构 ：
湖南正则奇美专利代理事务所(普通合伙)
代理人 ：
肖琦
优先权 ：
CN202210315450.4
主分类号 ：
G06F9/50
IPC分类号 ：
G06F9/50
IPC结构图谱
G
G部——物理
G06
计算；推算或计数
G06F
电数字数据处理
G06F9/00
程序控制装置，例如，控制单元
G06F9/06
应用存入的程序的，即应用处理设备的内部存储来接收程序并保持程序的
G06F9/46
多道程序装置
G06F9/50
资源分配，例如，中央处理单元的
法律状态
2022-06-14 ：
公开
注：本法律状态信息仅供参考，即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载
