- 专利标题: 一种适用于计算能力异构集群的分布式作业调度方法
- 专利标题(英): Distributed job scheduling method suitable for heterogeneous computational capability cluster
-
申请号: CN201510579836.6申请日: 2015-09-11
-
公开(公告)号: CN105159769A公开(公告)日: 2015-12-16
- 发明人: 高原 , 徐春雷 , 顾文杰 , 苏大威 , 任升 , 江叶峰 , 沙一川 , 仇晨光 , 方华建 , 余璟 , 吴海伟 , 庄卫金 , 孟勇亮 , 孙名扬 , 孙世明
- 申请人: 国电南瑞科技股份有限公司 , 国电南瑞南京控制系统有限公司
- 申请人地址: 江苏省南京市高新技术开发区高新路20号
- 专利权人: 国电南瑞科技股份有限公司,国电南瑞南京控制系统有限公司
- 当前专利权人: 国电南瑞科技股份有限公司,国电南瑞南京控制系统有限公司,国家电网公司,江苏省电力公司,南京南瑞集团公司
- 当前专利权人地址: 江苏省南京市高新技术开发区高新路20号
- 代理机构: 南京纵横知识产权代理有限公司
- 代理商 汪庆朋; 董建林
- 主分类号: G06F9/48
- IPC分类号: G06F9/48 ; G06F9/50
摘要:
本发明公开了一种适用于计算能力异构集群的分布式作业调度方法,包括五个步骤:第一,节点资源的自动化发现;集群中的每个节点将资源信息以组播报文的方式发送到网络中,调度器接收组播报文,自动发现集群节点;第二,基于FIFO和资源利用最大化的作业调度机制。第三,基于数据集的动态再调度机制。作业管理器动态调整各个任务的数据集;第四,延迟调度机制。将作业的部分任务部署到所有节点,剩下的任务提交到延迟队列等待调度。第五,使用冗余互备机制。调度器为每个任务部署备份任务,保证在任务故障或者离线后,备份任务依然能够提供计算结果。本发明提高了集群的分布式处理能力,提升了系统的资源利用率,确保了作业处理的可靠性。
公开/授权文献
- CN105159769B 一种适用于计算能力异构集群的分布式作业调度方法 公开/授权日:2018-06-29