-
公开(公告)号:CN107038069B
公开(公告)日:2020-05-08
申请号:CN201710181055.0
申请日:2017-03-24
Applicant: 北京工业大学
Abstract: 本发明公开了Hadoop平台下动态标签匹配DLMS调度方法,属于计算机软件领域,针对Hadoop集群节点性能差异大、资源分配随机性、执行时间过长的问题,本发明提出一种将节点性能标签(以下简称节点标签)和作业类别标签(以下简称作业标签)进行动态匹配的调度器。节点初始分类并赋予原始节点标签,节点检测自身性能指标生成动态节点标签,作业根据部分运行信息进行分类生成作业标签,资源调度器将节点资源分配给对应标签的作业。实验结果表明,相对于YARN中自带的调度器在作业执行时间上有较大的缩短。
-
公开(公告)号:CN107038069A
公开(公告)日:2017-08-11
申请号:CN201710181055.0
申请日:2017-03-24
Applicant: 北京工业大学
Abstract: 本发明公开了Hadoop平台下动态标签匹配DLMS调度方法,属于计算机软件领域,针对Hadoop集群节点性能差异大、资源分配随机性、执行时间过长的问题,本发明提出一种将节点性能标签(以下简称节点标签)和作业类别标签(以下简称作业标签)进行动态匹配的调度器。节点初始分类并赋予原始节点标签,节点检测自身性能指标生成动态节点标签,作业根据部分运行信息进行分类生成作业标签,资源调度器将节点资源分配给对应标签的作业。实验结果表明,相对于YARN中自带的调度器在作业执行时间上有较大的缩短。
-