一种动态资源分配方法、装置、存储介质及设备
摘要:
本发明公开了一种动态资源分配方法、装置、存储介质及设备。所述方法包括:获取资源库中的资源总量、目标作业的已用资源量、可用资源量,以及所述目标作业的并行度;监控所述目标作业在数据混洗阶段的执行时间;若所述数据混洗阶段的执行时间大于预设时长,则按预定规则调整目标作业的已用资源量、可用资源量,以及所述目标作业的并行度;根据资源库中的资源总量以及调整后的所述目标作业的可用资源量,确定资源库中的剩余资源量;判断调整后的可用资源量是否小于所述剩余资源量;若调整后的可用资源量小于剩余资源量,则继续监控所述目标作业在数据混洗阶段的执行时间。本申请可以通过动态调整并行度,来提高大数据框架的运行效能。
0/0