-
公开(公告)号:CN118381708B
公开(公告)日:2024-12-27
申请号:CN202410428516.X
申请日:2024-04-10
Applicant: 山东省计算中心(国家超级计算济南中心) , 齐鲁工业大学(山东省科学院)
IPC: H04L41/042 , H04L41/0895 , H04L41/40 , H04L41/16
Abstract: 本发明提出了一种跨域异构存储集群的管理调度方法及系统,以总存储成本最小、总吞吐量最大以及待存储数据集与即将存储的存储系统的位置最近为优化目标,采用非支配排序的遗传算法进行约束条件求解,进行最优存储位置的选择,不仅提高了数据访问性能,减少延迟,并降低了对网络带宽和存储资源的不必要消耗。
-
公开(公告)号:CN117596246B
公开(公告)日:2024-09-03
申请号:CN202410043836.3
申请日:2024-01-12
Applicant: 山东省计算中心(国家超级计算济南中心) , 齐鲁工业大学(山东省科学院)
IPC: H04L67/101 , H04L67/1012 , H04L67/1008 , H04L67/60
Abstract: 本发明提供了一种基于异构资源度量特征的算力网络工作流调度方法及系统,其属于算力网络资源调度技术领域,所述方案在细粒度资源描述度量基础上,综合考虑任务、算力、网络以及数据等资源状况,通过调度跨域数据中心资源协作,有效提升了任务处理速度,提高资源利用率;所述方案可根据任务多样化的需求,制定需求与资源高度契合的调度策略,可以更加准确地匹配任务与资源,选择最适合的数据中心来执行任务;所述方案中,工作流中的子任务通过合理分配资源,缩短了任务的执行过程,提高了工作流执行效率;同时,所述方案针对多个数据中心负载情况,避免部分数据中心过载而导致任务延迟或一些数据中心空闲造成资源浪费的情况。
-
公开(公告)号:CN116708446B
公开(公告)日:2023-11-21
申请号:CN202310967433.3
申请日:2023-08-03
Applicant: 山东省计算中心(国家超级计算济南中心) , 齐鲁工业大学(山东省科学院)
IPC: H04L67/1001 , H04L67/101 , H04L67/1097
-
公开(公告)号:CN116361006B
公开(公告)日:2023-11-21
申请号:CN202310357823.9
申请日:2023-03-31
Applicant: 山东省计算中心(国家超级计算济南中心) , 齐鲁工业大学(山东省科学院)
IPC: G06F9/50 , H04L67/1001
-
公开(公告)号:CN115756804A
公开(公告)日:2023-03-07
申请号:CN202211525386.9
申请日:2022-11-30
Applicant: 山东省计算中心(国家超级计算济南中心) , 齐鲁工业大学
IPC: G06F9/48 , G06F9/455 , G06F18/214 , G06N3/0464 , G06N3/0442
Abstract: 本发明涉及一种用于混合HPC集群场景下的多元资源需求预测方法和系统,包括:(1)初始化:搭建用于采集HPC应用运行数据的运行环境;部署HPC应用;(2)数据集获取:对运行环境分别部署监控,获取HPC应用在不同运行环境下运行时的数据特征;对得到的数据特征进行数据清洗和数据处理,得到用于多元资源需求预测模型训练的HPC数据集;(3)构建、训练并验证符合多输出预测的多元资源需求预测模型即MRDP模型;(4)通过训练好的MRDP模型进行多元资源需求预测;本发明解决了高性能计算领域内HPC作业资源需求的预测问题,以便于为混合HPC集群环境中HPC任务的感知调度方案提供决策。
-
公开(公告)号:CN112068943B
公开(公告)日:2022-11-25
申请号:CN202010933828.8
申请日:2020-09-08
Applicant: 山东省计算中心(国家超级计算济南中心)
Abstract: 本发明涉及一种复杂异构环境下的微服务调度方法及其实现系统,包括:(1)第一级调度:实时获取所有物理服务器、虚拟机、服务及微服务的基本信息,将有调用关系的微服务调度到关系距离更近的虚拟机中;保证各个微服务之间调用的高性能;(2)第二级调度:在业务应用运行过程中,统计一个时间段内虚拟机之间通信的延时和微服务之间的调用频繁程度,动态更新虚拟机之间的关系距离矩阵,周期性检查并迁移符合条件的微服务,保证调用频繁的微服务迁移到关系距离较近的虚拟机上。通过对微服务的两级调度之后,保证微服务能够被调度到合适的虚拟机上,尽量减少微服务跨虚拟机、跨物理服务器、跨网段调用,达到微服务之间高效调用的效果。
-
公开(公告)号:CN112965797B
公开(公告)日:2022-02-22
申请号:CN202110244427.6
申请日:2021-03-05
Applicant: 山东省计算中心(国家超级计算济南中心)
Abstract: 本发明的Kubernetes环境下面向复杂任务的组合优先级调度方法具体通过以下步骤来实现:a).计算每组任务的实际并行度;b).获取任务关键程度;c).获取用户优先级;d).获取用户的动态优先级;e).计算任务紧急程度;f).并行度和紧急程度的归一化处理;g).求优先级数值;h).pod排序和调度。本发明的组合优先级调度方法,由于在设置优先级时考虑到了任务并行性,可以避免其他任务提前占用节点资源导致并行任务无法获得资源而造成的任务执行失败问题。其次,在设置优先级时考虑到了任务紧急程度,可以保证紧急任务在节点资源不足时对非紧急任务所占用的资源进行抢占,从而成功执行紧急任务。
-
公开(公告)号:CN107426026B
公开(公告)日:2020-05-22
申请号:CN201710635754.8
申请日:2017-07-31
Applicant: 山东省计算中心(国家超级计算济南中心)
Abstract: 本发明的基于EEMD‑ARIMA的云计算服务器负载短期预测方法,首先针对负载数据,建立训练集;然后对负载数据进行EEMD分解得到多个IMF分量和余项;再计算每个IMF分量和余项的信息熵、相关系数和能量因子,进而建立有效评价因子选择有效的IMF分量和余项;最后对有效的分量分别进行ARIMA预测并求和得到最终预测结果,实现了对云计算服务器负载的精确短期预测。本发明方法适用于云计算服务器非稳定负载的预测,特别是公有云,用户资源需求具有随机突发性、短时间内可能会造成服务器负载呈现非平稳状态情形的预测,适用于云计算使用的所有负载类型,不受单一负载类型的限制。
-
公开(公告)号:CN107967179A
公开(公告)日:2018-04-27
申请号:CN201711312598.8
申请日:2017-12-12
Applicant: 山东省计算中心(国家超级计算济南中心)
CPC classification number: G06F9/5038 , G06F9/45558 , G06F9/505 , G06F2009/4557 , G06F2209/501 , G06F2209/5015 , G06F2209/5021 , G06F2209/503
Abstract: 本发明的支持突发应急的云计算资源分配方法,包括:a).获取包括用户优先级、资源需求的紧迫程度、资源申请数量和配置在内的用户资源申请信息;b).计算用户资源分配优先级;c).获取可用物理服务器的资源信息;d).计算物理服务器的资源利用率;e).建立虚拟机性能匹配最优、虚拟机提供时间最短、平台总体负载变化最小的多目标函数以及约束条件;f).建立虚拟机请求与物理服务器的映射关系;g).进行资源分配。本发明的云计算资源分配方法,通过建立的多目标函数和约束条件,采用多目标优化算法得到一组解集,选择一个解作为映射方案,即可实现虚拟机的最优化布设。同时,该分配方法具有支持突发应急的功能,突发应急用户可优先被分配。
-
公开(公告)号:CN107426026A
公开(公告)日:2017-12-01
申请号:CN201710635754.8
申请日:2017-07-31
Applicant: 山东省计算中心(国家超级计算济南中心)
Abstract: 本发明的基于EEMD-ARIMA的云计算服务器负载短期预测方法,首先针对负载数据,建立训练集;然后对负载数据进行EEMD分解得到多个IMF分量和余项;再计算每个IMF分量和余项的信息熵、相关系数和能量因子,进而建立有效评价因子选择有效的IMF分量和余项;最后对有效的分量分别进行ARIMA预测并求和得到最终预测结果,实现了对云计算服务器负载的精确短期预测。本发明方法适用于云计算服务器非稳定负载的预测,特别是公有云,用户资源需求具有随机突发性、短时间内可能会造成服务器负载呈现非平稳状态情形的预测,适用于云计算使用的所有负载类型,不受单一负载类型的限制。
-
-
-
-
-
-
-
-
-