基于能耗的异构计算系统任务处理方法、系统以及产品

    公开(公告)号:CN119200811A

    公开(公告)日:2024-12-27

    申请号:CN202411732111.1

    申请日:2024-11-29

    Abstract: 本发明公开了一种基于能耗的异构计算系统任务处理方法、系统以及产品,涉及计算机技术领域。依据当前训练任务的任务需求参数确定预选异构算力设备,保证当前的训练任务在执行过程中能够顺利完成的前提下确定的预选异构算力设备的数量。选取与预选异构算力设备的数量相同预选存储设备,保证预选异构算力设备与预选存储设备呈现匹配一一对应的关系。基于各预选异构算力设备与各预先存储设备之间的各个组合关系和能耗确定最终能耗,利用能耗优化处理的能耗特征,对各预选异构算力设备与各预选存储设备下的不同组合关系确定的优化处理方式,提高各预选异构算力设备与各预选存储设备的匹配度,降低各预选异构算力设备与各预选存储设备之间的能耗。

    数据异构条件下的图像处理方法及装置

    公开(公告)号:CN117808128B

    公开(公告)日:2024-05-28

    申请号:CN202410230128.0

    申请日:2024-02-29

    Abstract: 本发明公开了一种数据异构条件下的图像处理方法、联邦学习方法及装置,涉及图像处理技术领域,边缘云服务器根据数据分布相似性对边缘计算设备分簇,簇内边缘计算设备具有相似的数据分布,可以让模型更好的捕捉到数据的特征。边缘计算设备采用残差分级训练的方式进行模型训练,实现细粒度模型训练,缓解数据分布差异大的问题。边缘计算设备与边缘云服务器在联邦学习过程中进行三层模型参数聚合,得到准确可靠的图像处理模型,最终边缘计算设备使用该准确可靠的图像处理模型进行图像处理,可以提升图像处理的准确性与可靠性。

    异构算力的耗时预测仿真方法、装置、设备、介质及系统

    公开(公告)号:CN117827619B

    公开(公告)日:2024-05-24

    申请号:CN202410230017.X

    申请日:2024-02-29

    Abstract: 本发明公开了计算机技术领域内的一种异构算力的耗时预测仿真方法、装置、设备、介质及系统。本发明能够构建包括通信图节点和计算图节点的有向图,从而根据多个异构算力设备的网络拓扑信息仿真得到的仿真网络预测多个通信图节点的通信耗时,根据有向图预测多个计算图节点的计算耗时,累计通信耗时和计算耗时得到模型训练任务的训练耗时。由于无需部署实际的算力设备,因此没有部署难度,实现成本低,可根据预测的训练耗时优化算力设备的部署策略,预测准确度更高,适用于多元异构计算系统。

    异构算力的耗时预测仿真方法、装置、设备、介质及系统

    公开(公告)号:CN117827619A

    公开(公告)日:2024-04-05

    申请号:CN202410230017.X

    申请日:2024-02-29

    Abstract: 本发明公开了计算机技术领域内的一种异构算力的耗时预测仿真方法、装置、设备、介质及系统。本发明能够构建包括通信图节点和计算图节点的有向图,从而根据多个异构算力设备的网络拓扑信息仿真得到的仿真网络预测多个通信图节点的通信耗时,根据有向图预测多个计算图节点的计算耗时,累计通信耗时和计算耗时得到模型训练任务的训练耗时。由于无需部署实际的算力设备,因此没有部署难度,实现成本低,可根据预测的训练耗时优化算力设备的部署策略,预测准确度更高,适用于多元异构计算系统。

    分布式集群的通信方法、系统、电子设备及可读存储介质

    公开(公告)号:CN117155929B

    公开(公告)日:2024-02-09

    申请号:CN202311423771.7

    申请日:2023-10-31

    Abstract: 本发明公开了一种分布式集群的通信方法、系统、电子设备及可读存储介质,涉及分布式集群领域,为解决受网络带宽限制使得集群间通信效率低的问题,该通信方法包括:确定分布式集群中的参数更新节点以及多个子集群;针对每一子集群,获取子集群对预设模型的多个阶段依次进行计算得到的多个梯度数据;确定获取到的各个阶段的梯度数据的发送次序;按发送次序从先到后的顺序将梯度数据发送至参数更新节点,以便通过参数更新节点基于梯度数据执行参数更新操作。本发明能够实现对集群间的网络带宽的充分利用,从而提高通信效率。

Patent Agency Ranking