-
公开(公告)号：CN117811846B
公开(公告)日：2024-05-28
申请号：CN202410230120.4
申请日：2024-02-29
Applicant: 浪潮电子信息产业股份有限公司
IPC: H04L9/40 , H04L67/10 , H04L41/142 , G06N3/045 , G06N3/098
Abstract: 本发明公开了一种基于分布式系统的网络安全检测方法、系统、设备及介质，涉及网络安全领域，为解决边缘计算设备采用固定大小的本地网络安全检测模型无法发挥最优性能的问题，该方法包括基于本地安全数据训练初始网络安全检测模型；将测试安全数据集输入初始网络安全检测模型后，根据两个输出网络块对应的输出值调整初始网络安全检测模型的神经网络深度得到本地网络安全检测模型；当满足参数更新条件时，利用本地网络安全检测模型的模型参数和关联计算设备的模型参数更新本地网络安全检测模型；通过更新后的本地网络安全检测模型进行本地网络安全检测。本发明能够使边缘计算设备发挥最优的本地网络安全检测性能，减少了通信开销和带宽需求。
-
公开(公告)号：CN117971630A
公开(公告)日：2024-05-03
申请号：CN202410382408.3
申请日：2024-04-01
Applicant: 浪潮电子信息产业股份有限公司
IPC: G06F11/34 , G06F9/445 , G06F18/214
Abstract: 本发明公开了一种异构计算平台及其任务仿真与耗时预测方法、装置、设备，应用于异构计算领域。其中，方法包括获取异构计算平台采用层间并行方式执行目标任务的任务配置信息；调用预先构建的子任务训练耗时确定模型，根据任务配置信息中的目标任务特征确定各目标算力的子任务训练耗时信息。根据各目标算力的子任务训练耗时信息、任务配置信息中各子任务对应的目标算力及相应处理顺序，对采用层间并行方式执行目标任务的过程进行仿真，最后根据仿真结果确定目标任务的训练耗时预测结果。本发明可以解决相关技术并行训练任务的训练耗时无法精准预测的问题，能够实现精准预测层间并行训练任务的训练耗时。
-
公开(公告)号：CN117829274A
公开(公告)日：2024-04-05
申请号：CN202410230112.X
申请日：2024-02-29
Applicant: 浪潮电子信息产业股份有限公司
IPC: G06N3/098 , G06N5/04 , G06V10/764 , G06V10/82 , G06Q10/04
Abstract: 本发明公开了一种模型融合方法、装置、设备、联邦学习系统及存储介质，属于边缘计算领域，用于在簇内聚合与全局聚合时分别确定权重系数进行加权聚合，解决了边缘计算设备的数据异构导致的模型精度受损的问题。一方面由各簇簇头为簇内各边缘计算设备确定设备权重系数，并进行加权聚合，另一方面由中心服务器确定各个簇的簇权重系数，并进行加权聚合，在两次加权聚合时分别参考对应的模型性能进行权重系数的确定，不但可以根据重要性区别调节对于各边缘计算设备的学习率，提升了全局网络模型的精度，使中心服务器在工业设备故障预测、网络安全问题识别与图片分类时发挥最优的效果。
-
公开(公告)号：CN117806838A
公开(公告)日：2024-04-02
申请号：CN202410230125.7
申请日：2024-02-29
Applicant: 浪潮电子信息产业股份有限公司
IPC: G06F9/50 , G06F18/22 , G06F18/241 , G06N20/00 , G06N5/04
Abstract: 本发明提供基于异构数据的设备分簇方法、装置、设备、系统及介质，涉及计算机技术领域，首先可将多个边缘设备划分至多个设备簇，以便各边缘设备对机器学习模型进行层级联邦训练；同时，在分簇过程中，本发明可确定各边缘设备本地的机器学习模型对同一测试数据集的推理结果，并可基于该推理结果确定各边缘设备间的训练数据相似度；进而，可利用各训练数据相似度将各边缘设备划分至多个设备簇，即可在分簇过程中考虑数据异构的特点和分布情况，并将拥有相似数据的设备放在同一簇中，从而可提高簇内数据的相似性。这样，在各边缘设备进行层级联邦训练时，可确保相近的机器学习模型参数先聚合，可确保全局模型更快收敛，并可提升联邦学习效率。
-
公开(公告)号：CN117155928B
公开(公告)日：2024-02-09
申请号：CN202311423755.8
申请日：2023-10-31
Applicant: 浪潮电子信息产业股份有限公司
IPC: H04L67/10 , H04L67/1095 , H04L41/0894
Abstract: 本发明公开了一种通信任务处理方法、系统、设备、集群及可读存储介质，涉及分布式集群领域，为解决通信策略浪费节点内带宽的问题，该方法包括根据预设模型在分布式集群的各个设备上的部署策略，确定分布式集群中的发送节点和接收节点；当存在一个或多个通信任务，将各个通信任务一一对应分配给各个发送设备，对通信任务对应的任务数据进行划分得到多个分区数据，控制通信任务对应的发送设备将多个分区数据依次发送至一个接收节点；针对每一接收节点，控制接收节点对其接收到的分区数据在自身节点内的各个设备中进行数据同步，并将分区数据发送给未接收到分区数据的其他接收节点。本发明能够充分利用节点内的带宽，提升分布式集群的资源利用率。
-
Patent Agency Ranking
公开(公告)号：CN116962438B
公开(公告)日：2024-01-23
申请号：CN202311220016.9
申请日：2023-09-21
Applicant: 浪潮电子信息产业股份有限公司
IPC: H04L67/1095 , H04L41/12 , H04L67/10 , G06F18/214
Abstract: 本发明公开了一种梯度数据同步方法、系统、电子设备及可读存储介质，涉及分布式集群领域，为解决特定逻辑拓扑的方案无法在随机网络中取得好的数据同步性能的问题，该方法包括：获取分布式训练集群的物理拓扑关系及当前数据同步算法对应的逻辑拓扑关系；将物理拓扑关系中的各物理拓扑节点一一映射到逻辑拓扑关系中的各逻辑拓扑节点，得到至少一个映射拓扑关系；计算当前数据同步算法基于每一映射拓扑关系进行梯度数据同步时的通信开销，将通信开销最小的映射拓扑关系确定为最优映射拓扑关系；基于最优映射拓扑关系和当前数据同步算法进行梯度数据同步。本发明能够提高任意一种随机网络中的梯度数据同步通信的效率，提高网络带宽利用率。
-
公开(公告)号：CN116701043B
公开(公告)日：2024-01-12
申请号：CN202310974735.3
申请日：2023-08-04
Applicant: 浪潮电子信息产业股份有限公司
IPC: G06F11/07 , G06F18/214
Abstract: 本发明涉及多元异构计算技术领域，公开了面向异构计算系统的故障节点切换方法、装置和设备，当检测到存活信息异常的故障节点时，收集网络带宽信息；根据存活信息和任务运行状态，确定出可用计算节点。依据各可用计算节点的参数量、计算耗时以及网络带宽信息，确定出各可用计算节点部署故障节点的分布式训练后的迭代耗时。基于迭代耗时、峰值算力以及平均耗时，从各可用计算节点中选取出替换节点，保证了在尽量不浪费计算资源并且尽量不影响计算效率的同时，选择出最优的替换节点；将故障节点所对应的训练模型和参数下发至替换节点，向替换节点部署故障节点所属的通信环和环连接顺序，使得替换节点代替故障节点工作，保证了训练任务的继续运行。
-
公开(公告)号：CN116700934B
公开(公告)日：2023-11-07
申请号：CN202310974724.5
申请日：2023-08-04
Applicant: 浪潮电子信息产业股份有限公司
IPC: G06F9/48
Abstract: 本发明公开了一种多元异构算力设备调度方法、装置、设备及存储介质，涉及计算机技术领域。该方法包括：获取多元异构算力设备对应的算子级算力表；所述算子级算力表用于表征算子在不同类型的算力设备上的性能高低；根据所述算子级算力表通过两级聚簇方式将数据处理模型相关的算子部署到相应的算力设备上，以得到数据处理模型与多元异构设备的映射关系；根据所述数据处理模型与多元异构设备的映射关系进行多元异构算力设备调度。能够最大限度的利用各底层硬件资源，能够有效提升高通量数据处理模型的处理效率，提升数据处理的性能。
-
公开(公告)号：CN116700995B
公开(公告)日：2023-11-03
申请号：CN202310967987.3
申请日：2023-08-03
Applicant: 浪潮电子信息产业股份有限公司
IPC: G06F9/50 , G06F16/22 , G06F16/2455 , G06F3/06
Abstract: 本发明公开了一种异构内存池并发访问方法、装置、设备及存储介质，涉及内存访问技术领域。该方法包括：获取数据处理模型相关的输入数据，并对所述输入数据进行拆分得到对应的数据块；将所述数据处理模型相关的模型参数存储至动态随机存取内存，并将所述数据块存储至持久性内存；根据所述持久性内存中每个所述输入数据以及所述输入数据对应的数据块，构建二层索引；获取至少两个数据处理任务的读取请求，根据所述读取请求和所述二层索引并行访问所述持久性内存，以从所述持久性内存中读取目标数据块至所述动态随机存取内存，以便根据所述目标数据块和所述模型参数执行数据处理。能够高效的利用异构内存，提升内存的并发访存效率。
-
公开(公告)号：CN116644006B
公开(公告)日：2023-11-03
申请号：CN202310928102.9
申请日：2023-07-27
Applicant: 浪潮电子信息产业股份有限公司
IPC: G06F12/1009
Abstract: 本发明公开了一种内存页面管理方法、系统、装置、设备及计算机介质，涉及内存管理技术领域，获取待访问数据的目标虚拟地址；基于目标虚拟地址在地址转换高速缓存中进行物理地址查找；若在地址转换高速缓存中查找到对应的待访问物理地址，则从待访问物理地址中读取待访问的目标数据；若未在地址转换高速缓存中查找到待访问物理地址，则基于目标虚拟地址在统一编址的多组页表中并行进行物理地址查找，若查找到待访问物理地址，则从待访问物理地址中读取待访问的目标数据；其中，本地内存包括目标节点中的内存，其他内存包括目标节点之外的其他节点中的内存。扩大了目标处理器所能应用的内存，提高了处理器工作负载的效率和性能。
-
-
-
-
-
-
-
-
-
Search Results
101
records
(took 0.042 seconds)
