-
公开(公告)号:CN117808129B
公开(公告)日:2024-05-24
申请号:CN202410230139.9
申请日:2024-02-29
Applicant: 浪潮电子信息产业股份有限公司
IPC: G06N20/00 , G06N5/04 , G06N3/098 , G06N3/082 , G06N3/0495 , G06N3/0442
Abstract: 本发明提供一种异构分布式学习方法、装置、设备、系统及介质,涉及计算机技术领域,方法应用于边缘设备,联邦学习系统包含多个边缘设备,多个边缘设备已划分至多个设备簇,方法包括:利用本地训练数据对本地的机器学习模型进行迭代训练;各边缘设备中的机器学习模型对应相同的模型结构及推理任务;对训练后的机器学习模型进行压缩,并将压缩后的机器学习模型参数发送至自身所在设备簇的簇头边缘设备;当自身属于簇头边缘设备时,对接收到的机器学习模型参数进行簇内聚合得到簇内聚合模型参数,并将簇内聚合模型参数发送至边缘云服务器进行全局聚合;可通过设备分簇及模型压缩减少联邦学习过程中的通信量,从而可提升通信效率。
-
公开(公告)号:CN117808129A
公开(公告)日:2024-04-02
申请号:CN202410230139.9
申请日:2024-02-29
Applicant: 浪潮电子信息产业股份有限公司
IPC: G06N20/00 , G06N5/04 , G06N3/098 , G06N3/082 , G06N3/0495 , G06N3/0442
Abstract: 本发明提供一种异构分布式学习方法、装置、设备、系统及介质,涉及计算机技术领域,方法应用于边缘设备,联邦学习系统包含多个边缘设备,多个边缘设备已划分至多个设备簇,方法包括:利用本地训练数据对本地的机器学习模型进行迭代训练;各边缘设备中的机器学习模型对应相同的模型结构及推理任务;对训练后的机器学习模型进行压缩,并将压缩后的机器学习模型参数发送至自身所在设备簇的簇头边缘设备;当自身属于簇头边缘设备时,对接收到的机器学习模型参数进行簇内聚合得到簇内聚合模型参数,并将簇内聚合模型参数发送至边缘云服务器进行全局聚合;可通过设备分簇及模型压缩减少联邦学习过程中的通信量,从而可提升通信效率。
-
公开(公告)号:CN117808128A
公开(公告)日:2024-04-02
申请号:CN202410230128.0
申请日:2024-02-29
Applicant: 浪潮电子信息产业股份有限公司
Abstract: 本发明公开了一种数据异构条件下的图像处理方法、联邦学习方法及装置,涉及图像处理技术领域,边缘云服务器根据数据分布相似性对边缘计算设备分簇,簇内边缘计算设备具有相似的数据分布,可以让模型更好的捕捉到数据的特征。边缘计算设备采用残差分级训练的方式进行模型训练,实现细粒度模型训练,缓解数据分布差异大的问题。边缘计算设备与边缘云服务器在联邦学习过程中进行三层模型参数聚合,得到准确可靠的图像处理模型,最终边缘计算设备使用该准确可靠的图像处理模型进行图像处理,可以提升图像处理的准确性与可靠性。
-
公开(公告)号:CN117808127A
公开(公告)日:2024-04-02
申请号:CN202410230103.0
申请日:2024-02-29
Applicant: 浪潮电子信息产业股份有限公司
Abstract: 本发明公开了一种数据异构条件下的图像处理方法、联邦学习方法及装置,涉及图像处理技术领域,根据数据分布相似性对边缘计算设备分簇,簇内边缘计算设备具有相似的数据分布,可以让模型更好的捕捉到数据的特征,有效解决数据异构问题。簇内的边缘计算设备根据簇内树形聚合网络进行模型参数聚合,下层的边缘计算设备只向上一层中相应的边缘计算设备发送模型参数,而不向其他边缘计算设备发送模型参数,这样可以极大降低通信开销。边缘计算设备与边缘云服务器在联邦学习过程中进行两层模型参数聚合,得到准确可靠的图像处理模型,最终边缘计算设备使用该准确可靠的图像处理模型进行图像处理,可以提升图像处理的准确性与可靠性。
-
公开(公告)号:CN117834297B
公开(公告)日:2024-05-28
申请号:CN202410230015.0
申请日:2024-02-29
Applicant: 浪潮电子信息产业股份有限公司
Abstract: 本发明公开了一种攻击检测方法、装置、系统、电子设备及可读存储介质,应用于数据安全技术领域。其中,方法应用于边缘计算设备的联邦学习过程中,边缘云服务器基于各边缘计算设备的初始网络模型对目标数据集的推理结果生成有权无向图,基于该有权无向图将边缘计算设备划分为多个数据同性簇,并为之选择簇头。簇头获取属于同一个簇内的边缘计算设备的本地模型参数,基于待检测攻击的攻击特点确定具有攻击特征的边缘计算设备的模型参数更新特征,根据同一簇内各边缘计算设备的本地模型参数确定是否存在攻击设备。本发明可以解决相关技术中无法精准检测攻击导致用户数据无法得到保护的问题,能够有效检测恶意攻击设备,提升用户数据的安全性。
-
公开(公告)号:CN117808128B
公开(公告)日:2024-05-28
申请号:CN202410230128.0
申请日:2024-02-29
Applicant: 浪潮电子信息产业股份有限公司
Abstract: 本发明公开了一种数据异构条件下的图像处理方法、联邦学习方法及装置,涉及图像处理技术领域,边缘云服务器根据数据分布相似性对边缘计算设备分簇,簇内边缘计算设备具有相似的数据分布,可以让模型更好的捕捉到数据的特征。边缘计算设备采用残差分级训练的方式进行模型训练,实现细粒度模型训练,缓解数据分布差异大的问题。边缘计算设备与边缘云服务器在联邦学习过程中进行三层模型参数聚合,得到准确可靠的图像处理模型,最终边缘计算设备使用该准确可靠的图像处理模型进行图像处理,可以提升图像处理的准确性与可靠性。
-
公开(公告)号:CN117811845B
公开(公告)日:2024-05-24
申请号:CN202410230012.7
申请日:2024-02-29
Applicant: 浪潮电子信息产业股份有限公司
IPC: H04L9/40 , H04L67/10 , H04L41/142 , G06F18/23 , G06F18/213 , G06F18/22 , G06F21/62
Abstract: 本发明公开了一种威胁检测及模型训练方法、装置、系统、电子设备、介质,应用于数据安全技术领域。其中,方法包括边缘云服务器基于各边缘计算设备的推理结果生成的有权无向图进行数据同性簇划分,同时选择簇头。边缘计算设备基于分簇信息将本地模型参数发送至相应簇头,簇头根据其簇内设备的模型参数和网络攻击特点确定攻击设备,并将去除攻击设备后的其余本地模型参数的簇内聚合结果发送至边缘云服务器进行全局聚合;根据全局模型聚合参数不断更新本地模型参数直至全局型收敛,得到执行威胁检测任务的威胁检测模型。本发明可以解决相关技术中无法精准检测攻击导致用户数据无法得到保护的问题,能够有效提高威胁检测精度。
-
公开(公告)号:CN117834297A
公开(公告)日:2024-04-05
申请号:CN202410230015.0
申请日:2024-02-29
Applicant: 浪潮电子信息产业股份有限公司
Abstract: 本发明公开了一种攻击检测方法、装置、系统、电子设备及可读存储介质,应用于数据安全技术领域。其中,方法应用于边缘计算设备的联邦学习过程中,边缘云服务器基于各边缘计算设备的初始网络模型对目标数据集的推理结果生成有权无向图,基于该有权无向图将边缘计算设备划分为多个数据同性簇,并为之选择簇头。簇头获取属于同一个簇内的边缘计算设备的本地模型参数,基于待检测攻击的攻击特点确定具有攻击特征的边缘计算设备的模型参数更新特征,根据同一簇内各边缘计算设备的本地模型参数确定是否存在攻击设备。本发明可以解决相关技术中无法精准检测攻击导致用户数据无法得到保护的问题,能够有效检测恶意攻击设备,提升用户数据的安全性。
-
公开(公告)号:CN117811845A
公开(公告)日:2024-04-02
申请号:CN202410230012.7
申请日:2024-02-29
Applicant: 浪潮电子信息产业股份有限公司
IPC: H04L9/40 , H04L67/10 , H04L41/142 , G06F18/23 , G06F18/213 , G06F18/22 , G06F21/62
Abstract: 本发明公开了一种威胁检测及模型训练方法、装置、系统、电子设备、介质,应用于数据安全技术领域。其中,方法包括边缘云服务器基于各边缘计算设备的推理结果生成的有权无向图进行数据同性簇划分,同时选择簇头。边缘计算设备基于分簇信息将本地模型参数发送至相应簇头,簇头根据其簇内设备的模型参数和网络攻击特点确定攻击设备,并将去除攻击设备后的其余本地模型参数的簇内聚合结果发送至边缘云服务器进行全局聚合;根据全局模型聚合参数不断更新本地模型参数直至全局型收敛,得到执行威胁检测任务的威胁检测模型。本发明可以解决相关技术中无法精准检测攻击导致用户数据无法得到保护的问题,能够有效提高威胁检测精度。
-
公开(公告)号:CN117808125A
公开(公告)日:2024-04-02
申请号:CN202410230004.2
申请日:2024-02-29
Applicant: 浪潮电子信息产业股份有限公司
Abstract: 本发明公开了一种模型聚合方法、装置、设备、联邦学习系统及存储介质,属于边缘计算领域,用于对边缘计算设备中待聚合的模型参数进行筛选,解决了不重要的模型参数传输影响模型训练效率以及模型精度的问题。分别确定本地网络模型的各个模型参数对于本地网络模型性能的第一影响程度以及各个骨干网络层对于本地网络模型性能的第二影响程度,结合第一、第二影响程度对模型参数进行筛选,可剔除对本地网络模型性能影响较小的模型参数,不但降低了数据传输成本,提升了数据传输效率,而且避免了重要程度较低的模型参数对模型精度的影响,使中心服务器在工业设备故障预测、网络安全问题识别与图片分类时发挥最优的效果。
-
-
-
-
-
-
-
-
-