-
公开(公告)号:CN118332584B
公开(公告)日:2024-08-27
申请号:CN202410748751.5
申请日:2024-06-12
Applicant: 山东省计算中心(国家超级计算济南中心) , 齐鲁工业大学(山东省科学院)
Abstract: 本发明属于机器学习的技术领域,具体涉及面向分布式机器学习的数据安全治理方法、装置、电子设备和存储介质。该方法包括:节点获取其相邻节点在当前迭代中的局部参数,利用即时可靠分数函数计算相邻节点的即时可靠分数,以为相邻节点构建可靠性模型,设定可靠性模型更新规则,在每次迭代中基于该规则对可靠性模型的可靠指数或不可靠指数进行更新;将更新后的可靠性模型代入Beta分布,获取相邻节点的可靠程度并以此构建可靠节点集合;基于可靠节点集合中所有可靠相邻节点的参数计算当前迭代中节点的聚合结果,结合梯度下降更新节点的参数,将更新后的参数发送至其每个相邻节点。本发明可消除拜占庭攻击的影响,确保学习模型的准确性。
-
公开(公告)号:CN118484540A
公开(公告)日:2024-08-13
申请号:CN202410946552.5
申请日:2024-07-16
Applicant: 山东省计算中心(国家超级计算济南中心) , 齐鲁工业大学(山东省科学院) , 山东省公安厅
IPC: G06F16/35 , G06F18/213 , G06F18/2415 , G06N3/0442 , G06N3/0464 , G06N3/0455
Abstract: 本发明属于文本分类技术领域,具体涉及一种基于特征感知的文本分类方法及系统,包括:获取待分类文本数据;提取所获取的文本数据的全局特征和局部特征;采用多头注意力机制处理所提取的文本数据的全局特征和局部特征;基于特征感知算法优化处理后的文本数据的全局特征和局部特征,动态调整特征选择和网络参数,得到文本表示特征;根据所得到的文本表示特征计算待分类文本的分类概率,完成待分类文本的分类。
-
公开(公告)号:CN118447880A
公开(公告)日:2024-08-06
申请号:CN202410640457.2
申请日:2024-05-22
Applicant: 山东省计算中心(国家超级计算济南中心) , 齐鲁工业大学(山东省科学院)
Abstract: 本发明提供了一种基于多特征注意力融合的语音情感识别方法及系统,包括:基于获取的待识别语音信号,通过预处理获得语音信号的语谱图和梅尔频率倒谱系数;基于所述语谱图,通过时频特征提取获得语谱图特征;基于所述梅尔频率倒谱系数,利用预先训练的神经网络模型进行特征提取,获得梅尔频率倒谱系数特征;基于待识别语音信号,利用自动语音识别的预训练模型进行特征提取,获得W2E特征;分别将语谱图特征和W2E特征以及梅尔频率倒谱系数特征和W2E特征进行特征融合,获得第一融合特征和第二融合特征;基于所述第一融合特征和第二融合特征,通过全局融合获得最终的融合特征;基于获得的融合特征,利用预先训练的情感分类器,获得情感分类结果。
-
公开(公告)号:CN118445817A
公开(公告)日:2024-08-06
申请号:CN202410903625.2
申请日:2024-07-08
Applicant: 山东省计算中心(国家超级计算济南中心) , 齐鲁工业大学(山东省科学院)
Abstract: 本发明属于信息安全的技术领域,更具体地,涉及一种基于历史全局模型的增强联邦学习模型防御的方法、装置及可读计算机存储介质。所述方法包括服务器端向客户端发送全局模型,攻击者客户端截获每一轮的全局模型,放入历史全局模型储存池中;服务器随机选择部分客户端使用本端的本地数据集进行训练得到客户端局部模型,攻击者客户端在历史全局模型储存池中选择一个历史全局模型作为攻击目标模型;客户端将训练的本地局部模型上传至服务器,服务器进行聚合,再发送给各客户端;引入动态加权聚合机制,得到最优全局模型的参数。本发明解决了当前的防御方法在非独立同分布环境下的有效性与攻击成功率都较低,现有防御机制的有效性较低的问题。
-
公开(公告)号:CN118378255A
公开(公告)日:2024-07-23
申请号:CN202410825770.3
申请日:2024-06-25
Applicant: 山东省计算中心(国家超级计算济南中心) , 齐鲁工业大学(山东省科学院)
Abstract: 本发明属于数据安全技术领域,更具体地,涉及一种差分隐私保护约束下抗投毒攻击的联邦学习方法、装置及计算机可读存储介质。包括在客户端定义差分隐私;客户端获取服务端全局模型后使用自身的训练数据集更新本地模型,计算差分隐私噪声并添加到各个客户端的本地模型中;将添加了差分隐私噪声的本地模型发送至服务端,选出恶意客户端;服务端为各个客户端分配权重,然后将各个客户端的本地模型进行聚合得到训练好的全局模型并发送至各个客户端;各个客户端获取训练好的全局模型,完成一次迭代,达到设置训练轮次之后,输出最终全局模型并结束训练。本发明解决了现有技术中投毒攻击防御方案尚无法在差分隐私保护下有效检测出恶意客户端。
-
公开(公告)号:CN118332584A
公开(公告)日:2024-07-12
申请号:CN202410748751.5
申请日:2024-06-12
Applicant: 山东省计算中心(国家超级计算济南中心) , 齐鲁工业大学(山东省科学院)
Abstract: 本发明属于机器学习的技术领域,具体涉及面向分布式机器学习的数据安全治理方法、装置、电子设备和存储介质。该方法包括:节点获取其相邻节点在当前迭代中的局部参数,利用即时可靠分数函数计算相邻节点的即时可靠分数,以为相邻节点构建可靠性模型,设定可靠性模型更新规则,在每次迭代中基于该规则对可靠性模型的可靠指数或不可靠指数进行更新;将更新后的可靠性模型代入Beta分布,获取相邻节点的可靠程度并以此构建可靠节点集合;基于可靠节点集合中所有可靠相邻节点的参数计算当前迭代中节点的聚合结果,结合梯度下降更新节点的参数,将更新后的参数发送至其每个相邻节点。本发明可消除拜占庭攻击的影响,确保学习模型的准确性。
-
公开(公告)号:CN118316699A
公开(公告)日:2024-07-09
申请号:CN202410493166.5
申请日:2024-04-23
Applicant: 山东省计算中心(国家超级计算济南中心) , 齐鲁工业大学(山东省科学院) , 山东众志电子有限公司
IPC: H04L9/40 , G06N3/0464 , G06N3/084 , G06N3/098
Abstract: 本发明属于人工智能的技术领域,具体涉及一种面向加密联邦学习的恶意客户端检测方法及装置。该方法包括:基于历史迭代轮次的客户端梯度计算当前迭代轮次的裁剪阈值,并根据裁剪阈值对所有客户端的梯度进行自适应裁剪,得到中间梯度;对中间梯度添加高斯噪声,得到目标梯度并将其上传至服务端;对目标梯度的每一维元素添加索引,并使用线性回归算法计算目标梯度每一维元素的残差,以计算目标梯度每一维元素的置信度,以根据置信度筛选出所有目标梯度中的良性梯度;对良性梯度进行聚合,将得到的全局梯度广播给所有客户端进行梯度更新。本发明解决了联邦学习系统在进行局部训练时,潜在的恶意客户端产生恶意行为影响模型训练的技术问题。
-
公开(公告)号:CN118245640A
公开(公告)日:2024-06-25
申请号:CN202410249481.3
申请日:2024-03-05
Applicant: 山东省计算中心(国家超级计算济南中心) , 齐鲁工业大学(山东省科学院) , 山东山科智能科技有限公司
IPC: G06F16/903 , G06F16/9035 , G06F16/901 , G06F16/22 , G06F16/27 , G06F21/64
Abstract: 本发明公开了基于区块链的多模态数据可验证查询方法及系统,方法包括:获取多模态数据,将多模态数据存储于链下数据库中;对多模态数据进行元数据提取,得到若干个元数据;对每个元数据生成唯一标识符;将每个元数据和每个元数据对应的唯一标识符打包,将打包数据上链,存入区块链的区块中;基于元数据为区块链创建双层索引;获取待查询的数据,根据待查询数据和多层子集位图索引,确定若干个候选区块子集;对所有的候选区块子集取交集,得到待扫描区块集合;对待扫描区块集合中的每个区块,采用布谷鸟过滤器进行过滤,过滤出目标区块;对目标区块,通过默克尔帕特丽夏树进行搜索,获取目标元数据;对目标元数据进行链上和链下的协同验证。
-
公开(公告)号:CN117454381B
公开(公告)日:2024-06-04
申请号:CN202311800375.1
申请日:2023-12-26
Applicant: 山东省计算中心(国家超级计算济南中心) , 齐鲁工业大学(山东省科学院)
IPC: G06F21/56 , G06F18/214 , G06F21/55
Abstract: 本发明属于信息安全的技术领域,更具体地,涉及一种非独立同分布数据下面向联邦学习的渐进性攻击方法。所述方法服务器端随机初始化一个全局模型作为第一轮全局模型,下发到各个客户端,攻击者选用该全局模型作为攻击模型;所述客户端收到全局模型后在本地执行训练形成局部模型,并将局部模型上传到服务器端;所述服务器端将局部模型更新聚合,形成新一轮全局模型,继续下发至客户端;在每轮训练中,客户端使用接收到的全局模型更新其局部模型并在本地数据集上进行训练;结束训练。本发明解决了现有技术中攻击者为隐藏其攻击操作导致控制模型性能逐渐下降并导致数据非独立同分布联邦学习中的攻击检测变得更加困难的问题。
-
公开(公告)号:CN117667606B
公开(公告)日:2024-05-24
申请号:CN202410146277.9
申请日:2024-02-02
Applicant: 山东省计算中心(国家超级计算济南中心) , 齐鲁工业大学(山东省科学院)
IPC: G06F11/30 , G06N3/042 , G06N3/0464 , G06N3/0442 , G06N3/048 , G06N3/08
Abstract: 本公开提供了基于用户行为的高性能计算集群能耗预测方法及系统,涉及高性能计算、云计算技术领域,获取实时监视的所有处于活跃状态的用户会话以及各节点、机柜的能耗数据;提取用户会话中的用户行为序列,对所述用户行为序列进行分类编码并转换为图数据结构;将所述图数据结构输入至用户行为预测模型中,预测未来设定时间内的行为序列并作为协变量;将所述协变量与能耗数据进行数据合并、扩充特征序列,获取包含用户行为信息的高维时序能耗数据,将所述高维时序能耗数据输入至能耗预测模型中,得到对集群各机柜、节点未来设定时间内的能耗预测值。本公开考虑用户行为对能耗的影响,从而实现更精准的预测。
-
-
-
-
-
-
-
-
-