一种基于深度强化学习的智慧工厂冗余卸载方法

    公开(公告)号:CN116820603A

    公开(公告)日:2023-09-29

    申请号:CN202310653111.1

    申请日:2023-06-05

    Abstract: 本发明公开了一种基于深度强化学习的智慧工厂冗余卸载方法,该方法包括步骤:工业互联网设备卸载任务到达边缘盒子之后,根据先来后到进行排队,对于一些轻量级的任务,边缘盒子可以将其处理完并返回结果,对于一些需要更多资源的任务,边缘盒子则将这些任务传送到云计算系统进行处理。对于卸载到云服务器的部分任务。为了使在任务延迟约束下使卸载系统的效用最大化,使用马尔可夫决策方法确定最优卸载方案。通过服务器状态以及各工业互联网设备的相关信息,确定时间阈值和可靠性,从而确定冗余卸载的上界和下界,采用搜索的方法来获得最优的冗余传输路径数,在保证卸载可靠性的同时提高了获得的效用。

    一种面向分簇联邦学习的簇内外聚合周期构建方法、系统及其存储介质

    公开(公告)号:CN118586513A

    公开(公告)日:2024-09-03

    申请号:CN202410349095.1

    申请日:2024-03-26

    Abstract: 本发明公开了一种面向分簇联邦学习的簇内外聚合周期构建方法、系统及其存储介质,包括如下步骤:各个不相交簇内所有客户端接收中心服务器下发的某一训练回合所对应的全局模型,并在客户端内利用本地数据集对全局模型进行迭代训练更新以获得本地模型;在每经预设聚合迭代周期I时,各个簇头收集其所在簇内的本地模型进行簇内聚合并将获得的簇内聚合模型下发至簇内客户端重复执行训练更新;在每经预设聚合迭代周期G时,各个簇头将最新的簇内聚合模型上传至中心服务器进行簇间聚合,并将经簇间聚合后获得的全局模型下发至各个簇内所有客户端;重复执行新一轮簇内、簇间训练更新,直至全局模型达到预定训练精度为止。

    一种基于斯塔克伯格博弈的设备调度方法

    公开(公告)号:CN116822335A

    公开(公告)日:2023-09-29

    申请号:CN202310634420.4

    申请日:2023-05-31

    Abstract: 本发明公开了一种基于斯塔克伯格博弈的设备调度方法,包括:1)由BS担任领导者,移动设备作为追随者对领导者的策略做出反馈,建立两者的效益函数,基于斯塔克伯格博弈设计BS和移动设备间的调度选择问题。2)移动设备集合接受来自特定BS的全局模型,通过无线网络协同执行联邦学习算法。3)利用来自BS的全局模型权重向量和移动设备的本地模型权重向量之间的差异,采用梯度下降法进行本地迭代更新。4)上传移动设备本地最优解到BS进行全局聚合,并向移动设备集合广播下一轮全局模型,用于下一轮联邦学习训练,直到全局模型达到预定精度为止。本方法通过斯塔克博格博弈提升了BS和移动设备的整体效益。

    一种面向联邦边缘学习的D2D配对及设备调度的联合方法

    公开(公告)号:CN119255214A

    公开(公告)日:2025-01-03

    申请号:CN202411421078.0

    申请日:2024-10-12

    Abstract: 本发明公开了一种面向联邦边缘学习的D2D配对及设备调度的联合方法,属于联邦边缘学习环境下的设备参与及数据共享技术领域。本发明提出了一个支持D2D通信联邦边缘学习架构,主要关注D2D设备对的关联方式和实体调度策略,重点考虑通信丢包错误率、移动设备的数据异构特性对模型的收敛性能影响,旨在改善由于基站频谱资源有限造成的设备接入数量限制问题。本方法引入设备关联调度策略,增强联邦边缘学习系统对波动通信条件的弹性;通过引入公平性约束,保障每个设备都有机会参与训练,使得全局模型学习的数据更全面;通过引入D2D通信增加基站接入量,改善边缘联邦学习的性能;在满足边缘基站接收容量限制的条件下最小化全局损失。

Patent Agency Ranking