一种基于强化学习的多智能体动态决策方法

    公开(公告)号:CN119212005A

    公开(公告)日:2024-12-27

    申请号:CN202411201213.0

    申请日:2024-08-29

    Abstract: 本发明涉及一种基于强化学习的多智能体动态决策方法,应用于包括边缘服务器和多个用户设备的边缘计算网络,包括以下步骤:以每个所述用户设备为一个智能体,将所述边缘计算网络中的任务卸载过程抽象为多智能体部分可观察马尔可夫决策过程;定义任意所述用户设备的任务卸载效益为其获取的边缘计算收益减去其边缘卸载成本;利用结合注意力机制的DDPG算法求解所述多智能体部分可观察马尔可夫决策过程,获得使每个所述用户设备均达到纳什均衡下其自身所述任务卸载效益最大化的最优卸载决策。本发明综合考虑物联网中用户设备的计算需求和物联网环境的动态变化,为每个用户设备提供了灵活、高效和实时的计算卸载决策。

    雾网络中基于时延和能耗优先级的资源管理方法和装置

    公开(公告)号:CN119212000A

    公开(公告)日:2024-12-27

    申请号:CN202411201307.8

    申请日:2024-08-29

    Abstract: 本发明涉及一种雾网络中基于时延和能耗优先级的资源管理方法和装置,其中,方法包括:基于用户对本次计算卸载的满意度和用户对雾节点的支出确定用户效用函数;基于雾节点从用户处获得的直接收益和雾节点根据任务卸载比率的能耗成本确定雾节点效用函数;以所述用户效用函数和雾节点效用函数最大化为目标构建斯塔克伯格博弈模型;利用反向归纳法对所述斯塔克伯格博弈模型进行求解,得到用户最优卸载和雾节点最优定价策略;采用所述用户最优卸载和雾节点最优定价策略对雾网络进行资源管理。本发明可以获得不同任务需求下雾节点最优定价策略和用户最优雾节点选择策略。

    一种基于多圈UCA的涡旋电磁波发散角度调节方法

    公开(公告)号:CN114553283B

    公开(公告)日:2024-09-03

    申请号:CN202210213996.9

    申请日:2022-03-07

    Abstract: 本发明提供一种基于多圈UCA的涡旋电磁波发散角度调节方法,包括:确定多圈UCA的每一圈UCA的半径;确定遗传算法的基本参数以及优化角度集合,优化角度集合的每个元素分别表示OAM涡旋电磁波波束的一个优化发散角度;对优化角度集合中每一个优化发散角度执行遗传算法优化,得到优化结果;根据得到的优化结果调节OAM涡旋电磁波的发散角度。本发明的基于多圈UCA的涡旋电磁波发散角度调节方法利用遗传算法与多圈UCA结合,通过遗传算法优化多圈UCA的能量、附加相位、模式以实现涡旋电磁波发散角度的灵活调整,此外,同时给出不同发散角度下的优化结果,可以快速调整涡旋电磁波的发散角度。

    一种基于信息新鲜度的卫星边缘计算任务卸载方法

    公开(公告)号:CN117134814A

    公开(公告)日:2023-11-28

    申请号:CN202311041563.0

    申请日:2023-08-17

    Abstract: 本发明涉及一种基于信息新鲜度的卫星边缘计算任务卸载方法,包括:获取卫星计算任务执行队列信息、接入卫星的地面用户传输队列信息以及无线传输信息;构建以最小化用户加权信息新鲜度为目标的优化问题模型;对优化问题模型进行预处理,并基于预处理后的优化问题模型,建立基于深度强化学习框架下的无模型马尔可夫决策过程;基于深度强化学习算法,求解基于深度强化学习框架下的无模型马尔可夫决策过程;根据求解后的结果,确定任务卸载方案。本发明能够提高计算资源的分配效率,同时能够满足对实时性要求较高的用户需求,使得用户可以获得信息新鲜度更高的计算任务结果。

    一种基于分布式智能的星地融合网络任务卸载方法

    公开(公告)号:CN117014961A

    公开(公告)日:2023-11-07

    申请号:CN202310936220.4

    申请日:2023-07-27

    Abstract: 本发明涉及一种基于分布式智能的星地融合网络任务卸载方法,包括:将每个地面用户对应一个部署在卫星上的智能体,智能体获取星地融合网络环境信息;根据星地融合网络环境信息,构建以最小化用户任务的服务时延为目标的优化问题模型;基于优化问题模型,建立改进后的深度强化学习模型;基于分布式的深度强化学习算法,求解改进后的深度强化学习模型;基于求解后的深度强化学习模型,获取优化的任务卸载策略。本发明考虑了卫星固有特性和服务迁移的影响,能够加速收敛速度,在较低卫星能耗开销下有效降低用户服务时延,同时能避免算法训练对卫星带来的额外计算和能耗开销,提高卫星资源利用率。

    一种星地融合网络中的频谱感知方法

    公开(公告)号:CN116208233A

    公开(公告)日:2023-06-02

    申请号:CN202310188992.4

    申请日:2023-03-02

    Abstract: 本发明涉及一种星地融合网络中的频谱感知方法,包括:构建星地融合网络频谱感知模型;地面感知节点获取每颗卫星的位置信息和每颗卫星的授权频段载波频率,并统计每个卫星授权频段的频段占用概率;基于每颗卫星的卫星位置信息、授权频段载波频率、每个卫星授权频段的频段占用概率和参考虚警概率,地面感知节点选定执行频谱感知的感知频段;基于选定的感知频段,地面感知节点配置频谱感知参数;地面感知节点在选定的感知频段上使用配置的感知参数执行频谱感知。本发明优化了地面感知节点的感知频段选择和感知参数配置,在避免对卫星系统产生严重干扰的前提下,提高了地面通信系统的吞吐量,提升了星地融合网络的频谱利用效率。

    一种产生多模涡旋电磁波的自适应UCA布阵方法

    公开(公告)号:CN116094648A

    公开(公告)日:2023-05-09

    申请号:CN202211741078.X

    申请日:2022-12-30

    Abstract: 本发明提供一种产生多模涡旋电磁波的自适应UCA布阵方法,包括:确定同心圆环的数量;确定半径最小的第一同心圆环的半径;将每两个相邻的同心圆环之间等间隔设置,且该间隔等于第一同心圆环的半径;根据第一同心圆环的阵元的个数N对所有同心圆环进行N等分,将第一同心圆环的N等分点作为第一同心圆环的阵元位置;针对所有的同心圆环的每一个N等分部分,分别按照第一同心圆环的阵元的位置来放置阵元;将第一同心圆环以外的所有同心圆环分别作为第k同心圆环,在第k同心圆环的N等分部分上进行k等分,将N等分部分的边界点和k等分点作为第k同心圆环的阵元的位置来放置阵元。本发明的方法能产生高质量的OAM波束,且通用性强。

    一种边缘雾网络中数据差分化下载方法

    公开(公告)号:CN113873024B

    公开(公告)日:2022-09-23

    申请号:CN202111118157.0

    申请日:2021-09-23

    Abstract: 本发明涉及一种边缘雾网络中数据差分化下载方法,所述雾网络中包括一个云、雾和用户的三层分层架构,包括以下步骤:根据用户所需下载数据量的不同为所述用户分配数据下载方式;根据不同的数据下载方式,用斯塔克伯格博弈建立博弈参与者的不同效用函数;对不同的数据下载方式下的博弈参与者,求解不同效用函数的博弈平衡并确定最优下载策略。本发明可以有效优化边缘雾网络性能,防止大量数据带来的过载和网络拥塞,提升网络的稳定性,提高用户下载数据的灵活性和积极性,并为雾节点带来可观的收益。

    一种能耗优化的低轨卫星边缘计算资源分配方法

    公开(公告)号:CN114928394A

    公开(公告)日:2022-08-19

    申请号:CN202210356235.9

    申请日:2022-04-06

    Abstract: 本发明提供一种能耗优化的低轨卫星边缘计算资源分配方法,包括:获取动态的低轨卫星边缘计算网络的环境状态信息;根据环境状态信息,构建以最小化系统能耗开销为优化目标的优化问题模型,系统能耗开销为地面移动终端和低轨卫星的处理能耗的加权之和;基于优化问题模型,定义强化学习模型的核心要素,并设计状态评价函数来优化状态空间;利用基于优化DQN的深度强化学习算法求解深度强化学习模型;基于求解结果,获取能耗优化的计算资源分配策略,分发至各地面移动终端、低轨卫星和地面云服务器。本发明设计基于优化DQN的深度强化学习算法解决了低轨卫星边缘计算网络中能耗优化的计算资源分配问题,提高了计算效率,降低了系统能耗开销。

    一种通过均匀面阵发射多模复用信号的天线选择方法

    公开(公告)号:CN113630158B

    公开(公告)日:2022-08-09

    申请号:CN202111101244.5

    申请日:2021-09-18

    Abstract: 本发明涉及一种通过均匀面阵发射多模复用信号的天线选择方法,包括:选择基础面阵;确定中心阵元以及可生成的UCA的最大半径;计算基础面阵中任一阵元到中心阵元的距离,结合可生成的UCA的最大半径,确定基础面阵可生成的UCA的半径序列;确定对应不同UCA半径的阵元集合序列;给定OAM涡旋电磁波束的最大发散角度,计算基础面阵可发射的OAM模式,以及可发射的OAM模式所需的最小UCA半径;从对应不同UCA半径的阵元集合序列中提取出可发射的OAM模式所需的阵元集合,并计算出每一阵元所需的激励相位。本发明可以在均匀面阵上产生不同半径UCA,使得在应用中可以实现波束的灵活调整。本发明可以降低开发成本,加快项目开发速度。

Patent Agency Ranking