公开(公告)号：CN117651344A

公开(公告)日：2024-03-05

申请号：CN202311616361.4

申请日：2023-11-30

Applicant: 国网山东省电力公司济南供电公司 ,  东南大学 ,  国家电网有限公司

Inventor： 李正浩 ,  刘晗 ,  刘峻朋 ,  夏玮玮 ,  燕锋 ,  梁栋 ,  吴军 ,  辛逸飞 ,  林晓薇

IPC: H04W72/50 ,  H04W72/543 ,  H04W72/542 ,  H04W72/0453 ,  G06N3/092 ,  H04W16/14 ,  H04B17/382

Abstract: 本发明提出了一种网络资源共享方法、装置、设备及可读存储介质。所述方法将网络中的通信终端分为AOI敏感型终端和AOI容忍型终端；考虑混合频谱共享的网络接入方式，构建终端通信模型；构造基于AOI和有效传输速率的多目标系统效用函数，建立基于混合频谱共享的网络资源的长期优化问题；最后利用马尔科夫决策过程将所提问题构造为长期效用问题，以基站为智能体并利用深度确定性策略梯度DDPG方法构建基于表演家‑批评家结构的深度强化学习框架，通过评价网络与动作网络相互迭代更新，智能体在实现有效的在线学习后，仅需本地状态信息即可快速进行资源的高效分配。本发明有效的满足了两类终端的通信需求，保障了系统的可靠运行，提升了频谱使用效率。

公开(公告)号：CN116887291A

公开(公告)日：2023-10-13

申请号：CN202310515070.X

申请日：2023-05-09

Applicant: 国网山东省电力公司济南供电公司 ,  东南大学

Inventor： 梁栋 ,  陈霞 ,  林晓薇 ,  燕锋 ,  夏玮玮 ,  刘峻朋 ,  孙金华 ,  修成林 ,  徐霞

IPC: H04W24/02 ,  H04W72/53 ,  H04L41/16

Abstract: 本发明提出一种网络资源优化方法、装置、设备和可读存储介质。首先构建一种集成接入回程(Integrated Access and Backhaul，IAB)架构，考虑该架构下多层干扰及各信道条件，以最大化系统上行链路总能效为目标构造目标函数。其次利用马尔科夫决策过程将所提问题构造为完全协作的多智能体问题，利用多智能体近端策略优化(Multi‑Agent Proximal Policy Optimization，MAPPO)构建分布式动作网络和集中式评价网络。最后通过本地动作网络与环境交互获取的数据信息，在评价网络的指导下对网络参数进行迭代更新，训练完成后的动作网络仅需本地状态信息即可做出资源分配决策。本发明所提资源优化方法考虑终端差异化需求以实现轻量化通信，另一方面所提多智能体框架进一步减少了信令开销和计算复杂度。

公开(公告)号：CN116319603A

公开(公告)日：2023-06-23

申请号：CN202310383570.2

申请日：2023-04-06

Applicant: 国网山东省电力公司济南供电公司 ,  东南大学 ,  国家电网有限公司

Inventor： 李正浩 ,  陈霞 ,  辛逸飞 ,  夏玮玮 ,  燕锋 ,  刘峻朋 ,  林晓薇 ,  王勇 ,  刘晗 ,  吴军

IPC: H04L47/76 ,  H04L41/0893 ,  H04L41/0894 ,  H04L67/12 ,  H04L41/0896

Abstract: 本发明公开了一种基于网络切片的资源分配方法，包括如下步骤：(1)为切片构建招标信息；(2)为终端用户构建投标信息；(3)筛选出符合切片叫价的用户筛选出符合用户条件的切片；(4)符合双方要求的用户和切片根据用户对资源的估价和切片资源的成本来计算出双方达成匹配的效用，构建效用矩阵；(5)将系统建模为二分图模型，根据效用矩阵初始化辅助变量顶标值；(6)将终端用户随机排序，根据顺序为用户寻找增广路径；(7)根据一定的匹配策略得到匹配矩阵和匹配后系统的总效用。相较于传统的资源分配方法，本发明中不仅使用了拍卖理论中的投标、招标等技术，而且利用了二分图模型来达成匹配。