基于DRL的RIS辅助用户中心化去蜂窝系统中资源管理半并行方法

    公开(公告)号:CN114364034A

    公开(公告)日:2022-04-15

    申请号:CN202210006092.9

    申请日:2022-01-05

    Abstract: 本发明提出了一种用于可重构智能表面(RIS)辅助用户中心化去蜂窝(UCCF)系统中基于深度强化学习(DRL)的半并行方法。该方法将优化问题分解为两个迭代的子任务:接入点(AP)和用户设备(UE)关联(AUA)子任务与发射功率和RIS反射系数管理(PRCM)子任务。具体方法为,对整数非线性规划的AUA采用二进制粒子群优化(BPSO)算法;对于多连续变量联合优化的PRCM,提出了基于DRL的并行算法,采用双延迟深度确定性策略梯度(TD3)算法提高收敛性,并提出新的状态预处理机制。本发明采用基于DRL的半并行方法优化多个变量,克服了传统算法解决NP‑hard问题的局限,提高了精确度,同时智能化的方法面对环境变化时可以快速调整而不需要大量的先验知识。

Patent Agency Ranking