发明公开
- 专利标题: 考虑不完全频谱感知模式的卫星动态频谱接入预测方法及装置
-
申请号: CN202310617644.4申请日: 2023-05-29
-
公开(公告)号: CN116669198A公开(公告)日: 2023-08-29
- 发明人: 余博人 , 倪祖荣 , 赵豪哲
- 申请人: 厦门大学
- 申请人地址: 福建省厦门市思明南路422号
- 专利权人: 厦门大学
- 当前专利权人: 厦门大学
- 当前专利权人地址: 福建省厦门市思明南路422号
- 代理机构: 厦门市首创君合专利事务所有限公司
- 代理商 连耀忠
- 主分类号: H04W72/0453
- IPC分类号: H04W72/0453 ; H04W72/542
摘要:
本发明公开了一种考虑不完全频谱感知模式的卫星动态频谱接入预测方法及装置,通过构建基于下垫式卫星通信系统的深度强化学习框架,深度强化学习框架包括训练网络、目标网络、智能体、经验池和环境,将次卫星作为智能体,将传输信道作为环境;根据深度强化学习框架建立目标优化问题,定义深度强化学习框架中的参数,将目标优化问题转换为顺序决策问题;基于顺序决策问题利用经验池进行强化学习训练,得到经训练的训练网络;获取次卫星在当前时隙的观测值,将次卫星在当前时隙的观测值输入经训练的训练网络,输出得到最大Q值及其所对应的次卫星的最优动作。本发明可以提高有限频谱资源利用率。