公开(公告)号：CN111770544B

公开(公告)日：2023-02-10

申请号：CN202010744985.4

申请日：2020-07-29

Applicant: 南京邮电大学

Inventor： 孙力娟 ,  龚啸天 ,  周剑 ,  王娟 ,  韩崇 ,  肖甫

IPC: H04W40/02 ,  H04L45/00 ,  G06N20/00 ,  H04W84/06 ,  H04L67/12

Abstract: 一种基于Q‑Learning的卫星物联网路由方法，针对复杂环境下的卫星物联网路由问题，考虑卫星物联网拓扑结构、节点状态动态变化，将整个卫星物联网视作强化学习的环境，将卫星节点和地面节点视作智能体，首先，初始化卫星物联网参数；其次，每一个节点维护一张Q值表，根据卫星节点跳数，距离，方向以及缓冲区占用率，利用Q值更新公式，学习Q值表；最后，通过学习得到的Q值表，根据贪心选择策略，转发数据包。并且，考虑卫星节点跳数改进了奖励值，考虑卫星节点距离,方向以及缓冲区占用率改进了折扣因子，以此优化Q值，从而来实现卫星物联网高效路由的目的。因此，本卫星物联网路由方法在航空、航天及社会经济等领域中都有较好的转化应用前景。

公开(公告)号：CN111770544A

公开(公告)日：2020-10-13

申请号：CN202010744985.4

申请日：2020-07-29

Applicant: 南京邮电大学

Inventor： 孙力娟 ,  龚啸天 ,  周剑 ,  王娟 ,  韩崇 ,  肖甫

IPC: H04W40/02 ,  H04L12/733 ,  H04L12/751 ,  G06N20/00 ,  H04L29/08 ,  H04W84/06

Abstract: 一种基于Q-Learning的卫星物联网路由策略，针对复杂环境下的卫星物联网路由问题，考虑卫星物联网拓扑结构、节点状态动态变化，将整个卫星物联网视作强化学习的环境，将卫星节点和地面节点视作智能体，首先，初始化卫星物联网参数；其次，每一个节点维护一张Q值表，根据卫星节点跳数，距离，方向以及缓冲区占用率，利用Q值更新公式，学习Q值表；最后，通过学习得到的Q值表，根据贪心选择策略，转发数据包。并且，考虑卫星节点跳数改进了奖励值，考虑卫星节点距离,方向以及缓冲区占用率改进了折扣因子，以此优化Q值，从而来实现卫星物联网高效路由的目的。因此，本卫星物联网路由策略在航空、航天及社会经济等领域中都有较好的转化应用前景。