公开(公告)号：CN119299365A

公开(公告)日：2025-01-10

申请号：CN202411575788.9

申请日：2024-11-06

Applicant: 北京交通大学

Inventor： 张瑞丰 ,  刘真 ,  张尧政 ,  王岩楠 ,  耿冲

IPC: H04L45/121 ,  H04L45/00 ,  H04L45/302 ,  H04L47/125 ,  H04L47/10 ,  H04W28/08 ,  H04W40/02 ,  H04W40/24 ,  G06N3/006

Abstract: 本发明提供了一种基于强化免疫算法的TSN‑5G高铁车载网络流量调度方法。该方法包括：获取TSN‑5G高铁车载网中待调度流量集合的所有可能路由，以及每条路由的时延；设置强化免疫算法的各种算子，使用DQN网络作为强化免疫算法的克隆变异算子，以综合考虑时延与负载作为强化免疫算法的优化目标；强化免疫算法利用各种算子迭代求得每个流量的发送顺序和路由，以及每个流量在TSN交换机的发送时间；根据每个流量的发送时间得到TSN交换机的门控调度列表，TSN交换机根据门控调度列表对每个流量进行端到端的确定性传输。本发明方法通过结合免疫算法与强化学习，克服现有调度方法的不足，提升调度效率和灵活性，实现TSN‑5G列车车载网络内关键流量的确定性调度。

公开(公告)号：CN119485218A

公开(公告)日：2025-02-18

申请号：CN202411575785.5

申请日：2024-11-06

Applicant: 北京交通大学

Inventor： 张尧政 ,  刘真 ,  张瑞丰 ,  王岩楠 ,  耿冲

IPC: H04W4/42 ,  H04W28/02 ,  G06N3/04 ,  G06N3/092

Abstract: 本发明提供的一种基于多智能体强化学习的TSN‑5G列车通信网络异步调度方法。该方法包括：基于列车TSN‑5G异构场景的拓扑结构利用图神经网络构建马尔可夫模型，定义马尔可夫模型的状态空间、动作空间和奖励函数，将TSN‑5G异构网络中的待处理的数据流信息输入到列车TSN‑5G多智能体强化学习异步调度算法中，列车TSN‑5G多智能体强化学习异步调度算法将每个基站与交换机作为独立智能体，通过迭代运算对马尔可夫模型中的状态空间、动作空间进行更新，输出待处理的数据流的调度方案。本发明提出了一种综合方案，结合TSN‑5G中有线与无线信道的利用率与端到端抖动性能，达到优化数据传输的目的，以实现对整车网络的端到端时延和抖动进行最优控制。