公开(公告)号：CN113207124B

公开(公告)日：2022-11-01

申请号：CN202110287656.6

申请日：2021-03-17

Applicant: 北京邮电大学

Inventor： 杨树杰 ,  许长桥 ,  沈嘉浩 ,  张焘 ,  张丙驰 ,  纪伟潇

IPC: H04W12/102 ,  H04W12/37 ,  H04W40/22

Abstract: 本发明提供一种车载自组网络数据包传送方法及装置，包括：根据车载自组网络的当前状态信息，结合马尔科夫决策过程模型，构建当前网格的状态空间和当前网格的动作空间；其中，所述当前网格中包括数据包发送节点；根据所述状态空间和所述动作空间，结合联合估计Q学习算法模型，获取所述当前网格中数据包发送节点的最大动作价值收益值，以根据所述最大动作价值收益值确定目标安全网格；基于最小角度选择策略，在所述目标安全网格中选取中继节点，通过所述中继节点进行数据包传送。本发明通过联合估计Q学习算法模型，得到一种安全有效的车载自组网络数据包传送策略，可以抵御多种形式的丢包攻击，提升网络的安全性。

公开(公告)号：CN113207124A

公开(公告)日：2021-08-03

申请号：CN202110287656.6

申请日：2021-03-17

Applicant: 北京邮电大学

Inventor： 杨树杰 ,  许长桥 ,  沈嘉浩 ,  张焘 ,  张丙驰 ,  纪伟潇

IPC: H04W12/102 ,  H04W12/37 ,  H04W40/22

Abstract: 本发明提供一种车载自组网络数据包传送方法及装置，包括：根据车载自组网络的当前状态信息，结合马尔科夫决策过程模型，构建当前网格的状态空间和当前网格的动作空间；其中，所述当前网格中包括数据包发送节点；根据所述状态空间和所述动作空间，结合联合估计Q学习算法模型，获取所述当前网格中数据包发送节点的最大动作价值收益值，以根据所述最大动作价值收益值确定目标安全网格；基于最小角度选择策略，在所述目标安全网格中选取中继节点，通过所述中继节点进行数据包传送。本发明通过联合估计Q学习算法模型，得到一种安全有效的车载自组网络数据包传送策略，可以抵御多种形式的丢包攻击，提升网络的安全性。

公开(公告)号：CN113904937B

公开(公告)日：2022-03-29

申请号：CN202111472838.7

申请日：2021-12-06

Applicant: 北京邮电大学

Inventor： 杨树杰 ,  许长桥 ,  张焘 ,  纪伟潇 ,  沈嘉浩 ,  张丙驰

IPC: H04L41/0893 ,  H04L41/14 ,  H04L41/142 ,  H04L41/5054 ,  G06N7/00 ,  G06N3/08

Abstract: 本发明提供一种服务功能链迁移方法、装置、电子设备及存储介质。所述方法包括：基于可满足性模理论对服务功能链动作空间进行形式化，确定满足所述可满足性模理论约束条件的动作空间；将所述可满足性模理论约束条件的动作空间输入至深度强化学习模型中，得到所述服务功能链的最佳迁移策略。本发明首先通过对服务功能链动作空间进行形式化，去除了部分非法行动，其次基于深度强化学习对攻击事件进行学习来选择最优的服务功能链迁移策略，进一步缩减了服务功能链动作空间，减少了网络开销。

公开(公告)号：CN113904937A

公开(公告)日：2022-01-07

申请号：CN202111472838.7

申请日：2021-12-06

Applicant: 北京邮电大学

Inventor： 杨树杰 ,  许长桥 ,  张焘 ,  纪伟潇 ,  沈嘉浩 ,  张丙驰

IPC: H04L41/0893 ,  H04L41/14 ,  H04L41/142 ,  H04L41/5054 ,  G06N7/00 ,  G06N3/08

Abstract: 本发明提供一种服务功能链迁移方法、装置、电子设备及存储介质。所述方法包括：基于可满足性模理论对服务功能链动作空间进行形式化，确定满足所述可满足性模理论约束条件的动作空间；将所述可满足性模理论约束条件的动作空间输入至深度强化学习模型中，得到所述服务功能链的最佳迁移策略。本发明首先通过对服务功能链动作空间进行形式化，去除了部分非法行动，其次基于深度强化学习对攻击事件进行学习来选择最优的服务功能链迁移策略，进一步缩减了服务功能链动作空间，减少了网络开销。