公开(公告)号：CN116701992A

公开(公告)日：2023-09-05

申请号：CN202310555050.5

申请日：2023-05-17

Applicant: 哈尔滨工程大学 ,  哈尔滨龙明科技有限公司

Inventor： 宋洪涛 ,  芦新凯 ,  韩启龙 ,  卢丹 ,  刘鹏

IPC: G06F18/24 ,  G06F18/214 ,  G06F18/22 ,  G06F18/213 ,  G06N3/0475 ,  G06N3/045 ,  G06N3/0464 ,  G06N3/088

Abstract: 本申请公开了一种基于图注意力网络和时间卷积网络的多模态异常检测方法，属于多模态数据异常检测技术领域，包括：基于若干传感器获取多模态数据集，对多模态数据集进行预处理，并将预处理后的多模态数据集划分为训练集和测试集；基于图注意力网络和多头注意力机制构造用于提取空间相关特征的空间特征提取模块，基于时间卷积生成对抗网络构造时间特征提取模块，根据空间特征提取模块和时间特征提取模块构建多模态异常检测模型；通过训练集对多模态异常检测模型进行训练及参数优化，得到目标网络；将测试集输入到目标网络中，通过目标网络进行多模态异常检测。本申请提供的方法，在实验数据集上有着明显的优势，适用于多模态异常检测的工作。