公开(公告)号：CN117828078A

公开(公告)日：2024-04-05

申请号：CN202311817736.3

申请日：2023-12-26

Applicant: 湖南大学

Inventor： 赵欢 ,  鞠意 ,  高迎雪

IPC: G06F16/35 ,  G06F16/332 ,  G06F16/36 ,  G06N5/022 ,  G06F18/22 ,  G06F18/25 ,  G06F18/213 ,  G06N3/042 ,  G06N3/0464 ,  G06N3/0455

Abstract: 本发明公开了一种基于双层关系图的多模态情感识别方法，包括以下步骤：获取不同说话者的对话内容，对所述对话内容划分节点；计算每个节点与每个节点的邻居节点之间的相似度，根据所述相似度构建全局亲和图，同时获取每个节点的上下文信息，根据上下文信息构建局部依赖图；将全局亲和图与局部依赖图分别进行图卷积特征提取，得到全局特征向量和局部特征向量，将全局特征向量和局部特征向量融合后进行预测得到情感识别结果。本发明能够减少冗余信息的干扰，并有效利用不同说话者的信息来建模不容说话者与情感间的关系。