融合多模态的语音情感识别方法及系统

    公开(公告)号:CN114898779A

    公开(公告)日:2022-08-12

    申请号:CN202210641067.8

    申请日:2022-06-08

    Abstract: 本发明提供了一种融合多模态的语音情感识别方法及系统,包括:获取语音信号,对所述语言信号进行语音情感特征值的提取;获取语音信号对应的文本信息,对所述文本信息进行预处理生成文本特征信息;获取预训练的语音情感分类器,所述语音情感分类器包括第一分类模型和第二分类模型;将所述语音情感特征值和所述文本特征信息输入所述语音情感分类器,通过第一分类模型对所述语音情感特征值进行识别生成第一分类信息,通过第二分类模型对文本特征信息进行识别生成第二分类信息,进而通过将所述第一分类信息和所述第二分类信息进行融合生成识别信息。本发明充分地利用各个分类器的优点,融合多种模态,可以避免单个模态的偶然性,提高识别准确率。

Patent Agency Ranking