一种基于情景感知的多模态抑郁症检测方法和系统
摘要:
本发明提供一种基于情景感知的多模态抑郁症检测方法和系统。该方法包括:构建训练样本集,所述训练样本集包括话题信息、语谱图和对应的文本信息;使用卷积神经网络,结合多任务学习,对所述训练样本集的语谱图进行声学特征提取,获得具备情景感知的声学特征;利用所述训练样本集,使用Transformer模型对词嵌入进行处理,提取具备情景感知的文本特征;对于所述情景感知的声学特征建立进行抑郁症检测的声学通道子系统,对于所述情景感知的文本特征建立进行抑郁症检测的文本通道子系统;对所述声学通道子系统和所述文本通道子系统的输出进行融合,获得抑郁症分类信息。本发明能够提高抑郁症检测的准确性。
公开/授权文献
0/0