-
公开(公告)号:CN116682166B
公开(公告)日:2025-04-29
申请号:CN202310824689.9
申请日:2023-07-06
Applicant: 兰州大学
Abstract: 本申请提供了一种抑郁情绪识别方法、装置、计算机设备和存储介质,涉及机器学习技术领域,通过提取样本数据中第一视频数据中的各帧人脸图像;并基于人脸图像的尺寸、第一语音数据的采集率和采集精度,确定与人脸图像相对应的语音片段的目标长度;确定目标长度的语音片段对应的语音图像;将语音图像和人脸图像融合,确定第一融合图像,实现不同模态数据的融合,将第一融合图像输入预设的抑郁情绪识别模型进行训练,与现有先提取不同模态数据的特征,再将这些特征融合的方式相比,本申请将不同模态数据融合后,再提取融合后图像中的特征,得到的特征可同时保留模态间的互补性信息和模态间的一致性信息,提高识别抑郁情绪的准确性。
-
公开(公告)号:CN116682166A
公开(公告)日:2023-09-01
申请号:CN202310824689.9
申请日:2023-07-06
Applicant: 兰州大学
Abstract: 本申请提供了一种抑郁情绪识别方法、装置、计算机设备和存储介质,涉及机器学习技术领域,通过提取样本数据中第一视频数据中的各帧人脸图像;并基于人脸图像的尺寸、第一语音数据的采集率和采集精度,确定与人脸图像相对应的语音片段的目标长度;确定目标长度的语音片段对应的语音图像;将语音图像和人脸图像融合,确定第一融合图像,实现不同模态数据的融合,将第一融合图像输入预设的抑郁情绪识别模型进行训练,与现有先提取不同模态数据的特征,再将这些特征融合的方式相比,本申请将不同模态数据融合后,再提取融合后图像中的特征,得到的特征可同时保留模态间的互补性信息和模态间的一致性信息,提高识别抑郁情绪的准确性。
-