-
公开(公告)号:CN112989967A
公开(公告)日:2021-06-18
申请号:CN202110213548.4
申请日:2021-02-25
Applicant: 复旦大学
Abstract: 本发明提供了一种基于音视频信息融合的人员身份识别方法,具有这样的特征,包括以下步骤,步骤S1,读入音视频资料的视频信息以及音频信息,对视频信息以及音频信息进行预处理,得到预处理视频信息以及预处理音频信息;步骤S2,将预处理音频信息进行处理,提取出音频特征;步骤S3,将预处理视频信息进行处理,提取出针对预处理视频信息中人员的人脸特征、头部特征以及身体特征;步骤S4,搭建多个MLP神经网络模型,并对多个MLP神经网络模型进行训练以及权值的设定,得到MLP神经网络联合模型;步骤S5,把音频特征、人脸特征、头部特征以及身体特征输入MLP神经网络联合模型,得到判断的类别结果。