公开(公告)号：CN116862287A

公开(公告)日：2023-10-10

申请号：CN202310706494.4

申请日：2023-06-14

Applicant: 北京邮电大学

Inventor： 吴斌 ,  张婷婷 ,  郑春萍 ,  宋威

IPC: G06Q10/0639 ,  G06V20/40 ,  G06V10/774 ,  G06N3/04 ,  G06F40/30 ,  G10L25/63 ,  G10L25/30

Abstract: 本发明提出一种多模态英语演讲能力评估方法，包括，获取英语课堂上学生的演讲视频，对演讲视频进行数据筛选、切分和预处理，得到演讲片段；对演讲片段进行人工标注，划分焦虑等级；从演讲片段中提取音频和文本数据，对视频、音频、文本三模态提取模态特征；构建英语演讲焦虑评估模型；英语演讲焦虑评估模型包括单模态表示层、多模态融合层、焦虑检测层；根据焦虑等级和模态特征对演讲焦虑评估模型进行训练；将待评估演讲视频输入训练完成的英语演讲焦虑评估模型，输出包含焦虑等级的焦虑检测结果。本发明提出的方法聚焦于演讲焦虑强度检测，并可以从真实课堂场景推广到其他演讲场景中。