公开(公告)号：CN115831115A

公开(公告)日：2023-03-21

申请号：CN202211377435.9

申请日：2022-11-04

Applicant: 华中师范大学

Inventor： 张浩 ,  黄涛 ,  刘三女牙 ,  李宗霖 ,  王翔宇 ,  李耀鹏 ,  戴志诚

IPC: G10L15/26 ,  G10L15/14 ,  G10L17/02 ,  G09B5/04

Abstract: 本发明提供一种课堂纪要生成方法及系统，方法包括：获取课堂音频文件；对课堂音频文件进行语音识别和声纹识别，得到包含说话人信息和对应说话内容的课堂记录文本；将课堂记录文本输入至课堂纪要生成模型，得到课堂纪要文本；其中，课堂纪要生成模型是基于样本课堂记录文本及对应的样本课堂纪要文本训练得到的；课堂纪要生成模型用于对课堂记录文本进行主题划分和环节划分，并基于划分得到的主题向量和环节向量对课堂记录文本进行编码，得到课堂记录文本的文本表征向量，对文本表征向量进行解码，得到课堂纪要文本。本发明实现了课堂纪要文本的自动生成，极大地提升了纪要生成的效率，同时提升了课堂纪要文本的准确性、逻辑性和整体的连贯性。

公开(公告)号：CN115719497A

公开(公告)日：2023-02-28

申请号：CN202211510373.4

申请日：2022-11-29

Applicant: 华中师范大学

Inventor： 张浩 ,  黄涛 ,  刘三女牙 ,  李宗霖 ,  王翔宇 ,  闵远东 ,  戴志诚

IPC: G06V40/10 ,  G06V20/52 ,  G06V10/44 ,  G06V10/764 ,  G06V10/82 ,  G06N3/0442 ,  G06N3/0464 ,  G06N3/08

Abstract: 本发明提供了一种学生专注度识别方法及系统，方法包括：获取目标学生的学习视频的视频帧序列；基于专注度识别模型中的特征提取网络，对所述视频帧序列进行多尺度特征提取并获得所述视频帧序列的多尺度特征序列；基于专注度识别模型中的分类网络，对所述多尺度特征序列进行专注度分类并获得所述目标学生的专注度；其中，所述专注度识别模型是基于样本视频帧序列以及所述样本视频帧序列中学生的样本专注度训练得到的。本发明实现了学生专注度的自动识别，在节省人力成本的同时，提升了学生专注度识别的准确率和效率。

公开(公告)号：CN115719516A

公开(公告)日：2023-02-28

申请号：CN202211530101.0

申请日：2022-11-30

Applicant: 华中师范大学

Inventor： 张浩 ,  黄涛 ,  刘三女牙 ,  李宗霖 ,  王翔宇 ,  闵远东 ,  戴志诚

IPC: G06V40/20 ,  G06V40/16 ,  G06V20/40 ,  G06V10/764

Abstract: 本发明提供了一种基于多通道的课堂教学行为识别方法及系统，方法包括：获取第一摄像头和第二摄像头分别在同一时刻采集的第一视频帧和第二视频帧；第一摄像头用于对教室的讲台区域进行视频采集；第二摄像头用于对教室的学生区域进行视频采集；对第一视频帧和第二视频帧分别进行人脸识别和行为姿态识别并获得讲台区域和学生区域中每个主体人物的身份信息和对应的行为姿态；基于讲台区域和学生区域中每个主体人物的身份信息和对应的行为姿态，以及预设的课堂教学行为判别函数，获得同一时刻对应的课堂教学行为。本发明避免了课堂教学场景视频信息量丢失的问题，极大地提升了课堂教学行为分析的客观性、全面性和准确率。