-
公开(公告)号：CN113743250A
公开(公告)日：2021-12-03
申请号：CN202110939047.4
申请日：2021-08-16
Applicant: 华中师范大学
Abstract: 本发明公开了一种课堂教学行为事件描述模型的构建方法及系统。该构建方法包括如下步骤：获取待训练的课堂教学视频数据；利用语音活动检测技术，将待训练的课堂教学视频数据按照教师的话语划分成多个事件；利用多种人工智能技术对所有事件进行多模态识别，划分为多个维度下的子事件，根据子事件建立事件描述模型，对教师在课堂中的各项教学行为事件进行描述。本发明根据语音对课堂视频进行切割，能够最大程度上保证每一个事件中教师非言语行为的完整性；且通过提取不同事件之间的共性，建立统一描述所有事件的描述模型，不仅能完成对教师各项教学行为的描述，还能反映出事件与事件之间的关联性，使得事件不再是孤立的。
-
公开(公告)号：CN113345444B
公开(公告)日：2022-10-28
申请号：CN202110496856.2
申请日：2021-05-07
Applicant: 华中师范大学
Abstract: 本发明提供一种说话者确认方法及系统，包括：对说话者的音频信息进行预处理，将所述音频信息转换为预设格式的数据；将说话者音频信息对应的预设格式的数据输入到训练好的基于空间注意力机制的深度嵌套残差神经网络，以得到帧级别的说话者向量；基于所述帧级别的说话者向量生成话语级别的说话者向量，并计算所述话语级别的说话者向量和目标说话者向量的余弦相似度，以判断所述说话者是否为目标说话者；所述目标说话者向量是预先获取的。本发明提出了一种基于空间注意力机制的深度嵌套残差神经网络，通过深度神经网络更准确地提取说话者声纹特征。
-
公开(公告)号：CN112668467B
公开(公告)日：2023-11-07
申请号：CN202011573481.7
申请日：2020-12-25
Applicant: 华中师范大学
Abstract: 本申请提供了一种行为分析方法、装置、电子设备及存储介质，涉及数据处理技术领域，该方法包括：基于第一评价数据构建特征矩阵，基于第二评价数据以及设定行为计量表计算得到标签向量。将特征矩阵与标签向量进行拼接后得到第一矩阵，并将第一矩阵输入线性回归模型以得到拟合数据曲线，拟合数据曲线用于表征宣讲者的行为与听讲者的行为的关联性。本申请通过拟合曲线得到宣讲者的行为与听讲者行为的关联性，以分析听讲者对宣讲者行为的反馈行为，避免人工针对听讲者的行为评价宣讲者的行为时的主观性，以提高行为分析的准确性。
-
Patent Agency Ranking
公开(公告)号：CN113345444A
公开(公告)日：2021-09-03
申请号：CN202110496856.2
申请日：2021-05-07
Applicant: 华中师范大学
Abstract: 本发明提供一种说话者确认方法及系统，包括：对说话者的音频信息进行预处理，将所述音频信息转换为预设格式的数据；将说话者音频信息对应的预设格式的数据输入到训练好的基于空间注意力机制的深度嵌套残差神经网络，以得到帧级别的说话者向量；基于所述帧级别的说话者向量生成话语级别的说话者向量，并计算所述话语级别的说话者向量和目标说话者向量的余弦相似度，以判断所述说话者是否为目标说话者；所述目标说话者向量是预先获取的。本发明提出了一种基于空间注意力机制的深度嵌套残差神经网络，通过深度神经网络更准确地提取说话者声纹特征。
-
公开(公告)号：CN113743250B
公开(公告)日：2024-02-13
申请号：CN202110939047.4
申请日：2021-08-16
Applicant: 华中师范大学
Abstract: 本发明公开了一种课堂教学行为事件描述模型的构建方法及系统。该构建方法包括如下步骤：获取待训练的课堂教学视频数据；利用语音活动检测技术，将待训练的课堂教学视频数据按照教师的话语划分成多个事件；利用多种人工智能技术对所有事件进行多模态识别，划分为多个维度下的子事件，根据子事件建立事件描述模型，对教师在课堂中的各项教学行为事件进行描述。本发明根据语音对课堂视频进行切割，能够最大程度上保证每一个事件中教师非言语行为的完整性；且通过提取不同事件之间的共性，建立统一描述所有事件的描述模型，不仅能完成对教师各项教学行为的描述，还能反映出事件与事件之间的关联性，使得事件不再是孤立的。
-
公开(公告)号：CN112528642B
公开(公告)日：2023-07-18
申请号：CN202011472521.9
申请日：2020-12-15
Applicant: 华中师范大学
IPC: G06F40/279 , G06F16/35 , G06N3/0455 , G06N3/0464 , G06N3/0442 , G06N3/08
Abstract: 本发明提供一种隐式篇章关系自动识别方法及系统，包括：将篇章粒度的文本划分为若干个由篇章关系衔接的两个连续文本片段，记为Arg1和Arg2组成的篇章论元对；对Arg1和Arg2进行分词并标记词性，生成以空格为间隔的词序列；基于Word2Vec语言模型，分别将Arg1和Arg2对应的词序列中每一个词映射成高维数值向量，从而得到Arg1和Arg2的矩阵表示；将Arg1和Arg2的矩阵表示输入到TLA‑Encoder和RC‑Encoder中进行编码，得到包含交互特征的论元表示和篇章论元的局部序列表示；利用外部注意机制融合包含交互特征的论元表示与局部序列特征，得到篇章论元的融合特征向量表示；送入SoftMax中识别融合特征向量所属的篇章关系分类。本发明对隐式篇章关系的识别更加精准。
-
公开(公告)号：CN112668467A
公开(公告)日：2021-04-16
申请号：CN202011573481.7
申请日：2020-12-25
Applicant: 华中师范大学
IPC: G06K9/00
Abstract: 本申请提供了一种行为分析方法、装置、电子设备及存储介质，涉及数据处理技术领域，该方法包括：基于第一评价数据构建特征矩阵，基于第二评价数据以及设定行为计量表计算得到标签向量。将特征矩阵与标签向量进行拼接后得到第一矩阵，并将第一矩阵输入线性回归模型以得到拟合数据曲线，拟合数据曲线用于表征宣讲者的行为与听讲者的行为的关联性。本申请通过拟合曲线得到宣讲者的行为与听讲者行为的关联性，以分析听讲者对宣讲者行为的反馈行为，避免人工针对听讲者的行为评价宣讲者的行为时的主观性，以提高行为分析的准确性。
-
公开(公告)号：CN112528642A
公开(公告)日：2021-03-19
申请号：CN202011472521.9
申请日：2020-12-15
Applicant: 华中师范大学
IPC: G06F40/279 , G06F16/35 , G06N3/04 , G06N3/08
Abstract: 本发明提供一种隐式篇章关系自动识别方法及系统，包括：将篇章粒度的文本划分为若干个由篇章关系衔接的两个连续文本片段，记为Arg1和Arg2组成的篇章论元对；对Arg1和Arg2进行分词并标记词性，生成以空格为间隔的词序列；基于Word2Vec语言模型，分别将Arg1和Arg2对应的词序列中每一个词映射成高维数值向量，从而得到Arg1和Arg2的矩阵表示；将Arg1和Arg2的矩阵表示输入到TLA‑Encoder和RC‑Encoder中进行编码，得到包含交互特征的论元表示和篇章论元的局部序列表示；利用外部注意机制融合包含交互特征的论元表示与局部序列特征，得到篇章论元的融合特征向量表示；送入SoftMax中识别融合特征向量所属的篇章关系分类。本发明对隐式篇章关系的识别更加精准。
-
-
-
-
-
-
-
Search Results
8
records
(took 0.017 seconds)
