-
公开(公告)号：CN113792627B
公开(公告)日：2023-11-07
申请号：CN202111002632.8
申请日：2021-08-30
Applicant: 华中师范大学
IPC: G06V40/16 , G06V10/82 , G06N3/0464 , G06N3/084 , G16H50/30
Abstract: 本发明公开了一种基于表情识别的风险学生预测方法，该方法包括以下步骤：1)将输入的学生人脸图像转为张量，将这些张量按比例分为训练集和测试集；2)训练基于表情识别风险学生的学习模型，构造分为消极表情和非消极表情的二维高斯软标签，将训练集张量输入基于标签分布的学习模型，利用预测标签和真实标签之间的KL‑loss来训练学习模型；3)将测试集张量输入训练好的学习模型中进行特征提取和表情识别，将识别的结果存储到学生情绪库；4)根据学生的表情识别的结果分析学生的情绪状态，判断该学生是否为风险学生。本发明设计了新的学习模型并将表情分为积极表情和消极表情利用二维标签来进行表情识别，提升了识别准确性，可有效预测风险学生。
-
公开(公告)号：CN114461908A
公开(公告)日：2022-05-10
申请号：CN202210099175.7
申请日：2022-01-27
Applicant: 华中师范大学
IPC: G06F16/9535 , G06Q50/20 , G06N3/04 , G06N3/08
Abstract: 本发明公开了一种基于异质交互行为的数字教育资源匹配方法及系统。该方法包括步骤：获取数字教育资源数据，数字教育资源数据包含学习者对资源的偏好数据、资源属性数据、学习者对资源的评论数据，每个学习者有唯一的编号；根据偏好数据、资源属性数据构建异质图，对异质图进行特征提取获得每个资源的异质流特征向量，根据评论数据获取每个资源的文本特征向量；将同一个资源的异质流特征向量、文本特征向量进行拼接获得每个资源的特征向量；将待匹配的目标学习者编号及每个资源的特征向量输入到训练后的推荐模型中，输出被推荐的数字教育资源。本发明可以提升数字教育资源匹配的准确度，从而更好地提供个性化学习服务。
-
公开(公告)号：CN113807519A
公开(公告)日：2021-12-17
申请号：CN202111002385.1
申请日：2021-08-30
Applicant: 华中师范大学
Abstract: 本发明公开了一种融入教学反馈与习得理解的知识图谱构建方法，该方法包括以下步骤：1)数据获取：将课堂学生行为转换为描述学生对当前知识的理解程度的文本；2)命名实体识别和关系抽取，对课堂文本数据同时做实体识别和关系抽取得到一个有关系的实体三元组；3)将实体和关系嵌入通过带权图卷积网络汇聚邻居节点的信息学习到实体和关系更加丰富的语意表示形成最终的实体嵌入表示；4)通过多尺度卷积神经网络对知识图谱三元组中的备选尾实体评分，选取评分最高尾实体作为推理结果，进一步推理出隐含的知识，对知识图谱进行更新；所述备选尾实体为步骤3)中所更新的所有实体。本发明能够构建每个学生特定的知识图谱，进行学习和教学评价反馈。
-
公开(公告)号：CN113792626B
公开(公告)日：2024-08-27
申请号：CN202111002386.6
申请日：2021-08-30
Applicant: 华中师范大学
IPC: G06V40/16 , G06V40/20 , G06V40/10 , G06V10/764 , G06V10/82 , G06N3/0442 , G06N3/08
Abstract: 本发明公开了一种基于教师非言语行为的教学过程评价方法，包括以下步骤：1)非言语行为数据采集，获取教学课堂中教师的非言语行为数据；2)采用行为特征矩阵对教师教学非言语行为进行全方位表征量化；3)行为特征分类器训练：使用情绪标签训练分类器，得到相应教师类人格型特征表征、课堂非言语行为特征表征；4)根据某一特定教师非言语行为采集数据，进行特征表征和特征分解，得到教师本身的特征表征和课堂行为特征表征，并将两者的特征向量相乘，得到教师的教学评价表示。本发明通过情绪、身势、生理信号三种模态数据，建立全面、精准的教师课堂非言语行为的刻画，建立了基于教师非言语行为的教学过程的定量评价框架。
-
公开(公告)号：CN113792626A
公开(公告)日：2021-12-14
申请号：CN202111002386.6
申请日：2021-08-30
Applicant: 华中师范大学
Abstract: 本发明公开了一种基于教师非言语行为的教学过程评价方法，包括以下步骤：1)非言语行为数据采集，获取教学课堂中教师的非言语行为数据；2)采用行为特征矩阵对教师教学非言语行为进行全方位表征量化；3)行为特征分类器训练：使用情绪标签训练分类器，得到相应教师类人格型特征表征、课堂非言语行为特征表征；4)根据某一特定教师非言语行为采集数据，进行特征表征和特征分解，得到教师本身的特征表征和课堂行为特征表征，并将两者的特征向量相乘，得到教师的教学评价表示。本发明通过情绪、身势、生理信号三种模态数据，建立全面、精准的教师课堂非言语行为的刻画，建立了基于教师非言语行为的教学过程的定量评价框架。
-
Patent Agency Ranking
公开(公告)号：CN113723277A
公开(公告)日：2021-11-30
申请号：CN202110998162.9
申请日：2021-08-27
Applicant: 华中师范大学
Abstract: 本发明公开了一种融入多模态视觉信息的学习意图监测方法及系统。该方法包括步骤：分别采集学习者的红外图像数据和可见光图像数据；分别对所述红外图像数据和所述可见光图像数据进行预处理；将预处理后的所述红外图像数据和所述可见光图像数据输入到人脸检测器；将人脸检测器的输出数据输入到图像融合模型；将所述图像融合模块的输出数据输入到头部姿态识别模型，获取头部姿态识别数据，根据所述头部姿态识别数据判断学习者的学习意图。本发明可以实现不同模态的信息互补，提高光照变化或复杂背景下的头部姿态识别精准度，从而提高学习意图判断精准度。
-
公开(公告)号：CN113723277B
公开(公告)日：2024-02-27
申请号：CN202110998162.9
申请日：2021-08-27
Applicant: 华中师范大学
Abstract: 本发明公开了一种融入多模态视觉信息的学习意图监测方法及系统。该方法包括步骤：分别采集学习者的红外图像数据和可见光图像数据；分别对所述红外图像数据和所述可见光图像数据进行预处理；将预处理后的所述红外图像数据和所述可见光图像数据输入到人脸检测器；将人脸检测器的输出数据输入到图像融合模型；将所述图像融合模块的输出数据输入到头部姿态识别模型，获取头部姿态识别数据，根据所述头部姿态识别数据判断学习者的学习意图。本发明可以实现不同模态的信息互补，提高光照变化或复杂背景下的头部姿态识别精准度，从而提高学(56)对比文件张鸿宇;刘威;许炜;王辉.基于深度图像的多学习者姿态识别.计算机科学.2015,(第09期),第1-3节.路远;李彦敏.基于RealSense的在线课堂注意力评测系统设计.中国医学教育技术.2020,(第03期),全文.赵云丰;尹怡欣.基于决策融合的红外与可见光图像人脸识别研究.激光与红外.2008,(第06期),全文.Fangcen Liu etc.Infrared and VisibleCross-Modal Image Retrieval ThroughShared Features《. IEEE Transactions onCircuits and Systems for Video Technology》.2021,第31卷(第11期),全文.
-
公开(公告)号：CN113705440B
公开(公告)日：2023-09-01
申请号：CN202110994920.X
申请日：2021-08-27
Applicant: 华中师范大学
IPC: G06V20/10 , G06V40/10 , G06V10/774 , G06N3/0464 , G06V10/762 , G06Q50/20 , G06V10/80 , G06V10/82
Abstract: 本发明公开了一种面向教育机器人视觉理解的头部姿态估计方法及系统。该方法包括步骤：分别获取不同时刻的教育机器人采集的学习者的头部姿态的3D点云数据和红外图像数据；分别对不同时刻的所述3D点云数据和所述红外图像数据进行预处理；分别将预处理后的不同时刻的所述3D点云数据和所述红外图像数据输入到训练好的头部姿态识别模型，获取不同时刻的头部姿态识别结果；根据不同时刻的头部姿态识别结果的变化，确定学习者的动作指令，根据所述动作指令生成所述教育机器人的控制指令。本发明可以使教育机器人准确理解学习者的意图，促进精准化教学和个性化学习。
-
公开(公告)号：CN113792627A
公开(公告)日：2021-12-14
申请号：CN202111002632.8
申请日：2021-08-30
Applicant: 华中师范大学
Abstract: 本发明公开了一种基于表情识别的风险学生预测方法，该方法包括以下步骤：1)将输入的学生人脸图像转为张量，将这些张量按比例分为训练集和测试集；2)训练基于表情识别风险学生的学习模型，构造分为消极表情和非消极表情的二维高斯软标签，将训练集张量输入基于标签分布的学习模型，利用预测标签和真实标签之间的KL‑loss来训练学习模型；3)将测试集张量输入训练好的学习模型中进行特征提取和表情识别，将识别的结果存储到学生情绪库；4)根据学生的表情识别的结果分析学生的情绪状态，判断该学生是否为风险学生。本发明设计了新的学习模型并将表情分为积极表情和消极表情利用二维标签来进行表情识别，提升了识别准确性，可有效预测风险学生。
-
公开(公告)号：CN113705440A
公开(公告)日：2021-11-26
申请号：CN202110994920.X
申请日：2021-08-27
Applicant: 华中师范大学
Abstract: 本发明公开了一种面向教育机器人视觉理解的头部姿态估计方法及系统。该方法包括步骤：分别获取不同时刻的教育机器人采集的学习者的头部姿态的3D点云数据和红外图像数据；分别对不同时刻的所述3D点云数据和所述红外图像数据进行预处理；分别将预处理后的不同时刻的所述3D点云数据和所述红外图像数据输入到训练好的头部姿态识别模型，获取不同时刻的头部姿态识别结果；根据不同时刻的头部姿态识别结果的变化，确定学习者的动作指令，根据所述动作指令生成所述教育机器人的控制指令。本发明可以使教育机器人准确理解学习者的意图，促进精准化教学和个性化学习。
-
-
-
-
-
-
-
-
-
Search Results
14
records
(took 0.019 seconds)
