-
公开(公告)号:CN113515976B
公开(公告)日:2023-08-29
申请号:CN202010280763.1
申请日:2020-04-10
Applicant: 华中科技大学
Abstract: 本发明公开了一种基于多场景视频分析的智能实验考察系统,属于实践教学技术领域。包括:交互终端、多角度摄像头和实验主机;其中,交互终端,用于与用户进行人机交互,实现身份验证、实验授权,以及实验数据提交;多角度摄像头,用于多角度采集用户操作行为以及实验仪器显示的实验数据;实验主机,用于对多角度摄像头采集的图像进行分析、处理与结果反馈,并对异常行为进行报警。本发明提供的系统可以解决当前实验教学模式下实践环节存在的过程监控困难的问题,具有很强的适用性,可以适用于信息技术类、物理类等实验教学场景,对于当前教学方式的智能化和信息化具有较高的价值。
-
公开(公告)号:CN115985270A
公开(公告)日:2023-04-18
申请号:CN202211566507.4
申请日:2022-12-07
Applicant: 华中科技大学
IPC: G10H1/00 , G06V40/20 , G06V40/10 , G06V10/62 , G06V10/34 , G06V10/82 , G10L25/18 , G10L25/30 , G10L25/48
Abstract: 本发明公开了一种基于图卷积的多模态钢琴转录装置及其训练方法,引入图卷积的方法,通过将骨架数据输入ST‑GCN网络实现空间维度和时间维度的特征聚合,从而有效捕捉骨架特征,相较于现有的钢琴转录方法而言,能够更好的感知手部位置和手指动作;使用音频模块转录结果、骨架模块转录结果和融合模块转录结果三个模块共同作用,在最大程度的保留了各个模态的语义特征,减少融合带来的随机性的基础上,利用融合转录模块的特征来弥补之前单模态转录的不足,有效减少了单模态音频转录在手部范围外的多检和手部范围内的漏检问题,提高了钢琴转录结果的精度。
-
公开(公告)号:CN114648805B
公开(公告)日:2022-09-02
申请号:CN202210537861.8
申请日:2022-05-18
Applicant: 华中科技大学
IPC: G06V40/18 , G06V10/46 , G06V10/764 , G06V10/82 , G06K9/62 , G06N3/04 , G06N3/08 , H04N21/44 , H04N21/478
Abstract: 本发明公开了一种针对课程视频的视线修正系统、对该系统的训练方法以及利用训练好的视线修正系统进行视线落点估计的方法,其中,利用神经网络,先对视线落点的初始热度图和带语音可视化标注的课程视频帧进行通道拼接,再对所拼接的特征进行显著性检测,然后对所提取的显著性特征进行还原,得到视线落点的修正热度图。本发明一方面基于显著性检测对初始热度图进行修正,另一方面对输入的课程视频帧添加语音可视化标注,以提高显著性检测的效果,从而提高视线落点估计的精度。
-
公开(公告)号:CN113515976A
公开(公告)日:2021-10-19
申请号:CN202010280763.1
申请日:2020-04-10
Applicant: 华中科技大学
Abstract: 本发明公开了一种基于多场景视频分析的智能实验考察系统,属于实践教学技术领域。包括:交互终端、多角度摄像头和实验主机;其中,交互终端,用于与用户进行人机交互,实现身份验证、实验授权,以及实验数据提交;多角度摄像头,用于多角度采集用户操作行为以及实验仪器显示的实验数据;实验主机,用于对多角度摄像头采集的图像进行分析、处理与结果反馈,并对异常行为进行报警。本发明提供的系统可以解决当前实验教学模式下实践环节存在的过程监控困难的问题,具有很强的适用性,可以适用于信息技术类、物理类等实验教学场景,对于当前教学方式的智能化和信息化具有较高的价值。
-
公开(公告)号:CN113255572B
公开(公告)日:2021-09-14
申请号:CN202110669216.7
申请日:2021-06-17
Applicant: 华中科技大学
Abstract: 本发明公开了一种课堂注意力评估方法及系统,包括:S1、对采集到的一节课的课堂视频按帧进行头部姿态检测,得到各帧图像中学生所在的位置框以及头部姿态;获取各帧图像中的学生人数,将各帧图像中学生人数的众数记为学生总人数;S2、基于各帧图像中学生的头部姿态以及学生总人数,计算该节课的正抬头率和活跃指数;其中,正抬头率为头部姿态为正抬头的学生人数与学生总人数比值的平均值;活跃指数为学生头部姿态从非正抬头变为抬头姿态的频率的平均值;S3、计算该节课的正抬头率和活跃指数的乘积,得到该节课的注意力估计值。本发明设计了用来刻画课堂活跃状态的活跃指数,活跃指数与抬头率相互补充来评估课堂注意力,使得评估结果更加准确。
-
公开(公告)号:CN106123819A
公开(公告)日:2016-11-16
申请号:CN201610503932.7
申请日:2016-06-29
Applicant: 华中科技大学
CPC classification number: G01B21/00 , G06K9/6223
Abstract: 本发明公开了一种注意力焦点测量方法,对测试对象的头部偏移数据进行实时测量,根据测量数据估算测试对象的注意力焦点所在位置;通过异常判别及聚类消除部分测试对象注意力分散导致的群体注意力测量误差;将本发明提供的这种注意力焦点测量方法应用于教室环境中监测课堂情况,可为了解学生上课状态提供了可靠而直观的数据,对于当前课堂教学中学生学习情况的监测具有较高的价值。
-
公开(公告)号:CN103544498A
公开(公告)日:2014-01-29
申请号:CN201310440046.0
申请日:2013-09-25
Applicant: 华中科技大学
Abstract: 本发明公开了一种视频内容检测方法与系统,所述方法包括:建立训练图集,根据所述训练图集训练得到图像分类器,对待检测视频进行解码,以生成图像序列,基于自适应抽样方法,利用所述图像分类器对所述生成的图像序列进行抽样检测,根据所述图像分类器对所述图像序列抽样检测的结果,判断所述待检测视频是否为不良视频。通过本发明技术方案,采用动态的自适应抽样方法,对视频的内容检测的时候,在检测准确率和检测效率上到达了良好的平衡,在保证检测准确率的同时通过减少抽样帧的数目提高了检测效率,能够取得快速检测的有益效果。
-
公开(公告)号:CN114648805A
公开(公告)日:2022-06-21
申请号:CN202210537861.8
申请日:2022-05-18
Applicant: 华中科技大学
IPC: G06V40/18 , G06V10/46 , G06V10/764 , G06V10/82 , G06K9/62 , G06N3/04 , G06N3/08 , H04N21/44 , H04N21/478
Abstract: 本发明公开了一种针对课程视频的视线修正模型、对该模型的训练方法以及利用训练好的视线修正模型进行视线落点估计的方法,其中,利用神经网络,先对视线落点的初始热度图和带语音可视化标注的课程视频帧进行通道拼接,再对所拼接的特征进行显著性检测,然后对所提取的显著性特征进行还原,得到视线落点的修正热度图。本发明一方面基于显著性检测对初始热度图进行修正,另一方面对输入的课程视频帧添加语音可视化标注,以提高显著性检测的效果,从而提高视线落点估计的精度。
-
公开(公告)号:CN103839037A
公开(公告)日:2014-06-04
申请号:CN201210480517.6
申请日:2012-11-23
Applicant: 华中科技大学
IPC: G06K9/00 , G06K9/62 , H04N19/134
Abstract: 本发明公开了一种基于众核和GPU的网络视频流不良内容检测方法,包括:在众核计算平台下获取网络数据包,对网络数据包进行分类,以提取网络数据包中的视频数据包,对视频数据包进行重组,按照网络视频流编码的语法对重组后的视频数据包进行解码,以生成图像序列,GPU采用基于纹理检测和肤色点检测相结合的方法对图像序列进行预处理,以确定疑似不良图像,GPU采用SVM对疑似不良图像进行精确处理,以确定不良图像。本发明只需获取网络数据包,即可识别出视频流,直接对视频流进行解码后,采用图像匹配检测技术即可识别该视频流是否含有不良信息。
-
公开(公告)号:CN103067218A
公开(公告)日:2013-04-24
申请号:CN201210546006.X
申请日:2012-12-14
Applicant: 华中科技大学
IPC: H04L12/26
Abstract: 本发明公开了一种高速网络数据包内容分析装置,包括:网卡,用于获取高速网络数据包;FPGA,用于过滤掉不属于需要检测的应用层协议类型的网络数据包,然后将过滤得到的网络数据包分流到各众核处理器中;至少一个的众核处理器,根据核分配策略对其包含的多核进行任务分工,用于对分流得到的网络数据包并行执行协议还原、数据包内容提取以及数据包内容分析融合任务;主控板,用于对FPGA和众核处理器进行配置。本发明只需获取原始的网络数据包,就可利用众核处理器的并行计算能力,直接进行协议还原和敏感信息的分析检测,与传统方法相比,计算能力大幅提升,实时性强,检测效率高。
-
-
-
-
-
-
-
-
-