-
公开(公告)号:CN117351557A
公开(公告)日:2024-01-05
申请号:CN202311035586.0
申请日:2023-08-17
Applicant: 中国矿业大学
IPC: G06V40/20 , G06V10/44 , G06V10/764 , G06V10/82 , G06N3/0464 , G06N3/048 , G06N3/08 , G06V10/766 , G06T7/80 , G06F3/01
Abstract: 本发明公开了一种深度学习的车载手势识别方法,包括实时跟踪手势,并获取操作人的手势图像;基于Faster‑RCNN算法对动态手势进行识别;基于结合注意力机制优化的三维卷积神经网络手势识别用户的手势指令,将其传输给车载控制器达到控制车辆的作用。本发明使用Faster‑RCNN的锚框生成方法和ROI池化方法,实现动态手势动作的时间区间的分类和回归,实现对图像数据序列中动态手势时间区间的定位检测,相比传统的提取手势识别可以准确判断手势指令发生的时间和位置;基于三维卷积神经网络的动态手势识别,构建了动态手势识别模型,实现动作手势的识别任务。
-
公开(公告)号:CN117261786A
公开(公告)日:2023-12-22
申请号:CN202311035366.8
申请日:2023-08-17
Applicant: 中国矿业大学
IPC: B60R16/023 , B60J3/02 , G06V20/59 , G06V40/16 , G06V10/82 , G06N3/045 , G06N3/0464
Abstract: 本发明公开了一种基于人脸表情识别的智慧座舱遮阳板自动调节系统,包括将多任务卷积神经网络和轻量级网络MobileNetV3网络配合使用,组成用于人脸表情识别的智慧座舱遮阳板自动调节系统;MTCNN用于实时检测截取人脸区域,并标出人眼、鼻子和嘴角共五处特征点用于人脸对齐操作;MobileNetV3网络是一种可应用于车载的轻量级网络,用于识别驾驶员的面部表情。本发明通过MTCNN模型实时检测人脸,利用MobileNetV3_small模型识别行车过程中的面部表情,及时自动调整汽车遮阳板,缓解强光线对驾驶者的干扰,实现安全、智能驾驶。
-
公开(公告)号:CN117152723A
公开(公告)日:2023-12-01
申请号:CN202311019094.2
申请日:2023-08-11
Applicant: 中国矿业大学
IPC: G06V20/59 , G06V40/16 , G06V10/82 , G06N3/0464 , G06V10/764 , G06N3/096 , G06N3/006
Abstract: 本发明公开了一种基于白鲸优化算法和迁移学习的驾驶员表情识别方法,包括获取驾驶员表情数据集;对驾驶员表情数据集进行图像预处理;构建驾驶员表情识别模型;进行表情识别模型的预训练;对超参数优化后的驾驶员表情识别网络进行微调;其中,利用白鲸优化算法优化表情识别模型的超参数。本发明能够在相对短的时间内得到适合驾驶员表情识别的超参数取值,有效克服卷积神经网络由于超参数选取不当造成的准确率下降,训练缓慢,甚至模型不收敛等缺点,进而提高驾驶员表情识别模型的性能,为实现安全、智能驾驶保驾护航。
-
公开(公告)号:CN113303909B
公开(公告)日:2022-07-15
申请号:CN202110537281.4
申请日:2021-05-18
Applicant: 中国矿业大学
Abstract: 本发明公开了一种基于磁传感器阵列的磁控胶囊机器人定位方法及系统,包括内部嵌入永磁体的胶囊机器人、外部永磁体、机械臂、基于磁传感器阵列的定位装置。本发明的有益效果是:机械臂末端固定安装外部永磁体,实现灵活的空间磁场变化;胶囊机器人内部嵌入小体积的永磁体,在空间磁场的作用下进行翻转运动;该定位方法通过上、下层磁传感器阵列盘测得的空间磁场做差分处理,消除外部永磁体和地磁场的信息,实现胶囊机器人磁场强度的准确获取;动态调节磁传感器阵列盘的位置,获取胶囊机器人的磁场梯度信息,校验位姿计算结果,提高空间定位精度。
-
公开(公告)号:CN113183680A
公开(公告)日:2021-07-30
申请号:CN202110482232.5
申请日:2021-04-30
Applicant: 中国矿业大学
IPC: B60B19/00
Abstract: 本发明公开了一种矿用巡检机器人的自动越障装置,包括机身、磁流变阻尼轮、轮毂、磁流变阻尼器、轮框、压力传感器、磁流变液A、复位弹簧、线圈A、圆筒内壁、活塞杆和外壳;所述磁流变万向节由主动轴、线圈B、磁流变液B、保持架、内滚道、钢球、外滚道和从动轴构成;在巡检机器人上安装带有磁流变阻尼器的车轮,当巡检机器人在工作的过程中遇到障碍物或是较为复杂的地形时,其可以轻松翻越,继续进行工作。
-
公开(公告)号:CN113658135B
公开(公告)日:2024-02-02
申请号:CN202110942211.7
申请日:2021-08-17
Applicant: 中国矿业大学
IPC: G06T7/00 , G06T7/11 , G06T7/62 , G06N3/0464 , G06N3/08
Abstract: 本发明公开了一种基于模糊PID自适应调光皮带异物检测方法与系统,包括LED三色照度模块、模糊PID调节光照模块、图像灰度处理模块、图像采集模块、异物检测硬件模块、异物深度学习检测模型模块、分割及分拣处理模块。考虑到采集图像时,光源对图像清晰度的影响,以及井下复杂的环境,通过模糊PID调节光源照度,调节图像清晰度,确保输入高清晰度的图像,采集的图像输入基于yolo的深度学习检测模型,并对识别后的异物图像进行分割和识别,以有效提高皮带异物识别的精度。并且采用对图像进行分割的技术手段,实现对皮带异物的表面积计算,进而提高皮带异物分选、综放工作面自动化水平,减轻工人劳动强度同时保证异物分选的准确性。
-
公开(公告)号:CN117218716A
公开(公告)日:2023-12-12
申请号:CN202311005673.1
申请日:2023-08-10
Applicant: 中国矿业大学
Abstract: 本发明公开了一种基于DVS的汽车座舱手势识别系统及方法,所述系统包括:依次连接的感知层、决策层、执行层;其中感知层利用DVS采集用户手势图像;决策层通过算法处理模块、输出模块对手势图像信号进行分类处理;执行层通过反馈模块执行手势命令;所述方法以DVS采集手势数据,将图像信号传送给算法处理模块进行处理,提取深度信息与三维手部骨架特征进行多模态融合,经输出模块算法校验、信号分析、模型验证后输出信号到执行层,反馈模块执行命令;本发明系统与方法能够过滤用户不同个体的手势习惯差异且能解决识别精度与速度不高的问题。
-
公开(公告)号:CN117152722A
公开(公告)日:2023-12-01
申请号:CN202311014430.4
申请日:2023-08-11
Applicant: 中国矿业大学
IPC: G06V20/59 , G06V40/16 , G06V10/82 , G06N3/0464 , G06V10/774
Abstract: 本发明公开了一种基于多尺度卷积神经网络的轻量化驾驶员面部表情识别方法,该轻量化驾驶员面部表情识别方法通过多任务卷积神经网络实现人脸定位和对齐;然后将增强后的面部图像传入改进的多尺度卷积神经网络进行人脸表情识别;本发明不同于传统的基于卷积神经网络的表情识别方法,设计了一个新颖的多尺度残差注意力模块,并构建了一个轻量化的高效网络,根据驾驶员面部图像非接触地识别人员驾驶表情状态并做出相应措施,实现安全、智能驾驶,并且该方法一方面从多个尺度提取面部图像特征,有效提高了人脸表情识别的准确率;另一方面轻量化网络有利于部署在汽车智慧座舱域控制器上。
-
公开(公告)号:CN115909289A
公开(公告)日:2023-04-04
申请号:CN202211238882.6
申请日:2022-10-11
Applicant: 中国矿业大学
IPC: G06V20/59 , G06V40/16 , G06V10/82 , G06V10/774 , G06N3/0464 , G06N3/084 , G06N3/096
Abstract: 本发明公开了一种基于深度学习的车载人脸表情识别方法,包括加载FER图像数据集、图像预处理、将数据集分为训练和测试样本、使用预训练的SqueezeNet网络建立模型参数、对模型进行特征提取、将图像数据测试到模型中进行情感分类、计算性能测量参数。本发明的有益效果是:使用一种迁移学习的表情识别框架,实现了通过挤压网络对面部表情的分类,通过迁移学习实现CNN模型的挤压网络用于驾驶员微表情识别;使用一些FER数据库进行性能的评估;分析对比最精确的方法;通过研究卷积神经网络在面部表情识别中的表现,使用一个小型的CNN架构SqueezeNet,它的参数少,执行速度更快,可以在嵌入式系统中部署。
-
公开(公告)号:CN114216931A
公开(公告)日:2022-03-22
申请号:CN202111304876.1
申请日:2021-11-05
Applicant: 中国矿业大学
Abstract: 本发明公开了一种基于红外图像的带式输送机煤炭自燃检测方法,包括带式输送机部分机构、连接支架、红外热成像仪、烟雾报警器。本发明将获取的红外图像利用图像分割技术提取出满足阈值的区域,将前后两个时刻图像对比,以能够在井上桥栈带式输送机输送煤炭时,判断带式输送机输送的煤炭是否发生自燃,以提高煤炭自燃检测的速率和准确度。
-
-
-
-
-
-
-
-
-