-
公开(公告)号:CN116630444B
公开(公告)日:2023-09-29
申请号:CN202310906555.1
申请日:2023-07-24
申请人: 中国矿业大学 , 徐州奉火智能科技有限公司
摘要: 本申请提供一种相机与激光雷达融合校准的优化方法,包括以下步骤:S1、获取激光雷达的点云数据和相机的图像数据,并对相机进行标定获得内参矩阵;S2、根据步骤S1中获取的激光雷达点云数据得到标定板点云信息;S3、基于相机与激光雷达之间的相对位置约束随机生成外参矩阵;S4、根据外参矩阵和相机内参矩阵将标定板点云信息投影到图像上,并根据投影图像中标定板的重合度以及匹配误差来选择生成的最优矩阵,本申请结构合理,标定的准确性高,能够突破对于标定的场景存在的限制。
-
公开(公告)号:CN117771595B
公开(公告)日:2024-05-28
申请号:CN202410210626.9
申请日:2024-02-27
申请人: 中国矿业大学 , 徐州奉火智能科技有限公司
IPC分类号: A62C27/00 , A62C31/03 , A62C31/28 , A62C37/00 , G06V20/52 , G06V20/56 , H04N23/90 , H04N23/695 , H04N23/11 , H04N7/18
摘要: 本申请提供一种基于多模式视觉系统的举高消防灭火方法及系统,其中,多模式视觉系统包括举高臂末端感知系统、车体感知视觉系统、压力传感系统、流量传感系统和控制器,举高消防灭火方法包括以下步骤:S1、举高臂末端感知系统检测火点并将计算获得的该火点的空间位置传送至控制器获得期望灭火点;S2、车体感知视觉系统对作业范围内进行扫描与环境建模,获得在作业范围内存在的若干障碍物位置坐标即障碍物的分布位置,并将若干障碍物位置坐标传送至控制器,本申请能够对期望灭火点的位置进行确认,能够得到考虑障碍物的分布为位置、举高臂动作对流量和压力的影响的举高臂的关节期望角度和消防炮的水平与俯仰关节角度。
-
公开(公告)号:CN117011379A
公开(公告)日:2023-11-07
申请号:CN202310969095.7
申请日:2023-08-03
申请人: 中国矿业大学 , 徐州奉火智能科技有限公司
摘要: 本发明公开了融合视觉与激光雷达的目标定位、测量和追踪装置及方法,其中,本发明通过提取激光雷达中标定板信息与相机图像中的标定板信息进行匹配,建立匹配关系,根据匹配误差建立目标函数,本发明通过融合装置固定相机和激光雷达的相对位置从而完成联合标定,实现相机和激光雷达的数据关联,简化了标定流程,提高了标定的准确性和快速性,同时利用相机和激光雷达融合进行多目标定位和追踪。
-
公开(公告)号:CN116630444A
公开(公告)日:2023-08-22
申请号:CN202310906555.1
申请日:2023-07-24
申请人: 中国矿业大学 , 徐州奉火智能科技有限公司
摘要: 本申请提供一种相机与激光雷达融合校准的优化方法,包括以下步骤:S1、获取激光雷达的点云数据和相机的图像数据,并对相机进行标定获得内参矩阵;S2、根据步骤S1中获取的激光雷达点云数据得到标定板点云信息;S3、基于相机与激光雷达之间的相对位置约束随机生成外参矩阵;S4、根据外参矩阵和相机内参矩阵将标定板点云信息投影到图像上,并根据投影图像中标定板的重合度以及匹配误差来选择生成的最优矩阵,本申请结构合理,标定的准确性高,能够突破对于标定的场景存在的限制。
-
公开(公告)号:CN117771595A
公开(公告)日:2024-03-29
申请号:CN202410210626.9
申请日:2024-02-27
申请人: 中国矿业大学 , 徐州奉火智能科技有限公司
IPC分类号: A62C27/00 , A62C31/03 , A62C31/28 , A62C37/00 , G06V20/52 , G06V20/56 , H04N23/90 , H04N23/695 , H04N23/11 , H04N7/18
摘要: 本申请提供一种基于多模式视觉系统的举高消防灭火方法及系统,其中,多模式视觉系统包括举高臂末端感知系统、车体感知视觉系统、压力传感系统、流量传感系统和控制器,举高消防灭火方法包括以下步骤:S1、举高臂末端感知系统检测火点并将计算获得的该火点的空间位置传送至控制器获得期望灭火点;S2、车体感知视觉系统对作业范围内进行扫描与环境建模,获得在作业范围内存在的若干障碍物位置坐标即障碍物的分布位置,并将若干障碍物位置坐标传送至控制器,本申请能够对期望灭火点的位置进行确认,能够得到考虑障碍物的分布为位置、举高臂动作对流量和压力的影响的举高臂的关节期望角度和消防炮的水平与俯仰关节角度。
-
公开(公告)号:CN117058236A
公开(公告)日:2023-11-14
申请号:CN202311043208.7
申请日:2023-08-17
申请人: 中国矿业大学 , 徐州奉火智能科技有限公司
摘要: 本发明公开了一种基于多目视觉系统自切换的目标识别定位方法,通过目标识别算法对待测目标物进行识别感知,并根据双目成像原理获取识别结果的局部深度信息,在目标局部深度信息的基础上求取评价定位精度的单像素偏差影响因子σ、深度信息误差率ε、深度离散程度ξ三个指标,在目标局部图像信息的基础上获取峰值信噪比PSNR、结构相似性SSIM两个评价指标,并建立目标定位评价模型,将定位精度进行量化。根据自主切换逻辑,对目标识别结果与定位精度评价分数依次进行比较,以实现多台不同焦距双目相机的自主切换,从而实现满足近距离与远距离目标的识别与定位需求,克服了低焦距双目相机对远距离目标定位精度低及高焦距双目相机视野小的问题。
-
公开(公告)号:CN117218514A
公开(公告)日:2023-12-12
申请号:CN202311485790.2
申请日:2023-11-09
申请人: 中国矿业大学
IPC分类号: G06V10/82 , G06N3/0464 , G06V10/762 , G06V10/764 , G06V10/26 , G06N3/126
摘要: 本申请提供一种无人机视觉灭火决策方法及系统,步骤S1、无人机飞往火场上空预定位置,调整单目视觉装置姿态获取火场图像信息;步骤S2、改进的Unet网络模型使用优化后的交叉熵损失函数完成训练过程,无线图像处理终端通过采用预训练好的改进的Unet网络模型处理,输出火场图像信息中所有火源点和灭火剂射流落点像素分割结果;步骤S3、采用密度的聚类算法DBSCAN和中心法获取不同火源点位置及像素大小信息和灭火剂射流落点位置信息,并对不同火源点进行序列编号;步骤S4、采用改进的遗传优化算法获得多火源点编号次序作为多火源点灭火次序的最优解个体,获得完成时间最短或近似最短的灭火打击任务,进一步提高了消防救援作业灭火效率。
-
公开(公告)号:CN116139430B
公开(公告)日:2023-07-07
申请号:CN202310404913.9
申请日:2023-04-17
申请人: 中国矿业大学
摘要: 本申请公开了一种无人机智能消防灭火系统及方法,其中,系统包括:无人机、光电吊舱、地面消防机器人运输车和远程终端,无人机携带光电吊舱飞往火场上方,光电吊舱安装在无人机下方,并以无人机俯视视角获取火场视频和图片信息,将采集到的火场视频和图片信息发送至远程终端。本申请与现有技术相比的优点在于:通过远程终端采用静态误差补偿和动态误差补偿相结合的方式修正所拍摄图像的偏差对火场目标进行精准定位,并根据射流灭火剂的射流落点坐标和火场坐标误差计算出消防炮的偏航角和俯仰角的调整角度,让射流灭火剂的射流落点坐标和火场坐标相重合,实现了射流灭火剂的射流落点的精准定位和灭火作业的实施。
-
公开(公告)号:CN114307016B
公开(公告)日:2022-12-13
申请号:CN202111383176.6
申请日:2021-11-22
申请人: 中国矿业大学
摘要: 本发明公开了一种基于无人机视觉辅助消防炮灭火系统及控制方法,利用无人机携带视觉装置至火场上方采集高空俯视的火场分布图像,选取图像中的机器人坐标点、射流轨迹落点坐标点、火焰坐标点,将火点与射流落点的平面位置关转换为消防炮控制装置能够识别的角度、方向控制的信号指令;消防炮控制装置执行信号指令并驱动消防炮向火点喷射灭火剂;当选取的上一个火点处于压制或熄灭状态,选取下一个火点目标和当前射流落点坐标,再次执行动作,直到火场所有火源目标点得到压制或处于熄灭状态。本发明依托无人机有利视觉选取多火源目标点实现智能灭火,解决纯人工操作灭火方法和消防人员面对火场视野不足的弊端,提升整体的灭火效率和机器人智能化水平。
-
公开(公告)号:CN115337581B
公开(公告)日:2022-12-27
申请号:CN202211258327.X
申请日:2022-10-14
申请人: 中国矿业大学
摘要: 本发明涉及一种基于多目视觉消防系统的消防灭火方法,多目视觉消防系统包括消防炮、双目视觉系统、监测视觉系统,移动底盘和控制系统;双目视觉系统作为载体安装在移动底盘上,用于获取火场的双目图像、识别火场并获取火场的三维位置;监测视觉系统作为载体安装在移动底盘上,用于获取火场的图像和识别火场;消防炮作为载体安装在移动底盘上,用于向火场发射灭火射流,同时具有水平与俯仰角度反馈功能;控制系统,与移动底盘、消防炮、双目视觉系统以及监测视觉系统的控制信号连接。本申请通过监测相机可扩大双目相机的视野,并且提出了基于监测相机的双目视觉系统快速对准火场方法,提高了双目视觉系统的快速性和视野范围。
-
-
-
-
-
-
-
-
-