一种基于视觉定位的煤矿井下机械臂抓取控制方法

    公开(公告)号:CN115674192A

    公开(公告)日:2023-02-03

    申请号:CN202211225768.X

    申请日:2022-10-09

    Abstract: 本发明公开了一种基于视觉定位的煤矿井下机械臂抓取控制方法,包括钻杆装卸机械臂、加速度传感器、钻杆库、RGBD双目相机和数据处理中心;本发明将采集到的视觉图像导入基于MAE神经网络中,通过MAE自动掩码机制使得整个神经网络更加注重整体信息,从而实现图像增强的效果来在包含浮沉雾气等复杂背景中实现对钻杆的精准识别定位;通过将机械臂上的加速度传感器输出的机械臂抓取信息和基于MAE神经网络输出的位置信息输入基于GRU的神经网络,根据每次机械臂抓取的情况对位移与姿态进行自适应调整,使得机械臂在长期工作中能够始终保持良好的精度,提高工作效率。

Patent Agency Ranking