-
公开(公告)号:CN115578460A
公开(公告)日:2023-01-06
申请号:CN202211407718.3
申请日:2022-11-10
Applicant: 湖南大学
Abstract: 本发明公开了基于多模态特征提取与稠密预测的机器人抓取方法与系统,获取场景彩色图像和深度图像,从深度图像中计算出场景三维点云以及不同尺度的自适应卷积感受野,根据场景三维点云得到表面法向量图像;构建多模态特征提取与稠密预测网络,并对场景彩色图像和表面法向量图像进行处理,得到每类物体预测的稠密三维姿态信息和三维位置信息,通过计算得到对应物体的三维姿态和三维位置,两者共同组成三维位姿,将三维位姿发送至机器人抓取系统,完成场景下对应物体的抓取任务。本发明方法融合多模态彩色与深度数据,特征提取中保留二维平面特性以及深度信息,结构简单、预测精度高,适合复杂场景的机器人抓取任务。
-
公开(公告)号:CN115965628B
公开(公告)日:2023-06-02
申请号:CN202310255890.X
申请日:2023-03-16
Applicant: 湖南大学
Abstract: 本发明公开了一种工件涂装质量在线动态检测方法及检测系统,采集待检测工件的图像数据并预处理,筛选出待检测工件摆动幅度最大时的点云数据,通过点云配准方法得到第一目标位姿,控制机械臂带动末端执行机构前往第一目标位姿;采用位移传感器实时采集末端执行机构与待检测工件之间的距离信息,并构建实时检测平面坐标系作为第二目标位姿,控制机械臂带动末端执行机构实时到达第二目标位姿;采用光纤传感器检测末端执行机构与待检测工件的贴合状态,当末端执行机构与待检测工件贴合后,通过吸盘吸气,将末端执行机构吸附到待检测工件表面,末端执行机构上的涂装质量检测模块对待检测工件进行涂装质量检测。该方法可实现工件涂装质量在线动态检测。
-
公开(公告)号:CN115578460B
公开(公告)日:2023-04-18
申请号:CN202211407718.3
申请日:2022-11-10
Applicant: 湖南大学
IPC: G06T7/73 , G06N3/045 , G06N3/0464 , G06N3/084 , G06V10/44 , G06V10/766 , G06V10/80 , G06V10/82 , B25J9/16 , B25J19/02
Abstract: 本发明公开了基于多模态特征提取与稠密预测的机器人抓取方法与系统,获取场景彩色图像和深度图像,从深度图像中计算出场景三维点云以及不同尺度的自适应卷积感受野,根据场景三维点云得到表面法向量图像;构建多模态特征提取与稠密预测网络,并对场景彩色图像和表面法向量图像进行处理,得到每类物体预测的稠密三维姿态信息和三维位置信息,通过计算得到对应物体的三维姿态和三维位置,两者共同组成三维位姿,将三维位姿发送至机器人抓取系统,完成场景下对应物体的抓取任务。本发明方法融合多模态彩色与深度数据,特征提取中保留二维平面特性以及深度信息,结构简单、预测精度高,适合复杂场景的机器人抓取任务。
-
公开(公告)号:CN115965628A
公开(公告)日:2023-04-14
申请号:CN202310255890.X
申请日:2023-03-16
Applicant: 湖南大学
Abstract: 本发明公开了一种工件涂装质量在线动态检测方法及检测系统,采集待检测工件的图像数据并预处理,筛选出待检测工件摆动幅度最大时的点云数据,通过点云配准方法得到第一目标位姿,控制机械臂带动末端执行机构前往第一目标位姿;采用位移传感器实时采集末端执行机构与待检测工件之间的距离信息,并构建实时检测平面坐标系作为第二目标位姿,控制机械臂带动末端执行机构实时到达第二目标位姿;采用光纤传感器检测末端执行机构与待检测工件的贴合状态,当末端执行机构与待检测工件贴合后,通过吸盘吸气,将末端执行机构吸附到待检测工件表面,末端执行机构上的涂装质量检测模块对待检测工件进行涂装质量检测。该方法可实现工件涂装质量在线动态检测。
-
-
-