-
公开(公告)号:CN116423509B
公开(公告)日:2024-01-16
申请号:CN202310380499.2
申请日:2023-04-10
Applicant: 之江实验室
Abstract: 本申请提供一种基于深度神经网络的机械臂残余振动抑制方法及装置。其中,该机械臂振动抑制方法包括:获取机械臂在预设位姿和预设负载下的动力学特征,建立动力学特征与预设位姿、预设负载之间对应的数据集;基于数据集训练深度神经网络模型;根据机械臂的目标位姿和目标负载,利用深度神经网络模型预测目标动力学特征;根据目标动力学特征设计振动抑制器,配合运动控制器控制机械臂运动至目标位姿的同时抑制残余振动。可以实现,以低计算代价实现动力学特征在线实时预测,自适应设计振动抑制器,实现开放工作场景下的振动抑制。
-
公开(公告)号:CN115781733A
公开(公告)日:2023-03-14
申请号:CN202211543802.8
申请日:2022-12-01
Applicant: 之江实验室
Abstract: 本申请涉及一种机械手和机器人。机械手包括掌部、机械指以及驱动结构。掌部包括掌平面和与掌平面垂直的掌侧面。机械指设置于掌侧面。驱动结构设置于掌部和机械指之间,以在连接方向上连接机械指和掌部。其中,驱动结构用于驱动机械指围绕旋转轴线旋转,旋转轴线垂直于连接方向延伸,并与掌平面平行。驱动结构还用于驱动机械指围绕摆动轴线旋转,摆动轴线与掌平面相交。摆动轴线垂直于旋转轴线。本申请的机械指能够在两个不同的方向上进行旋转运动,从而具有类似人类手指的运动自由度,提高机械手的拟人程度。此外,本申请的机械手的设置方式能够满足简单动作的运动自由度需求,使得机械手能够拟合人手的姿态,并具有足够的能力简单的手部动作。
-
公开(公告)号:CN114359314B
公开(公告)日:2022-06-24
申请号:CN202210267015.9
申请日:2022-03-18
Applicant: 之江实验室
Abstract: 本发明公开了一种面向仿人钢琴演奏机器人的实时视觉琴键检测与定位方法。首先获得彩图和深度图并预处理;接着对彩图进行背景粗过滤,获得琴面候选区域;之后采用区域生长算法获取白键区域,再提取白键面上下轮廓边界线,获得琴键定位点集合;然后利用白键区域的深度图信息进行白键面拟合,获得定位点对应的点云信息;最后采用点云配准算法获得所有定位点在相机坐标系下的坐标。另外,通过定位检测得到的坐标,基于点云变换矩阵判断琴键位置是否存在异常。本发明方法在不同干扰环境下,仍然能快速检测定位钢琴琴键位置,并且通过定位结果判断琴键是否移动等异常状态,对仿人钢琴演奏机器人的臂爪定位有更好的鲁棒性和安全性。
-
公开(公告)号:CN114359314A
公开(公告)日:2022-04-15
申请号:CN202210267015.9
申请日:2022-03-18
Applicant: 之江实验室
Abstract: 本发明公开了一种面向仿人钢琴演奏机器人的实时视觉琴键检测与定位方法。首先获得彩图和深度图并预处理;接着对彩图进行背景粗过滤,获得琴面候选区域;之后采用区域生长算法获取白键区域,再提取白键面上下轮廓边界线,获得琴键定位点集合;然后利用白键区域的深度图信息进行白键面拟合,获得定位点对应的点云信息;最后采用点云配准算法获得所有定位点在相机坐标系下的坐标。另外,通过定位检测得到的坐标,基于点云变换矩阵判断琴键位置是否存在异常。本发明方法在不同干扰环境下,仍然能快速检测定位钢琴琴键位置,并且通过定位结果判断琴键是否移动等异常状态,对仿人钢琴演奏机器人的臂爪定位有更好的鲁棒性和安全性。
-
公开(公告)号:CN112233050A
公开(公告)日:2021-01-15
申请号:CN202011500706.6
申请日:2020-12-17
Applicant: 之江实验室
Abstract: 本发明公开了一种光线自适应的绿色场地提取方法。该方法首先利用完美反射白平衡和亮度均一化处理,得到亮度均一的灰度图和彩图,提高算法对光线的自适应程度;然后对彩图进行双边滤波、改进的漫水填充处理,并分离h通道进行高斯滤波,使得彩图颜色更加均匀,提高绿色场地提取的完整性;然后,通过设计公式对绿色通道进行分离,采用大津法二值化进行二值化处理,得到图片中绿色部分;最后,通过腐蚀膨胀、小区域删除、凸包络计算方法,最终得到完整的绿色场地轮廓。基于本发明所提供的方法,对亮度不同的照片、不同区域亮度不同的照片以及极端情况下绿色颜色发生偏差的照片都有很完整的绿色场地提取效果。
-
公开(公告)号:CN114347070A
公开(公告)日:2022-04-15
申请号:CN202210266969.8
申请日:2022-03-18
Applicant: 之江实验室
Abstract: 本发明公开了一种基于仿人臂爪机器人的弹琴动作控制方法、系统及装置。所述系统包括乐谱存储解析模块、弹琴动作序列生成模块、动作指令生成发送模块和动作指令接收执行模块。利用乐谱存储解析模块,完成对乐谱信息的读取。然后利用弹琴动作序列生成模块,得到仿人臂爪的弹琴动作序列。接着利用动作指令生成发送模块,将臂爪动作转换为对应的动作指令,并发送到臂爪执行端。最后利用动作指令接收执行模块,完成机械臂、爪对动作指令的接收和执行,最终实现仿人臂爪机器人对钢琴的演奏。基于本发明所提供的方法,仿人臂爪弹琴机器人能够充分发挥臂、爪的性能,高效稳定的实现较好的钢琴演奏效果。
-
公开(公告)号:CN112233050B
公开(公告)日:2021-03-09
申请号:CN202011500706.6
申请日:2020-12-17
Applicant: 之江实验室
Abstract: 本发明公开了一种光线自适应的绿色场地提取方法。该方法首先利用完美反射白平衡和亮度均一化处理,得到亮度均一的灰度图和彩图,提高算法对光线的自适应程度;然后对彩图进行双边滤波、改进的漫水填充处理,并分离h通道进行高斯滤波,使得彩图颜色更加均匀,提高绿色场地提取的完整性;然后,通过设计公式对绿色通道进行分离,采用大津法二值化进行二值化处理,得到图片中绿色部分;最后,通过腐蚀膨胀、小区域删除、凸包络计算方法,最终得到完整的绿色场地轮廓。基于本发明所提供的方法,对亮度不同的照片、不同区域亮度不同的照片以及极端情况下绿色颜色发生偏差的照片都有很完整的绿色场地提取效果。
-
公开(公告)号:CN117621075A
公开(公告)日:2024-03-01
申请号:CN202311736353.3
申请日:2023-12-15
Applicant: 之江实验室
IPC: B25J9/16
Abstract: 本说明书公开了一种机器人控制的方法、装置、存储介质、设备,获取运动目标点与期望运动状态,在预先训练的至少一个强化学习模型中选择与所述期望运动状态对应的强化学习模型,作为应用模型,将机器人的当前运动状态与所述运动目标点输入所述应用模型,使所述应用模型根据所述当前运动状态、所述运动目标点与各可选运动指令确定各可选运动指令的奖励评分,根据所述奖励评分在各可选运动指令中确定目标运动指令,根据所述目标运动指令控制机器人进行运动,本方法利用强化学习模型,控制机器人以不同的期望运动状态进行运动,不依赖于机器人的动力学建模或是参考轨迹设置,可控制机器人在未建模的空间以各种姿态进行运动。
-
公开(公告)号:CN116728419B
公开(公告)日:2023-12-22
申请号:CN202310996252.3
申请日:2023-08-09
Applicant: 之江实验室
Abstract: 本发明公开了一种弹琴机器人的连续弹琴动作规划方法、系统、设备及介质,包括:解析乐谱获取演奏信息;获取弹琴机器人的左/右机械臂末端在琴键上的覆盖范围;对琴键进行分区,基于分区分配每个音符对应的执行手臂;根据左/右机械臂分别对应的音符序列,以机械臂末端的移动距离总和最小为优化目标,规划每个音符对应的执行手指,得到左/右机械臂上每个手指对应的手指动作序列;根据手指的动作序列和手指的活动范围,得到每个音符起止时刻的左/右机械臂末端演奏序列;将每个音符起止时刻的左/右机械臂末端演奏序列在时间上进行连续插值,获得整个演奏序列的左/右机机械臂末端的移动轨迹和手指动作轨迹序列。
-
公开(公告)号:CN116728419A
公开(公告)日:2023-09-12
申请号:CN202310996252.3
申请日:2023-08-09
Applicant: 之江实验室
Abstract: 本发明公开了一种弹琴机器人的连续弹琴动作规划方法、系统、设备及介质,包括:解析乐谱获取演奏信息;获取弹琴机器人的左/右机械臂末端在琴键上的覆盖范围;对琴键进行分区,基于分区分配每个音符对应的执行手臂;根据左/右机械臂分别对应的音符序列,以机械臂末端的移动距离总和最小为优化目标,规划每个音符对应的执行手指,得到左/右机械臂上每个手指对应的手指动作序列;根据手指的动作序列和手指的活动范围,得到每个音符起止时刻的左/右机械臂末端演奏序列;将每个音符起止时刻的左/右机械臂末端演奏序列在时间上进行连续插值,获得整个演奏序列的左/右机机械臂末端的移动轨迹和手指动作轨迹序列。
-
-
-
-
-
-
-
-
-