-
公开(公告)号:CN112258591B
公开(公告)日:2021-03-30
申请号:CN202011422529.4
申请日:2020-12-08
Applicant: 之江实验室
IPC: G06T7/80
Abstract: 本发明公开了一种多深度相机联合获取高精度深度图的方法,该方法通过使用高精度深度相机对若干低精度深度相机进行同时采集,利用两种相机重合部分对使用双边滤波器及高斯滤波器对低精度深度相机进行在线补偿,同时实时标定双边滤波器和高斯滤波器的参数,从而能够获取更高精度的深度图像。本发明的方法能够获得多幅高质量深度图像,降低了获取高精度深度图像的整体成本,其实现方法简便,手段灵活,深度图像质量显著提升,且与硬件具体型号及应用场景无关。
-
公开(公告)号:CN112257817B
公开(公告)日:2021-03-30
申请号:CN202011509843.6
申请日:2020-12-18
Applicant: 之江实验室
Abstract: 本申请公开了一种地形地质在线语义识别方法、装置及电子设备,包括:利用IMU传感器和相机分别获取振动信息和图像信息;利用宽度学习模型对所述振动信息进行地形地质预测,获得地形地质语义分类结果;利用振动信息和图像信息计算探测器在空间中的行驶轨迹,并生成图像和振动信息的匹配关系;根据所述匹配关系和所述地形地质语义分类结果,生成图像信息与地形地质语义分类的映射,将其作为图像与地形地质语义信息映射的真值;基于神经网络搭建地形地质在线学习与语义分类模型,并训练所述地形地质在线学习与语义分类模型;输入待识别的图像信息至所述地形地质在线学习与语义分类模型中,获取语义分类结果,实现地形地质在线语义识别预测。
-
公开(公告)号:CN112562081A
公开(公告)日:2021-03-26
申请号:CN202110175262.1
申请日:2021-02-07
Applicant: 之江实验室
Abstract: 本发明公开了一种用于视觉分层定位的视觉地图构建方法,包括以下步骤:1)按顺序获取双目摄像头采集的双目图像帧数据并确定运动轨迹;2)对图像帧分别提取NetVLAD全局描述子、SuperPoint特征点和局部描述子;3)找出每一帧图像特征点的匹配关键点并增量式恢复出每个特征点的3D位置;4)根据每一帧的3D特征点的2D观测确定该帧的最佳共视关键帧;5)生成最终用于视觉分层定位的视觉地图信息。本发明的视觉地图构建方法结合深度学习特征,增强了视觉地图的描述性,并且生成的用于视觉定位的地图包含多层次描述信息,可用于坐标系一致的视觉全局鲁棒定位。
-
公开(公告)号:CN112102347B
公开(公告)日:2021-02-12
申请号:CN202011301586.7
申请日:2020-11-19
Applicant: 之江实验室
Abstract: 本发明公开了一种基于双目视觉的台阶检测和单级台阶高度估计方法,该方法利用动态白平衡和灰度化将图片转为灰度图,在灰度图的基础上提取边缘信息;使用霍夫变换从边缘信息中进行线检测,获取图像中的直线集,并根据斜率筛选出近似水平的直线集;利用线段中点的距离信息对水平线段集进行聚类,并从不同的类中提取台阶相关的潜在类;使用最小二乘法对筛选的台阶直线集进行细分聚类和台阶直线的回归;根据双目视差计算台阶区域的深度信息和利用深度信息,相机的内外参数逆向还原像素点的世界坐标系中的位置,进而计算单级台阶的高度。基于本发明所提供的方法,仅利用双目视觉信息便可实现台阶位置的检测,台阶水平距离以及单级台阶高度的估计。
-
公开(公告)号:CN112288863A
公开(公告)日:2021-01-29
申请号:CN202011547972.4
申请日:2020-12-24
Applicant: 之江实验室
Abstract: 本发明公开了一种机器人同步定位与构图导航中的地图构建方法,该方法在基于粒子滤波SLAM的地图构建和重采样过程中,针对大量地图数据流动和占用内存问题,采用分布式粒子映射方法,将宗代树和分布式栅格地图这两种数据结构紧密联系;基于宗代树构建粒子代际间演进关系,为不同时刻粒子代际间地图资源继承关系的创建提供数据结构支撑;数据结构分布式栅格地图通过宗代树利用粒子间的关系,用一个栅格地图将所有粒子联系起来;通过高效的地图管理方式,把粒子与栅格地图的映射关系从一对一变为多对一,既维护了多地图假设,又充分利用了内存资源,减少地图维护对内存的需求,提高计算资源的使用效率和地图维护的效率。
-
公开(公告)号:CN112287609A
公开(公告)日:2021-01-29
申请号:CN202011576823.0
申请日:2020-12-28
Applicant: 之江实验室
IPC: G06F30/27 , G06N5/04 , G06F111/02
Abstract: 本发明公开了一种面向机器人任务划分的端、边、云协同计算装置,属于机器人技术领域。该装置包括任务建模计算层、任务离线切分层和任务在线执行层;任务建模计算层对不同的机器人任务在不同的设备下分层执行的计算时延以及传输时延进行计算;任务离线切分层根据计算时延和传输时延对目标网络模型进行水平和垂直切分,生成最佳的任务执行策略;任务在线执行层则根据任务离线切分层输出的任务执行策略进行任务的分配、下发和调度,完成任务的在线运行。本发明的协同计算装置可以保护机器人终端的数据隐私,有效地提升了机器人给定任务的执行效率,同时显著地提高了任务划分的性能,具有较好的实用性。
-
公开(公告)号:CN112272081A
公开(公告)日:2021-01-26
申请号:CN202011424321.6
申请日:2020-12-08
Applicant: 之江实验室
Abstract: 本发明公开了一种机器人与服务端之间通信的全双工有状态通讯协议方法,该方法包括:(1)服务端通过TCP/IP协议与机器人建立连接;(2)机器人发起请求,将发送请求的控制报文给服务端;(3)服务端解析请求的控制报文;(4)服务端收到并解析完请求的控制报文后,将结果以返回报文的方式返回给机器人。同时,根据请求的控制报文,服务端选择继续保持连接或者直接断开;(5)机器人解析返回报文,并根据请求的控制报文,机器人选择继续请求或者直接断开。该方法基于人工智能场景,根据请求资源的多少,请求频率的高低,灵活地选择不同的协议配置,实现高并发的通信,降低了通信的成本,使用也非常简便。
-
公开(公告)号:CN112257684A
公开(公告)日:2021-01-22
申请号:CN202011417661.6
申请日:2020-12-07
Applicant: 之江实验室
Abstract: 本发明公开了一种基于实时视频流的跨摄像头全局行人跟踪方法。该方法主要包括以下五个步骤:多摄像头监控系统的建立,单摄像头下行人特征提取与跟踪,摄像头间行人特征信息传递,跨摄像头行人特征对比匹配以及跨摄像头行人持续稳定跟踪。本发明的方法可以实现室内场景下较密集人流的行人全局实时跟踪,对于行人轨迹监控及机器视觉有着较大的现实意义。
-
公开(公告)号:CN112233050A
公开(公告)日:2021-01-15
申请号:CN202011500706.6
申请日:2020-12-17
Applicant: 之江实验室
Abstract: 本发明公开了一种光线自适应的绿色场地提取方法。该方法首先利用完美反射白平衡和亮度均一化处理,得到亮度均一的灰度图和彩图,提高算法对光线的自适应程度;然后对彩图进行双边滤波、改进的漫水填充处理,并分离h通道进行高斯滤波,使得彩图颜色更加均匀,提高绿色场地提取的完整性;然后,通过设计公式对绿色通道进行分离,采用大津法二值化进行二值化处理,得到图片中绿色部分;最后,通过腐蚀膨胀、小区域删除、凸包络计算方法,最终得到完整的绿色场地轮廓。基于本发明所提供的方法,对亮度不同的照片、不同区域亮度不同的照片以及极端情况下绿色颜色发生偏差的照片都有很完整的绿色场地提取效果。
-
公开(公告)号:CN111914416A
公开(公告)日:2020-11-10
申请号:CN202010722914.4
申请日:2020-07-24
Applicant: 之江实验室
IPC: G06F30/20 , G06F111/10
Abstract: 本发明公开了一种高能效轻量化结构双足机器人的逆运动学求解方法,该方法采用旋量法建立机器人坐标系,并通过构造可表征姿态信息的矢量,构建出了可用于逆运动学求解的表达式方程,进而采用牛顿拉夫逊算法对机器人的逆运动学进行数值求解;该方法还进一步考虑了驱动连杆的存在,并采用解析方法计算出驱动电机实际需要转动的角度。本发明可用于机器人髋关节电机轴不相交的情形下进行逆运动学求解。
-
-
-
-
-
-
-
-
-