-
公开(公告)号:CN111882613A
公开(公告)日:2020-11-03
申请号:CN202010723128.6
申请日:2020-07-24
Applicant: 中国科学院上海微系统与信息技术研究所
Abstract: 本发明基于边缘语义的视觉里程计方法、装置、存储介质及设备。所述基于边缘语义的视觉里程计方法包括:提取图像序列的边缘特征和语义信息,并分别对这二者进行距离变换,以得到边缘距离残差和语义距离残差;利用所述语义距离残差对所述边缘距离残差进行约束,并联合非线性优化的边缘距离误差和语义距离误差估计相机的相对运动。本发明联合优化边缘和语义距离误差的边缘语义视觉里程计,能够充分利用语义信息来提升运动估计的鲁棒性和精确性。
-
公开(公告)号:CN111811517A
公开(公告)日:2020-10-23
申请号:CN202010681054.4
申请日:2020-07-15
Applicant: 中国科学院上海微系统与信息技术研究所
Abstract: 本发明涉及一种动态局部路径规划方法,包括以下步骤:获取运动体的起始位姿和终止位姿,并实时更新代价地图,判断规划路径为几阶路线,并通过数学表达式表示所述规划路径;离散化所述数学表达式表示的规划路径得到离散的路径点,将离散的路径点转化为栅格坐标,根据栅格坐标判断所述规划路径是否为不可行区域,若是不可行区域则舍弃所述规划路径,否则将所述规划路径作为可能的路径;通过评价函数评价所有可能的路径,并选出得分最高的一条路径进行平滑处理。本发明还涉及一种动态局部路径规划系统。本发明使得规划路径曲率连续,曲线光滑且符合机器人或AGV等可移动设备的运动特性。
-
公开(公告)号:CN111724439A
公开(公告)日:2020-09-29
申请号:CN201911200881.0
申请日:2019-11-29
Applicant: 中国科学院上海微系统与信息技术研究所
Abstract: 本发明涉及机器人导航定位技术领域,具体是一种动态场景下的视觉定位方法及装置,所述方法包括:获取当前帧图像,提取所述当前帧图像的特征点;将所述当前帧图像输入预设深度学习网络进行语义分割,得到目标语义图像;根据所述目标语义图像确定所述当前帧图像的运动掩模区域;获取所述当前帧图像的深度信息;基于所述目标语义图像和所述深度信息进行运动一致性检测,确定所述当前帧图像的静态特征点集合;根据所述静态特征点集合确定当前状态位姿信息。本发明通过语义分割结果和深度信息进行运动一致性检测,确定图像的静态特征点集合,能够有效提高在动态环境中对位姿估计的精确性和鲁棒性。
-
公开(公告)号:CN110929637A
公开(公告)日:2020-03-27
申请号:CN201911139594.3
申请日:2019-11-20
Applicant: 中国科学院上海微系统与信息技术研究所
IPC: G06K9/00
Abstract: 本申请涉及一种图像识别方法、装置、电子设备及存储介质,通过获取人体骨架图像序列;确定每帧人体骨架图像的骨架关节点集合中对应的相对坐标集合;基于相对坐标集合、骨架关节点的数量和人体骨架图像序列中图像的帧数确定相对坐标张量;确定多个帧间差分值集合;基于多个帧间差分值集合、骨架关节点的数量和人体骨架图像序列中图像的帧数确定时间差分张量;基于相对坐标张量和时间差分张量确定输入张量;基于已训练的动作识别模型对输入张量进行动作识别,得到人体骨架图像序列对应的动作类别。本申请利用人体骨架关节点信息来构建基于图卷积网络的动作识别模型的输入张量,进行动作识别,可以提升对人类动作识别的准确度。
-
公开(公告)号:CN110865330A
公开(公告)日:2020-03-06
申请号:CN201911214259.5
申请日:2019-12-02
Applicant: 中国科学院上海微系统与信息技术研究所
IPC: G01S3/14
Abstract: 本发明提供一种无线虚拟现实系统中波束方位角的快速跟踪方法,包括:选取当前工作射频拉远单元,其余射频拉远单元轮流作为搜索射频拉远单元;当前工作射频拉远单元进行音视频信息传输,搜索射频拉远单元向头盔发射多个波束方向的信道探测信号;头盔获取搜索射频拉远单元的方位角;更新头盔位置的最优估计;根据最优估计调整当前工作射频拉远单元的波束方位角;当前时刻递增,更新搜索射频拉远单元并再次进行波束搜索,重复上述步骤。本发明的方法采用的搜索射频拉远单元不负责音视频信息传输,所以波束扫描可以不间断地进行,从而达到最高波束扫描频率,使当前工作射频拉远单元在用户移动时也能高速传输数据。
-
公开(公告)号:CN109922260A
公开(公告)日:2019-06-21
申请号:CN201910161618.9
申请日:2019-03-04
Applicant: 中国科学院上海微系统与信息技术研究所
Abstract: 本发明涉及数据处理技术领域,特别涉及一种图像传感器与惯性传感器的数据同步方法和同步装置。所述同步方法包括以下步骤:将所述图像传感器与所述惯性传感器置于同一时间基准下计时;获取图像传感器的曝光时间的中间时刻,作为图像数据采集时刻;获取惯性传感器中用于形成输出数据的每组采样数据的中间时刻,作为惯性数据采集时刻,其中,所述每组采样数据包括依据惯性传感器内部时钟采样周期依次采集的多个数据。在本发明提供的图像传感器与惯性传感器的数据同步方法中,不仅可以精确同步多个图像传感器之间的图像数据,更加能够将图像传感器与惯性传感器进行数据同步。
-
公开(公告)号:CN107479180A
公开(公告)日:2017-12-15
申请号:CN201710750847.5
申请日:2017-08-28
Applicant: 中国科学院上海微系统与信息技术研究所
CPC classification number: G02B21/365 , H04N13/204 , H04N13/296 , H04N13/344
Abstract: 本发明提供了一种显微立体图像采集装置,包括采集单元和标准双视图处理单元,所述采集单元用于在两个以上的不同位置同时采集待测物体的两幅以上的原始图像或视频,所述标准双视图处理单元用于对所述原始图像或视频进行处理并生成标准双视图。本发明提供了一种显微立体图像采集装置,较一般的显微镜而言,可提供真实的深度临场感,方便用户三个维度上的精细操作。而且装置具有较高的装配灵活性与应用灵活性,可根据不同应用场景选择不同体积大小与不同分辨能力的相机进行装配,在固定观察与移动观察工作中都可得到应用。
-
公开(公告)号:CN106651836A
公开(公告)日:2017-05-10
申请号:CN201610964432.3
申请日:2016-11-04
Applicant: 中国科学院上海微系统与信息技术研究所
IPC: G06T7/00
Abstract: 本发明涉及一种基于双目视觉的地平面检测方法,包括以下步骤:获取双目图像采集设备采集的左右目原始图像;对左右目原始图像进行预处理,利用立体匹配技术获得稠密视差图;利用特征算子在稠密视差图上进行运算,得到特征图;对特征图进行分割,将其分割成多个区域块;对每个区域块进行二类分类,判断此区域是否属于地平面区域;对地平面区域进行后处理,剔除不符合条件的连通域,确定最终地平面区域。本发明适用于不同地平面环境下的地平面检测,能有效应对不平坦路面的检测问题,且可以精准处理地平面与障碍物边界。
-
公开(公告)号:CN112270688B
公开(公告)日:2024-05-28
申请号:CN202011216784.3
申请日:2020-11-04
Applicant: 中国科学院上海微系统与信息技术研究所
Abstract: 本申请涉及一种前景提取方法、装置、设备或存储介质,该方法包括:获取红外图像序列和可见光图像序列;红外图像序列和可见光图像序列一一对应;对红外图像序列中每帧红外图像进行对比度处理,得到初始掩膜图像序列;将初始掩膜图像序列和可见光图像序列进行串联,得到输入图像序列;根据已训练的特征提取模型对输入图像序列进行特征提取,得到特征张量;根据已训练的长短时记忆网络模型,确定特征张量对应的预测掩膜图像;根据预测掩膜图像和可见光图像,确定前景图像。本申请实施例提供的一种前景提取方法适用于静止或运动的前景物体,包括半透明物体、运动模糊物体和虚焦物体的提取,可以提高前景物体的边缘的提取精度。
-
公开(公告)号:CN111724439B
公开(公告)日:2024-05-17
申请号:CN201911200881.0
申请日:2019-11-29
Applicant: 中国科学院上海微系统与信息技术研究所
Abstract: 本发明涉及机器人导航定位技术领域,具体是一种动态场景下的视觉定位方法及装置,所述方法包括:获取当前帧图像,提取所述当前帧图像的特征点;将所述当前帧图像输入预设深度学习网络进行语义分割,得到目标语义图像;根据所述目标语义图像确定所述当前帧图像的运动掩模区域;获取所述当前帧图像的深度信息;基于所述目标语义图像和所述深度信息进行运动一致性检测,确定所述当前帧图像的静态特征点集合;根据所述静态特征点集合确定当前状态位姿信息。本发明通过语义分割结果和深度信息进行运动一致性检测,确定图像的静态特征点集合,能够有效提高在动态环境中对位姿估计的精确性和鲁棒性。
-
-
-
-
-
-
-
-
-