-
公开(公告)号:CN111862234A
公开(公告)日:2020-10-30
申请号:CN202010711704.5
申请日:2020-07-22
Applicant: 中国科学院上海微系统与信息技术研究所
Abstract: 本发明提供一种双目相机自标定方法及系统,包括:1)获取左右原始图像;2)校正左右原始图像;3)从左右校正图像中提取特征点并匹配;4)统计左右图像纵坐标偏差的平均值,若大于对应阈值则修正估计第一参数组,反复迭代修正,直至小于对应阈值;5)找到静态物体;6)处于移动状态时,追踪静态物体的视差及车轮运动信息;7)得到车轮运动距离与静态物体的三维距离变化值的距离偏差,若大于对应阈值则修正估计第二参数组,反复迭代校正,直至小于对应阈值,完成自标定。本发明利用实时图像追踪和车体运动信息,对内外参进行优化标定,完成图像校正工作,为车体提供准确的三维识别数据。
-
公开(公告)号:CN111612731A
公开(公告)日:2020-09-01
申请号:CN202010249788.5
申请日:2020-04-01
Applicant: 中国科学院上海微系统与信息技术研究所
Abstract: 本申请公开了一种基于双目显微视觉的测量方法、装置、系统及介质,该方法包括获取双目显微视觉系统中经相机标定后的左右相机对应的初始左右图像;基于对极几何约束关系,进行图像校正得到左右图像;对左右图像进行下采样,对所得的左采样图像集中最小分辨率对应层的采样图像中的像素点进行立体匹配以及匹配点传播,并进行逐层采样和立体匹配更新以及插值处理,得到稠密视差结果;之后根据相机参数和稠密视差结果对待测对象进行测量。本申请实施例解决现有技术中宏观尺度下的测量方法等对微观尺度的不适用性和准确性低的问题,所提供的测量方法非常适用于显微场景下的双目测量,能够获得良好的准确性和显微测量精度。
-
公开(公告)号:CN111402309A
公开(公告)日:2020-07-10
申请号:CN202010149137.9
申请日:2020-03-05
Applicant: 中国科学院上海微系统与信息技术研究所
Abstract: 本发明提供一种多目立体相机的校准及深度图像处理方法,包括:在多目相机设备中选取基准相机和待修正相机,并获取相应的基准相机图像和对待修正相机图像;根据所述基准相机图像和对待修正相机图像对所述待修正相机的内参量和外参量进行优化;得到最终的深度图像。本发明的方法利用匹配特征的深度计算结果实现对相机参量的优化,使多个深度图像的交界部分过渡平滑,可以根据优化的参量对未重合部分的深度图像进行进一步的精化调整,并且通过不同双目间的相互约束,保证最终深度结果一致性与稳定性。
-
公开(公告)号:CN109579840A
公开(公告)日:2019-04-05
申请号:CN201811250049.7
申请日:2018-10-25
Applicant: 中国科学院上海微系统与信息技术研究所
Abstract: 本发明涉及一种点线特征融合的紧耦合双目视觉惯性SLAM方法,包括以下步骤:确定相机坐标系与惯性传感器坐标系的变换关系;建立点线特征加IMU跟踪线程,求解初始的立体点线三维坐标,在IMU初始化后,使用IMU预测特征点线的位置,建立正确特征数据关联,结合IMU和点线特征重投影误差项,求解连续帧的位姿变换;建立点线特征加IMU局部光束法平差线程,在局部关键帧窗口中优化点线三维坐标,关键帧位姿以及IMU的状态量;建立点线特征回环检测线程,使用点线特征加权计算词袋模型的得分来检测回环,并进行全局状态量的优化。本发明能够在特征点数目较少以及相机快速运动情况下保证稳定和高精度。
-
公开(公告)号:CN120044677A
公开(公告)日:2025-05-27
申请号:CN202510180873.3
申请日:2025-02-19
Applicant: 中国科学院上海微系统与信息技术研究所 , 北京师范大学珠海校区
Abstract: 本发明涉及一种基于中继转像的曲面复眼成像系统,包括:曲面复眼结构,为由多个微透镜组成的曲面微透镜阵列;中继转像系统,用于将所述曲面微透镜阵列在其焦曲面形成的曲面像转化为平面像;平面接收器,用于接收所述平面像。本发明可以解决曲面光学阵列采集的曲面像与平面光学接收器之间的冲突问题。
-
公开(公告)号:CN120012916A
公开(公告)日:2025-05-16
申请号:CN202411944935.5
申请日:2024-12-27
Applicant: 中国科学院上海微系统与信息技术研究所
IPC: G06N5/04
Abstract: 本发明涉及一种面向具身交互的情境化场景问答数据生成方法,包括以下步骤:获取目标场景数据;基于所述目标场景数据,利用描述模型生成对应的场景上下文描述;基于智能体在场景中的位置和朝向设定多个不同情景,并根据设定情景将所述场景上下文描述映射到智能体的第一视角,得到对应的情景上下文描述;基于所述目标场景数据,构建交互式问答采集系统来采集真实用户的问答数据;对所述情景上下文描述进行关键词拆分,并将拆分后的关键词作为真实用户参与交互问答过程中的先验提示。本发明能够生成更加符合人类的情境化场景以及具身智能的应用需求的问答数据,为增强智能体的推理能力和泛化能力提供更好的基础。
-
公开(公告)号:CN114973388B
公开(公告)日:2025-04-11
申请号:CN202210484547.8
申请日:2022-05-06
Applicant: 中国科学院上海微系统与信息技术研究所
Abstract: 本发明涉及一种同时估计眼部视线和面部视线的视线估计方法,包括以下步骤:获取左眼图像、右眼图像和面部图像;分别对所述左眼图像、右眼图像和面部图像进行标准化坐标系处理;将标准化处理后的所述左眼图像、右眼图像和面部图像输入至视线评估模型,输出预测的眼部视线和面部视线;所述视线评估模型包括:特征提取层、特征信息转换层、第一特征交流层、第二特征交流层、第一全连接层和第二全连接层。本发明可以同时预测眼部视线和面部视线。
-
公开(公告)号:CN114648737B
公开(公告)日:2024-12-03
申请号:CN202011505571.2
申请日:2020-12-18
Applicant: 安徽爱观视觉科技有限公司 , 中国科学院上海微系统与信息技术研究所
IPC: G06V20/54
Abstract: 本发明公开一种地平面识别方法及装置,包括:对当前周期的左右目原始图像预处理得到第一稠密视差图;获取当前周期位姿参数;根据所述当前位姿参数对待旋转图像和所述第一稠密视差图仿射变换得到已旋转图像和第二稠密视差图,所述待旋转图像为预先设定的左目原始图像或右目原始图像;对所述已旋转图像和所述第二稠密视差图图像识别,得到地平面区域。本方法适用性强,可在车体震动的情况下,能够准确地对地平面识别,且在此基础上简化了基于视差图的检测算法,进一步提高了检测速度,可广泛应用于地面无人平台或自动驾驶辅助系统等。
-
公开(公告)号:CN118351252A
公开(公告)日:2024-07-16
申请号:CN202410417649.7
申请日:2024-04-09
Applicant: 中国科学院上海微系统与信息技术研究所
Abstract: 本发明涉及一种基于先验深度与高斯溅射模型融合的场景三维重建方法,包括:获取多视角下的场景图像;将多视角下的场景图像输入至场景三维重建模型中,完成场景的三维重建;其中,场景三维重建模型包括:单目深度估计网络与视觉里程计,用于基于多视角下的场景图像得到多视角下场景图像的稠密先验深度与相机位姿;点云生成模块,用于使用稠密先验深度与相机位姿生成世界坐标系下的空间点云,并将空间点云初始化为一组具有不透明度和球面谐波的三维高斯体;三维高斯优化模块,用于使用先验深度引导的自适应密度控制策略对三维高斯体的空间分布进行优化调整,完成场景的三维重建。本发明缓解观测数据不足导致的重建模糊问题。
-
公开(公告)号:CN118092383A
公开(公告)日:2024-05-28
申请号:CN202410132143.1
申请日:2024-01-31
Applicant: 中国科学院上海微系统与信息技术研究所
IPC: G05B23/02
Abstract: 本发明涉及一种车载监测系统实时故障定位方法及系统。其中,故障定位方法包括以下步骤:采集监测数据;获取TCMS报文,提取所述TCMS报文的编码时间和TCMS数据;根据所述编码时间计算监测系统与TCMS系统的时间差;判断所述时间差是否小于设定值,如果小于所述设定值则将所述TCMS数据同步到所述监测系统的配准时刻,否则根据所述监测数据对所述TCMS数据进行补偿;将所述监测数据和所述TCMS数据进行融合,并根据融合后的数据进行故障定位。本发明能够提高轨道交通车载监测系统实时故障定位的精度。
-
-
-
-
-
-
-
-
-