基于深度学习的混合跟踪方法及装置

    公开(公告)号:CN108805987A

    公开(公告)日:2018-11-13

    申请号:CN201810491310.6

    申请日:2018-05-21

    Abstract: 本发明涉及增强现实技术领域,具体涉及一种基于深度学习的混合跟踪方法及装置。旨在解决在快速运动或在纹理较弱的环境下相机跟踪定位精度低、鲁棒性差的问题,本方法应用于增强现实系统,包括:采用视觉‑惯性对齐方法对惯性传感器进行在线初始标定,确定系统的初始状态;初始化完成后,获取输入图像,使用深度学习网络获取输入特征图;基于模板特征图和输入特征图,使用Lucas‑Kanade光流法计算输入图像的单应性矩阵,并使用SVD方法计算相机位姿;根据相机位姿以及实时的惯性测量数据,使用视觉‑惯性自适应融合的方法确定相机最终位姿。本发明提高了在快速运动或在纹理较弱的环境下相机跟踪定位的精度、鲁棒性以及实时性。

    基于语义SLAM的动态环境相机位姿估计及语义地图构建方法

    公开(公告)号:CN111402336B

    公开(公告)日:2024-03-12

    申请号:CN202010209728.0

    申请日:2020-03-23

    Abstract: 本发明属于计算机视觉技术领域,具体涉及了一种基于语义SLAM的动态环境相机位姿估计及物体级语义地图构建方法,旨在解决现有技术在动态环境下相机位姿估计精度低以及所建地图对环境表达不充分的问题。本发明包括:采集RGB‑D图像序列,使用神经网络模型进行实例分割,自适应生成运动判定阈值,结合语义类别和极线约束关系检测处于运动状态的目标物体,滤除当前帧各运动目标的特征点,估计相机位姿。对目标前景和非目标背景分别建模,跟踪动态目标前景,并进行2D‑3D语义关联,建立前景‑背景独立的物体级语义地图。本发明动态场景下相机位姿估计精度高,所建地图能够对环境进行物体级的语义表达,有较高的鲁棒性和稳定性。

    基于深度学习的混合跟踪方法及装置

    公开(公告)号:CN108805987B

    公开(公告)日:2021-03-12

    申请号:CN201810491310.6

    申请日:2018-05-21

    Abstract: 本发明涉及增强现实技术领域,具体涉及一种基于深度学习的混合跟踪方法及装置。旨在解决在快速运动或在纹理较弱的环境下相机跟踪定位精度低、鲁棒性差的问题,本方法应用于增强现实系统,包括:采用视觉‑惯性对齐方法对惯性传感器进行在线初始标定,确定系统的初始状态;初始化完成后,获取输入图像,使用深度学习网络获取输入特征图;基于模板特征图和输入特征图,使用Lucas‑Kanade光流法计算输入图像的单应性矩阵,并使用SVD方法计算相机位姿;根据相机位姿以及实时的惯性测量数据,使用视觉‑惯性自适应融合的方法确定相机最终位姿。本发明提高了在快速运动或在纹理较弱的环境下相机跟踪定位的精度、鲁棒性以及实时性。

    基于Unity拼接融合系统的多投影仪无缝拼接融合方法

    公开(公告)号:CN108495102A

    公开(公告)日:2018-09-04

    申请号:CN201810151664.6

    申请日:2018-02-14

    Abstract: 本发明属于多投影仪拼接领域,具体涉及基于Unity拼接融合系统的多投影仪无缝拼接融合方法,旨在解决多投影仪的拼接融合调试的时效性较差、重叠区域融合效果不佳的问题。主要包括:设置投影仪个数、贴图网格、融合网格、投影平面分辨率等参数;在对应投影机界面上选择确定投影区域的坐标点、生成贴图网格并对测试贴图进行融合投影显示测试效果;在投影平面上调整网格以及融合区域中融合系数,保存生成的网格数据和融合系数;加载初次运行系统时保存的网格数据和融合系数;根据读取的网格数据和融合系数,进行贴图融合投影。本系统直接基于Unity平台进行拼接融合,具有投影精准、实时性强、融合无缝隙等优点。

    互动式生成液滴效果的方法

    公开(公告)号:CN102930583B

    公开(公告)日:2015-02-11

    申请号:CN201210394304.1

    申请日:2012-10-17

    Abstract: 本发明公开了一种液滴效果的互动式模拟方法主要步骤为:S1、根据给定的液滴的初始状态参数求解该液滴的运动方程;S2、计算所述液滴表面的表面张力;S3、根据计算所述液滴的运动方程和表面张力得到的液滴位置信息构建液滴的表面;S4、保存液滴表面的信息,并对液滴表面信息进行插值;S5、渲染所述液滴表面。本发明利用图形处理器精确求解液滴控制方程,从而达到实时模拟的效果,将方程的求解与绘制结合在一起,提高了液滴模拟的效率,此外,本发明能够同时适用于大比例液体现象及小比例液滴现象的模拟,其中液滴现象包括水滴、油滴及水彩等。

    基于形态学的场景稠密深度图获取方法、系统及装置

    公开(公告)号:CN112927251A

    公开(公告)日:2021-06-08

    申请号:CN202110327446.5

    申请日:2021-03-26

    Abstract: 本发明属于增强现实和计算机视觉领域,具体涉及了一种基于形态学的场景稠密深度图获取方法、系统及设备,旨在解决单目相机位姿估计精度低、动态场景跟踪丢失、鲁棒性弱、很难以较低的计算量获取场景稠密深度图的问题。本发明包括:初始化IMU参数;采用视觉‑惯性联合非线性优化获取图像位姿估计和场景稀疏点图;利用形态学的膨胀和腐蚀操作提取粗形态学边缘;修改边缘判定标准,利用Canny边缘检测器优化形态学边缘,获取最终的深度边缘;建立约束条件,构建最优化问题进行稀疏深度传播,加速求解获得场景最终的稠密深度图。本发明在复杂动态场景下位姿估计精度高、鲁棒性强。所获取的稠密深度图边缘尖锐,区域平滑,具备较高的精准性和实时性。

    智能异形投影非接触式交互系统和方法

    公开(公告)号:CN108269288B

    公开(公告)日:2020-07-24

    申请号:CN201711460835.5

    申请日:2017-12-28

    Abstract: 本发明属于异形投影领域,具体涉及一种智能异形投影非接触式交互系统和方法,旨在解决异形面投影的非接触式交互问题,本系统包括投影模块,用于进行视频投影,并在交互投影初始化时生成交互区域索引图;图像采集模块,用于实时采集交互区域的图像;异形投影标定模块包括摄像机标定、投影仪标定、摄像机和投影仪同时标定;影像制作模块,用于制作对应投影仪需要投影的视频和异形面上对应的交互区域图;交互模块,用于检测所采集的交互区域的图像中是否具有触控斑点,并以此为依据选择对应的投影影像发送投影仪进行投影播放。本发明采用机器视觉的原理实现非接触式交互功能,能够实现对大型异形投影长距离交互投影播放。

Patent Agency Ranking