一种三维语义地图的构建方法、装置、电子设备及存储介质

    公开(公告)号:CN111190981B

    公开(公告)日:2020-11-06

    申请号:CN201911354167.7

    申请日:2019-12-25

    Abstract: 本申请涉及一种三维语义地图的构建方法、装置、电子设备及存储介质,该方法通过获取环境图像集合,并根据已训练的语义分割模型对环境图像集合进行语义分割,得到语义图像序列。将语义图像序列的每帧语义图像投射到预先建立的三维坐标系上,得到第一点云集合,第一点云集合中的第一点云对应每帧语义图像。对第一点云集合进行滤波,得到滤波后的第一点云集合;对滤波后的第一点云集合中的第一点云进行聚类处理,得到第二点云集合;对第二点云集合进行滤波,得到三维语义地图。本申请将彩色图像序列和深度图像序列结合作为语义分割模型的输入,如此,可以提升语义预测能力,且基于带语义的点云分层次地进行滤波,可以节约缓存、提升实时性。

    一种基于点云的语义实例确定方法、装置、电子设备及存储介质

    公开(公告)号:CN111192265A

    公开(公告)日:2020-05-22

    申请号:CN201911360880.2

    申请日:2019-12-25

    Abstract: 本申请公开了一种基于点云的语义实例确定方法、装置、电子设备及存储介质,所述方法包括:将点云输入训练后的编码模块,得到多个点集中每个点集对应的包含集合补充信息和集合关系信息的特征信息;所述编码模块包含区域特征补充模块和区域关系推理模块;所述多个点集中的点的并集为所述点云,至少有两个点集中存在交集;基于训练后的语义实例确定模块对所述每个点集对应的包含集合补充信息和集合关系信息的特征信息进行语义和实例的确定,得到所述点云中每个点的语义标签和实例标签;所述语义标签用于表征所述每个点所属的类别;所述实例标签用于表征所述每个点所属的实例,可以降低稀疏区域的点云分割的错误率。

    一种实体之间关系特征信息的确定方法、装置、电子设备及存储介质

    公开(公告)号:CN110928959A

    公开(公告)日:2020-03-27

    申请号:CN201911028767.4

    申请日:2019-10-28

    Abstract: 本申请实施例所公开的一种实体之间关系特征信息的确定方法、装置、电子设备及存储介质,其中方法包括:接收任务请求,对任务请求进行解析,获取参考实体对,确定待识别对象中与参考实体对匹配的目标实体对集合,确定目标实体对集合中每个目标实体对包含的两个目标实体之间的相对方向信息和距离数据,基于关系数据模型对相对方向信息和距离数据进行处理,得到每个目标实体对的关系数据,根据关系查询库对关系数据进行查询,得到每个目标实体对的关系特征信息。本申请实施例,能够明确实体时间的关系界定,能够实现对场景的有效分析、认知与表达,辅助计算机以结构化的格式获悉更加丰富的场景理解信息,为实现计算机下一步操作的推理和决策奠定基础。

    弓网状态的检测方法
    104.
    发明公开

    公开(公告)号:CN109785377A

    公开(公告)日:2019-05-21

    申请号:CN201910021366.X

    申请日:2019-01-09

    Abstract: 本发明提供一种弓网状态的检测方法,由双目视频同步采集设备获取所述接触线与所述受电弓之相交区域的第一图像和第二图像,进而将第一图像和第二图像对准,进行立体匹配,获取匹配的对应点,通过计算所述对应点的视差,获得视差信息和视差图,而后计算得到深度信息并进行三维重建,进而获得所述弓网的状态。与现有技术相比,弓网状态的检测仅采用双目视频同步采集设备,可不安装其它补偿传感器,如激光雷达等,即可实现准确获得弓网的状态,装置结构简单,成本低且效果好。此外,通过本发明提供的弓网状态的检测方法和检测装置可实现连续且不间断地对弓网状态进行自动检测,能有效降低工作人员劳动强度,提高工作效率。

    机器人通用关节及机器人手臂

    公开(公告)号:CN105818160A

    公开(公告)日:2016-08-03

    申请号:CN201510009201.2

    申请日:2015-01-08

    Abstract: 本发明提出了一种机器人通用关节及机器人手臂,通过每个关节上统一搭载的第一接口端子和第二接口端子,即可实现机器人通用关节之间的串行和/或并行连接,方便地组合出多自由度的机器人系统;通过力传输轴和电气信号的同一旋转轴且同步旋转的设计,使用者只需插接操作,即可以在完成物理连接的同时,也完成电路的连接,方便使用,同时也避免机器人手臂旋转时造成信号及电源线的缠绕;每个通用关节具有独立的总线地址和独立的马达伺服控制系统,与传统控制器外置的马达控制系统相比,总线构造减少了关节外部连线的数量,降低了关节外部的高频噪声,便于快速发现对应总线节点的问题和进行模块化的更换,方便网络化的控制和管理。

    一种手眼朝向协同目标定位方法

    公开(公告)号:CN113850145B

    公开(公告)日:2024-10-25

    申请号:CN202111003611.8

    申请日:2021-08-30

    Abstract: 本发明涉及一种手眼朝向协同目标定位方法,包括:采集当前场景的图像,并识别出人体区域图像;从人体区域图像中分割出头部区域图像和手部区域图像,并获取头部区域图像对应的深度图像和手部区域图像对应的深度图像;根据头部区域图像及其对应的深度图像,建立当前眼部的空间三维模型,根据手部区域图像及其对应的深度图像,建立当前手部的空间三维模型;根据当前眼部的空间三维模型和当前手部的空间三维模型,获取当前手、眼朝向向量;根据当前眼朝向向量和当前手朝向向量,计算当前待定位目标的空间位置。本发明提供的目标定位方法无需人工操作额外的辅助设备,能够在降低操作难度的同时,提高场景适应性和目标定位的准确性。

    一种视频内容描述信息的生成方法和设备

    公开(公告)号:CN112749660B

    公开(公告)日:2024-06-28

    申请号:CN202110044445.X

    申请日:2021-01-13

    Abstract: 本申请涉及一种视频内容描述信息的生成方法和设备,该方法包括:获取目标视频的图像序列;将图像序列划分为多个子图像序列;多个子图像序列中任意连续两个子图像序列对应不同的场景;针对多个子图像序列中每个子图像序列:根据已训练的第一检测模型对当前子图像序列的首帧图像进行检测,得到对应的静态场景描述信息;根据已训练的第二检测模型对当前子图像序列中除首帧图像之外的图像进行检测,得到对应的动态事件描述信息;根据静态场景描述信息和动态事件描述信息,确定当前子图像序列对应的内容描述信息。如此,不仅可以降低视频理解的难度,还可以减少冗余信息提取,从而可以提高计算效率。

    一种基于本体的半监督图像场景语义深化方法

    公开(公告)号:CN112085122B

    公开(公告)日:2024-03-15

    申请号:CN202010995864.7

    申请日:2020-09-21

    Abstract: 本发明提供一种基于本体的半监督图像场景语义深化方法,包括:检测出图像中的实体,所述实体包括目标实体;得到目标实体的场景信息,该场景信息至少包括目标实体的组成部分;将场景信息与实体本体库中的下位词进行匹配,并根据匹配结果对目标实体进行重命名,从而实现对目标实体的类别的语义深化。使用本发明的方法能够在不提供新的细分类图像数据集的情况下将场景中检测到的实例类别进一步细化,达到深化场景语义描述的效果,同时对于关联谓词检测任务,可以消除不合逻辑的关联谓词,判定从属实体的归属,从而提高谓词检测精度。

Patent Agency Ranking