-
公开(公告)号:CN112381031A
公开(公告)日:2021-02-19
申请号:CN202011331116.5
申请日:2020-11-24
Applicant: 中国科学院上海微系统与信息技术研究所
Abstract: 本发明涉及一种基于卷积神经网络的实时在线受电弓羊角检测方法,包括:步骤S1,根据列车历史往返一次的全程视频制作训练集;步骤S2,采用训练集对预训练模型进行再训练,得到羊角掩膜检测网络;步骤S3,将全程视频输入羊角掩膜检测网络,获取每个羊角的掩膜信息;步骤S4,对每个羊角的掩膜信息进行统计,获取每个羊角的损伤判别条件;步骤S5,获取列车行驶的实时视频,将列车行驶的实时视频输入所述羊角掩膜检测网络,获取每个羊角的实时掩膜信息,并根据损伤判别条件检测每个羊角是否发生损伤。本发明能够在不影响列车运行的情况下实现实时在线检测,在复杂背景环境中具有更高的鲁棒性。同时,本发明能够有效增加检测精度。
-
公开(公告)号:CN112308932A
公开(公告)日:2021-02-02
申请号:CN202011217737.0
申请日:2020-11-04
Applicant: 中国科学院上海微系统与信息技术研究所
Abstract: 本申请公开一种注视检测方法、装置、设备及存储介质,本申请通过获取目标相机采集的目标对象的基准图像和参考图像,以及目标相机的内外参;基于基准图像对应的像素坐标系,构建基准图像对应的头部坐标系;确定第一坐标转换关系;基于目标对象的双眼瞳孔中心在基准图像和参考图像各自对应的像素坐标系中的第一像素坐标、第二像素坐标,以及目标相机的内外参,确定目标对象的双眼瞳孔中心在基准图像对应的相机坐标系中的第一相机坐标;基于平均人脸模型和基准图像对应的头部坐标系确定目标对象的双眼眼球中心,以及目标对象的双眼眼球中心的第一头部坐标;确定基准图像对应的相机坐标系中的目标对象的视线方向和注视点,可以实现利用相机作为采集设备。
-
公开(公告)号:CN111179246B
公开(公告)日:2021-01-29
申请号:CN201911375942.7
申请日:2019-12-27
Applicant: 中国科学院上海微系统与信息技术研究所
IPC: G06T7/00
Abstract: 本申请涉及一种像素位移量确认方法、装置、电子设备及存储介质,该方法包括:通过用第一卷积核集合对第一帧图像和第二帧图像的像素进行像素特征提取得到第一特征层集合和第二特征层集合;用第二卷积核集合对第一特征层集合和第二特征层集合进行像素特征提取得到第三特征层集合和第四特征层集合;将第一特征层集合和第三特征层集合聚合处理得到第一聚合特征,将第二特征层集合和第四特征层集合聚合处理得到第二聚合特征;对第一聚合特征和第二聚合特征进行解码处理得到第一帧图像中像素的位移量,如此,对相邻的两帧图像进行多次的像素特征提取,尽可能的提取图像中像素特征,在一定程度上提高了像素位移量的估计精度。
-
公开(公告)号:CN112085122A
公开(公告)日:2020-12-15
申请号:CN202010995864.7
申请日:2020-09-21
Applicant: 中国科学院上海微系统与信息技术研究所
Abstract: 本发明提供一种基于本体的半监督图像场景语义深化方法,包括:检测出图像中的实体,所述实体包括目标实体;得到目标实体的场景信息,该场景信息至少包括目标实体的组成部分;将场景信息与实体本体库中的下位词进行匹配,并根据匹配结果对目标实体进行重命名,从而实现对目标实体的类别的语义深化。使用本发明的方法能够在不提供新的细分类图像数据集的情况下将场景中检测到的实例类别进一步细化,达到深化场景语义描述的效果,同时对于关联谓词检测任务,可以消除不合逻辑的关联谓词,判定从属实体的归属,从而提高谓词检测精度。
-
公开(公告)号:CN111931782A
公开(公告)日:2020-11-13
申请号:CN202010808133.7
申请日:2020-08-12
Applicant: 中国科学院上海微系统与信息技术研究所
Abstract: 本发明提供一种语义分割方法、系统、介质及装置,所述方法包括以下步骤:获取需要语义分割的图片,记录所述图片的尺寸为H×W×M,H表示图像高度,W表示图像宽度,M表示通道数;对所述图片进行边缘处理获得边缘连通图S;对所述图片基于预先训练好的语义分割模型i进行语义分割;生成语义标签图Gi和语义概率图Pi;根据所述边缘连通图S,生成像素为0的四邻域连通集合F,遍历F中的每个连通域k分别找出对应于每个连通域k平均信息熵最小的语义分割模型imin,确定连通域k内所有像素的最终语义标签 其中(h,w)∈k。本发明的一种语义分割方法、系统、介质及装置,用于提高陌生场景下语义分割的精度及鲁棒性。
-
公开(公告)号:CN111190981B
公开(公告)日:2020-11-06
申请号:CN201911354167.7
申请日:2019-12-25
Applicant: 中国科学院上海微系统与信息技术研究所
Abstract: 本申请涉及一种三维语义地图的构建方法、装置、电子设备及存储介质,该方法通过获取环境图像集合,并根据已训练的语义分割模型对环境图像集合进行语义分割,得到语义图像序列。将语义图像序列的每帧语义图像投射到预先建立的三维坐标系上,得到第一点云集合,第一点云集合中的第一点云对应每帧语义图像。对第一点云集合进行滤波,得到滤波后的第一点云集合;对滤波后的第一点云集合中的第一点云进行聚类处理,得到第二点云集合;对第二点云集合进行滤波,得到三维语义地图。本申请将彩色图像序列和深度图像序列结合作为语义分割模型的输入,如此,可以提升语义预测能力,且基于带语义的点云分层次地进行滤波,可以节约缓存、提升实时性。
-
公开(公告)号:CN111192265A
公开(公告)日:2020-05-22
申请号:CN201911360880.2
申请日:2019-12-25
Applicant: 中国科学院上海微系统与信息技术研究所
Abstract: 本申请公开了一种基于点云的语义实例确定方法、装置、电子设备及存储介质,所述方法包括:将点云输入训练后的编码模块,得到多个点集中每个点集对应的包含集合补充信息和集合关系信息的特征信息;所述编码模块包含区域特征补充模块和区域关系推理模块;所述多个点集中的点的并集为所述点云,至少有两个点集中存在交集;基于训练后的语义实例确定模块对所述每个点集对应的包含集合补充信息和集合关系信息的特征信息进行语义和实例的确定,得到所述点云中每个点的语义标签和实例标签;所述语义标签用于表征所述每个点所属的类别;所述实例标签用于表征所述每个点所属的实例,可以降低稀疏区域的点云分割的错误率。
-
公开(公告)号:CN110928959A
公开(公告)日:2020-03-27
申请号:CN201911028767.4
申请日:2019-10-28
Applicant: 中国科学院上海微系统与信息技术研究所
IPC: G06F16/28 , G06F40/279 , G06F40/30
Abstract: 本申请实施例所公开的一种实体之间关系特征信息的确定方法、装置、电子设备及存储介质,其中方法包括:接收任务请求,对任务请求进行解析,获取参考实体对,确定待识别对象中与参考实体对匹配的目标实体对集合,确定目标实体对集合中每个目标实体对包含的两个目标实体之间的相对方向信息和距离数据,基于关系数据模型对相对方向信息和距离数据进行处理,得到每个目标实体对的关系数据,根据关系查询库对关系数据进行查询,得到每个目标实体对的关系特征信息。本申请实施例,能够明确实体时间的关系界定,能够实现对场景的有效分析、认知与表达,辅助计算机以结构化的格式获悉更加丰富的场景理解信息,为实现计算机下一步操作的推理和决策奠定基础。
-
公开(公告)号:CN109785377A
公开(公告)日:2019-05-21
申请号:CN201910021366.X
申请日:2019-01-09
Applicant: 中国科学院上海微系统与信息技术研究所
Abstract: 本发明提供一种弓网状态的检测方法,由双目视频同步采集设备获取所述接触线与所述受电弓之相交区域的第一图像和第二图像,进而将第一图像和第二图像对准,进行立体匹配,获取匹配的对应点,通过计算所述对应点的视差,获得视差信息和视差图,而后计算得到深度信息并进行三维重建,进而获得所述弓网的状态。与现有技术相比,弓网状态的检测仅采用双目视频同步采集设备,可不安装其它补偿传感器,如激光雷达等,即可实现准确获得弓网的状态,装置结构简单,成本低且效果好。此外,通过本发明提供的弓网状态的检测方法和检测装置可实现连续且不间断地对弓网状态进行自动检测,能有效降低工作人员劳动强度,提高工作效率。
-
公开(公告)号:CN105818160A
公开(公告)日:2016-08-03
申请号:CN201510009201.2
申请日:2015-01-08
Applicant: 中国科学院上海微系统与信息技术研究所 , 上海弼智仿生高科技有限公司
Abstract: 本发明提出了一种机器人通用关节及机器人手臂,通过每个关节上统一搭载的第一接口端子和第二接口端子,即可实现机器人通用关节之间的串行和/或并行连接,方便地组合出多自由度的机器人系统;通过力传输轴和电气信号的同一旋转轴且同步旋转的设计,使用者只需插接操作,即可以在完成物理连接的同时,也完成电路的连接,方便使用,同时也避免机器人手臂旋转时造成信号及电源线的缠绕;每个通用关节具有独立的总线地址和独立的马达伺服控制系统,与传统控制器外置的马达控制系统相比,总线构造减少了关节外部连线的数量,降低了关节外部的高频噪声,便于快速发现对应总线节点的问题和进行模块化的更换,方便网络化的控制和管理。
-
-
-
-
-
-
-
-
-