-
公开(公告)号:CN115237580B
公开(公告)日:2022-12-16
申请号:CN202211147981.3
申请日:2022-09-21
Applicant: 之江实验室
Abstract: 本发明提供一种面向智能计算的流水并行训练自适应调整系统、方法,系统包括监控模块和调整模块,调整模块在计算节点的计算任务划分不均衡时,根据计算节点的不均衡类型,确定调整策略,并根据调整策略,调整子模型在计算集群中的分配;调整包括以下至少一种:将计算任务划分不均衡的计算节点的至少部分子模型的层由该计算节点迁移至其他计算节点;控制计算任务划分不均衡的计算节点执行CPU‑GPU内存交换或重计算,或者控制计算任务划分不均衡的计算节点取消当前执行的CPU‑GPU内存交换或重计算;对计算集群的网络拓扑结构进行调整。本发明能动态调整子模型在计算集群中的分配。
-
公开(公告)号:CN115014362B
公开(公告)日:2022-11-15
申请号:CN202210946915.6
申请日:2022-08-09
Applicant: 之江实验室
IPC: G01C21/20
Abstract: 本发明属于单机器人全覆盖路径规划领域,涉及一种基于合成单元的牛耕式全覆盖路径规划方法和装置,该方法包括:步骤一,基于机器人的平面目标作业区域,构建坐标系化的栅格地图;步骤二,对栅格地图进行按行划分,生成若干个基本路径片段集合并对两两基本路径片段集合之间进行判断后合并处理得到合成单元,同时确定机器人遍历起始单元;步骤三,基于合成单元间的相邻关系,生成拓扑地图,机器人利用所述拓扑地图,采用基于贪心算法的方式,通过三次求解旅行商问题,得到机器人的最终规划路径。本发明降低了规划最终路径的重复率,解决了现有方法在旅行商问题求解时,需要进行多次求解,严重影响了机器人的作业效率的问题。
-
公开(公告)号:CN112598709B
公开(公告)日:2022-11-01
申请号:CN202011559927.0
申请日:2020-12-25
Applicant: 之江实验室
Abstract: 本发明公开了一种基于视频流的行人运动速度智能感知方法,该方法包括:采用摄像头标定方法获取摄像头内部参数和外部参数,建立图像坐标系到空间坐标系的坐标转换模型;获取监控摄像头下的实时视频流并进行行人目标检测及跟踪,得到行人ID和相应的图像坐标系下的行人检测框粗定位结果;利用人体部件分割模型对得到的行人目标进行部件分割,获取图像坐标系下的行人脚点精定位结果;利用坐标转换模型实现行人脚点从图像坐标系到真实世界中的空间坐标系的位置信息解算,结合视频流帧间隔时间计算行人的运动速度,实现基于摄像头视频流的行人运动速度智能感知方法。
-
公开(公告)号:CN115248728A
公开(公告)日:2022-10-28
申请号:CN202211148202.1
申请日:2022-09-21
Applicant: 之江实验室
Abstract: 本发明提供一种面向智能计算的分布式训练任务调度方法、系统和装置,系统包括模型性能预测和分解模块、全局GPU资源调度器和各计算节点均配置的本地GPU资源调度器,全局GPU资源调度器在接收到模型性能预测和分解模块发送的子任务请求后,根据各子任务的资源消耗信息及多个计算节点的GPU运行情况,将各子任务分配到匹配的计算节点的GPU进行训练,并构建各子任务之间的通信拓扑,并在各计算节点的GPU训练对应子任务的过程中,监控各计算节点的GPU的计算资源运行情况,及根据所有计算节点的GPU的计算资源运行情况,控制子任务的调度。本发明能够提高计算集群的GPU和网络等资源的利用率,减少子任务训练的等待时间。
-
公开(公告)号:CN115170579A
公开(公告)日:2022-10-11
申请号:CN202211098621.9
申请日:2022-09-09
Applicant: 之江实验室
Abstract: 本发明属于图像识别技术领域,涉及一种金属锈蚀图像分割方法和装置,该方法包括:建立金属锈蚀图像数据集,将金属锈蚀图像数据集分为训练集和测试集;构建基于U‑net网络和混合注意力机制的深度学习分割网络模型;将训练集输入所述深度学习分割模型中进行训练,得到训练好的模型;将测试集输入所述训练好的模型中进行测试,得到金属锈蚀图像的分割结果;将得到的金属锈蚀图像的分割结果与测试集对应的标签图像中的锈蚀位置进行对比,计算评价指标,对测试结果进行评价。本发明的方法,在原始U‑net网络的基础上,添加混合注意力机制,分别从通道域和空间域两个方面对锈蚀所在区域的权重进行提升,提高了金属锈蚀图像的分割精度、准确度。
-
公开(公告)号:CN115115868A
公开(公告)日:2022-09-27
申请号:CN202210386333.7
申请日:2022-04-13
Applicant: 之江实验室 , 中国科学院信息工程研究所
IPC: G06V10/764 , G06N3/04 , G06N3/08 , G06V10/774
Abstract: 本发明公开了一种基于三元组的多模态协同场景识别方法,涉及深度学习下的计算机视觉与自然语言处理领域,针对单模态识别方法在复杂场景中体现出的局限性,提出为每个样本匹配一个由图像、文本型摘要和实例信息三种模态的标注数据构成的三元组,分别进行三个分支的神经网络学习训练,通过综合考量多种模态下的特征信息,在不引入额外数据收集成本的情况下提升场景识别的准确率。
-
公开(公告)号:CN115063591A
公开(公告)日:2022-09-16
申请号:CN202210883738.1
申请日:2022-07-26
Applicant: 之江实验室
IPC: G06V10/26 , G06V10/40 , G06V10/82 , G06V10/764
Abstract: 本发明公开了一种基于边缘度量关系的RGB图像语义分割方法及装置,该方法包括:构建语义分割网络的网络主体;从所述网络主体中提取可分离的中间层特征,构建边缘度量关系模块;组合所述网络主体与所述边缘度量关系模块,构建基于边缘度量关系的语义分割网络;对所述基于边缘度量关系的语义分割网络进行训练;输入待测RGB图像至训练后的语义分割网络,得到所述待测RGB图像的各语义类别分类得分和根据最高得分对应的类别生成的语义分割图像。
-
公开(公告)号:CN115014362A
公开(公告)日:2022-09-06
申请号:CN202210946915.6
申请日:2022-08-09
Applicant: 之江实验室
IPC: G01C21/20
Abstract: 本发明属于单机器人全覆盖路径规划领域,涉及一种基于合成单元的牛耕式全覆盖路径规划方法和装置,该方法包括:步骤一,基于机器人的平面目标作业区域,构建坐标系化的栅格地图;步骤二,对栅格地图进行按行划分,生成若干个基本路径片段集合并对两两基本路径片段集合之间进行判断后合并处理得到合成单元,同时确定机器人遍历起始单元;步骤三,基于合成单元间的相邻关系,生成拓扑地图,机器人利用所述拓扑地图,采用基于贪心算法的方式,通过三次求解旅行商问题,得到机器人的最终规划路径。本发明降低了规划最终路径的重复率,解决了现有方法在旅行商问题求解时,需要进行多次求解,严重影响了机器人的作业效率的问题。
-
-
公开(公告)号:CN114356078A
公开(公告)日:2022-04-15
申请号:CN202111539274.4
申请日:2021-12-15
Applicant: 之江实验室
IPC: G06F3/01
Abstract: 本发明涉及人工智能机器人行为交互领域,具体涉及一种基于注视目标的人物意图检测方法、装置及电子设备,该方法包括:利用机器人上的深度摄像头获取到彩色图像和深度图,通过注视目标估计方法在彩色图像中估计出人物的注视目标点,通过目标检测方法在彩色图像中检测出通用目标的包围框,将人物的注视目标点与通用目标相关联,得到彩色图像中的注视目标物体;利用深度图和机器人位姿坐标计算出机器人当前位置下的可观测到的点云,彩色图像中的注视目标物体映射到注视目标点云上;在语义地图上查询注视目标点云的位置上的语义信息,作为人物意图。本发明进一步提升机器人在人机交互的能力,更好地为人类进行服务。
-
-
-
-
-
-
-
-
-