-
公开(公告)号:CN117592003A
公开(公告)日:2024-02-23
申请号:CN202410071684.8
申请日:2024-01-18
Applicant: 之江实验室
IPC: G06F18/25 , G06F18/213 , G06N3/0442 , G06N3/0464
Abstract: 本发明公开一种基于多模态双线性池化的运动模式识别方法、装置及介质,包括:获取用户的多模态传感器数据;从所述多模态传感器数据中提取多个单模态传感器数据特征;将每个所述单模态传感器数据特征进行融合操作并拼接为一个多模态特征序列;将多模态特征序列输入LSTM,得到多模态时序特征序列,然后,通过软注意力机制,将多模态特征序列与多模态时序特征序列进行加权以及信息融合;将融合了时序信息的多模态特征输入多层感知机,预测运动模式。本发明提出多模态双线性注意力池化对多模态感知数据进行特征融合,通过利用模态间的信息增强、互补性来指导多运动模式识别;解决了多模态特征学习中面向复杂场景理解的信息间可信互补和增强问题。
-
公开(公告)号:CN119519823B
公开(公告)日:2025-05-13
申请号:CN202510058886.3
申请日:2025-01-15
Applicant: 之江实验室
IPC: H04B7/185
Abstract: 本发明公开了一种星群协同实现遥感任务的区域覆盖方法及装置,涉及卫星遥感技术领域,该方法中卫星探测任务区域后建立第一覆盖地图,以及在探测到障碍物时,在障碍物的位置释放信息素来标记该障碍物,然后基于障碍物的位置以及信息素的释放时间生成第一信息素地图。在通信范围内该卫星可与其他卫星建立通信,基于通信获取的地图对第一覆盖地图和第一信息素地图进行更新,得到第三覆盖地图和第三信息素地图。再结合第三覆盖地图和第三信息素地图确定卫星集群的未覆盖区域,从未覆盖区域中选择目标区域作为卫星的下一覆盖区域,以解决目前多星协同覆盖技术中由于无法高效避开未知障碍物、非覆盖区域导致的覆盖率低和重复覆盖率高的技术问题。
-
公开(公告)号:CN119206538A
公开(公告)日:2024-12-27
申请号:CN202411717218.9
申请日:2024-11-27
Applicant: 之江实验室
Abstract: 本说明书提供的一种任务执行方法、装置、存储介质以及电子设备,可以获取目标卫星连续拍摄得到的待检测图像序列,将其输入到目标检测模型中,目标检测模型针对待检测图像序列包含的每个图像,从中检测各目标物体,并确定各目标物体的属性信息,针对每个目标物体,根据目标卫星的位置信息、待检测图像序列中各图像中该目标物体的位置信息,确定该目标物体的行为信息,基于目标卫星的位置信息,构建第一节点,针对每个目标物体,基于该目标物体的属性信息,构建第二节点,根据该目标物体的行为信息,确定该目标物体所对应的边的类型,并按照该目标物体所对应的边的类型构建第二节点与第一节点之间的边,以得到目标图,并根据目标图执行避让任务。
-
公开(公告)号:CN117592003B
公开(公告)日:2024-05-24
申请号:CN202410071684.8
申请日:2024-01-18
Applicant: 之江实验室
IPC: G06F18/25 , G06F18/213 , G06N3/0442 , G06N3/0464
Abstract: 本发明公开一种基于多模态双线性池化的运动模式识别方法、装置及介质,包括:获取用户的多模态传感器数据;从所述多模态传感器数据中提取多个单模态传感器数据特征;将每个所述单模态传感器数据特征进行融合操作并拼接为一个多模态特征序列;将多模态特征序列输入LSTM,得到多模态时序特征序列,然后,通过软注意力机制,将多模态特征序列与多模态时序特征序列进行加权以及信息融合;将融合了时序信息的多模态特征输入多层感知机,预测运动模式。本发明提出多模态双线性注意力池化对多模态感知数据进行特征融合,通过利用模态间的信息增强、互补性来指导多运动模式识别;解决了多模态特征学习中面向复杂场景理解的信息间可信互补和增强问题。
-
公开(公告)号:CN119519823A
公开(公告)日:2025-02-25
申请号:CN202510058886.3
申请日:2025-01-15
Applicant: 之江实验室
IPC: H04B7/185
Abstract: 本发明公开了一种星群协同实现遥感任务的区域覆盖方法及装置,涉及卫星遥感技术领域,该方法中卫星探测任务区域后建立第一覆盖地图,以及在探测到障碍物时,在障碍物的位置释放信息素来标记该障碍物,然后基于障碍物的位置以及信息素的释放时间生成第一信息素地图。在通信范围内该卫星可与其他卫星建立通信,基于通信获取的地图对第一覆盖地图和第一信息素地图进行更新,得到第三覆盖地图和第三信息素地图。再结合第三覆盖地图和第三信息素地图确定卫星集群的未覆盖区域,从未覆盖区域中选择目标区域作为卫星的下一覆盖区域,以解决目前多星协同覆盖技术中由于无法高效避开未知障碍物、非覆盖区域导致的覆盖率低和重复覆盖率高的技术问题。
-
公开(公告)号:CN118709766B
公开(公告)日:2024-11-05
申请号:CN202411193875.8
申请日:2024-08-28
Applicant: 之江实验室
IPC: G06N5/022 , G06N5/04 , G06F40/30 , G06F16/9032 , G06F16/903 , G06F16/9038
Abstract: 本说明书公开了一种遥感问题回答生成方法、装置、介质及设备。获取用户输入的遥感问题文本。根据遥感问题文本,在预设的数据库中检索预设数量的与遥感问题文本相关的各文档。确定至少部分文档对应的遥感图像。根据遥感问题文本、各文档以及遥感图像,生成提示语句,并将提示语句输入到预设的大语言模型中,以通过大语言模型,生成针对遥感问题文本的问题回答文本,并将问题回答文本以及遥感图像展示给用户。能够为用户提供文本与遥感图像结合的综合答案作为遥感问题的回答,提供更直观和易于理解的答案展示方式,使用户能够更全面地获取信息。
-
公开(公告)号:CN118709766A
公开(公告)日:2024-09-27
申请号:CN202411193875.8
申请日:2024-08-28
Applicant: 之江实验室
IPC: G06N5/022 , G06N5/04 , G06F40/30 , G06F16/9032 , G06F16/903 , G06F16/9038
Abstract: 本说明书公开了一种遥感问题回答生成方法、装置、介质及设备。获取用户输入的遥感问题文本。根据遥感问题文本,在预设的数据库中检索预设数量的与遥感问题文本相关的各文档。确定至少部分文档对应的遥感图像。根据遥感问题文本、各文档以及遥感图像,生成提示语句,并将提示语句输入到预设的大语言模型中,以通过大语言模型,生成针对遥感问题文本的问题回答文本,并将问题回答文本以及遥感图像展示给用户。能够为用户提供文本与遥感图像结合的综合答案作为遥感问题的回答,提供更直观和易于理解的答案展示方式,使用户能够更全面地获取信息。
-
-
-
-
-
-