-
公开(公告)号:CN119599094B
公开(公告)日:2025-05-02
申请号:CN202510151576.6
申请日:2025-02-11
Applicant: 之江实验室
IPC: G06N3/096 , G06N3/0464
Abstract: 本说明书提供一种模型训练方法、装置、电子设备和存储介质,所述方法包括:将训练数据分别输入至教师模型、辅助模型和学生模型,所述教师模型是已训练的。教师模型对训练数据进行特征提取,并将提取的教师中间特征传递至所述辅助模型。所述辅助模型对所述训练数据进行特征提取,并将提取的辅助中间特征传递至所述学生模型;以及,基于第一损失函数训练所述辅助模型,所述第一损失函数包括所述辅助中间特征与所述教师中间特征之间的第一特征蒸馏损失。所述学生模型对所述训练数据进行特征提取,得到学生中间特征;以及,基于第二损失函数训练所述学生模型,所述第二损失函数包括所述学生中间特征与所述辅助中间特征之间的第二特征蒸馏损失。
-
公开(公告)号:CN119152506B
公开(公告)日:2025-02-14
申请号:CN202411649679.7
申请日:2024-11-19
Applicant: 之江实验室
IPC: G06V20/70 , G06V10/774 , G06V10/80 , G06V10/82 , G06N3/042
Abstract: 本发明公开了一种基于迭代推理的光学遥感图像标注引擎构建方法及装置;本方法可以作为光学遥感图像训练样本人工标注方法的一种补充,降低光学遥感图像训练数据的标注成本和难度。本方法面向多模态大模型的训练作业场景,旨在基于海量的真实光学遥感图像生成多粒度多模态的合成标注数据集,从而支撑多模态大模型在图像分类、图像描述、图像问答、图像区域分类、图像区域描述、图像区域问答、目标检测、Vision Grounding、目标掩膜提取、实例分割、引用表达分割等多种光学遥感图像解译任务上的训练。本发明使单一模型具备处理各种空间层次结构和语义粒度的能力。
-
公开(公告)号:CN118354004B
公开(公告)日:2024-09-24
申请号:CN202410779805.4
申请日:2024-06-17
Applicant: 之江实验室
IPC: H04N1/00
Abstract: 在本说明书提供一种卫星图像传输方法、装置、介质及设备中,首先确定地面站发送的传输任务,确定执行传输任务需要的各第一图像,并创建记录各第一图像的传输状态的传输状态表,其次将各第一图像下传地面站,根据各第一图像的传输结果,更新传输状态表,当需要对传输任务更新时,根据更新以及从传输状态表确定的未下传的各第一图像,确定执行传输任务需要的各第二图像,并将各第二图像下传地面站,通过确定各第一图像的传输状态变化,使卫星能够确定未下传的第一图像并从中确定第二图像,从而提升了卫星的资源利用率。
-
公开(公告)号:CN118861998B
公开(公告)日:2025-01-21
申请号:CN202411335914.3
申请日:2024-09-24
Applicant: 之江实验室
IPC: G06F18/25 , G06N5/04 , G06N3/0895
Abstract: 本说明书公开了一种星载模型部署方法、装置、存储介质及电子设备。在本说明书提供的星载模型部署方法中,获取预先训练的基座大模型和星载基座模型,并将所述星载基座模型传输给目标卫星;确定待部署的目标星载模型所面向的目标任务领域;针对所述目标任务领域训练所述基座大模型,得到面向所述目标任务领域的专家大模型;根据所述专家大模型训练所述星载基座模型,得到面向所述目标任务领域的增量微调模型;将所述增量微调模型传输给所述目标卫星,使所述目标卫星对所述星载基座模型和所述增量微调模型进行融合,得到目标星载模型。
-
公开(公告)号:CN119152373A
公开(公告)日:2024-12-17
申请号:CN202411595306.6
申请日:2024-11-11
Applicant: 之江实验室
IPC: G06V20/10 , G06V20/70 , G06F16/53 , G06F16/583 , G06F40/16
Abstract: 本发明公开了一种基于天基遥感模型的遥感图像处理方法、系统、电子设备、介质,包括:获取遥感图像数据,并标注;针对遥感图像处理任务设置任务描述指令,设计提示词模板,将任务描述指令填入提示词模板中再输入至大语言模型,实现对任务描述指令的扩展,得到任务描述指令集;针对遥感图像处理任务设置输出形式指令,将输出形式指令填入提示词模板中再输入至大语言模型,实现对输出形式指令的扩展,得到输出形式指令集;基于标注后的遥感图像数据、任务描述指令集、输出形式指令集构建多模态对话数据集;利用多模态对话数据集训练天基遥感模型;训练好的天基遥感模型用于根据输入的待处理遥感图像、任务描述指令、输出形式指令,输出回答。
-
公开(公告)号:CN115457374B
公开(公告)日:2023-02-03
申请号:CN202211395358.X
申请日:2022-11-09
Applicant: 之江实验室
IPC: G06V20/00 , G06V10/774 , G06N5/04
Abstract: 本发明涉及基于推理模式评估深伪图像检测模型泛化性方法及装置,属于深度学习可解释性应用技术领域;本方法可作为传统评估方法的一种补充,弥补传统方法仅依靠准确率下降率评估泛化性的片面性。本方法基于推理模式提出一种新的泛化性量化方法,从语义层面量化深伪图像检测模型建模的推理模式的复杂度。通过计算复杂度,能够精确的评估深伪图像检测模型的泛化性。本量化方法输出值越大,表示泛化性越强,反之表示泛化性越弱。
-
公开(公告)号:CN115457374A
公开(公告)日:2022-12-09
申请号:CN202211395358.X
申请日:2022-11-09
Applicant: 之江实验室
IPC: G06V20/00 , G06V10/774 , G06N5/04
Abstract: 本发明涉及基于推理模式评估深伪图像检测模型泛化性方法及装置,属于深度学习可解释性应用技术领域;本方法可作为传统评估方法的一种补充,弥补传统方法仅依靠准确率下降率评估泛化性的片面性。本方法基于推理模式提出一种新的泛化性量化方法,从语义层面量化深伪图像检测模型建模的推理模式的复杂度。通过计算复杂度,能够精确的评估深伪图像检测模型的泛化性。本量化方法输出值越大,表示泛化性越强,反之表示泛化性越弱。
-
公开(公告)号:CN119722875B
公开(公告)日:2025-05-13
申请号:CN202510244910.2
申请日:2025-03-03
Applicant: 之江实验室
Abstract: 本申请涉及图像处理技术领域,公开了一种文本生成图像方法、装置、设备及介质,其中,方法包括:响应于获取到的包含目标对象的文本提示词,生成文本提示词对应的初始图像;其中,文本提示词包括目标对象的目标数量,初始图像包括目标对象的生成数量;在目标数量与生成数量不相等的情况下,对初始图像生成过程中的候选边界框的位置进行优化,生成优化后的边界框;基于优化后的边界框对初始图像生成过程中的当前潜在表示进行优化,得到目标潜在表示;基于目标潜在表示更新初始图像,生成目标图像,以使目标图像中目标对象的生成数量与目标数量相等。本申请提供的技术方案,能够精确控制生成图像中目标数量。
-
公开(公告)号:CN119722875A
公开(公告)日:2025-03-28
申请号:CN202510244910.2
申请日:2025-03-03
Applicant: 之江实验室
Abstract: 本申请涉及图像处理技术领域,公开了一种文本生成图像方法、装置、设备及介质,其中,方法包括:响应于获取到的包含目标对象的文本提示词,生成文本提示词对应的初始图像;其中,文本提示词包括目标对象的目标数量,初始图像包括目标对象的生成数量;在目标数量与生成数量不相等的情况下,对初始图像生成过程中的候选边界框的位置进行优化,生成优化后的边界框;基于优化后的边界框对初始图像生成过程中的当前潜在表示进行优化,得到目标潜在表示;基于目标潜在表示更新初始图像,生成目标图像,以使目标图像中目标对象的生成数量与目标数量相等。本申请提供的技术方案,能够精确控制生成图像中目标数量。
-
公开(公告)号:CN119152506A
公开(公告)日:2024-12-17
申请号:CN202411649679.7
申请日:2024-11-19
Applicant: 之江实验室
IPC: G06V20/70 , G06V10/774 , G06V10/80 , G06V10/82 , G06N3/042
Abstract: 本发明公开了一种基于迭代推理的光学遥感图像标注引擎构建方法及装置;本方法可以作为光学遥感图像训练样本人工标注方法的一种补充,降低光学遥感图像训练数据的标注成本和难度。本方法面向多模态大模型的训练作业场景,旨在基于海量的真实光学遥感图像生成多粒度多模态的合成标注数据集,从而支撑多模态大模型在图像分类、图像描述、图像问答、图像区域分类、图像区域描述、图像区域问答、目标检测、Vision Grounding、目标掩膜提取、实例分割、引用表达分割等多种光学遥感图像解译任务上的训练。本发明使单一模型具备处理各种空间层次结构和语义粒度的能力。
-
-
-
-
-
-
-
-
-