-
公开(公告)号:CN117331678B
公开(公告)日:2024-04-19
申请号:CN202311632017.4
申请日:2023-12-01
Applicant: 之江实验室
Abstract: 本申请涉及一种面向异构算力联邦的多集群作业资源规格计算方法和系统,其中,面向异构算力联邦的多集群作业资源规格计算方法包括:监测资源数据的变更获得第一目标事件和第二目标事件;基于所述第二目标事件生成资源规格数据,获得当前资源状况下多集群的资源规格方案;根据所述第一目标事件对应的目标作业的资源需求属性对当前资源状况下多集群的资源规格方案进行筛选,获得多个可选资源规格方案;根据所述目标作业的资源需求总量,遍历所述多个可选资源规格方案,获得最优资源规格方案,并根据所述最优资源规格方案修改所述目标作业的初始资源规格配置,提高了在多集群和高性能计算环境中处理零散碎片的效率和主动性。
-
公开(公告)号:CN117349401A
公开(公告)日:2024-01-05
申请号:CN202311665185.3
申请日:2023-12-06
Applicant: 之江实验室
IPC: G06F16/31 , G06F16/33 , G06F16/35 , G06F40/205
Abstract: 在本说明书提供的一种非结构化数据的元数据存储方法、装置、介质及设备中,通过响应于第一用户输入的包含非结构化数据的元数据存储请求,对非结构化数据的提取,确定符合预设元数据分类的原始数据。再通过对原始数据的解析,确定原始数据中对应预设元数据分类的结构化元数据。最后将结构化元数据存储在湖仓一体存储平台中,供第二用户检索并管理。使得不同权限的用户能够高效的检索并管理非结构化数据中需要管理的结构化元数据。
-
公开(公告)号:CN116819536A
公开(公告)日:2023-09-29
申请号:CN202310571479.3
申请日:2023-05-18
Applicant: 之江实验室
Abstract: 本发明公开了一种用于线型光纤水听器阵列的被动声呐测距方法和装置,包括:在第一个位置依据原始数据进行一次波束成形,并依据一次波束成形结果搜索信号强度最大的第一方位角;依据第二个位置依据原始数据进行二次波束成形,并依据二次波束成形结果搜索信号强度最大的第二方位角;然后依据第一方位角、第二方位角、速度以及运行时间计算目标距离。该方法和装置使用全部光纤水听器阵列的原始数据的波束形成算法相比三角定位,可以降低光纤水听器阵列位置的不确定性带来的测量偏差,计算的距离方差更小,实际使用时可靠性更高。
-
公开(公告)号:CN117349401B
公开(公告)日:2024-03-15
申请号:CN202311665185.3
申请日:2023-12-06
Applicant: 之江实验室
IPC: G06F16/31 , G06F16/33 , G06F16/35 , G06F40/205
Abstract: 在本说明书提供的一种非结构化数据的元数据存储方法、装置、介质及设备中,通过响应于第一用户输入的包含非结构化数据的元数据存储请求,对非结构化数据的提取,确定符合预设元数据分类的原始数据。再通过对原始数据的解析,确定原始数据中对应预设元数据分类的结构化元数据。最后将结构化元数据存储在湖仓一体存储平台中,供第二用户检索并管理。使得不同权限的用户能够高效的检索并管理非结构化数据中需要管理的结构化元数据。
-
公开(公告)号:CN117707794B
公开(公告)日:2024-06-18
申请号:CN202410160828.7
申请日:2024-02-05
Applicant: 之江实验室
Abstract: 本发明公开了一种面向异构联邦的多类别作业分发管理方法和系统,所述方法包括:获取自定义的作业资源;监听自定义的作业资源的创建事件、删除事件和/或更新事件;当自定义的作业资源已完成调度后,响应于自定义的作业资源的创建事件和/或更新事件,根据作业类型将自定义的作业资源渲染成对应的计算作业实例;根据自定义的作业资源的调度结果,将渲染后的计算作业实例分发至对应的计算集群;监听计算集群中计算作业实例的状态变更事件,从而更新自定义的作业资源的当前状态。本发明能够在异构的多集群环境中,对不同类型作业进行抽象,形成可被调度器调度的自定义作业资源,统一进行作业渲染、分发和作业生命周期维护。
-
公开(公告)号:CN117707794A
公开(公告)日:2024-03-15
申请号:CN202410160828.7
申请日:2024-02-05
Applicant: 之江实验室
Abstract: 本发明公开了一种面向异构联邦的多类别作业分发管理方法和系统,所述方法包括:获取自定义的作业资源;监听自定义的作业资源的创建事件、删除事件和/或更新事件;当自定义的作业资源已完成调度后,响应于自定义的作业资源的创建事件和/或更新事件,根据作业类型将自定义的作业资源渲染成对应的计算作业实例;根据自定义的作业资源的调度结果,将渲染后的计算作业实例分发至对应的计算集群;监听计算集群中计算作业实例的状态变更事件,从而更新自定义的作业资源的当前状态。本发明能够在异构的多集群环境中,对不同类型作业进行抽象,形成可被调度器调度的自定义作业资源,统一进行作业渲染、分发和作业生命周期维护。
-
公开(公告)号:CN117573295A
公开(公告)日:2024-02-20
申请号:CN202410059955.8
申请日:2024-01-16
Applicant: 之江实验室
Abstract: 本申请提供了基于k8s的多集群组件管理方法、装置及计算机设备,包括获取子集群元数据,在主集群中对所述子集群元数据进行渲染;在所述主集群中定义组件元数据的数据结构,将重定义后的所述组件元数据在所述主集群中进行渲染;基于所述组件元数据获取组件子集群的部署信息,根据所述部署信息将所述组件子集群信息渲染至对应的子集群;监听所述子集群的组件部署状态,将状态信息同步至主集群组件元数据;通过将多个集群分为主从结构,在主集群维护了多个子集群中不同组件元数据,通过管理主集群中组件元数据,实现统一管理多个子集群中不同组件的运行生命周期。实现了简单,可靠的多集群组件管理功能,降低了多集群维护成本。
-
公开(公告)号:CN117331678A
公开(公告)日:2024-01-02
申请号:CN202311632017.4
申请日:2023-12-01
Applicant: 之江实验室
Abstract: 本申请涉及一种面向异构算力联邦的多集群作业资源规格计算方法和系统,其中,面向异构算力联邦的多集群作业资源规格计算方法包括:监测资源数据的变更获得第一目标事件和第二目标事件;基于所述第二目标事件生成资源规格数据,获得当前资源状况下多集群的资源规格方案;根据所述第一目标事件对应的目标作业的资源需求属性对当前资源状况下多集群的资源规格方案进行筛选,获得多个可选资源规格方案;根据所述目标作业的资源需求总量,遍历所述多个可选资源规格方案,获得最优资源规格方案,并根据所述最优资源规格方案修改所述目标作业的初始资源规格配置,提高了在多集群和高性能计算环境中处理零散碎片的效率和主动性。
-
公开(公告)号:CN117573295B
公开(公告)日:2024-05-28
申请号:CN202410059955.8
申请日:2024-01-16
Applicant: 之江实验室
Abstract: 本申请提供了基于k8s的多集群组件管理方法、装置及计算机设备,包括获取子集群元数据,在主集群中对所述子集群元数据进行渲染;在所述主集群中定义组件元数据的数据结构,将重定义后的所述组件元数据在所述主集群中进行渲染;基于所述组件元数据获取组件子集群的部署信息,根据所述部署信息将所述组件子集群信息渲染至对应的子集群;监听所述子集群的组件部署状态,将状态信息同步至主集群组件元数据;通过将多个集群分为主从结构,在主集群维护了多个子集群中不同组件元数据,通过管理主集群中组件元数据,实现统一管理多个子集群中不同组件的运行生命周期。实现了简单,可靠的多集群组件管理功能,降低了多集群维护成本。
-
公开(公告)号:CN114357148A
公开(公告)日:2022-04-15
申请号:CN202111619401.1
申请日:2021-12-27
IPC: G06F16/338 , G06F16/33 , G06K9/62 , G06V30/148 , G06V10/40 , G06V30/19
Abstract: 本发明涉及图像文本检索技术领域,具体涉及一种基于多级别网络的图像文本检索方法,包括:构建具有全局级别子网络、关系级别子网络和数字级别子网络的图文检索模型;构建用于训练图文检索模型的训练数据集,训练数据集中包括图像文本对;将训练数据集中的图像文本对分别输入图文检索模型的全局级别子网络、关系级别子网络和数字级别子网络,以分别生成对应的全局级别相似度、关系级别相似度和数字级别相似度并单独训练对应的子网络;基于训练完成的图文检索模型进行图像文本检索。本发明中的图像文本检索方法能够提升图像文本的检索效率和检索准确性,从而能够提升图像文本检索的效果。
-
-
-
-
-
-
-
-
-