-
公开(公告)号:CN117311996B
公开(公告)日:2024-07-26
申请号:CN202311605590.6
申请日:2023-11-29
Applicant: 之江实验室
IPC: G06F9/50 , G06F3/0481 , G06F3/0482 , G06F3/04847
Abstract: 本发明公开了一种计算任务的批量数据配置和处理及运行方法、装置,包括以下步骤:通过计算框架配置步骤可以屏蔽用户提交不同类型、不同计算框架计算任务的差异,降低开发成本以及用户进行计算任务配置提交的理解成本;批量数据配置步骤提供的一种通用的批量输入数据配置表单,能够兼容不同用户因计算习惯不同对于需要批量输入的数据配置不同的需求,降低开发成本以及提升用户使用灵活性;在批量数据处理步骤,根据可用算力资源和计算任务所需资源智能计算批量数据分片数量并将计算任务拆解为子计算任务进行并行计算,提升计算效率;通过批量数据运行步骤可以展示各任务的运行监控,便于用户跟踪任务的执行情况。
-
公开(公告)号:CN117592821B
公开(公告)日:2024-05-10
申请号:CN202410071397.7
申请日:2024-01-18
Applicant: 之江实验室
IPC: G06Q10/0637 , G06Q50/22 , G06F17/18
Abstract: 本发明公开了一种基于因子分析的公共算力平台体验设计评估系统和方法,包括:设定用户体验的多个评价维度及每个评价维度包含的评价指标;采集依据评价维度及评价指标对公共算力平台体验的评价打分样本,并构建打分矩阵;对打分矩阵进行因子分析,并基于因子分析结果确定每个评价维度的维度权重以及每个评价指标的指标权重;基于评价维度及其维度权重构建用户体验维度度量和基于评价指标及其指标权重构建用户体验指标度量;基于用户体验维度度量和用户体验指标度量进行体验设计评估,这样能够实现对公共算力平台体验设计的客观评估,且客观评估结果可用于指导公共算力平台的设计特征优化。
-
公开(公告)号:CN117311996A
公开(公告)日:2023-12-29
申请号:CN202311605590.6
申请日:2023-11-29
Applicant: 之江实验室
IPC: G06F9/50 , G06F3/0481 , G06F3/0482 , G06F3/04847
Abstract: 本发明公开了一种计算任务的批量数据配置和处理及运行方法、装置,包括以下步骤:通过计算框架配置步骤可以屏蔽用户提交不同类型、不同计算框架计算任务的差异,降低开发成本以及用户进行计算任务配置提交的理解成本;批量数据配置步骤提供的一种通用的批量输入数据配置表单,能够兼容不同用户因计算习惯不同对于需要批量输入的数据配置不同的需求,降低开发成本以及提升用户使用灵活性;在批量数据处理步骤,根据可用算力资源和计算任务所需资源智能计算批量数据分片数量并将计算任务拆解为子计算任务进行并行计算,提升计算效率;通过批量数据运行步骤可以展示各任务的运行监控,便于用户跟踪任务的执行情况。
-
公开(公告)号:CN117093352B
公开(公告)日:2024-01-09
申请号:CN202311328291.2
申请日:2023-10-13
Applicant: 之江实验室
Abstract: 本说明书公开了一种基于模板的计算集群作业调度系统及方法、装置,通过在不同的计算集群中部署不完全相同的计算框架,当监测到用户的选择操作后,确定用户执行作业时需调用的目标框架,并向用户展示该目标框架对应的作业调用模板,再根据用户对该作业调用模板的输入操作,确定用户的输入数据,再将该输入数据和该目标作业调用模板进行组合,生成目标作业,最后将该目标作业下发至部署有该目标框架的目标集群中。从上述内容可以看出,本方法仅需要用户确定自身需执行的计算作业的作业类型,而不需要用户根据执行该计算作业的计算框架和对应计算集群的特点编写作业启动程序,提高了作业生成的效率和作业处理的效率。
-
公开(公告)号:CN117093352A
公开(公告)日:2023-11-21
申请号:CN202311328291.2
申请日:2023-10-13
Applicant: 之江实验室
Abstract: 本说明书公开了一种基于模板的计算集群作业调度系统及方法、装置,通过在不同的计算集群中部署不完全相同的计算框架,当监测到用户的选择操作后,确定用户执行作业时需调用的目标框架,并向用户展示该目标框架对应的作业调用模板,再根据用户对该作业调用模板的输入操作,确定用户的输入数据,再将该输入数据和该目标作业调用模板进行组合,生成目标作业,最后将该目标作业下发至部署有该目标框架的目标集群中。从上述内容可以看出,本方法仅需要用户确定自身需执行的计算作业的作业类型,而不需要用户根据执行该计算作业的计算框架和对应计算集群的特点编写作业启动程序,提高了作业生成的效率和作业处理的效率。
-
公开(公告)号:CN116382877B
公开(公告)日:2023-09-05
申请号:CN202310598325.3
申请日:2023-05-25
Applicant: 之江实验室
Abstract: 本说明书公开了一种任务的执行方法、装置、存储介质及电子设备,确定计算任务的各子任务,确定各子任务的输入数据的适配单元,将各子任务以及各子任务对应的适配单元封装为各任务节点。确定用户选择的任务节点以及任务节点之间的连接关系,并构建得到工作流,编译并执行该工作流。该方法不需要用户自己去设计各子任务之间的数据的适配关系,而是直接在客户端中选择子任务以及建立子任务之间的连接关系即可,然后客户端可根据用户选择的子任务以及子任务之间的连接关系,构建工作流,并进行编译执行得到工作流的执行结果。该方法使得计算任务中的子任务之间的数据的适配对用户完全透明,降低了构建工作流的复杂度。
-
公开(公告)号:CN116382877A
公开(公告)日:2023-07-04
申请号:CN202310598325.3
申请日:2023-05-25
Applicant: 之江实验室
Abstract: 本说明书公开了一种任务的执行方法、装置、存储介质及电子设备,确定计算任务的各子任务,确定各子任务的输入数据的适配单元,将各子任务以及各子任务对应的适配单元封装为各任务节点。确定用户选择的任务节点以及任务节点之间的连接关系,并构建得到工作流,编译并执行该工作流。该方法不需要用户自己去设计各子任务之间的数据的适配关系,而是直接在客户端中选择子任务以及建立子任务之间的连接关系即可,然后客户端可根据用户选择的子任务以及子任务之间的连接关系,构建工作流,并进行编译执行得到工作流的执行结果。该方法使得计算任务中的子任务之间的数据的适配对用户完全透明,降低了构建工作流的复杂度。
-
公开(公告)号:CN117406979B
公开(公告)日:2024-04-12
申请号:CN202311713754.7
申请日:2023-12-14
Applicant: 之江实验室
Abstract: 本发明公开了一种计算工作流的界面交互设计方法和系统,方法包括以下步骤:工作流编排:在计算工作流列表界面新建工作流并填写基础配置信息,在工作流画布界面对不同类型计算单元进行选择和连线得到计算工作流,对各个计算单元采用抽屉浮层交互形式进行运行配置并提交计算;工作流执行:在工作流画布界面多方面查看计算工作流的运行情况,包括计算单元之间的任务流转状态,各计算单元的运行状态、运行记录、运行监控和运行日志,以及工作流维度的运行监控;工作流结果查看:在工作流画布界面查看运行结果文件。本发明能够为用户提供了一种更为便捷、高效、直观的工作流管理工具,降低计算成本,支持多种算法的计算单元联合计算。
-
公开(公告)号:CN117406979A
公开(公告)日:2024-01-16
申请号:CN202311713754.7
申请日:2023-12-14
Applicant: 之江实验室
Abstract: 本发明公开了一种计算工作流的界面交互设计方法和系统,方法包括以下步骤:工作流编排:在计算工作流列表界面新建工作流并填写基础配置信息,在工作流画布界面对不同类型计算单元进行选择和连线得到计算工作流,对各个计算单元采用抽屉浮层交互形式进行运行配置并提交计算;工作流执行:在工作流画布界面多方面查看计算工作流的运行情况,包括计算单元之间的任务流转状态,各计算单元的运行状态、运行记录、运行监控和运行日志,以及工作流维度的运行监控;工作流结果查看:在工作流画布界面查看运行结果文件。本发明能够为用户提供了一种更为便捷、高效、直观的工作流管理工具,降低计算成本,支持多种算法的计算单元联合计算。
-
公开(公告)号:CN117592821A
公开(公告)日:2024-02-23
申请号:CN202410071397.7
申请日:2024-01-18
Applicant: 之江实验室
IPC: G06Q10/0637 , G06Q50/22 , G06F17/18
Abstract: 本发明公开了一种基于因子分析的公共算力平台体验设计评估系统和方法,包括:设定用户体验的多个评价维度及每个评价维度包含的评价指标;采集依据评价维度及评价指标对公共算力平台体验的评价打分样本,并构建打分矩阵;对打分矩阵进行因子分析,并基于因子分析结果确定每个评价维度的维度权重以及每个评价指标的指标权重;基于评价维度及其维度权重构建用户体验维度度量和基于评价指标及其指标权重构建用户体验指标度量;基于用户体验维度度量和用户体验指标度量进行体验设计评估,这样能够实现对公共算力平台体验设计的客观评估,且客观评估结果可用于指导公共算力平台的设计特征优化。
-
-
-
-
-
-
-
-
-