-
公开(公告)号:CN116756555A
公开(公告)日:2023-09-15
申请号:CN202310084557.7
申请日:2023-01-18
申请人: 北京九章云极科技有限公司
IPC分类号: G06F18/214 , G06F17/15
摘要: 本申请公开了一种训练模型工具的生成方法、模型训练方法和装置,属于计算机技术领域。所述方法包括:从第一函数库中获取第一函数,以及,从第二函数库中获取与所述第一函数功能相同的第二函数,其中,所述第一函数为在CPU上运行的函数,所述第二函数为在GPU上运行的函数;获取第一函数的第一参数信息和第二函数的第二参数信息;根据所述第一参数信息和所述第二参数信息,生成参数集;根据所述参数集,调整第一函数和/或第二函数;根据调整后的第一函数和调整后的第二函数,生成基函数;根据所述基函数,得到基函数库工具。
-
公开(公告)号:CN116795560A
公开(公告)日:2023-09-22
申请号:CN202211209811.3
申请日:2022-09-30
申请人: 北京九章云极科技有限公司
IPC分类号: G06F9/54
摘要: 本申请提供一种会话共享方法、装置及相关设备,其中,所述方法包括:获取目标会话,其中,所述目标会话为spark处理引擎中处于空闲状态的会话;响应于目标业务请求,将目标会话的当前身份更新为与所述目标业务请求对应的目标身份;根据身份更新后的所述目标会话执行所述目标业务请求指示的目标业务。在本申请实施例中,通过获取spark处理引擎中处于空闲状态的会话,并在响应目标业务请求时,将目标会话的当前身份更新为目标业务请求对应的目标身份的方式,以跳过会话启动步骤,减少会话的启动次数,实现会话的一次启动多次使用,缩短等待会话启动时间,提高业务代码的开发效率。
-
公开(公告)号:CN110287003A
公开(公告)日:2019-09-27
申请号:CN201910580357.4
申请日:2019-06-28
申请人: 北京九章云极科技有限公司
摘要: 本发明提供一种资源的管理方法和管理系统,该资源的管理方法包括:获取预设历史统计周期内容器资源的历史申请数据,历史申请数据包括:历史申请规格以及历史申请规格的容器资源的历史申请数量;根据历史申请数据,确定未来的目标时间段内的预调度的容器资源的规格和数量;在所述目标时间段开始之前,根据确定的预调度的容器资源的规格和数量,预调度容器资源。本发明中,统计容器资源的历史申请数据,根据历史申请数据预测未来的目标时间段有可能再次被申请的容器资源的规格和数量,在目标时间段开始之前,预先调度容器资源,以便待运行任务再次申请时,可直接使用预调度的容器资源,节省了运行任务的时间,提高了数据处理的效率。
-
公开(公告)号:CN109299178B
公开(公告)日:2020-01-14
申请号:CN201811161975.7
申请日:2018-09-30
申请人: 北京九章云极科技有限公司
摘要: 本发明提供一种模型应用方法和数据分析系统,该模型应用方法包括:基于检测到的用于发布模型的用户操作,将待发布的模型发布为模型服务;从所述模型服务的模型中确定最优模型;提供应用所述最优模型的接口,和/或,导出与所述最优模型对应的软件开发工具包。通过上述方式,用户能够通过所述接口或者软件开发工具包应用最优模型,能够确保数据处理的时效性和准确性,满足用户的数字化运营战略。
-
公开(公告)号:CN110287003B
公开(公告)日:2020-04-21
申请号:CN201910580357.4
申请日:2019-06-28
申请人: 北京九章云极科技有限公司
摘要: 本发明提供一种资源的管理方法和管理系统,该资源的管理方法包括:获取预设历史统计周期内容器资源的历史申请数据,历史申请数据包括:历史申请规格以及历史申请规格的容器资源的历史申请数量;根据历史申请数据,确定未来的目标时间段内的预调度的容器资源的规格和数量;在所述目标时间段开始之前,根据确定的预调度的容器资源的规格和数量,预调度容器资源。本发明中,统计容器资源的历史申请数据,根据历史申请数据预测未来的目标时间段有可能再次被申请的容器资源的规格和数量,在目标时间段开始之前,预先调度容器资源,以便待运行任务再次申请时,可直接使用预调度的容器资源,节省了运行任务的时间,提高了数据处理的效率。
-
公开(公告)号:CN109189750A
公开(公告)日:2019-01-11
申请号:CN201811036599.9
申请日:2018-09-06
申请人: 北京九章云极科技有限公司
IPC分类号: G06F16/182 , G06F16/17 , G06F16/11
摘要: 本发明提供一种数据分析工作流的运行方法,根据获取的数据分析工作流的配置信息,确定数据分析工作流的各工作流模块的运行方式,并确定工作流模块之间的关联关系,最后基于确定的关联关系及运行方式运行所述数据分析工作流。本发明还提供一种数据分析系统及存储介质。本发明通过确定各工作流模块的运行方式及其之间的关联关系,使得数据分析工作流灵活地以单机和/或分布式方式运行,实现了在利用大数据分析系统处理大数据业务时灵活配置资源消耗与数据分析之间的精细平衡,提高了大数据分析系统的效率。
-
公开(公告)号:CN117592568A
公开(公告)日:2024-02-23
申请号:CN202311559551.7
申请日:2023-11-21
申请人: 北京九章云极科技有限公司
IPC分类号: G06N5/04
摘要: 本发明提供一种基于大语言模型的数据链生成方法及装置,该基于大语言模型的数据链生成方法包括:根据输入信息确定第一提示词,所述第一提示词包括:待处理任务、初始数据信息和数据链描述,其中,所述输入信息包括所述待处理任务和所述初始数据信息,所述数据链描述包括所述待处理任务对应的处理方法指示;将所述第一提示词输入大语言模型,并获取所述大语言模型输出的目标数据链,所述目标数据链包括对所述待处理任务进行处理的至少一个操作节点,每个操作节点包括中间数据变量及所述中间数据变量对应的操作指令。本发明中,可以使得大语言模型输出完整的数据链解决思路,避免了步骤未知和得不到任务解决方案的情况。
-
公开(公告)号:CN113850395B
公开(公告)日:2022-11-25
申请号:CN202111120693.4
申请日:2021-09-24
申请人: 北京九章云极科技有限公司
IPC分类号: G06F16/22
摘要: 本发明实施例提供一种数据处理方法及系统。所述方法包括:获取待处理数据以及对应的步骤信息;根据待处理数据和所述步骤信息,确定与所述待处理数据对应的目标关键计算信息;根据所述目标关键计算信息恢复对应的数据处理模块;利用所述数据处理模块处理所述待处理数据。本发明实施例中,通过预先存储的模型训练过程中数据预处理步骤对中的关键计算信息快速计算预期结果,且通过存储数据预处理步骤对中的关键计算信息减小数据占用的存储空间,提升数据处理速度。
-
公开(公告)号:CN113850395A
公开(公告)日:2021-12-28
申请号:CN202111120693.4
申请日:2021-09-24
申请人: 北京九章云极科技有限公司
摘要: 本发明实施例提供一种数据处理方法及系统。所述方法包括:获取待处理数据以及对应的步骤信息;根据待处理数据和所述步骤信息,确定与所述待处理数据对应的目标关键计算信息;根据所述目标关键计算信息恢复对应的数据处理模块;利用所述数据处理模块处理所述待处理数据。本发明实施例中,通过预先存储的模型训练过程中数据预处理步骤对中的关键计算信息快速计算预期结果,且通过存储数据预处理步骤对中的关键计算信息减小数据占用的存储空间,提升数据处理速度。
-
公开(公告)号:CN109189750B
公开(公告)日:2019-05-31
申请号:CN201811036599.9
申请日:2018-09-06
申请人: 北京九章云极科技有限公司
IPC分类号: G06F16/182 , G06F16/17 , G06F16/11
摘要: 本发明提供一种数据分析工作流的运行方法,根据获取的数据分析工作流的配置信息,确定数据分析工作流的各工作流模块的运行方式,并确定工作流模块之间的关联关系,最后基于确定的关联关系及运行方式运行所述数据分析工作流。本发明还提供一种数据分析系统及存储介质。本发明通过确定各工作流模块的运行方式及其之间的关联关系,使得数据分析工作流灵活地以单机和/或分布式方式运行,实现了在利用大数据分析系统处理大数据业务时灵活配置资源消耗与数据分析之间的精细平衡,提高了大数据分析系统的效率。
-
-
-
-
-
-
-
-
-