数据压缩方法及装置
    1.
    发明公开

    公开(公告)号:CN118659790A

    公开(公告)日:2024-09-17

    申请号:CN202310498606.1

    申请日:2023-05-05

    Abstract: 本申请公开了一种数据压缩方法及装置,涉及数据处理技术领域。该方法包括:获取第一进程运行过程中生成的第一trace日志,第一trace日志中的每条日志记录包括第一进程调用一个通信函数时的函数调用记录。根据第一trace日志中的函数调用记录,构建第一字典和第一文法集,以实现对第一trace日志中函数调用记录的压缩。其中,对于第一trace日志中任一日志记录所包括的第一函数调用记录,第一字典中的第一符号串用于表征第一函数调用记录,第一文法集中的第一文法树用于表示第一函数调用记录中的函数调用关系。通过该方法,能够提高压缩trace日志时的压缩率,并缩短压缩时长。

    预测负载的方法、模型训练方法、装置及相关设备

    公开(公告)号:CN118860812A

    公开(公告)日:2024-10-29

    申请号:CN202310437569.3

    申请日:2023-04-21

    Abstract: 本申请提供了一种预测负载的方法和模型训练方法,用于准确地对计算集群的负载进行预测。其中,所述预测负载的方法包括:基于所述计算集群接收任务的数量随时间的周期性变化规律,确定第一时间段的任务信息,所述第一时间段的任务信息包括所述计算集群在所述第一时间段内接收任务的数量;通过预测模型,基于所述第一时间段的任务信息、第二时间段的任务信息和所述第二时间段的负载信息确定所述计算集群在所述第一时间段的负载信息;其中,所述第二时间段早于所述第一时间段,所述预测模型基于不同时间段所述计算集群的负载之间的大小关系建立。另外,本申请还提供了对应的装置、计算设备集群、芯片、计算机可读存储介质以及计算机程序产品。

    一种生成模型的方法及装置
    3.
    发明公开

    公开(公告)号:CN118278534A

    公开(公告)日:2024-07-02

    申请号:CN202211652797.4

    申请日:2022-12-21

    Abstract: 公开了一种生成模型的方法及装置,涉及计算机领域。该生成模型的方法包括:处理设备通过终端输出包括多个预设问题的预设内容,确定用户所要应用于的业务场景,处理设备获取用户针对前述预设问题输入的响应数据。处理设备根据该响应数据,确定与响应数据匹配的建模工作流,该建模工作流与用户所要应用于的业务场景匹配。处理设备根据该建模工作流,生成用户所需的模型。由于处理设备通过输出多个用于确定用户的业务场景的预设问题的形式与用户进行交互,生成用户所需的模型,因此,用户无需人工从多种业务场景中确定所要建立的模型所处的业务场景,降低了AI开发平台的使用难度,提高了AI开发平台的易用性,有利于提升生成用户所需模型的效率。

    一种模型训练加速方法及装置
    5.
    发明公开

    公开(公告)号:CN117112008A

    公开(公告)日:2023-11-24

    申请号:CN202310955141.8

    申请日:2023-07-31

    Abstract: 一种模型训练加速方法,应用于云管理平台,包括:云管理平台接收客户端发送的训练任务请求信息,训练任务请求信息包括待训练模型的信息和训练模式的信息,训练模式包括加速训练模式,加速训练模式的加速训练参数基于用户在加速配置界面中的操作确定;当训练模式为加速训练模式时,云管理平台根据加速训练参数,加载加速库中对应的目标加速模块至训练节点;目标加速模块为加速库中具有加速功能的功能模块;云管理平台指示训练节点基于目标加速模块,对待训练模型进行加速训练。用户只需要在云平台前端勾选所需的加速配置,无需安装加速包或者加速镜像,也不需要修改代码,解决了在模型训练加速前需要复杂操作的问题。

    任务管理的方法、装置、设备和存储介质

    公开(公告)号:CN116028166A

    公开(公告)日:2023-04-28

    申请号:CN202111240806.4

    申请日:2021-10-25

    Abstract: 本申请提供了一种任务管理的方法、装置、设备和存储介质,属于计算机技术领域。该方法包括:向多任务融合共享模块下发多个任务,该多任务融合共享模块运行于计算单元,多个任务中包括至少两个类型不相同的任务,基于每个任务的执行状态信息,确定多个任务中存在异常任务且异常任务满足隔离执行条件,控制该异常任务隔离执行。采用本申请,能够使得不同类型的任务同时执行,进而降低使用多任务融合共享的局限性。

    AI模型的训练方法、装置、计算设备和存储介质

    公开(公告)号:CN114154641A

    公开(公告)日:2022-03-08

    申请号:CN202011053283.8

    申请日:2020-09-29

    Abstract: 本申请提供了一种AI模型的训练方法、装置、计算设备和存储介质,属于人工智能技术领域。该方法应用于AI平台,AI平台与计算资源池相关联,计算资源池包括用于模型训练的计算节点,该方法包括:向用户提供训练配置界面,训练配置界面包括供用户选择的多种训练模式,每种训练模式表示对训练初始AI模型所需的计算节点的一种分配策略,根据用户在训练配置界面的选择,生成至少一个训练任务,执行该至少一个训练任务以对初始AI模型进行训练,获得AI模型,获得的AI模型供用户下载或使用。采用本申请,可以更灵活地执行分布式训练。

    视频标注的方法、系统及设备
    8.
    发明公开

    公开(公告)号:CN114117128A

    公开(公告)日:2022-03-01

    申请号:CN202010890640.X

    申请日:2020-08-29

    Abstract: 本申请提供了一种视频标注方法,该方法包括以下步骤:从未标注视频中抽取多个视频帧,通过显示界面向用户显示多个视频帧中的至少一个视频帧,获取用户在显示界面中对至少一个视频帧进行标注的用户标注结果,根据用户标注结果,获得多个视频帧中的其他视频帧的标注结果,该方法使得用户在视频标注过程中只需要标注一次关键帧,甚至只是确认一次关键帧是否标注正确,即可获得完整的视频的标注结果,极大程度减少了用户的标注操作,提高视频标注效率和用户的使用体验。

    获取超额资源的方法、装置以及计算设备

    公开(公告)号:CN119536980A

    公开(公告)日:2025-02-28

    申请号:CN202311458477.X

    申请日:2023-11-03

    Abstract: 本申请提供了一种获取超额资源的方法、装置以及计算设备,该方法包括:该云管理平台接收租户发送的第一虚拟加速器的配置信息以及该第一虚拟加速器的超额资源的配置信息,该超额资源包括超额的存储资源;根据该租户选择的该第一虚拟加速器的规格大小和类型,将第一服务器中的第一物理加速器的资源分配给该第一虚拟加速器;基于该超额资源的配置信息,通过消耗第一物理加速器的算力资源的方式置换获得该超额的存储资源;向该租户的客户端发送该第一虚拟加速器的登录信息,该登录信息用于该租户登录并使用该第一虚拟加速器以及该超额的存储资源。该方法能够使得虚拟加速器上可使用的资源的上限不受物理资源的限制。

    一种深度学习模型的训练方法、系统

    公开(公告)号:CN111788585B

    公开(公告)日:2024-04-12

    申请号:CN201980000128.9

    申请日:2019-01-24

    Abstract: 一种深度学习模型的训练方法,该方法包括:在N个深度学习模型的第j次迭代的BP计算中生成N个第一梯度集合,调整第一梯度集合包括的梯度的通信顺序,不按照第一梯度集合中包括的梯度的生成顺序来将第一梯度集合包括的梯度发送至参数存储空间。并按照调整之后的梯度的通信顺序,将N个第一梯度集合包括的梯度分别发送至参数存储空间。该方法通过调整本次迭代过程中得到的梯度传输到参数存储空间的传输顺序,提高了深度学习模型的训练效率。

Patent Agency Ranking