一种基于混合集群的HPC作业集群感知方法

    公开(公告)号:CN114741161B

    公开(公告)日:2025-05-02

    申请号:CN202210487700.2

    申请日:2022-05-06

    Abstract: 本发明涉及一种基于混合集群的HPC作业集群感知方法,包括:A、获取传统虚拟化云集群环境和容器云集群环境作业运行日志记录信息;B、初构建、处理传统虚拟化云集群环境和容器云集群环境下的作业运行数据集;C、训练得到基于传统虚拟化云集群环境和容器云集群环境两种环境下的基于RFR随机森林回归算法的预测模型;D、根据用户提交的作业需求信息,预测模型给予运行时间、CPU使用率、内存使用率的预测;E、将作业运行结果信息对提交的作业进行集群感知模型的处理,最终形成HPC作业集群节点感知方法。本发明建立两种环境下的预测模型,并以预测结果为依据进行集群节点感知,达到了根据作业需求自动感知最佳集群节点的效果。

    一种面向算力网络的异构数据资源管理方法

    公开(公告)号:CN116594771A

    公开(公告)日:2023-08-15

    申请号:CN202310543327.2

    申请日:2023-05-15

    Abstract: 本发明涉及一种面向算力网络的异构数据资源管理方法,属于算力网络领域。包括:系统初始化;建立算网异构数据资源管理架构;创建算网异构数据资源管理架构的资源表、编写算网异构数据资源管理架构的数据中心管理引擎和数据实体管理引擎;在算网中心节点构建虚拟目录,形成算网下异构资源的统一目录;接入数据中心资源;对算网异构数据资源进行管理。本发明建立了算网统一数据资源虚拟目录,形成了算网数据资源的统一视图,并创建了异构数据资源管理引擎,方便数据实体的管理和使用。在路由选路时,设计了MinCost代价函数计算数据流转的最小代价,选择最小代价的最优路径作为通信路径。

    一种基于混合集群的HPC作业集群感知方法

    公开(公告)号:CN114741161A

    公开(公告)日:2022-07-12

    申请号:CN202210487700.2

    申请日:2022-05-06

    Abstract: 本发明涉及一种基于混合集群的HPC作业集群感知方法,包括:A、获取传统虚拟化云集群环境和容器云集群环境作业运行日志记录信息;B、初构建、处理传统虚拟化云集群环境和容器云集群环境下的作业运行数据集;C、训练得到基于传统虚拟化云集群环境和容器云集群环境两种环境下的基于RFR随机森林回归算法的预测模型;D、根据用户提交的作业需求信息,预测模型给予运行时间、CPU使用率、内存使用率的预测;E、将作业运行结果信息对提交的作业进行集群感知模型的处理,最终形成HPC作业集群节点感知方法。本发明建立两种环境下的预测模型,并以预测结果为依据进行集群节点感知,达到了根据作业需求自动感知最佳集群节点的效果。

    一种基于多维度用户画像的电商用户行为数据模拟的方法及系统

    公开(公告)号:CN113487117B

    公开(公告)日:2023-10-17

    申请号:CN202110957980.4

    申请日:2021-08-20

    Abstract: 本发明涉及一种基于多维度用户画像的电商用户行为数据模拟的方法及系统,包括以下步骤:步骤1:构建电商平台基础数据集;电商平台基础数据集是指包括电商平台各种商品信息的集合,步骤2:构建商品间的关联规则表;商品间的关联规则是用来描述两个或多个商品之间的关联性;步骤3:构建多维度用户画像;先设计一个多维度用户画像框架,再利用该多维度用户画像框架依据使用者的不同需求实例出具体的多维度用户画像;步骤4:模拟生成电商用户行为数据;包括用户基本信息、用户购物数据和用户浏览记录数据。本发明能够快速模拟出大量电商用户的行为数据,大大降低了大数据教学和科研人员获取实验数据的难度。

    一种基于多维度用户画像的电商用户行为数据模拟的方法及系统

    公开(公告)号:CN113487117A

    公开(公告)日:2021-10-08

    申请号:CN202110957980.4

    申请日:2021-08-20

    Abstract: 本发明涉及一种基于多维度用户画像的电商用户行为数据模拟的方法及系统,包括以下步骤:步骤1:构建电商平台基础数据集;电商平台基础数据集是指包括电商平台各种商品信息的集合,步骤2:构建商品间的关联规则表;商品间的关联规则是用来描述两个或多个商品之间的关联性;步骤3:构建多维度用户画像;先设计一个多维度用户画像框架,再利用该多维度用户画像框架依据使用者的不同需求实例出具体的多维度用户画像;步骤4:模拟生成电商用户行为数据;包括用户基本信息、用户购物数据和用户浏览记录数据。本发明能够快速模拟出大量电商用户的行为数据,大大降低了大数据教学和科研人员获取实验数据的难度。

Patent Agency Ranking