-
公开(公告)号:CN114741161B
公开(公告)日:2025-05-02
申请号:CN202210487700.2
申请日:2022-05-06
Applicant: 山东省计算中心(国家超级计算济南中心) , 齐鲁工业大学(山东省科学院)
IPC: G06F9/455
Abstract: 本发明涉及一种基于混合集群的HPC作业集群感知方法,包括:A、获取传统虚拟化云集群环境和容器云集群环境作业运行日志记录信息;B、初构建、处理传统虚拟化云集群环境和容器云集群环境下的作业运行数据集;C、训练得到基于传统虚拟化云集群环境和容器云集群环境两种环境下的基于RFR随机森林回归算法的预测模型;D、根据用户提交的作业需求信息,预测模型给予运行时间、CPU使用率、内存使用率的预测;E、将作业运行结果信息对提交的作业进行集群感知模型的处理,最终形成HPC作业集群节点感知方法。本发明建立两种环境下的预测模型,并以预测结果为依据进行集群节点感知,达到了根据作业需求自动感知最佳集群节点的效果。
-
公开(公告)号:CN114741161A
公开(公告)日:2022-07-12
申请号:CN202210487700.2
申请日:2022-05-06
Applicant: 山东省计算中心(国家超级计算济南中心)
IPC: G06F9/455
Abstract: 本发明涉及一种基于混合集群的HPC作业集群感知方法,包括:A、获取传统虚拟化云集群环境和容器云集群环境作业运行日志记录信息;B、初构建、处理传统虚拟化云集群环境和容器云集群环境下的作业运行数据集;C、训练得到基于传统虚拟化云集群环境和容器云集群环境两种环境下的基于RFR随机森林回归算法的预测模型;D、根据用户提交的作业需求信息,预测模型给予运行时间、CPU使用率、内存使用率的预测;E、将作业运行结果信息对提交的作业进行集群感知模型的处理,最终形成HPC作业集群节点感知方法。本发明建立两种环境下的预测模型,并以预测结果为依据进行集群节点感知,达到了根据作业需求自动感知最佳集群节点的效果。
-
公开(公告)号:CN113535670A
公开(公告)日:2021-10-22
申请号:CN202110787216.7
申请日:2021-07-13
Applicant: 山东省计算中心(国家超级计算济南中心)
IPC: G06F16/188 , G06F16/174 , G06F16/13 , G06F16/172 , G06F9/455
Abstract: 本发明涉及一种虚拟化资源镜像存储系统及其实现方法,包括FUSE文件系统、镜像重复数据删除系统;FUSE文件系统接收来自若干镜像服务的R/W请求,将读写信息发送给镜像重复数据删除系统处理,处理完成后,所述FUSE文件系统将数据存储到磁盘或从磁盘中读取数据。本发明实现了虚拟化资源镜像的高效存储,解决了虚拟机镜像与容器镜像统一存储的管理问题,并在一定程度上减轻了镜像数据日益增多导致的存储压力大等问题。
-
公开(公告)号:CN113487117B
公开(公告)日:2023-10-17
申请号:CN202110957980.4
申请日:2021-08-20
Applicant: 山东省计算中心(国家超级计算济南中心)
IPC: G06Q10/04 , G06Q30/0601
Abstract: 本发明涉及一种基于多维度用户画像的电商用户行为数据模拟的方法及系统,包括以下步骤:步骤1:构建电商平台基础数据集;电商平台基础数据集是指包括电商平台各种商品信息的集合,步骤2:构建商品间的关联规则表;商品间的关联规则是用来描述两个或多个商品之间的关联性;步骤3:构建多维度用户画像;先设计一个多维度用户画像框架,再利用该多维度用户画像框架依据使用者的不同需求实例出具体的多维度用户画像;步骤4:模拟生成电商用户行为数据;包括用户基本信息、用户购物数据和用户浏览记录数据。本发明能够快速模拟出大量电商用户的行为数据,大大降低了大数据教学和科研人员获取实验数据的难度。
-
公开(公告)号:CN113535670B
公开(公告)日:2022-11-11
申请号:CN202110787216.7
申请日:2021-07-13
Applicant: 山东省计算中心(国家超级计算济南中心)
IPC: G06F16/188 , G06F16/174 , G06F16/13 , G06F16/172 , G06F9/455
Abstract: 本发明涉及一种虚拟化资源镜像存储系统及其实现方法,包括FUSE文件系统、镜像重复数据删除系统;FUSE文件系统接收来自若干镜像服务的R/W请求,将读写信息发送给镜像重复数据删除系统处理,处理完成后,所述FUSE文件系统将数据存储到磁盘或从磁盘中读取数据。本发明实现了虚拟化资源镜像的高效存储,解决了虚拟机镜像与容器镜像统一存储的管理问题,并在一定程度上减轻了镜像数据日益增多导致的存储压力大等问题。
-
公开(公告)号:CN113487117A
公开(公告)日:2021-10-08
申请号:CN202110957980.4
申请日:2021-08-20
Applicant: 山东省计算中心(国家超级计算济南中心)
Abstract: 本发明涉及一种基于多维度用户画像的电商用户行为数据模拟的方法及系统,包括以下步骤:步骤1:构建电商平台基础数据集;电商平台基础数据集是指包括电商平台各种商品信息的集合,步骤2:构建商品间的关联规则表;商品间的关联规则是用来描述两个或多个商品之间的关联性;步骤3:构建多维度用户画像;先设计一个多维度用户画像框架,再利用该多维度用户画像框架依据使用者的不同需求实例出具体的多维度用户画像;步骤4:模拟生成电商用户行为数据;包括用户基本信息、用户购物数据和用户浏览记录数据。本发明能够快速模拟出大量电商用户的行为数据,大大降低了大数据教学和科研人员获取实验数据的难度。
-
-
-
-
-