-
公开(公告)号:CN118760539A
公开(公告)日:2024-10-11
申请号:CN202411252587.5
申请日:2024-09-09
Applicant: 山东省计算中心(国家超级计算济南中心) , 齐鲁工业大学(山东省科学院)
IPC: G06F9/54 , G06F11/14 , G06F15/173
Abstract: 本发明涉及基于新一代神威超级计算机的多进程协同数据收集方法,属于电子信息技术领域;包括:处理器内部通过小规模的树形通信,将处理器内部的六个进程的数据,全部收集到处理器中的局部根节点,实现数据的第一次打包操作;建立偏移量数组备份,用于在消息传递的最顶层确定要申请的缓存区的大小,交换彼此收集数据的大小信息;将整个处理器中第一次打包操作后汇集的数据依次存放到自己的消息缓冲区中,按需取用,节省缓冲区,实现数据的二次打包操作,以减少进程间消息通信次数,减少了进程间通信耗时。
-
公开(公告)号:CN118606293A
公开(公告)日:2024-09-06
申请号:CN202410639776.1
申请日:2024-05-22
Applicant: 山东省计算中心(国家超级计算济南中心) , 齐鲁工业大学(山东省科学院)
Abstract: 本发明提出了一种跨域异构存储系统的数据迁移方法及系统,将改进的蚁群算法来对数据迁移路径优化问题进行求解,根据路径的传输成功率动态调整信息素浓度,使其与传输成功率成正比,即传输成功率越高的路径,其对应的信息素浓度越高,从而增加选择该路径的概率;根据传输数据量以及目标节点的负载情况动态调整启发函数值,使其与目标节点的负载成反比,负载越重的节点,其对应路径的启发函数值越低,以降低选择该路径的概率,从而实现存储系统的负载均衡,提高数据迁移的效率和质量。
-
公开(公告)号:CN118568681A
公开(公告)日:2024-08-30
申请号:CN202410977217.1
申请日:2024-07-22
Applicant: 齐鲁工业大学(山东省科学院) , 山东省计算中心(国家超级计算济南中心)
IPC: G06F18/27 , G06F18/15 , G06F18/213 , G06F18/21 , G06N3/0455 , G06N3/084 , G06N3/0985 , G06N3/0475 , G06N3/094 , G06F30/27 , G06Q10/08 , G06Q50/06 , G06N3/048 , G06F123/02 , G06F119/06
Abstract: 本发明涉及一种基于深度学习的制冷系统能耗预测方法及系统,属于机器学习算法技术领域,包括:构建并训练能耗预测模型;将待预测时间序列预处理后,通过训练好的能耗预测模型实现制冷系统能耗预测;其中,能耗预测模型中,将包括原始时间序列数据和目标时间序列数据的序列数据作为输入序列,处理转换为隐藏表示,以捕捉序列中的模式和特征;捕捉相关信息,获得对能耗的预测值。本发明能耗预测模型对于制冷系统能耗预测精度高,可以有效的指导系统运行,避免能源的浪费和不必要的能耗。本发明能耗预测模型泛化性强,适用于高温库和低温库能耗预测,能够更好地应用于实际场景中,为决策提供可靠的支持。
-
公开(公告)号:CN118503229A
公开(公告)日:2024-08-16
申请号:CN202410961286.3
申请日:2024-07-18
Applicant: 山东省计算中心(国家超级计算济南中心) , 齐鲁工业大学(山东省科学院)
IPC: G06F16/21 , G06F16/22 , G06F16/2455 , G06F16/27
Abstract: 本发明涉及一种面向多源异构数据的Hudi数据摄取方法及系统,属于数据处理技术领域,包括:发布数据入湖任务:上传入湖任务的相关信息,发布入湖任务;执行数据入湖任务:采用Apache Hudi作为数据湖架构,通过数据入湖处理引擎将原始数据从数据源传输到数据湖中进行存储,同时采集原始数据的元数据信息,并将原始数据的元数据信息持久化存储到元数据库中;构建数据资源目录:根据采集的元数据以及元数据在数据湖中的相关信息构建数据湖的数据资源目录。本发明通过网关架构对所有数据流进行集中管理,简化来自不同源的数据集成过程,降低系统的复杂性和总体拥有成本。
-
公开(公告)号:CN118245117A
公开(公告)日:2024-06-25
申请号:CN202410676339.7
申请日:2024-05-29
Applicant: 山东省计算中心(国家超级计算济南中心) , 齐鲁工业大学(山东省科学院)
IPC: G06F9/38
Abstract: 本发明涉及基于新一代申威众核处理器多分支自动分析并行优化方法,属于电子信息的技术领域;包括:对源码进行预处理,仅保留源码中的主要特征信息;对保留的源码中的主要特征信息进行分析,识别并标记应用程序中的热点;通过标签法对热点进行分类,并将热点以任务的形式散播到各从核块中;根据计算量的大小,选择不同的从核块,并自动通过不同方法处理具有不同特征的热点程序段。本发明考虑面向应用程序进行并行优化时,需要进行大量工作对程序进行标记分析,耗费很多资源,所以需要一种自动化并行工具,对程序进行分析和并行优化。因此本发明减少了并行编程的难度,提高了并行编程的效率。本发明具有明显的加速效果,且能很好的满足用户的需求。
-
公开(公告)号:CN118132144A
公开(公告)日:2024-06-04
申请号:CN202410320361.8
申请日:2024-03-20
Applicant: 齐鲁工业大学(山东省科学院) , 山东省计算中心(国家超级计算济南中心)
IPC: G06F9/22 , G06F9/445 , G06F18/20 , G06F18/27 , G06F18/2135 , G06F18/2415
Abstract: 本发明公开了一种基于超算平台微架构的参数选择方法及系统,属于处理器技术领域。包括:提取超算平台运行时的硬件微观结构参数和本地计算特征参数,并进行预处理,获取第一参数集;对第一参数集进行向后逐步回归,基于预设的判断准则,通过协方差矩阵自适应演化优化特征选择过程,获取第二参数集;根据第二参数集中数据之间的相关性,设置相关性阈值;根据相关性阈值,对第二参数集进行二次分析,获取影响显著参数集。能够对超算平台作业运行时间有显著影响的参数进行有效提取,了解作业运行时存在的性能现象,并且能够及时发现出现异常的参数信息和推测导致性能异常的原因;解决现有超算平台运行难以监测评估的问题。
-
公开(公告)号:CN117707741B
公开(公告)日:2024-05-24
申请号:CN202410159989.4
申请日:2024-02-05
Applicant: 山东省计算中心(国家超级计算济南中心) , 齐鲁工业大学(山东省科学院)
Abstract: 本发明涉及高性能计算的作业调度技术领域,公开了基于空间位置的能耗均衡调度方法及系统;其中方法,包括:获取高性能计算机房中机柜的功耗数据和空间位置数据,以及机柜中计算节点的功耗数据和空间位置数据;将获取的数据映射到二维空间维度上,得到机柜位置与功耗关系;根据机柜位置与功耗关系和作业调度策略,筛选可用于执行作业任务的计算节点;将待调度作业,调度至已筛选出来的一个或多个计算节点;每轮调度结束后,对能耗异常的计算节点进行调度调优。可以有效地均衡集群整体的能耗并且避免机房中热点的产生。
-
公开(公告)号:CN117688944B
公开(公告)日:2024-05-24
申请号:CN202410128833.X
申请日:2024-01-31
Applicant: 山东省计算中心(国家超级计算济南中心) , 齐鲁工业大学(山东省科学院)
IPC: G06F40/30 , G06F40/284 , G06N3/0442 , G06N3/084 , G06N3/09
Abstract: 本发明提出了基于多粒度卷积特征融合的中文情感分析方法及系统,涉及自然语言处理领域,具体方案包括:对待分析的中文文本数据进行分词处理,得到词向量;将所述词向量分别输入到多粒度卷积层和L‑BiLSTM层,得到局部情感特征和全局情感特征;所述局部情感特征和全局情感特征经过特征融合层和缩放点积自注意力层后,得到文本情感特征;基于文本情感特征,通过寻找情感标签转移概率优化情感标签,得到最优的情感分类结果;本发明在传统的BiLSTM网络中引入长度门,动态地调整输出序列的长度,得到L‑BiLSTM网络,综合Bert模型和多粒度卷积网络,实现对文本情感特征的高效保留和高效提取,显著提高了中文情感分析的准确性。
-
公开(公告)号:CN117472448B
公开(公告)日:2024-03-26
申请号:CN202311829650.2
申请日:2023-12-28
Applicant: 山东省计算中心(国家超级计算济南中心) , 齐鲁工业大学(山东省科学院)
IPC: G06F9/38 , G06F15/163
Abstract: 本发明涉及一种申威众核处理器从核簇加速并行方法、设备及介质,属于电子信息技术领域;包括:应用程序优化阶段:对应用程序进行优化;输入导入阶段:将各从核所需的输入条件从主存储器传入LDM连续共享空间;计算与RMA传输阶段:计算从核即刻开始执行计算任务;从核将计算结果传输到主存储器时,由汇总从核将计算结果读取到本地LDM;汇总与整理阶段:汇总从核读取完计算从核此时的计算结果后进行整理;DMA传输阶段:将计算结果传输至主存储器中;重复执行上述阶段直到当前迭代次数达到预先设定的迭代总次数。本发明提供了适合处理以上情况的多种优化方法,拥有明显的加速效果,减少了使用难度,提高了用户体验。
-
公开(公告)号:CN117707785A
公开(公告)日:2024-03-15
申请号:CN202311870609.X
申请日:2023-12-28
Applicant: 山东省计算中心(国家超级计算济南中心) , 齐鲁工业大学(山东省科学院)
Abstract: 本发明提出了面向浅水方程的pcg申威众核优化方法及系统,涉及数据处理技术领域。包括读取系数矩阵和右端项,设定基本条件;在管理核心中,基于整行对系数矩阵进行数据划分,在行方向上进行均匀分块,得到分块数据;对计算核心的LDM均匀划分两个分区,将分块数据分多次传输至计算核心,两个分区并行实现传输和计算过程;将同一核组内各计算核心计算后的数据进行求和,放入共享内存区域中,由指定计算核心再次求和后比较残差,判断是否满足残差下降要求。本发明使用基于行的划分方法、两级并行、避免通信等方法加快计算速度,针对浅水方程提供了高效的对角预条件PCG在神威超级计算机上的实现方式。
-
-
-
-
-
-
-
-
-