-
公开(公告)号:CN116681112A
公开(公告)日:2023-09-01
申请号:CN202310526213.7
申请日:2023-05-06
Applicant: 山东省计算中心(国家超级计算济南中心) , 齐鲁工业大学(山东省科学院)
IPC: G06N3/0495 , G06N3/082 , G06N3/0985
Abstract: 本发明属于深度学习的数据分析工作流领域,提供了一种基于Ray的云边协同数据分析工作流优化方法及系统。该方法包括,获取数据集,基于Ray,采用数据集在终端设备上训练第一学生模型和第一教师模型,得到蒸馏训练方法;将数据集和蒸馏训练方法上传至云端,设置并行工作器的数量和超参数,采用数据集和蒸馏训练方法在云端上训练第二学生模型和第二教师模型,得到训练好的第二学生模型,并将训练好的第二学生模型部署到终端。本发明采用优化的模型压缩方法对云端训练好的大模型进行压缩操作获得小模型,将小模型一键部署到资源受限的终端设备上。
-
公开(公告)号:CN110825520B
公开(公告)日:2023-08-29
申请号:CN201910994328.2
申请日:2019-10-18
Applicant: 山东省计算中心(国家超级计算济南中心)
IPC: G06F9/50 , H04L41/0896
Abstract: 本发明的实现资源高效利用的集群极速弹性伸缩方法,智能伸缩补偿过程包括:步骤1:创建智能弹性伸缩补偿模块IACM和补偿队列;步骤2:判断服务集群在未来一段时间是否需要增加节点;步骤3:把Pod资源,加入到补偿队列中;步骤4:设置补偿队列的优先级;步骤5:对Pod资源回收操作;步骤6:维护Pod资源;步骤7:周期性判断。本发明的集群极速弹性伸缩方法,服务集群在资源需求增加时,新的副本已经存在“补偿队列”中,直接拉起就可以加入集群,节省了建新副本的时间,实现了更加极致、快速的扩展集群节点资源的目标。当资源池资源匮乏时,进行资源调节,对资源占比较大致无法调节,可进行驱逐或杀死任务,以实现资源调度和资源伸缩。
-
公开(公告)号:CN115879569B
公开(公告)日:2023-05-23
申请号:CN202310214205.9
申请日:2023-03-08
Applicant: 齐鲁工业大学(山东省科学院) , 山东省计算中心(国家超级计算济南中心)
IPC: G06N20/00 , G06F18/25 , G16Y40/10 , G06N3/0455 , G06N3/084
Abstract: 本发明提出了一种IoT观测数据的在线学习方法及系统,涉及数据处理技术领域,根据获取的初始时序观测数据,初始化在线深度学习模型;实时获取传感器生成的时序观测数据,根据时序观测数据形成输入数据流;在线深度学习模型处理输入数据流,生成最终预测结果;在处理输入数据流的过程中,对输入数据流进行即时学习,实时动态更新在线深度学习模型;即时学习,是基于数据流的均值和方差,学习数据分布,构造准正态分布,重构新的样本,实现变分注意力网络,基于分布差异、重构差异和推理差异,进行模型的动态调整;本发明学习不同隐藏层之间的隐藏信息,提高模型推理的准确性,同时通过在线学习,对不同隐藏层间的参数进行动态调整。
-
公开(公告)号:CN115861646A
公开(公告)日:2023-03-28
申请号:CN202211466939.8
申请日:2022-11-22
Applicant: 山东省计算中心(国家超级计算济南中心)
IPC: G06V10/44 , G06V10/80 , G06V10/764 , G06V10/82 , G06N3/0464 , G06N3/048 , G06N3/08
Abstract: 本发明提出了一种基于结构重参数化的轻量级目标检测方法及系统,包括:获取待目标检测的数据样本并进行预处理;将预处理后的数据样本输入至网络推理模型中输出目标检测结果,所述网络推理模型为是由训练好的多分支网络训练模块采用结构重参数转换成的单路结构的网络模型,其中,结构重参数转换的方式为分支合并和卷积序列合并。通过结构重参数化方式解耦训练和推理阶段,在训练阶段采用多分支结构获取更多语义信息和特征表示,迭代更新权重参数,同时在推理阶段采用带有训练权重信息的单路结构,在加快模型的推理速度的同时保证模型精度。
-
公开(公告)号:CN115293662A
公开(公告)日:2022-11-04
申请号:CN202211230749.6
申请日:2022-10-10
Applicant: 山东省计算中心(国家超级计算济南中心)
Abstract: 本发明提出了融合并行与分布式的海洋观测数据智能计算方法及系统,涉及海洋观测时序数据流智能计算领域,实时获取每个通道的海洋观测数据流存储到分布式集群;对数据流进行乱序、去重和缺失预处理;基于预处理后的海洋观测数据流,采用超算MPI并行训练模型,进行多通道在线学习模型训练,得到每个通道的最新海洋观测数据智能计算模型;基于Flink分布式流处理系统,对每个通道不断流入的海洋观测数据,选择通道对应的最新海洋观测数据智能计算模型,进行实时推理与预测;本发明适合多通道多任务的应用场景,有效支持流式数据的在线学习与推理任务以及高通量传感器数据的管理,实现数据的多通道计算模型的快速迭代升级以及数据的实时推理。
-
公开(公告)号:CN114387190B
公开(公告)日:2022-08-16
申请号:CN202210285072.X
申请日:2022-03-23
Applicant: 山东省计算中心(国家超级计算济南中心)
Abstract: 本发明涉及数字图像处理技术领域,提供了一种基于复杂环境下的自适应图像增强方法及系统,包括采集原始水下图像并进行预处理;利用RGB直方图统计预处理后的水下图像的RGB通道信息数据集;基于RGB通道信息数据集,利用训练好的水下图像退化分类模型得到不同退化程度的图像样本;基于不同退化程度的图像样本,利用训练好的不同退化程度的水下修复网络进行修复,得到修复后的水下图像;本发明相较于现有的方法能够更好的解决在不同时间节点出现的不同退化情况,由于针对不同退化程度调用不同修复模型,所以本发明对于水下退化图像的修复效果更好更自然。
-
公开(公告)号:CN114385619A
公开(公告)日:2022-04-22
申请号:CN202210285171.8
申请日:2022-03-23
Applicant: 山东省计算中心(国家超级计算济南中心)
IPC: G06F16/215 , G06F16/2458 , G06N3/04
Abstract: 本发明属于基于特定计算模型的计算机系统领域,提供了一种多通道海洋观测时序标量数据缺失值预测方法及系统,获取带有海洋缺失值的海洋观测时序标量数据;基于所述海洋观测时序标量数据,采用TA‑RNN模型,得到海洋缺失值预测结果;所述TA‑RNN模型包括卷积注意模块、空间注意模块和时间注意模块,所述卷积注意模块用于将所述海洋观测时序标量数据进行细化;所述空间注意模块用于捕获细化后的所述海洋观测时序标量数据的动态空间相关性;所述时间注意模块用于捕获空间注意模块输出数据中不同时间间隔之间的动态时间相关性。
-
公开(公告)号:CN114385233A
公开(公告)日:2022-04-22
申请号:CN202210291811.6
申请日:2022-03-24
Applicant: 山东省计算中心(国家超级计算济南中心)
Abstract: 本申请属于计算机系统技术领域,提供了一种跨平台自适应数据处理工作流系统及方法,包括客户端,被配置为基于应用程序编程接口调用和画布式拖拽构建工作流,将所构建的工作流通过Istio安全网关发送到服务端;服务端,被配置为基于服务器接口接收客户端所构建的工作流,基于运算符计算平台适配器进行工作流逻辑运算符的计算环境优化适配。本申请采用基于Kubernetes的微服务架构,采用Istio安全网关作为客户端与服务端的唯一通道,实现跨平台自适应数据工作流的处理。
-
公开(公告)号:CN111710365B
公开(公告)日:2022-04-08
申请号:CN202010525374.0
申请日:2020-06-10
Applicant: 山东省计算中心(国家超级计算济南中心)
IPC: G16B40/00 , G06F40/247 , G06F16/36
Abstract: 本发明基于本体的蛋白质/基因同义词表构建方法,包括:a).数据源Uniprot、BioGRID和NCBI Gene的获取;b).数据文件的分割;c).上层本体的建立;d).Uniprot‑Swissprot向上层本体的映射和融合;e).BioGRID向上层本体的映射和融合;f).NCBI Gene向上层本体的映射和融合;g).同义词的去重。本发明的蛋白质/基因同义词表构建方法,建立了同义词规模上更全面、准确度上更可靠、分类信息上更细致的蛋白质/基因同义词表,为进行更高效、准确的文献数据挖掘提供了前提保证,是生物医药专家进行科研发现的有力辅助。
-
公开(公告)号:CN113963251A
公开(公告)日:2022-01-21
申请号:CN202111421605.4
申请日:2021-11-26
Applicant: 山东省计算中心(国家超级计算济南中心)
IPC: G06V20/05 , G06V10/764 , G06V10/774 , G06V10/82 , G06K9/62 , G06N3/04 , G06T3/40 , G06T7/11
Abstract: 本发明公开了海洋生物检测方法、系统和设备,海洋生物检测方法,包括以下步骤:获取ImageNet数据集、海洋生物细粒度图像分类数据集以及拍摄得到的海洋生物数据集;使用所述ImageNet数据集对预设分类网络进行训练,得到预训练模型;使用所述海洋生物细粒度图像分类数据集对所述预训练模型进行训练得到训练模型;选取部分所述海洋生物数据集进行标注得到标注数据集;使用预设算法对标注数据集进行强化;使用训练模型结合多尺度检测网络和位置注意力机制基于强化后的标注数据集进行训练,得到海洋生物检测模型;输入未被标注的自拍摄海洋生物数据集,输出检测信息,能够准确的检测出图像或视频中存在的海洋生物种类。
-
-
-
-
-
-
-
-
-