-
公开(公告)号:CN109992404B
公开(公告)日:2022-06-10
申请号:CN201711494651.0
申请日:2017-12-31
Applicant: 中国移动通信集团湖北有限公司 , 中国移动通信集团公司
Abstract: 本发明实施例公开了一种基于神经网络算法的集群计算资源调度方法、装置、设备及介质,该方法包括:提交任务;预处理任务,获取预处理信息;提取数据特征、任务特征、集群计算资源特征;运用神经网络算法计算预处理信息、数据特征、任务特征和集群计算资源特征,生成资源分配信息;根据资源分配信息运行任务,获取任务资源监控,日志特征提取,准确率验证;根据任务资源监控,日志特征提取,准确率验证训练神经网络模型;再次提交任务,多次重复以上操作,经训练后的神经网络模型计算后输出最终的集群计算资源调度方案。本发明实施例实现智能化、自动化的方法,提高了设备利用率和数据分析效率,降低了数据中心的能源消耗。
-
公开(公告)号:CN109992404A
公开(公告)日:2019-07-09
申请号:CN201711494651.0
申请日:2017-12-31
Applicant: 中国移动通信集团湖北有限公司 , 中国移动通信集团公司
Abstract: 本发明实施例公开了一种基于神经网络算法的集群计算资源调度方法、装置、设备及介质,该方法包括:提交任务;预处理任务,获取预处理信息;提取数据特征、任务特征、集群计算资源特征;运用神经网络算法计算预处理信息、数据特征、任务特征和集群计算资源特征,生成资源分配信息;根据资源分配信息运行任务,获取任务资源监控,日志特征提取,准确率验证;根据任务资源监控,日志特征提取,准确率验证训练神经网络模型;再次提交任务,多次重复以上操作,经训练后的神经网络模型计算后输出最终的集群计算资源调度方案。本发明实施例实现智能化、自动化的方法,提高了设备利用率和数据分析效率,降低了数据中心的能源消耗。
-
公开(公告)号:CN107704473A
公开(公告)日:2018-02-16
申请号:CN201610648329.8
申请日:2016-08-09
Applicant: 中国移动通信集团四川有限公司 , 中国移动通信集团公司
IPC: G06F17/30
CPC classification number: G06F17/30091 , G06F17/30194
Abstract: 本发明实施例公开了一种数据处理方法,该方法包括:对入口文件进行业务处理时,生成多个断点数据,及分别确定各所述断点数据的类型,将各所述断点数据分别发送至与各所述断点数据的类型对应的存储系统中进行存储。本发明实施例还同时公开了一种数据处理装置。
-
公开(公告)号:CN102546730B
公开(公告)日:2016-08-03
申请号:CN201010623339.9
申请日:2010-12-30
Applicant: 中国移动通信集团公司
Inventor: 高丹 , 徐萌 , 邓超 , 江志雄 , 罗治国 , 孙少陵 , 陶涛 , 段云峰 , 何鸿凌 , 谢帆 , 赵静 , 张韬 , 吴明 , 励崖卉 , 王之恒 , 邓青 , 周福伟
IPC: H04L29/08
Abstract: 本发明公开了一种数据处理方法、装置及系统。其中数据处理方法包括:云计算平台将获取的数据进行处理,并将处理后的数据发送至数据处理服务器;所述数据处理服务器将所述云计算平台处理后的数据传输到数据仓库中。本发明的数据处理方法、装置及系统,通过云计算平台对数据进行抽取、处理,数据处理服务器将处理后的数据传输到数据仓库中,提高数据处理量,实现了海量数据处理,并且不会对现有架构进行太多改动,保持云平台的相对独立性,易于改造。云计算平台成本低、投资小、利旧率高,可以缓解系统扩容压力,降低系统成本。
-
公开(公告)号:CN102546730A
公开(公告)日:2012-07-04
申请号:CN201010623339.9
申请日:2010-12-30
Applicant: 中国移动通信集团公司
Inventor: 高丹 , 徐萌 , 邓超 , 江志雄 , 罗治国 , 孙少陵 , 陶涛 , 段云峰 , 何鸿凌 , 谢帆 , 赵静 , 张韬 , 吴明 , 励崖卉 , 王之恒 , 邓青 , 周福伟
IPC: H04L29/08
Abstract: 本发明公开了一种数据处理方法、装置及系统。其中数据处理方法包括:云计算平台将获取的数据进行处理,并将处理后的数据发送至数据处理服务器;所述数据处理服务器将所述云计算平台处理后的数据传输到数据仓库中。本发明的数据处理方法、装置及系统,通过云计算平台对数据进行抽取、处理,数据处理服务器将处理后的数据传输到数据仓库中,提高数据处理量,实现了海量数据处理,并且不会对现有架构进行太多改动,保持云平台的相对独立性,易于改造。云计算平台成本低、投资小、利旧率高,可以缓解系统扩容压力,降低系统成本。
-
-
-
-