公开(公告)号：CN111858003B

公开(公告)日：2021-05-28

申请号：CN202010687234.3

申请日：2020-07-16

Applicant: 山东大学 ,  国网宁夏电力有限公司营销服务中心(国网宁夏电力有限公司计量中心)

Inventor： 史玉良 ,  张建林 ,  王心鹤 ,  孔凡玉 ,  梁飞 ,  马智强

IPC: G06F9/48

Abstract: 本发明属于大数据信息处理领域，提供了一种Hadoop最优参数评估方法及装置。其中，Hadoop最优参数评估方法，包括接收客户端传送来的作业，构建作业序列，确定作业序列中作业数量；根据作业序列中作业数量，从方案数据库内调取相匹配的调优方案来评估Hadoop参数，得到所有作业完成时间最短的Hadoop最优配置参数并输出至Hadoop集群服务器；其中，方案数据库内预存有针对单个作业的第一调优方案和针对非单个作业的第二调优方案。

公开(公告)号：CN111858003A

公开(公告)日：2020-10-30

申请号：CN202010687234.3

申请日：2020-07-16

Applicant: 山东大学 ,  国网宁夏电力有限公司营销服务中心(国网宁夏电力有限公司计量中心)

Inventor： 史玉良 ,  张建林 ,  王心鹤 ,  孔凡玉 ,  梁飞 ,  马智强

IPC: G06F9/48

Abstract: 本发明属于大数据信息处理领域，提供了一种Hadoop最优参数评估方法及装置。其中，Hadoop最优参数评估方法，包括接收客户端传送来的作业，构建作业序列，确定作业序列中作业数量；根据作业序列中作业数量，从方案数据库内调取相匹配的调优方案来评估Hadoop参数，得到所有作业完成时间最短的Hadoop最优配置参数并输出至Hadoop集群服务器；其中，方案数据库内预存有针对单个作业的第一调优方案和针对非单个作业的第二调优方案。