公开(公告)号：CN107102824A

公开(公告)日：2017-08-29

申请号：CN201710382513.7

申请日：2017-05-26

Applicant: 华中科技大学

Inventor： 李瑞轩 ,  黄逸伟 ,  辜希武 ,  李玉华 ,  吴文哲 ,  薛正元 ,  杨琪 ,  王号召

IPC: G06F3/06

Abstract: 本发明公开了一种基于存储和加速优化的Hadoop异构方法和系统，属于分布式计算领域。本发明技术方案针对数据处理需求将存储介质分为三类：固态存储介质、普通存储介质和高密度存储介质，为不同类型的数据找到最适合的存储方式；同时将需要提升计算性能的加速应用定向到有特定算法的FPGA加速器或GPU加速器上完成计算，以提升应用的处理性能，并且FPGA和GPU加速器的算法功能以及布局可以进行静态切换。本发明还实现了一种基于存储和加速优化的Hadoop异构系统。本发明技术方案提高了整个集群的读写性能、应用任务的执行性能和加速器件的资源利用率。

公开(公告)号：CN107102824B

公开(公告)日：2019-08-30

申请号：CN201710382513.7

申请日：2017-05-26

Applicant: 华中科技大学

Inventor： 李瑞轩 ,  黄逸伟 ,  辜希武 ,  李玉华 ,  吴文哲 ,  薛正元 ,  杨琪 ,  王号召

IPC: G06F3/06

Abstract: 本发明公开了一种基于存储和加速优化的Hadoop异构方法和系统，属于分布式计算领域。本发明技术方案针对数据处理需求将存储介质分为三类：固态存储介质、普通存储介质和高密度存储介质，为不同类型的数据找到最适合的存储方式；同时将需要提升计算性能的加速应用定向到有特定算法的FPGA加速器或GPU加速器上完成计算，以提升应用的处理性能，并且FPGA和GPU加速器的算法功能以及布局可以进行静态切换。本发明还实现了一种基于存储和加速优化的Hadoop异构系统。本发明技术方案提高了整个集群的读写性能、应用任务的执行性能和加速器件的资源利用率。