公开(公告)号：CN104850401A

公开(公告)日：2015-08-19

申请号：CN201510229869.8

申请日：2015-05-07

Applicant: 南京大学

Inventor： 唐杰 ,  包念原 ,  武港山

IPC: G06F9/44 ,  G06F9/45 ,  G06F17/30

Abstract: 一种用PVFS替代HADOOP存储模块的方法，使用并行虚拟文件系统PVFS代替HADOOP的分布式文件系统HDFS模块，本发明实现了从HADOOP到PVFS的连接，主要包括三个模块：PVFS程序接口、HADOOP-PVFS模块与JNI连接模块。本发明旨在选取一种更适合的分布式文件系统作为HADOOP的存储模块来代替HDFS，以减少HADOOP在文件操作方面的开销，提升HADOOP在MapReduce计算，尤其是数据密集型计算时的表现。

公开(公告)号：CN104850401B

公开(公告)日：2018-04-24

申请号：CN201510229869.8

申请日：2015-05-07

Applicant: 南京大学

Inventor： 唐杰 ,  包念原 ,  武港山

IPC: G06F9/44 ,  G06F9/455 ,  G06F17/30

Abstract: 一种用PVFS替代HADOOP存储模块的方法，使用并行虚拟文件系统PVFS代替HADOOP的分布式文件系统HDFS模块，本发明实现了从HADOOP到PVFS的连接，主要包括三个模块：PVFS程序接口、HADOOP‑PVFS模块与JNI连接模块。本发明旨在选取一种更适合的分布式文件系统作为HADOOP的存储模块来代替HDFS，以减少HADOOP在文件操作方面的开销，提升HADOOP在MapReduce计算，尤其是数据密集型计算时的表现。