公开(公告)号：CN103533058B

公开(公告)日：2017-02-08

申请号：CN201310486601.3

申请日：2013-10-17

Applicant: 南京大学镇江高新技术研究院

Inventor： 卢义婉 ,  叶保留 ,  陆桑璐

IPC: H04L29/08 ,  H04L12/26

Abstract: 本发明公开了一种面向HDFS/Hadoop存储集群的资源监控系统及方法，该系统在存储集群中增加了状态参考信息收集模块、心跳协议优化模块、参考信息处理模块。状态信息收集模块部署在HDFS存储的数据节点上，支持对多维资源信息的实时收集与管理。心跳协议优化模块负责将节点参考信息传送到名称节点，通过优化心跳传输协议，支持多维信息的推送。参考信息处理模块在名称节点端实现，通过优化相关数据结构，处理数据节点传送过来的状态信息，名称节点端实时了解数据节点提供存储访问服务的性能状况。本发明弥补了HDFS不能对影响数据读写性能的状态信息监控的缺陷，动态收集数据节点实时信息，并将信息数据传输到名称节点。

公开(公告)号：CN103533058A

公开(公告)日：2014-01-22

申请号：CN201310486601.3

申请日：2013-10-17

Applicant: 南京大学镇江高新技术研究院

Inventor： 卢义婉 ,  叶保留 ,  陆桑璐

IPC: H04L29/08 ,  H04L12/26

Abstract: 本发明公开了一种面向HDFS/Hadoop存储集群的资源监控系统及方法，该系统在存储集群中增加了状态参考信息收集模块、心跳协议优化模块、参考信息处理模块。状态信息收集模块部署在HDFS存储的数据节点上，支持对多维资源信息的实时收集与管理。心跳协议优化模块负责将节点参考信息传送到名称节点，通过优化心跳传输协议，支持多维信息的推送。参考信息处理模块在名称节点端实现，通过优化相关数据结构，处理数据节点传送过来的状态信息，名称节点端实时了解数据节点提供存储访问服务的性能状况。本发明弥补了HDFS不能对影响数据读写性能的状态信息监控的缺陷，动态收集数据节点实时信息，并将信息数据传输到名称节点。