一种适用于大数据的采集分析系统

    公开(公告)号:CN109672577A

    公开(公告)日:2019-04-23

    申请号:CN201710954214.6

    申请日:2017-10-13

    发明人: 高树 陈瑞坤

    IPC分类号: H04L12/26 H04L29/08

    摘要: 本发明公开了一种适用于大数据的采集分析系统,其特征是,包括服务器、主控制器和终端节点;所述主控制器通过网络分别与服务器和终端节点相连接;每个所述终端节点包括依次连接的采集模块、处理模块、分析模块、评估模块和存储模块;所述采集模块用于根据事先设定的采集方法对数据进行采集整合;所述处理模块用于将采集模块所采集整合后的信息进行有效信息提取,并形成数据流;所述分析模块用于将数据流中的数据进行分析。本发明所达到的有益效果:本系统将大数据的采集分配到各个节点上,将大数据的处理化为小节点的处理,不仅能够缓解大数据整体处理的效率低以及难度大的问题,还能够使得在处理大数据的时候能够更加全面的到位的进行分析整合。

    异常流量监测方法、装置及计算机可读存储介质

    公开(公告)号:CN107426055A

    公开(公告)日:2017-12-01

    申请号:CN201710639714.0

    申请日:2017-07-31

    发明人: 林浩

    IPC分类号: H04L12/26 H04L12/24 H04L29/06

    摘要: 本发明公开了一种异常流量监测方法、装置及存储介质,旨在至少解决大量异常流量可能导致Flume中心集群负载过高的问题。所述方法包括:对当前监测数据进行解析,确定出所述当前监测数据对应的预设监测对象;读取所述监测对象的当前流量;判断所述当前流量是否达到预设流量配额;在判定达到所述流量配额时,丢弃所述当前监测数据。本发明可以有效解决数据采集端出现的短时间大量异常流量可能导致Flume中心集群负载过高,甚至停止服务的问题。

    一种监控设备节点的方法及装置

    公开(公告)号:CN107196827A

    公开(公告)日:2017-09-22

    申请号:CN201710632464.8

    申请日:2017-07-28

    发明人: 邹虎

    IPC分类号: H04L12/26 H04L29/08 H04L12/24

    摘要: 本发明公开了一种监控设备节点的方法及装置。所述方法包括:接收指令,所述指令为获取模块的设备节点信息的指令;获取所述模块的设备节点数量和设备节点信息;根据所述设备节点数量以及所述模块与不同设备节点信息之间的多维从属关系,将所述设备节点信息对应写入预先注册的表格;根据所述指令反馈所述表格中模块的设备节点信息。如此便有效实现了动态监控集群型服务器中的多维设备节点,对于多维设备节点的从属关系也能清楚知晓,使得服务器的监控管理更加灵活,节约了成本。相应地,本发明提供的一种监控设备节点的装置,也同样具有上述技术效果。

    一种面向QOS的云计算资源可用监控模型及其算法

    公开(公告)号:CN106936624A

    公开(公告)日:2017-07-07

    申请号:CN201611042628.3

    申请日:2016-11-24

    申请人: 新乡学院

    IPC分类号: H04L12/24 H04L12/26 H04L29/08

    摘要: 本发明公开了云计算模型技术领域的一种面向QOS的云计算资源可用监控模型,包括中央处理器,所述中央处理器分别电性输入连接网络监控子系统、云服务器资源监控子系统、无线网络监控子系统和网络用户行为监控子系统,所述中央处理器电性输出连接显示子系统,所述中央处理器电性双向连接安全验证子系统,本发明通过网络监控子系统的设置,使网络使用资源的使用率能够被实时的监控,减少操作人员因为疲劳而出现错误,同时减少操作人员的劳动量,有利于操作人员的健康,通过云服务器资源监控子系统的设置,使云服务器的资源使用情况能够被实时的监控,保证云服务器的资源使用情况能够及时的反馈出来,方便操作人员的操作。

    一种高可用的云监控系统及监控方法

    公开(公告)号:CN106878111A

    公开(公告)日:2017-06-20

    申请号:CN201710153557.2

    申请日:2017-03-15

    IPC分类号: H04L12/26

    摘要: 本发明涉及一种高可用的云监控系统及监控方法,它包括设置于各个待检测节点的agent模块;其特征在于,各agent模块将采集到的待检测节点的状态信息发送到agentCluster节点,agentCluster节点将采集到的数据发送至Server服务端;所述的待检测节点包括物理主机和虚拟机;动态调整agent采集数据的周期,减少监控系统冗余数据的传输,保证云监控系统的高效稳定。同时节点定时报告自己的运行状态,并通过选举算法避免了单节点失效问题的发生。

    获得日志的方法、系统、第一网络设备及第三网络设备

    公开(公告)号:CN105553743A

    公开(公告)日:2016-05-04

    申请号:CN201511026295.0

    申请日:2015-12-30

    IPC分类号: H04L12/24 H04L12/26 H04L29/06

    摘要: 本发明公开了一种获得日志的方法、系统、第三网络设备以及第一网络设备,包括:一种获得日志的系统,其特征在于,包括第一网络设备、第二网络设备以及第三网络设备,其中,所述第二网络设备发送预警消息,所述第一网络设备,接收所述第二网络设备发送的预警消息,所述第一网络设备向第三网络设备发送日志备份指令,所述第三网络设备接收第一网络设备发送的日志备份指令,在确定出所述日志备份指令符合要求时,按照所述日志备份指令,备份日志;所述第三网络设备将所述备份日志发送给所述第一网络设备;所述第一网络设备接收所述第三网络设备发送的备份日志,用于提高获取日志的效率,实现对故障的定位分析,提高效率。

    流量数据中信息点的提取方法及装置

    公开(公告)号:CN105407016A

    公开(公告)日:2016-03-16

    申请号:CN201510843691.6

    申请日:2015-11-26

    IPC分类号: H04L12/26

    CPC分类号: H04L43/02

    摘要: 流量数据中信息点的提取方法、装置,所述方法包括:根据已知URL中的键值相关信息从所述流量数据中获取包含所述键值的URL集;其中,所述URL包括关键字和键值;从所述URL集中提取URL对应的所述关键字,每条URL对应一组关键字,得到关键字字典表;将所述关键字字典表中的每组关键字作为探测关键字,从所述流量数据中获取包含所述探测关键字的URL的键值,以获得流量数据中的信息点。上述的方案可以提高流量数据中信息点的获取量。

    对通信路径上的系统进行监控的方法、系统及装置

    公开(公告)号:CN103003802B

    公开(公告)日:2015-10-07

    申请号:CN201080068045.2

    申请日:2010-10-27

    IPC分类号: G06F11/34 H04L12/26

    摘要: 在实施例中,一种方法包括发起针对通信路径的监控会话(包括创建和存储监控会话状态数据);向通信路径的第一响应方计算机发送起动第一状态伺服程序的第一请求,所述第一状态伺服程序被配置为在监控会话期间连续地监控第一响应方计算机可能执行的一个或多个处理的一个或多个特性;向第一响应方计算机发送监控指令以监控所述一个或多个处理的所述一个或多个特性;在监控会话有效且第一响应方计算机在通信路径中时,接收和收集来自第一响应方计算机的被监控信息;响应于确定了第一响应方计算机不在通信路径中或者监控会话已经变为无效,自动和自主地结束监控会话。