一种大数据集群管理方法和装置

    公开(公告)号:CN111338647A

    公开(公告)日:2020-06-26

    申请号:CN201811546587.0

    申请日:2018-12-18

    Abstract: 本申请提供了一种大数据集群管理方法和装置,应用于大数据集群中安装有zookeeper的任一集群节点上,所述方法包括:第一集群节点选举临时主节点;所述第一集群节点被选为临时主节点时,确定在zookeeper中是否存在cluster节点;如果是,则使用zookeeper中的集群信息管理cluster节点单元存储并管理所述大数据集群的集群服务数据;否则,在zookeeper中创建cluster节点单元,使用该cluster节点单元存储并管理所述大数据集群的集群服务数据。该方法能够解决集群系统中的主节点单点故障导致系统瘫痪的问题。

    一种大数据集群管理方法和装置

    公开(公告)号:CN111338647B

    公开(公告)日:2023-09-12

    申请号:CN201811546587.0

    申请日:2018-12-18

    Abstract: 本申请提供了一种大数据集群管理方法和装置,应用于大数据集群中安装有zookeeper的任一集群节点上,所述方法包括:第一集群节点选举临时主节点;所述第一集群节点被选为临时主节点时,确定在zookeeper中是否存在cluster节点;如果是,则使用zookeeper中的集群信息管理cluster节点单元存储并管理所述大数据集群的集群服务数据;否则,在zookeeper中创建cluster节点单元,使用该cluster节点单元存储并管理所述大数据集群的集群服务数据。该方法能够解决集群系统中的主节点单点故障导致系统瘫痪的问题。

    节点控制方法及装置、任务处理系统

    公开(公告)号:CN110971627A

    公开(公告)日:2020-04-07

    申请号:CN201811143461.9

    申请日:2018-09-28

    Abstract: 本申请是关于一种节点控制方法及装置、任务处理系统,所述任务处理系统包括:n个节点,n个节点组成m个节点集合,n>m≥2;每个节点集合包括:管理节点和代理节点,任务处理系统中的所有管理节点包括:一个主管理节点和多个从管理节点,主管理节点用于在接收到处理任务的指令时,向与主管理节点属于同一节点集合的代理节点和从管理节点中的至少一个节点发送指令;每个从管理节点用于在接收到主管理节点发送的指令时,向与每个从管理节点属于同一节点集合的代理节点发送指令;每个代理节点用于在接收到指令时,根据指令处理任务。本申请解决了相关技术中任务处理系统的处理效率较低的问题,本申请用于控制节点。

    节点控制方法及装置、任务处理系统

    公开(公告)号:CN110971627B

    公开(公告)日:2022-08-05

    申请号:CN201811143461.9

    申请日:2018-09-28

    Abstract: 本申请是关于一种节点控制方法及装置、任务处理系统,所述任务处理系统包括:n个节点,n个节点组成m个节点集合,n>m≥2;每个节点集合包括:管理节点和代理节点,任务处理系统中的所有管理节点包括:一个主管理节点和多个从管理节点,主管理节点用于在接收到处理任务的指令时,向与主管理节点属于同一节点集合的代理节点和从管理节点中的至少一个节点发送指令;每个从管理节点用于在接收到主管理节点发送的指令时,向与每个从管理节点属于同一节点集合的代理节点发送指令;每个代理节点用于在接收到指令时,根据指令处理任务。本申请解决了相关技术中任务处理系统的处理效率较低的问题,本申请用于控制节点。

    面向分布式服务的配置管理方法及装置

    公开(公告)号:CN112118298A

    公开(公告)日:2020-12-22

    申请号:CN202010918471.6

    申请日:2020-09-03

    Abstract: 本发明提供一种面向分布式服务的配置管理方法,包括:从数据库中拉取与服务组件对应的所有配置项;将所有配置项依据配置空间划分为若干配置项集合;将若干配置项集合加载至对应服务组件。本发明还提供一种面向分布式服务的配置管理装置,包括:数据库,用于存储所有服务组件的配置项;配置项拉取模块,与数据库通讯连接;配置项拉取模块用于响应服务组件拉取配置项的指令从数据库中拉取对应的配置项,并将配置项依据配置空间划分为若干配置项集合;配置项加载模块,与配置项拉取模块通讯连接;配置项加载模块用于加载若干配置项集合至对应的服务组件。本发明能够降低服务组件间的依赖关系,便于分布式服务的统一管理。

Patent Agency Ranking