输变电设备状态监测大数据快速接收和分发系统

    公开(公告)号:CN105007294A

    公开(公告)日:2015-10-28

    申请号:CN201510271669.9

    申请日:2015-05-26

    Abstract: 本发明涉及一种输变电设备状态监测大数据快速接收和分发系统,包括主控节点、多个数据节点和订阅进程节点,主控节点接收来自电力系统的监测数据,建立订阅进程与数据优先级队列的映射关系,包括负载均衡器,负载均衡器根据所述映射关系将需要分发的数据均匀地发送给多个数据节点;数据节点对接收到的每条消息分配一个唯一的id,每个数据优先级队列在数据节点的内存中对应一个索引表,索引表的每一行对应一个消息盒,该行的值是对应消息盒中第一条消息的id;订阅进程节点从数据节点获取订阅的监测数据。本发明的借助新兴的内存集群技术,设计了一个分布式的、考虑数据优先级的消息缓冲队列,实现监测大数据的快速收集、缓存和有效分发。

    一种基于HBase的电网设备状态监测数据存储和查询方法及系统

    公开(公告)号:CN104850640A

    公开(公告)日:2015-08-19

    申请号:CN201510274013.2

    申请日:2015-05-26

    CPC classification number: G06F16/2471 G06F16/2453

    Abstract: 本发明涉及一种基于HBase的电网设备状态监测数据存储和查询方法及系统,方法包括:汇聚节点收集状态监测数据,并上传至HDFS主控节点:HDFS主控节点把接收到的状态监测数据合并生成大文件,并上传到HDFS;MapReduce模块读取上传到HDFS中的数据,并根据读取的数据生成rowkey,根据rowkey构建HBase表;设置查询条件,HBase根据所述查询条件和rowkey进行查询。本发明将电网设备状态监测数据与HBase、HDFS相结合,能够支持海量状态检测数据的可靠存储和快速的多条件查询。

    一种局部放电脉冲电流的波形特征提取方法

    公开(公告)号:CN102854445B

    公开(公告)日:2014-11-19

    申请号:CN201210396459.9

    申请日:2012-10-18

    Abstract: 本发明涉及一种局部放电脉冲电流的波形特征提取方法,包含以下步骤:采集变压器局部放电信号数据;对该局放信号进行脉冲波形信号的自动提取;对所提取的单个放电脉冲波形的各个微观特征参数进行计算;对局放脉冲波形微观特征参数进行特征空间降维。本发明能有效的在连续采样波形信号中提取其微观特征;克服了目前数字式局放仪大多仅利用局放数据的宏观特征进行统计分析处理,不能完全充分利用获得的局放数据的不足;能够从采集数据中自适应的提取各种放电类型的单个放电脉冲波形,并通过改进的流形学习算法对波形微观特征进行有效降维,提取低维且有效的放电脉冲波形特征。

    一种云平台下的分布式系统行为仿真分析系统的实现方法

    公开(公告)号:CN106096159A

    公开(公告)日:2016-11-09

    申请号:CN201610441113.4

    申请日:2016-06-20

    CPC classification number: G06F17/5036

    Abstract: 本发明公开了一种云平台下的分布式系统行为仿真分析系统的实现方法,首先搭建或选用系统所需要的云平台环境,将基于行为树的分布式系统模型的XML文件存入HDFS文件系统中;评估分析仿真任务的复杂度,并决定是否将任务放在云平台下运行;根据相应的key值分配reduce,并行处理后的结果经Reduce汇总后计算全局搜索结果;在main函数中,设置云平台相关参数包含文件路径、map函数、reduce函数,启动云计算过程;最后从云计算的结果文件中获取结果并输出到图形用户界面。本发明能够有效的提高复杂路径搜索过程的执行效率。

    一种状态监测数据的分布式存储与并行挖掘方法

    公开(公告)号:CN102685221B

    公开(公告)日:2014-12-03

    申请号:CN201210130726.8

    申请日:2012-04-29

    Abstract: 一种状态监测数据的分布式存储与并行挖掘方法,它通过Web服务描述语言定义变电站状态监测远程单元与状态监测通信前置机的功能服务模型,通过简单对象访问协议进行电力广域网环境下电力设备状态监测数据交换;它将大规模状态监测数据冗余存储在分布式文件系统中,对状态监测数据文件创建索引表,并插入到大规模结构化数据表中,根据查询请求完成状态监测数据查询;通过提取、转换与加载生成基础数据与多维度的分析性数据建立数据仓库,并通过MapReduce任务分解与结果汇总,实现关联规则、分类和聚类数据挖掘算法的并行执行。本发明能有效地对智能电网环境下海量电力设备状态监测信息进行分布式数据交换、冗余存储与快速并行处理。

    一种大规模电力设备监测报警数据实时处理方法及系统

    公开(公告)号:CN107968840B

    公开(公告)日:2020-10-09

    申请号:CN201711353258.X

    申请日:2017-12-15

    Inventor: 宋亚奇 李莉

    Abstract: 一种大规模电力设备监测报警数据实时处理方法及系统,其包括数据接收与分发平台、SparkStreaming实时数据处理平台、Spark内存计算平台和HBase、Hadoop分布式文件系统,其对监测数据的处理过程包括:1)负责报警数据接收与分发的数据收集服务器集群,2)实时数据处理平台内的异常检测模块基于SparkStreaming实时数据处理技术实现;3)特征提取模块基于SparkStreaming实时数据处理技术实现;4)模式识别模块基于SparkStreaming实时数据处理技术实现;5)机器学习模块基于Spark大数据技术实现。其实现了应对大规模高并发的报警数据和持续远方监测的流式数据的快速收集和处理的方法,可以用于构建新一代输变电设备远程监测系统或大规模新能源电站群监控系统的建设。

    大规模输变电设备监测数据流的快速异常检测方法

    公开(公告)号:CN107846472A

    公开(公告)日:2018-03-27

    申请号:CN201711188381.0

    申请日:2017-11-24

    Inventor: 宋亚奇 李莉

    CPC classification number: H04L67/12 G06K9/6226 H04L67/10 H04L67/26 H04L67/2823

    Abstract: 本发明公开了一种大规模输变电设备监测数据流的快速异常检测方法,该方法借助使用DBScan算法对历史数据进行聚类和类别标记,并将标记后的样本发送至SparkStreaming集群,用于实时增量聚类;而前置机接收各种终端发送过来的数据流,并将数据流推送到Spark Steaming集群处理,在Spark Steaming集群上完成实时特征提取及归一化处理;然后进行实时聚类,以完成对新样本类别的判断。借助该方法,本发明可以实现智能电网大规模数据流快速分析,及大规模输变电设备监测数据流的快速异常检测。

    一种电力设备状态监测装置的集成方法

    公开(公告)号:CN101917067A

    公开(公告)日:2010-12-15

    申请号:CN201010252658.3

    申请日:2010-08-13

    CPC classification number: Y02E60/723 Y04S10/16

    Abstract: 一种电力设备状态监测装置的集成方法,其技术方案是:它由通信接口、协议转换器以及ACSI服务器构成无缝通信服务器,IEC 61850客户机直接与ACSI服务器相连,不同类型的输变电状态在线监测装置通过提供的通信接口接入,该方法采用映射规则编辑器建立传统协议与IEC 61850之间的映射规则,协议转换器利用该映射规则完成传统协议与IEC 61850之间的协议转换,实现不同输变电状态在线监测装置与ACSI服务器的通信,进而实现不同输变电状态在线监测装置以及IEC 61850客户机之间的通信。本发明从根本上解决了目前电网状态监测装置难以互操作与信息共享问题,能够更好地满足智能电网对全景状态信息监测的需要。

    一种云平台下的分布式系统行为仿真分析系统的实现方法

    公开(公告)号:CN106096159B

    公开(公告)日:2019-05-21

    申请号:CN201610441113.4

    申请日:2016-06-20

    Abstract: 本发明公开了一种云平台下的分布式系统行为仿真分析系统的实现方法,首先搭建或选用系统所需要的云平台环境,将基于行为树的分布式系统模型的XML文件存入HDFS文件系统中;评估分析仿真任务的复杂度,并决定是否将任务放在云平台下运行;根据相应的key值分配reduce,并行处理后的结果经Reduce汇总后计算全局搜索结果;在main函数中,设置云平台相关参数包含文件路径、map函数、reduce函数,启动云计算过程;最后从云计算的结果文件中获取结果并输出到图形用户界面。本发明能够有效的提高复杂路径搜索过程的执行效率。

    输变电设备状态监测大数据快速接收和分发系统

    公开(公告)号:CN105007294B

    公开(公告)日:2018-06-08

    申请号:CN201510271669.9

    申请日:2015-05-26

    Abstract: 本发明涉及一种输变电设备状态监测大数据快速接收和分发系统,包括主控节点、多个数据节点和订阅进程节点,主控节点接收来自电力系统的监测数据,建立订阅进程与数据优先级队列的映射关系,包括负载均衡器,负载均衡器根据所述映射关系将需要分发的数据均匀地发送给多个数据节点;数据节点对接收到的每条消息分配一个唯一的id,每个数据优先级队列在数据节点的内存中对应一个索引表,索引表的每一行对应一个消息盒,该行的值是对应消息盒中第一条消息的id;订阅进程节点从数据节点获取订阅的监测数据。本发明的借助新兴的内存集群技术,设计了一个分布式的、考虑数据优先级的消息缓冲队列,实现监测大数据的快速收集、缓存和有效分发。

Patent Agency Ranking