-
公开(公告)号:CN108470128B
公开(公告)日:2021-12-03
申请号:CN201710099189.8
申请日:2017-02-23
申请人: 全球能源互联网研究院有限公司 , 国网山东省电力公司青岛供电公司 , 国家电网公司
摘要: 本发明提供一种用电负荷数据的在线脱敏方法和装置,先提取用电负荷数据,并选择时频变换算法;然后根据选择的脱敏算法对提取的用电负荷数据进行脱敏;最后访问脱敏后的用电负荷数据,实现用电负荷数据的在线脱敏。本发明利用时频变换的手段,在频域对数据进行相应的筛选、过滤、删除、修改等处理,以达到数据脱敏的效果,脱敏过程保留了主要趋势等数据分析的必要信息,使得脱敏后的数据能够满足相关分析应用的需求,同时去掉了明细特征等敏感信息,有效保护了用户的隐私信息。并且由于时频变换拥有快速算法,脱敏过程的时间消耗较小。
-
公开(公告)号:CN108197132A
公开(公告)日:2018-06-22
申请号:CN201710929776.5
申请日:2017-10-09
申请人: 国网陕西省电力公司 , 全球能源互联网研究院有限公司 , 国家电网公司
CPC分类号: Y02D10/45 , G06F17/30268 , G06F17/3028 , G06Q50/06
摘要: 本发明提供一种基于图数据库的电力资产画像构建方法及装置,该电力资产画像构建方法包括:接收用户输入的电力资产的维度信息;根据维度信息获取电力资产的多个标签;根据标签对应的算法对标签进行分类;根据标签的分类及其与电力资产的关联关系构建电力资产的图数据模型;根据图数据模型中标签的分类及其对应的算法进行计算,生成电力资产画像。通过实施本发明,基于电力资产的维度及其标签构建图数据库,与传统关系型数据库相比,图数据库的存储方式更适合复杂的关联关系查询,可显著提高电力资产画像效率以及画像结果查询的速度,从而提高对电力设备数据的处理工作的效率。
-
公开(公告)号:CN107679089A
公开(公告)日:2018-02-09
申请号:CN201710790445.8
申请日:2017-09-05
申请人: 全球能源互联网研究院 , 国网浙江省电力公司 , 国家电网公司
IPC分类号: G06F17/30
CPC分类号: G06F17/30303 , G06F17/30129 , G06F17/30194 , G06F17/30598
摘要: 本发明提供一种用于电力传感数据的清洗方法、装置和系统,采用K-Means聚类法将电力传感数据中的结构化数据聚类为多个分区,对每个分区中的结构化数据进行检测,对检测得到的异常数据进行修复,最终实现异常数据的清洗。本发明采用K-Means聚类法将电力传感数据中的结构化数据聚类为多个分区的过程中,在对最优簇数量对应的K-Means聚类的聚类结果再进行聚类时考虑了连续电力传感数据之间的关联等特性,能够发现更多的异常数据,能够有效改善大规模电力传感数据的数据质量;且将电力传感数据的时间特性引入异常数据检测过程,能够识别出在阈值范围内但与邻近点的值存在较大偏差的异常数据。
-
公开(公告)号:CN107358334A
公开(公告)日:2017-11-17
申请号:CN201710379309.X
申请日:2017-05-25
申请人: 全球能源互联网研究院 , 国家电网公司 , 国网上海市电力公司
摘要: 数据准确性判定方法、装置、终端及计算机可读存储介质,其中数据准确性判定方法,包括:获取数据集,其中数据集由至少一个表单组成;确定所述表单的类型;根据表单的类型,确定表单的质量判别参数,其中表单的类型对应的质量判别参数预存在质量判别参数库中;根据表单的质量判别参数,计算数据集的判别特征参数,判别特征参数用于判断数据集中数据的准确性;根据判别特征参数判别所述数据集的准确性,解决了现有数据集的数据处理加工过程造成数据被重复计算,降低了判断数据准确性的效率,且使用多种方式对数据的准确性进行评价过程中由于得到不同的判断结果,可能造成多个判断结果相互干扰,影响最终数据判断的准确性。
-
公开(公告)号:CN106250460A
公开(公告)日:2016-12-21
申请号:CN201610607561.7
申请日:2016-07-28
申请人: 全球能源互联网研究院 , 国网上海市电力公司 , 国家电网公司
IPC分类号: G06F17/30
CPC分类号: G06F17/30289
摘要: 本发明涉及一种考虑任务相关性的Hive优化方法及系统,所述方法包括:将HQL语句转化为MapReduce物理计划,并获取所述MapReduce物理计划中各MapReduce Job在shuffle阶段用于排序的键shuffle key;根据相关性规则,合并所述各MapReduce Job中相关MapReduce Job;本发明提供的方法及系统,考虑Hive执行过程中,任务之间的相关性,最小化MapReduce Job数量。
-
公开(公告)号:CN105976120A
公开(公告)日:2016-09-28
申请号:CN201610326404.9
申请日:2016-05-17
申请人: 全球能源互联网研究院 , 国家电网公司
CPC分类号: G06Q10/0637 , G06Q50/06
摘要: 本发明提供一种电力运营监控数据质量评估系统及方法,系统包括均独立执行脚本代码的数据集抽取模块、异常甄别模块和数据质量评估模块;方法包括从电力运营监控数据中心抽取所需的数据集;针对目标数据集,利用数据质量评估指标和约束规则甄别出异常电力数据,处理检查出的数据质量问题并确定评价方法,存储计算结果;获取数据质量评估指标的结果信息并选择可视化操作。本发明提出的系统及方法避免了现有数据质量评估过程中的问题,大大提高了整体数据质量评估效率;能够进行直观的量化评估和结果反馈,从而提供了系统全面的数据质量评估标准,保障数据的准确、及时、有效和可信,促进了电力运营监控数据质量的提升,进而提高了电力系统的运行稳定性。
-
公开(公告)号:CN105868629A
公开(公告)日:2016-08-17
申请号:CN201610188064.8
申请日:2016-03-29
申请人: 全球能源互联网研究院 , 国家电网公司
IPC分类号: G06F21/55
摘要: 本发明涉及一种适用于电力信息物理系统的安全威胁态势评估方法,包括:对所述电力信息物理系统进行安全威胁检测;根据安全威胁检测结果对所述电力信息物理系统进行安全态势评估;根据安全态势评估结果对所述电力信息物理系统进行安全威胁告警;本发明提供的一种适用于电力信息物理系统的安全威胁态势评估方法,能够通过对ECPS中信息威胁、电力系统故障、由信息威胁引发的跨空间连锁故障等三类安全威胁的实时检测,统计得到任一时刻ECPS存在的各种安全威胁,并利用综合评估方法给出ECPS在任一时刻的安全威胁态势值,进而给出不同危害程度的告警,最终采取相应的安全防护措施。
-
公开(公告)号:CN108470127B
公开(公告)日:2021-10-29
申请号:CN201710099139.X
申请日:2017-02-23
申请人: 全球能源互联网研究院 , 国网山东省电力公司青岛供电公司 , 国家电网公司
IPC分类号: G06F21/62 , G06F16/25 , G06F16/2458
摘要: 本发明提供一种用电负荷数据的离线脱敏方法和装置,通过提取用电负荷数据、选择时频变换算法,并根据选择的时频变换算法对提取的用电负荷数据进行脱敏,最后将脱敏后的用电负荷数据进行存储,能够快速高效的完成用电负荷数据离线脱敏。本发明能够从文档、文件、数据库等多种途径选择用电负荷数据,以多种文件格式获取待脱敏的用电负荷数据,并根据数据特性以及提供者对数据敏感性的要求和使用者对数据可用性的要求选择用于脱敏的时频变换算法,确保能够顺利获取待脱敏的用电负荷数据,自由地选择适当的时频变换算法,达到最好的脱敏效果。
-
公开(公告)号:CN107679089B
公开(公告)日:2021-10-15
申请号:CN201710790445.8
申请日:2017-09-05
申请人: 全球能源互联网研究院 , 国网浙江省电力公司 , 国家电网公司
IPC分类号: G06F16/215 , G06F16/28 , G06F16/17 , G06F16/182
摘要: 本发明提供一种用于电力传感数据的清洗方法、装置和系统,采用K‑Means聚类法将电力传感数据中的结构化数据聚类为多个分区,对每个分区中的结构化数据进行检测,对检测得到的异常数据进行修复,最终实现异常数据的清洗。本发明采用K‑Means聚类法将电力传感数据中的结构化数据聚类为多个分区的过程中,在对最优簇数量对应的K‑Means聚类的聚类结果再进行聚类时考虑了连续电力传感数据之间的关联等特性,能够发现更多的异常数据,能够有效改善大规模电力传感数据的数据质量;且将电力传感数据的时间特性引入异常数据检测过程,能够识别出在阈值范围内但与邻近点的值存在较大偏差的异常数据。
-
公开(公告)号:CN105763562B
公开(公告)日:2019-04-09
申请号:CN201610237288.3
申请日:2016-04-15
申请人: 全球能源互联网研究院 , 国家电网公司 , 国网河北省电力公司 , 武汉大学
摘要: 本发明公开了一种面向电力CPS风险评估的电力信息网络脆弱性威胁评估模型建立方法及基于该模型的评估系统,该模型选取漏洞分布威胁度、访问途径和利用复杂度3组安全漏洞评估要素;采用层次分析法建立了脆弱性威胁度评估模型,给出了参数构造方法;在定量评估的基础上,将评估结果定义了脆弱性威胁等级,兼顾了定量评估的客观性和定性评估的直观性;同时,本发明涉及的系统包括采用分布式结构的漏洞检测部分和服务器部分。本发明将漏洞扫描系统与电力信息网络的安全分区融合,并采用一种基于CVSS和层次分析法的电力信息网络漏洞威胁评估算法进行漏洞威胁评估,使得该系统可以更安全、更准确的对电力信息网络进行漏洞扫描和安全评估。
-
-
-
-
-
-
-
-
-