-
公开(公告)号:CN106855805A
公开(公告)日:2017-06-16
申请号:CN201610963367.2
申请日:2016-11-04
Applicant: 国网浙江省电力公司 , 北京国电通网络技术有限公司 , 国网信息通信产业集团有限公司
CPC classification number: G06F8/20 , G06F9/44505
Abstract: 本发明公开了一种大数据的流处理方法,属于大数据应用领域,具体包括:当用户向YARN中提交一个应用程序后,YARN将分两个阶段运行该应用程序,第一个阶段是启动ApplicationMaster;第二个阶段是由ApplicationMaster创建应用程序,为它申请资源,并监控它的整个运行过程,直到运行完成。本发明的大数据的流处理方,具有高可靠性、高扩展性、高效性和高容错性。
-
公开(公告)号:CN107329911B
公开(公告)日:2020-07-28
申请号:CN201710535708.0
申请日:2017-07-04
Applicant: 国网浙江省电力公司信息通信分公司 , 华东师范大学
IPC: G06F12/12
Abstract: 本发明公开了一种基于CP‑ABE属性访问机制的缓存替换算法,首先对基于CP‑ABE加密的云存储数据的访问策略进行分析,针对CP‑ABE加密的数据,提出一种有效的缓存替换算法—最小属性值价值算法(简称MAV)。该算法结合加密文件访问策略,统计高频属性值,结合属性相似度和文件大小,计算文件属性价值,替换文件属性价值最小的缓存文件。实验结果表明,针对CP‑ABE加密后的数据,该缓存替换算法在加密文件请求命中率和字节命中率方面,优于传统经典的LRU、LFU、SIZE缓存替换算法。
-
公开(公告)号:CN106682066A
公开(公告)日:2017-05-17
申请号:CN201610973411.8
申请日:2016-11-04
Applicant: 国网浙江省电力公司 , 北京国电通网络技术有限公司 , 国网信息通信产业集团有限公司
IPC: G06F17/30
CPC classification number: G06F16/284 , G06F16/275
Abstract: 本发明公开了一种开源关系型数据的同步采集方法,包括:在MySQL中打开BinLog,开启行级变更日志;通过Host1的Tungsten Replicator标准采集器抽取BinLog的变更信息,并通过Tungsten Replicator中的colname过滤器过滤原始数据;从节点Host2d Tungsten Replicator远程读取THL信息,并将其写入到批量的character‑separated格式文件中;通过Tungsten Replicator在大数据平台存入基于行级的CSV文件信息后,可以通过调用大数据平台的CSV组件、MapReduce组件等模块对当前的CSV数据及发生数据变更的信息进行合并归集,形成数据视图,数据视图使用了自定义的特殊格式。可以在不同的数据库版本、异构库进行数据交换,且在数据交换过程中,可以对数据进行过滤和修改。
-
公开(公告)号:CN107301123A
公开(公告)日:2017-10-27
申请号:CN201710367340.1
申请日:2017-05-23
Applicant: 国网浙江省电力公司信息通信分公司 , 华东师范大学
IPC: G06F11/36
Abstract: 本发明公开了一种表驱动的签名错误检测算法,该算法是基于有限状态自动机理论(FSM),在二维表(CFID表)中存储控制流图的信息,通过比较基本块中的签名和存储在CFID表中的签名检测出非法的指令跳转。对于CFCSS算法不能检测的共享分支扇入节点的非法指令跳转错误,本发明可成功检测出这类错误。实验结果显示,本发明平均错误检测覆盖率达到98.1%,并且本发明在每个基本块中插入的错误检测指令较CFCSS中的更少。
-
公开(公告)号:CN106855877A
公开(公告)日:2017-06-16
申请号:CN201610963366.8
申请日:2016-11-04
Applicant: 国网浙江省电力公司 , 北京国电通网络技术有限公司 , 国网信息通信产业集团有限公司
IPC: G06F17/30
Abstract: 本发明公开了一种大数据的同步复制的方法,基于Tungsten Repilicator的同步复制架构,包括:步骤1:在MySQL中打开BinLog,开启行级变更日志;步骤2:通过抽取变更信息,过滤原始数据,并存入THL中,并采集主键信息;步骤3:读取THL信息,并将其写入到批量的character‑separated格式文件中;步骤4:对当前的数据及发生数据变更的信息进行合并归集,形成数据视图。本发明的大数据的同步复制的方法,解决了大数据平台的数据复制问题,提高实时性和复制性能。
-
公开(公告)号:CN107329911A
公开(公告)日:2017-11-07
申请号:CN201710535708.0
申请日:2017-07-04
Applicant: 国网浙江省电力公司信息通信分公司 , 华东师范大学
IPC: G06F12/12
Abstract: 本发明公开了一种基于CP-ABE属性访问机制的缓存替换算法,首先对基于CP-ABE加密的云存储数据的访问策略进行分析,针对CP-ABE加密的数据,提出一种有效的缓存替换算法—最小属性值价值算法(简称MAV)。该算法结合加密文件访问策略,统计高频属性值,结合属性相似度和文件大小,计算文件属性价值,替换文件属性价值最小的缓存文件。实验结果表明,针对CP-ABE加密后的数据,该缓存替换算法在加密文件请求命中率和字节命中率方面,优于传统经典的LRU、LFU、SIZE缓存替换算法。
-
公开(公告)号:CN106776680A
公开(公告)日:2017-05-31
申请号:CN201610963368.7
申请日:2016-11-04
Applicant: 国网浙江省电力公司 , 北京国电通网络技术有限公司 , 国网信息通信产业集团有限公司
IPC: G06F17/30
CPC classification number: G06F16/275
Abstract: 本发明公开了一种分布式流数据的采集方法,包括:步骤1:Source接收Events或通过特殊机制产生Events,并将Events批量的放到一个或多个Channels;步骤2:Channel接收缓存Source输出Events,而当有Sink消费掉Channel中的数据Channel中的数据直到进入到下一个Channel中或者进入终端才会被删除;步骤3:Sink将events传输到下一跳或最终目的,成功完成后将events从channel移除,Sink会消费Channel中的数据,然后送给外部源或者其他Source。本发明的分布式流数据的采集方法,解决了关系库和大数据平台的数据复制问题,提高实时性和复制性能。
-
公开(公告)号:CN102567849B
公开(公告)日:2016-08-24
申请号:CN201110444615.X
申请日:2011-12-27
Abstract: 本发明公开了一种信息安全综合审计方法,包括:预先在信息安全综合审计系统集成Web Service,并为一票两单系统创建Web Service接口;通过WebService接口,在一票两单系统将创建的用户的关键信息发送至信息安全综合审计系统;信息安全综合审计系统存储关键信息存储;关键信息包括用户标识;当需要给用户申请运维授权时,通过Web Service接口,在一票两单系统将运维主机的主机信息和账号信息发送至信息安全综合审计系统;由信息安全综合审计系统建立用户的运维授权。本发明提高了信息安全综合审计工作中的审计的准确率,此外还有效地减少了信息安全综合审计系统管理员的工作量,提高了工作效率。
-
公开(公告)号:CN102903031A
公开(公告)日:2013-01-30
申请号:CN201210375902.4
申请日:2012-09-29
Abstract: 本发明公开了一种电力信息通信业务管理方法,包括缺陷管理流程,所述缺陷管理流程包括如下步骤:缺陷提交;审查分配;检修消缺;验证业务;关闭缺陷。本发明将缺陷管理流程集中管控、统一调度,实现了对电力系统信息的精益管理、高效运作。
-
公开(公告)号:CN102904756A
公开(公告)日:2013-01-30
申请号:CN201210375254.2
申请日:2012-09-29
CPC classification number: Y04S10/54
Abstract: 本发明公开了电力信息通信调运检一体化处理方法,能够有效解决现有各部门分散管理容易造成数据丢失的问题。设立通信资源管理模块、通信专业管理模块、通信设备管理模块之间通过数据交换平台进行数据交换,通信综合监视模块对通过数据交换平台的数据进行监视,有异常情况立即报警。本发明的优点是:采用集中管理的方式,各种数据与功能由不同的模块来完成,方便数据管理,同时实现国、网、省、地区通信电子运维的全程闭环管理。
-
-
-
-
-
-
-
-
-