-
公开(公告)号:CN106250523B
公开(公告)日:2019-04-16
申请号:CN201610634581.3
申请日:2016-08-04
Applicant: 北京国电通网络技术有限公司 , 国家电网公司 , 国网北京市电力公司 , 北京中电飞华通信股份有限公司
IPC: G06F16/31
Abstract: 本发明公开了一种分布式列存储系统索引的方法,包括:获取每列数据的分布特征,设定每列数据的域值及划分规则;根据域值及划分规则,得到划分后的连续数据区域;分别对应每个数据区域建立一个区域编码向量;进行统计计算,得到每列数据的统计信息,将统计信息与对应的区域编码向量合并,得到带有统计信息的区域编码向量;将带有统计信息的区域编码向量作为位图索引的位向量进行数据的索引。所述分布式列存储系统索引的方法通过设定每列数据的域值和划分规则,使得分组位图索引的划分方式与查询的过滤条件相符合,通过计算列数据的统计信息,不仅提高了分组位图查询的准确性,而且能够保留列存储系统中数据的统计信息,保证数据信息的完整性。
-
公开(公告)号:CN107515899A
公开(公告)日:2017-12-26
申请号:CN201710604810.1
申请日:2017-07-24
Applicant: 北京国电通网络技术有限公司 , 国家电网公司 , 国网北京市电力公司 , 北京中电飞华通信股份有限公司 , 国网信息通信产业集团有限公司
IPC: G06F17/30
Abstract: 本发明公开了一种数据库联合分片方法、装置以及存储介质,涉及数据仓库技术领域,其中的方法包括:计算连接条件包含的维表的选择谓词字段参与连接查询操作的维表字段查询频率;计算在维表与事实表进行连接查询操作时,事实表符合包含有选择谓词字段的连接条件的平均记录数;根据维表字段查询频率和平均记录数确定需要分片的维表,将需要分片的维表以及事实表进行联合分片。本发明的方法、装置以及存储介质,实现了根据工作负载特点、以及分片数量限制,自动选择部分维表,进行维表和事实表的联合分片;并且采用排序的方法,减少了算法的计算量,同时保证连接操作的代价最小化。
-
公开(公告)号:CN108805331A
公开(公告)日:2018-11-13
申请号:CN201810418766.X
申请日:2018-05-04
Applicant: 北京国电通网络技术有限公司 , 国网电力信息通信有限公司 , 国家电网公司
Abstract: 本发明公开了一种用电量预测方法,包括:获取用电量数据以及相关影响因子;对用电量数据及相关影响因子按照copula函数计算得到秩相关系数;将影响因子对应的秩相关系数按照由大到小的顺序进行排序,并且选取排序在前的预设数量的影响因子作为有效影响因子;或者选取超过预设相关系数阈值对应的影响因子作为有效影响因子;将有效影响因子及用电量数据输入到预先构建的预测模型中进行训练并且得到用电量预测结果。本发明通过copula函数计算得到秩相关系数实现影响因子的选取,在提高预测准确度的同时能够降低计算量,提高预测速度;通过预测模型可以使预测过程更加简单、高效。因此,本申请能够对于用电量实现更加准确有效的预测,提高用电量的预测精度。
-
公开(公告)号:CN108287868B
公开(公告)日:2019-02-26
申请号:CN201711378123.9
申请日:2017-12-19
Applicant: 北京国电通网络技术有限公司 , 国家电网公司
IPC: G06F16/2453
Abstract: 本发明公开了一种数据库查询、数据块划分方法和装置,所述数据库查询方法包括:将用户发送的查询条件与查询单元集合中各查询单元进行比较,根据比较结果生成查询向量;将所述查询向量分别与所述数据库中各数据块所对应的向量进行并操作,根据并操作结果选取向量;根据所述查询条件,在选取的向量所对应的数据块中进行查询,得到查询结果;其中,所述查询单元集合是预先由查询工作负载中分解出的查询单元组合而成的。应用本发明以便于查询时实现更精细化的跳读,提高查询效率,且付出的存储成本较小。
-
公开(公告)号:CN107451229A
公开(公告)日:2017-12-08
申请号:CN201710605395.1
申请日:2017-07-24
Applicant: 北京国电通网络技术有限公司 , 国家电网公司 , 国网北京市电力公司 , 北京中电飞华通信股份有限公司 , 国网信息通信产业集团有限公司
IPC: G06F17/30
Abstract: 本发明公开了一种数据库查询方法和装置,包括步骤:根据数据中的实体信息构建实体簇,并将实体簇与存储节点建立映射关系,根据所述映射关系将数据存储至存储节点;根据查询指令,将属于同一实体簇但位于不同存储节点上数据读取到一个存储节点的内存中;根据实体簇中的实体信息将维度数据在存储节点之间进行迁移;执行查询指令。实现了优化的数据库构建和数据库查询方法,提高数据库查询性能。
-
公开(公告)号:CN106777027A
公开(公告)日:2017-05-31
申请号:CN201611123673.1
申请日:2016-12-08
Applicant: 北京国电通网络技术有限公司 , 国家电网公司 , 国网北京市电力公司 , 北京中电飞华通信股份有限公司 , 国网信息通信产业集团有限公司
Abstract: 本发明公开了一种大规模并行处理行列混合数据存储装置及存储、查询方法,属于数据库技术领域。本发明装置包含联机事务处理模块、联机分析处理模块、存储模块、跨层查询模块以及跨层交互模块。本发明在一个数据库中同时实现了OLTP和OLAP两种功能,可以根据数据的访问频率将数据以适当的形式存储,既能为用户提供方便的查询服务,又可以为用户提供高效地数据分析服务,相对于现有技术中OLTP和OLAP分别部署的方式来说是一种重要的技术进步。
-
公开(公告)号:CN105760279A
公开(公告)日:2016-07-13
申请号:CN201610133483.1
申请日:2016-03-09
Applicant: 北京国电通网络技术有限公司 , 国家电网公司 , 国网浙江省电力公司 , 北京中电飞华通信股份有限公司
CPC classification number: G06F11/3006 , G06F11/3072 , G06F16/2246 , G06F16/27
Abstract: 本发明公开了一种分布式数据库集群故障预警关联树生成方法及系统,包括:构建M个本地频繁一项集表;构建初始的M个本地关联分支树;将初始的M个本地关联分支树发送至主服务器,并在主服务器中建立初始的主关联树,合并所有重复项;将所有频繁项形成为候选二项集表;将候选二项集表发送到全部M个本地节点,通过剪枝步骤生成频繁二项集表;重复上述步骤,直至不能生成更高维的频繁项集为止,得到最终的预警事件关联树。本发明提出的分布式数据库集群故障预警关联树生成方法及系统,解决了预警关联树建立效率低下的问题。
-
公开(公告)号:CN105760279B
公开(公告)日:2018-09-07
申请号:CN201610133483.1
申请日:2016-03-09
Applicant: 北京国电通网络技术有限公司 , 国家电网公司 , 国网浙江省电力公司 , 北京中电飞华通信股份有限公司 , 国网信息通信产业集团有限公司
Abstract: 本发明公开了一种分布式数据库集群故障预警关联树生成方法及系统,包括:构建M个本地频繁一项集表;构建初始的M个本地关联分支树;将初始的M个本地关联分支树发送至主服务器,并在主服务器中建立初始的主关联树,合并所有重复项;将所有频繁项形成为候选二项集表;将候选二项集表发送到全部M个本地节点,通过剪枝步骤生成频繁二项集表;重复上述步骤,直至不能生成更高维的频繁项集为止,得到最终的预警事件关联树。本发明提出的分布式数据库集群故障预警关联树生成方法及系统,解决了预警关联树建立效率低下的问题。
-
公开(公告)号:CN106250523A
公开(公告)日:2016-12-21
申请号:CN201610634581.3
申请日:2016-08-04
Applicant: 北京国电通网络技术有限公司 , 国家电网公司 , 国网北京市电力公司 , 北京中电飞华通信股份有限公司
IPC: G06F17/30
CPC classification number: G06F16/2237 , G06F16/221
Abstract: 本发明公开了一种分布式列存储系统索引的方法,包括:获取每列数据的分布特征,设定每列数据的域值及划分规则;根据域值及划分规则,得到划分后的连续数据区域;分别对应每个数据区域建立一个区域编码向量;进行统计计算,得到每列数据的统计信息,将统计信息与对应的区域编码向量合并,得到带有统计信息的区域编码向量;将带有统计信息的区域编码向量作为位图索引的位向量进行数据的索引。所述分布式列存储系统索引的方法通过设定每列数据的域值和划分规则,使得分组位图索引的划分方式与查询的过滤条件相符合,通过计算列数据的统计信息,不仅提高了分组位图查询的准确性,而且能够保留列存储系统中数据的统计信息,保证数据信息的完整性。
-
公开(公告)号:CN103914573A
公开(公告)日:2014-07-09
申请号:CN201410178213.3
申请日:2014-04-29
Applicant: 国家电网公司 , 北京中电飞华通信股份有限公司 , 北京国电通网络技术有限公司
IPC: G06F17/30
CPC classification number: G06F17/303
Abstract: 本申请提供一种测点迁移方法及装置,该方法通过响应接收到的迁移指令,确定与该迁移指令中携带的测点信息对应的目的实时数据库,然后将与测点信息对应的测点迁移至目的实时数据库,并根据目的实时数据库的信息,更新元数据文件中与测点对应的索引信息,以实现测点从当前实时数据库迁移到目的实时数据库,本申请通过提供的测点迁移方法,以实现对实时数据库中测点的迁移、进而保证系统中各个实时数据库之间数据访问量的均衡、为用户提供更加优质的服务。
-
-
-
-
-
-
-
-
-