-
公开(公告)号:CN116070161A
公开(公告)日:2023-05-05
申请号:CN202310110444.X
申请日:2023-01-16
IPC分类号: G06F18/2433 , G06F18/10 , G06F123/02
摘要: 本申请公开了一种异常检测方法及相关装置,所述方法包括:对多维时间序列数据进行预处理;利用编码器的网络模型对预处理后的多维时间序列数据进行处理,得到嵌入空间向量;获取单类别检测损失函数;基于所述嵌入空间向量以及所述损失函数对模型进行训练;利用训练后的模型进行异常检测,得到异常检测结果。利用单类别检测损失函数,由于其仅需尽量学习到正常数据的特征,若后续异常检测过程中所检测到的数据与正常数据的类别偏差较大,那么可以将其视为异常;并且通过对高维时间序列数据进行的预处理以及对于编码器的利用,能够充分提取到多维时间序列数据的特征,从而能够进行多维时间序列场景下的异常检测。
-
公开(公告)号:CN116204345A
公开(公告)日:2023-06-02
申请号:CN202310027388.3
申请日:2023-01-09
IPC分类号: G06F11/07 , G06F16/2458
摘要: 本申请公开了一种修复异常时序数据的方法、装置、设备及介质,该方法包括:对目标时间序列进行一阶差分处理,得到速度序列;基于平衡二叉树按照TopK的计算方式,从速度序列的各子序列中得到速度约束区间,各所述子序列的长度为预设长度;基于速度约束区间对时间序列进行检测,得到检测结果;若所述检测结果表征时间序列连续异常,基于异常区间左右两侧的子序列分别对时间序列的连续异常区间进行修复,以便对连续的异常区间进行修复。
-
公开(公告)号:CN114818930A
公开(公告)日:2022-07-29
申请号:CN202210453036.X
申请日:2022-04-27
申请人: 国网浙江省电力有限公司 , 国网浙江省电力有限公司信息通信分公司 , 国网智能电网研究院有限公司
IPC分类号: G06K9/62 , G06F16/28 , G06F16/2458
摘要: 本申请提供了一种数据异常检测方法及装置、存储介质及电子设备,通过获取多个携带标记信息的用电数据和多个未携带标记信息的用电数据,利用携带标记信息的用电数据中的电流数据对第一分类器进行训练,利用携带标记信息的用电数据中的功率数据对第二分类器进行训练,从而利用已训练的第一分类器和第二分类器对未标记的用电数据进行异常检测,基于检测结果实现对未携带标记信息的用电数据的标记。可见,本技术方案,只需人工对部分用电数据进行标记,从而基于该部分携带标记的用电数据进行训练扩展,自动且准确实现对剩余未标记用电数据的异常检测及标记,从而降低了人力成本,且提高了数据异常检测的效率及准确率,从而提高了标记的效率及准确率。
-
公开(公告)号:CN113988489B
公开(公告)日:2022-04-12
申请号:CN202111610861.8
申请日:2021-12-27
申请人: 国网浙江省电力有限公司信息通信分公司 , 国网浙江省电力有限公司
IPC分类号: G06Q10/04 , G06Q10/06 , G06Q50/06 , G06F30/20 , G06F113/06
摘要: 本发明提供一种电碳因子的预测评估方法、装置及可读存储介质,包括:基于发电设备对应的设备标签对发电数据进行归类得到清洁能源数据集合和非清洁能源数据集合;得到清洁能源数据集合中每个发电数据的第一碳转换信息,对每个发电数据的第一碳转换信息进行处理得到清洁能源数据集合对应的第一碳排放数据;对第二碳转换信息、非清洁能源数据集合中的发电数据进行处理得到非清洁能源集合对应的第二碳排放数据;基于第一碳排放数据、第二碳排放数据、碳中和数据以及发电数据得到电碳因子的第一预测评估值。本发明提供的技术方案,能够充分考虑每个电网区域内不同发电设备的不同发电方式、不同碳中和行为,得到该电网区域内更加准确、客观的电碳因子。
-
公开(公告)号:CN114443738A
公开(公告)日:2022-05-06
申请号:CN202210264250.0
申请日:2022-03-17
申请人: 国网浙江省电力有限公司 , 国网浙江省电力有限公司信息通信分公司
IPC分类号: G06F16/2458 , G06F16/215 , G06F16/28 , G06K9/62
摘要: 本申请公开了一种异常数据挖掘方法、装置、设备及介质,包括:采集第一待检测数据、第一待检测数据的元数据以及与第一待检测数据相关的日志数据,从日志数据中剔除满足预设无效条件的无效数据,获得目标日志数据;确定出第一待检测数据的第一异常数据,在第一待检测数据中剔除第一异常数据,获得第二待检测数据,将第二待检测数据进行聚类,以获得多个聚类簇,并计算出每个聚类簇的中心数据,基于中心数据及其对应的聚类簇中的第二待检测数据之间的第一距离确定出离群点候选数据;将满足预设异常条件的离群点候选数据确定为第二异常数据,然后将第一异常数据和第二异常数据作为目标异常数据。实现适应性高、成本低且效率高的异常数据挖掘。
-
公开(公告)号:CN113407981A
公开(公告)日:2021-09-17
申请号:CN202110954361.X
申请日:2021-08-19
申请人: 国网浙江省电力有限公司信息通信分公司 , 国网浙江省电力有限公司
摘要: 本发明提出了一种基于零知识证明的能源消费数据处理方法,包括:基于预设频率获取耗能企业的原始能源消费数据;基于哈希算法计算原始能源消费数据的散列值,将所述散列值作为第一证明问题;根据能源大数据中心的业务需求确定不可逆函数,基于不可逆加密算法得到原始能源消费数据的第二证明问题;验证原始能源消费数据是否完整,若验证通过,分别计算第一证明问题和第二证明问题的零知识证明,若零知识证明均满足能源大数据中心规定的验证条件,则将第二证明问题存储到能源大数据中心。本发明在不泄露耗能企业的原始能源消费数据的同时,采集到真实的能源消费数据的相关信息,并能够直接被能源大数据中心用于后续的分析业务。
-
公开(公告)号:CN116304589A
公开(公告)日:2023-06-23
申请号:CN202310156625.6
申请日:2023-02-17
申请人: 国网浙江省电力有限公司 , 国网浙江省电力有限公司信息通信分公司 , 哈尔滨工业大学
IPC分类号: G06F18/15 , G06F18/241 , G06N20/00 , G06F123/02
摘要: 本申请公开了一种基于多约束协同的异常数据检测并修复的方法及相关产品,可应用于数据修复技术领域。该方法包括:确定多元时间序列中的待修复时间区间;根据所述待修复时间区间建立依赖网络;根据所述依赖网络获取可变特征预测顺序以及对应的预测模型字典;根据所述可变特征预测顺序和所述预测模型字典确定可变特征对应的候选修复值;根据所述候选修复值更新所述多元时间序列,实现时序数据的修复。因此,本申请对多元时间序列进行划分,并采用上类约束的算法对多元时间序列进行修复从而保证在修复过程中不引入新的约束的违规,在提高了错误数据修复结果的准确率和可靠度的前提下提高了错误数据的修复速度。
-
公开(公告)号:CN113988489A
公开(公告)日:2022-01-28
申请号:CN202111610861.8
申请日:2021-12-27
申请人: 国网浙江省电力有限公司信息通信分公司 , 国网浙江省电力有限公司
IPC分类号: G06Q10/04 , G06Q10/06 , G06Q50/06 , G06F30/20 , G06F113/06
摘要: 本发明提供一种电碳因子的预测评估方法、装置及可读存储介质,包括:基于发电设备对应的设备标签对发电数据进行归类得到清洁能源数据集合和非清洁能源数据集合;得到清洁能源数据集合中每个发电数据的第一碳转换信息,对每个发电数据的第一碳转换信息进行处理得到清洁能源数据集合对应的第一碳排放数据;对第二碳转换信息、非清洁能源数据集合中的发电数据进行处理得到非清洁能源集合对应的第二碳排放数据;基于第一碳排放数据、第二碳排放数据、碳中和数据以及发电数据得到电碳因子的第一预测评估值。本发明提供的技术方案,能够充分考虑每个电网区域内不同发电设备的不同发电方式、不同碳中和行为,得到该电网区域内更加准确、客观的电碳因子。
-
公开(公告)号:CN113591485A
公开(公告)日:2021-11-02
申请号:CN202110671379.9
申请日:2021-06-17
申请人: 国网浙江省电力有限公司 , 国网浙江省电力有限公司信息通信分公司 , 浙江华云信息科技有限公司
IPC分类号: G06F40/30 , G06F40/289 , G06F40/242 , G06K9/46 , G06K9/62 , G06N3/04 , G06N3/08
摘要: 本发明公开了一种基于数据科学的智能化数据质量稽核系统及方法,方法包括:数据采集:进行检测对象元数据采集以及日志数据采集解析;数据特征提取:识别并剔除无效表和无效字段,同时通过修订算法根据数据内容对字段类型进行自动修订,根据字段类型提取特征;异常检测:预设数据异常检测方法库,与数据特征进行匹配以选取对应的异常检测方法并检测;任务调度编排:设置编排服务器和节点服务器,编排服务器根据任务请求将上述任务拆分为若干子步后分发给不同节点服务器处理。本发明提降低了数据资产管理和数据质量治理的门槛,实现数据质量稽核的通用性、规模化、自动化以及智能化,整体提升数据质量稽核的效率与工作质量。
-
公开(公告)号:CN113591485B
公开(公告)日:2024-07-12
申请号:CN202110671379.9
申请日:2021-06-17
申请人: 国网浙江省电力有限公司 , 国网浙江省电力有限公司信息通信分公司 , 浙江华云信息科技有限公司
IPC分类号: G06F40/30 , G06F40/289 , G06F40/242 , G06V10/42 , G06V10/75 , G06V10/762 , G06N3/04 , G06N3/08
摘要: 本发明公开了一种基于数据科学的智能化数据质量稽核系统及方法,方法包括:数据采集:进行检测对象元数据采集以及日志数据采集解析;数据特征提取:识别并剔除无效表和无效字段,同时通过修订算法根据数据内容对字段类型进行自动修订,根据字段类型提取特征;异常检测:预设数据异常检测方法库,与数据特征进行匹配以选取对应的异常检测方法并检测;任务调度编排:设置编排服务器和节点服务器,编排服务器根据任务请求将上述任务拆分为若干子步后分发给不同节点服务器处理。本发明提降低了数据资产管理和数据质量治理的门槛,实现数据质量稽核的通用性、规模化、自动化以及智能化,整体提升数据质量稽核的效率与工作质量。
-
-
-
-
-
-
-
-
-