- 专利标题: 一种数据加载方法、装置、电子设备及存储介质
-
申请号: CN202111106923.1申请日: 2021-09-22
-
公开(公告)号: CN113850494B公开(公告)日: 2024-06-11
- 发明人: 江嘉铭 , 阮伟聪 , 覃高星 , 钟恒辉 , 郭咏 , 董家读 , 光俊红 , 谢国财 , 盖凌云
- 申请人: 广东电网有限责任公司 , 广东电网有限责任公司清远供电局 , 广东电网能源投资有限公司
- 申请人地址: 广东省广州市越秀区东风东路757号; ;
- 专利权人: 广东电网有限责任公司,广东电网有限责任公司清远供电局,广东电网能源投资有限公司
- 当前专利权人: 广东电网有限责任公司,广东电网有限责任公司清远供电局,广东电网能源投资有限公司
- 当前专利权人地址: 广东省广州市越秀区东风东路757号; ;
- 代理机构: 北京品源专利代理有限公司
- 代理商 岳晓萍
- 主分类号: G06Q10/0639
- IPC分类号: G06Q10/0639 ; G06F16/22 ; G06Q50/06
摘要:
本发明实施例公开了一种数据加载方法、装置、电子设备及存储介质。所述方法包括:获取电能质量终端中的电能质量基础数据,通过数据转换单元对数据进行转换,生成电能质量数据;若检测电能质量数据中存在的异常数据,则确定异常数据的数据类型;根据异常数据的数据类型获取对应的数据清洗规则,并根据所述数据清洗规则对异常数据进行清洗;将清洗后的结果数据保存到Hadoop结果数据库中。采用本申请方案,提升了电网数据加载的灵活性和高效性,可以根据需要对数据加载服务进行横向和/或纵向的扩展,以增大数据的加载能力,减少系统资源的使用。
公开/授权文献
- CN113850494A 一种数据加载方法、装置、电子设备及存储介质 公开/授权日:2021-12-28