-
公开(公告)号:CN119645983A
公开(公告)日:2025-03-18
申请号:CN202411789337.5
申请日:2024-12-06
Applicant: 贵州电网有限责任公司
IPC: G06F16/215 , G06F16/242 , G06F16/25 , G06F16/28
Abstract: 本发明公开了一种多源异构能源数据的入湖方法包括,获取来自能源企业内外部系统的多源异构数据,进行入湖数据预处理;多源异构数据入湖,由Apache Flink作为统一的数据入湖引擎,每类数据的入湖方式不同,通过不同的入湖控制器进行数据入湖;执行湖数据归档、删除、迁移。本发明通过使用Flink+Iceberg的技术架构实现多源异构能源数据实时入湖,支持从不同类型的数据源接入数据,确保数据来源的多样化和全面性,适配多种数据格式,满足能源业务处理的实时性和灵活性要求。