-
公开(公告)号:CN119988467A
公开(公告)日:2025-05-13
申请号:CN202411833413.8
申请日:2024-12-13
Applicant: 国网思极数字科技(北京)有限公司 , 北京国网信通埃森哲信息技术有限公司
Inventor: 龙长贵 , 赵林林 , 赵峰 , 王思宁 , 詹治国 , 陈刚 , 龙昌敏 , 张洪冰 , 王乖强 , 赵健宇 , 王雅芳 , 王誉博 , 张朔 , 牟江涛 , 夏君权 , 蒋清崴 , 唐为岑
IPC: G06F16/25 , G06F16/215 , G06F11/30 , G06F9/50
Abstract: 本发明提供了一种基于快速动态负载调整的智能化数据接入与集成方法,包括自动探测和识别多种数据源,对数据源进行自动适配,以实现多源数据的无缝接入。方法通过自学习机制预测并自动纠正数据质量问题,并对原始数据进行清洗和转换。根据实时负载情况,系统动态调整数据处理流程,低负载时简化处理步骤,高负载时启动额外的ETL服务并进行节点扩展。此外,通过动态冷热数据分离存储策略,优化数据存储成本。系统提供RESTful API和GraphQL接口,并实时监控系统性能,以确保高效、稳定的数据处理与管理。