-
公开(公告)号:CN118897947A
公开(公告)日:2024-11-05
申请号:CN202410846433.2
申请日:2024-06-27
Applicant: 贵州电网有限责任公司
IPC: G06F18/10 , G06F40/289 , G06F40/216 , G06F40/30 , G06F40/126 , G06F18/25 , G06F18/22 , G06N3/0442 , G06N3/045
Abstract: 本发明公开了一种面向大数据环境的动态文档去重方法及系统,涉及动态文档去重技术领域,包括采集原始文本数据并进行预处理,基于自然语言处理方法对预处理文本数据进行关键词切分;计算切分文本数据中每个关键词的TF‑IDF值获取频率文本数据,基于哈希函数生成关键词特征集并生成标识符;通过标识符比较各文档的相似度,构建分布式计算框架对比较过程进行并行去重处理。本发明所述方法基于自然语言处理方法对预处理文本数据进行关键词切分,提高了数据的结构化水平,通过TF‑IDF值计算和哈希函数映射,提高了数据处理的效率和准确性,通过并行计算和任务分发,解决了现有技术在处理大规模数据时存在的效率瓶颈问题。
-
公开(公告)号:CN118113459A
公开(公告)日:2024-05-31
申请号:CN202410077151.0
申请日:2024-01-18
Applicant: 贵州电网有限责任公司
Abstract: 本发明公开了一种多方协同控制的气象大数据处理效率方法及系统,方法包括:通过气象网络业务底层数据,获取当前区域气象系统复杂节点的数据;通过移动边缘算力解构方法进行处理分析,得到业务模型可解构的智能架构;设计气象网络业务的多因子,通过强化学习的对抗性智能体优化策略,进行气象网络业务中的多因子最优规划,通过多因子联合计算,自适应动态生成气象业务的调度,得到至算力节点的最优路径调度。本发明能够最大限度地减少数据共享和隐私泄露的风险,提高模型的性能和泛化能力,提高气象网络业务资源效率,有助于提高气象网络业务的整体性能、加快业务处理速度,从而优化资源利用率。
-
公开(公告)号:CN118964602A
公开(公告)日:2024-11-15
申请号:CN202410834549.4
申请日:2024-06-26
Applicant: 贵州电网有限责任公司
IPC: G06F16/34 , G06F18/213 , G06F18/26 , G06F40/216 , G06F40/30 , G06Q50/06 , G06N3/0442 , G06N3/045 , G06N3/0455 , G06N3/0475 , G06N3/084 , G06N3/094
Abstract: 本发明公开了一种基于自注意力机制的特征抽取与摘要生成方法及系统,包括:收集并构建电网领域的文本数据集,并对文本数据集进行预处理;对文本数据集中的数据进行关联性分析,得到关联数据和独立数据;构建基于多层注意力机制和前馈神经网络堆叠的编码器结构,对关联数据和独立数据中的电网文本数据进行特征抽取;构建基于自注意力机制结合注意力机制的解码器,根据特征抽取所得到的特征向量生成文本摘要。本发明将相关的文本信息进行有效整合和摘要,从而减少信息溶于,提高后续分析的效率和准确信息;能够在不同层次上对文本进行抽象和表示,提高特征的表达能力,进一步提高特征的抽取效果和准确性。
-
公开(公告)号:CN118885555A
公开(公告)日:2024-11-01
申请号:CN202410826907.7
申请日:2024-06-25
Applicant: 贵州电网有限责任公司
IPC: G06F16/31 , G06F16/33 , G06F40/30 , G06F40/279 , G06F40/216 , G06N3/08
Abstract: 本发明公开了一种能源行业大数据的语料库自动构建方法及系统,包括:采集能源行业数据,分析得到能源实体及事件关系,定义要素路径并构建触发词语义匹配模板;根据关键要素路径比例,计算关键要素路径集合;根据触发词匹配率,匹配事件关系,使用语义单元生成能源事件关系语料库。本发明通过采集和分析能源数据,定义要素路径并构建触发词语义匹配模板,奠定了数据处理基础。计算关键要素路径集合,优化匹配模板,提高匹配精度。随后,通过匹配事件关系,使用语义单元生成高质量语料库,确保丰富的事件关系和实体信息。建立事件关系抽取模型并进行两阶段训练,生成的语料库具备高准确性和全面性,显著提升了大数据分析和应用的效率与可靠性。
-
公开(公告)号:CN118132580A
公开(公告)日:2024-06-04
申请号:CN202311723673.5
申请日:2023-12-14
Applicant: 贵州电网有限责任公司
IPC: G06F16/242 , H02J13/00 , G06F16/25
Abstract: 本申请涉及一种输电线路过载检测方法、装置和计算机设备,通过获取待检测线路段的实时电流数据;将所述实时电流数据转化为预设格式,并且写入Kafka消息队列;获取管理辖区内所有线路段对应的元数据信息,并且存储至数据库;利用实时计算引擎在所述数据库中查找与所述Kafka消息队列中的实时电流数据相匹配的目标元数据信息;基于所述目标元数据信息和所述待检测线路段的实时电流数据,对待检测线路段进行过载检测。上述输电线路过载检测方法,基于实时计算引擎和Kafka消息队列,能够及时并且精准的对输电线路过载情况进行检测,因而最大程度的降低安全风险。
-
公开(公告)号:CN119884218A
公开(公告)日:2025-04-25
申请号:CN202411816755.9
申请日:2024-12-11
Applicant: 贵州电网有限责任公司
Abstract: 本发明公开了一种多服务集成的能源数据中心管理系统及方法,涉及数据中心管理技术领域,包括基础资源模块、数据处理模块、应用服务模块以及支撑保障模块;所述基础资源模块用于提供计算、存储和网络资源;所述数据处理模块与所述基础资源模块连接,负责数据的收集、初步处理、开发、资产管理、安全管理和隐私计算;所述应用服务模块部署在所述数据处理模块上,用于提供敏捷开发环境、应用管理平台及工业互联网标识解析功能,并为用户提供直接操作界面和服务门户;所述支撑保障模块进行独立设置并与其它所有模块相交联,用于提供制度机制、标准规范、运维保障和安全防护。本发明提高了系统的抗风险能力,建立了用户对系统的信任感。
-
公开(公告)号:CN119759996A
公开(公告)日:2025-04-04
申请号:CN202411815764.6
申请日:2024-12-11
Applicant: 贵州电网有限责任公司
Abstract: 本发明公开了一种基于湖仓一体的异构能源数据存储方法包括,收集异构能源数据,并对所述数据进行预处理;对处理后的数据利用FCM算法进行模糊聚类提取出特征关键字;基于Hive组件将所述HDFS组件中的所述源数据加载到基于Hive组件创建的湖仓表中。本方法通过FCM聚类和ETL工具统一异构能源数据,优化数据加载和查询效率,降低处理耗时。利用湖仓一体架构增强了数据治理和跨领域共享,提升了系统扩展性和灵活性,降低数据处理耗时,提高数据查询及执行的效率并有效降低数据孤岛难统一管理的问题。
-
公开(公告)号:CN119647776A
公开(公告)日:2025-03-18
申请号:CN202411789333.7
申请日:2024-12-06
Applicant: 贵州电网有限责任公司
IPC: G06Q10/063 , G06Q50/06
Abstract: 本发明公开了一种基于分布式的多级能源数据管理方法包括,获取电力系统的各种电力数据,并识别所述电力系统中的服务点;根据所述电力数据对电力系统中的服务点进行分析,确定所述电力系统中服务点的服务类型;通过对服务点进行定义,得到所述电力系统的能源数据中心需要遵循的约束条件,并对所述约束条件进行线性化处理,得到所述数据执行规则。本发明方法通过集中化的能源数据中心,提高了能源数据的管理效率和分析能力,推动了能源产业的数字化转型,促进了产业的升级和创新发展,通过数据共享和流通,增强了能源数据的可用性,充分释放了能源大数据的价值,通过实时监控和预警,提升能源供应的安全性和稳定性。
-
公开(公告)号:CN119646045A
公开(公告)日:2025-03-18
申请号:CN202411789334.1
申请日:2024-12-06
Applicant: 贵州电网有限责任公司
IPC: G06F16/2455 , G06F16/28
Abstract: 本发明公开了一种针对能源大数据的批流一体数据处理方法包括,进行能源大数据采集及能源大数据存储;使用Flink Catalog统一接入Kafka和Iceberg的元数据,为Kafka和Iceberg分别创建一个数据库空间,进行能源大数据加工处理;执行能源大数据分析应用。本发明的目的在于提供一种针对能源大数据的批流一体数据处理方法,解决现有技术中对能源大数据的流处理与批处理无法有效结合、数据处理效率低、扩展性和兼容性不足、技术先进性不够的问题。
-
公开(公告)号:CN119624622A
公开(公告)日:2025-03-14
申请号:CN202411684889.X
申请日:2024-11-22
Applicant: 贵州电网有限责任公司
IPC: G06Q40/03 , G06Q10/0637 , G06F16/25 , G06F18/15 , G06Q50/06
Abstract: 本发明涉及企业运行和信用评价技术领域,尤其涉及基于企业用电数据的企业运行评价方法及系统,通过整理采集的数据得到一级数据,对一级数据进行处理后构建二级模型,并对其进行赋分和优化。利用智能电表和负荷控制装置等智能装置产生的动态、不可篡改的数据,本方法将可信数据融入企业评价模型中,更客观地反映企业的实时经营状况,提高评估的准确性;此外,模型的评估结果为金融机构在审批贷款前提供重要数据参考,降低复核成本,并通过动态监控警示位数值,有效降低金融风险;同时,企业可以使用模型结果来监管运行情况,制定精准的管控策略,增强对分支机构和子公司的生产与经营的动态监控,从而促进企业自身的发展。
-
-
-
-
-
-
-
-
-