-
公开(公告)号:CN112784994B
公开(公告)日:2023-03-03
申请号:CN202011633318.5
申请日:2020-12-31
Applicant: 浙江大学 , 南方电网数字电网研究院有限公司
Abstract: 本发明公开一种基于区块链的联邦学习数据参与方贡献值计算和激励方法,该方法包括步骤:对数据参与方的本地训练模型进行特征提取,获得模型更新数据;数据需求方对所述模型更新数据解码,得到中间验证模型;数据需求方对中间验证模型分批次评估得到评估指标;根据所述评估指标计算所述数据参与方的贡献度;根据所述数据参与方的贡献度向数据参与方分配激励值;将数据参与方的激励值和地址形成奖励队列放入区块链上。本发明以由数据需求方对数据参与方的贡献进行评估和计算,再以各方贡献为分配依据进行奖励的分配,保证公平性,同时提高数据拥有方参与联邦学习的热情;有效地鼓励和吸引数据拥有方参与到联邦学习中来。
-
公开(公告)号:CN115270019A
公开(公告)日:2022-11-01
申请号:CN202210440032.8
申请日:2022-09-23
Applicant: 南方电网数字电网研究院有限公司
IPC: G06F16/957 , G06F40/106 , G06V30/148
Abstract: 本发明涉及一种用于网页版电子文档本地化的方法,属于电子化文档的本地化处理技术领域。该方法具体包括:获取网页版电子文档;全屏截取所述网页版电子文档的最初状态图像;利用边界判断方法截取所述最初状态图像的文档部分;截取所述最初状态图像的文档部分并保存。本发明还提供相应的用于网页版电子文档本地化的系统。本发明通过智能判断并自动截取的方式实现网页版电子文档本地化,便于在没有网络环境下的查阅。
-
公开(公告)号:CN114722064A
公开(公告)日:2022-07-08
申请号:CN202210175023.0
申请日:2022-02-23
Applicant: 南方电网数字电网研究院有限公司
IPC: G06F16/242 , G06F16/2455 , G06F21/62
Abstract: 本发明属于大数据技术领域,且公开了一种基于presto引擎的敏感数据识别及脱敏方法包括数据输入单元、数据识别单元、数据脱敏单元和数据输出单元;所述数据输入单元,用于用户数据的输入并触发敏感数据识别单元;所述数据识别单元。该发明通过其简单的数据结构,列式存储逻辑行,大部分数据都可以轻易的转化成presto所需要的这种数据结构,且利用presto引擎进行数据脱敏,解决presto引擎上无法支持灵活高效数据脱敏功能的问题,可以通过自定义脱敏规则,平台全流程化、引擎解耦,主数据规则引擎生成、数据标准规范引擎、数据质量规则引擎可基于需求场景进行能力扩展和升级,能较好的集成不同的用户管理平台,元数据管理平台。
-
公开(公告)号:CN114626805A
公开(公告)日:2022-06-14
申请号:CN202210175025.X
申请日:2022-02-23
Applicant: 南方电网数字电网研究院有限公司
IPC: G06Q10/10 , G06Q10/06 , G06F16/215 , G06F16/22 , G06Q50/06
Abstract: 本发明涉及电网数据管理技术领域,且公开了一种基于NLP、KG技术的电网数据智能化管理方法,包括以下步骤,主数据目录和数据标准生成,先基于《南网电网企业公共信息模型》、《业务对象清单》《数据质量标准清单》通过NLP和KG技术生成业务元数据。该基于NLP、KG技术的电网数据智能化管理方法,通过主数据目录生成,数据标准生成,质量规则引擎生成及质量自动化探查,数据关系及影响链分析,数据问题自动修复等,实现数据资产的自动化构建和数据质量的保障,一方面,降低数据治理和资产构建过程中的数据资产目录梳理与数据标准规范梳理的人力投入,更加省时省力,另外一方面,更全面的保障数据质量,为数据价值发挥和应用提供基础。
-
公开(公告)号:CN114625764A
公开(公告)日:2022-06-14
申请号:CN202210175021.1
申请日:2022-02-23
Applicant: 南方电网数字电网研究院有限公司
IPC: G06F16/2455 , G06F16/2458 , G06F16/22 , G06F21/62
Abstract: 本发明属于计算机技术与信息安全技术领域,且公开了基于混合引擎的大数据处理系统与方法,包括如下步骤:S1、脱敏规则生成,包括系统规则和用户规则;a、脱敏规则主要包括以下信息,脱敏模板名称和类型、脱敏字段的字段类型(只有符合字段类型要求的字段才能应用该脱敏规则,字段类型列表)。本发明通过presto实现动态脱敏功能,支持脱敏规则模板的管理,支持预定义和自定义方式,通过用户密级管理模块,表格字段级别脱敏规则管理(模板、参数、密级、数据字段相互关联),计算引擎实现动态脱敏功能,从而解决了presto引擎上无法支持灵活高效数据脱敏功能的问题,可以通过自定义脱敏规则,从而实现数据的高效安全的共享。
-
公开(公告)号:CN114399582A
公开(公告)日:2022-04-26
申请号:CN202111401506.X
申请日:2021-11-23
Applicant: 南方电网数字电网研究院有限公司
Abstract: 本发明涉及电力设备资产技术领域,公开了一种电力设备资产统一建模方法,获取电力设备的三维模型数据,对电力设备的三维模型进行空间划分;提取位于若干个子空间内部的模型子体,提取出所述的模型子体的特征点的坐标信息;提取模型子体特征点的坐标信息并根据其位置坐标信息构建出以所述的特征点所形成的面为外部边界的闭合实体作为模型子体的衍射模型子体;在原先电力设备的三维模型中,将所述的模型子体与其相对应的衍射模型子体进行替换,从而形成该电力设备的衍射模型。以简单实体来代替原先复杂的模型数据,使得后续电力设备的搭配的设计时,三维模型数据不会占用过多的电脑内存,从而减小电脑卡顿或者死机的概率。
-
公开(公告)号:CN114357031A
公开(公告)日:2022-04-15
申请号:CN202210008534.3
申请日:2022-01-06
Applicant: 南方电网数字电网研究院有限公司
IPC: G06F16/2458 , G06F16/21 , G06F16/22 , G06F16/25 , G06F16/27
Abstract: 本发明公开的属于数据加工技术领域,具体为一种数据查看引擎动态调用方法,包括具体步骤如下:S1,读取用作分析的数据表:用户通过一种编程语言,从数据源中读取要分析用的数据表;S2,建立不同的计算执行引擎来处理不同级别的数据量来进行预览和执行,预览为取部分数据进行执行,执行为取全部数据进行执行,用于预览的资源可为单机服务器配置,资源消耗较小支持用户并发数较大,本发明提升了查看数据的效率,相对于单线程计算引擎,分布式计算引擎在计算过程中增加了数据分块和资源管理的过程,对于小数据量来说这些反而增加了负担,因此对于小数据量的计算,单线程引擎更加有效。
-
公开(公告)号:CN114265576A
公开(公告)日:2022-04-01
申请号:CN202111416657.2
申请日:2021-11-19
Applicant: 南方电网数字电网研究院有限公司
Abstract: 本发明公开了一种基于微服务架构的模型设计与验证方法,包括以下步骤:参考业务模型、应用系统,识别和梳理所有概念,并明确概念的定义和描述;对表达概念的数据信息进行梳理刻画,同时对数据信息进行向量特征提取;依据概念模型对概念的相似性和关联性进行分类和聚合,本发明结构紧凑,操作简单便捷,实用性强,通过统一模型构建来化解能源网复杂系统的不确定性,实现了数据融通共享效果,从而提供了统一的数据运营生态环境,优化了资源配置效率,不仅提升了用户体验,降本增效,构建企业新型竞争优势,实现企业高质量发展,而且还可以有效的支撑各业务部门开展业务模式创新,为实现全局业务贯通,最大程度实现系统间数据共享提供基础保障。
-
公开(公告)号:CN110941681B
公开(公告)日:2021-02-23
申请号:CN201911268589.2
申请日:2019-12-11
Applicant: 南方电网数字电网研究院有限公司
Abstract: 本申请涉及一种电力系统的多租户数据处理系统、方法和装置,该系统包括:多租户模型和大数据处理平台;多租户模型,包括租户前端、管理员前端和后台服务器;租户前端,用于将目标租户的租户请求发送至后台服务器;管理员前端,用于获取租户请求,并将针对于租户请求的租户请求反馈指令发送至后台服务器;若租户请求反馈指令为租户请求同意指令,后台服务器将对应的第一响应指示信息以及租户请求发送至大数据处理平台;大数据处理平台,用于接收第一响应指示信息以及租户请求,对租户请求进行响应,将第一响应结果反馈至后台服务器。本申请通过构建多租户模型与大数据处理平台进行数据交互的系统架构,提高对电力系统的多租户数据处理的效率。
-
公开(公告)号:CN110990351B
公开(公告)日:2020-09-04
申请号:CN201911234297.7
申请日:2019-12-05
Applicant: 南方电网数字电网研究院有限公司
IPC: G06F16/17 , G06F16/901
Abstract: 本申请涉及一种非结构化数据采集方法、装置、系统、计算机设备和存储介质。所述方法包括:当检测到结构化数据发生变化时,获取采集任务;根据所述采集任务确定文件服务器类型;从多源端文件服务器中,确定与所述文件服务器类型对应的目标文件服务器;从变化后的结构化数据中,获取所述目标文件服务器的访问路径信息;基于所述访问路径信息,访问所述目标文件服务器,以采集所述目标文件服务器存储的非结构化数据。采用本方法能够实现了对于具有多种文件存储架构的多源端系统,自动识别文件服务器类型,进而采集非结构化数据,从而,解决了传统的非结构化数据采集工具适用性差、难以扩展的问题。
-
-
-
-
-
-
-
-
-