-
公开(公告)号:CN117833353A
公开(公告)日:2024-04-05
申请号:CN202311630737.7
申请日:2023-11-30
申请人: 国家电网有限公司华东分部 , 国电南瑞南京控制系统有限公司
发明人: 周毅 , 沈维健 , 周良才 , 陈清 , 高佳宁 , 范栋琦 , 闪鑫 , 王波 , 王天禄 , 骆玮 , 徐峰 , 徐希 , 李雷 , 郑义明 , 孙小磊 , 刘理达 , 孙志豪 , 余飞翔 , 陆廷骧 , 吴自博 , 张楷 , 杨永瑞 , 夏正国 , 周志涛 , 李林鑫 , 滕书宇
IPC分类号: H02J3/46 , H02J3/48 , G06N3/006 , G06F30/27 , G06F113/04
摘要: 本发明公开了一种电网有功控制智能体的仿真训练方法、装置及设备,涉及电力系统仿真技术领域,可解决目前深度强化学习训练的智能体无法适用于实际电网模型拓扑结构的问题。其中方法包括:获取基于深度强化学习构建的智能体,基于实际电网模型拓扑结构与历史运行数据构建电网仿真环境,在电网仿真环境中,获取电网设备至少一组初始状态数据,训练智能体,生成初始有功控制动作策略;若初始有功控制动作策略满足预设校验条件,根据初始有功控制动作策略更新初始状态数据,得到下一状态数据;根据初始状态数据与下一状态数据计算得到初始动作奖励值,利用下一状态数据与初始动作奖励值继续训练智能体,直到达到预设停止条件,得到训练完成的智能体。
-
公开(公告)号:CN118920488A
公开(公告)日:2024-11-08
申请号:CN202410901146.7
申请日:2024-07-05
申请人: 国家电网有限公司华东分部 , 国电南瑞南京控制系统有限公司
发明人: 周良才 , 周毅 , 沈维健 , 刘林林 , 李雷 , 徐昊 , 栾伟杰 , 闪鑫 , 徐希 , 孙志豪 , 高佳宁 , 王波 , 郑义明 , 闫书赫 , 徐万欣 , 黄志龙 , 曹路 , 邹雅 , 余飞翔 , 陆廷骧 , 吴自博 , 张楷
摘要: 本申请公开了一种基于深度强化学习的调压设备控制参数的生成方法及装置,涉及电网运行技术领域,主要目的在于改善现有无法满足新型电网在无功优化问题上的需求,进而无法生成满足需求的调压设备控制参数的问题。包括:获取目标电网在预设时刻的状态参数;基于已完成模型训练的控制参数生成模型,根据所述状态参数生成调压设备控制参数,所述控制参数生成模型是基于强化学习网络构建,并在深度确定性策略梯度算法的基础上,结合与所述目标电网之间的交互状态进行模型训练得到的;根据所述调压设备控制参数控制所述目标电网中的各个调压设备。
-
公开(公告)号:CN117856284B
公开(公告)日:2024-06-07
申请号:CN202311617299.0
申请日:2023-11-29
申请人: 国家电网有限公司华东分部 , 北京清大科越股份有限公司
摘要: 本申请涉及电网技术领域,公开了一种基于深度强化学习的电网频率的控制方法及装置;其方法包括:获取电网系统状态,将所述电网系统状态输入至智能体,输出初步控制策略;其中,所述智能体基于软演员‑评论家SAC深度强化学习算法建立;基于控制屏障系统对所述初步控制策略进行过滤,获取目标控制策略;其中,所述控制屏障系统用于保证任一时刻的电网系统状态处于安全区域;基于所述目标控制策略,控制所述电网的有功频率。本申请能够及时调整控制策略以适应新的电网系统状态,并确保任何由智能体输出的控制策略都不会导致电网系统状态进入不安全区域,为电网的稳定运行提供了可靠保障,提高电网有功频率控制的准确性、安全性和鲁棒性。
-
公开(公告)号:CN117856284A
公开(公告)日:2024-04-09
申请号:CN202311617299.0
申请日:2023-11-29
申请人: 国家电网有限公司华东分部 , 北京清大科越股份有限公司
摘要: 本申请涉及电网技术领域,公开了一种基于深度强化学习的电网频率的控制方法及装置;其方法包括:获取电网系统状态,将所述电网系统状态输入至智能体,输出初步控制策略;其中,所述智能体基于软演员‑评论家SAC深度强化学习算法建立;基于控制屏障系统对所述初步控制策略进行过滤,获取目标控制策略;其中,所述控制屏障系统用于保证任一时刻的电网系统状态处于安全区域;基于所述目标控制策略,控制所述电网的有功频率。本申请能够及时调整控制策略以适应新的电网系统状态,并确保任何由智能体输出的控制策略都不会导致电网系统状态进入不安全区域,为电网的稳定运行提供了可靠保障,提高电网有功频率控制的准确性、安全性和鲁棒性。
-
-
-