公开(公告)号：CN118920488A

公开(公告)日：2024-11-08

申请号：CN202410901146.7

申请日：2024-07-05

申请人： 国家电网有限公司华东分部 ,  国电南瑞南京控制系统有限公司

发明人： 周良才 ,  周毅 ,  沈维健 ,  刘林林 ,  李雷 ,  徐昊 ,  栾伟杰 ,  闪鑫 ,  徐希 ,  孙志豪 ,  高佳宁 ,  王波 ,  郑义明 ,  闫书赫 ,  徐万欣 ,  黄志龙 ,  曹路 ,  邹雅 ,  余飞翔 ,  陆廷骧 ,  吴自博 ,  张楷

IPC分类号： H02J3/12 ,  H02J3/16 ,  H02J3/00 ,  H02J3/24

摘要： 本申请公开了一种基于深度强化学习的调压设备控制参数的生成方法及装置，涉及电网运行技术领域，主要目的在于改善现有无法满足新型电网在无功优化问题上的需求，进而无法生成满足需求的调压设备控制参数的问题。包括：获取目标电网在预设时刻的状态参数；基于已完成模型训练的控制参数生成模型，根据所述状态参数生成调压设备控制参数，所述控制参数生成模型是基于强化学习网络构建，并在深度确定性策略梯度算法的基础上，结合与所述目标电网之间的交互状态进行模型训练得到的；根据所述调压设备控制参数控制所述目标电网中的各个调压设备。

公开(公告)号：CN118537036A

公开(公告)日：2024-08-23

申请号：CN202410447058.4

申请日：2024-04-15

申请人： 国家电网有限公司华东分部

发明人： 周良才 ,  周毅 ,  刘林林 ,  黄志龙 ,  曹路 ,  缪源诚 ,  李建华 ,  闻旻 ,  栾伟杰 ,  王澍 ,  丁佳立 ,  闫书赫 ,  徐万欣 ,  刘硕 ,  骆玮 ,  顾重仁

IPC分类号： G06Q30/0201 ,  H02J3/00 ,  H02J3/38 ,  H02J3/28 ,  H02J3/32 ,  G06Q30/0283 ,  G06Q50/06 ,  G06N3/045 ,  G06N3/092 ,  G06N3/048

摘要： 本申请公开应用于分布式资源聚合的激励价格确定方法、装置及介质，该方法包括：获取每个分布式资源在当前训练时段对应的电能消耗数据，基于电能消耗数据，训练深度确定性策略梯度模型；获取每个分布式资源在当前时段对应的第一电能消耗变化量；将每个分布式资源在当前时段对应的第一电能消耗变化量输入至训练完的深度确定性策略梯度模型，获得每个分布式资源在当前时段对应的激励价格，能够根据分布式资源的电能消耗情况，精确地确定双向分布式资源的激励价格，为每个分布式资源提供精确的奖励机制，确保分布式聚合资源的有效调度，吸引更多来自需求侧的分布式资源加入分布式聚合系统。

公开(公告)号：CN118508450A

公开(公告)日：2024-08-16

申请号：CN202410510323.9

申请日：2024-04-26

申请人： 国家电网有限公司华东分部

发明人： 周良才 ,  周毅 ,  刘林林 ,  黄志龙 ,  曹路 ,  徐昊 ,  王健 ,  张亮 ,  范栋琦 ,  闫书赫 ,  王浩宇 ,  余少琪 ,  高佳宁 ,  丁佳立 ,  刘硕 ,  徐万欣

IPC分类号： H02J3/06 ,  G06N3/04 ,  G06N3/092 ,  H02J3/00

摘要： 本申请公开了一种用全纯嵌入法引导深度强化学习的实时最优潮流方法，涉及电力系统优化运行技术领域。其中方法包括：分别定义电力系统的系统状态变量和策略动作变量；基于所述系统状态变量和所述策略动作变量，构建所述电力系统对应的策略模型，其中，所述策略模型对应的经验缓冲区中仅存储系统状态；将所述电力系统的非线性潮流方程转换为全纯函数，以构建所述电力系统对应的评论者函数；对所述评论者函数和所述策略模型进行交替更新迭代，当满足预设收敛条件时，输出最终更新后的策略模型，并确定所述电力系统对应的最优策略动作。本申请能够解决深度强化学习算法在电力系统优化过程中所存在的适应性和安全性的问题。