一种被控系统运行调度的高效率强化学习方法及装置

    公开(公告)号:CN118674066A

    公开(公告)日:2024-09-20

    申请号:CN202410798963.4

    申请日:2024-06-20

    摘要: 本发明涉及强化学习领域,提供了一种被控系统运行调度的高效率强化学习方法及装置,方法包括:对被控系统的各状态‑动作对进行采样,根据采样结果确定各状态下各动作的动作类型、Q因子样本方差及已消耗样本总量;利用采样数据分配算法确定各状态下各动作目标样本量;根据各动作目标样本量与各动作已消耗样本量,确定各动作补充采样数量;根据各动作补充采样数量进行补充采样,利用补充采样的仿真结果重新确定各动作的动作类型、各状态‑动作对的Q因子样本方差;调整已消耗采样总量,判断已消耗样本总量满足动作采样数量约束条件,若是,则输出各状态下观测到的最优动作,本发明能够区分各状态动作的重要性,提升采样效率及优化策略性能。

    一种被控系统群的运行策略协同优化方法及装置

    公开(公告)号:CN118674109A

    公开(公告)日:2024-09-20

    申请号:CN202410798959.8

    申请日:2024-06-20

    摘要: 本发明涉及运行策略优化领域,提供了一种被控系统群的运行策略协同优化方法及装置,方法包括:根据仿真结果确定各动作的Q因子样本方差、各最优动作与非最优动作的Q因子融合值的性能差别以及已消耗样本总量;利用采样数据分配算法对上述量进行分析得到各动作目标样本量;根据各动作目标样本量与各动作已消耗样本量确定各动作补充采样量;根据补充采样量进行补充采样,利用补充仿真结果重新确定各动作的Q因子样本方差、性能差别以及已消耗样本总量;调整已消耗样本总量,判断已消耗样本总量是否小于预设总采样量,若是重新计算目标样本量及之后步骤,若否输出最优动作。本发明协同使用动作一致性的被控系统的运行数据,能够提升优化效率及性能。

    一种电磁暂态与机电暂态混合实时仿真接口进程控制系统

    公开(公告)号:CN101814733B

    公开(公告)日:2012-02-08

    申请号:CN201010145887.5

    申请日:2010-04-09

    IPC分类号: H02J3/00 G06F17/50

    摘要: 本发明涉及一种电磁暂态与机电暂态混合实时仿真接口进程控制系统,属于电力系统暂态仿真技术领域。包括:通信卡,用于通过计算机上的并行总线接收机电暂态仿真系统对第一电力系统的机电暂态仿真计算结果,并将其发送至信号分配器,同时接收信号分配器的实时数字仿真器对第二电力系统的电磁暂态仿真计算结果,并其发送至计算机;信号分配器,将接收的对第一电力系统的仿真计算结果发送至实时数字仿真器,接收对第二电力系统的电磁暂态仿真计算结果,并将其发送至通信卡;通信卡和信号分配器之间通过光纤连接。本发明控制系统保证了电磁暂态与机电暂态两个仿真系统的同步性、接口进程控制系统的实时性和接口进程控制系统的通讯精度及通讯距离。

    一种被控系统运行调度的监督强化学习方法及装置

    公开(公告)号:CN118674068A

    公开(公告)日:2024-09-20

    申请号:CN202410804234.5

    申请日:2024-06-20

    摘要: 本发明涉及强化学习领域,提供了一种被控系统运行调度的监督强化学习方法及装置,包括:确定各状态‑动作对的Q因子、Q因子样本方差以及已消耗样本总量;计算各状态下各非观测最优动作的重要性,将重要性排名前△M个非观测最优动作发送至监督者;调整已消耗采样总量,利用采样数据分配算法对各状态‑动作对的Q因子样本方差及已消耗样本总量进行分析得到各状态下各动作目标样本量;确定各动作补充采样数量;根据各动作补充采样数量进行补充采样,利用补充采样结果重新确定之前的步骤;判断已消耗样本总量满足动作采样数量约束条件,若是,则输出各状态下观测到的最优动作,本发明能够将监督者的监督与采样数据融合起来,提升学习效率及性能。

    一种智能变电站二次系统自动化检测方法及相关装置

    公开(公告)号:CN118604502A

    公开(公告)日:2024-09-06

    申请号:CN202411039098.1

    申请日:2024-07-31

    IPC分类号: G01R31/00

    摘要: 本申请公开了一种智能变电站二次系统自动化检测方法及相关装置,应用于由二次系统测试模块、网络性能测试模块、时钟测试模块和虚拟仿真模块构成的测试系统;方法包括:当对待测试IED设备进行测试时设置用于测试的基本参数与待测试IED设备的设备参数;设置待测试IED设备的SV和GOOSE参数,并导入测试文件,测试文件为根据测试项目的测试内容通过文字编辑的方式生成,同时,设置测试SV和GOOSE通道以及硬接点映射;调整SV和GOOSE的参数及整定值,并对测试文件进行测试;对测试过程进行监控,分析测试结果是否满足预设要求,得到测试结果并根据预置报告模板生成测试报告。从而解决了现有技术效率低且可靠性差的问题。