公开(公告)号：CN117748473A

公开(公告)日：2024-03-22

申请号：CN202311621779.4

申请日：2023-11-30

Applicant: 北京交通大学

Inventor： 王小君 ,  刘曌 ,  段玉戈 ,  许寅 ,  王颖 ,  马伟 ,  韩译

IPC: H02J3/00 ,  G06Q10/04 ,  G06Q10/0631 ,  G06Q50/06 ,  G06N3/006 ,  G06N3/042 ,  G06N3/045 ,  G06N3/092 ,  H02J3/14 ,  B60L53/30 ,  B60L53/31 ,  B60L53/60

Abstract: 本发明提供一种基于知识嵌入和数据驱动的社群充电站调度方法及系统，属于电动汽车充电站运行调度技术领域，引入电动汽车用户的充电紧迫度判断指标及充电模式选择，量化用户的个性化充电需求，建立以最小化充电站月运行成本为目标的优化调度模型，针对充电桩功率连续可调的特点，将优化运行问题转化为马尔可夫决策过程，实现了多约束优化问题向无约束优化问题的转换；采用基于知识嵌入的改进深度确定性策略梯度算法，实现引导智能体快速地识别并应用先前积累的经验，从而使其更有效地应对不断变化的环境需求，从而求取社群充电站的实时自调度策略。本发明提高了社群充电站运行调度的经济性，实现了平抑站内运行负荷尖峰，有效短了模型的学习过程。

公开(公告)号：CN119831565A

公开(公告)日：2025-04-15

申请号：CN202411869986.6

申请日：2024-12-18

Applicant: 北京交通大学 ,  中国电力科学研究院有限公司 ,  国网上海市电力公司

Inventor： 王小君 ,  窦嘉铭 ,  金敏杰 ,  乔骥 ,  李家腾 ,  李琰 ,  刘曌 ,  韩译 ,  林明聪 ,  苏运 ,  徐焰 ,  林君豪 ,  李凡

IPC: G06Q10/20 ,  G06Q50/06 ,  G06F30/27 ,  G06N3/092 ,  G06F111/04 ,  G06F111/06 ,  G06F113/04

Abstract: 本发明提供一种多目标强化学习的配电网检修计划设置方法和系统。包括：利用搜索法开展初始计划的合并与互斥判断；建立了包括配电网检修计划经济性、任务量等多个目标的检修计划调整数学模型，同时考虑了可能出现的工期时长波动；将数学模型转化为约束马尔可夫决策过程，定义检修状态、检修动作、检修计划编排奖励函数和约束空间，利用噪声深度Q强化学习对计划编排智能体进行训练求解；利用某检修计划数据验证了所提方法的有效性。本发明通过搜索法和多目标噪声深度Q强化学习，可以进行配电网检修计划自动合并与计划排期，提高检修计划的合理性和经济性，提升配电网决策的智能化。

公开(公告)号：CN119849821A

公开(公告)日：2025-04-18

申请号：CN202411913194.4

申请日：2024-12-24

Applicant: 北京交通大学 ,  国网上海市电力公司

Inventor： 王小君 ,  窦嘉铭 ,  金敏杰 ,  苏运 ,  徐焰 ,  林君豪 ,  李凡 ,  刘曌 ,  韩译 ,  吴晓涵

IPC: G06Q10/0631 ,  G06Q50/06 ,  H02J3/00 ,  G06F30/27 ,  G06N3/006 ,  G06F111/06 ,  G06F111/04

Abstract: 本发明提供了一种利用规则语言引导的综合能源系统多目标调度方法和装置。该方法包括：建立综合能源系统IES多目标调度的数学模型；结合大语言模型LLM将IES多目标调度优化的数学模型转化为马尔可夫决策过程MDP过程，构建用于多目标引导交互的LLM智能体；通过所述LLM智能体利用多目标深度确定性策略梯度算法DDPG对IES多目标调度优化的MDP过程进行求解，得到IES多目标调度的决策方案。本发明通过结合LLM和深度强化学习模型，可以较好地实现IES调度优化过程中人类的多目标偏好引导，为调度部门和人员安排实际电网发电计划提供理论和技术支撑。