本申请属于综合能源系统运行控制技术领域，具体而言，涉及一种电热耦合系统调度方法、装置、电子设备及其存储介质。本方法首先构建一个用于电热耦合系统调度的强化学习网络；实时采集电热耦合系统中的量测数据，根据量测数据及电热耦合系统对控制信号的反应情况，对所述强化学习网络进行训练，更新强化学习网络中的参数；利用训练好的强化学习网络，根据实时采集的量测数据输出动作，对电热耦合系统进行控制。克服传统基于模型的优化方法和传统强化学习算法的不足之处，基于附加记忆的强化学习，不依赖于建筑物的精确模型，且可处理电热耦合系统中热传递大时延带来的难以学习的问题，最大限度挖掘负荷侧的灵活性，适于在线应用。