本发明属于新能源电网无功化优化领域，特别是一种基于强化学习的分布式光伏并网电压二次控制方法。现有分布式光伏并网后会发生电压越界造成电压波动大，为此本发明提供了一种基于强化学习的分布式光伏并网电压二次控制方法稳定电压，包括依序进行的以下步骤：先建立分布式光伏并网模型，其包括以调整分布式光伏系统的无功功率进行电压控制的一次电压控制模型和使用一次模型引起的电压偏差作输入的二次电压控制模型；在二次模型中，用Q学习训练减小电压偏差，通过训练Q表找出减小电压偏差的优化调整策略；建立基于Q学习的配电网电压控制方式。本发明用通过电压控制模型结合Q学习修正无功功率计划值，为一级电压控制提供无功参考值稳定电压。