本发明公开了一种配电网电压自主优化控制方法及装置，该方法包括，构建基于多种调压装置的配电网双时间尺度最优电压控制模型；将电压控制问题转化成马尔科夫决策过程；基于所述马尔科夫决策过程中的离散型控制变量构建深度Q网络智能体，基于连续型变量构建深度确定性策略梯度智能体；基于调压装置的历史状态数据构建训练集和测试集，训练智能体；将实时获得的调压装置状态数据输入到训练好的深度Q网络智能体和深度确定性策略梯度智能体，得到输出动作，对电压进行自主控制。本发明方法建立了双时间尺度电压自主优化控制方案，实现了有功调整和无功调整相结合，实现对各种调压装置的优化控制。