本发明公开了基于时空分离变形记忆网络的视频异常检测方法，基于编码器、多头注意力机制、时序记忆模块、解码器构建基于时空分离变形记忆网络；从数据库提取视频帧序列作为训练样本，输入基于时空分离变形记忆网络预测未来时刻的帧；构建基于时空分离变形记忆网络的损失函数，根据损失函数迭代训练基于时空分离变形记忆网络；将待检测视频输入训练后的基于时空分离变形记忆网络，得到待检测预测帧，根据待检测预测帧与真实帧之间的误差，判断待检测视频是否异常；本发明检测方法通过视频序列中的不同目标间关系和目标的时序特征计算，提升视频异常检测精度。