本发明提供一种基于行为识别算法的物体被盗检测方法及装置，该方法包括：对待检测视频的当前帧图像中的物体放置区域进行稀疏编码，将当前帧图像对应的稀疏编码与所述物体放置区域的参考图像的稀疏编码进行比较；在所述当前帧图像对应的稀疏编码与所述参考图像对应的稀疏编码之间的距离大于第一预设阈值的情况下，根据所述待检测视频中包含当前帧图像的视频段，基于行为识别算法检测是否存在物体盗窃行为。本发明减少行为识别算法的使用次数，降低资源消耗，提高检测效率，降低检测延时。