本发明公开了一种基于遥感影像和DEM数据的地质灾害判识方法和装置。其中方法包括：构建地质灾害遥感影像样本数据库；利用所述遥感影像样本数据库训练深度学习模型；利用训练好的深度学习模型，根据待检测区域的遥感影像，得到泥石流灾害区域和非泥石流灾害区域；利用DEM数据，对非泥石流灾害区域的每个灾害进行高度和坡度方面的量化统计；根据得到的统计数据，利用集成学习模型，得到崩塌区域和滑坡区域。因此，采用本发明提供的方案，实现了崩塌、滑坡、泥石流地质灾害的高效率、高精度、高稳健性的区分。解决了人工外业调查和目视解译的局限性，可应用于大范围地质灾害调查。