本发明涉及一种基于资源三号ZY‑3遥感影像的建筑高度反演方法。该方法包括：获取ZY‑3影像和数字高程模型DEM数据，进行预处理，计算多角度建筑指数MABI；定义多视角影像、MABI指数和DEM数据作为输入特征一，定义多光谱影像作为输入特征二，联合成网络输入模块，输入到定义的M‑DSNN架构中进行建筑高度反演。定义的M‑DSNN架构包括编码器、解码器、特征融合和动态共享模块；进行城市建筑高度制图。本发明针对多视角影像建筑高度反演，创新性利用MABI作为网络输入之一，同时构造高效便捷的M‑DSNN网络，能够有效提高建筑高度反演的准确性和效率。