本发明公开了一种基于深度学习和云计算的遥感建筑物震害评估方法和系统。该方法的主要过程包括：基于特征图像的地震前后建筑物及震害建筑物样本集扩充，设计适合完全倒塌建筑物、部分倒塌建筑物、完整建筑物提取的深度卷积网络模型、基于智能体的超参数自动获取，在云端分别训练完全倒塌建筑物、部分倒塌建筑物、完整建筑物提取的深度卷积网络模型，提取震后影像灾损区域，对震前建筑物灾损等级进行标注和震害完全倒塌、部分倒塌区域建筑物数量进行统计与制图。公开的系统面向防灾减灾部门的用户需求，由用户终端、网络通信基站、网关服务器、中心云服务端组成。本发明提高了建筑物震害灾损信息获取与评估的及时性、准确性及智能化水平。