本发明公开了一种基于无人机平台和深度学习的复杂背景下索力快速测试系统及方法，包括如下步骤：图像采集、图像预处理、位移计算、频谱分析与索力计算。本发明考虑到拉索边缘直线单元特征较少，难以实现精确高效的直线匹配，创新性地将深度学习方法应用到拉索识别，巧妙解决拉索边缘直线匹配的难题，具有更高的鲁棒性,由于在图像采集过程中存在无人机自身扰动的影响，傅里叶频谱的低频部分存在较多杂频，无法识别拉索基频，本发明方法提出通过模态阶数识别方法识别频谱中高阶峰值对应的频率阶数，进而利用高阶频率差值与索基频的关系计算索力。本发明能够有效地实现复杂背景下索力非接触式测量，在城市内部桥梁的检测监测中具有广大的应用前景。