本发明公开了一种基于连线特征一致性的特征匹配方法，包括，输入配准图像之间的尺度、一组候选匹配特征点和各特征点的主方向参数；对所述特征点的主方向集合作差并进行区间划分；定义候选旋转角个数最多的区间对应的角度为可见光图像相对红外图像的旋转角，计算匹配特征点连线对应的倾斜角和长度集合；利用连线一致性特征匹配策略去除所述匹配特征点中的显著外点后结合RANSAC筛选剩余外点，得到正确匹配的所述特征点，完成一致性匹配。本发明通过提供一种快速剔除图像特征匹配外点的方法，相比现有的RANSAC方法，其精度得到提升，可用于各类特征匹配领域。