本发明属于计算机视觉与多视角几何技术领域，公开了一种SFM稀疏重建方法、系统及应用，所述SFM稀疏重建方法包括：获取相机内参；提取点线特征并获得初始匹配；选择特征邻域，构建特征三元组；在邻域内应用几何位置不变量进行误匹配剔除，得到精确的特征匹配对应关系；在线特征邻域平面内利用交比原理，得到线特征上对应的点，使用点来表示线；对相机对进行评分，选择最佳初始相机对作为增量种子点；对点特征与线特征表示点分别整理成轨迹，输入到点SFM流程之中，得到相机位姿与稀疏点云；3D评分滤除后，聚类生成线结构重建结果。本发明对点线特征的使用具有普适性，能够较快地完成误匹配剔除提高匹配精度。