本发明属于测距技术领域，提出极端环境下大构件便携式视觉测距系统，包括信息处理器、成像模块、连接结构、通讯模块和位姿传感器模块；成像模块用于获取待测点所在的平面的多幅成像和待测点位于光轴处时的对应时刻；连接结构用于实现位姿传感器模块与成像模块之间的刚性连接；通讯模块用于实现位姿传感器模块和成像模块信号的同步采集；位姿传感器模块包括3个加速度传感器和3个角速度传感器，3个加速度传感器和角速度传感器分别用于获取位姿传感器局部坐标系中三轴的加速度和角速度；信息处理器用于对成像面中特征点的图像定位坐标、待测点位于光轴处时对应的时刻信息及该时刻的加速度、角速度信息的融合处理，计算出待测目标点之间的距离。