本发明涉及图像处理领域，具体涉及基于视觉特征的型钢表面缺陷检测方法，所述方法包括：获取型钢表面图像；根据型钢表面图像得到型钢表面图像中的所有可能缺陷区域，获取每个可能缺陷区域的所有反光像素和所有背光像素；根据每个可能缺陷区域的反光像素和背光像素得到每个可能缺陷区域的分布混乱程度；根据每个可能缺陷区域中所有反光像素和所有背光像素得到每个可能缺陷区域的边缘规则程度；进而得到每个可能缺陷区域的刚性缺陷概率；根据所有可能缺陷区域的刚性缺陷概率得到刚性缺陷区域，从而有效区分摩擦缺陷和刚性缺陷，更为准确的提取出型钢表面的刚性缺陷。