一种零件误差视觉判断系统，包括：光路转换装置，将传送带上的零件的不同部分反射的光线集中到一个窗口中，使摄像系统使用全部像素仅拍摄该窗口，从而大幅降低每个像素点代表的实际物理长度；基于RGB颜色空间的彩色图像的边缘提取系统，根据所述摄像系统拍摄的图片，提取图像边缘，计算零件尺寸；判断系统，判断零件是否合格，并给出相应信号。本发明利用了可提高零件尺寸检测精度的光路转换装置和一种新的RGB颜色空间图像边缘提取算法，并可编写与之适应的软件，从而提高零件尺寸视觉检测的精度，降低视觉检测系统的成本，尤其适合中小型企业使用。