本发明提供了一种基于视觉引导的挂钩打磨系统，包括传输装置、打磨机构和移运装置，其特征在于：所述的传输装置包括底板、电机、主动轮、从动轮、环形输送线和定位工装，所述的底板设置在支架上，所述的电机设置在底板上，所述的主动轮设置在传动轴上，所述的从动轮设置在旋转轴上，所述的环形输送线设置在主动轮与从动轮之间，所述的定位工装上设置有连接板、定位孔，所述的打磨机构包括机器人，所述的机器人上设置有打磨头、3D扫描装置。本发明将定位工装采用仿形工装，需要打磨的铸件安装位置与定位工装安装面完全贴合，保证铸件在加工过程中不旋转，提高铸件在定位工装上的稳定性，进而增强铸件在打磨过程中的稳定性，提高铸件的打磨质量。