本发明涉及一种基于视觉识别的炉鼻子姿态自动调整系统和方法，系统包括视觉系统、炉鼻子本体、炉鼻子姿态调整系统、排渣系统和人机交互系统；方法为：收集炉鼻子内部溢流状态图像信息，并对每张图像的溢流类型进行状态标记：对采集的状态标记训练图片进行降噪分割预处理；使用经预处理后的图像对卷积神经网络进行训练；使用训练完成的卷积神经网络对实时采集的炉鼻子内部溢流情况进行识别，经机交互系统处理后将动作指令发送给炉鼻子姿态调整系统进行姿态调整。本发明通过视觉识别技术，实现炉鼻子姿态自动调整，解决了人工调整步骤繁琐复杂、不及时的问题，大大解放了人工劳动力，在识别精度、调整效率上大大超出人工调整能力。