本发明公开了基于端到端回归模型的电线杆标牌目标检测及识别方法，该方法包括以下步骤：制作电线杆标牌图像的多样化数据集，然后在分类网络框架下对端到端一次性回归目标检测模型进行适用于电线杆标牌的训练；提取出标牌在图像中的位置坐标后综合先验信息和投影分析法进行字符分割；采用迁移学习简化对字符识别网络的训练以提高整体效率；最后选用HSI颜色空间来识别标牌背景色以减小图像分析的工作量。本发明采用高效的端到端目标检测方法实现对电线杆标牌有效信息的准确识别，可以在一定程度上提高巡检路径规划、农网改造勘察的效率。