本发明涉及目标检测技术领域，特别是涉及一种基于多模态融合的导线绝缘皮破损检测方法及系统，方法包括：获取训练图像集和训练文本集；基于图像特征提取网络对训练图像集进行特征提取，得到训练图像特征集；基于文本特征提取融合网络对训练文本集进行特征提取，得到训练文本特征集；基于文本特征提取融合网络对训练图像特征集和训练文本特征集进行融合，得到训练特征集；基于训练特征集对目标检测网络进行训练，得到训练好的目标检测网络；基于图像特征提取网络、文本特征提取融合网络和训练好的目标检测网络实现导线绝缘皮破损检测。本发明通过图像特征和文本特征相融合来提高架空线路导线绝缘皮破损检测的精度。