本发明提出一种基于目标与背景差异的彩色图像背景杂波量化方法，实现步骤为：对图像进行预处理；计算每幅图像目标区域与背景区域的纹理特征差异；计算每幅图像目标区域与背景区域的对比度；计算每幅图像目标区域与背景区域的光谱特征差异；将每幅图像目标区域与背景区域的纹理特征差异、对比度、光谱特征差异组合获得每幅图像目标区域与背景区域的差异量化结果；获取每幅RGB图像的背景杂波量化尺度。本发明解决了现有技术中获取所有局部背景杂波尺度的均值时的量化尺度很单一，同时没有考虑到目标区域的特征的问题，使得在不同的场景中对光电成像系统目标获取性能的预测和评估的可靠性和准确性提升。