本申请提供一种红外图像与可见光图像的融合方法及系统，该方法包括采集可见光图像以及对应的红外图像；多级特征提取步骤；将经过残差密集块的每级第一红外特征与第一可见光特征输入至模态融合模块，获取第二红外特征与第二可见光特征；加权运算步骤：将第二可见光特征与第一可见光图像加权后输入至下一层残差密集块，将第二红外特征与第一红外图像加权后输入至下一层残差密集块；判断残差密集块提取分支网络的级数是否小于预设级数，若是，循环多级特征提取步骤至加权运算步骤；若否，将最后一级输出的第二红外特征和第二可见光特征与对应输入的第一红外图像和第一可见光图像分别相加，并结合后输入至解码器恢复图像特征，以获得融合图像。