本发明涉及图像恢复技术领域，提出了一种基于参考表的图像超分辨率加速方法及系统，包括获得低分辨率输入图像和参考表；所述参考表包括多条记录，任一条记录包括一一对应的复杂度得分参考值和图像质量参考值；所述一一对应的复杂度得分参考值和图像质量参考值通过对同一样本图像计算复杂度得分和图像质量得到；将所述低分辨率输入图像划分为多个低分辨率图像块；将每一所述低分辨率图像块输入多出口SR网络，得到多个超分图像块；将多个所述超分图像块进行合并，得到高分辨率输出图像。通过上述技术方案，解决了相关技术中的超分辨率加速方法适应性差的问题。