本发明涉及一种实现图像数据缓存读写控制的系统，其中包括数据存储模块、读写地址跳变模块、数据读取模块和数据写入模块，本发明还提供一种实现图像数据缓存读写控制的方法，读写地址跳变模块根据读写地址函数运算得出每次的数据读取地址或者数据写入地址，数据读取模块根据对应的数据读取地址向数据存储模块读取图像数据，数据写入模块根据对应的数据写入地址向数据存储模块写入图像数据。采用本发明的实现图像数据缓存读写控制的系统及方法，不需要增加额外缓存空间、大大节省存储空间、芯片选择范围更广，降低图像处理系统的成本，提高图像处理效率，具有更广泛的应用范围。