本申请涉及图像处理技术领域，公开了一种视频边缘检测加速核心系统，系统包括摄像头、图像数据提取单元、I2C配置单元、RGB格式转换单元、AXI_dma_wr单元、AXI_interconnect单元、DDR控制器、DDR存储单元、边缘检测加速核心单元、AXI_dma_rd单元、HDMI显示屏；本公开的视频边缘检测加速核心系统中，算子核在进行运算时，采用多帧流水运算，这样多帧图像数据并行运算，大大增加了运算的并行度，解决了运算速度慢的问题，加快了视频流数据的处理速度。