本发明提供一种异构多核的图像处理方法及装置，方法包括如下步骤：A、Linux操作系统接收用户的采集指令，将其写入类共享内存中，触发IPI中断至FreeRTOS操作系统；B、FreeRTOS操作系统从类共享内存中读取采集指令，并控制USB3.0工业相机采集图像；C、Linux操作系统将图像按帧放入图像缓存区；D、图像处理器读取图像缓存区内的图像，并对图像进行处理，处理结果放入FIFO堆栈；E、图像处理器将FIFO堆栈中的处理结果搬运至结果缓存区，Linux操作系统将结果缓存区的数据发送至用户。本发明实现实时性与操作性的有效互补，能够高速完成图像的采集与处理，且使USB3.0工业相机可直接接入，大大降低了高速图像采集与处理系统的研究成本及技术门槛。