本发明属于图像处理技术领域，具体涉及基于孪生网络的肠造口图像识别与分类系统。所述系统包括：图像获取装置和孪生识别分类网络；所述图像获取装置，用于获取造口图像和对应的标签，将造口图像进行标准化，通过图像转换的方法生成训练集的镜像训练集；所述孪生识别分类网络，包括两个子网络，在训练阶段，接受两个样本作为输入，然后通过两个子网络分别处理这两个输入，接受未知标签的造口图像作为一个输入，然后从遍历整个训练集，以此完成未知标签的造口图像的分类与识别。本发明有效提高了诊断准确性和效率，降低了诊断成本，具有广泛的临床应用前景。