本发明的实施例公开了一种点云图像处理方法及系统，方法包括：对采集的点云图像进行数据预处理；对预处理后的点云数据进行标签制作和分块处理；对处理后的点云数据进行n次下采样，采用卷积神经网络提取高维特征；对处理后的点云数据采用自适应高程插值方法进行n次上采样，输出各点的类别预测值；对组合分类后的点云数据进行参数纠正，调整类别分布的权重参数；对训练好的模型进行测试。系统包括：图像预处理模块，分类模块，下采样模块，上采样模块，参数调整模块和测试模块。本发明能够有效识别点云图像中各类地物，提高了图像地物识别精度。