本发明提供基于多模交互的交通票务处理装置，包括信号采集模块、处理模块和引导模块；所述信号采集模块包括语音采集单元和图像采集单元；所述处理模块包括识别单元、解析单元、若干预设深度学习模型；所述识别单元包括人脸检测器、解码器；所述多模信号包括语音和用户图像。能够进行多模交互，有效抑制背景噪音干扰，更准确的识别语音获取用户的出行需求，票务处理效率高，更便捷。本发明提供的交通票务处理系统因采用本发明的交通票务处理装置而具有相应优势。本发明提供的交通票务处理方法，对人工依赖少、利于缩短票务处理时间、提高用户出行体验。