本发明提供了一种适用于多目标的基于声纹和人脸的匹配方法，涉及营业厅环境中服务机器人等的模式匹配和多目标匹配领域，包括：(1)提取一段时间内的声音片段，进行特征提取，对提取特征后的混合声源进行说话人分离，得到这段时间内的多个目标的声纹倒谱；(2)提取同一段时间内的运动图像，对图像进行多人脸识别，对于每个人脸图像重点关注人脸中的嘴角间的宽度变化，进行图像特征提取，得到不同人脸在这段时间内的运动图像倒谱；(3)将声纹倒谱和人脸倒谱进行相似度匹配，将匹配成功的目标视为服务对象，匹配不成功的视为异常。本发明克服生物识别和认证中生物信息利用单一和生物信息需要提前录入数据库的挑战，能识别新目标的同时又保证了多目标匹配。