本公开提出了一种驾驶行为的检测方法、装置、系统和车辆，涉及智能驾驶技术领域。其中，驾驶行为的检测方法包括：获取驾驶员的可见光图像和红外图像；利用训练后的人脸检测模型，提取与所述可见光图像对应的第一特征图、和与所述红外图像对应的第二特征图，对所述第一特征图和所述第二特征图进行融合，以得到融合后的特征图，根据所述融合后的特征图，确定所述驾驶员的人脸检测结果，所述人脸检测模型为深度学习网络模型；根据所述人脸检测结果，确定所述驾驶员的驾驶行为的类别。通过以上方法，能够提高疲劳驾驶行为的检测精度，满足夜间行车对疲劳驾驶行为的检测精度的需求。