本发明提供了一种人体行为识别方法，包括步骤：建立背景模型；根据建立的背景模型，从当前的图像帧中提取出前景点，并将所有的前景点融合后作为运动人体剪影的全局特征；利用光流假设提取当前的图像帧中提取出的前景点的局部特征；对当前的图像帧，将全局特征与局部特征进行拼接，作为当前帧的帧内融合特征；对连续帧的特征描述进行降维，得到帧间融合特征，将帧内融合特征与帧间融合特征进行融合，以识别分类行为。本发明不仅提取过程较为简便，而且克服单一特征表现力不足的缺陷，寻找容易表征运动的特征并进行融合，最大程度保留运动信息以便分类。