公开(公告)号：CN110619261A

公开(公告)日：2019-12-27

申请号：CN201910163955.1

申请日：2019-03-05

Applicant: 北方工业大学

Inventor： 叶青 ,  杨航 ,  张永梅

IPC: G06K9/00 ,  G06K9/62

Abstract: 本发明提供了一种基于多特征融合的人体交互行为识别方法、系统及装置，该方法包括：对交互视频中的多个独立个体，分别提取局部时空特征与全局光流特征；将所述局部时空特征与所述全局光流特征进行特征融合，获得局部时空特征与所述全局光流特征之间的相关性，进而得到每个独立个体的单人特征信息；通过并行长短期记忆网络，获得混合特征信息；基于混合特征信息，进行分类，获得交互行为识别结果。本发明的技术方案充分保留了交互中的行为信息和交互信息，大大提高了交互行为识别的准确率。

公开(公告)号：CN110619261B

公开(公告)日：2022-03-22

申请号：CN201910163955.1

申请日：2019-03-05

Applicant: 北方工业大学

Inventor： 叶青 ,  杨航 ,  张永梅

IPC: G06V40/10 ,  G06V10/764 ,  G06V10/80 ,  G06K9/62

Abstract: 本发明提供了一种基于多特征融合的人体交互行为识别方法、系统及装置，该方法包括：对交互视频中的多个独立个体，分别提取局部时空特征与全局光流特征；将所述局部时空特征与所述全局光流特征进行特征融合，获得局部时空特征与所述全局光流特征之间的相关性，进而得到每个独立个体的单人特征信息；通过并行长短期记忆网络，获得混合特征信息；基于混合特征信息，进行分类，获得交互行为识别结果。本发明的技术方案充分保留了交互中的行为信息和交互信息，大大提高了交互行为识别的准确率。