本发明公开了一种基于上下文交互关系的情绪识别方法，该方法步骤包括：将表情数据集通过人脸检测和人体识别得到人脸和身体的边界框；利用人脸和身体的边界框对图片进行预处理，同时将边界框生成空间掩码，得到人脸、身体和场景三类图片；将预处理图像分别输入至预训练的三个支路网络提取特征，其中上下文交互模块插入到网络的第二层和第四层，在交互模块中其余支路的特征加权融合到各个支路上；分别联合人脸情绪特征、身体情绪特征和场景情绪特征进行表情分类，形成基于上下文交互关系的情绪识别模型。本发明提升了上下文的特征表达能力和抑制上下文存在的噪声，解决了独立提取上下文特征时的情绪不确定性和噪声的问题，使情绪识别的准确率更高。