本发明属于社交媒体争议检测技术领域。提供了一种多模态多视图争议检测方法及系统，分别进行视频特征提取和文本特征提取，得到多模态特征；将所述多模态特征整合在一起，学习视频内容的整体争议性特征；通过上下文图学习，对视频和评论之间的关系进行建模，得到视频和评论之间的语义和结构关系特征；利用情感矩阵和语义矩阵捕捉评论语义和情感之间的不一致特征；将所述整体争议性特征、所述语义和结构关系特征以及所述不一致特征进行拼接，通过分类器得到争议检测结果；本发明能有效地对多模态视频内容进行建模，并捕获社会语境之间的交互，提高了争议检测的准确性。