本发明实施例公开了一种基于方舱医院的病人异常识别方法、装置、服务器及存储介质，利用建立摄像头之间的位置关联关系，充分获取病人的异常行为特征图像。并将将多个摄像头采集到的图像合成为可被神经网络识别的特征张量，能够充分体现病人的异常行为图像特征。有效提取病人的部位特征和部位之间的关联特征，并利用特征之间的方位角度变化，确定是否未疫情特征动作。并可结合异常特征动作和动作发生的时间、频率和时间间隔判断病人是否异常，可减少算力，并能提供较为精确的异常判断结果。