本发明提供了一种基于图像识别的猪仔健康状况监控方法方法及系统。所述方法，包括：S21，在养殖栏位设置摄像头，所述摄像头用于获取养殖栏位中猪仔图片；S22，识别所述摄像头中视频片段中的所有帧，输出所有帧中每一猪仔的骨骼关节点；S23，判断每一猪仔的骨骼关节点中首骨骼关节点、肩骨骼关节点和臀骨骼关节点中至少两个骨骼关节点是否产生横向摆动，是则进行预警。本发明通过对所述帧中每一猪仔的骨骼关节点极性提取及识别，并判断每一猪仔的骨骼关节点中首骨骼关节点、肩骨骼关节点和臀骨骼关节点中至少两个骨骼关节点是否产生横向摆动，从而判断该猪仔的是否有产生“抖抖病”的风险，进而进行预警。