建筑施工监控视频中的人机协作异常检测方法及系统

    公开(公告)号:CN115631457A

    公开(公告)日:2023-01-20

    申请号:CN202211212839.2

    申请日:2022-09-30

    摘要: 本发明属于建筑工人行为智能识别领域,提供了一种建筑施工监控视频中的人机协作异常检测方法及系统,包括获取建筑施工监控视频中的人机行为图像并进行预处理;基于预处理后的人机行为图像,利用预先训练好的Transformer模型进行目标检测,得到现场工人操作机械图像块;基于现场工人操作机械图像块和预先训练好的人机协作正常行为模型进行比对,进而计算得到损失函数,通过损失函数的大小判定人机协作是否异常。本发明通过使用Transformer主干网络,用更加简洁的网络架构,获得更高的目标检测精度,更好地获取施工过程中工人操作机械的图像块;结合损失函数计算人机协作异常程度,精准预测并对现场人机协作异常行为进行预警。