发明公开
- 专利标题: 动作检测方法和装置、存储介质及电子设备
-
申请号: CN202411184202.6申请日: 2024-08-27
-
公开(公告)号: CN118711255A公开(公告)日: 2024-09-27
- 发明人: 潘国雄 , 潘华东 , 郑佳 , 刘忠耿
- 申请人: 浙江大华技术股份有限公司
- 申请人地址: 浙江省杭州市滨江区滨安路1187号
- 专利权人: 浙江大华技术股份有限公司
- 当前专利权人: 浙江大华技术股份有限公司
- 当前专利权人地址: 浙江省杭州市滨江区滨安路1187号
- 代理机构: 北京康信知识产权代理有限责任公司
- 代理商 赵静
- 主分类号: G06V40/20
- IPC分类号: G06V40/20 ; G06V20/70 ; G06V20/40 ; G06V10/25 ; G06V10/44 ; G06V10/42 ; G06V10/62 ; G06V10/80 ; G06V10/764 ; G06V10/766 ; G06V10/82 ; G06F40/30 ; G06F40/253 ; G06F18/25 ; G06N3/0464 ; G06N3/0455 ; G06N3/084 ; G06N3/048
摘要:
本申请公开了一种动作检测方法和装置、存储介质及电子设备。其中,该方法包括:获取目标图像序列和目标文本信息;将目标图像序列和目标文本信息输入至预训练的目标检测模型,得到目标检测结果,其中,目标检测结果包括目标检测框、目标动作类别以及目标置信度,目标检测模型用于通过交叉注意力机制对目标图像序列和目标文本信息进行融合处理,得到目标融合特征,并通过交叉注意力机制对目标融合特征和目标图像序列与目标文本信息分别进行融合处理,得到目标多模态特征,根据目标多模态特征确定目标检测框、目标动作类别以及目标置信度。本申请解决了动作检测的准确率较低的技术问题。