发明公开
- 专利标题: 一种跨域双模态特征融合的实时人体行为识别方法
-
申请号: CN202310585874.7申请日: 2023-05-23
-
公开(公告)号: CN116561637A公开(公告)日: 2023-08-08
- 发明人: 章丹 , 吕妍 , 孙巍巍 , 吴海艳 , 施雯 , 王远 , 胡茂亮 , 廖羽晗 , 邱曼曼 , 霍骋 , 陈迎 , 罗长 , 万礼嵩 , 赵晓山 , 王法治 , 郭可贵 , 韩玉 , 孟磊 , 马欢 , 沈风 , 罗俊骁
- 申请人: 国网安徽省电力有限公司超高压分公司
- 申请人地址: 安徽省合肥市包河区桐城南路397号
- 专利权人: 国网安徽省电力有限公司超高压分公司
- 当前专利权人: 国网安徽省电力有限公司超高压分公司
- 当前专利权人地址: 安徽省合肥市包河区桐城南路397号
- 代理机构: 安徽省合肥新安专利代理有限责任公司
- 代理商 陆丽莉; 何梅生
- 主分类号: G06F18/24
- IPC分类号: G06F18/24 ; G06F18/25 ; G06V40/20 ; G06V10/44 ; G06V10/764 ; G06V10/82 ; G06N3/0442 ; G06N3/0464 ; G06N3/048 ; G06N3/084 ; H04B7/06
摘要:
本发明公开了一种跨域双模态特征融合的实时人体行为识别方法,其步骤包括:1、采集CSI动作样本数据和视频样本数据;2、对采集数据进行预处理;3、构建双线程动作特征提取网络提取CSI样本和视频样本中的动作特征;4、构建特征融合和特征对齐网络将两个模态的动作特征进行融合;5、将融合特征输入到分类器网络进行人体动作识别。本发明基于CSI和视频双模态信息实现行为识别,具有较强的识别准确性和抗干扰能力。