- 专利标题: 一种基于全局上下文交互的场景图生成方法及系统及设备
-
申请号: CN202210297025.7申请日: 2022-03-24
-
公开(公告)号: CN114677544A公开(公告)日: 2022-06-28
- 发明人: 罗敏楠 , 杨名帆 , 郑庆华 , 董怡翔 , 刘欢 , 秦涛
- 申请人: 西安交通大学
- 申请人地址: 陕西省西安市咸宁西路28号
- 专利权人: 西安交通大学
- 当前专利权人: 西安交通大学
- 当前专利权人地址: 陕西省西安市咸宁西路28号
- 代理机构: 西安通大专利代理有限责任公司
- 代理商 马贵香
- 主分类号: G06V10/764
- IPC分类号: G06V10/764 ; G06V10/26 ; G06V10/80 ; G06V10/82 ; G06K9/62 ; G06N3/04 ; G06N3/08
摘要:
本发明公开了一种基于全局上下文交互的场景图生成方法及系统及设备,1)基于物体视觉特征、空间坐标、语义标签等多种特征融合的向量联合表示;2)基于双向门控循环神经网络的全局特征生成;3)基于全局特征向量的消息迭代传递机制;4)基于目标与关系状态表示的场景图生成。本发明所公开的基于全局上下文交互的场景图生成方法,同现存的场景图生成方法相比,通过上下文交互充分利用图像的全局特征,更具有应用广泛性;同时,得到上下文交互后的全局特征后进行目标对与其关系间的消息传递,利用目标间的潜在联系更新现有状态,进行更准确的场景图生成,具有实际应用的优势。
公开/授权文献
- CN114677544B 一种基于全局上下文交互的场景图生成方法及系统及设备 公开/授权日:2024-08-16