发明公开
- 专利标题: 一种基于细粒度时空关联建模的视频片段定位方法及系统
-
申请号: CN202411388560.9申请日: 2024-10-08
-
公开(公告)号: CN118897905A公开(公告)日: 2024-11-05
- 发明人: 刘萌 , 聂礼强 , 关惟俐 , 殷俊 , 高赞 , 金恒 , 尉寅玮 , 张盛平 , 唐昊煜
- 申请人: 山东大学 , 哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院) , 浙江大华技术股份有限公司 , 山东省计算中心(国家超级计算济南中心) , 哈尔滨工业大学(威海)
- 申请人地址: 山东省青岛市即墨区滨海路72号; ; ; ;
- 专利权人: 山东大学,哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院),浙江大华技术股份有限公司,山东省计算中心(国家超级计算济南中心),哈尔滨工业大学(威海)
- 当前专利权人: 山东大学,哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院),浙江大华技术股份有限公司,山东省计算中心(国家超级计算济南中心),哈尔滨工业大学(威海)
- 当前专利权人地址: 山东省青岛市即墨区滨海路72号; ; ; ;
- 代理机构: 济南圣达知识产权代理有限公司
- 代理商 李琳
- 主分类号: G06F16/735
- IPC分类号: G06F16/735 ; G06F16/783 ; G06F16/738 ; G06N3/0455 ; G06N3/08
摘要:
本发明属于视频检索技术领域,提供了一种基于细粒度时空关联建模的视频片段定位方法及系统,其技术方案为:获取视频片段,利用时空查询表示,隐式挖掘视频片段中潜在所有物体信息;随后,基于时空表示多维交互模块,充分建模物体间时空关联关系;之后,通过有机融合局部和全局表示,全面提升视频片段的表示能力;最后,依据视频片段表示与用户查询表示相似性分数确定目标视频片段。本发明克服了现有技术中依赖离线物体检测工具进行物体时空信息提取、物体细粒度交互信息建模不充分等导致视频理解不佳的问题。