发明公开
- 专利标题: 一种视频时空超分辨率重构方法、装置及存储介质
-
申请号: CN202310463346.4申请日: 2023-04-26
-
公开(公告)号: CN116668738A公开(公告)日: 2023-08-29
- 发明人: 朱冬 , 方向明 , 宋雯 , 唐国梅 , 张建 , 张丹 , 仲元红
- 申请人: 七腾机器人有限公司
- 申请人地址: 重庆市渝北区卉竹路2号7幢21-1号
- 专利权人: 七腾机器人有限公司
- 当前专利权人: 七腾机器人有限公司
- 当前专利权人地址: 重庆市渝北区卉竹路2号7幢21-1号
- 代理机构: 重庆西南华渝专利代理有限公司
- 代理商 陈香兰
- 主分类号: H04N21/2343
- IPC分类号: H04N21/2343 ; H04N21/4402 ; H04N21/462 ; G06T3/40
摘要:
本发明提供了一种视频时空超分辨率重构方法、装置及存储介质。超分辨率重构方法包括:获取待重构视频在特征域的帧特征序列,将待重构视频的帧特征序列输入训练好的视频时空超分辨率重构模型输出恢复视频序列,视频时空超分辨率重构模型包括:初始特征提取模块;双向对齐模块,基于相邻奇数帧初始特征生成该相邻奇数帧初始特征的待插值中间帧初始特征;基于时空信息的特征提取与融合模块,包括依次连接的时空修正模块和k2个级联的残差块;重构层,恢复视频序列。采用双向对齐模块在每对相邻奇数帧间生成待插值的偶数帧,利用相邻帧的时空信息进行时空修正完成特征的细化与校正,获得了更加平滑、自然的重构效果,且模型更加轻盈和灵活。