一种虚实融合系统中通过可编程GPU加速解码摄像头视频流的方法

    公开(公告)号:CN109658488A

    公开(公告)日:2019-04-19

    申请号:CN201811339443.8

    申请日:2018-11-12

    申请人: 浙江大学

    摘要: 本发明公开一种虚实融合系统中通过可编程GPU加速解码摄像头视频流的方法,包括:获取原始YUV视频;将每帧YUV画面的像素流创建单通道纹理传输至GPU;绘制三维虚拟场景,判断当前像素是否属于摄像头画面;RGB像素与三维场景混合形成最终的虚实融合画面。本发明相对于传统在CPU上多线程解码YUV视频像素的方法,可以有效裁剪更多的无需采样的原始视频像素,同时基于更强并行解码能力的GPU,也使得解码效率得以大幅度提升。本发明算法明确,结果鲁棒,且该方法可以用于大型三维虚拟场景与实时监控融合应用中,与目前主流的摄像头厂家视频很好地结合在一起使用。

    一种基于屏幕空间的视频在三维场景中投影映射方法

    公开(公告)号:CN109544671A

    公开(公告)日:2019-03-29

    申请号:CN201811339445.7

    申请日:2018-11-12

    申请人: 浙江大学

    IPC分类号: G06T15/04

    摘要: 本文发明公开了一种基于屏幕空间的视频在三维场景中投影映射方法,包括预处理获取投影源的内外参数和深度图;从当前视点出发绘制三维场景,获取当前视点的漫反射贴图以及深度图;从投影源出发绘制纹理,将投影画面的每个像素点转换到视点的屏幕空间来进行投影计算。改进了传统投影纹理映射中由于深度值缺失导致的遮挡穿透问题,不仅绘制效果增强显著,而且减少了绘制批次,绘制效率更高。本发明算法明确,结果鲁棒,运行效率高,非常适合应用于实时绘制系统,该方法能够与大型三维视频监控系统很好地结合在一起使用。

    一种基于级联的在三维地形表面无缝叠加二维矢量的方法

    公开(公告)号:CN102147936B

    公开(公告)日:2013-07-24

    申请号:CN201110056588.9

    申请日:2011-03-09

    申请人: 浙江大学

    发明人: 郑文庭 李融

    IPC分类号: G06T19/20 G06T17/05 G06T17/30

    摘要: 本发明公开了一种基于级联的在三维地形表面无缝叠加二维矢量的方法,包括:(1)选择对视域四棱锥进行剖分的分割策略;(2)对视域四棱锥进行级联剖分;(3)分配矢量信息至子视域四棱锥上;(4)完成矢量信息的缩小范围逼近,并绘制矢量纹理;(5)将矢量纹理无缝叠加到三维地形上。本发明通过对视域四棱锥进行级联剖分,并对矢量信息进行基于包围框的缩小范围逼近,大大提高了矢量纹理的像素利用率,在很大程度上抑制走样问题的发生,且绘制效果显著增强,能在大型场景漫游系统和三维地理信息系统中得到很好的应用。

    一种虚实融合系统中通过可编程GPU加速解码摄像头视频流的方法

    公开(公告)号:CN109658488B

    公开(公告)日:2022-07-19

    申请号:CN201811339443.8

    申请日:2018-11-12

    申请人: 浙江大学

    摘要: 本发明公开一种虚实融合系统中通过可编程GPU加速解码摄像头视频流的方法,包括:获取原始YUV视频;将每帧YUV画面的像素流创建单通道纹理传输至GPU;绘制三维虚拟场景,判断当前像素是否属于摄像头画面;RGB像素与三维场景混合形成最终的虚实融合画面。本发明相对于传统在CPU上多线程解码YUV视频像素的方法,可以有效裁剪更多的无需采样的原始视频像素,同时基于更强并行解码能力的GPU,也使得解码效率得以大幅度提升。本发明算法明确,结果鲁棒,且该方法可以用于大型三维虚拟场景与实时监控融合应用中,与目前主流的摄像头厂家视频很好地结合在一起使用。

    一种基于屏幕空间的视频在三维场景中投影映射方法

    公开(公告)号:CN109544671B

    公开(公告)日:2022-07-19

    申请号:CN201811339445.7

    申请日:2018-11-12

    申请人: 浙江大学

    IPC分类号: G06T15/04

    摘要: 本文发明公开了一种基于屏幕空间的视频在三维场景中投影映射方法,包括预处理获取投影源的内外参数和深度图;从当前视点出发绘制三维场景,获取当前视点的漫反射贴图以及深度图;从投影源出发绘制纹理,将投影画面的每个像素点转换到视点的屏幕空间来进行投影计算。改进了传统投影纹理映射中由于深度值缺失导致的遮挡穿透问题,不仅绘制效果增强显著,而且减少了绘制批次,绘制效率更高。本发明算法明确,结果鲁棒,运行效率高,非常适合应用于实时绘制系统,该方法能够与大型三维视频监控系统很好地结合在一起使用。

    一种基于级联的在三维地形表面无缝叠加二维矢量的方法

    公开(公告)号:CN102147936A

    公开(公告)日:2011-08-10

    申请号:CN201110056588.9

    申请日:2011-03-09

    申请人: 浙江大学

    发明人: 郑文庭 李融

    IPC分类号: G06T19/20 G06T17/05 G06T17/30

    摘要: 本发明公开了一种基于级联的在三维地形表面无缝叠加二维矢量的方法,包括:(1)选择对视域四棱锥进行剖分的分割策略;(2)对视域四棱锥进行级联剖分;(3)分配矢量信息至子视域四棱锥上;(4)完成矢量信息的缩小范围逼近,并绘制矢量纹理;(5)将矢量纹理无缝叠加到三维地形上。本发明通过对视域四棱锥进行级联剖分,并对矢量信息进行基于包围框的缩小范围逼近,大大提高了矢量纹理的像素利用率,在很大程度上抑制走样问题的发生,且绘制效果显著增强,能在大型场景漫游系统和三维地理信息系统中得到很好的应用。