一种不产生空洞的中间视图合成方法

    公开(公告)号:CN105163104A

    公开(公告)日:2015-12-16

    申请号:CN201510548964.4

    申请日:2015-08-31

    IPC分类号: H04N13/00

    摘要: 本发明公开了一种不产生空洞的中间视图合成方法,在给定的拍摄场景下,通过对左右两台摄像机的基线长度设置,使其小于等于背景深度值ZB与背景部分的长度LB的乘积除以背景深度值ZB与前景深度值的差值的二分之一,这样在视频终端,使用双向DIBR技术对通过左右两台摄像机获取的两幅参考图像及其对应的深度图像进行三维图像变换得到两幅虚拟视图,两幅虚拟视图再进行融合得到中央眼位置的中间视图,该中间视图没有空洞,一定程度上保证合成图像的质量,避免了空洞填充时间复杂性。

    基于图像序列的空洞填充方法

    公开(公告)号:CN104065946A

    公开(公告)日:2014-09-24

    申请号:CN201410271105.0

    申请日:2014-06-17

    IPC分类号: H04N13/00

    摘要: 本发明公开了一种基于图像序列的空洞填充方法,根据三维图像变换前后的参考图像Rt和目标图像Dt得到视差图,对目标图像Dt进行小空洞预处理,根据参考图像Rt前后的一组邻近参考图像生成邻近目标图像,计算邻近目标图像与目标图像Dt的深度差值,对邻近目标图像中的像素点进行可用标记,从邻近目标图像拷贝可用像素点对目标图像Dt进行空洞填充,然后使用邻近参考图像对目标图像Dt采用运动补偿的方式进行空洞填充,此时再对小于阈值的空洞采用基于视差图的空洞填充方法,然后选取下一组邻近参考图像进行填充;最终剩下的空洞由图像修复算法完成填充。本发明只需一路视频,可达到较佳的图像质量,节省传输视频数据所需的带宽,减少硬件实现的时间复杂度。

    一种基于硬件实现的DIBR系统

    公开(公告)号:CN103533327A

    公开(公告)日:2014-01-22

    申请号:CN201310429274.8

    申请日:2013-09-22

    IPC分类号: H04N13/00 G06T15/00

    摘要: 本发明公开了一种基于硬件实现的DIBR系统,采用无需摄像机参数的三维图像变换算法以代替复杂的单应变换以及基于视差图的空洞填充算法代替图像修复算法,这样大大减小了计算的复杂程度。同时,采用行级流水处理,减少视差图以及参考图像的存储,从而节省了硬件的开销。在Xilinx开发板上进行测试,实验结果表明,本发明由于计算复杂度的降低,在实时处理全高清视频时,吞吐量可达60帧/秒,能支持全高清(1080P)视频的实时处理;并且硬件开销(不包括内部存储器)为59.8K逻辑门,内存储器的容量需求为20.25kbytes,硬件开销降低,合成结果与DIBR算法的结果相似。

    一种基于相对高度深度线索的深度估计方法

    公开(公告)号:CN103903256B

    公开(公告)日:2017-01-25

    申请号:CN201310429867.4

    申请日:2013-09-22

    IPC分类号: G06T7/00

    摘要: 本发明公开了一种基于相对高度深度线索的深度估计方法,首先通过边缘检测获得边缘图,然后通过霍夫变换判断出图像场景,根据图像场景选择相应的模板进行深度估计,获得初始深度图,从而实现多种图像场景的深度估计。此外,通过获取图像的显著图,使图像中同一深度的目标得到的深度值会不一致的情况得以改善,提高深度图准确度。同时采用联合双边滤波对初始深度图以及显著图进行滤波,使其平滑强度更好,进一步改善深度图的质量。

    时空结合的空洞填充方法

    公开(公告)号:CN104661014B

    公开(公告)日:2016-09-28

    申请号:CN201510045450.7

    申请日:2015-01-29

    IPC分类号: H04N13/00

    摘要: 本发明公开了一种时空结合的空洞填充方法,首先根据待填充的目标图像序列生成非空洞矩阵,然后对于待填充目标图像,选择得到填充图像源集合,遍历填充图像源集合中的每帧图像,扫描待填充目标图像和填充图像源图像对应的非空洞矩阵中每个像素点对应的元素,当满足条件时即将填充图像源图像中的像素点复制到待填充目标图像的对应空洞像素点,对于剩余空洞再采用图像修复算法进行填充。本发明采用时空结合的方式,从前后序列帧中获取可用背景信息进行填充,从而显著地提高了非空洞区域的真实性,得到高质量的填充结果图像。

    三维图像空洞填充方法
    6.
    发明授权

    公开(公告)号:CN104038753B

    公开(公告)日:2016-01-13

    申请号:CN201410269539.7

    申请日:2014-06-17

    IPC分类号: H04N13/00

    摘要: 本发明公开了一种三维图像空洞填充方法,对于根据参考图像生成的目标图像中的空洞,采用图像序列中其他帧参考图像或对应目标图像进行填充,对于利用参考图像的方法,在参考图像中得到空洞边缘像素点对应的像素点,以该像素点为中心选取当前块,在其他帧参考图像中搜索得到匹配块,用该匹配块中的像素点对空洞点进行填充;对于利用目标图像的方法,在得到其他帧参考图像中的匹配块后,计算参考图像间块的运动矢量,再计算目标图像间块的运动矢量,以空洞边缘像素点为中心选取当前块,根据目标图像运动矢量得到其他帧目标图像的匹配块,再用该匹配块中的像素点对空洞点进行填充。本发明利用图像序列中其他图像信息进行空洞填充,填充效果较好。

    基于FPGA的实时祼眼3D播放系统

    公开(公告)号:CN105049834A

    公开(公告)日:2015-11-11

    申请号:CN201510478550.9

    申请日:2015-08-07

    IPC分类号: H04N13/04 H04N21/431

    摘要: 本发明公开了一种基于FPGA的实时祼眼3D播放系统,包括视频输入模块、DDR存储控制模块、DDR存储器、数据拆分模块、目标图像生成模块和上屏显示模块,视频输入模块交替接收参考图像数据和对应的深度图像并进行组合,将组合后的数据交替发送给DDR控制器模块;DDR控制器模块将参考图像数据和深度图像数据存储至DDR存储器,并按行间隔输出至数据拆分模块;数据拆分模块根据对接收到的参考图像数据和深度图像数据进行拆分发送给目标图像生成模块;目标图像生成模块通过DIBR算法合成N个目标图像构成N个立体图像对;多视点图像融合模块将N个立体图像对融合得到N个立体图像对的合成图像,发送给上屏显示模块进行上屏显示。本发明实现了对3D视频的实时播放。

    一种多视点图像融合装置

    公开(公告)号:CN104185011A

    公开(公告)日:2014-12-03

    申请号:CN201410424125.7

    申请日:2014-08-26

    IPC分类号: H04N13/00 H04N13/04

    摘要: 本发明公开了一种多视点图像融合装置,由视图输入模块将N幅视点图像并行输入子像素采集模块,起始视点确定模块根据子像素排列表生成每行合成图像的起始视点信号发送给子像素采集模块,子像素采集模块包括R子像素采样模块、G子像素采样模块和B子像素采样模块,每个子像素采样模块接收N幅视点图像中对应的子像素信号并进行排序,根据起始视点信号每个子像素采样模块根据起始视点确定首个采样子像素信号,在数据有效信号的有效电平期内,每隔时间t按排序切换至下一个子像素信号采样,得到的三个采样信号即为合成图像的R、G、B信号,输出缓存模块接收R、G、B信号进行缓存和输出。本发明的硬件资源消耗少,并且可以提高合成图像的显示效果。