编码设备和编码方法以及解码设备和解码方法

    公开(公告)号:CN113286137B

    公开(公告)日:2024-02-02

    申请号:CN202110383257.X

    申请日:2016-10-28

    申请人: 索尼公司

    发明人: 田中润一

    摘要: 本发明公开了编码设备和编码方法以及解码设备和解码方法。本公开内容涉及使得可以获得与给定显示图像生成方法对应的视点的深度图像数据和二维图像数据而不管图像捕获时的视点的编码设备和编码方法以及解码设备和解码方法。根据从多个视点的二维图像数据生成的成像对象的三维数据,转换单元生成与给定显示图像生成方法对应的多个视点的二维图像数据,并且生成表示每个像素在成像对象的深度方向上的位置的深度图像数据。编码单元对由转换单元生成的深度图像数据和二维图像数据进行编码。发送单元发送由编码单元编码的深度图像数据和二维图像数据。本公开内容可应用于例如编(56)对比文件JP 2012518367 A,2012.08.09JP 2010157821 A,2010.07.15JP 2012023488 A,2012.02.02JP 2010531604 A,2010.09.24JP 2013211777 A,2013.10.10JP 2010079505 A,2010.04.08

    高分辨率单目2D视频到双目3D视频的转制方法

    公开(公告)号:CN112543317B

    公开(公告)日:2022-07-12

    申请号:CN202011395559.0

    申请日:2020-12-03

    申请人: 东南大学

    摘要: 本发明公开一种高分辨率单目2D视频到双目3D视频的转制方法,在深度信息提取阶段,使用现有的3D电影作为源数据集训练一个U型结构的卷积网络,得到性能优越的网络模型对2D视频进行逐帧的深度估计,利用小型的神经网络对深度图进行保边平滑的优化处理。在视点合成阶段,提出无相机参数的基于深度图的视点合成算法,采用对称式的由中间向两边渲染的策略进行左右虚拟视点合成。最后,在图像修复阶段,提出了结合时域信息的基于块匹配的图像修复算法,对左右视点中的裂痕空洞进行填充修复。本发明能够在原2D视频无任何相关参数信息的前提下,对其进行2D到3D的视频转制,不仅可以有效地处理高分辨率画面,且转制效果好、速度快。

    在数据流中编码及解码来自数据流的三维场景的方法和装置

    公开(公告)号:CN111742548A

    公开(公告)日:2020-10-02

    申请号:CN201980014202.2

    申请日:2019-01-04

    摘要: 提供用于编码和解码承载表示三维场景的数据的数据流的方法和设备,该数据流包括打包在色彩图像中的色彩画面;打包在深度图像中的深度画面;以及包括去投影数据的一组补片数据项;用于在色彩图像取回色彩画面的数据和几何数据。两种类型的几何数据是可能的。第一种类型的数据描述如何在深度图像中取回深度画面。第二种类型的数据包括3D网格的标识符。该网格的顶点坐标和各个面用于取回去投影的场景中各个点的位置。

    视频透视方法、数据处理设备及头戴式设备

    公开(公告)号:CN118158381A

    公开(公告)日:2024-06-07

    申请号:CN202410146617.8

    申请日:2024-02-02

    摘要: 本发明公开了一种视频透视方法、数据处理设备及头戴式设备,从双目摄像机采集的双目图像中进行稠密深度计算,重建了现实世界,并投影至人眼位置,与其他方法直接输出双目图像给人眼看相比,消除了人眼到相机位置的距离且在深度图重投影使用均匀网格方案,只需要建立一次网格就可以一直使用,节约了计算资源;还能够解析现实世界的三维结构,实现真实场景和虚拟场景的叠加遮挡,生成一种虚拟现实场景,达到虚实结合的效果。本发明的优点在于,消除了人眼到相机位置的距离,降低用户不适感和晕眩感,节省了视频透析的计算时间,生成了一个虚拟现实场景,提高用户体验感。