公开(公告)号：US09565449B2

公开(公告)日：2017-02-07

申请号：US13414515

申请日：2012-03-07

申请人： Ying Chen ,  Rong Zhang ,  Marta Karczewicz

发明人： Ying Chen ,  Rong Zhang ,  Marta Karczewicz

IPC分类号： H04N13/00 ,  H04N19/597

CPC分类号： H04N19/597

摘要： This disclosure describes techniques for coding 3D video block units. In one example, a video encoder is configured to receive one or more texture components from at least a portion of an image representing a view of three dimensional video data, receive a depth map component for at least the portion of the image, code a block unit indicative of pixels of the one or more texture components for a portion of the image and the depth map component. The coding comprises receiving texture data for a temporal instance of a view of video data, receiving depth data corresponding to the texture data for the temporal instance of the view of video data, and encapsulating the texture data and the depth data in a view component for the temporal instance of the view, such that the texture data and the depth data are encapsulated within a common bitstream.

摘要翻译： 本公开描述了用于编码3D视频块单元的技术。 在一个示例中，视频编码器被配置为从表示三维视频数据的视图的图像的至少一部分接收一个或多个纹理分量，接收图像的至少部分的深度图分量，编码块 指示图像的一部分和深度图分量的一个或多个纹理分量的像素的单元。 编码包括接收视频数据视图的时间实例的纹理数据，接收对应于视频数据视图的时间实例的纹理数据的深度数据，以及将纹理数据和深度数据封装在视图分量中 视图的时间实例，使得纹理数据和深度数据被封装在公共位流中。

公开(公告)号：US09123115B2

公开(公告)日：2015-09-01

申请号：US12953310

申请日：2010-11-23

申请人： Rong Zhang ,  Ying Chen ,  Marta Karczewicz

发明人： Rong Zhang ,  Ying Chen ,  Marta Karczewicz

IPC分类号： H04N13/00 ,  H04N15/00 ,  G06T7/00

CPC分类号： G06T7/0071 ,  G06T7/579

摘要： This disclosure describes techniques for estimating a depth of image objects for a two-dimensional (2D) view of a video presentation. For example, an initial indication of depth (e.g., an optical flow) may be determined for a 2D view. The initial indication of depth may be used to estimate global motion, e.g., motion of an observer (e.g., camera), of the 2D view. The initial indication of depth may be modified based on the estimation of global motion to create a global motion-adjusted indication of depth. The global motion-adjusted depth indication may be used to create a depth map for the 2D view, which may be used to generate an alternative view of the video presentation that may be used to display a three-dimensional (3D) video presentation.

摘要翻译： 本公开描述了用于估计视频呈现的二维（2D）视图的图像对象的深度的技术。 例如，可以为2D视图确定深度的初始指示（例如，光流）。 深度的初始指示可以用于估计2D视图的全局运动，例如观察者（例如，相机）的运动。 可以基于全局运动的估计来修改深度的初始指示，以创建全局运动调整的深度指示。 全局运动调整深度指示可用于为2D视图创建深度图，其可以用于生成可用于显示三维（3D）视频呈现的视频呈现的替代视图。

公开(公告)号：US20120127270A1

公开(公告)日：2012-05-24

申请号：US13301225

申请日：2011-11-21

申请人： Rong Zhang ,  Ying Chen ,  Marta Karczewicz

发明人： Rong Zhang ,  Ying Chen ,  Marta Karczewicz

IPC分类号： H04N13/00

CPC分类号： G06T7/0071 ,  G06T7/579

摘要： This disclosure describes techniques for estimating a depth of image objects for a two-dimensional (2D) view of a video presentation. For example, a plurality of feature points may be determined for a 2D view. The plurality of feature points may be used to estimate global motion, e.g., motion of an observer (e.g., camera), of the 2D view. For example, the plurality of feature points may be used to generate a global motion frame difference. The global motion frame difference may be used to create a depth map for the 2D view, which may be used to generate an alternative view of the video presentation that may be used to display a three-dimensional (3D) video presentation.

摘要翻译： 本公开描述了用于估计视频呈现的二维（2D）视图的图像对象的深度的技术。 例如，可以为2D视图确定多个特征点。 多个特征点可以用于估计2D视图的全局运动，例如观察者（例如，照相机）的运动。 例如，可以使用多个特征点来产生全局运动帧差。 全局运动帧差可以用于创建2D视图的深度图，其可以用于生成可用于显示三维（3D）视频呈现的视频呈现的替代视图。

公开(公告)号：US09171372B2

公开(公告)日：2015-10-27

申请号：US13301225

申请日：2011-11-21

申请人： Rong Zhang ,  Ying Chen ,  Marta Karczewicz

发明人： Rong Zhang ,  Ying Chen ,  Marta Karczewicz

IPC分类号： H04N13/02 ,  G06T7/00

CPC分类号： G06T7/0071 ,  G06T7/579

摘要： This disclosure describes techniques for estimating a depth of image objects for a two-dimensional (2D) view of a video presentation. For example, a plurality of feature points may be determined for a 2D view. The plurality of feature points may be used to estimate global motion, e.g., motion of an observer (e.g., camera), of the 2D view. For example, the plurality of feature points may be used to generate a global motion frame difference. The global motion frame difference may be used to create a depth map for the 2D view, which may be used to generate an alternative view of the video presentation that may be used to display a three-dimensional (3D) video presentation.

摘要翻译： 本公开描述了用于估计视频呈现的二维（2D）视图的图像对象的深度的技术。 例如，可以为2D视图确定多个特征点。 多个特征点可以用于估计2D视图的全局运动，例如观察者（例如，照相机）的运动。 例如，可以使用多个特征点来产生全局运动帧差。 全局运动帧差可以用于创建2D视图的深度图，其可以用于生成可用于显示三维（3D）视频呈现的视频呈现的替代视图。

公开(公告)号：US20130038686A1

公开(公告)日：2013-02-14

申请号：US13542931

申请日：2012-07-06

申请人： Ying Chen ,  Li Zhang ,  Rong Zhang ,  Yunfei Zheng ,  Marta Karczewicz

发明人： Ying Chen ,  Li Zhang ,  Rong Zhang ,  Yunfei Zheng ,  Marta Karczewicz

IPC分类号： H04N13/00

CPC分类号： H04N19/573 ,  H04N19/105 ,  H04N19/174 ,  H04N19/176 ,  H04N19/30 ,  H04N19/46 ,  H04N19/513 ,  H04N19/53 ,  H04N19/597 ,  H04N19/61

摘要： A video coding device may be configured to code a bitstream including multiple views plus depth information. Two of the views may have reduced resolutions, while a third view may have a full resolution. The third view may be predicted relative to upsampled versions of the two reduced-resolution views. Each view may include texture data and depth data, such that a view component may include a texture component and a depth component. Moreover, the texture and depth components may be arranged within an access unit according to a particular order, which may simplify component extraction from the access unit.

摘要翻译： 视频编码装置可以被配置为将包括多个视图的比特流加深度信息进行编码。 其中两个意见可能会减少决议，而第三个观点可能会有一个完整的决议。 相对于两个缩小分辨率视图的上采样版本，可以预测第三视图。 每个视图可以包括纹理数据和深度数据，使得视图组件可以包括纹理组件和深度分量。 此外，可以根据特定顺序将纹理和深度分量布置在访问单元内，这可以简化从访问单元的组件提取。

公开(公告)号：US20120229602A1

公开(公告)日：2012-09-13

申请号：US13414515

申请日：2012-03-07

申请人： Ying Chen ,  Rong Zhang ,  Marta Karczewicz

发明人： Ying Chen ,  Rong Zhang ,  Marta Karczewicz

IPC分类号： H04N13/00

CPC分类号： H04N19/597

摘要： This disclosure describes techniques for coding 3D video block units. In one example, a video encoder is configured to receive one or more texture components from at least a portion of an image representing a view of three dimensional video data, receive a depth map component for at least the portion of the image, code a block unit indicative of pixels of the one or more texture components for a portion of the image and the depth map component. The coding comprises receiving texture data for a temporal instance of a view of video data, receiving depth data corresponding to the texture data for the temporal instance of the view of video data, and encapsulating the texture data and the depth data in a view component for the temporal instance of the view, such that the texture data and the depth data are encapsulated within a common bitstream.

摘要翻译： 本公开描述了用于编码3D视频块单元的技术。 在一个示例中，视频编码器被配置为从表示三维视频数据的视图的图像的至少一部分接收一个或多个纹理分量，接收图像的至少部分的深度图分量，编码块 指示图像的一部分和深度图分量的一个或多个纹理分量的像素的单元。 编码包括接收视频数据视图的时间实例的纹理数据，接收对应于视频数据视图的时间实例的纹理数据的深度数据，以及将纹理数据和深度数据封装在视图分量中 视图的时间实例，使得纹理数据和深度数据被封装在公共位流中。

公开(公告)号：US20120127267A1

公开(公告)日：2012-05-24

申请号：US12953310

申请日：2010-11-23

申请人： Rong Zhang ,  Ying Chen ,  Marta Karczewicz

发明人： Rong Zhang ,  Ying Chen ,  Marta Karczewicz

IPC分类号： H04N13/00

CPC分类号： G06T7/0071 ,  G06T7/579

摘要： This disclosure describes techniques for estimating a depth of image objects for a two-dimensional (2D) view of a video presentation. For example, an initial indication of depth (e.g., an optical flow) may be determined for a 2D view. The initial indication of depth may be used to estimate global motion, e.g., motion of an observer (e.g., camera), of the 2D view. The initial indication of depth may be modified based on the estimation of global motion to create a global motion-adjusted indication of depth. The global motion-adjusted depth indication may be used to create a depth map for the 2D view, which may be used to generate an alternative view of the video presentation that may be used to display a three-dimensional (3D) video presentation.

摘要翻译： 本公开描述了用于估计视频呈现的二维（2D）视图的图像对象的深度的技术。 例如，可以为2D视图确定深度的初始指示（例如，光流）。 深度的初始指示可以用于估计2D视图的全局运动，例如观察者（例如，相机）的运动。 可以基于全局运动的估计来修改深度的初始指示，以创建全局运动调整的深度指示。 全局运动调整深度指示可用于为2D视图创建深度图，其可以用于生成可用于显示三维（3D）视频呈现的视频呈现的替代视图。

公开(公告)号：US08537200B2

公开(公告)日：2013-09-17

申请号：US12696499

申请日：2010-01-29

申请人： Rong Zhang ,  Ying Chen ,  Marta Karczewicz

发明人： Rong Zhang ,  Ying Chen ,  Marta Karczewicz

IPC分类号： H04N7/12

CPC分类号： G06T7/579 ,  G06T2207/10016 ,  H04N13/128 ,  H04N13/221 ,  H04N13/257 ,  H04N13/261

摘要： This disclosure describes techniques for generating depth maps for video units, such as video frames or slices video frames. The techniques may be performed by a video encoder in order to convert two-dimensional (2D) video to three-dimensional (3D) video. The techniques may alternatively be performed by a video decoder in order to convert received 2D video to 3D video. The techniques may use a combination of motion and color considerations in the depth map generation process.

摘要翻译： 本公开描述了用于为诸如视频帧或片段视频帧的视频单元生成深度图的技术。 这些技术可以由视频编码器执行，以将二维（2D）视频转换为三维（3D）视频。 这些技术可以替代地由视频解码器执行，以将接收的2D视频转换为3D视频。 这些技术可以在深度图生成过程中使用运动和颜色考虑的组合。

公开(公告)号：US20120236115A1

公开(公告)日：2012-09-20

申请号：US13252081

申请日：2011-10-03

申请人： Rong Zhang ,  Ying Chen ,  Marta Karczewicz

发明人： Rong Zhang ,  Ying Chen ,  Marta Karczewicz

IPC分类号： H04N13/00

CPC分类号： H04N19/59 ,  H04N19/117 ,  H04N19/147 ,  H04N19/187 ,  H04N19/30 ,  H04N19/46 ,  H04N19/597 ,  H04N19/86

摘要： Stereoscopic video data encoded according to a full resolution frame-compatible stereoscopic vide coding process. Such stereoscopic video data consists of a right view and a left that are encoded in half resolution versions in an interleaved base layer and an interleaved enhancement layer. When decoded, the right view and left view are filtered according to two sets of filter coefficients, one set for the left view and one set for the right view. The sets of filter coefficients are generated by an encoder by comparing the original left and right views to decoded versions of the left and right views.

摘要翻译： 根据全分辨率帧兼容的立体视频编码过程编码的立体视频数据。 这种立体视频数据由在交织的基础层和交织的增强层中以半分辨率版本编码的右视图和左视图组成。 当解码时，右视图和左视图根据两组滤波器系数进行滤波，一组用于左视图，一组用于右视图。 通过将原始左视图和右视图与左视图和右视图的解码版本进行比较，由编码器生成滤波器系数集合。

公开(公告)号：US09288505B2

公开(公告)日：2016-03-15

申请号：US13542931

申请日：2012-07-06

申请人： Ying Chen ,  Li Zhang ,  Rong Zhang ,  Yunfei Zheng ,  Marta Karczewicz

发明人： Ying Chen ,  Li Zhang ,  Rong Zhang ,  Yunfei Zheng ,  Marta Karczewicz

IPC分类号： H04N13/00 ,  H04N19/573 ,  H04N19/597 ,  H04N19/105 ,  H04N19/176 ,  H04N19/46 ,  H04N19/513 ,  H04N19/30 ,  H04N19/61 ,  H04N19/174 ,  H04N19/53 ,  H04N7/12

CPC分类号： H04N19/573 ,  H04N19/105 ,  H04N19/174 ,  H04N19/176 ,  H04N19/30 ,  H04N19/46 ,  H04N19/513 ,  H04N19/53 ,  H04N19/597 ,  H04N19/61

摘要： A video coding device may be configured to code a bitstream including multiple views plus depth information. Two of the views may have reduced resolutions, while a third view may have a full resolution. The third view may be predicted relative to upsampled versions of the two reduced-resolution views. Each view may include texture data and depth data, such that a view component may include a texture component and a depth component. Moreover, the texture and depth components may be arranged within an access unit according to a particular order, which may simplify component extraction from the access unit.

摘要翻译： 视频编码装置可以被配置为将包括多个视图的比特流加深度信息进行编码。 其中两个意见可能会减少决议，而第三个观点可能会有一个完整的决议。 相对于两个缩小分辨率视图的上采样版本，可以预测第三视图。 每个视图可以包括纹理数据和深度数据，使得视图组件可以包括纹理组件和深度分量。 此外，纹理和深度分量可以根据特定顺序被布置在访问单元内，这可以简化从访问单元的组件提取。