公开(公告)号：US08275042B2

公开(公告)日：2012-09-25

申请号：US12260403

申请日：2008-10-29

申请人： Zhonghua Ma ,  I-Jan Eric Wang

发明人： Zhonghua Ma ,  I-Jan Eric Wang

IPC分类号： H04N7/12

CPC分类号： H04N19/59 ,  H04N19/186 ,  H04N19/40 ,  H04N19/513 ,  H04N19/523 ,  H04N19/61

摘要： Disclosed is an apparatus (500) for generating a second compressed video stream (550) having a second resolution, from a first compressed video stream (540) having a first resolution. The apparatus comprises means (513) for extracting transform domain luma data and spatial domain chroma data from the first compressed video stream (540), means (514-516) for applying a transform domain operation to the luma data to form reconstructed transform domain luma data, means (518, 519, 560) for applying a spatial domain operation to the chroma data to form reconstructed spatial domain chroma data, and means for scaling the reconstructed transform domain luma data and reconstructed spatial domain chroma data to generate the second compressed video stream.

摘要翻译： 公开了一种用于从具有第一分辨率的第一压缩视频流（540）生成具有第二分辨率的第二压缩视频流（550）的装置（500）。 该装置包括用于从第一压缩视频流（540）提取变换域亮度数据和空间域色度数据的装置（513），用于对亮度数据应用变换域操作的装置（514-516），以形成重建的变换域亮度 数据，用于将空间域操作应用于色度数据以形成重构的空间域色度数据的装置（518,519,560），以及用于缩放重构的变换域亮度数据和重建的空间域色度数据以产生第二压缩视频的装置 流。

公开(公告)号：US20090116554A1

公开(公告)日：2009-05-07

申请号：US12260403

申请日：2008-10-29

申请人： Zhonghua Ma ,  I-Jan Eric Wang

发明人： Zhonghua Ma ,  I-Jan Eric Wang

IPC分类号： H04N7/50 ,  H04N7/26 ,  H04N7/30

CPC分类号： H04N19/59 ,  H04N19/186 ,  H04N19/40 ,  H04N19/513 ,  H04N19/523 ,  H04N19/61

摘要： Disclosed is an apparatus (500) for generating a second compressed video stream (550) having a second resolution, from a first compressed video stream (540) having a first resolution. The apparatus comprises means (513) for extracting transform domain luma data and spatial domain chroma data from the first compressed video stream (540), means (514-516) for applying a transform domain operation to the luma data to form reconstructed transform domain luma data, means (518, 519, 560) for applying a spatial domain operation to the chroma data to form reconstructed spatial domain chroma data, and means for scaling the reconstructed transform domain luma data and reconstructed spatial domain chroma data to generate the second compressed video stream.

摘要翻译： 公开了一种用于从具有第一分辨率的第一压缩视频流（540）生成具有第二分辨率的第二压缩视频流（550）的装置（500）。 该装置包括用于从第一压缩视频流（540）提取变换域亮度数据和空间域色度数据的装置（513），用于对亮度数据应用变换域操作的装置（514-516），以形成重建的变换域亮度 数据，用于将空间域操作应用于色度数据以形成重构的空间域色度数据的装置（518,519,560），以及用于缩放重构的变换域亮度数据和重建的空间域色度数据以产生第二压缩视频的装置 流。

公开(公告)号：US08189656B2

公开(公告)日：2012-05-29

申请号：US12137013

申请日：2008-06-11

申请人： Zhonghua Ma ,  I-Jan Eric Wang

发明人： Zhonghua Ma ,  I-Jan Eric Wang

IPC分类号： H04N7/12 ,  H04N11/02 ,  H04N11/04

CPC分类号： H04N19/577 ,  H04N19/109 ,  H04N19/137 ,  H04N19/17 ,  H04N19/513 ,  H04N19/56 ,  H04N19/80

摘要： Disclosed is a method (800) and an apparatus (250) for generating a scaled motion vector for a particular output coding unit, the method comprising determining (802) statistics of motion data from an area-of-interest selecting (804) from a pre-defined set (805-807) of re-sampling filters a re-sampling filter dependent upon said determined statistics for the particular output coding unit, and applying the selected re-sampling filter to motion vectors from said area-of-interest to generate the scaled motion vector.

摘要翻译： 公开了一种用于为特定输出编码单元生成缩放的运动矢量的方法（800）和装置（250），所述方法包括从兴趣区选择（804）中确定（802）运动数据的统计 取决于针对特定输出编码单元的所述确定的统计量的再采样滤波器的预定义集合（805-807）对重采样滤波器进行滤波，以及将所选择的重采样滤波器应用于从所述感兴趣区域到 生成缩放运动矢量。

公开(公告)号：US20080310513A1

公开(公告)日：2008-12-18

申请号：US12137013

申请日：2008-06-11

申请人： Zhonghua Ma ,  I-Jan Eric Wang

发明人： Zhonghua Ma ,  I-Jan Eric Wang

IPC分类号： H04N7/26

CPC分类号： H04N19/577 ,  H04N19/109 ,  H04N19/137 ,  H04N19/17 ,  H04N19/513 ,  H04N19/56 ,  H04N19/80

摘要： Disclosed is a method (800) and an apparatus (250) for generating a scaled motion vector for a particular output coding unit, the method comprising determining (802) statistics of motion data from an area-of-interest selecting (804) from a pre-defined set (805-807) of re-sampling filters a re-sampling filter dependent upon said determined statistics for the particular output coding unit, and applying the selected re-sampling filter to motion vectors from said area-of-interest to generate the scaled motion vector.

摘要翻译： 公开了一种用于为特定输出编码单元生成缩放的运动矢量的方法（800）和装置（250），该方法包括从兴趣区选择（804）中确定（802）运动数据的统计 取决于针对特定输出编码单元的所述确定的统计量的再采样过滤器的预定义集合（805-807）对重新采样滤波器进行滤波，以及将所选择的重新采样滤波器应用于从所述感兴趣区域到 生成缩放运动矢量。

公开(公告)号：US08810633B2

公开(公告)日：2014-08-19

申请号：US12955370

申请日：2010-11-29

申请人： Ka-Ming Leung ,  Zhonghua Ma

发明人： Ka-Ming Leung ,  Zhonghua Ma

IPC分类号： H04N13/02 ,  H04N7/26 ,  H04N7/32

CPC分类号： H04N19/00466 ,  H04N19/395 ,  H04N19/50 ,  H04N19/597

摘要： Disclosed is a method of image coding for joint decoding of images from different viewpoints using distributed coding techniques. The method receives a first set of features (205) and error correction bits (203) corresponding to a first image (201) obtained at a first viewpoint (122) and a second set of features (425) from a second image (254, 415) corresponding to a second viewpoint (124). An approximation (437) of said first image (201) at said first viewpoint (122) is determined (432, 434, 436) an based on the first and second sets of features (205, 425) and the second image at the second viewpoint. A reliability measure (445) of the approximation of the first image is then determined (450) by joint decoding (438) the approximation (437) using the error correction bits (203). The approximation of the first image is then refined iteratively (460, 438) based on the reliability measure (445) and image information (448) derived from the joint decoding.

摘要翻译： 公开了一种使用分布式编码技术从不同视点联合解码图像的图像编码方法。 该方法接收与第一图像（254）获得的第一组特征（205）和对应于在第一视点（122）和第二组特征（425）获得的第一图像（201）的特征（205）和纠错位（203） 415）对应于第二视点（124）。 基于所述第一和第二特征集合（205,425）确定所述第一图像（201）在所述第一视点（122）处的近似值（437），并且所述第二图像在第二视点 观点 然后，使用误差校正位（203）通过联合解码（438）近似（437）来确定第一图像的近似的可靠性度量（445）（450）。 然后，基于从联合解码得到的可靠性度量（445）和图像信息（448），迭代地对第一图像的近似值进行迭代（460,438）。

公开(公告)号：US20120327220A1

公开(公告)日：2012-12-27

申请号：US13482739

申请日：2012-05-29

申请人： Zhonghua Ma

发明人： Zhonghua Ma

IPC分类号： H04N7/18

CPC分类号： H04N5/232 ,  G06T3/4038 ,  G06T7/292 ,  G06T7/38 ,  G06T2207/10016 ,  G06T2207/30232

摘要： A system and method of generating a common ground plane from a plurality of image sequences includes detecting at least three observations for each image sequence, generating a plurality of rectified ground planes for the plurality of image sequences, determining a geometric property of the plurality of observations in the plurality of image sequences, determining a relative scaling factor of each of the plurality of rectified ground planes, and generating the common ground plane from the plurality of image sequences based on the rectified ground planes and the determined relative scaling factors.

摘要翻译： 从多个图像序列生成公共接地层的系统和方法包括检测每个图像序列的至少三个观察值，为多个图像序列生成多个整流的接地平面，确定多个观测值的几何特性 在所述多个图像序列中，确定所述多个整流接地面中的每一个的相对缩放因子，以及基于所述经整流的接地面和所确定的相对缩放因子从所述多个图像序列生成所述公共接地面。

公开(公告)号：US20100271511A1

公开(公告)日：2010-10-28

申请号：US12762617

申请日：2010-04-19

申请人： Zhonghua Ma ,  Axel Lakus-Becker ,  Ka-Ming Leung

发明人： Zhonghua Ma ,  Axel Lakus-Becker ,  Ka-Ming Leung

IPC分类号： G06K9/40 ,  H04N5/262

CPC分类号： H04N19/597 ,  G06T7/55 ,  G06T2207/10016 ,  G06T2207/20016 ,  H04N13/111 ,  H04N13/128 ,  H04N13/243 ,  H04N13/25 ,  H04N13/261 ,  H04N2213/003

摘要： Methods, apparatuses (100, 400, 1000), and computer program products for generating an enhanced digital image (490, 495, 1022) comprising a plurality of pixels are disclosed. Using a first digital image (420, 1020) captured from a first camera (124) and parity bits (410, 415, 1010) generated from a second digital image captured by a second camera (122, 126), a third digital image (445, 447, 1045) is constructed. The second camera (122, 126) captures the second image at a resolution different to the resolution of the first camera (124) capturing the first image (420, 1020). A disparity map (455, 457, 1055) between the first image (420, 1020) and the third image (445, 447, 1045) is determined (450, 452, 1050). One of the first image (420, 1020) and the third image (445, 447, 1045) is enhanced (470, 472, 1070) dependent upon the determined disparity map (455, 457, 1055) to generate the enhanced digital image (490, 495, 1022).

摘要翻译： 公开了用于生成包括多个像素的增强数字图像（490,495,1022）的装置（100,400,1000）和计算机程序产品。 使用从第一相机（124）捕获的第一数字图像（420,1020）和从由第二相机（122,126）捕获的第二数字图像生成的奇偶校验位（410,415,1010），第三数字图像 445，447，1045）。 第二相机（122,126）以与捕获第一图像（420,1020）的第一相机（124）的分辨率不同的分辨率捕获第二图像。 确定第一图像（420,1020）和第三图像（445,447,1045）之间的视差图（455,457,1055）（450,452,1050）。 第一图像（420,1020）和第三图像（445,447,1045）中的一个被增强（470,472,1070），取决于确定的视差图（455,457,1055）以产生增强数字图像 490，495，1022）。

公开(公告)号：US08509558B2

公开(公告)日：2013-08-13

申请号：US12762617

申请日：2010-04-19

申请人： Zhonghua Ma ,  Axel Lakus-Becker ,  Ka-Ming Leung

发明人： Zhonghua Ma ,  Axel Lakus-Becker ,  Ka-Ming Leung

IPC分类号： G06K9/40 ,  G06K9/32 ,  H04N5/262

CPC分类号： H04N19/597 ,  G06T7/55 ,  G06T2207/10016 ,  G06T2207/20016 ,  H04N13/111 ,  H04N13/128 ,  H04N13/243 ,  H04N13/25 ,  H04N13/261 ,  H04N2213/003

摘要： Methods, apparatuses (100, 400, 1000), and computer program products for generating an enhanced digital image (490, 495, 1022) comprising a plurality of pixels are disclosed. Using a first digital image (420, 1020) captured from a first camera (124) and parity bits (410, 415, 1010) generated from a second digital image captured by a second camera (122, 126), a third digital image (445, 447, 1045) is constructed. The second camera (122, 126) captures the second image at a resolution different to the resolution of the first camera (124) capturing the first image (420, 1020). A disparity map (455, 457, 1055) between the first image (420, 1020) and the third image (445, 447, 1045) is determined (450, 452, 1050). One of the first image (420, 1020) and the third image (445, 447, 1045) is enhanced (470, 472, 1070) dependent upon the determined disparity map (455, 457, 1055) to generate the enhanced digital image (490, 495, 1022).

摘要翻译： 公开了用于生成包括多个像素的增强数字图像（490,495,1022）的装置（100,400,1000）和计算机程序产品。 使用从第一相机（124）捕获的第一数字图像（420,1020）和从由第二相机（122,126）捕获的第二数字图像生成的奇偶校验位（410,415,1010），第三数字图像 445，447，1045）。 第二相机（122,126）以与捕获第一图像（420,1020）的第一相机（124）的分辨率不同的分辨率捕获第二图像。 确定第一图像（420,1020）和第三图像（445,447,1045）之间的视差图（455,457,1055）（450,452,1050）。 第一图像（420,1020）和第三图像（445,447,1045）中的一个被增强（470,472,1070），取决于确定的视差图（455,457,1055）以产生增强数字图像 490，495，1022）。

公开(公告)号：US20100158131A1

公开(公告)日：2010-06-24

申请号：US12635152

申请日：2009-12-10

申请人： Axel Lakus-Becker ,  Zhonghua Ma

发明人： Axel Lakus-Becker ,  Zhonghua Ma

IPC分类号： H04N7/26

CPC分类号： H04N19/395 ,  H04N19/184 ,  H04N19/192 ,  H04N19/44 ,  H04N19/46

摘要： A method of decoding a frame (1110) of video data is disclosed. The data is encoded in a format having a first field (1031) comprising a plurality of encoded key frames and a second field (1032A; 1032B) comprising data facilitating error correction of an approximation of the frame to be decoded using the first field. The method decodes (1140; 1240) at least two key frames from the first field and then determines the approximation (1157; 1257) of the frame from the decoded key frames. The method then determines (1125; 1225) a reliability (1165; 1265) for each of at least parts of the approximation, and applies (1080; 1280) the data (1032A; 1032B) facilitating error correction to the approximation (1157; 1257) of the frame, based on the determined reliabilities for the parts to thereby form the decoded frame (1135; 1235=1110).

摘要翻译： 公开了对视频数据的帧（1110）进行解码的方法。 数据以具有包括多个编码关键帧的第一字段（1031）的格式编码，以及包括有助于使用第一字段对待解码的帧的近似进行纠错的数据的第二字段（1032A; 1032B）。 该方法从第一场解码（1140; 1240）至少两个关键帧，然后从解码的关键帧确定帧的近似（1157; 1257）。 该方法然后对于近似的至少部分中的每一个确定（1125; 1225）可靠性（1165; 1265），并且将（1080; 1280）将促进误差校正的数据（1032A; 1032B）应用于近似（1157; 1257） ），基于确定的部分的可靠性从而形成解码帧（1135; 1235 = 1110）。

公开(公告)号：US20070285500A1

公开(公告)日：2007-12-13

申请号：US11738806

申请日：2007-04-23

申请人： Zhonghua Ma ,  Jianwei Wang ,  Marwan Jabri

发明人： Zhonghua Ma ,  Jianwei Wang ,  Marwan Jabri

IPC分类号： H04N7/14

CPC分类号： H04N7/152 ,  H04N19/103 ,  H04N19/105 ,  H04N19/109 ,  H04N19/124 ,  H04N19/40 ,  H04N19/533 ,  H04N19/59

摘要： An apparatus for use in video mixing of multiple video sources compressed in one or more video codecs includes a bitstream unpacker configured to receive and unpack each of the multiple video sources to provide intermediate video parameters including transform-domain coefficients, frame header information, macroblock header information, and motion vector data. The apparatus also includes an intermediate coefficient buffer coupled to the bitstream unpacker and a decision module coupled to the bitstream unpacker. The apparatus further includes a transform-domain coefficient downscaling module coupled to the intermediate coefficient buffer, a motion vector refinement module coupled to the bitstream unpacker, and a bitstream packer coupled to the decision module, the transform-domain coefficient downscaling module, and the motion vector refinement module. The bitstream packer is configured to output multiple video output streams in an output frame and the multiple output streams are compressed using the one or more video codecs.

摘要翻译： 一种用于在一个或多个视频编解码器中压缩的多个视频源的视频混合的装置包括配置成接收和解包多个视频源中的每一个的比特率解包器，以提供中间视频参数，包括变换域系数，帧头信息，宏头 信息和运动矢量数据。 该装置还包括耦合到比特率解包器的中间系数缓冲器和耦合到比特率解包器的判决模块。 该装置还包括耦合到中间系数缓冲器的变换域系数缩小模块，耦合到比特流解包器的运动矢量细化模块，以及耦合到决策模块，变换域系数降频模块和运动的比特流封装器 向量细化模块。 比特流封装器被配置为在输出帧中输出多个视频输出流，并且使用一个或多个视频编解码器压缩多个输出流。