公开(公告)号：US08199816B2

公开(公告)日：2012-06-12

申请号：US11887811

申请日：2006-03-20

申请人： Ying Chen ,  Jiefu Zhai ,  Peng Yin ,  Purvin Bibhas Pandit

发明人： Ying Chen ,  Jiefu Zhai ,  Peng Yin ,  Purvin Bibhas Pandit

IPC分类号： H04N11/02 ,  H04N7/12

CPC分类号： H04N21/234327 ,  H04N19/00 ,  H04N21/2383 ,  H04N21/2662 ,  H04N21/440227 ,  H04N21/64792

摘要： A method for improving the performance of the BLSkip mode in SVC includes the steps of upsampling the motion field of the base layer, interpolating the motion vectors for the intra MBs, interpolating the 8×8 block motion field to a 4×4 block motion field, and generating a MV predictor for a 4×4 block in BLSkip mode using neighbor candidates.

摘要翻译： 用于提高SVC中的BLSkip模式的性能的方法包括以下步骤：对基本层的运动场进行上采样，内插用于帧内MB的运动矢量，将8×8块运动场内插到4×4块运动场 并且使用邻居候选在BLSkip模式下生成用于4×4块的MV预测器。

公开(公告)号：US20090285299A1

公开(公告)日：2009-11-19

申请号：US11887811

申请日：2006-03-20

申请人： Ying Chen ,  Jiefu Zhai ,  Peng Yin ,  Purvin Bibhas Pandit

发明人： Ying Chen ,  Jiefu Zhai ,  Peng Yin ,  Purvin Bibhas Pandit

IPC分类号： H04N7/26

CPC分类号： H04N21/234327 ,  H04N19/00 ,  H04N21/2383 ,  H04N21/2662 ,  H04N21/440227 ,  H04N21/64792

摘要： A method for improving the performance of the BLSkip mode in SVC includes the steps of upsampling the motion field of the base layer, interpolating the motion vectors for the intra MBs, interpolating the 8×8 block motion field to a 4×4 block motion field, and generating a MV predictor for a 4×4 block in BLSkip mode using neighbor candidates.

摘要翻译： 用于提高SVC中的BLSkip模式的性能的方法包括以下步骤：对基本层的运动场进行上采样，内插用于帧内MB的运动矢量，将8×8块运动场内插到4×4块运动场，以及生成 使用邻居候选者在BLSkip模式下的4x4块的MV预测器。

公开(公告)号：US08385432B2

公开(公告)日：2013-02-26

申请号：US11920819

申请日：2006-05-03

申请人： Ying Chen ,  Jiefu Zhai ,  Kui Gao ,  Kai Xie

发明人： Ying Chen ,  Jiefu Zhai ,  Kui Gao ,  Kai Xie

IPC分类号： H04N7/12

CPC分类号： H04N19/615 ,  H04N19/103 ,  H04N19/105 ,  H04N19/13 ,  H04N19/159 ,  H04N19/172 ,  H04N19/33 ,  H04N19/59 ,  H04N19/61 ,  H04N19/63

摘要： Scalable video coding based on H.264/AVC uses motion compensation, which results in motion vectors and residual pictures. To optimize the encoding of the residual pictures of the enhancement-layer, they can be predicted from the base-layer. This requires complex encoders and decoders. Simplified residual prediction techniques are provided that focus on reducing the encoding and decoding complexity of the spatial scalable enhancement-layer with optimized coding efficiency. The method for encoding video data containing high-pass frames and low-pass frames comprises the steps of encoding the low-pass frames, wherein residual prediction may be used, splitting the high-pass frames into two interleaving frame groups, encoding the frames of the first of said frame groups, wherein residual prediction may be used, and encoding the frames of the second of the frame groups using an encoding method without residual prediction.

公开(公告)号：US07847861B2

公开(公告)日：2010-12-07

申请号：US11392427

申请日：2006-03-29

申请人： Jiefu Zhai ,  Ying Chen

发明人： Jiefu Zhai ,  Ying Chen

IPC分类号： H04N7/12

CPC分类号： H04N19/33 ,  H04N19/11 ,  H04N19/157 ,  H04N19/176 ,  H04N19/196 ,  H04N19/46 ,  H04N19/463 ,  H04N19/593 ,  H04N19/70

摘要： The H.264 standard has introduced a new coding method for intra-coded pictures, which is named “intra prediction”. The basic idea of intra prediction is to predict a block using reconstructed neighbour pixels. Thus, only the residual information needs to be encoded. Scalable video coding adds some scalable extension to H.264, in terms of spatial, temporal and SNR scalability. An improved encoding method for scalable video comprises generating from a video picture a first and a second picture with higher resolution than the first picture, wherein each macroblock in the first picture has a plurality of corresponding macroblocks in the second picture, intra-coding the first picture on macroblock level, wherein for each macroblock a prediction direction is determined, generating a first residual picture, intra-coding the second picture on macroblock level, wherein for each macroblock the prediction direction of the corresponding macroblock of the first picture is reused, and generating a second residual picture.

摘要翻译： H.264标准为帧内编码图像引入了一种新的编码方式，被称为“帧内预测”。 帧内预测的基本思想是使用重建的邻居像素预测块。 因此，只需要对残差信息进行编码。 在空间，时间和SNR可扩展性方面，可扩展视频编码为H.264增加了一些可扩展的扩展。 一种用于可缩放视频的改进的编码方法包括：从视频图像生成具有比第一图像更高分辨率的第一和第二图像，其中第一图像中的每个宏块在第二图像中具有多个对应的宏块，对第一图像进行内编码 对于每个宏块，对于每个宏块，确定预测方向，生成第一残差图像，对宏块水平进行第二图像的编码，其中对于每个宏块，第一图像的对应宏块的预测方向被重新使用，以及 产生第二残留图像。

公开(公告)号：US20090041121A1

公开(公告)日：2009-02-12

申请号：US11920819

申请日：2006-05-03

申请人： Ying Chen ,  Jiefu Zhai ,  Kui Gao ,  Kai Xie

发明人： Ying Chen ,  Jiefu Zhai ,  Kui Gao ,  Kai Xie

IPC分类号： H04B1/66

CPC分类号： H04N19/615 ,  H04N19/103 ,  H04N19/105 ,  H04N19/13 ,  H04N19/159 ,  H04N19/172 ,  H04N19/33 ,  H04N19/59 ,  H04N19/61 ,  H04N19/63

摘要： Scalable video coding based on H.264/AVC uses motion compensation, which results in motion vectors and residual pictures. To optimize the encoding of the residual pictures of the enhancement-layer, they can be predicted from the base-layer. This requires complex encoders and decoders. Simplified residual prediction techniques are provided that focus on reducing the encoding and decoding complexity of the spatial scalable enhancement-layer with optimized coding efficiency. The method for encoding video data containing high-pass frames and low-pass frames comprises the steps of encoding the low-pass frames, wherein residual prediction may be used, splitting the high-pass frames into two interleaving frame groups, encoding the frames of the first of said frame groups, wherein residual prediction may be used, and encoding the frames of the second of the frame groups using an encoding method without residual prediction.

摘要翻译： 基于H.264 / AVC的可扩展视频编码使用运动补偿，其导致运动矢量和残留图像。 为了优化增强层的残留图像的编码，可以从基层预测它们。 这需要复杂的编码器和解码器。 提供了简化的残差预测技术，其重点是以优化的编码效率降低空间可缩放增强层的编码和解码复杂度。 用于编码包含高通帧和低通帧的视频数据的方法包括对低通帧进行编码的步骤，其中可以使用残差预测，将高通帧分为两个交织帧组，对 所述帧组中的第一个，其中可以使用残差预测，并且使用没有残差预测的编码方法对所述第二帧组中的帧进行编码。

公开(公告)号：US20060133479A1

公开(公告)日：2006-06-22

申请号：US11293610

申请日：2005-12-02

申请人： Ying Chen ,  Jiefu Zhai

发明人： Ying Chen ,  Jiefu Zhai

IPC分类号： H04N11/04 ,  H04N11/02 ,  H04N7/12 ,  H04B1/66

CPC分类号： H04N19/192 ,  H04N19/126 ,  H04N19/134 ,  H04N19/154 ,  H04N19/172 ,  H04N19/174 ,  H04N19/177 ,  H04N19/60 ,  H04N19/61

摘要： A significant data rate reduction effect in video coding is acchieved by quantizing the transformed frequency coefficients or components of a pixel block so that thereafter fewer amplitude levels need to be encoded and part of the quantised amplitude values becomes zero and need not be encoded as quantised amplitude values. Many transform based video coding standards use a default quantization matrix to achieve better subjective video coding/de-coding quality. A quantization matrix assigns smaller scaling values to some frequency components of the block if the related horizontal and/or vertical frequencies are believed to be the less important frequency components with respect to the resulting subjective picture quality. The inventive quantization matrix generation starts from default quantization matrices and derives therefrom a perceptually optimum quantization matrix for a given picture sequence. In a first pass the candidate quantization matrix for a given picture sequence is iteratively constructed by simultaneously increasing scaling values for some coefficient positions and decreasing scaling values for other ones of the coefficient positions. In a second pass the generated quantization matrix is applied for re-encoding the picture sequence.

摘要翻译： 通过量化像素块的变换的频率系数或分量来获得视频编码中的显着的数据速率降低效果，以便此后需要编码更少的幅度水平，并且部分量化振幅值变为零并且不需要被编码为量化幅度 价值观。 许多基于变换的视频编码标准使用默认量化矩阵来实现更好的主观视频编码/解码质量。 如果相关的水平和/或垂直频率相对于所得到的主观图像质量不太重要的频率分量，则量化矩阵将更小的缩放值分配给块的某些频率分量。 本发明的量化矩阵生成从默认量化矩阵开始，并从其导出用于给定图像序列的感知最佳量化矩阵。 在第一遍中，给定图像序列的候选量化矩阵通过同时增加一些系数位置的缩放值并减小其他系数位置的缩放值来迭代地构造。 在第二遍中，生成的量化矩阵被应用于重新编码图像序列。

公开(公告)号：US20060262216A1

公开(公告)日：2006-11-23

申请号：US11392427

申请日：2006-03-29

申请人： Jiefu Zhai ,  Ying Chen

发明人： Jiefu Zhai ,  Ying Chen

IPC分类号： H04N11/04

CPC分类号： H04N19/33 ,  H04N19/11 ,  H04N19/157 ,  H04N19/176 ,  H04N19/196 ,  H04N19/46 ,  H04N19/463 ,  H04N19/593 ,  H04N19/70

摘要： The H.264 standard has introduced a new coding method for intra-coded pictures, which is named “intra prediction”. The basic idea of intra prediction is to predict a block using reconstructed neighbour pixels. Thus, only the residual information needs to be encoded. Scalable video coding adds some scalable extension to H.264, in terms of spatial, temporal and SNR scalability. An improved encoding method for scalable video comprises generating from a video picture a first and a second picture with higher resolution than the first picture, wherein each macroblock in the first picture has a plurality of corresponding macroblocks in the second picture, intra-coding the first picture on macroblock level, wherein for each macroblock a prediction direction is determined, generating a first residual picture, intra-coding the second picture on macroblock level, wherein for each macroblock the prediction direction of the corresponding macroblock of the first picture is reused, and generating a second residual picture.

摘要翻译： H.264标准为帧内编码图像引入了一种新的编码方式，被称为“帧内预测”。 帧内预测的基本思想是使用重建的邻居像素预测块。 因此，只需要对残差信息进行编码。 在空间，时间和SNR可扩展性方面，可扩展视频编码为H.264增加了一些可扩展的扩展。 一种用于可缩放视频的改进的编码方法包括：从视频图像生成具有比第一图像更高分辨率的第一和第二图像，其中第一图像中的每个宏块在第二图像中具有多个对应的宏块，对第一图像进行内编码 对于每个宏块，对于每个宏块，确定预测方向，生成第一残差图像，对宏块水平进行第二图像的帧内编码，其中对于每个宏块，重新使用第一图像的对应宏块的预测方向，以及 产生第二残留图像。

公开(公告)号：US10108314B2

公开(公告)日：2018-10-23

申请号：US13805185

申请日：2011-06-23

申请人： Jiefu Zhai ,  Joan Llach ,  Zhe Wang

发明人： Jiefu Zhai ,  Joan Llach ,  Zhe Wang

IPC分类号： G06F3/048 ,  G06F3/00 ,  G06K9/00 ,  G06F3/0484 ,  G06T5/00 ,  G06T5/40

摘要： A tone mapping graphical user interface (GUI) is provided that allows a video engineer to process a video using a set of tools for changing high dynamic range data into lower dynamic range data. The tone mapping GUI includes a video player region that includes the current video output section for a region-based method of performing HDR conversion, and a current video output section for a reference method that performs HDR conversion using, for example, a global process.

公开(公告)号：US09087382B2

公开(公告)日：2015-07-21

申请号：US13381224

申请日：2010-06-29

申请人： Jiefu Zhai ,  Joan Llach

发明人： Jiefu Zhai ,  Joan Llach

IPC分类号： G09G5/02 ,  G06T5/00

CPC分类号： G06T5/008 ,  G06T2207/10024 ,  G06T2207/20012 ,  G06T2207/20208

摘要： A method of tone mapping high dynamic range images for display on low dynamic range displays wherein a high dynamic range image is first accessed. The high dynamic range image is segmented into different regions such that each region is represented by a matrix, where each element of the matrix is a weight or probability of a pixel. An exposure of each region is determined or calculated and the exposure values are applied to the regions responsive to the weight or probability. The different regions are then fused together to obtain a final tone mapped image.

摘要翻译： 一种色调映射高动态范围图像的方法，用于在低动态范围显示器上显示，其中首先访问高动态范围图像。 高动态范围图像被分割成不同的区域，使得每个区域由矩阵表示，其中矩阵的每个元素是像素的权重或概率。 确定或计算每个区域的曝光，并且将曝光值应用于响应于重量或概率的区域。 然后将不同的区域融合在一起以获得最终的色调映射图像。

公开(公告)号：US20130258067A1

公开(公告)日：2013-10-03

申请号：US13991636

申请日：2010-12-08

申请人： Dong-Qing Zhang ,  Jiefu Zhai ,  Zhe Wang

发明人： Dong-Qing Zhang ,  Jiefu Zhai ,  Zhe Wang

IPC分类号： H04N13/02

CPC分类号： H04N13/25 ,  G06T7/55 ,  G06T2207/20088 ,  H04N13/243

摘要： A depth acquisition system utilizes at least three sensors with at least one sensor in a non-colinear configuration to increase depth information. This configuration provides both vertical and horizontal depth information to be combined to enhance image quality, especially in three-dimensional image gathering. Vertical sensor pairs aid in determining disparities for horizontal edges and make depth estimations for horizontal edges more accurate.

摘要翻译： 深度采集系统利用至少三个具有非共线配置中的至少一个传感器的传感器来增加深度信息。 该配置提供要组合的垂直和水平深度信息以增强图像质量，特别是在三维图像采集中。 垂直传感器对有助于确定水平边缘的差异，并使水平边缘的深度估计更准确。