公开(公告)号：US08929455B2

公开(公告)日：2015-01-06

申请号：US13175737

申请日：2011-07-01

申请人： Robert A. Cohen ,  Anthony Vetro

发明人： Robert A. Cohen ,  Anthony Vetro

IPC分类号： H04N7/12 ,  H04N19/102 ,  H04N19/10 ,  H04N19/12 ,  H04N19/159 ,  H04N19/61 ,  H04N19/11

CPC分类号： H04N7/52 ,  H04N19/10 ,  H04N19/11 ,  H04N19/12 ,  H04N19/122 ,  H04N19/159 ,  H04N19/60 ,  H04N19/61

摘要： A method codes pictures in a bitstream, wherein the bitstream includes coded pictures to obtain data for associated TUs and data for generating a transform tree, and a partitioning of coding units (CUs) into Prediction Units (PUs), and data for obtaining prediction modes or directions associated with each PU. One or more mapping tables are defined, wherein each row of each table has an associated index and a first set of transform types to be used for applying an inverse transformation to the data in TU. The first set of transform types is selected according to an index, and then a second set of transform types is applied as the inverse transformation to the data, wherein the second set of transform types is determined according to the first set of transform types and a transform-toggle flag (ttf) to obtain a reconstructed prediction residual.

摘要翻译： 一种方法对比特流中的图像进行编码，其中比特流包括用于获得相关联的TU的数据的编码图像和用于生成变换树的数据，以及将编码单元（CU）划分为预测单元（PU）和用于获得预测模式的数据 或与每个PU相关联的方向。 定义一个或多个映射表，其中每个表的每一行具有相关联的索引和用于将逆变换应用于TU中的数据的第一组变换类型。 根据索引选择第一组变换类型，然后应用第二组变换类型作为数据的逆变换，其中根据第一组变换类型确定第二组变换类型，并且a 变换切换标志（ttf）以获得重建的预测残差。

公开(公告)号：US08767835B2

公开(公告)日：2014-07-01

申请号：US12979414

申请日：2010-12-28

申请人： Robert A. Cohen ,  Jewon Kang ,  Anthony Vetro

发明人： Robert A. Cohen ,  Jewon Kang ,  Anthony Vetro

IPC分类号： H04N7/50 ,  H04N7/26 ,  H04N7/32 ,  H04N7/30

CPC分类号： H04N19/97 ,  H04N19/102 ,  H04N19/105 ,  H04N19/122 ,  H04N19/147 ,  H04N19/157 ,  H04N19/176 ,  H04N19/46

摘要： A video encoded as a bit stream is decoded by maintaining a set of dictionaries generated from decoded prediction residual signals, wherein elements of the set of dictionaries have associated indices. A current macroblock is entropy decoded and inverse quantized to produce decoded coefficients. For the current macroblock, a particular dictionary of the set of dictionaries is selected according to a prediction mode signaled in the bit stream, and particular elements of the particular dictionary are selected according to a copy mode signal in the bit stream and the associated index. The particular elements is scaled and combined, using the decoded coefficients, to reconstruct a current decoded macroblock prediction residual signal. Then, the current decoded macroblock prediction residual signal is combined with previously decoded macroblocks to generate an output macroblock of a reconstructed video, wherein the steps are performed in a decoder.

摘要翻译： 通过维持从解码的预测残差信号产生的一组字典来解码编码为比特流的视频，其中字典集合中的元素具有相关联的索引。 当前宏块被熵解码并被反量化以产生解码系数。 对于当前的宏块，根据在位流中发信号的预测模式来选择字典集合的特定字典，并且根据位流中的复制模式信号和相关联的索引来选择特定字典的特定元素。 使用解码的系数对特定元素进行缩放和组合，以重构当前解码的宏块预测残差信号。 然后，将当前解码的宏块预测残差信号与先前解码的宏块相组合以产生重构视频的输出宏块，其中在解码器中执行这些步骤。

公开(公告)号：US08494290B2

公开(公告)日：2013-07-23

申请号：US13169959

申请日：2011-06-27

申请人： Robert A. Cohen ,  Anthony Vetro ,  Huifang Sun

发明人： Robert A. Cohen ,  Anthony Vetro ,  Huifang Sun

IPC分类号： G06K9/36

CPC分类号： G06T9/40 ,  H04N19/119 ,  H04N19/122 ,  H04N19/176 ,  H04N19/46 ,  H04N19/70

摘要： A bitstream includes coded pictures, and split-flags for generating a transform tree. The bit stream is a partitioning of coding units (CUs) into Prediction Units (PUs). The transform tree is generated according to the split-flags. Nodes in the transform tree represent transform units (TU) associated with the CUs. The generation splits each TU only if the corresponding split-flag is set. For each PU that includes multiple TUs, the multiple TUs are merged into a larger TU, and the transform tree is modified according to the splitting and merging. Then, data contained in each PU can be decoded using the TUs associated with the PU according to the transform tree.

摘要翻译： 比特流包括编码图像，以及用于生成变换树的分割标志。 比特流是将编码单元（CU）划分成预测单元（PU）。 转换树根据分裂标志生成。 变换树中的节点表示与CU相关联的变换单元（TU）。 仅当相应的分割标志被设置时，该代码才能分割每个TU。 对于包含多个TU的每个PU，将多个TU合并成一个较大的TU，根据分割和合并修改变换树。 然后，可以使用根据变换树与PU相关联的TU来解码包含在每个PU中的数据。

公开(公告)号：US08395642B2

公开(公告)日：2013-03-12

申请号：US12405912

申请日：2009-03-17

申请人： Sehoon Yea ,  Kwan-Jung Oh ,  Anthony Vetro

发明人： Sehoon Yea ,  Kwan-Jung Oh ,  Anthony Vetro

IPC分类号： G09G5/00 ,  G06K9/00

CPC分类号： G06T3/0093 ,  G06T5/009 ,  G06T5/30 ,  G06T5/40 ,  G06T5/50 ,  G06T15/205 ,  G06T2207/10016 ,  G06T2207/10028 ,  G06T2207/20028 ,  G06T2207/20036 ,  H04N13/261 ,  H04N19/597

摘要： A method synthesizes virtual images from a sequence of texture images and a sequence of corresponding depth images, wherein each depth images stores depths d at pixel locations I(x, y). Each depth image, is preprocessed to produce a corresponding preprocessed depth image. A first reference image and a second reference image are from the sequence of texture images. Then, depth-based 3D warping, depth-based histogram matching, base plus assistant image blending, and depth-based in-painting are applied in order to synthesize a virtual image.

摘要翻译： 一种方法从纹理图像序列和相应深度图像的序列合成虚拟图像，其中每个深度图像存储像素位置I（x，y）处的深度d。 每个深度图像被预处理以产生相应的预处理深度图像。 第一参考图像和第二参考图像来自纹理图像序列。 然后，应用基于深度的3D翘曲，基于深度的直方图匹配，基础加辅助图像混合和基于深度的绘画，以便合成虚拟图像。

公开(公告)号：US20120314027A1

公开(公告)日：2012-12-13

申请号：US13544463

申请日：2012-07-09

申请人： Dong Tian ,  Feng Zou ,  Anthony Vetro

发明人： Dong Tian ,  Feng Zou ,  Anthony Vetro

IPC分类号： H04N13/00

CPC分类号： H04N7/181 ,  H04N19/122 ,  H04N19/13 ,  H04N19/132 ,  H04N19/14 ,  H04N19/147 ,  H04N19/159 ,  H04N19/172 ,  H04N19/174 ,  H04N19/176 ,  H04N19/423 ,  H04N19/46 ,  H04N19/52 ,  H04N19/54 ,  H04N19/573 ,  H04N19/577 ,  H04N19/597 ,  H04N19/61 ,  H04N19/615 ,  H04N19/63 ,  H04N19/635 ,  H04N19/70

摘要： Multiview videos are acquired by overlapping cameras. Side information is used to synthesize multiview videos. A reference picture list is maintained for current frames of the multiview videos, the reference picture indexes temporal reference pictures and spatial reference pictures of the acquired multiview videos and the synthesized reference pictures of the synthesized multiview video. Each current frame of the multiview videos is predicted according to reference pictures indexed by the associated reference picture list with a skip mode and a direct mode, whereby the side information is inferred from the synthesized reference picture. In addition, the skip and merge modes for single view video coding are modified to support multiview video coding by generating a motion vector prediction list by also considering neighboring blocks that are associated with synthesized reference pictures.

摘要翻译： 多视角视频是通过重叠的相机获得的。 侧面信息用于合成多视点视频。 维护多视点视频的当前帧的参考图片列表，参考图片索引所获取的多视角视频的时间参考图片和空间参考图片以及合成的多视角视频的合成参考图片。 根据由相​​关联的参考图像列表以跳过模式和直接模式索引的参考图像来预测多视图视频的每个当前帧，由此从合成的参考图片推断出侧面信息。 此外，通过还考虑与合成参考图片相关联的相邻块，通过生成运动矢量预测列表来修改用于单视图视频编码的跳过和合并模式以支持多视图视频编码。

公开(公告)号：US08315426B2

公开(公告)日：2012-11-20

申请号：US12723324

申请日：2010-03-12

申请人： Sehoon Yea ,  Dongbo Min ,  Anthony Vetro

发明人： Sehoon Yea ,  Dongbo Min ,  Anthony Vetro

IPC分类号： G06K9/00

CPC分类号： G06T5/005 ,  G06T7/97 ,  G06T2207/10012 ,  G06T2207/20228

摘要： In stereo images that include occluded pixels and visible pixels, occlusions are handled by first determining, for the occluded pixels, initial disparity values and support for the initial disparity values using an initial support function, an occlusion map and disparities of the visible pixels neighboring the occluded pixels in the stereo images. Then, for the occluded pixels, final disparity values and support for the final disparity values are determined using the initial disparity values, a final support function and a normalization function in an iterative support-and-decision process.

摘要翻译： 在包括遮挡像素和可见像素的立体图像中，通过首先确定闭塞的像素初始视差值并使用初始支持函数来支持初始视差值来处理闭塞，闭塞图和邻近的可见像素的差异 立体图像中的遮挡像素。 然后，对于遮挡的像素，使用初始视差值，迭代支持和决策过程中的最终支持函数和归一化函数来确定最终视差值的最终视差值和支持。

公开(公告)号：US08270752B2

公开(公告)日：2012-09-18

申请号：US12405864

申请日：2009-03-17

申请人： Sehoon Yea ,  Kwan-Jung Oh ,  Anthony Vetro

发明人： Sehoon Yea ,  Kwan-Jung Oh ,  Anthony Vetro

IPC分类号： G06K9/40

CPC分类号： G06T5/002 ,  G06T2207/10028 ,  G06T2207/20012 ,  G06T2207/20028 ,  G06T2207/20032

摘要： A method filters a depth image, wherein each depth image includes an array of pixels at locations (x, y), and wherein each pixel has a depth. A moving window is applied to the pixels in the depth image, wherein a size of the window covers a set of pixels centered at each pixel. A single representative depth from the set of pixel in the window is assigned to the pixel to produce a processed depth image. Then, each pixel in the processed depth image is filtered to correct outlier depths without blurring depth discontinuities to produce a filtered depth image.

摘要翻译： 一种方法对深度图像进行过滤，其中每个深度图像包括位置（x，y）处的像素阵列，并且其中每个像素具有深度。 将移动窗口应用于深度图像中的像素，其中窗口的大小覆盖以每个像素为中心的一组像素。 将来自窗口中的像素集合的单个代表深度分配给像素以产生经处理的深度图像。 然后，对经处理的深度图像中的每个像素进行滤波以校正离群深度，而不会模糊深度不连续性，以产生滤波深度图像。

公开(公告)号：US20120163451A1

公开(公告)日：2012-06-28

申请号：US12979414

申请日：2010-12-28

申请人： Robert A. Cohen ,  Jewon Kang ,  Anthony Vetro

发明人： Robert A. Cohen ,  Jewon Kang ,  Anthony Vetro

IPC分类号： H04N7/32

CPC分类号： H04N19/97 ,  H04N19/102 ,  H04N19/105 ,  H04N19/122 ,  H04N19/147 ,  H04N19/157 ,  H04N19/176 ,  H04N19/46

摘要： A video encoded as a bit stream is decoded by maintaining a set of dictionaries generated from decoded prediction residual signals, wherein elements of the set of dictionaries have associated indices. A current macroblock is entropy decoded and inverse quantized to produce decoded coefficients. For the current macroblock, a particular dictionary of the set of dictionaries is selected according to a prediction mode signaled in the bit stream, and particular elements of the particular dictionary are selected according to a copy mode signal in the bit stream and the associated index. The particular elements is scaled and combined, using the decoded coefficients, to reconstruct a current decoded macroblock prediction residual signal. Then, the current decoded macroblock prediction residual signal is combined with previously decoded macroblocks to generate an output macroblock of a reconstructed video, wherein the steps are performed in a decoder.

摘要翻译： 通过维持从解码的预测残差信号产生的一组字典来解码编码为比特流的视频，其中字典集合中的元素具有相关联的索引。 当前宏块被熵解码并被反量化以产生解码系数。 对于当前的宏块，根据在位流中发信号的预测模式来选择字典集合的特定字典，并且根据位流中的复制模式信号和相关联的索引来选择特定字典的特定元素。 使用解码的系数对特定元素进行缩放和组合，以重构当前解码的宏块预测残差信号。 然后，将当前解码的宏块预测残差信号与先前解码的宏块相组合以产生重构视频的输出宏块，其中在解码器中执行这些步骤。

公开(公告)号：US20100239187A1

公开(公告)日：2010-09-23

申请号：US12405884

申请日：2009-03-17

申请人： Sehoon Yea ,  Kwan-Jun Oh ,  Anthony Vetro

发明人： Sehoon Yea ,  Kwan-Jun Oh ,  Anthony Vetro

IPC分类号： G06K9/32

CPC分类号： G06T3/40 ,  G06T5/005 ,  G06T2207/10016 ,  G06T2207/10028 ,  G06T2207/20028 ,  G06T2207/20036 ,  H04N13/10

摘要： A method up-samples images in a reduced resolution video, wherein each image I(x, y) stores depths d at pixel locations (x, y). each depth image is scaled up to produce a corresponding up-scaled image. Then, image dilation, a median filter, image erosion, and a min-max filter are applied in order to produce a corresponding up-sampled image.

摘要翻译： 一种方法以降低分辨率的视频对图像进行上采样，其中每个图像I（x，y）存储像素位置（x，y）处的深度d。 每个深度图像被放大以产生相应的升幅图像。 然后，应用图像扩张，中值滤波，图像侵蚀和最小 - 最大滤波器，以产生相应的上采样图像。

公开(公告)号：US20100077278A1

公开(公告)日：2010-03-25

申请号：US12570072

申请日：2009-09-30

申请人： Yige Wang ,  Shantanu D. Rane ,  Anthony Vetro

发明人： Yige Wang ,  Shantanu D. Rane ,  Anthony Vetro

IPC分类号： G06F21/00 ,  H03M13/05 ,  G06F11/10

CPC分类号： G06K9/00885 ,  H04L9/3231 ,  H04L2209/34

摘要： A method for authenticating biometric data. Comprising of a processor that measures the reliability of each bit in enrollment biometric data; by arranging the bits; encoding the enrollment biometric data in the decreasing order to produce an enrollment syndrome; arranging the bits in the authentication biometric; decoding the authentication enrollment syndrome to produce an estimate of the enrollment biometric data; generating an output signal indicating that the estimate of the authentication biometric data is substantially the same as the enrollment biometric data.

摘要翻译： 用于认证生物特征数据的方法。 包括测量入学生物特征数据中每一位可靠性的处理器; 通过排列; 以递减的顺序对登记生物特征数据进行编码以产生登记综合征; 在认证生物特征中排列比特; 对认证注册综合征进行解码以产生注册生物特征数据的估计; 产生指示认证生物测定数据的估计与登记生物特征数据基本相同的输出信号。