公开(公告)号：US06778708B1

公开(公告)日：2004-08-17

申请号：US09345452

申请日：1999-07-01

申请人： Ajay Divakaran ,  Huifang Sun

发明人： Ajay Divakaran ,  Huifang Sun

IPC分类号： G06K946

CPC分类号： G06K9/00744 ,  G06F17/30811

摘要： A compressed bit-stream represents a corresponding sequence having intra-coded frames and inter-coded frames. The compressed bit-stream includes bits associated with each of the inter-coded frames representing a displacement from the associated inter-coded frame to a closest matching of the intra-coded frames. A magnitude of the displacement of a first of the inter-coded frames is determined based on the bits in the compressed bit-stream associated with that inter-coded frame. The inter-coded frame is then identified based on the determined displacement magnitude. The inter-coded frame includes macro-blocks. Each macro-block is associated with a respective portion of the inter-coded frame bits which represent the displacement from that macro-block to the closest matching intra-coded frame. The displacement magnitude is an average of the displacement magnitudes of all the macro-blocks associated with the inter-coded frame. The displacement magnitudes of those macro-blocks which are less than the average displacement magnitude are set to zero. The number of run lengths of the zero magnitude macro-blocks is determined and also used to identify the first inter-coded frame.

摘要翻译： 压缩比特流表示具有帧内编码帧和帧间编码帧的对应序列。 压缩比特流包括与帧间编码帧中的每一个相关联的比特，该比特表示从相关联的帧间编码帧到帧内编码帧的最接近的匹配的位移。 基于与该帧间编码帧相关联的压缩比特流中的比特来确定帧间编码帧中的第一帧的位移的大小。 然后基于确定的位移幅度来识别帧间编码帧。 帧间编码帧包括宏块。 每个宏块与表示从该宏块到最接近的匹配帧内编码帧的位移的帧间编码帧比特的相应部分相关联。 位移幅度是与帧间编码帧相关联的所有宏块的位移幅度的平均值。 小于平均位移幅度的这些宏块的位移量设为零。 确定零幅度宏块的行程长度的数量，并且还用于识别第一帧间编码帧。

公开(公告)号：US06266443B1

公开(公告)日：2001-07-24

申请号：US09219062

申请日：1998-12-22

申请人： Anthony Vetro ,  Huifang Sun ,  I-Jong Lin ,  Sun-Yuan Kung

发明人： Anthony Vetro ,  Huifang Sun ,  I-Jong Lin ,  Sun-Yuan Kung

IPC分类号： G06K948

CPC分类号： G06T7/143 ,  G06T7/12 ,  G06T2207/10016 ,  G06T2207/20081

摘要： A method detects a boundary in a sequence of two-dimensional images where each image has multiple intensity value points. Filtering and motion analysis is applied on each image to produce motion enhanced images. Initial search parameters are determined from a dynamic snake model applied to the motion enhanced images. Each motion enhanced image is searched for a potential boundary using the search parameters. The potential boundary is projected into the motion enhanced image of a previous, current, and next image, and the search parameters of the previous, current, and next images are updated. The searching, projecting, and updating repeat until a predetermined level of convergence is reached.

摘要翻译： 一种方法检测二维图像序列中的边界，其中每个图像具有多个强度值点。 对每个图像应用滤波和运动分析以产生运动增强图像。 从应用于运动增强图像的动态蛇模型确定初始搜索参数。 使用搜索参数搜索每个运动增强图像的潜在边界。 潜在边界被投影到先前，当前和下一个图像的运动增强图像中，并且更新先前，当前和下一图像的搜索参数。 搜索，投影和更新重复，直到达到预定的收敛水平。

公开(公告)号：US5442400A

公开(公告)日：1995-08-15

申请号：US53760

申请日：1993-04-29

申请人： Huifang Sun ,  Joel W. Zdepski ,  Kamil M. Uz

发明人： Huifang Sun ,  Joel W. Zdepski ,  Kamil M. Uz

IPC分类号： G06T9/00 ,  H04N5/44 ,  H04N7/36 ,  H04N7/50 ,  H04N19/895 ,  H04N7/64 ,  H04N7/66

CPC分类号： H04N19/00 ,  H04N19/51 ,  H04N19/61 ,  H04N19/895 ,  H04N19/70 ,  H04N5/4401

摘要： A video signal compression system includes motion compensated predictive compression apparatus for compressing respective frames of video signal according to either intraframe processing or interframe processing on a block by block basis to generate blocks of compressed data and associated motion vectors. A compressed signal formatter arranges the blocks of compressed data and the associated motion vectors according to a desired signal protocol wherein motion vectors of interframe processed frames are associated with corresponding blocks of compressed data and motion vectors of intraframe processed frames are associated with blocks substantially adjacent to corresponding blocks of compressed data. The motion vectors are included with intraframe compressed data to facilitate error concealment at respective receiver apparatus.

摘要翻译： 视频信号压缩系统包括运动补偿预测压缩装置，用于根据帧内处理或帧间处理逐帧地压缩视频信号的各个帧，以生成压缩数据块和相关联的运动矢量。 压缩信号格式化器根据期望的信号协议排列压缩数据块和相关联的运动矢量，其中帧间处理帧的运动矢量与对应的压缩数据块相关联，并且帧内处理帧的运动矢量与基本相邻的块相关联 对应的压缩数据块。 运动矢量被包括在帧内压缩数据中，以便于在各个接收机设备处的错误隐藏。

公开(公告)号：US5365604A

公开(公告)日：1994-11-15

申请号：US4358

申请日：1993-01-14

申请人： Wilson Kwok ,  Huifang Sun

发明人： Wilson Kwok ,  Huifang Sun

IPC分类号： H03M13/00 ,  H04N5/92 ,  H04N5/94 ,  H04N19/895 ,  G06K9/40

CPC分类号： H04N19/895

摘要： Error concealment apparatus for correcting errors in signals representing video images includes means for detecting image gradients in an area surrounding a lost block of image data. Circuitry responsive to these image gradients generates a plurality of blocks of directionally interpolated pixel values. The pixel values in the respective blocks of directionally interpolated pixel values are sorted according to amplitude, and then pixel values from mutually exclusive positions in the respective blocks are selected to form a block of pixel values for error concealment.

摘要翻译： 用于校正表示视频图像的信号中的错误的错误隐藏装置包括用于检测围绕丢失的图像数据块的区域中的图像梯度的装置。 响应于这些图像梯度的电路产生多个定向内插像素值的块。 根据幅度对定向插值像素值的各个块中的像素值进行排序，然后选择各个块中来自互斥位置的像素值，以形成用于错误隐藏的像素值块。

公开(公告)号：US5247363A

公开(公告)日：1993-09-21

申请号：US844322

申请日：1992-03-02

申请人： Huifang Sun ,  Joel W. Zdepski

发明人： Huifang Sun ,  Joel W. Zdepski

IPC分类号： H03M13/00 ,  H04L1/00 ,  H04N5/44 ,  H04N19/895 ,  H04N21/438

CPC分类号： H04N5/4401 ,  H04N19/51 ,  H04N19/61 ,  H04N19/895 ,  H04N21/4382

摘要： Image reproduction is improved in an MPEG-like television receiver by inclusion of post-processing adaptive error concealment. Compressed video signal is examined to determine blocks of video signal containing errors, and error tokens are generated for identifying corresponding blocks of decompressed pixel values. Pixel values adjacent the decompressed blocks of pixel values containing errors are examined to generate estimates of the relative image motion and image detail in the area of such blocks. The block of pixel values is replaced with temporally displaced co-located blocks of pixel values or interpolated data depending upon whether the estimate of image motion is lesser or greater than the estimate of image detail.

摘要翻译： 通过包含后处理自适应错误隐藏，在类似MPEG的电视接收机中图像再现得到改善。 检查压缩视频信号以确定包含错误的视频信号的块，并且生成用于识别解压缩像素值的对应块的错误令牌。 检查与包含错误的像素值的解压缩块相邻的像素值，以在这些块的区域中产生相对图像运动和图像细节的估计。 根据图像运动的估计是否小于或大于图像细节的估计，像素值的块被替换为时间上移位的像素值或内插数据的同位置块。

公开(公告)号：US20120281928A1

公开(公告)日：2012-11-08

申请号：US13169959

申请日：2011-06-27

申请人： Robert A. Cohen ,  Anthony Vetro ,  Huifang Sun

发明人： Robert A. Cohen ,  Anthony Vetro ,  Huifang Sun

IPC分类号： G06K9/36

CPC分类号： G06T9/40 ,  H04N19/119 ,  H04N19/122 ,  H04N19/176 ,  H04N19/46 ,  H04N19/70

摘要： A bitstream includes coded pictures, and split-flags for generating a transform tree. The bit stream is a partitioning of coding units (CUs) into Prediction Units (PUs). The transform tree is generated according to the split-flags. Nodes in the transform tree represent transform units (TU) associated with the CUs. The generation splits each TU only if the corresponding split-flag is set. For each PU that includes multiple TUs, the multiple TUs are merged into a larger TU, and the transform tree is modified according to the splitting and merging. Then, data contained in each PU can be decoded using the TUs associated with the PU according to the transform tree.

摘要翻译： 比特流包括编码图像，以及用于生成变换树的分割标志。 比特流是将编码单元（CU）划分成预测单元（PU）。 转换树根据分裂标志生成。 变换树中的节点表示与CU相关联的变换单元（TU）。 仅当相应的分割标志被设置时，该代码才能分割每个TU。 对于包含多个TU的每个PU，将多个TU合并成一个较大的TU，根据分割和合并修改变换树。 然后，可以使用根据变换树与PU相关联的TU来解码包含在每个PU中的数据。

公开(公告)号：US07903737B2

公开(公告)日：2011-03-08

申请号：US11385620

申请日：2006-03-21

申请人： Emin Martinian ,  Anthony Vetro ,  Jun Xin ,  Sehoon Yea ,  Huifang Sun

发明人： Emin Martinian ,  Anthony Vetro ,  Jun Xin ,  Sehoon Yea ,  Huifang Sun

IPC分类号： H04B1/66 ,  H04N7/12 ,  H04N11/02 ,  H04N11/04

CPC分类号： H04N19/615 ,  H04N19/105 ,  H04N19/13 ,  H04N19/46 ,  H04N19/597 ,  H04N19/61 ,  H04N19/63

摘要： A method randomly accesses multiview videos. Multiview videos are acquired of a scene with corresponding cameras arranged at poses, such that there is view overlap between any pair of cameras. V-frames are generated from the multiview videos. The V-frames are encoded using only spatial prediction. Then, the V-frames are inserted periodically in an encoded bit stream to provide random temporal access to the multiview videos. Additional view dependency information enables the decoding of a reduced number of frames prior to accessing randomly a target frame for a specified view and time, and decoding the target frame.

摘要翻译： 一种随机访问多视点视频的方法。 多视点视频被采集到具有以姿势布置的相应摄像机的场景，使得在任何一对摄像机之间存在视图重叠。 V帧是从多视角视频生成的。 V帧仅使用空间预测编码。 然后，将V帧周期性地插入到编码比特流中，以便为多视点视频提供随机的时间访问。 附加的视图依赖性信息使得能够在对指定的视图和时间的随机访问目标帧之前对减少数量的帧进行解码，以及对目标帧进行解码。

公开(公告)号：US07728877B2

公开(公告)日：2010-06-01

申请号：US11292167

申请日：2005-11-30

申请人： Jun Xin ,  Emin Martinian ,  Alexander Behrens ,  Anthony Vetro ,  Huifang Sun

发明人： Jun Xin ,  Emin Martinian ,  Alexander Behrens ,  Anthony Vetro ,  Huifang Sun

IPC分类号： H04N5/225

CPC分类号： H04N19/615 ,  H04N19/103 ,  H04N19/105 ,  H04N19/13 ,  H04N19/176 ,  H04N19/46 ,  H04N19/597 ,  H04N19/61 ,  H04N19/63

摘要： A system and method synthesizes multiview videos. Multiview videos are acquired of a scene with corresponding cameras arranged at a poses such that there is view overlap between any pair of cameras. A synthesized multiview video is generated from the acquired multiview videos for a virtual camera. A reference picture list is maintained for each current frame of each of the multiview videos and the synthesized video. The reference picture list indexes temporal reference pictures and spatial reference pictures of the acquired multiview videos and the synthesized reference pictures of the synthesized multiview video. Then, each current frame of the multiview videos is predicted according to reference pictures indexed by the associated reference picture list during encoding and decoding.

摘要翻译： 系统和方法合成多视点视频。 获取多视角视频，其中相应的相机布置成姿势，使得在任何一对相机之间存在视图重叠。 从获取的用于虚拟相机的多视点视频生成合成的多视角视频。 为每个多视角视频和合成视频的每个当前帧维护参考图片列表。 参考图片列表索引所获取的多视角视频的时间参考图片和空间参考图片以及合成的多视角视频的合成参考图片。 然后，在编码和解码期间，根据由相关联的参考图片列表索引的参考图片来预测多视图视频的每个当前帧。

公开(公告)号：US07489342B2

公开(公告)日：2009-02-10

申请号：US11292393

申请日：2005-11-30

申请人： Jun Xin ,  Emin Martinian ,  Alexander Behrens ,  Anthony Vetro ,  Huifang Sun

发明人： Jun Xin ,  Emin Martinian ,  Alexander Behrens ,  Anthony Vetro ,  Huifang Sun

IPC分类号： H04N5/225

CPC分类号： H04N19/615 ,  H04N19/103 ,  H04N19/105 ,  H04N19/13 ,  H04N19/176 ,  H04N19/46 ,  H04N19/597 ,  H04N19/61 ,  H04N19/63

摘要： A system and method manages multiview videos. A reference picture list is maintained for each current frame of multiple multiview videos. The reference picture list indexes temporal reference pictures, spatial reference pictures and synthesized reference pictures of the multiview videos. Then, each current frame of the multiview videos is predicted according to reference pictures indexed by the associated reference picture list during encoding and decoding.

摘要翻译： 一种管理多视角视频的系统和方法。 为多个多视角视频的每个当前帧维护参考图片列表。 参考图片列表索引多视图视频的时间参考图片，空间参考图片和合成的参考图片。 然后，在编码和解码期间，根据由相关联的参考图片列表索引的参考图片来预测多视图视频的每个当前帧。

公开(公告)号：US07483577B2

公开(公告)日：2009-01-27

申请号：US10791203

申请日：2004-03-02

申请人： Jun Xin ,  Anthony Vetro ,  Huifang Sun

发明人： Jun Xin ,  Anthony Vetro ,  Huifang Sun

IPC分类号： G06K9/36 ,  G06K9/46 ,  H04N11/20

CPC分类号： H04N7/012 ,  G09G2310/0229 ,  G09G2320/0261 ,  G09G2320/103 ,  G09G2340/02 ,  G09G2340/0407

摘要： A method and system processes a compressed input video. The compressed input video is processed to produce an interlaced picture, and macroblock coding information of the input video. The interlaced picture has a first spatial resolution, and a top-field and a bottom-field. The top-field and the bottom-field of the interlaced picture are filtered adaptively according to the macroblock coding information to produce a progressive picture with a second spatial resolution less than the first spatial resolution.

摘要翻译： 方法和系统处理压缩输入视频。 处理压缩输入视频以产生隔行图像，以及输入视频的宏块编码信息。 隔行图片具有第一空间分辨率，顶场和底场。 隔行扫描图像的顶场和底场根据宏块编码信息进行自适应滤波，以产生具有小于第一空间分辨率的第二空间分辨率的渐进图像。