公开(公告)号：US20060165315A1

公开(公告)日：2006-07-27

申请号：US10541053

申请日：2004-01-05

申请人： Fabian Ernst ,  Christiaan Varekamp ,  Piotr Wilinski

发明人： Fabian Ernst ,  Christiaan Varekamp ,  Piotr Wilinski

IPC分类号： G06K9/54 ,  G06K9/00

CPC分类号： H04N19/20 ,  G06T7/13 ,  G06T7/215 ,  G06T7/579 ,  G06T2207/10016 ,  H04N19/543

摘要： In a method for relative depth of parts of one or more digital images, the digital images are regularized by segmentation, and at least part of the pixels of the images are assigned to respective segments. The realtive motion of the segments for successive images is estimated by image matching. The image features of the segments are regularized by dual segmetation, in which the edges of the segments are found, pixels are assigned to the edges, and dual segments are defined. The relative motion of the dual segments for successive images is estimated by image segment matching in order to determine the relative depth order of the image segments.

摘要翻译： 在一个或多个数字图像的部分的相对深度的方法中，数字图像通过分割进行规则化，并且图像的至少部分像素被分配给相应的片段。 通过图像匹配来估计连续图像的段的实体运动。 段的图像特征通过双重分段进行规则化，其中发现段的边缘，将像素分配给边缘，并且定义双段。 通过图像段匹配来估计用于连续图像的双段的相对运动，以便确定图像段的相对深度顺序。

公开(公告)号：US20070274687A1

公开(公告)日：2007-11-29

申请号：US10598271

申请日：2005-02-22

申请人： Christiaan Varekamp ,  Piotr Wilinski ,  Mark Schroders

发明人： Christiaan Varekamp ,  Piotr Wilinski ,  Mark Schroders

IPC分类号： H04N7/26

CPC分类号： H04N19/85 ,  H04N19/20 ,  H04N19/44 ,  H04N19/46

摘要： A video encoder (100) comprises a receiver (101) which receives an uncompressed video signal. An encoding element (103) generates a compressed video signal in accordance with a compression algorithm, such as an MPEG-2 encoding algorithm. In addition, a feature point processor (105) generates feature point data (105) in response to the uncompressed signal, and an output processor (107) generates an output video signal which comprises the compressed video signal and the feature point data. The output signal is received by a receiver (201) of a video signal processor (200). An extraction processor (203) extracts the feature point data and feeds it to a video processor unit (207) which processes the compressed video signal in response to the feature point data. The separate and independent generation of feature point data, such as feature point movement data or tracks using the uncompressed (original) video signal, eliminates or reduces the impact of compression artifacts, inaccuracies and errors on feature point locations and trajectories when these are detected using the compressed signal.

摘要翻译： 视频编码器（100）包括接收未压缩视频信号的接收机（101）。 编码元件（103）根据诸如MPEG-2编码算法的压缩算法生成压缩视频信号。 此外，特征点处理器（105）响应于未压缩信号产生特征点数据（105），并且输出处理器（107）产生包括压缩视频信号和特征点数据的输出视频信号。 输出信号由视频信号处理器（200）的接收机（201）接收。 提取处理器（203）提取特征点数据并将其馈送到响应于特征点数据处理压缩视频信号的视频处理器单元（207）。 使用未压缩（原始）视频信号的特征点数据或特征点移动数据或轨道的独立和独立生成消除或减少当使用以下方式检测到特征点位置和轨迹时的压缩伪像，不准确性和错误的影响 压缩信号。

公开(公告)号：US20070140335A1

公开(公告)日：2007-06-21

申请号：US10577107

申请日：2004-10-14

申请人： Piotr Wilinski ,  Christiaan Varekamp

发明人： Piotr Wilinski ,  Christiaan Varekamp

IPC分类号： H04N7/12

CPC分类号： H04N19/17 ,  H04N19/12 ,  H04N19/136 ,  H04N19/137 ,  H04N19/159 ,  H04N19/61

摘要： There is provided a method of encoding a video signal comprising a sequence of images to generate corresponding encoded video data. The method including the steps of: (a) analyzing the images to identify one or more image segments therein; (b) identifying those of said one or more segments which are substantially not of a spatially stochastic nature and encoding them in a deterministic manner to generate first encoded intermediate data; (c) identifying those of said one or more segments which are of a substantially spatially stochastic nature and encoding them by way of one or more corresponding stochastic model parameters to generate second encoded intermediate data; and (d) merging the first and second intermediate data to generate the encoded video data.

摘要翻译： 提供了一种对包括图像序列的视频信号进行编码以产生对应的编码视频数据的方法。 该方法包括以下步骤：（a）分析图像以识别其中的一个或多个图像段; （b）识别基本上不具有空间随机性质的所述一个或多个段的那些段，并以确定性方式对它们进行编码以产生第一编码的中间数据; （c）识别所述一个或多个段的那些，其具有基本上空间上随机的性质，并通过一个或多个相应的随机模型参数进行编码以产生第二编码中间数据; 和（d）合并第一和第二中间数据以产生编码的视频数据。

公开(公告)号：US20050129312A1

公开(公告)日：2005-06-16

申请号：US10503424

申请日：2003-01-23

申请人： Fabian Ernst ,  Christiaan Varekamp

发明人： Fabian Ernst ,  Christiaan Varekamp

IPC分类号： G06T5/00 ,  G06T7/20 ,  G06K9/34

CPC分类号： G06T7/215 ,  G06T2207/10016

摘要： The segmentation unit (100,200,300) for assigning a first pixel of a first image of a sequence of images to a segment comprises an assignment unit (102) for assigning a first homogeneity value to the first pixel on basis of the first image; an averaging unit (103) for calculating an average homogeneity value for the first pixel by means of averaging the first homogeneity value and a second homogeneity value being determined for a second pixel of a second image of the sequence of images, with the first pixel and the second pixel related by means of a motion vector, and a comparing unit (106) for comparing the average homogeneity value with a threshold in order to assign the first pixel to the segment.

摘要翻译： 用于将图像序列的第一图像的第一像素分配给片段的分割单元（100,200,300）包括用于基于第一图像将第一均匀性值分配给第一像素的分配单元（102） 平均单元（103），用于通过对第一像素序列的第二图像的第二像素确定的第一均匀性值和第二均匀性值进行平均来计算第一像素的平均均匀性值;以及 通过运动矢量相关的第二像素，以及用于将平均均匀性值与阈值进行比较以便将第一像素分配给该段的比较单元（106）。

公开(公告)号：US20070008342A1

公开(公告)日：2007-01-11

申请号：US10554385

申请日：2004-04-27

申请人： Ramanathan Sethuraman ,  Christiaan Varekamp ,  Fabian Ernst

发明人： Ramanathan Sethuraman ,  Christiaan Varekamp ,  Fabian Ernst

IPC分类号： G09G5/00

CPC分类号： H04N19/85 ,  G06T7/11 ,  G06T2207/10016 ,  G06T2207/20021

摘要： A method of converting of a first set (100a) of initial segments of an image into a second set of updated segments (A′,B′,C′,D′) is disclosed. The method comprises iterative updates of intermediate segments (A,B,C,D) being derived from respective initial segments. Each update comprises determining whether a pixel (300) should be moved from a first intermediate segment (A) to a second intermediate segment (B), on basis of a pixel value of the pixel, on basis of a first parameter of the intermediate segment (A) and on basis of a second parameter of the second intermediate segment (B). The iterative updates are performed on block base. That means that first a number of iterative updates are performed for pixels of a first two-dimensional block of pixels (200) of the image and after that the number of iterative updates are performed for pixels of a second two-dimensional block of pixels (204) of the image.

摘要翻译： 公开了一种将图像的初始段的第一组（100a）转换为第二组更新段（A'，B'，C'，D'）的方法。 该方法包括从相应的初始段导出的中间段（A，B，C，D）的迭代更新。 每个更新包括基于中间片段的第一参数来确定像素（300）是否应当从第一中间片段（A）移动到第二中间片段（B），基于像素的像素值 （A）并且基于第二中间段（B）的第二参数。 迭代更新以块为基础进行。 这意味着首先对图像的第一二维像素块（200）的像素执行多次迭代更新，然后针对第二二维像素块的像素执行迭代更新次数（ 204）的图像。

公开(公告)号：US08854425B2

公开(公告)日：2014-10-07

申请号：US12669828

申请日：2008-07-18

申请人： Christiaan Varekamp

发明人： Christiaan Varekamp

IPC分类号： H04N13/00 ,  H04N13/02 ,  G06T5/00

CPC分类号： G06T5/005 ,  G06T2207/10016 ,  G06T2207/10024 ,  G06T2207/10028 ,  H04N13/128 ,  H04N13/261

摘要： The present invention relates to an apparatus for and a method of propagating depth-related information from a first depth-map (810) associated with a first image (820) to a second depth-map (860) associated with a second image (830), the first and second image being temporally proximate images in an image sequence. The method comprises generating an intermediate depth-map (840) associated with the second image (830) by propagating depth values from the first depth-map (810) to the intermediate depth-map (840) using pixels of the first image (820) and the second image (830), and generating a motion vector (850) using information comprising depth values in a spatial region around a first location in the first depth-map (810) and depth values in a spatial region around a second location in the intermediate depth-map (840) and generating a depth value for the second location in the second depth-map (860) using information comprising the motion vector (850) and the first depth-map (810).

摘要翻译： 本发明涉及一种将深度相关信息从与第一图像（820）相关联的第一深度图（810）传播到与第二图像相关联的第二深度图（860）的装置和方法（830 ），第一和第二图像在时间上靠近图像序列中的图像。 该方法包括通过使用第一图像（820）的像素将深度值从第一深度图（810）传播到中间深度图（840）来生成与第二图像（830）相关联的中间深度图（840） ）和第二图像（830），并且使用包括在第一深度图（810）中的第一位置周围的空间区域中的深度值的信息和在第二位置周围的空间区域中的深度值来生成运动矢量（850） 在中间深度图（840）中，并且使用包括运动矢量（850）和第一深度图（810）的信息来生成第二深度图（860）中的第二位置的深度值。

公开(公告)号：US08270768B2

公开(公告)日：2012-09-18

申请号：US11813110

申请日：2006-01-12

申请人： Fabian Edgar Ernst ,  Marc Joseph Rita Op De Beeck ,  Christiaan Varekamp

发明人： Fabian Edgar Ernst ,  Marc Joseph Rita Op De Beeck ,  Christiaan Varekamp

IPC分类号： G06K9/36

CPC分类号： H04N13/111 ,  H04N13/282

摘要： A method of rendering a multi-view image comprising a first output image and a second output image on basis of an input image (102) is disclosed. The method comprises: creating a modulation image (100) comprising irregular shaped objects (106-112); modulating pixel values of a portion of the input image (102) on basis of further pixel values of the modulation image (100), resulting into an intermediate image (104); and generating the multi-view image by means of warping the intermediate image on basis of the disparity data.

摘要翻译： 公开了一种基于输入图像（102）渲染包括第一输出图像和第二输出图像的多视图图像的方法。 该方法包括：创建包括不规则形状物体（106-112）的调制图像（100）; 基于调制图像（100）的另外的像素值来调制输入图像（102）的一部分的像素值，得到中间图像（104）; 以及通过基于视差数据对中间图像进行翘曲来生成多视点图像。

公开(公告)号：US20110243443A1

公开(公告)日：2011-10-06

申请号：US13133467

申请日：2009-12-03

申请人： Christiaan Varekamp

发明人： Christiaan Varekamp

IPC分类号： G06K9/34

CPC分类号： G06T7/12 ,  G06T7/11 ,  G06T2207/10016 ,  G06T2207/20096

摘要： A device for segmenting an image comprises a user input (301, 305, 307) for receiving segment indications and boundary indications for the image. Each segment indication identifies a set of pixel regions and a relationship between the set of pixel regions and an associated segment class of a plurality of segment classes. Each boundary indication identifies a boundary between pixels belonging to different segment classes. A segmentation processor (309) then segments the image into the plurality of segment classes in response to both the number of segment indications and the number of boundary indications. Specifically, a propagation of values linking the pixel regions to segment classes are propagated based on the segment indications with the propagation being constrained (e.g. attenuated or blocked) by the boundary indications. The invention may improve or facilitate interactive image segmentation e.g. for frames of a video signal.

摘要翻译： 用于分割图像的装置包括用于接收图像的片段指示和边界指示的用户输入（301,305,307）。 每个段指示标识一组像素区域以及该组像素区域与多个段类别的相关段类别之间的关系。 每个边界指示标识属于不同段类别的像素之间的边界。 然后，分段处理器（309）响应于段指示的数量和边界指示的数量将图像分割成多个段类别。 具体地，基于区段指示传播将像素区域链接到段类别的传播，其中传播被边界指示约束（例如衰减或阻挡）。 本发明可以改进或促进交互式图像分割，例如 用于视频信号的帧。

公开(公告)号：US20110242279A1

公开(公告)日：2011-10-06

申请号：US13139365

申请日：2009-12-10

申请人： Peter-Andre Redert ,  Reinier B.M. Klein Gunnewiek ,  Bartolomeus W.D. Sonneveldt ,  Christiaan Varekamp

发明人： Peter-Andre Redert ,  Reinier B.M. Klein Gunnewiek ,  Bartolomeus W.D. Sonneveldt ,  Christiaan Varekamp

IPC分类号： H04N13/00 ,  H04N7/26

CPC分类号： H04N19/46 ,  H04N13/194 ,  H04N19/597

摘要： The present invention relates to a method and device (580) for encoding three-dimensional video data, the device comprising: a first encoder (505) arranged to encode multiple simultaneous views (501) of a scene from different viewpoints; a second encoder (510) arranged to encode depth information of the scene and a third encoder (515) arranged to encode additional information indicative of a relationship between the multiple views and the depth information and a combiner (520) arranged to combine the encoded information into a representation (513) of the three-dimensional video data. The additional information comprises a group classifier indicating whether or not the depth information and at least one of the multiple views correspond to the same source material for, when corresponding, using the depth information and the at least one of the multiple views to render further views of the scene from further different viewpoints. The invention further related to a method and device (585) for decoding three-dimensional video data, as well as a computer program product comprising program instructions for executing a method according to the present invention.

摘要翻译： 本发明涉及一种用于对三维视频数据进行编码的方法和装置（580），该装置包括：第一编码器（505），用于从不同的视点编码场景的多个同时视图（501）; 布置成编码场景的深度信息的第二编码器（510）和被配置为编码表示多个视图和深度信息之间的关系的附加信息的第三编码器（515），以及组合器（520），其被组合以编码信息 成为三维视频数据的表示（513）。 所述附加信息包括指示深度信息是否是深度信息的组，并且所述多个视图中的至少一个视图对应于相同的源材料，当对应时，使用所述深度信息和所述至少一个所述多个视图来呈现进一步的视图 从不同的观点出发， 本发明还涉及用于解码三维视频数据的方法和设备（585），以及包括用于执行根据本发明的方法的程序指令的计算机程序产品。

公开(公告)号：US20060251337A1

公开(公告)日：2006-11-09

申请号：US10567219

申请日：2004-08-02

申请人： Peter Redert ,  Christiaan Varekamp

发明人： Peter Redert ,  Christiaan Varekamp

IPC分类号： G06K9/36

CPC分类号： G06T7/564

摘要： An apparatus (200) comprises a simple detector (201) for detecting a plurality of image points (105, 107, 109, 111) associated with at least one object of the at least one image. The detector does not differentiate between different types of image points. The detector (201) is coupled to a grouping processor (203) which groups the plurality of image points (105, 107, 109, 111) into a group of object points (105, 107), a group of junction points (111) and a group of falsely detected points (109). The apparatus further comprises a processor arrangement 209 for individually processing the image points of the group of object points (105, 107) and the group of junction points (111). The object point process may generate depth information based on dynamic characteristics and the junction point process may generate depth information based on static characteristics. Improved depth information may thus be achieved and a simplified detector may be employed.

摘要翻译： 一种装置（200）包括用于检测与所述至少一个图像的至少一个对象相关联的多个图像点（105,107,109,111）的简单检测器（201）。 检测器不区分不同类型的图像点。 检测器（201）耦合到分组处理器（203），其将多个图像点（105,107,109,111）分组成一组对象点（105,107），一组连接点（111） 和一组错误检测点（109）。 该装置还包括处理器装置209，用于单独处理该组对象点（105,107）和该组连接点（111）的图像点。 物点过程可以基于动态特性生成深度信息，并且连接点过程可以基于静态特性生成深度信息。 因此可以实现改进的深度信息，并且可以采用简化的检测器。