公开(公告)号：US07724952B2

公开(公告)日：2010-05-25

申请号：US11434567

申请日：2006-05-15

申请人： Heung-Yeung Shum ,  Jian Sun ,  Sing Bing Kang ,  Yin Li

发明人： Heung-Yeung Shum ,  Jian Sun ,  Sing Bing Kang ,  Yin Li

IPC分类号： G06K9/34

CPC分类号： H04N5/275 ,  H04N5/2354

摘要： Foreground object matting uses flash/no-flash images pairs to obtain a flash-only image. A trimap is obtained from the flash-only image. A joint Bayesian algorithm uses the flash-only image, the trimap and one of the image of the scene taken without the flash or the image of the scene taken with the flash to generate a high quality matte that can be used to extract the foreground from the background.

摘要翻译： 前景对象消光使用闪光/非闪光图像对来获取闪光灯图像。 从闪光灯图像获得一个微调。 联合贝叶斯算法使用仅闪光图像，微调和没有闪光灯拍摄的场景中的一个图像或用闪光灯拍摄的场景的图像，以生成可用于从 的背景。

公开(公告)号：US07599547B2

公开(公告)日：2009-10-06

申请号：US11289907

申请日：2005-11-30

申请人： Jian Sun ,  Yin Li ,  Sing Bing Kang ,  Heung-Yeung Shum

发明人： Jian Sun ,  Yin Li ,  Sing Bing Kang ,  Heung-Yeung Shum

IPC分类号： G06K9/00 ,  G06T15/00 ,  G01C3/14

CPC分类号： G06K9/32

摘要： The present symmetric stereo matching technique provides a method for iteratively estimating a minimum energy for occlusion and disparity using belief propagation. The minimum energy is based on an energy minimization framework in which a visibility constraint is embedded. By embedding the visibility constraint, the present symmetric stereo matching technique treats both images equally, instead of treating one as a reference image. The visibility constraint ensures that occlusion in one view and the disparity in another view are consistent.

摘要翻译： 本对称立体匹配技术提供了一种使用置信传播迭代估计遮挡和视差的最小能量的方法。 最小能量基于嵌入可见性约束的能量最小化框架。 通过嵌入可见度约束，本对称立体匹配技术可以平等对待两个图像，而不是将其视为参考图像。 可见性约束确保一个视图中的遮挡和另一个视图中的视差是一致的。

公开(公告)号：US07808532B2

公开(公告)日：2010-10-05

申请号：US11807448

申请日：2007-05-29

申请人： Jian Sun ,  Jian Sun ,  Sing Bing Kang ,  Xiaoou Tang ,  Heung-Yeung Shum

发明人： Jian Sun ,  Jian Sun ,  Sing Bing Kang ,  Xiaoou Tang ,  Heung-Yeung Shum

IPC分类号： H04N9/73

CPC分类号： H04N9/76 ,  G06T7/11 ,  G06T7/143 ,  G06T7/194 ,  G06T2207/10144 ,  H04N5/23232

摘要： A flash-based strategy is used to separate foreground information from background information within image information. In this strategy, a first image is taken without the use of flash. A second image is taken of the same subject matter with the use of flash. The foreground information in the flash image is illuminated by the flash to a much greater extent than the background information. Based on this property, the strategy applies processing to extract the foreground information from the background information. The strategy supplements the flash information by also taking into consideration motion information and color information.

摘要翻译： 基于闪存的策略用于将前景信息与图像信息中的背景信息分离。 在这个策略中，第一个图像是不使用闪光灯的。 使用闪光灯拍摄相同主题的第二张照片。 闪光灯中的前景信息被闪光灯照亮到比背景信息更大的程度。 基于此属性，该策略应用处理从背景信息中提取前景信息。 该策略通过考虑运动信息和颜色信息来补充闪光信息。

公开(公告)号：US20080297621A1

公开(公告)日：2008-12-04

申请号：US11807448

申请日：2007-05-29

申请人： Jian Sun ,  Jian Sun ,  Sing Bing Kang ,  Xiaoou Tang ,  Heung-Yeung Shum

发明人： Jian Sun ,  Jian Sun ,  Sing Bing Kang ,  Xiaoou Tang ,  Heung-Yeung Shum

IPC分类号： H04N9/73

CPC分类号： H04N9/76 ,  G06T7/11 ,  G06T7/143 ,  G06T7/194 ,  G06T2207/10144 ,  H04N5/23232

摘要： A flash-based strategy is used to separate foreground information from background information within image information. In this strategy, a first image is taken without the use of flash. A second image is taken of the same subject matter with the use of flash. The foreground information in the flash image is illuminated by the flash to a much greater extent than the background information. Based on this property, the strategy applies processing to extract the foreground information from the background information. The strategy supplements the flash information by also taking into consideration motion information and color information.

摘要翻译： 基于闪存的策略用于将前景信息与图像信息中的背景信息分离。 在这个策略中，第一个图像是不使用闪光灯的。 使用闪光灯拍摄相同主题的第二张照片。 闪光灯中的前景信息被闪光灯照亮到比背景信息更大的程度。 基于此属性，该策略应用处理从背景信息中提取前景信息。 该策略通过考虑运动信息和颜色信息来补充闪光信息。

公开(公告)号：US07633511B2

公开(公告)日：2009-12-15

申请号：US10817516

申请日：2004-04-01

申请人： Heung-Yeung Shum ,  Jian Sun ,  Shuntaro Yamazaki ,  Yin Li

发明人： Heung-Yeung Shum ,  Jian Sun ,  Shuntaro Yamazaki ,  Yin Li

IPC分类号： G09G5/00

CPC分类号： G06T15/205

摘要： Virtual views of a complex scene are produced for a user to view. The virtual views are substantially free from aliasing even when using a relatively sparse set of images of the scene. In a described implementation, a scene is split into one or more coherent layers. The boundaries of the coherent layers are propagated across a plurality of frames corresponding to the scene. The splitting may be further refined (e.g., in accordance with user feedback) to present a virtual view of the scene.

摘要翻译： 生成复杂场景的虚拟视图，供用户查看。 即使当使用场景的相对稀疏的图像集时，虚拟视图也基本上没有混叠。 在所描述的实现中，场景被分成一个或多个相干层。 相干层的边界跨越对应于场景的多个帧传播。 可以进一步改进分割（例如，根据用户反馈）来呈现场景的虚拟视图。

公开(公告)号：US20070263119A1

公开(公告)日：2007-11-15

申请号：US11434567

申请日：2006-05-15

申请人： Heung-Yeung Shum ,  Jian Sun ,  Sing Kang ,  Yin Li

发明人： Heung-Yeung Shum ,  Jian Sun ,  Sing Kang ,  Yin Li

IPC分类号： H04N5/222

CPC分类号： H04N5/275 ,  H04N5/2354

摘要： Foreground object matting uses flash/no-flash images pairs to obtain a flash-only image. A trimap is obtained from the flash-only image. A joint Bayesian algorithm uses the flash-only image, the trimap and one of the image of the scene taken without the flash or the image of the scene taken with the flash to generate a high quality matte that can be used to extract the foreground from the background.

摘要翻译： 前景对象消光使用闪光/非闪光图像对来获取闪光灯图像。 从闪光灯图像获得一个微调。 联合贝叶斯算法使用仅闪光图像，微调和没有闪光灯拍摄的场景中的一个图像或用闪光灯拍摄的场景的图像，以生成可用于从 的背景。

公开(公告)号：US20050219264A1

公开(公告)日：2005-10-06

申请号：US10817516

申请日：2004-04-01

申请人： Heung-Yeung Shum ,  Jian Sun ,  Shuntaro Yamazaki ,  Yin Li

发明人： Heung-Yeung Shum ,  Jian Sun ,  Shuntaro Yamazaki ,  Yin Li

IPC分类号： G06K9/00 ,  G06T15/20 ,  G09G5/00

CPC分类号： G06T15/205

摘要： Techniques are disclosed to produce virtual views of a complex scene. The virtual views are substantially free from aliasing even when using a relatively sparse set of images of the scene. In a described implementation, a scene is split into one or more coherent layers. The boundaries of the coherent layers are propagated across a plurality of frames corresponding to the scene. The splitting may be further refined (e.g., in accordance with user feedback) to present a virtual view of the scene.

摘要翻译： 公开了产生复杂场景的虚拟视图的技术。 即使当使用场景的相对稀疏的图像集时，虚拟视图也基本上没有混叠。 在所描述的实现中，场景被分成一个或多个相干层。 相干层的边界跨越对应于场景的多个帧传播。 可以进一步改进分割（例如，根据用户反馈）来呈现场景的虚拟视图。

公开(公告)号：US07609888B2

公开(公告)日：2009-10-27

申请号：US11173882

申请日：2005-07-01

申请人： Jian Sun ,  Heung-Yeung Shum ,  Yin Li

发明人： Jian Sun ,  Heung-Yeung Shum ,  Yin Li

IPC分类号： G06K9/34

CPC分类号： G06K9/00369 ,  G06T7/11 ,  G06T7/162 ,  G06T2207/10016 ,  G06T2207/10024 ,  G06T2207/20016 ,  G06T2207/20072 ,  G06T2207/20104 ,  G06T2207/20152

摘要： Video object cutting and pasting is described. In one implementation, pre-segmentation of video frames into regions is performed prior to a 3-D graph cut segmentation. The 3-D graph cut segmentation uses temporal coherence and a global color model to achieve accuracy of video object boundaries. A 2-D local graph cut segmentation can then be used to refine the boundaries. The boundaries can be tracked within a user-selected sequence of windows and refined using a local color model.

摘要翻译： 描述了视频对象切割和粘贴。 在一个实现中，在3D切割分割之前执行视频帧到区域的预分割。 3-D图形切割分割使用时间相干性和全局颜色模型来实现视频对象边界的准确性。 然后可以使用2-D局部图形切割分割来细化边界。 可以在用户选择的窗口序列内跟踪边界，并使用本地颜色模型进行细化。

公开(公告)号：US20070003154A1

公开(公告)日：2007-01-04

申请号：US11173882

申请日：2005-07-01

申请人： Jian Sun ,  Heung-Yeung Shum ,  Yin Li

发明人： Jian Sun ,  Heung-Yeung Shum ,  Yin Li

IPC分类号： G06K9/40 ,  G06K9/34

CPC分类号： G06K9/00369 ,  G06T7/11 ,  G06T7/162 ,  G06T2207/10016 ,  G06T2207/10024 ,  G06T2207/20016 ,  G06T2207/20072 ,  G06T2207/20104 ,  G06T2207/20152

摘要： Video object cutting and pasting is described. In one implementation, pre-segmentation of video frames into regions is performed prior to a 3-D graph cut segmentation. The 3-D graph cut segmentation uses temporal coherence and a global color model to achieve accuracy of video object boundaries. A 2-D local graph cut segmentation can then be used to refine the boundaries. The boundaries can be tracked within a user-selected sequence of windows and refined using a local color model.

摘要翻译： 描述了视频对象切割和粘贴。 在一个实现中，在3D切割分割之前执行视频帧到区域的预分割。 3-D图形切割分割使用时间相干性和全局颜色模型来实现视频对象边界的准确性。 然后可以使用2-D局部图形切割分割来细化边界。 可以在用户选择的窗口序列内跟踪边界，并使用本地颜色模型进行细化。

公开(公告)号：US20060029275A1

公开(公告)日：2006-02-09

申请号：US10912923

申请日：2004-08-06

申请人： Yin Li ,  Jian Sun ,  Chi Tang ,  Heung-Yeung Shum

发明人： Yin Li ,  Jian Sun ,  Chi Tang ,  Heung-Yeung Shum

IPC分类号： G06K9/34 ,  G06K9/68

CPC分类号： G06K9/38 ,  G06T7/11 ,  G06T7/12 ,  G06T7/162 ,  G06T7/194 ,  G06T11/60 ,  G06T2207/20096

摘要： A method includes receiving a first set of one or more data nodes specified by a user using a first specification mode, receiving a second set of one or more data nodes specified by a user using a second specification mode, and automatically identifying a data node to be separated from a collection of data nodes based on a similarity measure characterizing similarity between the data node to be separated and the one or more data nodes in the first set and the one or more data nodes in the second set. A system includes an image processing module automatically segmenting a determined region from an image based on a similarity measure characterizing similarity between pixels in the determined region and a set of one or more specified seed pixels associated with pixels to be included in the determined region.

摘要翻译： 一种方法包括：使用第一规范模式接收由用户指定的一个或多个数据节点的第一组，接收由用户使用第二规范模式指定的一个或多个数据节点的第二组，并自动识别数据节点 基于表示要分离的数据节点与第一组中的一个或多个数据节点和第二组中的一个或多个数据节点之间的相似性的相似性度量来从数据节点的集合中分离出来。 一种系统包括图像处理模块，该图像处理模块基于表征所确定区域中的像素之间的相似度的相似性度量和与要确定的区域中包括的像素相关联的一个或多个指定的种子像素的集合，自动地从图像中分割确定的区域。