公开(公告)号：US08712145B2

公开(公告)日：2014-04-29

申请号：US12453213

申请日：2009-05-01

申请人： Aron Baik ,  Yong Ju Jung ,  Ji Won Kim

发明人： Aron Baik ,  Yong Ju Jung ,  Ji Won Kim

IPC分类号： G06K9/00

CPC分类号： G06T7/55 ,  G06T2207/10016 ,  H04N13/261

摘要： A depth estimation apparatus is provided. The depth estimation apparatus may estimate a depth value of at least one pixel composing an input video based on feature information about at least one feature of the input video, a position of the at least one pixel, and a depth relationship among the at least one pixel and neighboring pixels.

摘要翻译： 提供了深度估计装置。 深度估计装置可以基于关于输入视频的至少一个特征，至少一个像素的位置和至少一个像素之间的深度关系的特征信息来估计构成输入视频的至少一个像素的深度值 像素和相邻像素。

公开(公告)号：US20100316284A1

公开(公告)日：2010-12-16

申请号：US12656840

申请日：2010-02-17

申请人： Young Ju Jeong ,  Yong Ju Jung ,  Du Sik Park ,  A Ron Baik ,  Ji Won Kim

发明人： Young Ju Jeong ,  Yong Ju Jung ,  Du Sik Park ,  A Ron Baik ,  Ji Won Kim

IPC分类号： G06K9/00

CPC分类号： G06T15/00 ,  G06T5/002 ,  G06T5/20 ,  G06T2207/10028 ,  G06T2207/20192 ,  H04N13/261

摘要： A three-dimensional (3D) image generation apparatus and method using a region extension of an object in a depth map is provided. The 3D image generation apparatus may include a discontinuity preservation smoothing filtering unit to apply a discontinuity preservation smoothing filter preserving discontinuity of a boundary or a shape of a depth image, a boundary preservation filtering unit to apply a max filter to a depth image for increasing a depth value of an object, and a rendering unit to render a two-dimensional (2D) color image and the filtered depth image and to generate a 3D image.

摘要翻译： 提供了一种在深度图中使用对象的区域扩展的三维（3D）图像生成装置和方法。 3D图像生成装置可以包括不连续保存平滑滤波单元，用于应用保持边界的不连续性或深度图像的形状的不连续性保存平滑滤波器，边界保存滤波单元，对深度图像应用最大滤波器以增加 物体的深度值，以及呈现二维（2D）彩色图像和滤波后的深度图像并生成3D图像的渲染单元。

公开(公告)号：US10163246B2

公开(公告)日：2018-12-25

申请号：US12656840

申请日：2010-02-17

申请人： Young Ju Jeong ,  Yong Ju Jung ,  Du Sik Park ,  A Ron Baik ,  Ji Won Kim

发明人： Young Ju Jeong ,  Yong Ju Jung ,  Du Sik Park ,  A Ron Baik ,  Ji Won Kim

IPC分类号： G06K9/00 ,  G06T15/00 ,  G06T5/00 ,  G06T5/20 ,  H04N13/261

摘要： A three-dimensional (3D) image generation apparatus and method using a region extension of an object in a depth map is provided. The 3D image generation apparatus may include a discontinuity preservation smoothing filtering unit to apply a discontinuity preservation smoothing filter preserving discontinuity of a boundary or a shape of a depth image, a boundary preservation filtering unit to apply a max filter to a depth image for increasing a depth value of an object, and a rendering unit to render a two-dimensional (2D) color image and the filtered depth image and to generate a 3D image.

公开(公告)号：US20100315492A1

公开(公告)日：2010-12-16

申请号：US12659725

申请日：2010-03-18

申请人： Aron Baik ,  Yong Ju Jung

发明人： Aron Baik ,  Yong Ju Jung

IPC分类号： H04N13/04 ,  H04N5/225

CPC分类号： G02B27/2214 ,  H04N5/23219 ,  H04N5/23293 ,  H04N13/305 ,  H04N13/351 ,  H04N13/366 ,  H04N13/368

摘要： A local multi-view image display apparatus and method is provided. The local multi-view image display method may track a location of an observer, and locally display a multi-view input image on the tracked location.

摘要翻译： 提供本地多视图图像显示装置和方法。 本地多视图图像显示方法可以跟踪观察者的位置，并且在所跟踪的位置上本地显示多视图输入图像。

公开(公告)号：US08730307B2

公开(公告)日：2014-05-20

申请号：US12659725

申请日：2010-03-18

申请人： Aron Baik ,  Yong Ju Jung

发明人： Aron Baik ,  Yong Ju Jung

IPC分类号： H04N13/04 ,  H04N15/00

CPC分类号： G02B27/2214 ,  H04N5/23219 ,  H04N5/23293 ,  H04N13/305 ,  H04N13/351 ,  H04N13/366 ,  H04N13/368

摘要： A local multi-view image display apparatus and method is provided. The local multi-view image display method may track a location of an observer, and locally display a multi-view input image on the tracked location.

摘要翻译： 提供本地多视图图像显示装置和方法。 本地多视图图像显示方法可以跟踪观察者的位置，并且在所跟踪的位置上本地显示多视图输入图像。

公开(公告)号：US20120007960A1

公开(公告)日：2012-01-12

申请号：US13067465

申请日：2011-06-02

申请人： Ji Won Kim ,  Gengyu Ma ,  Haitao Wang ,  Xing Mei ,  Ji Yeun Kim ,  Yong Ju Jung

发明人： Ji Won Kim ,  Gengyu Ma ,  Haitao Wang ,  Xing Mei ,  Ji Yeun Kim ,  Yong Ju Jung

IPC分类号： H04N13/04

CPC分类号： H04N13/261 ,  G06K9/4671 ,  G11B27/28 ,  H04N5/147 ,  H04N2013/0074

摘要： A video processing method for a three-dimensional (3D) display is based on a multi-cue process. The method may include acquiring a cut boundary of a shot by performing a shot boundary detection with respect to each frame of an input video, computing a texture saliency with respect to each pixel of the input video, computing a motion saliency with respect to each pixel of the input video, computing an object saliency with respect to each pixel of the input video based on the acquired cut boundary of the shot, acquiring a universal saliency with respect to each pixel of the input video by combining the texture saliency, the motion saliency, and the object saliency, and smoothening the universal saliency of each pixel using a space-time technology.

摘要翻译： 用于三维（3D）显示的视频处理方法基于多提示过程。 该方法可以包括通过对输入视频的每个帧执行镜头边界检测来获取镜头的切割边界，计算相对于输入视频的每个像素的纹理显着性，计算相对于每个像素的运动显着性 基于拍摄的所获取的切割边界，针对输入视频的每个像素计算对象的显着性，通过组合纹理显着性，运动显着性来获取关于输入视频的每个像素的通用显着性 和物体的显着性，并利用时空技术平滑每个像素的普遍显着性。

公开(公告)号：US20100246954A1

公开(公告)日：2010-09-30

申请号：US12726616

申请日：2010-03-18

申请人： Ji Won KIM ,  Yong Ju Jung

发明人： Ji Won KIM ,  Yong Ju Jung

IPC分类号： G06K9/32 ,  G06K9/00

CPC分类号： G06K9/3233 ,  G06K9/4642 ,  G06K9/4652

摘要： A method, apparatus, and medium of generating a visual attention map. A visual attention map to extract visual attention may be generated to convert a two-dimensional (2D) image into a three-dimensional (3D) image based on visual attention. The 2D image may be downscaled and at least one downscaled image may be generated. A feature map may be extracted from the 2D image and the at least one downscaled image, and the visual attention map may be generated.

摘要翻译： 产生视觉注意力图的方法，装置和介质。 可以产生视觉注意地图以提取视觉注意力，以便基于视觉注意将二维（2D）图像转换为三维（3D）图像。 2D图像可以被缩小，并且可以生成至少一个缩小图像。 可以从2D图像和至少一个缩小图像中提取特征图，并且可以生成视觉注意图。

公开(公告)号：US09148652B2

公开(公告)日：2015-09-29

申请号：US13067465

申请日：2011-06-02

申请人： Ji Won Kim ,  Gengyu Ma ,  Haitao Wang ,  Xing Mei ,  Ji Yeun Kim ,  Yong Ju Jung

发明人： Ji Won Kim ,  Gengyu Ma ,  Haitao Wang ,  Xing Mei ,  Ji Yeun Kim ,  Yong Ju Jung

IPC分类号： H04N9/80 ,  H04N13/02 ,  G06K9/46 ,  G11B27/28 ,  H04N5/14 ,  H04N13/00

CPC分类号： H04N13/261 ,  G06K9/4671 ,  G11B27/28 ,  H04N5/147 ,  H04N2013/0074

摘要： A video processing method for a three-dimensional (3D) display is based on a multi-cue process. The method may include acquiring a cut boundary of a shot by performing a shot boundary detection with respect to each frame of an input video, computing a texture saliency with respect to each pixel of the input video, computing a motion saliency with respect to each pixel of the input video, computing an object saliency with respect to each pixel of the input video based on the acquired cut boundary of the shot, acquiring a universal saliency with respect to each pixel of the input video by combining the texture saliency, the motion saliency, and the object saliency, and smoothening the universal saliency of each pixel using a space-time technology.

摘要翻译： 用于三维（3D）显示的视频处理方法基于多提示过程。 该方法可以包括通过对输入视频的每个帧执行镜头边界检测来获取镜头的切割边界，计算相对于输入视频的每个像素的纹理显着性，计算相对于每个像素的运动显着性 基于拍摄的所获取的切割边界，针对输入视频的每个像素计算对象的显着性，通过组合纹理显着性，运动显着性来获取关于输入视频的每个像素的通用显着性 和物体的显着性，并利用时空技术平滑每个像素的普遍显着性。

公开(公告)号：US08553972B2

公开(公告)日：2013-10-08

申请号：US12830822

申请日：2010-07-06

申请人： Ji Won Kim ,  Gangyu Ma ,  Haitao Wang ,  Xiying Wang ,  Ji Yeun Kim ,  Yong Ju Jung

发明人： Ji Won Kim ,  Gangyu Ma ,  Haitao Wang ,  Xiying Wang ,  Ji Yeun Kim ,  Yong Ju Jung

IPC分类号： G06K9/00 ,  G06K9/32 ,  H04N13/00

CPC分类号： G06T7/50 ,  G06T2207/10016 ,  G06T2207/20221 ,  G06T2207/30196

摘要： Disclosed are an apparatus, a method and a computer-readable medium automatically generating a depth map corresponding to each two-dimensional (2D) image in a video. The apparatus includes an image acquiring unit to acquire a plurality of 2D images that are temporally consecutive in an input video, a saliency map generator to generate at least one saliency map corresponding to a current 2D image among the plurality of 2D images based on a Human Visual Perception (HVP) model, a saliency-based depth map generator, a three-dimensional (3D) structure matching unit to calculate matching scores between the current 2D image and a plurality of 3D typical structures that are stored in advance, and to determine a 3D typical structure having a highest matching score among the plurality of 3D typical structures to be a 3D structure of the current 2D image, a matching-based depth map generator; a combined depth map generator to combine the saliency-based depth map and the matching-based depth map and to generate a combined depth map, and a spatial and temporal smoothing unit to spatially and temporally smooth the combined depth map.

摘要翻译： 公开了一种自动生成与视频中的每个二维（2D）图像相对应的深度图的装置，方法和计算机可读介质。 该装置包括：图像获取单元，用于获取在输入视频中在时间上连续的多个2D图像，显着图生成器，用于基于人类生成与多个2D图像中的当前2D图像相对应的至少一个显着图 视觉感知（HVP）模型，基于显着性的深度图生成器，三维（3D）结构匹配单元，用于计算当前2D图像与预先存储的多个3D典型结构之间的匹配分数，并且确定 在所述多个3D典型结构中具有最高匹配分数以作为当前2D图像的3D结构的3D典型结构，基于匹配的深度图生成器; 组合深度图生成器，用于组合基于显着性的深度图和基于匹配的深度图并生成组合深度图，以及空间和时间平滑单元，以空间和时间平滑组合的深度图。

公开(公告)号：US08406524B2

公开(公告)日：2013-03-26

申请号：US12726616

申请日：2010-03-18

申请人： Ji Won Kim ,  Yong Ju Jung

发明人： Ji Won Kim ,  Yong Ju Jung

IPC分类号： G06K9/46 ,  G06K9/32 ,  G09G7/00

CPC分类号： G06K9/3233 ,  G06K9/4642 ,  G06K9/4652

摘要： A method, apparatus, and medium of generating a visual attention map. A visual attention map to extract visual attention may be generated to convert a two-dimensional (2D) image into a three-dimensional (3D) image based on visual attention. The 2D image may be downscaled and at least one downscaled image may be generated. A feature map may be extracted from the 2D image and the at least one downscaled image, and the visual attention map may be generated.

摘要翻译： 产生视觉注意力图的方法，装置和介质。 可以产生视觉注意地图以提取视觉注意力，以便基于视觉注意将二维（2D）图像转换为三维（3D）图像。 2D图像可以被缩小，并且可以生成至少一个缩小图像。 可以从2D图像和至少一个缩小图像中提取特征图，并且可以生成视觉注意图。