公开(公告)号：US09137512B2

公开(公告)日：2015-09-15

申请号：US12458559

申请日：2009-07-15

申请人： Aron Baik ,  Yong Ju Jung ,  Ji Won Kim ,  Du-Sik Park

发明人： Aron Baik ,  Yong Ju Jung ,  Ji Won Kim ,  Du-Sik Park

IPC分类号： H04N7/18 ,  H04N13/00 ,  G06T7/00 ,  H04N13/02

CPC分类号： H04N13/139 ,  G06T7/596 ,  G06T2207/10021 ,  G06T2207/20228 ,  H04N13/261

摘要： A depth estimation and conversion apparatus and method is provided. Depth of an video may be estimated by extracting feature information from the input video, and estimating the depth of the input video based on the extracted feature information.

摘要翻译： 提供了深度估计和转换装置和方法。 视频的深度可以通过从输入视频提取特征信息，并且基于所提取的特征信息来估计输入视频的深度来估计。

公开(公告)号：US08553972B2

公开(公告)日：2013-10-08

申请号：US12830822

申请日：2010-07-06

申请人： Ji Won Kim ,  Gangyu Ma ,  Haitao Wang ,  Xiying Wang ,  Ji Yeun Kim ,  Yong Ju Jung

发明人： Ji Won Kim ,  Gangyu Ma ,  Haitao Wang ,  Xiying Wang ,  Ji Yeun Kim ,  Yong Ju Jung

IPC分类号： G06K9/00 ,  G06K9/32 ,  H04N13/00

CPC分类号： G06T7/50 ,  G06T2207/10016 ,  G06T2207/20221 ,  G06T2207/30196

摘要： Disclosed are an apparatus, a method and a computer-readable medium automatically generating a depth map corresponding to each two-dimensional (2D) image in a video. The apparatus includes an image acquiring unit to acquire a plurality of 2D images that are temporally consecutive in an input video, a saliency map generator to generate at least one saliency map corresponding to a current 2D image among the plurality of 2D images based on a Human Visual Perception (HVP) model, a saliency-based depth map generator, a three-dimensional (3D) structure matching unit to calculate matching scores between the current 2D image and a plurality of 3D typical structures that are stored in advance, and to determine a 3D typical structure having a highest matching score among the plurality of 3D typical structures to be a 3D structure of the current 2D image, a matching-based depth map generator; a combined depth map generator to combine the saliency-based depth map and the matching-based depth map and to generate a combined depth map, and a spatial and temporal smoothing unit to spatially and temporally smooth the combined depth map.

摘要翻译： 公开了一种自动生成与视频中的每个二维（2D）图像相对应的深度图的装置，方法和计算机可读介质。 该装置包括：图像获取单元，用于获取在输入视频中在时间上连续的多个2D图像，显着图生成器，用于基于人类生成与多个2D图像中的当前2D图像相对应的至少一个显着图 视觉感知（HVP）模型，基于显着性的深度图生成器，三维（3D）结构匹配单元，用于计算当前2D图像与预先存储的多个3D典型结构之间的匹配分数，并且确定 在所述多个3D典型结构中具有最高匹配分数以作为当前2D图像的3D结构的3D典型结构，基于匹配的深度图生成器; 组合深度图生成器，用于组合基于显着性的深度图和基于匹配的深度图并生成组合深度图，以及空间和时间平滑单元，以空间和时间平滑组合的深度图。

公开(公告)号：US20110026808A1

公开(公告)日：2011-02-03

申请号：US12830822

申请日：2010-07-06

申请人： Ji Won KIM ,  Gangyu Ma ,  Haitao Wang ,  Xiying Wang ,  Ji Yeun Kim ,  Yong Ju Jung

发明人： Ji Won KIM ,  Gangyu Ma ,  Haitao Wang ,  Xiying Wang ,  Ji Yeun Kim ,  Yong Ju Jung

IPC分类号： G06T7/00

CPC分类号： G06T7/50 ,  G06T2207/10016 ,  G06T2207/20221 ,  G06T2207/30196

摘要： Disclosed are an apparatus, a method and a computer-readable medium automatically generating a depth map corresponding to each two-dimensional (2D) image in a video. The apparatus includes an image acquiring unit to acquire a plurality of 2D images that are temporally consecutive in an input video, a saliency map generator to generate at least one saliency map corresponding to a current 2D image among the plurality of 2D images based on a Human Visual Perception (HVP) model, a saliency-based depth map generator, a three-dimensional (3D) structure matching unit to calculate matching scores between the current 2D image and a plurality of 3D typical structures that are stored in advance, and to determine a 3D typical structure having a highest matching score among the plurality of 3D typical structures to be a 3D structure of the current 2D image, a matching-based depth map generator; a combined depth map generator to combine the saliency-based depth map and the matching-based depth map and to generate a combined depth map, and a spatial and temporal smoothing unit to spatially and temporally smooth the combined depth map.

摘要翻译： 公开了一种自动生成与视频中的每个二维（2D）图像相对应的深度图的装置，方法和计算机可读介质。 该装置包括：图像获取单元，用于获取在输入视频中在时间上连续的多个2D图像，显着图生成器，用于基于人类生成与多个2D图像中的当前2D图像相对应的至少一个显着图 视觉感知（HVP）模型，基于显着性的深度图生成器，三维（3D）结构匹配单元，用于计算当前2D图像与预先存储的多个3D典型结构之间的匹配分数，并且确定 在所述多个3D典型结构中具有最高匹配分数以作为当前2D图像的3D结构的3D典型结构，基于匹配的深度图生成器; 组合深度图生成器，用于组合基于显着性的深度图和基于匹配的深度图并生成组合深度图，以及空间和时间平滑单元，以空间和时间平滑组合的深度图。

公开(公告)号：US09153032B2

公开(公告)日：2015-10-06

申请号：US12453115

申请日：2009-04-29

申请人： Yong Ju Jung ,  Aron Baik ,  Du-Sik Park

发明人： Yong Ju Jung ,  Aron Baik ,  Du-Sik Park

IPC分类号： G06T7/00

CPC分类号： G06T7/0085 ,  G06T7/13 ,  G06T7/543 ,  G06T2207/10012

摘要： A conversion method and apparatus with a generating of a depth map for two dimensional (2D)-to-three dimensional (3D) conversion. A depth order may be restored based on a line tracing and an edge map generated from an input image, and a stereo image may be generated using depth information.

摘要翻译： 一种产生二维（2D）至三维（3D）转换的深度图的转换方法和装置。 可以基于从输入图像生成的线追踪和边缘图来恢复深度顺序，并且可以使用深度信息来生成立体图像。

公开(公告)号：US20100073364A1

公开(公告)日：2010-03-25

申请号：US12453115

申请日：2009-04-29

申请人： Yong Ju Jung ,  Aron Baik ,  Du-Sik Park

发明人： Yong Ju Jung ,  Aron Baik ,  Du-Sik Park

IPC分类号： G06T15/00

CPC分类号： G06T7/0085 ,  G06T7/13 ,  G06T7/543 ,  G06T2207/10012

摘要： A conversion method and apparatus with a generating of a depth map for two dimensional (2D)-to-three dimensional (3D) conversion. A depth order may be restored based on a line tracing and an edge map generated from an input image, and a stereo image may be generated using depth information.

摘要翻译： 一种产生二维（2D）至三维（3D）转换的深度图的转换方法和装置。 可以基于从输入图像生成的线追踪和边缘图来恢复深度顺序，并且可以使用深度信息来生成立体图像。

公开(公告)号：US20090164460A1

公开(公告)日：2009-06-25

申请号：US12078792

申请日：2008-04-04

申请人： Yong Ju Jung ,  Du-Sik Park ,  Aron Baik

发明人： Yong Ju Jung ,  Du-Sik Park ,  Aron Baik

IPC分类号： G06F7/06 ,  G06F17/30

CPC分类号： G06F16/784 ,  G06F16/78 ,  G06F16/7844 ,  H04N5/44543 ,  H04N7/17318 ,  H04N21/2353 ,  H04N21/4333 ,  H04N21/4828 ,  H04N21/658 ,  H04N21/8405 ,  H04N2005/4412

摘要： Disclosed are a digital television video program providing system, a digital television, and a control method for the same. The digital television video program providing system includes a video analyzing unit for extracting search terms from information data associated with a played video, a search keyword extracting unit for selecting a search keyword from the extracted search terms based on a reliability factor acquired by an extraction method of the extracted search terms, a video search unit for searching for a playable video based on the selected search keyword, and a search result providing unit for providing search results for the video.

摘要翻译： 公开了一种数字电视视频节目提供系统，数字电视及其控制方法。 数字电视视频节目提供系统包括：视频分析单元，用于从与所播放的视频相关联的信息数据中提取搜索词;搜索关键字提取单元，用于基于通过提取方法获取的可靠性因素从所提取的搜索词中选择搜索关键词 提取的搜索项的视频搜索单元，用于基于所选择的搜索关键字搜索可播放视频的视频搜索单元，以及用于提供视频的搜索结果的搜索结果提供单元。

公开(公告)号：US08712145B2

公开(公告)日：2014-04-29

申请号：US12453213

申请日：2009-05-01

申请人： Aron Baik ,  Yong Ju Jung ,  Ji Won Kim

发明人： Aron Baik ,  Yong Ju Jung ,  Ji Won Kim

IPC分类号： G06K9/00

CPC分类号： G06T7/55 ,  G06T2207/10016 ,  H04N13/261

摘要： A depth estimation apparatus is provided. The depth estimation apparatus may estimate a depth value of at least one pixel composing an input video based on feature information about at least one feature of the input video, a position of the at least one pixel, and a depth relationship among the at least one pixel and neighboring pixels.

摘要翻译： 提供了深度估计装置。 深度估计装置可以基于关于输入视频的至少一个特征，至少一个像素的位置和至少一个像素之间的深度关系的特征信息来估计构成输入视频的至少一个像素的深度值 像素和相邻像素。

公开(公告)号：US20100246954A1

公开(公告)日：2010-09-30

申请号：US12726616

申请日：2010-03-18

申请人： Ji Won KIM ,  Yong Ju Jung

发明人： Ji Won KIM ,  Yong Ju Jung

IPC分类号： G06K9/32 ,  G06K9/00

CPC分类号： G06K9/3233 ,  G06K9/4642 ,  G06K9/4652

摘要： A method, apparatus, and medium of generating a visual attention map. A visual attention map to extract visual attention may be generated to convert a two-dimensional (2D) image into a three-dimensional (3D) image based on visual attention. The 2D image may be downscaled and at least one downscaled image may be generated. A feature map may be extracted from the 2D image and the at least one downscaled image, and the visual attention map may be generated.

摘要翻译： 产生视觉注意力图的方法，装置和介质。 可以产生视觉注意地图以提取视觉注意力，以便基于视觉注意将二维（2D）图像转换为三维（3D）图像。 2D图像可以被缩小，并且可以生成至少一个缩小图像。 可以从2D图像和至少一个缩小图像中提取特征图，并且可以生成视觉注意图。

公开(公告)号：US08406524B2

公开(公告)日：2013-03-26

申请号：US12726616

申请日：2010-03-18

申请人： Ji Won Kim ,  Yong Ju Jung

发明人： Ji Won Kim ,  Yong Ju Jung

IPC分类号： G06K9/46 ,  G06K9/32 ,  G09G7/00

CPC分类号： G06K9/3233 ,  G06K9/4642 ,  G06K9/4652

摘要： A method, apparatus, and medium of generating a visual attention map. A visual attention map to extract visual attention may be generated to convert a two-dimensional (2D) image into a three-dimensional (3D) image based on visual attention. The 2D image may be downscaled and at least one downscaled image may be generated. A feature map may be extracted from the 2D image and the at least one downscaled image, and the visual attention map may be generated.

摘要翻译： 产生视觉注意力图的方法，装置和介质。 可以产生视觉注意地图以提取视觉注意力，以便基于视觉注意将二维（2D）图像转换为三维（3D）图像。 2D图像可以被缩小，并且可以生成至少一个缩小图像。 可以从2D图像和至少一个缩小图像中提取特征图，并且可以生成视觉注意图。

公开(公告)号：US20110268422A1

公开(公告)日：2011-11-03

申请号：US13067948

申请日：2011-07-08

申请人： Jin Guk Jeong ,  Sang Kyun Kim ,  Yong Ju Jung ,  Eul Hyeon Hwang ,  Doo Sun Hwang ,  Ji Yeun Kim ,  San Ko ,  Cheol Kon Jung ,  Yong Lee

发明人： Jin Guk Jeong ,  Sang Kyun Kim ,  Yong Ju Jung ,  Eul Hyeon Hwang ,  Doo Sun Hwang ,  Ji Yeun Kim ,  San Ko ,  Cheol Kon Jung ,  Yong Lee

IPC分类号： H04N5/915

CPC分类号： H04N9/8042 ,  H04N5/775 ,  H04N9/8205 ,  H04N9/8227 ,  H04N21/4126 ,  H04N21/42204 ,  H04N21/43615 ,  H04N21/43637 ,  H04N21/4667

摘要： A method, system, and medium of providing various types of broadcast services such as a record, a summary, a navigation and a real-time event service with respect to a broadcast content, utilizing a home server, according to a user's request. A broadcast service providing method includes: storing broadcast summary data, navigation data and real-time event data which is generated by analyzing received broadcast data according to a broadcast record request from a user's portable device, in a database; and providing the user's portable device with a streaming service with respect to the stored broadcast summary data, the navigation data and the real-time event data, according to a summary selection request from the user's portable device.

摘要翻译： 根据用户的要求，使用家庭服务器，提供关于广播内容的记录，摘要，导航和实时事件服务的各种类型的广播服务的方法，系统和媒体。 广播服务提供方法包括：根据来自用户的便携式设备的广播记录请求，在数据库中存储广播摘要数据，导航数据和实时事件数据，该数据是通过分析接收到的广播数据而生成的; 以及根据来自用户的便携式设备的摘要选择请求，向用户的便携式设备提供关于存储的广播摘要数据，导航数据和实时事件数据的流服务。