公开(公告)号：US08818077B2

公开(公告)日：2014-08-26

申请号：US13327410

申请日：2011-12-15

申请人： Bon-Woo Hwang

发明人： Bon-Woo Hwang

IPC分类号： G06K9/00 ,  G06T7/00

CPC分类号： G06T7/0075 ,  G06T7/593 ,  G06T2207/10012

摘要： The present invention relates to a stereo image matching apparatus and method. The stereo matching apparatus includes a window image extraction unit for extracting window images, each having a predetermined size around a selected pixel, for individual pixels of images that constitute stereo images. A local support-area determination unit extracts a similarity mask having similarities equal to or greater than a threshold and a local support-area mask having neighbor connections to a center pixel of the similarity mask, from each of similarity images generated depending on differences in similarity between pixels of the window images. A similarity extraction unit calculates a local support-area similarity from a sum of similarities of a local support-area. A disparity selection unit selects a pair of window images for which the local support-area similarity is maximized, from among the window images, and then determines a disparity for the stereo images.

摘要翻译： 本发明涉及立体图像匹配装置和方法。 立体匹配装置包括：窗口图像提取单元，用于针对构成立体图像的图像的各个像素提取每个具有围绕所选像素的预定大小的窗口图像。 本地支持区域确定单元从相似性差异中生成的每个相似度图像中提取具有等于或大于阈值的相似度的相似性掩码和具有与相似性掩码的中心像素的邻接连接的本地支持区域掩码 在窗口图像的像素之间。 相似度提取单元从本地支持区域的相似之和计算本地支持区域相似度。 视差选择单元从窗口图像中选择最大化本地支持区域相似度的一对窗口图像，然后确定立体图像的视差。

公开(公告)号：US20130050434A1

公开(公告)日：2013-02-28

申请号：US13563367

申请日：2012-07-31

申请人： Kap Kee KIM ,  Seung Uk Yoon ,  Bon Woo Hwang ,  Ji Hyung Lee ,  Bon Ki Koo

发明人： Kap Kee KIM ,  Seung Uk Yoon ,  Bon Woo Hwang ,  Ji Hyung Lee ,  Bon Ki Koo

IPC分类号： G06T17/00 ,  H04N13/02

CPC分类号： G06T17/00 ,  G06T2200/08

摘要： The present invention provides a local multi-resolution 3-D face-inherent model generation apparatus, including one or more 3-D facial model generation cameras for photographing a face of an object at various angles in order to obtain one or more 3-D face models, a 3-D face-inherent model generation unit for generating a 3-D face-inherent model by composing the one or more 3-D face models, a local photographing camera for photographing a local part of the face of the object, a control unit for controlling the position of the local photographing camera on the 3-D face-inherent model, and a local multi-resolution 3-D face-inherent model generation unit for generating a local multi-resolution face-inherent model by composing an image captured by the local photographing camera and the 3-D face-inherent model, a local multi-resolution 3-D face-inherent model generation using the local multi-resolution 3-D face-inherent model generation apparatus, and a skin management system.

摘要翻译： 本发明提供了一种局部多分辨率3-D面部固有模型生成装置，包括一个或多个三维面部模型生成摄像机，用于以各种角度拍摄对象的脸部，以获得一个或多个3-D 面部模型，3-D面部固有模型生成单元，用于通过组合一个或多个3-D脸部模型来产生3-D面部固有模型，用于拍摄对象的脸部的局部部分的本地摄影相机 用于控制3-D面部固有模型上的本地拍摄相机的位置的控制单元和用于通过以下方式产生局部多分辨率面部固有模型的局部多分辨率3-D面部固有模型生成单元 组合本地拍摄照相机和3-D面部固有模型拍摄的图像，使用本地多分辨率3-D面部固有模型生成装置的局部多分辨率3-D面部固有模型生成，以及 皮肤管理系统。

公开(公告)号：US20120155747A1

公开(公告)日：2012-06-21

申请号：US13327410

申请日：2011-12-15

申请人： Bon-Woo HWANG

发明人： Bon-Woo HWANG

IPC分类号： G06K9/00

CPC分类号： G06T7/0075 ,  G06T7/593 ,  G06T2207/10012

摘要： The present invention relates to a stereo image matching apparatus and method. The stereo matching apparatus includes a window image extraction unit for extracting window images, each having a predetermined size around a selected pixel, for individual pixels of images that constitute stereo images. A local support-area determination unit extracts a similarity mask having similarities equal to or greater than a threshold and a local support-area mask having neighbor connections to a center pixel of the similarity mask, from each of similarity images generated depending on differences in similarity between pixels of the window images. A similarity extraction unit calculates a local support-area similarity from a sum of similarities of a local support-area. A disparity selection unit selects a pair of window images for which the local support-area similarity is maximized, from among the window images, and then determines a disparity for the stereo images.

摘要翻译： 本发明涉及立体图像匹配装置和方法。 立体匹配装置包括：窗口图像提取单元，用于针对构成立体图像的图像的各个像素提取每个具有围绕所选像素的预定大小的窗口图像。 本地支持区域确定单元从相似性差异中生成的每个相似度图像中提取具有等于或大于阈值的相似度的相似性掩码和具有与相似性掩码的中心像素的邻接连接的本地支持区域掩码 在窗口图像的像素之间。 相似度提取单元从本地支持区域的相似之和计算本地支持区域相似度。 视差选择单元从窗口图像中选择最大化本地支持区域相似度的一对窗口图像，然后确定立体图像的视差。

公开(公告)号：US20120154393A1

公开(公告)日：2012-06-21

申请号：US13333825

申请日：2011-12-21

申请人： Ji-Hyung LEE ,  Bon-Ki Koo ,  Yoon-Seok Choi ,  Jeung-Chul Park ,  Do-Hyung Kim ,  Bon-Woo Hwang ,  Kap-Kee Kim ,  Seong-Jae Lim ,  Han-Byul Joo ,  Seung-Uk Yoon

发明人： Ji-Hyung LEE ,  Bon-Ki Koo ,  Yoon-Seok Choi ,  Jeung-Chul Park ,  Do-Hyung Kim ,  Bon-Woo Hwang ,  Kap-Kee Kim ,  Seong-Jae Lim ,  Han-Byul Joo ,  Seung-Uk Yoon

IPC分类号： G06T13/00 ,  G06T15/00

CPC分类号： G06T13/40 ,  G06T7/251 ,  G06T17/20

摘要： Disclosed herein are an apparatus and method for creating animation by capturing the motions of a non-rigid object. The apparatus includes a geometry mesh reconstruction unit, a motion capture unit, and a content creation unit. The geometry mesh reconstruction unit receives moving images captured by a plurality of cameras, and generates a reconstruction mesh set for each frame. The motion capture unit generates mesh graph sets for the reconstruction mesh set and generates motion data, including motion information, using the mesh graph sets. The content creation unit creates three-dimensional (3D) content for a non-rigid object by generating a final transformation mesh set, having a topology similar to that of the reconstruction mesh set, using the motion data.

摘要翻译： 本文公开了一种通过捕获非刚性对象的运动来创建动画的装置和方法。 该装置包括几何网格重建单元，运动捕捉单元和内容创建单元。 几何网格重建单元接收由多个摄像机拍摄的运动图像，并为每个帧生成重建网格集。 运动捕捉单元生成用于重建网格集的网格图集，并使用网格图集生成运动数据，包括运动信息。 内容创建单元通过使用运动数据生成具有类似于重建网格集的拓扑的拓扑结构的最终变换网格集，来为非刚性对象创建三维（3D）内容。

公开(公告)号：US20110142343A1

公开(公告)日：2011-06-16

申请号：US12788809

申请日：2010-05-27

申请人： Kap Kee KIM ,  Bon Woo HWANG ,  Bon Ki KOO

发明人： Kap Kee KIM ,  Bon Woo HWANG ,  Bon Ki KOO

IPC分类号： G06K9/34

CPC分类号： G06K9/38 ,  G06T7/11 ,  G06T7/143 ,  G06T7/194 ,  G06T2207/20081

摘要： An apparatus for segmenting multi-view images into foreground and background based on a codebook includes: a background model generation unit for extracting a codebook from multi-view background images and generating codeword mapping tables operating in conjunction with the codebook; and a foreground and background segmentation unit for segmenting multi-view images into foreground and background using the codebook and the codeword mapping tables.

摘要翻译： 一种用于基于码本将多视点图像分割成前景和背景的装置，包括：背景模型生成单元，用于从多视点背景图像中提取码本并生成与码本一起操作的码字映射表; 以及前景和背景分割单元，用于使用码本和码字映射表将多视图图像分割成前景和背景。

公开(公告)号：US20110123168A1

公开(公告)日：2011-05-26

申请号：US13054408

申请日：2009-06-19

申请人： Maeng Sub Cho ,  Jin Seo Kim ,  Bon Ki Koo ,  Ji Hyung Lee ,  Chang Woo Chu ,  Ho Won Kim ,  II Kyu Park ,  Yoon-Seok Choi ,  Ji Young Park ,  Seong Jae Lim ,  Bon Woo Hwang ,  Jeung Chul Park ,  Kap Kee Kim ,  Sang-Kyun Kim ,  Yong-Soo Joo

发明人： Maeng Sub Cho ,  Jin Seo Kim ,  Bon Ki Koo ,  Ji Hyung Lee ,  Chang Woo Chu ,  Ho Won Kim ,  II Kyu Park ,  Yoon-Seok Choi ,  Ji Young Park ,  Seong Jae Lim ,  Bon Woo Hwang ,  Jeung Chul Park ,  Kap Kee Kim ,  Sang-Kyun Kim ,  Yong-Soo Joo

IPC分类号： H04N5/775 ,  H04N5/765 ,  H04N9/80

CPC分类号： H04N5/765 ,  G06F3/016 ,  H04N5/85 ,  H04N9/8205 ,  H04N21/41 ,  H04N21/42201 ,  H04N21/485 ,  H04N21/812 ,  H04N21/8133 ,  H04N21/8166 ,  H04N21/8186

摘要： A multimedia application system uses metadata for sensory devices. The system includes: a sensory-device engine for generating a sensory device command (SDC) for controlling the sensory devices based on sensory effect information (SEI) generated to represent sensory effects by using the sensory devices depending on video contents, user preference information (UPI) of the sensory devices and device capability information (DCI) indicative of reproducing capability of the sensory devices; and a sensory-device controller for controlling sensory devices to perform sensory effect reproduction in response to the generated SDC.

摘要翻译： 多媒体应用系统使用感觉设备的元数据。 该系统包括：感觉装置引擎，用于生成感测装置命令（SDC），用于基于通过使用根据视频内容的感觉装置产生的感觉效果信息（SEI）来控制感觉装置命令，用户偏好信息（ UPI）感测装置和设备能力信息（DCI），其指示感觉装置的再现能力; 以及感测装置控制器，用于控制感觉装置响应于所产生的SDC来执行感觉效果再现。

公开(公告)号：US08902305B2

公开(公告)日：2014-12-02

申请号：US13566938

申请日：2012-08-03

申请人： Bon Woo Hwang ,  Kap Kee Kim ,  Seung-Uk Yoon ,  Bonki Koo ,  Ji Hyung Lee

发明人： Bon Woo Hwang ,  Kap Kee Kim ,  Seung-Uk Yoon ,  Bonki Koo ,  Ji Hyung Lee

IPC分类号： H04N13/00 ,  H04N13/02 ,  G06K9/00 ,  G06T17/00

CPC分类号： G06K9/00275 ,  G06K9/00993 ,  G06T17/00

摘要： A system for managing face data includes a global face capturing unit configured to capture a global face image; and a global face data generation unit configured to obtain shape information and texture information of global face data, and generate the global face data. Further, the system includes a local face capturing unit configured to capture a plurality of local face images; and a global face posture extraction unit configured to estimate a position and a direction of the face of a captured user. Furthermore, the system includes a local capturing device posture extraction unit configured to extract posture information of the local face capturing unit; and a local face data generation unit configured to generate texture information and shape information, and generate local face data.

摘要翻译： 一种用于管理面部数据的系统包括被配置为捕获全局人脸图像的全局人脸捕获单元; 以及全局人脸数据生成部，被配置为获得全局面部数据的形状信息和纹理信息，并生成全局面部数据。 此外，该系统包括被配置为捕获多个局部脸部图像的局部脸部捕获单元; 以及全局面部姿势提取单元，被配置为估计所捕获的用户的脸部的位置和方向。 此外，该系统包括：本地捕获装置姿势提取单元，被配置为提取局部面部拍摄单元的姿势信息; 以及局部面部数据生成部，其生成纹理信息和形状信息，生成局部面部数据。

公开(公告)号：US08830269B2

公开(公告)日：2014-09-09

申请号：US12495063

申请日：2009-06-30

申请人： Seong Jae Lim ,  Ho Won Kim ,  Il Kyu Park ,  Ji Young Park ,  Ji Hyung Lee ,  Jin Seo Kim ,  Seung Wook Lee ,  Chang Woo Chu ,  Bon Woo Hwang ,  Bon Ki Koo

发明人： Seong Jae Lim ,  Ho Won Kim ,  Il Kyu Park ,  Ji Young Park ,  Ji Hyung Lee ,  Jin Seo Kim ,  Seung Wook Lee ,  Chang Woo Chu ,  Bon Woo Hwang ,  Bon Ki Koo

IPC分类号： G09G5/00 ,  G06T13/40 ,  G06T19/20 ,  G06T17/30

CPC分类号： G06T17/30 ,  G06T13/40 ,  G06T19/20 ,  G06T2219/2021

摘要： A method of deforming a shape of a human body model includes the steps of reorganizing human body model data into a joint-skeleton structure-based Non-Uniform Rational B-spline (NURBS) surface model, generating statistical deformation information about control parameters of the NURBS surface model based on parameters of joints and key section curves for specific motions, and deforming the shape of the human body model based on the NURBS surface model and the statistical deformation information. The human body model data includes three-dimensional (3D) human body scan data and a 3D polygon mesh.

摘要翻译： 人体模型形状变形的方法包括以下步骤：将人体模型数据重组为基于联合骨架结构的非均匀有理B样条（NURBS）表面模型，生成有关控制参数的统计变形信息 基于NURBS曲面模型和统计变形信息，根据关节参数和关键截面曲线对NURBS曲面模型进行特定运动，并对人体模型的形状进行变形。 人体模型数据包括三维（3D）人体扫描数据和3D多边形网格。

公开(公告)号：US08712146B2

公开(公告)日：2014-04-29

申请号：US12612792

申请日：2009-11-05

申请人： Ho Won Kim ,  Seong Jae Lin ,  Bo Youn Kim ,  Il Kyu Park ,  Ji Young Park ,  Bon Ki Koo ,  Ji Hyung Lee ,  Jin Seo Kim ,  Seung Wook Lee ,  Chang Woo Chu ,  Bon Woo Hwang ,  Young Jik Lee

发明人： Ho Won Kim ,  Seong Jae Lin ,  Bo Youn Kim ,  Il Kyu Park ,  Ji Young Park ,  Bon Ki Koo ,  Ji Hyung Lee ,  Jin Seo Kim ,  Seung Wook Lee ,  Chang Woo Chu ,  Bon Woo Hwang ,  Young Jik Lee

IPC分类号： G06K9/00 ,  G06K9/46 ,  G06K9/36 ,  G06T15/00

CPC分类号： G06T13/40

摘要： The present invention relates to a method of creating an animatable digital clone includes receiving input multi-view images of an actor captured by at least two cameras and reconstructing a three-dimensional appearance therefrom, accepting shape information selectively based on a probability of photo-consistency in the input multi-view images obtained from the reconstruction and transferring a mesh topology of a reference human body model onto a shape of the actor obtained from the reconstruction. The method further includes generating an initial human body model of the actor via transfer of the mesh topology utilizing sectional shape information of the actor's joints, and generating a genuine human body model of the actor from learning genuine behavioral characteristics of the actor by applying the initial human body model to multi-view posture learning images where performance of a predefined motion by the actor is recorded.

摘要翻译： 本发明涉及一种创建可动画数字克隆的方法，包括：接收由至少两个相机拍摄的演员的输入多视图图像，并从其重构三维外观，基于光一致性的概率有选择地接受形状信息 在从重构获得的输入多视图图像中，并将参考人体模型的网格拓扑转移到从重建获得的运动员的形状上。 该方法还包括通过使用演员关节的截面形状信息的网格拓扑的传递来生成演员的初始人体模型，以及通过应用初始的演员生成演员的真正的人体模型来学习演员的真实行为特征 人体模型以多视角姿态学习图像，其中记录由演员执行预定义的运动。

公开(公告)号：US20110234763A1

公开(公告)日：2011-09-29

申请号：US12909518

申请日：2010-10-21

申请人： Bon-Woo HWANG ,  Kap-Kee KIM ,  Bonki KOO

发明人： Bon-Woo HWANG ,  Kap-Kee KIM ,  Bonki KOO

IPC分类号： H04N13/02

CPC分类号： H04N21/2365 ,  H04N13/194 ,  H04N13/398 ,  H04N21/21805

摘要： An apparatus for transmitting a multi-view stereoscopic video includes: a control unit configured to receive a group of stereoscopic images taken by a plurality of stereoscopic imaging devices; a generation unit configured to select at least one stereoscopic frame from stereoscopic frames of the received group of stereoscopic images, arrange the selected stereoscopic frames successively, and generate a multi-view stereoscopic video; an encoding unit configured to encode the generated multi-view stereoscopic video; and a transmission unit configured to transmit the encoded multi-view stereoscopic video through a transmission network.

摘要翻译： 一种用于发送多视点立体视频的设备包括：控制单元，被配置为接收由多个立体成像设备拍摄的一组立体图像; 生成单元，被配置为从所接收的立体图像组的立体帧中选择至少一个立体帧，连续排列所选立体帧，并生成多视点立体视频; 编码单元，被配置为对所生成的多视角立体视频进行编码; 以及发送单元，被配置为通过传输网络发送经编码的多视点立体视频。