公开(公告)号：US09117113B2

公开(公告)日：2015-08-25

申请号：US14117593

申请日：2012-05-08

申请人： Tiberiu Popa ,  Marcel Germann ,  Richard Keiser ,  Markus Gross ,  Remo Ziegler

发明人： Tiberiu Popa ,  Marcel Germann ,  Richard Keiser ,  Markus Gross ,  Remo Ziegler

IPC分类号： G06K9/00 ,  G06T7/00

CPC分类号： G06K9/00342 ,  G06K9/00724 ,  G06T7/73 ,  G06T2207/10021 ,  G06T2207/30196 ,  G06T2207/30228

摘要： Estimating a pose of an articulated 3D object model (4) by a computer is done by •obtaining a sequence of source images (10) and therefrom corresponding source image segments (13) with objects (14) separated from the image background; •matching such a sequence (51) with sequences (52) of reference silhouettes (13′), determining one or more selected sequences of reference silhouettes (13′) forming a best match; •for each of these selected sequences of reference silhouettes (13′), retrieving a reference pose that is associated with one of the reference silhouettes (13′); and •computing an estimate of the pose of the articulated object model (4) from the retrieved reference pose or poses. The result of these steps is an initial pose estimate, which then can be used in further steps, for example, for maintaining local consistency between pose estimates from consecutive frames, and global consistency over a longer sequence of frames.

摘要翻译： 通过计算机估计关节式3D对象模型（4）的姿态是通过以下步骤完成的：通过从图像背景分离的对象（14）获得源图像序列（10）和源自相应源图像片段（13）的序列; •将这样的序列（51）与参考轮廓（13'）的序列（52）匹配，确定形成最佳匹配的一个或多个所选择的参考轮廓序列（13'）; •对于这些所选择的参考轮廓序列（13'）中的每一个，检索与所述参考轮廓（13'）之一相关联的参考姿势; 以及•从检索的参考姿势或姿势计算所述铰接对象模型（4）的姿态的估计。 这些步骤的结果是初始姿态估计，其然后可以用于进一步的步骤，例如，用于维持来自连续帧的姿态估计之间的局部一致性，以及在更长的帧序列上的全局一致性。

公开(公告)号：US20140219550A1

公开(公告)日：2014-08-07

申请号：US14117593

申请日：2012-05-08

申请人： Tiberiu Popa ,  Marcel Germann ,  Richard Keiser ,  Markus Gross ,  Remo Ziegler

发明人： Tiberiu Popa ,  Marcel Germann ,  Richard Keiser ,  Markus Gross ,  Remo Ziegler

IPC分类号： G06K9/00 ,  G06T7/00

CPC分类号： G06K9/00342 ,  G06K9/00724 ,  G06T7/73 ,  G06T2207/10021 ,  G06T2207/30196 ,  G06T2207/30228

摘要： Estimating a pose of an articulated 3D object model (4) by a computer is done by •obtaining a sequence of source images (10) and therefrom corresponding source image segments (13) with objects (14) separated from the image background; •matching such a sequence (51) with sequences (52) of reference silhouettes (13′), determining one or more selected sequences of reference silhouettes (13′) forming a best match; •for each of these selected sequences of reference silhouettes (13′), retrieving a reference pose that is associated with one of the reference silhouettes (13′); and •computing an estimate of the pose of the articulated object model (4) from the retrieved reference pose or poses. The result of these steps is an initial pose estimate, which then can be used in further steps, for example, for maintaining local consistency between pose estimates from consecutive frames, and global consistency over a longer sequence of frames.

摘要翻译： 通过计算机估计关节式3D对象模型（4）的姿态是通过以下步骤完成的：通过从图像背景分离的对象（14）获得源图像序列（10）和源自相应源图像片段（13）的序列; •将这样的序列（51）与参考轮廓（13'）的序列（52）匹配，确定形成最佳匹配的一个或多个所选择的参考轮廓序列（13'）; •对于这些所选择的参考轮廓序列（13'）中的每一个，检索与所述参考轮廓（13'）之一相关联的参考姿势; 以及•从检索的参考姿势或姿势计算所述铰接对象模型（4）的姿态的估计。 这些步骤的结果是初始姿态估计，其然后可以用于进一步的步骤，例如，用于维持来自连续帧的姿态估计之间的局部一致性，以及在更长的帧序列上的全局一致性。

公开(公告)号：US08218963B2

公开(公告)日：2012-07-10

申请号：US12936228

申请日：2009-02-04

申请人： Rolf Adelsberger ,  Markus Gross ,  Marc Levoy ,  Remo Ziegler

发明人： Rolf Adelsberger ,  Markus Gross ,  Marc Levoy ,  Remo Ziegler

IPC分类号： G03B15/03

CPC分类号： G03B15/03 ,  G06F3/042 ,  G06F2203/04109 ,  G06F2203/04808

摘要： Using photographic flash for candid shots often results in an unevenly lit scene, in which objects in the back appear dark. A spatially adaptive photographic flash (100) is disclosed, in which the intensity of illumination (21, 23) varies depending on the depth and reflectivity (30, 101) of features in the scene. Adaption to changes in depth are used in a single-shot method. Adaption to changes in reflectivity are used in a multishot method. The single-shot method requires only a depth image (30), whereas the multi-shot method requires at least one color image (40) in addition to the depth data (30).

摘要翻译： 使用摄影闪光灯进行坦白的拍摄通常会导致不均匀照明的场景，后者中的物体看起来很暗。 公开了一种空间自适应照相闪光灯（100），其中照明强度（21,23）根据场景中的特征的深度和反射率（30,101）而变化。 适用于深度变化的单次方法使用。 适用于反射率的变化在多重方法中使用。 单次拍摄方法仅需要深度图像（30），而多拍摄方法除了深度数据（30）之外还需要至少一个彩色图像（40）。

公开(公告)号：US20110123183A1

公开(公告)日：2011-05-26

申请号：US12936228

申请日：2009-02-04

申请人： Rolf Adelsberger ,  Markus Gross ,  Marc Levoy ,  Remo Ziegler

发明人： Rolf Adelsberger ,  Markus Gross ,  Marc Levoy ,  Remo Ziegler

IPC分类号： G03B15/03

CPC分类号： G03B15/03 ,  G06F3/042 ,  G06F2203/04109 ,  G06F2203/04808

摘要： Using photographic flash for candid shots often results in an unevenly lit scene, in which objects in the back appear dark. A spatially adaptive photographic flash (100) is disclosed, in which the intensity of illumination (21, 23) varies depending on the depth and reflectivity (30, 101) of features in the scene. Adaption to changes in depth are used in a single-shot method. Adaption to changes in reflectivity are used in a multishot method. The single-shot method requires only a depth image (30), whereas the multi-shot method requires at least one color image (40) in addition to the depth data (30).

摘要翻译： 使用摄影闪光灯进行坦白的拍摄通常会导致不均匀照明的场景，后者中的物体看起来很暗。 公开了一种空间自适应照相闪光灯（100），其中照明强度（21,23）根据场景中的特征的深度和反射率（30,101）而变化。 适用于深度变化的单次方法使用。 适用于反射率的变化在多重方法中使用。 单次拍摄方法仅需要深度图像（30），而多拍摄方法除了深度数据（30）之外还需要至少一个彩色图像（40）。

公开(公告)号：US09641822B2

公开(公告)日：2017-05-02

申请号：US12379055

申请日：2009-02-11

申请人： Jae Young Sim ,  Do Kyoon Kim ,  Kee Chang Lee ,  Gael Guennebaud ,  Mario Botsch ,  Markus Gross ,  Robert Carnecky

发明人： Jae Young Sim ,  Do Kyoon Kim ,  Kee Chang Lee ,  Gael Guennebaud ,  Mario Botsch ,  Markus Gross ,  Robert Carnecky

IPC分类号： H04N5/228 ,  G06T15/00 ,  H04N13/00 ,  G06T17/00 ,  G06T15/04 ,  G06T15/06

CPC分类号： H04N13/111 ,  G06T17/00 ,  G06T17/005 ,  H04N13/10 ,  H04N2213/005

摘要： Provided is point-based efficient three-dimensional (3D) information representation from a color image that is obtained from a general Charge-Coupled Device (CCD)/Complementary Metal Oxide Semiconductor (CMOS) camera, and a depth image that is obtained from a depth camera. A 3D image processing method includes storing a depth image associated with an object as first data of a 3D data format, and storing a color image associated with the object as color image data of a 2D image format, independent of the first data.

公开(公告)号：US09088791B2

公开(公告)日：2015-07-21

申请号：US13510192

申请日：2010-11-16

申请人： Markus Gross

发明人： Markus Gross

IPC分类号： H04N7/14 ,  H04N13/04 ,  G02B27/22

CPC分类号： G02B27/2214 ,  H04N13/315 ,  H04N13/363

摘要： An image display apparatus includes a display layer and an image separation layer. The image separation layer is adapted to separate a displayed image on the display layer into a first image for a left eye of an observer and into a second image for a right eye of an observer. This renders the image display apparatus autostereoscopic. In order to improve the appearance of the displayed image, the apparatus is adapted to activate the display layer and the image separation layer substantially only within a given two-dimensional silhouette and to remain substantially transparent outside of the silhouette. In other aspects, the apparatus may be adapted to dynamically adjust an observation angle between the first image and the second image by controlling the distance between the display layer and the image separation layer by an actuator. The apparatus may be mounted on a robotic unit.

摘要翻译： 图像显示装置包括显示层和图像分离层。 图像分离层适于将显示层上的显示图像分离成用于观察者的左眼的第一图像和用于观察者右眼的第二图像。 这使得图像显示装置自动立体。 为了改善显示图像的外观，该装置适于基本上仅在给定的二维轮廓内激活显示层和图像分离层，并且在轮廓外部保持基本透明。 在其他方面，该装置可以适于通过致动器控制显示层和图像分离层之间的距离来动态地调整第一图像和第二图像之间的观察角度。 该装置可以安装在机器人单元上。

公开(公告)号：USD720684S1

公开(公告)日：2015-01-06

申请号：US29427208

申请日：2012-07-16

申请人： Vincent Benoit Mathonet ,  Daniel Scheuren ,  Philippe Joseph Auguste Muller ,  Laurent Luigi Domenico Colantonio ,  Julien Caroux ,  Markus Gross

设计人： Vincent Benoit Mathonet ,  Daniel Scheuren ,  Philippe Joseph Auguste Muller ,  Laurent Luigi Domenico Colantonio ,  Julien Caroux ,  Markus Gross

公开(公告)号：US08711204B2

公开(公告)日：2014-04-29

申请号：US12766734

申请日：2010-04-23

申请人： Aljosa Aleksej Andrej Smolic ,  Oliver Wang ,  Manuel Lang ,  Alexander Hornung ,  Markus Gross ,  Wojciech Matusik

发明人： Aljosa Aleksej Andrej Smolic ,  Oliver Wang ,  Manuel Lang ,  Alexander Hornung ,  Markus Gross ,  Wojciech Matusik

IPC分类号： H04N9/093 ,  H04N13/04

CPC分类号： H04N13/128 ,  H04N13/111 ,  H04N13/122

摘要： Systems, methods and articles of manufacture are disclosed for stereoscopically editing video content. In one embodiment, image pairs of a sequence may be stereoscopically modified by altering at least one image of the image pair. The at least one image may be altered using at least one mapping function. The at least one image may also be altered based on a saliency of the image pair. The at least one image may also be altered based on disparities between the image pair. Advantageously, stereoscopic properties of video content may be edited more conveniently and efficiently.

摘要翻译： 公开了用于立体地编辑视频内容的系统，方法和制品。 在一个实施例中，可以通过改变图像对的至少一个图像来立体地修改序列的图像对。 可以使用至少一个映射函数来改变至少一个图像。 还可以基于图像对的显着性来改变至少一个图像。 还可以基于图像对之间的差异来改变至少一个图像。 有利地，可以更方便和有效地编辑视频内容的立体属性。

公开(公告)号：US08624891B2

公开(公告)日：2014-01-07

申请号：US13007968

申请日：2011-01-17

申请人： Huw Bowles ,  Kenny Mitchell ,  Robert Sumner ,  Wojciech Jarosz ,  Markus Gross

发明人： Huw Bowles ,  Kenny Mitchell ,  Robert Sumner ,  Wojciech Jarosz ,  Markus Gross

IPC分类号： G06T15/00 ,  G06T15/50 ,  G06T15/60

CPC分类号： G06T15/205 ,  H04N13/261

摘要： Techniques are disclosed for performing image space reprojection iteratively. An insignificant parallax threshold depth is computed for a source image. Portions of the image having depth values greater than the insignificant parallax threshold depth may be shifted uniformly to produce corresponding portions of the reprojection (target) image. An iterative fixed-point reprojection algorithm is used to reproject the portions of the source image having depth values less than or equal to the insignificant parallax threshold depth. The fixed point reprojection algorithm quickly converges on the best pixel in the source image for each pixel in a target image representing an offset view of the source image. An additional rendering pass is employed to fill disoccluded regions of the target image, where the reprojection algorithm fails to converge.

摘要翻译： 公开了用于迭代地执行图像空间重映射的技术。 为源图像计算不重要的视差阈值深度。 具有大于无效视差阈值深度的深度值的图像的部分可以均匀地偏移，以产生对再现（目标）图像的对应部分。 迭代定点重投影算法用于重新投影具有小于或等于无效视差阈值深度的深度值的源图像部分。 固定点重投影算法在代表源图像的偏移视图的目标图像中的每个像素上快速收敛于源图像中的最佳像素。 采用额外的渲染过程来填充目标图像的不同区域，其中重新投影算法无法收敛。

公开(公告)号：US08514932B2

公开(公告)日：2013-08-20

申请号：US12702195

申请日：2010-02-08

申请人： Nikolce Stefanoski ,  Aljosa Smolic ,  Yongzhe Wang ,  Manuel Lang ,  Alexander Hornung ,  Markus Gross

发明人： Nikolce Stefanoski ,  Aljosa Smolic ,  Yongzhe Wang ,  Manuel Lang ,  Alexander Hornung ,  Markus Gross

IPC分类号： H04N7/12 ,  H04N7/01 ,  H04N7/32 ,  H04N11/02

CPC分类号： H04N19/537 ,  H04N19/33 ,  H04N19/463

摘要： Systems, methods and articles of manufacture are disclosed for performing scalable video coding. In one embodiment, non-linear functions are used to predict source video data using retargeted video data. Differences may be determined between the predicted video data and the source video data. The retargeted video data, the non-linear functions, and the differences may be jointly encoded into a scalable bitstream. The scalable bitstream may be transmitted and selectively decoded to produce output video for one of a plurality of predefined target platforms.

摘要翻译： 公开了用于执行可缩放视频编码的系统，方法和制品。 在一个实施例中，使用非线性函数来使用重定向视频数据来预测源视频数据。 可以在预测的视频数据和源视频数据之间确定差异。 重定向视频数据，非线性函数和差异可以被联合编码为可分级比特流。 可扩展的比特流可以被传输并选择性地解码以产生多个预定目标平台之一的输出视频。