公开(公告)号：US09143678B2

公开(公告)日：2015-09-22

申请号：US13102812

申请日：2011-05-06

申请人： Byung-Kwan Park ,  Ghulam Ahmed Kirmani ,  Ramesh Raskar ,  Rohit Pandharkar

发明人： Byung-Kwan Park ,  Ghulam Ahmed Kirmani ,  Ramesh Raskar ,  Rohit Pandharkar

IPC分类号： H04N5/228 ,  H04N5/232 ,  H04N5/225 ,  G06T7/00 ,  H04N13/00

CPC分类号： H04N5/23229 ,  G06T7/557 ,  G06T2200/21 ,  G06T2207/10052 ,  G06T2207/20048 ,  G06T2207/20212 ,  H04N5/2254 ,  H04N2013/0081

摘要： Provided are an apparatus and method for processing a light field image that is acquired and processed using a mask to spatially modulate a light field. The apparatus includes a lens, a mask to spatially modulate 4D light field data of a scene passing through the lens to include wideband information on the scene, a sensor to detect a 2D image corresponding to the spatially modulated 4D light field data, and a data processing unit to recover the 4D light field data from the 2D image to generate an all-in-focus image.

摘要翻译： 提供了一种用于处理使用掩模获取和处理的光场图像以在空间上调制光场的装置和方法。 该装置包括透镜，用于对通过透镜的场景的4D光场数据进行空间调制以包括场景上的宽带信息的掩模，用于检测对应于空间调制的4D光场数据的2D图像的传感器和数据 处理单元，以从2D图像恢复4D光场数据，以产生全焦点图像。

公开(公告)号：US20120057040A1

公开(公告)日：2012-03-08

申请号：US13102812

申请日：2011-05-06

申请人： Byung Kwan Park ,  Ghulam Ahmed Kirmani ,  Ramesh Raskar ,  Rohit Pandharkar

发明人： Byung Kwan Park ,  Ghulam Ahmed Kirmani ,  Ramesh Raskar ,  Rohit Pandharkar

IPC分类号： H04N5/228

CPC分类号： H04N5/23229 ,  G06T7/557 ,  G06T2200/21 ,  G06T2207/10052 ,  G06T2207/20048 ,  G06T2207/20212 ,  H04N5/2254 ,  H04N2013/0081

摘要： Provided are an apparatus and method for processing a light field image that is acquired and processed using a mask to spatially modulate a light field. The apparatus includes a lens, a mask to spatially modulate 4D light field data of a scene passing through the lens to include wideband information on the scene, a sensor to detect a 2D image corresponding to the spatially modulated 4D light field data, and a data processing unit to recover the 4D light field data from the 2D image to generate an all-in-focus image.

摘要翻译： 提供了一种用于处理使用掩模获取和处理的光场图像以在空间上调制光场的装置和方法。 该装置包括透镜，用于对通过透镜的场景的4D光场数据进行空间调制以包括场景上的宽带信息的掩模，用于检测对应于空间调制的4D光场数据的2D图像的传感器和数据 处理单元，以从2D图像恢复4D光场数据，以产生全焦点图像。

公开(公告)号：US20120300062A1

公开(公告)日：2012-11-29

申请号：US13479185

申请日：2012-05-23

申请人： Rohit Pandharkar ,  Andreas Velten ,  Ramesh Raskar

发明人： Rohit Pandharkar ,  Andreas Velten ,  Ramesh Raskar

IPC分类号： H04N7/18

CPC分类号： G01S17/58 ,  G01S17/89

摘要： In exemplary implementations of this invention, a time of flight camera (ToF camera) can estimate the location, motion and size of a hidden moving object, even though (a) the hidden object cannot be seen directly (or through mirrors) from the vantage point of the ToF camera (including the camera's illumination source and sensor), and (b) the object is in a visually cluttered environment. The hidden object is a NLOS (non-line-of-sight) object. The time of flight camera comprises a streak camera and a laser. In these exemplary implementations, the motion and absolute locations of NLOS moving objects in cluttered environments can be estimated through tertiary reflections of pulsed illumination, using relative time differences of arrival at an array of receivers. Also, the size of NLOS moving objects can be estimated by backprojecting extremas of NLOS moving object time responses.

摘要翻译： 在本发明的示例性实施方式中，飞行时间相机（ToF相机）可以估计隐藏的移动物体的位置，运动和尺寸，即使（a）从有利位置看不到直接（或通过反射镜）隐藏的物体 ToF相机（包括相机的照明源和传感器）的点，（b）物体在视觉上混乱的环境中。 隐藏的对象是一个NLOS（非视距）对象。 飞行时间相机包括条纹相机和激光。 在这些示例性实施方案中，可以使用到达接收器阵列的相对时间差，通过脉冲照明的三次反射来估计NLOS移动物体在杂乱环境中的运动和绝对位置。 此外，NLOS移动对象的大小可以通过反向投影NLOS移动对象时间响应的极值来估计。

公开(公告)号：US09146317B2

公开(公告)日：2015-09-29

申请号：US13479185

申请日：2012-05-23

申请人： Rohit Pandharkar ,  Andreas Velten ,  Ramesh Raskar

发明人： Rohit Pandharkar ,  Andreas Velten ,  Ramesh Raskar

IPC分类号： G01S17/58 ,  G01S17/89

CPC分类号： G01S17/58 ,  G01S17/89

摘要： In exemplary implementations of this invention, a time of flight camera (ToF camera) can estimate the location, motion and size of a hidden moving object, even though (a) the hidden object cannot be seen directly (or through mirrors) from the vantage point of the ToF camera (including the camera's illumination source and sensor), and (b) the object is in a visually cluttered environment. The hidden object is a NLOS (non-line-of-sight) object. The time of flight camera comprises a streak camera and a laser. In these exemplary implementations, the motion and absolute locations of NLOS moving objects in cluttered environments can be estimated through tertiary reflections of pulsed illumination, using relative time differences of arrival at an array of receivers. Also, the size of NLOS moving objects can be estimated by backprojecting extremas of NLOS moving object time responses.

摘要翻译： 在本发明的示例性实施方式中，飞行时间相机（ToF相机）可以估计隐藏的移动物体的位置，运动和尺寸，即使（a）从有利位置看不到直接（或通过反射镜）隐藏的物体 ToF相机（包括相机的照明源和传感器）的点，（b）物体在视觉上混乱的环境中。 隐藏的对象是一个NLOS（非视距）对象。 飞行时间相机包括条纹相机和激光。 在这些示例性实施方案中，可以使用到达接收器阵列的相对时间差异，通过脉冲照明的三次反射来估计NLOS移动物体在杂乱环境中的运动和绝对位置。 此外，NLOS移动对象的大小可以通过反向投影NLOS移动对象时间响应的极值来估计。