公开(公告)号：US20110164152A1

公开(公告)日：2011-07-07

申请号：US13119541

申请日：2008-09-24

申请人： Li Hong ,  Mark Takita ,  Thomas W. Novak

发明人： Li Hong ,  Mark Takita ,  Thomas W. Novak

IPC分类号： H04N5/225

CPC分类号： G03B13/18

摘要： A system for providing an adjusted image of a scene includes an optical assembly, a capturing system coupled to the optical assembly, and a control system. The optical assembly is adjustable to alternatively be focused on a first focal area and a second focal area that is different than the first focal area. The capturing system captures a first frame of the scene when the optical assembly is focused at the first focal area, and a second frame of the scene when the optical assembly is focused at the second focal area. The first frame includes a plurality of first pixels and the second frame includes a plurality of second pixels. The control system analyzes the first frame and the second frame and utilizes graph cuts techniques to assign a depth label to at least a portion of the first frame.

摘要翻译： 用于提供场景的调整图像的系统包括光学组件，耦合到光学组件的捕获系统和控制系统。 光学组件可调节以可选地聚焦在与第一焦点区域不同的第一焦点区域和第二焦点区域上。 当光学组件聚焦在第一焦点区域时，捕获系统捕获场景的第一帧，以及当光学组件聚焦在第二焦点区域时的场景的第二帧。 第一帧包括多个第一像素，第二帧包括多个第二像素。 控制系统分析第一帧和第二帧，并利用图切割技术将深度标签分配给第一帧的至少一部分。

公开(公告)号：US20150254814A1

公开(公告)日：2015-09-10

申请号：US14437966

申请日：2013-03-07

申请人： Gazi ALI ,  Li HONG ,  Radka TEZAUR ,  Mark TAKITA ,  NIKON CORPORATION

发明人： Gazi Ali ,  Li Hong ,  Radka Tezaur ,  Mark Takita

IPC分类号： G06T5/00 ,  G06T7/00 ,  G06T11/00 ,  G06K9/40 ,  G06K9/52

CPC分类号： G06T5/003 ,  G06K9/40 ,  G06K9/527 ,  G06K2009/4666 ,  G06T5/002 ,  G06T5/006 ,  G06T11/003 ,  G06T2207/10004 ,  G06T2207/20012 ,  G06T2207/20021 ,  G06T2207/20104 ,  G06T2207/20182 ,  G06T2207/20201 ,  G06T2210/36

摘要： A group point spread function (238) for a blurry image (18) can be determined by dividing the blurry image (18) into a plurality of image regions (232), estimating a region point spread function (234) for at least two of the image regions (232); and utilizing at least two of the region point spread functions (234) to determine the group point spread function (238). The group point spread function (238) can be determined by the decomposition of the estimated region point spread functions (234) into some basis function, and subsequently determining a representative coefficient from the basis functions of the region point spread functions (234) to generate the group point spread function (238).

摘要翻译： 可以通过将模糊图像（18）划分成多个图像区域（232）来确定用于模糊图像（18）的组点扩散函数（238），估计用于至少两个的区域点扩展函数（234） 图像区域（232）; 以及利用所述区域点扩展函数（234）中的至少两个来确定所述群点扩散函数（238）。 可以通过将估计的区域点扩散函数（234）分解成某些基函数来确定群点扩散函数（238），随后根据区域点扩展函数（234）的基函数确定代表系数，以产生 组点扩散函数（238）。

公开(公告)号：US09025043B2

公开(公告)日：2015-05-05

申请号：US13119541

申请日：2008-09-24

申请人： Li Hong ,  Mark Takita ,  W. Thomas Novak

发明人： Li Hong ,  Mark Takita ,  W. Thomas Novak

IPC分类号： H04N5/228 ,  H04N5/262 ,  G06K9/34 ,  G03B13/18

CPC分类号： G03B13/18

摘要： A system for providing an adjusted image of a scene includes an optical assembly, a capturing system coupled to the optical assembly, and a control system. The optical assembly is adjustable to alternatively be focused on a first focal area and a second focal area that is different than the first focal area. The capturing system captures a first frame of the scene when the optical assembly is focused at the first focal area, and a second frame of the scene when the optical assembly is focused at the second focal area. The first frame includes a plurality of first pixels and the second frame includes a plurality of second pixels. The control system analyzes the first frame and the second frame and utilizes graph cuts techniques to assign a depth label to at least a portion of the first frame.

摘要翻译： 用于提供场景的调整图像的系统包括光学组件，耦合到光学组件的捕获系统和控制系统。 光学组件可调节以可选地聚焦在与第一焦点区域不同的第一焦点区域和第二焦点区域上。 当光学组件聚焦在第一焦点区域时，捕获系统捕获场景的第一帧，以及当光学组件聚焦在第二焦点区域时的场景的第二帧。 第一帧包括多个第一像素，第二帧包括多个第二像素。 控制系统分析第一帧和第二帧，并利用图切割技术将深度标签分配给第一帧的至少一部分。

公开(公告)号：US20080192064A1

公开(公告)日：2008-08-14

申请号：US11704404

申请日：2007-02-08

申请人： Li Hong ,  Maki Suzuki ,  Mark Takita ,  W. Thomas Novak

发明人： Li Hong ,  Maki Suzuki ,  Mark Takita ,  W. Thomas Novak

IPC分类号： G09G5/00

CPC分类号： H04N5/235 ,  G06T5/002 ,  G06T5/009 ,  G06T5/20 ,  G06T5/40 ,  G06T5/50 ,  G06T2207/10024 ,  G06T2207/20012 ,  G06T2207/20192 ,  H04N5/2355 ,  H04N5/243 ,  H04N2101/00

摘要： An image apparatus (10) for providing an adjusted image (242) of a scene (236) includes a capturing system (16) and a control system (24). The capturing system (16) captures an underexposed first frame (240) that is defined by a plurality of pixels (240A), including a first pixel and a second pixel. The first frame (240) includes at least one of a first texture region (240S) and a second texture region (240T). The control system (24) can analyze information from the pixels (240A) and determine if the first pixel has captured a portion of the first texture region (240S) or the second texture region (240T). Further, the control system (16) can analyze information from the pixels (240A) and to determine if the second pixel has captured a portion of the first texture region (240S) or the second texture region (240T). With this design, the control system (16) can reduce the noise in the first frame (240) to provide a well exposed adjusted image (242).

摘要翻译： 用于提供场景（236）的调整图像（242）的图像设备（10）包括捕获系统（16）和控制系统（24）。 捕获系统（16）捕获由包括第一像素和第二像素的多个像素（240A）限定的曝光不足的第一帧（240）。 第一框架（240）包括第一纹理区域（240S）和第二纹理区域（240T）中的至少一个。 控制系统（24）可以分析来自像素（240A）的信息，并且确定第一像素是否已经捕获了第一纹理区域（240S）或第二纹理区域（240T）的一部分。 此外，控制系统（16）可以分析来自像素（240A）的信息，并且确定第二像素是否已经捕获了第一纹理区域（240S）或第二纹理区域（240T）的一部分。 利用这种设计，控制系统（16）可以减少第一帧（240）中的噪声，以提供良好曝光的调整图像（242）。

公开(公告)号：US20080175576A1

公开(公告)日：2008-07-24

申请号：US11655501

申请日：2007-01-18

申请人： Li Hong ,  Mark Takita ,  W. Thomas Novak

发明人： Li Hong ,  Mark Takita ,  W. Thomas Novak

IPC分类号： G03B13/18

CPC分类号： G03B13/18

摘要： A camera (210) for providing an adjusted image (214) of a scene (12) includes an apparatus frame (224), an optical assembly (222), a capturing system (226), and a control system (232). The optical assembly (222) is adjustable to alternatively be focused on a first focal area (356A) and a second focal area (356B) that is different than the first focal area (356A). The capturing system (226) captures a first captured image (360A) when the optical assembly (222) is focused at the first focal area (356A) and captures a second captured image (360B) when the optical assembly (222) is focused at the second focal area (356B). The control system (232) provides the adjusted image (214) of the scene (12) based upon the first captured image (360A) and the second captured image (360B). Additionally, the control system (232) can perform object depth extraction of one or more objects (16) (18) (20) in the scene (12). Alternatively, the multiple captured images (360A) (360B) can be adjusted by a separate adjustment system (680).

摘要翻译： 用于提供场景（12）的调整图像（214）的相机（210）包括装置框架（224），光学组件（222），捕获系统（226）和控制系统（232）。 光学组件（222）可调节以可选地聚焦在与第一焦点区域（356A）不同的第一焦点区域（356A）和第二焦点区域（356B）上。 当光学组件（222）被聚焦在第一聚焦区域（356A）时，捕获系统（226）捕获第一捕获图像（360A），并且当光学组件（222））捕获第二捕获图像（360B） 集中在第二个重点领域（356 B）。 控制系统（232）基于第一拍摄图像（360A）和第二拍摄图像（360B）提供场景（12）的调整图像（214）。 此外，控制系统（232）可以对场景（12）中的一个或多个物体（16）（18）（20）进行物体深度提取。 或者，可以通过单独的调整系统（680）来调整多个拍摄图像（360A）（360B）。

公开(公告)号：US07889207B2

公开(公告)日：2011-02-15

申请号：US11704404

申请日：2007-02-08

申请人： Li Hong ,  Maki Suzuki ,  Mark Takita ,  W. Thomas Novak

发明人： Li Hong ,  Maki Suzuki ,  Mark Takita ,  W. Thomas Novak

IPC分类号： G06T17/00 ,  G09G5/00 ,  H04N5/235 ,  H04N7/12 ,  G06K9/40 ,  G03B7/00

CPC分类号： H04N5/235 ,  G06T5/002 ,  G06T5/009 ,  G06T5/20 ,  G06T5/40 ,  G06T5/50 ,  G06T2207/10024 ,  G06T2207/20012 ,  G06T2207/20192 ,  H04N5/2355 ,  H04N5/243 ,  H04N2101/00

摘要： An image apparatus (10) for providing an adjusted image (242) of a scene (236) includes a capturing system (16) and a control system (24). The capturing system (16) captures an underexposed first frame (240) that is defined by a plurality of pixels (240A), including a first pixel and a second pixel. The first frame (240) includes at least one of a first texture region (240S) and a second texture region (240T). The control system (24) can analyze information from the pixels (240A) and determine if the first pixel has captured a portion of the first texture region (240S) or the second texture region (240T). Further, the control system (16) can analyze information from the pixels (240A) and to determine if the second pixel has captured a portion of the first texture region (240S) or the second texture region (240T). With this design, the control system (16) can reduce the noise in the first frame (240) to provide a well exposed adjusted image (242).

摘要翻译： 用于提供场景（236）的调整图像（242）的图像设备（10）包括捕获系统（16）和控制系统（24）。 捕获系统（16）捕获由包括第一像素和第二像素的多个像素（240A）限定的曝光不足的第一帧（240）。 第一框架（240）包括第一纹理区域（240S）和第二纹理区域（240T）中的至少一个。 控制系统（24）可以分析来自像素（240A）的信息，并且确定第一像素是否已经捕获了第一纹理区域（240S）或第二纹理区域（240T）的一部分。 此外，控制系统（16）可以分析来自像素（240A）的信息，并且确定第二像素是否已经捕获了第一纹理区域（240S）或第二纹理区域（240T）的一部分。 利用这种设计，控制系统（16）可以减少第一帧（240）中的噪声，以提供良好曝光的调整图像（242）。

公开(公告)号：US07720371B2

公开(公告)日：2010-05-18

申请号：US11655501

申请日：2007-01-18

申请人： Li Hong ,  Mark Takita ,  W. Thomas Novak

发明人： Li Hong ,  Mark Takita ,  W. Thomas Novak

IPC分类号： G03B3/10 ,  G03B13/34 ,  H04N5/232

CPC分类号： G03B13/18

摘要： A camera (210) for providing an adjusted image (214) of a scene (12) includes an apparatus frame (224), an optical assembly (222), a capturing system (226), and a control system (232). The optical assembly (222) is adjustable to alternatively be focused on a first focal area (356A) and a second focal area (356B) that is different than the first focal area (356A). The capturing system (226) captures a first captured image (360A) when the optical assembly (222) is focused at the first focal area (356A) and captures a second captured image (360B) when the optical assembly (222) is focused at the second focal area (356B). The control system (232) provides the adjusted image (214) of the scene (12) based upon the first captured image (360A) and the second captured image (360B). Additionally, the control system (232) can perform object depth extraction of one or more objects (16) (18) (20) in the scene (12). Alternatively, the multiple captured images (360A) (360B) can be adjusted by a separate adjustment system (680).

摘要翻译： 用于提供场景（12）的调整图像（214）的相机（210）包括装置框架（224），光学组件（222），捕获系统（226）和控制系统（232）。 光学组件（222）可调节以可选地聚焦在与第一焦点区域（356A）不同的第一焦点区域（356A）和第二焦点区域（356B）上。 当光学组件（222）被聚焦在第一焦点区域（356A）时，捕获系统（226）捕获第一捕获图像（360A），并且当光学组件（222）被聚焦在第二捕获图像 第二重点领域（356B）。 控制系统（232）基于第一拍摄图像（360A）和第二拍摄图像（360B）提供场景（12）的调整图像（214）。 此外，控制系统（232）可以对场景（12）中的一个或多个物体（16）（18）（20）进行物体深度提取。 或者，多个拍摄图像（360A）（360B）可以通过单独的调整系统（680）进行调整。

公开(公告)号：US08472744B2

公开(公告)日：2013-06-25

申请号：US12810486

申请日：2009-05-26

申请人： Li Hong

发明人： Li Hong

IPC分类号： G06K9/00 ,  G06T5/00 ,  H04N5/232

CPC分类号： G06T5/001 ,  G06T5/003 ,  G06T7/0002 ,  G06T2207/30168 ,  H04N5/23212 ,  H04N5/23229 ,  H04N5/23248 ,  H04N5/23267

摘要： A method for estimating whether an image (14) is either blurred or sharp includes the steps of (i) determining an image gradient histogram distrbution (410) of at least a portion of the image (14), (ii) comparing at least a portion of the image gradient histogram distribution (410) to a Gaussian model (414), and (iii) estimating a defocus blur size of at least a portion of the image (14) Additional methods for evaluating whether the image (14) has motion blur are provided herein For example, a dominant gradient orientation can be detected by histogram analysis (716), and the dominant gradient orientation (718) can be used to determine a possible motion blur direction (720) Alternatively, a dominant gradient orientation can be detected using principal component analysis (“PCA”) on the image.

摘要翻译： 一种用于估计图像（14）是模糊还是尖锐的方法包括以下步骤：（i）确定图像（14）的至少一部分的图像梯度直方图分布（410），（ii）比较至少一个 图像梯度直方图分布（410）的部分与高斯模型（414）相关联，以及（iii）估计图像的至少一部分的散焦模糊尺寸（14）用于评估图像（14）是否具有运动的附加方法 模糊在这里提供例如，可以通过直方图分析（716）检测主要梯度取向，并且可以使用主梯度取向（718）来确定可能的运动模糊方向（720）。或者，主要梯度取向可以是 使用主成分分析（“PCA”）检测图像。

公开(公告)号：US06782143B1

公开(公告)日：2004-08-24

申请号：US09476221

申请日：1999-12-30

申请人： Simant Dube ,  Li Hong

发明人： Simant Dube ,  Li Hong

IPC分类号： G06K932

CPC分类号： G06T3/403

摘要： In a first aspect, a method and an apparatus for processing an image classifies the image content of a portion of the image, and in response thereto, selects between linear interpolation (e.g., cubic) and non-linear interpolation (median) methods to interpolate data points for the portion of the image. In one embodiment, non-linear interpolation is selected if the image content of the portion of the image is bi-level, or if portion of the image includes an edge and lacks a specified measure of correlation along a line. Linear interpolation is used in portions where the image content does not include an identified edge and in portions where there is an identified edge in combination with an identified edge direction or a path of isobrightness. In a second aspect, a method and apparatus for use in classifying the image content of a portion of an image calculates a reference value from pixel values for a portion of an image and generates data indicative of which pixel values are greater than the reference value and which pixel values are less than the reference value.

摘要翻译： 在第一方面，一种用于处理图像的方法和装置对图像的一部分的图像内容进行分类，并且响应于此，在线性内插（例如，立方体）和非线性内插（中值）方法之间进行内插 图像部分的数据点。 在一个实施例中，如果图像的部分的图像内容是双电平的，或者如果图像的一部分包括边缘并且沿着一条线缺乏相关的指定度量，则选择非线性内插。 线性内插用于图像内容不包括识别边缘的部分，并且在识别的边缘方向或等离子体路径中存在识别边缘的部分中。 在第二方面中，用于对图像的一部分进行分类的图像内容使用的方法和装置根据图像的一部分的像素值计算参考值，并产生指示哪些像素值大于参考值的数据，以及 哪些像素值小于参考值。

公开(公告)号：US06633677B1

公开(公告)日：2003-10-14

申请号：US09475367

申请日：1999-12-30

申请人： Simant Dube ,  Li Hong

发明人： Simant Dube ,  Li Hong

IPC分类号： G06K936

CPC分类号： G06T17/00 ,  G06T9/004

摘要： A component of an image processor receives at least a portion of one or more reconstructed versions of an image including a causal context of an object pixel of the image, and provides a prediction for the object pixel computed as a weighted sum according to at least one measure of correlation and a weighting policy. A component receives a first prediction of an object pixel and reconstructed versions of an image, and provides a second prediction for the object pixel in accordance with the first prediction for the object pixel and a substantially mean error for the context. A component receives one or more prediction differences versions of the image including a causal context prediction difference of an object prediction difference of the image, and provides a prediction for the object prediction difference computed as a weighted sum according to at least one measure of correlation and a weighting policy.

摘要翻译： 图像处理器的组件接收包括图像的对象像素的因果上下文的图像的一个或多个重建版本的至少一部分，并且根据至少一个对像素计算的对象像素作为加权和来提供预测 衡量相关性和加权政策。 组件接收对象像素和图像的重建版本的第一预测，并且根据对象像素的第一预测和上下文的基本平均误差为对象像素提供第二预测。 组件接收图像的一个或多个预测差异版本，包括图像的对象预测差异的因果上下文预测差异，并且根据至少一个相关度测量提供作为加权和计算的对象预测差异的预测， 加权政策。