公开(公告)号：US07724953B2

公开(公告)日：2010-05-25

申请号：US11533664

申请日：2006-09-20

申请人： Hsiang-Tsun Li ,  Szepo Robert Hung ,  Xiaoyun Jiang

发明人： Hsiang-Tsun Li ,  Szepo Robert Hung ,  Xiaoyun Jiang

IPC分类号： G06K9/34

CPC分类号： H04N5/235 ,  G06K9/38 ,  G06K2209/01 ,  G06T3/40 ,  G06T7/12 ,  G06T2207/20132 ,  G06T2207/30176 ,  H04N1/3873

摘要： Methods and apparatus for processing a captured image of a medium, content on the medium, and a background surrounding the medium are provided. A captured image is processed by 1) improving the visibility of the content by recovering the original appearance of the medium and enhancing the appearance of the content image, 2) removing the background by determining the boundary of the medium, and/or 3) correcting geometric distortion in the content to improve readability. Any of the three processing steps may be used alone or any combination of the three processing steps may be used to process the image. The image processing may operate on the image after it is captured and stored to a memory and may be implemented on an image-capturing device that captures the image. In other embodiments, the image processing is implemented on another device that receives the image from the image-capturing device.

摘要翻译： 提供了处理介质的捕获图像，介质上的内容以及介质周围的背景的方法和装置。 处理拍摄图像1）通过恢复介质的原始外观和增强内容图像的外观来提高内容的可视性，2）通过确定介质的边界来消除背景，和/或3）校正 几何失真的内容提高了可读性。 可以单独使用三个处理步骤中的任何一个，或者可以使用三个处理步骤的任何组合来处理图像。 图像处理可以在被捕获并且被存储到存储器之后对图像进行操作，并且可以在捕获图像的图像捕获装置上实现。 在其他实施例中，图像处理在从图像捕获设备接收图像的另一设备上实现。

公开(公告)号：US08265389B2

公开(公告)日：2012-09-11

申请号：US12167007

申请日：2008-07-02

申请人： Szepo Robert Hung ,  Xiaoyun Jiang ,  Hsiang-Tsun Li

发明人： Szepo Robert Hung ,  Xiaoyun Jiang ,  Hsiang-Tsun Li

IPC分类号： H04N5/228 ,  G06K9/00

CPC分类号： H04N1/62 ,  H04N1/6005 ,  H04N1/628

摘要： Techniques for identifying and enhancing colors in a digital image associated with one or more target color shades. In an embodiment, the target color shades may include a shade of blue associated with the sky, a shade of green associated with outdoor foliage, or the color red. In an embodiment, the blue chroma (Cb) and red chroma (Cr) coordinates of a pixel are evaluated to determine whether to apply an enhancement factor. The enhancement factor may incorporate an exposure index (EI) auxiliary enhancement factor, a color temperature (D) auxiliary enhancement factor, and a luminance (Y) of each pixel. Further aspects for implementing the techniques in software and hardware are disclosed.

摘要翻译： 用于识别和增强与一个或多个目标色调相关联的数字图像中的颜色的技术。 在一个实施例中，目标色调可以包括与天空相关联的蓝色阴影，与室外叶子相关的绿色阴影或红色。 在一个实施例中，评估像素的蓝色色度（Cb）和红色色度（Cr）坐标以确定是否应用增强因子。 增强因子可以包括曝光指数（EI）辅助增强因子，色温（D）辅助增强因子和每个像素的亮度（Y）。 公开了用于实现软件和硬件技术的其它方面。

公开(公告)号：US20100002090A1

公开(公告)日：2010-01-07

申请号：US12167007

申请日：2008-07-02

申请人： Szepo Robert Hung ,  Xiaoyun Jiang ,  Hsiang-Tsun Li

发明人： Szepo Robert Hung ,  Xiaoyun Jiang ,  Hsiang-Tsun Li

IPC分类号： H04N5/228 ,  G06K9/00

CPC分类号： H04N1/62 ,  H04N1/6005 ,  H04N1/628

摘要： Techniques for identifying and enhancing colors in a digital image associated with one or more target color shades. In an embodiment, the target color shades may include a shade of blue associated with the sky, a shade of green associated with outdoor foliage, or the color red. In an embodiment, the blue chroma (Cb) and red chroma (Cr) coordinates of a pixel are evaluated to determine whether to apply an enhancement factor. The enhancement factor may incorporate an exposure index (EI) auxiliary enhancement factor, a color temperature (D) auxiliary enhancement factor, and a luminance (Y) of each pixel. Further aspects for implementing the techniques in software and hardware are disclosed.

摘要翻译： 用于识别和增强与一个或多个目标色调相关联的数字图像中的颜色的技术。 在一个实施例中，目标色调可以包括与天空相关联的蓝色阴影，与室外叶子相关的绿色阴影或红色。 在一个实施例中，评估像素的蓝色色度（Cb）和红色色度（Cr）坐标以确定是否应用增强因子。 增强因子可以包括曝光指数（EI）辅助增强因子，色温（D）辅助增强因子和每个像素的亮度（Y）。 公开了用于实现软件和硬件技术的其它方面。

公开(公告)号：US08384801B2

公开(公告)日：2013-02-26

申请号：US11831612

申请日：2007-07-31

申请人： Szepo Robert Hung ,  Hsiang-Tsun Li ,  Jingqiang Li

发明人： Szepo Robert Hung ,  Hsiang-Tsun Li ,  Jingqiang Li

IPC分类号： H04N5/235

CPC分类号： G03B7/093 ,  H04N5/2351 ,  H04N5/2353 ,  H04N5/243 ,  H04N2007/145

摘要： A device has a processing unit to implement a set of operations to use both luma and chroma information from a scene of an image to dynamically adjust exposure time and sensor gain. The processing unit collects bright near grey pixels and high chroma pixels in the scene. Based on the collected pixels, brightness of the near grey pixels is increased to a predetermined level without saturation. At the same time, the high chroma pixels are kept away from saturation.

摘要翻译： 一种设备具有处理单元，用于实现一组操作，以使用来自图像场景的亮度和色度信息来动态地调整曝光时间和传感器增益。 处理单元收集场景中明亮的近灰色像素和高色度像素。 基于所收集的像素，近灰色像素的亮度增加到预定的水平而不饱和。 同时，高色度像素远离饱和度。

公开(公告)号：US08023758B2

公开(公告)日：2011-09-20

申请号：US11835220

申请日：2007-08-07

申请人： Szepo Robert Hung ,  Jingqiang Li ,  Hsiang-Tsun Li ,  Xin Zhong

发明人： Szepo Robert Hung ,  Jingqiang Li ,  Hsiang-Tsun Li ,  Xin Zhong

IPC分类号： G06K9/40

CPC分类号： G06T5/006 ,  G06T3/4007

摘要： A two-dimensional (2D) mesh is applied over a distortion surface to approximate a lens roll-off distortion pattern. The process to apply the 2D mesh distributes a plurality of grid points among the distortion pattern and sub-samples the distortion pattern to derive corrected digital gains at each grid location. Non-grid pixels underlying grid blocks having a grid point at each corner are adjusted based on the approximation of the lens roll-off for the grid points of the grid block. In one example, bilinear interpolation is used. The techniques universally correct lens roll-off distortion irregardless of the distortion pattern shape or type. The technique may also correct for green channel imbalance.

摘要翻译： 将二维（2D）网格施加在失真表面上以近似透镜滚降失真图案。 应用2D网格的过程在失真模式中分配多个网格点，并对失真模式进行子采样，以在每个网格位置导出校正的数字增益。 基于网格块的网格点的镜头滚降的近似来调整在每个角上具有网格点的网格块下方的非网格像素。 在一个示例中，使用双线性插值。 这些技术无损于失真图案的形状或类型，普遍地校正镜头滚降。 该技术也可能纠正绿色通道不平衡。

公开(公告)号：US20080101690A1

公开(公告)日：2008-05-01

申请号：US11553100

申请日：2006-10-26

申请人： De Dzwo Hsu ,  Hsiang-Tsun Li ,  Szepo Robert Hung

发明人： De Dzwo Hsu ,  Hsiang-Tsun Li ,  Szepo Robert Hung

IPC分类号： G06K9/00 ,  H04N1/46

CPC分类号： H04N9/735 ,  H04N1/6027 ,  H04N1/6077 ,  H04N1/6086 ,  H04N1/6088

摘要： Automatic white balance of captured images can be performed based on a gray world assumption. One aspect relates to an apparatus comprising a collection module and a processor. The collection module is configured to accumulate (a) red/green and blue/green color ratio values of a plurality of pixels in a captured image for each cluster of a plurality of clusters and (b) a number of pixels having red/green and blue/green color ratios associated with each cluster, the clusters comprising daylight, fluorescent, incandescent, and a outdoor green zone. The processor is configured to determine which cluster has a highest accumulated number of pixels, and use the cluster with the highest accumulated number of pixels to perform white balancing for the captured image.

摘要翻译： 可以基于灰色世界假设执行拍摄图像的自动白平衡。 一个方面涉及一种包括收集模块和处理器的装置。 收集模块被配置为在多个聚类的每个聚类的累积图像中累积（a）多个像素中的多个像素的红色/绿色和蓝色/绿色比值，以及（b）具有红/绿色的像素数， 与每个簇相关联的蓝/绿色比，簇包括日光，荧光，白炽和室外绿色区。 处理器被配置为确定哪个集群具有最高的累积像素数，并且使用具有最高累积像素数的集群来执行拍摄图像的白平衡。

公开(公告)号：US08111268B2

公开(公告)日：2012-02-07

申请号：US11409456

申请日：2006-04-20

申请人： Hsiang-Tsun Li ,  Kalin Atanassov ,  Szepo Robert Hung

发明人： Hsiang-Tsun Li ,  Kalin Atanassov ,  Szepo Robert Hung

IPC分类号： G09G5/00 ,  G06F17/00 ,  G06T1/00

CPC分类号： G06T3/4084

摘要： A method and apparatus for down scaling image data is disclosed. One method controls a phase for an M/N filter, where N represents a number of input samples, and M represents a number of output samples. N is greater than M. Another method may switch between an M/N filter and a phase-controlled M/N filter.

摘要翻译： 公开了一种用于缩小图像数据的方法和装置。 一种方法控制用于M / N滤波器的相位，其中N表示输入样本的数量，M表示输出样本的数量。 N大于M.另一种方法可以在M / N滤波器和相位控制的M / N滤波器之间切换。

公开(公告)号：US07912279B2

公开(公告)日：2011-03-22

申请号：US11553100

申请日：2006-10-26

申请人： De Dzwo Hsu ,  Hsiang-Tsun Li ,  Szepo Robert Hung

发明人： De Dzwo Hsu ,  Hsiang-Tsun Li ,  Szepo Robert Hung

IPC分类号： G06K9/00 ,  H04N1/46 ,  G06K9/34

CPC分类号： H04N9/735 ,  H04N1/6027 ,  H04N1/6077 ,  H04N1/6086 ,  H04N1/6088

摘要： Automatic white balance of captured images can be performed based on a gray world assumption. One aspect relates to an apparatus comprising a collection module and a processor. The collection module is configured to accumulate (a) red/green and blue/green color ratio values of a plurality of pixels in a captured image for each cluster of a plurality of clusters and (b) a number of pixels having red/green and blue/green color ratios associated with each cluster, the clusters comprising daylight, fluorescent, incandescent, and a outdoor green zone. The processor is configured to determine which cluster has a highest accumulated number of pixels, and use the cluster with the highest accumulated number of pixels to perform white balancing for the captured image.

摘要翻译： 可以基于灰色世界假设执行拍摄图像的自动白平衡。 一个方面涉及一种包括收集模块和处理器的装置。 收集模块被配置为在多个聚类的每个聚类的累积图像中累积（a）多个像素中的多个像素的红色/绿色和蓝色/绿色比值，以及（b）具有红/绿色的像素数， 与每个簇相关联的蓝/绿色比，簇包括日光，荧光，白炽和室外绿色区。 处理器被配置为确定哪个集群具有最高的累积像素数，并且使用具有最高累积像素数的集群来执行拍摄图像的白平衡。

公开(公告)号：US07860334B2

公开(公告)日：2010-12-28

申请号：US11352483

申请日：2006-02-09

申请人： Hsiang-Tsun Li ,  Szepo Robert Hung

发明人： Hsiang-Tsun Li ,  Szepo Robert Hung

IPC分类号： G06K9/40

CPC分类号： H04N9/07 ,  H04N5/3675 ,  H04N9/045

摘要： This disclosure describes adaptive filtering techniques to improve the quality of captured imagery, such as video or still images. In particular, this disclosure describes adaptive filtering techniques that filter each pixel as a function of a set of surrounding pixels. An adaptive image filter may compare image information associated with a pixel of interest to image information associated with a set of surrounding pixels by, for example, computing differences between the image information associated with the pixel of interest and each of the surrounding pixels of the set. The computed differences can be used in a variety of ways to filter image information of the pixel of interest. In some embodiments, for example, the adaptive image filter may include both a low pass component and high pass component that adjust as a function of the computed differences.

摘要翻译： 本公开描述了自适应滤波技术，以改善所捕获图像的质量，例如视频或静止图像。 特别地，本公开描述了根据一组周围像素来滤除每个像素的自适应滤波技术。 自适应图像滤波器可以通过例如计算与感兴趣像素相关联的图像信息与该组的每个周围像素之间的差异来比较与感兴趣像素相关联的图像信息与与一组周围像素相关联的图像信息 。 计算的差异可以以各种方式用于过滤感兴趣像素的图像信息。 在一些实施例中，例如，自适应图像滤波器可以包括作为所计算的差异的函数调整的低通分量和高通分量两者。

公开(公告)号：US20100182463A1

公开(公告)日：2010-07-22

申请号：US12710681

申请日：2010-02-23

申请人： Szepo Robert Hung ,  Hsiang-Tsun Li

发明人： Szepo Robert Hung ,  Hsiang-Tsun Li

IPC分类号： H04N9/64

CPC分类号： H04N5/367 ,  H04N9/045

摘要： A digital image system identifies defective pixels of a digital image sensor based on sensor values of pixels positioned in at least two dimensions on the digital image sensor. The exemplary imaging system includes a buffer for receiving sensor values that are each associated with a pixel in the digital image sensor and electronics for comparing the sensor value associated with a test pixel to the sensor values of pixels positioned in at least two dimensions on the digital image sensor. The electronics determines whether the test pixel is a defective pixel based on the comparison.

摘要翻译： 数字图像系统基于位于数字图像传感器上的至少二维的像素的传感器值来识别数字图像传感器的缺陷像素。 示例性成像系统包括用于接收每个与数字图像传感器中的像素相关联的传感器值的缓冲器和用于将与测试像素相关联的传感器值与位于数字图像上至少二维的像素的传感器值进行比较的电子装置 图像传感器。 电子设备基于比较来确定测试像素是否是缺陷像素。