公开(公告)号：US08872946B2

公开(公告)日：2014-10-28

申请号：US13485056

申请日：2012-05-31

申请人： Guy Cote ,  Sheng Lin ,  Suk Hwan Lim ,  D. Amnon Silverstein ,  David Hayward ,  Simon Wolfenden Butler ,  Joseph Anthony Petolino, Jr. ,  Joseph P. Bratt

发明人： Guy Cote ,  Sheng Lin ,  Suk Hwan Lim ,  D. Amnon Silverstein ,  David Hayward ,  Simon Wolfenden Butler ,  Joseph Anthony Petolino, Jr. ,  Joseph P. Bratt

IPC分类号： H04N5/217

CPC分类号： H04N5/217 ,  H04N5/2176 ,  H04N5/357

摘要： Systems and methods for processing raw image data are provided. One example of such a system may include memory to store image data in raw format from a digital imaging device and an image signal processor to process the image data. The image signal processor may include data conversion logic and a raw image processing pipeline. The data conversion logic may convert the image data into a signed format to preserve negative noise from the digital imaging device. The raw image processing pipeline may at least partly process the image data in the signed format. The raw image processing pipeline may also include, among other things, black level compensation logic, fixed pattern noise reduction logic, temporal filtering logic, defective pixel correction logic, spatial noise filtering logic, lens shading correction logic, and highlight recovery logic.

摘要翻译： 提供了处理原始图像数据的系统和方法。 这种系统的一个示例可以包括存储器，以存储来自数字成像设备的原始格式的图像数据和图像信号处理器来处理图像数据。 图像信号处理器可以包括数据转换逻辑和原始图像处理流水线。 数据转换逻辑可以将图像数据转换为带符号格式以保护来自数字成像装置的负噪声。 原始图像处理流水线可以至少部分地以签名格式处理图像数据。 原始图像处理流水线还可以包括黑电平补偿逻辑，固定图案噪声降低逻辑，时间滤波逻辑，缺陷像素校正逻辑，空间噪声滤波逻辑，透镜阴影校正逻辑和高亮恢复逻辑。

公开(公告)号：US08654853B2

公开(公告)日：2014-02-18

申请号：US13222118

申请日：2011-08-31

申请人： Guy Cote ,  Anthony Peter Joch ,  Lowell L. Winger

发明人： Guy Cote ,  Anthony Peter Joch ,  Lowell L. Winger

IPC分类号： H04B1/66

CPC分类号： H04N19/112 ,  H04N19/16 ,  H04N19/176 ,  H04N19/40 ,  H04N19/42 ,  H04N19/513 ,  H04N19/61

摘要： A method for transcoding from an MPEG-2 format to a VC-1 format is disclosed. The method generally comprises the steps of (A) decoding an input video stream in the MPEG-2 format to generate a picture; (B) determining a mode indicator for the picture; and (C) coding the picture into an output video stream in the VC-1 format using one of (i) a VC-1 field mode coding and (ii) a VC-1 frame mode coding as determined from the mode indicator.

摘要翻译： 公开了一种从MPEG-2格式转换为VC-1格式的方法。 该方法通常包括以下步骤：（A）以MPEG-2格式对输入视频流进行解码以产生图像; （B）确定图像的模式指示符; 以及（C）使用（i）从模式指示符确定的VC-1场模式编码和（ii）VC-1帧模式编码中的一个将图像编码为VC-1格式的输出视频流。

公开(公告)号：US20130322753A1

公开(公告)日：2013-12-05

申请号：US13485421

申请日：2012-05-31

申请人： Suk Hwan Lim ,  D. Amnon Silverstein ,  Guy Cote ,  Steven David Hordley ,  Graham Finlayson ,  Weichun Ku ,  Joseph P. Bratt

发明人： Suk Hwan Lim ,  D. Amnon Silverstein ,  Guy Cote ,  Steven David Hordley ,  Graham Finlayson ,  Weichun Ku ,  Joseph P. Bratt

IPC分类号： G06T5/00

CPC分类号： G06T5/001 ,  G06K9/38 ,  G06T1/20 ,  G06T5/002 ,  G06T5/003 ,  G06T5/008 ,  G06T5/50 ,  G06T2207/10024 ,  G06T2207/20012 ,  G06T2207/20028 ,  G06T2207/20208

摘要： Systems and methods for local tone mapping are provided. In one example, an electronic device includes an electronic display, an imaging device, and an image signal processor. The electronic display may display images of a first bit depth, and the imaging device may include an image sensor that obtains image data of a higher bit depth than the first bit depth. The image signal processor may process the image data, and may include local tone mapping logic that may apply a spatially varying local tone curve to a pixel of the image data to preserve local contrast when displayed on the display. The local tone mapping logic may smooth the local tone curve applied to the intensity difference between the pixel and another nearby pixel exceeds a threshold.

公开(公告)号：US20130321672A1

公开(公告)日：2013-12-05

申请号：US13485124

申请日：2012-05-31

申请人： D. Amnon Silverstein ,  Sheng Lin ,  Suk Hwan Lim ,  Guy Cote ,  Haitao Guo

发明人： D. Amnon Silverstein ,  Sheng Lin ,  Suk Hwan Lim ,  Guy Cote ,  Haitao Guo

IPC分类号： H04N5/228 ,  H04N5/00

CPC分类号： G06T5/005 ,  H04N5/365

摘要： The present disclosure generally relates to systems and methods for image data processing. In certain embodiments, an image processing pipeline may collect statistics associated with fixed pattern noise of image data by receiving a first frame of the image data comprising a plurality of pixels. The image processing pipeline may then determine a sum of a first plurality of pixel values that correspond to at least a first portion of the plurality of pixels such that each pixel in at least the first portion of the plurality of pixels is disposed along a first axis within the frame of the image data. After determining the sum of the first plurality of pixel values, the image processing pipeline may store the sum of the first plurality of pixel values in a memory such that the sum of the first plurality of pixel values represent the statistics.

摘要翻译： 本公开通常涉及用于图像数据处理的系统和方法。 在某些实施例中，图像处理流水线可以通过接收包括多个像素的图像数据的第一帧来收集与图像数据的固定模式噪声相关联的统计信息。 然后，图像处理流水线可以确定对应于多个像素的至少第一部分的第一多个像素值的和，使得至少第一部分中的每个像素沿着第一轴设置 在图像数据的帧内。 在确定第一多个像素值的和之后，图像处理流水线可以将第一多个像素值的和存储在存储器中，使得第一多个像素值的和代表统计。

公开(公告)号：US20130121403A1

公开(公告)日：2013-05-16

申请号：US13419294

申请日：2012-03-13

申请人： Guy Cote

发明人： Guy Cote

IPC分类号： H04N7/26

CPC分类号： H04N19/198 ,  H04N19/126 ,  H04N19/172 ,  H04N19/176 ,  H04N19/196

摘要： A method for encoding a picture is disclosed. The method generally includes the steps of (A) generating at least one respective macroblock statistic from each of a plurality of macroblocks in the picture, (B) generating at least one global statistic from the picture and (C) generating a respective macroblock quantization parameter for each of the macroblocks based on both (i) the at least one respective macroblock statistic and (ii) said at least one global statistic.

摘要翻译： 公开了一种图像编码方法。 该方法通常包括以下步骤：（A）从图像中的多个宏块中的每一个生成至少一个相应的宏块统计量，（B）从图像生成至少一个全局统计量，（C）生成相应的宏块量化参数 基于（i）至少一个相应的宏块统计量和（ii）所述至少一个全局统计量，对于每个宏块。

公开(公告)号：US08358319B2

公开(公告)日：2013-01-22

申请号：US12789815

申请日：2010-05-28

申请人： Guy Cote ,  Jeffrey E. Frederiksen

发明人： Guy Cote ,  Jeffrey E. Frederiksen

IPC分类号： G09G5/00

CPC分类号： H04N9/045 ,  G06T3/4015 ,  H04N5/3675 ,  H04N2209/046

摘要： Various techniques are provided herein for processing raw image data acquired using a digital image sensor in an image processing pipeline of an image signal processing system. In one embodiment, the image processing pipeline may first process the raw image data (e.g., Bayer image data) for the detection and correction of defective pixels. Next, the image processing pipeline may process the raw image data to reduce noise. Thereafter, the image processing pipeline may correct lens shading distortion in the raw image data and, subsequently, apply a demosaicing algorithm to convert the raw image data into full color image data (e.g., RGB image data). The color image data may be further processed by the image processing pipeline to correct color and gamma properties prior to being converted into a luma and chroma color space (e.g., YCbCr color space).

摘要翻译： 本文提供了用于处理在图像信号处理系统的图像处理流水线中使用数字图像传感器获取的原始图像数据的各种技术。 在一个实施例中，图像处理流水线可以首先处理原始图像数据（例如，拜耳图像数据）以用于缺陷像素的检测和校正。 接下来，图像处理流水线可以处理原始图像数据以降低噪声。 此后，图像处理流水线可以校正原始图像数据中的透镜遮蔽失真，并且随后应用去马赛克算法将原始图像数据转换为全色图像数据（例如，RGB图像数据）。 彩色图像数据可以由图像处理流水线进一步处理，以在被转换为亮度和色度色彩空间（例如，YCbCr颜色空间）之前校正颜色和伽马性质。

公开(公告)号：US20120147952A1

公开(公告)日：2012-06-14

申请号：US13400208

申请日：2012-02-20

申请人： Guy Cote ,  Lowell L. Winger

发明人： Guy Cote ,  Lowell L. Winger

IPC分类号： H04N7/26

CPC分类号： H04N19/40 ,  H04N19/112 ,  H04N19/16 ,  H04N19/176 ,  H04N19/42 ,  H04N19/513 ,  H04N19/61

摘要： A method for transcoding from an H.264 format to an MPEG-2 format is disclosed. The method generally comprises the steps of (A) decoding an input video stream in the H.264 format to generate a picture having a plurality of macroblock pairs that used an H.264 macroblock adaptive field/frame coding; (B) determining a mode indicator for each of the macroblock pairs; and (C) coding the macroblock pairs into an output video stream in the MPEG-2 format using one of (i) an MPEG-2 field mode coding and (ii) an MPEG-2 frame mode coding as determined from the mode indicators.

摘要翻译： 公开了一种从H.264格式转换为MPEG-2格式的方法。 该方法通常包括以下步骤：（A）以H.264格式解码输入视频流，以产生具有使用H.264宏块自适应字段/帧编码的多个宏块对的图像; （B）确定每个宏块对的模式指示符; 以及（C）使用MPEG-2场模式编码和（ii）从模式指示符确定的MPEG-2帧模式编码之一，将宏块对编码为MPEG-2格式的输出视频流。

公开(公告)号：US08155194B2

公开(公告)日：2012-04-10

申请号：US11198456

申请日：2005-08-05

申请人： Lowell L. Winger ,  Guy Cote

发明人： Lowell L. Winger ,  Guy Cote

IPC分类号： H04B1/66

CPC分类号： H04N19/00472 ,  H04N19/112 ,  H04N19/16 ,  H04N19/176 ,  H04N19/40 ,  H04N19/42 ,  H04N19/51 ,  H04N19/513 ,  H04N19/61

摘要： A method for transcoding from an MPEG-2 format to an H.264 format is disclosed. The method generally comprises the steps of (A) decoding an input video stream in the MPEG-2 format to generate a plurality of macroblocks; (B) determining a plurality of indicators from a pair of the macroblocks, the pair of the macroblocks being vertically adjoining; and (C) coding the pair of the macroblocks into an output video stream in the H.264 format using one of (i) a field mode coding and (ii) a frame mode coding as determined from the indicators.

摘要翻译： 公开了一种从MPEG-2格式转码为H.264格式的方法。 该方法通常包括以下步骤：（A）以MPEG-2格式解码输入视频流以产生多个宏块; （B）从一对宏块中确定多个指示符，所述一对宏块垂直相邻; 以及（C）使用（i）场模式编码和（ii）从指标确定的帧模式编码中的一个，将该对宏块编码为H.264格式的输出视频流。

公开(公告)号：US08031766B2

公开(公告)日：2011-10-04

申请号：US11195053

申请日：2005-08-02

申请人： Guy Cote

发明人： Guy Cote

IPC分类号： H04N7/12 ,  H04N11/02

CPC分类号： H04N19/42 ,  H04N19/103 ,  H04N19/156 ,  H04N19/61

摘要： An encoder circuit, a task scheduler circuit and a decoder circuit. The encoder circuit may be configured to (i) generate one or more first status signals in response to one or more report signals and (ii) perform video encoding tasks based on available central processing unit (CPU) cycles and memory bandwidth. The task scheduler circuit may be configured to (i) generate a control signal and the one or more report signals in response to the one or more first status signals. The decoder circuit may be configured to (i) generate one or more second status signals and (ii) perform concurrent decoding while the encoder circuit performs adaptive video encoding tasks in response to the control signal.

摘要翻译： 编码器电路，任务调度器电路和解码器电路。 编码器电路可以被配置为：（i）响应于一个或多个报告信号产生一个或多个第一状态信号，以及（ii）基于可用的中央处理单元（CPU）周期和存储器带宽执行视频编码任务。 任务调度器电路可以被配置为（i）响应于一个或多个第一状态信号而产生控制信号和一个或多个报告信号。 解码器电路可以被配置为（i）产生一个或多个第二状态信号，并且（ii）在编码器电路响应于控制信号执行自适应视频编码任务时执行并行解码。

公开(公告)号：US08009734B2

公开(公告)日：2011-08-30

申请号：US11879944

申请日：2007-07-19

申请人： Guy Cote ,  Michael D. Gallant ,  Pavel Novotny ,  Lowell L. Winger

发明人： Guy Cote ,  Michael D. Gallant ,  Pavel Novotny ,  Lowell L. Winger

IPC分类号： H04N7/12 ,  H04N11/02 ,  H04N11/04

CPC分类号： H04N19/86 ,  H04N19/103 ,  H04N19/11 ,  H04N19/117 ,  H04N19/159 ,  H04N19/176 ,  H04N19/46 ,  H04N19/61

摘要： A method for implementing B-frame prediction in video compression comprising the steps of (A) setting a prediction flag (i) “off” if B-frames are used for block prediction and (ii) “on” if B-frames are not used for block prediction, (B) if the prediction flag is off, generating an output video signal in response to an input video signal by performing an inverse quantization step and an inverse transform step in accordance with a predefined coding specification and (C) if the prediction flag is on, bypassing the inverse quantization step and the inverse transform step.

摘要翻译： 一种在视频压缩中实现B帧预测的方法，包括以下步骤：（A）如果B帧用于块预测，则设置预测标志（i）“关闭”，以及（ii）如果B帧不是“ （B）如果预测标志关闭，则通过根据预定义的编码规范执行逆量化步骤和逆变换步骤，响应于输入视频信号产生输出视频信号，（C）如果 该预测标志位于旁路逆量化步骤和逆变换步骤。