公开(公告)号：US20050281477A1

公开(公告)日：2005-12-22

申请号：US11148351

申请日：2005-06-09

申请人： Hisakazu Shiraki ,  Tetsujiro Kondo

发明人： Hisakazu Shiraki ,  Tetsujiro Kondo

IPC分类号： G06T5/00 ,  G06K9/40

CPC分类号： G06T5/003 ,  G06T2200/24 ,  G06T2207/20201

摘要： A user interface unit sets a parameter based on operations of a user, and outputs to a parameter correction unit. The parameter correction unit extracts the feature quantity of pixels in an observation region that corresponds to the value of the parameter, and based on the maximal value of that feature quantity, corrects the parameter specified by the user as the correction parameter. A blurring correction unit corrects input image data based on the correction parameter, and generates image data of the image wherein the blurring has been corrected. The present invention can be applied, for example, to a digital camera.

摘要翻译： 用户接口单元基于用户的操作设置参数，并输出到参数校正单元。 参数校正单元提取与参数值相对应的观察区域中的像素的特征量，并且基于该特征量的最大值，校正由用户指定的参数作为校正参数。 模糊校正单元基于校正参数校正输入图像数据，并且生成已经校正了模糊的图像的图像数据。 本发明可以应用于例如数字照相机。

公开(公告)号：US08346003B2

公开(公告)日：2013-01-01

申请号：US12277591

申请日：2008-11-25

申请人： Hisakazu Shiraki ,  Tetsujiro Kondo ,  Kenji Takahashi ,  Tsutomu Watanabe ,  Takahiro Nagano ,  Yasuhiro Suto ,  Noriaki Takahashi

发明人： Hisakazu Shiraki ,  Tetsujiro Kondo ,  Kenji Takahashi ,  Tsutomu Watanabe ,  Takahiro Nagano ,  Yasuhiro Suto ,  Noriaki Takahashi

IPC分类号： G06K9/40 ,  G06K9/62

CPC分类号： G06T5/003 ,  G06T2207/20012 ,  G06T2207/20081

摘要： An image processing device for converting an input image into an output image whose blur is reduced. The image processing device includes a first image extracting section that extracts a plurality of pixels composed of a pixel of the input image corresponding to a pixel of interest in the output image and predetermined pixels surrounding the pixel of the input image. A first feature quantity calculating section calculates a first feature quantity from the plurality of pixels extracted by the first image extracting section. A second pixel extracting section extracts a plurality of pixels composed of the pixel of interest and predetermined pixels surrounding the pixel of interest from the input image. A predicting section then generates a pixel value of the pixel of interest.

摘要翻译： 一种用于将输入图像转换为模糊减小的输出图像的图像处理装置。 图像处理装置包括第一图像提取部，其提取由输出图像中的感兴趣像素对应的输入图像的像素构成的多个像素，以及围绕输入图像的像素的预定像素。 第一特征量计算部分从由第一图像提取部分提取的多个像素中计算第一特征量。 第二像素提取部分从输入图像中提取由关注像素组成的多个像素和围绕感兴趣像素的预定像素。 然后，预测部分生成感兴趣像素的像素值。

公开(公告)号：US08331713B2

公开(公告)日：2012-12-11

申请号：US12331815

申请日：2008-12-10

申请人： Hisakazu Shiraki ,  Tetsujiro Kondo ,  Kenji Takahashi ,  Tsutomu Watanabe ,  Takahiro Nagano ,  Yasuhiro Suto ,  Noriaki Takahashi

发明人： Hisakazu Shiraki ,  Tetsujiro Kondo ,  Kenji Takahashi ,  Tsutomu Watanabe ,  Takahiro Nagano ,  Yasuhiro Suto ,  Noriaki Takahashi

IPC分类号： G06K9/40 ,  G03B1/30 ,  G03B27/52 ,  G03B13/32 ,  H04N5/232

CPC分类号： G06T5/003 ,  G06T2207/20081

摘要： An image processing apparatus includes: a blur removing processing section configured to carry out a blur removing process for an input image using a plurality of blur removal coefficients for removing blur of a plurality of different blur amounts to produce a plurality of different blur removal result images; a feature detection section configured to detect a feature from each of the different blur removal result images; a blur amount class determination section configured to determine blur amount classes representative of classes of the blur amounts from the features; and a prediction processing section configured to carry out mathematic operation of pixel values of predetermined pixels of the input image and prediction coefficients learned in advance and corresponding to the blur amount classes to produce an output image from which the blur is removed.

摘要翻译： 一种图像处理装置，包括：模糊消除处理部，被配置为使用多个模糊去除系数对输入图像执行模糊消除处理，以去除多个不同模糊量的模糊，以产生多个不同的模糊去除结果图像 ; 特征检测部，被配置为从所述不同的模糊去除结果图像中的每一个检测特征; 模糊量等级确定部，被配置为确定表示来自所述特征的所述模糊量的类别的模糊量等级; 以及预测处理部，被配置为执行与所述模糊量等级相对应的所述输入图像的预定像素的像素值和预先知道的预测系数的数学运算，以产生去除了模糊的输出图像。

公开(公告)号：US07710461B2

公开(公告)日：2010-05-04

申请号：US11722436

申请日：2005-12-21

申请人： Takahiro Nagano ,  Tetsujiro Kondo ,  Tsutomu Watanabe ,  Junichi Ishibashi ,  Hisakazu Shiraki ,  Naoki Fujiwara ,  Masanori Kanemaru ,  Shinichiro Kaneko ,  Yasuhiro Suto

发明人： Takahiro Nagano ,  Tetsujiro Kondo ,  Tsutomu Watanabe ,  Junichi Ishibashi ,  Hisakazu Shiraki ,  Naoki Fujiwara ,  Masanori Kanemaru ,  Shinichiro Kaneko ,  Yasuhiro Suto

IPC分类号： H04N5/228 ,  G06K9/00 ,  H04N7/12

CPC分类号： G06T5/002 ,  G06T5/003 ,  G06T2207/20081 ,  G06T2207/20201 ,  H04N5/145 ,  H04N5/213 ,  H04N5/23248 ,  H04N5/23254 ,  H04N5/2327

摘要： A motion-vector-setting section (31) sets a first motion vector in units of pixel in a target image. An exposure-time-ratio-setting section (32) sets in units of image an exposure time ratio that is a ratio between a time interval of the target image and a period of exposure time. A motion-blur-amount-setting section (33) sets a motion blur amount in units of pixel based on the exposure time ratio and the first motion vector. Based on the motion amount, a processing-region-setting section (36) sets processing regions as well as a processing-coefficient-setting section (37) sets processing coefficients. A pixel-value-generating section (38) generates pixel values that correspond to the target pixel from pixel values in the processing region and the processing coefficients. A motion-blur-adding section (41) adds a motion blur to an image containing the pixel value generated based on an input second motion vector and the first motion vector. An image-moving section (42) moves the motion-blur-added image along a counter vector of the second motion vector. Any more real arbitrary viewpoint image can be generated.

摘要翻译： 运动矢量设定部（31）以目标图像中的像素为单位设定第一运动矢量。 曝光时间比设定部（32）以图像为单位设定作为目标图像的时间间隔与曝光时间的周期之间的比率的曝光时间比。 运动模糊量设定部（33）基于曝光时间比和第一运动矢量，以像素为单位设定运动模糊量。 基于运动量，处理区域设置部分（36）设置处理区域以及处理系数设置部分（37）设置处理系数。 像素值生成部（38）根据处理区域和处理系数的像素值生成与目标像素对应的像素值。 运动模糊添加部分（41）将运动模糊添加到包含基于输入的第二运动矢量和第一运动矢量生成的像素值的图像。 图像移动部分（42）沿着第二运动矢量的反向量移动运动模糊添加图像。 可以生成任何更真实的任意视点图像。

公开(公告)号：US07672536B2

公开(公告)日：2010-03-02

申请号：US11626439

申请日：2007-01-24

申请人： Tetsujiro Kondo ,  Kazushi Yoshikawa ,  Tetsushi Kokubo ,  Hisakazu Shiraki ,  Michimasa Obana ,  Masanori Kanemaru ,  Hideo Kasama

发明人： Tetsujiro Kondo ,  Kazushi Yoshikawa ,  Tetsushi Kokubo ,  Hisakazu Shiraki ,  Michimasa Obana ,  Masanori Kanemaru ,  Hideo Kasama

IPC分类号： G06T15/50

CPC分类号： G06T3/4023 ,  G06K9/4609 ,  G06T5/003

摘要： A signal processing device, signal processing method, and program and recording medium which provide images and the like closer approximating real world signals. The signal processing device includes a processing region setting unit, a motion vector setting unit, a model generator, a normal equation generator, a weighting change unit, and a real world estimating unit.

摘要翻译： 信号处理装置，信号处理方法以及程序和记录介质，其提供近似于真实世界信号的图像等。 信号处理装置包括处理区域设定单元，运动矢量设定单元，模型生成器，正规方程生成器，加权改变单元，以及真实世界估计单元。

公开(公告)号：US20090161984A1

公开(公告)日：2009-06-25

申请号：US12326413

申请日：2008-12-02

申请人： Yasuhiro SUTO ,  Tetsujiro Kondo ,  Hisakazu Shiraki ,  Takahiro Nagano ,  Noriaki Takahashi

发明人： Yasuhiro SUTO ,  Tetsujiro Kondo ,  Hisakazu Shiraki ,  Takahiro Nagano ,  Noriaki Takahashi

IPC分类号： G06K9/40

CPC分类号： G06T5/002 ,  H04N19/98

摘要： The present invention provides an image processing apparatus for converting a first image into a second image having higher image quality than that of the first image, includes: a first pixel value extracting section; an estimate noise amount arithmetically operating section; a processing coefficient generating section; a second pixel value extracting section; and a predicting section.

摘要翻译： 本发明提供了一种用于将第一图像转换为具有比第一图像的图像质量更高的图像质量的第二图像的图像处理装置，包括：第一像素值提取部分; 估计噪声量算术运算部分; 处理系数生成部; 第二像素值提取部分; 和预测部分。

公开(公告)号：US20090161977A1

公开(公告)日：2009-06-25

申请号：US12331815

申请日：2008-12-10

申请人： Hisakazu SHIRAKI ,  Tetsujiro Kondo ,  Kenji Takahashi ,  Tsutomu Watanabe ,  Takahiro Nagano ,  Yasuhiro Suto ,  Noriaki Takahashi

发明人： Hisakazu SHIRAKI ,  Tetsujiro Kondo ,  Kenji Takahashi ,  Tsutomu Watanabe ,  Takahiro Nagano ,  Yasuhiro Suto ,  Noriaki Takahashi

IPC分类号： G06K9/03

CPC分类号： G06T5/003 ,  G06T2207/20081

摘要： An image processing apparatus includes: a blur removing processing section configured to carry out a blur removing process for an input image using a plurality of blur removal coefficients for removing blur of a plurality of different blur amounts to produce a plurality of different blur removal result images; a feature detection section configured to detect a feature from each of the different blur removal result images; a blur amount class determination section configured to determine blur amount classes representative of classes of the blur amounts from the features; and a prediction processing section configured to carry out mathematic operation of pixel values of predetermined pixels of the input image and prediction coefficients learned in advance and corresponding to the blur amount classes to produce an output image from which the blur is removed.

摘要翻译： 一种图像处理装置包括：模糊消除处理部，被配置为使用多个模糊去除系数对输入图像执行模糊去除处理，以去除多个不同模糊量的模糊，以产生多个不同的模糊去除结果图像 ; 特征检测部，被配置为从所述不同的模糊去除结果图像中的每一个检测特征; 模糊量等级确定部，被配置为确定表示来自所述特征的所述模糊量的类别的模糊量等级; 以及预测处理部，被配置为执行与所述模糊量等级相对应的所述输入图像的预定像素的像素值和预先知道的预测系数的数学运算，以产生去除了模糊的输出图像。

公开(公告)号：US20080129873A1

公开(公告)日：2008-06-05

申请号：US11722460

申请日：2005-12-21

申请人： Takahiro Nagano ,  Tetsujiro Kondo ,  Tsutomu Watanabe ,  Junichi Ishibashi ,  Hisakazu Shiraki ,  Naoki Fujiwara ,  Masanori Kanemaru ,  Shinichiro Kaneko ,  Yasuhiro Suto

发明人： Takahiro Nagano ,  Tetsujiro Kondo ,  Tsutomu Watanabe ,  Junichi Ishibashi ,  Hisakazu Shiraki ,  Naoki Fujiwara ,  Masanori Kanemaru ,  Shinichiro Kaneko ,  Yasuhiro Suto

IPC分类号： H04N5/14

CPC分类号： G06T5/50 ,  G06T5/003 ,  G06T7/215 ,  G06T2207/20081 ,  G06T2207/20201 ,  H04N5/145 ,  H04N5/21

摘要： A motion-vector-setting section (31) sets a motion vector in units of pixel in a target image. Based on the motion vector, a target-pixel-setting section (35) sets a target pixel for each image in plural images to be processed. A motion-blur-amount-setting section (33) sets a motion blur amount in units of pixel based on the motion vector and the exposure-time ratio set in units of image in the exposure-time-ratio-setting section (32). A processing-region-setting section (36) sets processing regions corresponding to the target pixel for each of the plural images based on the motion blur amount. A processing-coefficient-setting section (37) sets processing coefficients based on the motion blur amount. A pixel-value-generating section (38) generates motion-blur-removed pixel values that correspond to the target pixel by linear combination of pixel values corresponding to pixels in the processing region and the processing coefficients, so that they can be output from an integration section (39) as one pixel value. By utilizing any time-directional information significantly, motion-blur-removing processing can be accurately performed.

摘要翻译： 运动矢量设定部（31）以目标图像中的像素为单位设定运动矢量。 基于运动矢量，目标像素设定部（35）在多个待处理图像中设定各图像的目标像素。 运动模糊量设定部（33）基于在曝光时间比设定部（32）中以图像为单位设定的运动矢量和曝光时间比设定像素单位的运动模糊量， 。 处理区域设置部分（36）基于运动模糊量设置与多个图像中的每一个对应的目标像素的处理区域。 处理系数设定部（37）基于运动模糊量设定处理系数。 像素值生成部（38）通过与处理区域中的像素对应的像素值和处理系数的线性组合，生成与目标像素对应的运动模糊去除像素值，从而可以从 积分部分（39）作为一个像素值。 通过显着地利用任何时间方向信息，可以准确地执行移动模糊去除处理。

公开(公告)号：US20080095400A1

公开(公告)日：2008-04-24

申请号：US11793701

申请日：2005-12-21

申请人： Takahiro Nagano ,  Tetsujiro Kondo ,  Tsutomu Watanabe ,  Junichi Ishibashi ,  Hisakazu Shiraki ,  Naoki Fujiwara ,  Masanori Kanemaru ,  Shinichiro Kaneko ,  Yasuhiro Suto

发明人： Takahiro Nagano ,  Tetsujiro Kondo ,  Tsutomu Watanabe ,  Junichi Ishibashi ,  Hisakazu Shiraki ,  Naoki Fujiwara ,  Masanori Kanemaru ,  Shinichiro Kaneko ,  Yasuhiro Suto

IPC分类号： G06K9/00

CPC分类号： H04N5/23248 ,  H04N5/23254 ,  H04N5/23258 ,  H04N5/23277

摘要： A shooting-information-detecting section (31) detects shooting information from an image pick-up section (10). A motion-detecting section (33) detects a motion direction of an image on an overall screen based on a motion direction of the image pick-up section contained in the shooting information. A processing-region-setting section (36) sets a processing region in at least any one of a predicted target image and a peripheral image thereof, which correspond to a target pixel in the predicted target image. A processing-coefficient-setting section (37) sets a motion-blur-removing-processing coefficient that corresponds to the motion direction detected in the motion-detecting section (33). A pixel-value-generating section (38) generates a pixel value that corresponds to the target pixel based on a pixel value of a pixel in the processing region set in the processing-region-setting section (36) and the processing coefficient set in the processing-coefficient-setting section (37). Motion-blur-removing processing can be accurately performed.

摘要翻译： 拍摄信息检测部（31）从摄像部（10）检测拍摄信息。 运动检测部分（33）根据包含在拍摄信息中的图像拾取部分的运动方向来检测整个屏幕上的图像的运动方向。 处理区域设定部（36）将对应于预测目标图像中的目标像素的预测对象图像和周边图像中的至少任一个设置处理区域。 处理系数设定部（37）设定与运动检测部（33）中检测到的运动方向对应的运动模糊去除处理系数。 像素值生成部（38）基于处理区域设定部（36）中设定的处理区域中的像素的像素值和设定的处理系数，生成与目标像素对应的像素值 处理系数设定部（37）。 可以精确地进行运动模糊去除处理。

公开(公告)号：US20080075362A1

公开(公告)日：2008-03-27

申请号：US11722141

申请日：2005-12-21

申请人： Takahiro Nagano ,  Tetsujiro Kondo ,  Tsutomu Watanabe ,  Junichi Ishibashi ,  Hisakazu Shiraki ,  Naoki Fujiwara ,  Masanori Kanemaru ,  Shinichiro Kaneko ,  Yasuhiro Suto

发明人： Takahiro Nagano ,  Tetsujiro Kondo ,  Tsutomu Watanabe ,  Junichi Ishibashi ,  Hisakazu Shiraki ,  Naoki Fujiwara ,  Masanori Kanemaru ,  Shinichiro Kaneko ,  Yasuhiro Suto

IPC分类号： G06K9/62

CPC分类号： H04N5/21 ,  H04N5/142 ,  H04N5/144

摘要： A motion-setting section (61) sets a motion amount and a motion direction for obtaining processing coefficients. A student-image-generating section (62) generates student images obtained by adding a motion blur to a teacher image not only based on the set motion amount and the set motion direction but also by changing at least one of the motion amount and motion direction in a specific ratio and student images obtained by adding no motion blur to the teacher image. A prediction-tap-extracting section (64) extracts, in order to extract a main term that mainly contains component of the target pixel, at least a pixel value of pixel in the student image whose space position roughly agrees with space position of the target pixel in the teacher image. A processing-coefficient-generating section (65) generates processing coefficients for predicting the target pixels in the teacher images from the pixel values of extracted pixels based on a relationship between the pixels thus extracted and the target pixels in the teacher images. The processing coefficients that are suitable for any motion blur removing which is robust against any shift of the motion vector can be generated through learning.

摘要翻译： 运动设定部（61）设定用于获得处理系数的运动量和运动方向。 学生图像生成部（62）生成不仅基于设定的运动量和设定的运动方向而将运动模糊添加到教师图像而获得的学生图像，而且通过改变运动量和运动方向中的至少一个 以特定比例和学生图像通过添加没有运动模糊获得的教师图像。 预测抽头部（64）为了提取主要包含目标像素的成分的主项，提取学生图像中的空间位置大致与目标的空间位置一致的像素的像素值 像素在老师的形象。 处理系数生成部（65）基于所提取的像素与教师图像中的目标像素之间的关系，从提取的像素的像素值生成用于预测教师图像中的目标像素的处理系数。 可以通过学习来产生适用于对运动矢量的任何移动而鲁棒的任何运动模糊去除的处理系数。