公开(公告)号：US08588546B2

公开(公告)日：2013-11-19

申请号：US12220300

申请日：2008-07-23

申请人： Kensuke Habuka ,  Masaki Hiraga

发明人： Kensuke Habuka ,  Masaki Hiraga

IPC分类号： G06K9/36 ,  G06K9/32

CPC分类号： H04N1/3876

摘要： A panoramic image producing apparatus provides an intensity image production unit which produces intensity images from an input source image captured by an imaging device, a reference image data storage unit for storing a reference image which is used to compute the motion data of the intensity image and its absolute motion data, an absolute motion data calculation unit which uses the intensity image of the target image by first computing its relative motion data with respect to the reference image and using its result to compute the absolute motion data with respect to the target image, an image stitching unit to produce a panoramic image by using the absolute motion data computed above to stitch together the input source images, and a reference image setting unit which sets the target image as the new reference image under certain conditions.

摘要翻译： 全景图像产生装置提供强度图像生成单元，其从由成像装置拍摄的输入源图像产生强度图像，参考图像数据存储单元，用于存储用于计算强度图像的运动数据的参考图像;以及 其绝对运动数据，绝对运动数据计算单元，其通过首先计算其相对于参考图像的相对运动数据并使用其结果来计算相对于目标图像的绝对运动数据来使用目标图像的强度图像， 图像拼接单元，用于通过使用上述计算的绝对运动数据将输入源图像拼接在一起而产生全景图像;以及参考图像设置单元，其在某些条件下将目标图像设置为新的参考图像。

公开(公告)号：US08976280B2

公开(公告)日：2015-03-10

申请号：US13824512

申请日：2011-07-06

申请人： Yukio Kamoshida ,  Jun Nyukai ,  Kensuke Habuka ,  Masaki Hiraga

发明人： Yukio Kamoshida ,  Jun Nyukai ,  Kensuke Habuka ,  Masaki Hiraga

IPC分类号： H04N3/14 ,  G06K9/00 ,  H04N5/232

CPC分类号： H04N5/23267 ,  H04N5/2329

摘要： An image processing device includes an image input portion, a motion vector acquisition portion and a distortion component estimation portion. The image input portion inputs a target image which is an image to be processed. The motion vector acquisition portion acquires a motion vector generated by relative movement with respect to a subject drawn in the target image when an imaging device which has generated the target image generates the target image. The distortion component estimation portion estimates a rolling shutter distortion component of the target image based on the motion vector.

摘要翻译： 图像处理装置包括图像输入部分，运动矢量获取部分和失真分量估计部分。 图像输入部输入作为要处理的图像的目标图像。 当生成目标图像的成像装置产生目标图像时，运动矢量获取部分获取相对于在目标图像中绘制的被摄体的相对运动产生的运动矢量。 失真分量估计部分基于运动矢量来估计目标图像的滚动快门失真分量。

公开(公告)号：US20090190013A1

公开(公告)日：2009-07-30

申请号：US12321937

申请日：2009-01-27

申请人： Masaki Hiraga ,  Kensuke Habuka

发明人： Masaki Hiraga ,  Kensuke Habuka

IPC分类号： H04N5/335

CPC分类号： H04N5/23248 ,  H04N5/23232 ,  H04N5/23245 ,  H04N5/2628

摘要： A method for capturing an image using an image capturing module with multiple pixels configured in a 2-dimensional matrix and a focal plane electronic shutter function which sequentially slides the exposure timing by constant interval by pixel group which is a unit of predetermined number of the pixels while scanning; the method includes an image data input process for detecting shutter operation, obtaining a reference image while skipping one or more of the pixel groups by sequentially sliding the exposure timing by the constant interval, and obtaining a target image while not skipping pixel groups to be captured, a motion data detection process for calculating the motion data of the target image based on the reference image, and a distortion compensation process for compensating for distortion in the target image according to the motion data.

摘要翻译： 一种使用具有以二维矩阵配置的多个像素的图像捕获模块和焦平面电子快门功能来拍摄图像的方法，其顺序地以固定的逐个像素组滑动曝光定时，该像素组是预定数量的像素的单位 扫描时; 该方法包括用于检测快门操作的图像数据输入处理，通过以一定间隔顺序地滑动曝光定时来跳过一个或多个像素组，获得参考图像，并且在不跳过要捕获的像素组的同时获得目标图像 ，用于基于参考图像计算目标图像的运动数据的运动数据检测处理和用于根据运动数据补偿目标图像中的失真的失真补偿处理。

公开(公告)号：US20090185721A1

公开(公告)日：2009-07-23

申请号：US12317602

申请日：2008-12-26

申请人： Masaki Hiraga ,  Kensuke Habuka

发明人： Masaki Hiraga ,  Kensuke Habuka

IPC分类号： G06K9/00 ,  G06K9/40

CPC分类号： G06T5/002 ,  G06T5/003 ,  G06T5/20 ,  G06T5/50 ,  G06T7/223 ,  G06T2207/10016 ,  G06T2207/20021 ,  G06T2207/20201

摘要： An image data processing method for creating a clear blur-compensated image; the method calculates the motion data between a reference image and a target image, calculates difference in pixel value between the reference image and the target image for every block matched by the motion data, calculates, based on the difference in pixel value, the blending ratio between the reference image and the target image for each block, and creates a synthesized image by synthesizing the reference image and the target image according to the motion data and the blending ratio.

摘要翻译： 一种用于创建清晰的模糊补偿图像的图像数据处理方法; 该方法计算参考图像和目标图像之间的运动数据，针对与运动数据匹配的每个块计算参考图像和目标图像之间的像素值的差异，基于像素值的差异来计算混合比 在每个块的参考图像和目标图像之间，并且通过根据运动数据和混合比合成参考图像和目标图像来创建合成图像。

公开(公告)号：US20080180535A1

公开(公告)日：2008-07-31

申请号：US11795218

申请日：2005-01-14

申请人： Kensuke Habuka ,  Masaki Hiraga

发明人： Kensuke Habuka ,  Masaki Hiraga

IPC分类号： H04N5/228 ,  H04N5/14

CPC分类号： G06T7/20

摘要： [PROBLEM] To enable calculation of motion vectors with a high accuracy by a comparatively simple processing by using a small amount of data without applying a load onto a computer.[MEANS FOR SOLVING PROBLEMS] A motion vector calculation method includes: processing for calculating multi-resolution data up to a predetermined resolution level L from a plurality of inputted image data; and processing for estimating motion vectors per resolution executing a matching step for temporarily calculating motion vectors minimizing an energy function within a predetermined range of the input motion vectors and a smoothing step for finally calculating the motion vectors by averaging the surrounding data. By using the motion vectors of the resolution level L finally calculated as input motion vectors of a further higher resolution level L-1, the processing for estimating motion vectors per resolution is successively repeated on image data of a high resolution, thereby calculating the motion vectors.

摘要翻译： [问题]为了通过使用少量数据而不对计算机施加负载，通过相对简单的处理，能够以高精度计算运动矢量。 解决问题的手段运动矢量计算方法包括：从多个输入的图像数据中计算高达预定分辨率水平L的多分辨率数据的处理; 以及用于估计每个分辨率的运动矢量的处理，执行用于临时计算在输入运动矢量的预定范围内最小化能量函数的运动矢量的匹配步骤，以及平滑步骤，用于通过对周围数据求平均来最终计算运动矢量。 通过使用最终计算为更高分辨率电平L-1的输入运动矢量的分辨率电平L的运动矢量，对高分辨率的图像数据连续重复用于估计每分辨率的运动矢量的处理，从而计算运动矢量 。

公开(公告)号：US08682098B2

公开(公告)日：2014-03-25

申请号：US12317602

申请日：2008-12-26

申请人： Masaki Hiraga ,  Kensuke Habuka

发明人： Masaki Hiraga ,  Kensuke Habuka

IPC分类号： G06K9/40

CPC分类号： G06T5/002 ,  G06T5/003 ,  G06T5/20 ,  G06T5/50 ,  G06T7/223 ,  G06T2207/10016 ,  G06T2207/20021 ,  G06T2207/20201

摘要： An image data processing method for creating a clear blur-compensated image; the method calculates the motion data between a reference image and a target image, calculates difference in pixel value between the reference image and the target image for every block matched by the motion data, calculates, based on the difference in pixel value, the blending ratio between the reference image and the target image for each block, and creates a synthesized image by synthesizing the reference image and the target image according to the motion data and the blending ratio. An image processing apparatus implementing the image data processing method noted above is also disclosed.

摘要翻译： 一种用于创建清晰的模糊补偿图像的图像数据处理方法; 该方法计算参考图像和目标图像之间的运动数据，针对与运动数据匹配的每个块计算参考图像和目标图像之间的像素值的差异，基于像素值的差异来计算混合比 在每个块的参考图像和目标图像之间，并且通过根据运动数据和混合比合成参考图像和目标图像来创建合成图像。 还公开了实现上述图像数据处理方法的图像处理装置。

公开(公告)号：US08224116B2

公开(公告)日：2012-07-17

申请号：US12655320

申请日：2009-12-29

申请人： Masaki Hiraga ,  Kensuke Habuka ,  Takeshi Miura

发明人： Masaki Hiraga ,  Kensuke Habuka ,  Takeshi Miura

IPC分类号： G06K9/40

CPC分类号： G06T5/002 ,  G06T5/20 ,  G06T7/13 ,  G06T2207/20012 ,  G06T2207/20016 ,  G06T2207/20192

摘要： An image processing method for reducing noise of an image to be filtered; the method includes a step of creating shrunken image of shrinking ratio r×r (where r is a natural number) by averaging the pixel values for each pixel in a block for every r pixels, a step of obtaining the pixel value in the shrunken image that correspond to the focus pixel in the source image by performing linear interpolation from the shrunken image pixels, a step of determining the noise reduction filter from the focus pixel and reference pixel in the shrunken image, and a step of computing the compensated pixel value of the focus pixel in the source image by weighted sum of each pixel value applying the filter to the focus pixel in the source image and the corresponding shrunken pixel.

摘要翻译： 一种用于降低要滤波的图像的噪声的图像处理方法; 该方法包括通过对每个r个像素的块中的每个像素的像素值进行平均来创建缩小率r×r（其中r是自然数）的缩小图像的步骤，获得缩小图像中的像素值的步骤 通过从缩小图像像素执行线性插值，对应于源图像中的焦点像素的步骤，从缩小图像中的聚焦像素和参考像素确定降噪滤波器的步骤，以及计算补偿像素值的步骤 源图像中的焦点像素通过将滤光器应用于源图像中的焦点像素和相应的缩小像素的每个像素值的加权和。

公开(公告)号：US07847823B2

公开(公告)日：2010-12-07

申请号：US11795218

申请日：2005-01-14

申请人： Kensuke Habuka ,  Masaki Hiraga

发明人： Kensuke Habuka ,  Masaki Hiraga

IPC分类号： H04N5/228 ,  H04N5/14 ,  H04N9/64

CPC分类号： G06T7/20

摘要： A motion vector calculation method includes: processing for calculating multi-resolution data up to a predetermined resolution level L from a plurality of inputted image data; and processing for estimating motion vectors per resolution executing a matching step for temporarily calculating motion vectors minimizing an energy function within a predetermined range of the input motion vectors and a smoothing step for finally calculating the motion vectors by averaging the surrounding data. By using the motion vectors of the resolution level L finally calculated as input motion vectors of a further higher resolution level L-1, the processing for estimating motion vectors per resolution is successively repeated on image data of a high resolution, thereby calculating the motion vectors.

摘要翻译： 一种运动矢量计算方法，包括：从多个输入图像数据计算高达预定分辨率电平L的多分辨率数据的处理; 以及用于估计每个分辨率的运动矢量的处理，执行用于临时计算在输入运动矢量的预定范围内最小化能量函数的运动矢量的匹配步骤，以及平滑步骤，用于通过对周围数据求平均来最终计算运动矢量。 通过使用最终计算为更高分辨率电平L-1的输入运动矢量的分辨率电平L的运动矢量，对高分辨率的图像数据连续重复用于估计每分辨率的运动矢量的处理，从而计算运动矢量 。

公开(公告)号：US08831376B2

公开(公告)日：2014-09-09

申请号：US13541897

申请日：2012-07-05

申请人： Yukio Kamoshida ,  Jun Nyukai ,  Kensuke Habuka ,  Masaki Hiraga

发明人： Yukio Kamoshida ,  Jun Nyukai ,  Kensuke Habuka ,  Masaki Hiraga

IPC分类号： G06K9/40 ,  H04N5/232

CPC分类号： H04N5/23267 ,  H04N5/2329

摘要： An image processing device includes an image input portion, a motion vector acquisition portion and a distortion component estimation portion. The image input portion inputs a plurality of frame images. The motion vector acquisition portion acquires an amount of parallel movement between two frame images. The distortion component estimation portion performs approximation such that a motion matrix indicating a motion between the frame images consists only of a parallel movement component and a rolling shutter distortion component, uses the amount of parallel movement to calculate, for each of the frame images, a tentative distortion coefficient included in the rolling shutter distortion component and uses the plurality of tentative distortion coefficients calculated to estimate a distortion coefficient.

摘要翻译： 图像处理装置包括图像输入部分，运动矢量获取部分和失真分量估计部分。 图像输入部分输入多个帧图像。 运动矢量获取部获取两帧图像之间的平行移动量。 失真分量估计部分执行近似，使得指示帧图像之间的运动的运动矩阵仅由平行运动分量和滚动快门失真分量组成，使用平行运动量针对每个帧图像计算一 包括在滚动快门失真分量中的暂定失真系数，并且使用所计算的多个暂定失真系数来估计失真系数。

公开(公告)号：US20130182135A1

公开(公告)日：2013-07-18

申请号：US13824512

申请日：2011-07-06

申请人： Yukio Kamoshida ,  Jun Nyukai ,  Kensuke Habuka ,  Masaki Hiraga

发明人： Yukio Kamoshida ,  Jun Nyukai ,  Kensuke Habuka ,  Masaki Hiraga

IPC分类号： H04N5/232

CPC分类号： H04N5/23267 ,  H04N5/2329

摘要： An image processing device includes an image input portion, a motion vector acquisition portion and a distortion component estimation portion. The image input portion inputs a target image which is an image to be processed. The motion vector acquisition portion acquires a motion vector generated by relative movement with respect to a subject drawn in the target image when an imaging device which has generated the target image generates the target image. The distortion component estimation portion estimates a rolling shutter distortion component of the target image based on the motion vector.

摘要翻译： 图像处理装置包括图像输入部分，运动矢量获取部分和失真分量估计部分。 图像输入部输入作为要处理的图像的目标图像。 当生成目标图像的成像装置产生目标图像时，运动矢量获取部分获取相对于在目标图像中绘制的被摄体的相对运动产生的运动矢量。 失真分量估计部分基于运动矢量来估计目标图像的滚动快门失真分量。