公开(公告)号：US07593594B2

公开(公告)日：2009-09-22

申请号：US11670776

申请日：2007-02-02

申请人： Tetsujiro Kondo ,  Junichi Ishibashi ,  Takashi Sawao ,  Takahiro Nagano ,  Naoki Fujiwara ,  Toru Miyake ,  Seiji Wada

发明人： Tetsujiro Kondo ,  Junichi Ishibashi ,  Takashi Sawao ,  Takahiro Nagano ,  Naoki Fujiwara ,  Toru Miyake ,  Seiji Wada

IPC分类号： H04N5/228

CPC分类号： G06K9/4609 ,  G06T3/4007 ,  G06T7/12 ,  G06T2207/10016 ,  G06T2207/20192

摘要： An image processing device and method, where the device includes a data continuity detector configured to detect data continuity of a first image data made up of a plurality of pixels acquired by light signals of a real world being cast upon a plurality of detecting elements each having spatio-temporal integration effects, a real world estimating unit configured to detect real world features which a first function representing the real world light signals has, and an image generator configured to predict and generate second image data having a higher quality than the first image data, based on the real world features detected by the real world estimating unit.

摘要翻译： 一种图像处理装置和方法，其中所述装置包括数据连续性检测器，所述数据连续性检测器被配置为检测由多个被施加的现实世界的光信号所获取的多个像素构成的第一图像数据的数据连续性，所述多个检测元件具有 时空整合效果，被配置为检测表示真实世界光信号的第一功能的真实世界特征的真实世界估计单元，以及被配置为预测和生成具有比第一图像数据更高质量的第二图像数据的图像生成器 ，基于真实世界估计单元检测到的真实世界特征。

公开(公告)号：US07590304B2

公开(公告)日：2009-09-15

申请号：US11670732

申请日：2007-02-02

申请人： Tetsujiro Kondo ,  Junichi Ishibashi ,  Takashi Sawao ,  Takahiro Nagano ,  Naoki Fujiwara ,  Toru Miyake ,  Seiji Wada

发明人： Tetsujiro Kondo ,  Junichi Ishibashi ,  Takashi Sawao ,  Takahiro Nagano ,  Naoki Fujiwara ,  Toru Miyake ,  Seiji Wada

IPC分类号： G06T15/50

CPC分类号： G06K9/4609 ,  G06T3/4007 ,  G06T7/12 ,  G06T2207/10016 ,  G06T2207/20192

摘要： An image processing device and method, where the image processing device includes an angle detector configured to detect an angle between a reference axis of data continuity with image data made up of a plurality of pixels acquired by light signals of a real world being cast upon a plurality of detecting elements each having spatio-temporal integration effects, and a real world estimating unit configured to estimate the light signals by estimating a continuity of the real world light signals which have been lost based on the angle detected by the angle detector.

摘要翻译： 一种图像处理装置和方法，其中所述图像处理装置包括角度检测器，所述角度检测器被配置为检测数据连续性的参考轴线与由通过投射到所述现实世界的现实世界的光信号获取的多个像素构成的图像数据之间的角度 多个检测元件，每个具有时空积分效应;以及真实世界估计单元，被配置为通过基于角度检测器检测到的角度估计已经丢失的真实世界光信号的连续性来估计光信号。

公开(公告)号：US07567727B2

公开(公告)日：2009-07-28

申请号：US11627230

申请日：2007-01-25

申请人： Tetsujiro Kondo ,  Naoki Fujiwara ,  Toru Miyake ,  Seiji Wada ,  Junichi Ishibashi ,  Takashi Sawao ,  Takahiro Nagano

发明人： Tetsujiro Kondo ,  Naoki Fujiwara ,  Toru Miyake ,  Seiji Wada ,  Junichi Ishibashi ,  Takashi Sawao ,  Takahiro Nagano

IPC分类号： G06K9/40

CPC分类号： G06T3/4023 ,  G06T1/00 ,  G06T7/12 ,  G06T2207/10016 ,  G06T2207/20192

摘要： An image processing device, method, and program are capable of obtaining processing results which are even more accurate and even more precise as to events in the real world, taking into consideration the real world where data has been acquired. The image processing device includes a data continuity detector and a real world estimating unit.

摘要翻译： 图像处理装置，方法和程序能够获得与现实世界中的事件相比更加准确和更精确的处理结果，同时考虑到已经获取数据的现实世界。 图像处理装置包括数据连续性检测器和真实世界估计单元。

公开(公告)号：US07477761B2

公开(公告)日：2009-01-13

申请号：US10362354

申请日：2002-06-20

申请人： Tetsujiro Kondo ,  Seiji Wada ,  Junichi Ishibashi ,  Takashi Sawao ,  Naoki Fujiwara ,  Takahiro Nagano ,  Toru Miyake

发明人： Tetsujiro Kondo ,  Seiji Wada ,  Junichi Ishibashi ,  Takashi Sawao ,  Naoki Fujiwara ,  Takahiro Nagano ,  Toru Miyake

IPC分类号： G06K9/00 ,  G06K9/34 ,  G06K9/66 ,  G06K9/40

CPC分类号： H04N5/272 ,  G06T5/002 ,  G06T5/003 ,  G06T5/50 ,  G06T7/194 ,  G06T7/215 ,  G06T2207/10016 ,  G06T2207/20201

摘要： An apparatus and method for separating a background image and an object image. The apparatus comprises an area specifying unit for specifying areas of the image. The area specifying unit specifies, in a first period-of time, an uncovered background area in which foreground object components and background object components are mixed. The area specifying unit specifies, in a second period of time, a foreground area consisting of only the foreground object components and a background area consisting of only the background object components. The area specifying unit specifies, in a third period of time, a covered background area in which the foreground object components and the background object components are mixed. A mixture-ratio calculator detects a mixture ratio indicating a ratio of the foreground object components and the background object components. A separator separates the pixel data into the foreground object components and the background object components based on the mixture ratio.

摘要翻译： 一种用于分离背景图像和对象图像的装置和方法。 该装置包括用于指定图像的区域的区域指定单元。 区域指定单元在第一时间段中指定混合了前景对象分量和背景对象分量的未覆盖的背景区域。 区域指定单元在第二时间段中指定仅由前景对象分量组成的前景区域和仅由背景对象分量构成的背景区域。 区域指定单元在第三时间段中指定混合前景对象分量和背景对象分量的被覆盖的背景区域。 混合比计算器检测指示前景对象分量和背景对象分量的比率的混合比。 分离器基于混合比将像素数据分离成前景对象分量和背景对象分量。

公开(公告)号：US07409074B2

公开(公告)日：2008-08-05

申请号：US10343294

申请日：2002-05-23

申请人： Tetsujiro Kondo ,  Junichi Ishibashi ,  Takashi Sawao ,  Takahiro Nagano ,  Naoki Fujiwara ,  Toru Miyake ,  Seiji Wada

发明人： Tetsujiro Kondo ,  Junichi Ishibashi ,  Takashi Sawao ,  Takahiro Nagano ,  Naoki Fujiwara ,  Toru Miyake ,  Seiji Wada

IPC分类号： G06K9/00 ,  G06K9/34 ,  G06K9/40 ,  H04N7/18

CPC分类号： G06T5/003 ,  G06T5/20 ,  G06T7/194 ,  G06T7/215 ,  G06T2207/10016 ,  G06T2207/20012 ,  G06T2207/20201 ,  H04N5/217 ,  H04N5/23229

摘要： The present invention relates to an image processing device enabling detection of a mixture ratio indicating the state of mixture between multiple objects. A contour region information generating unit 421 and a normal equation generating unit 422 extracts contour region pixel data within a frame of interest positioned at a contour region with approximately a same mixture ratio, extracts corresponding pixel data from a frame different to the frame of interest, extracting background pixel data corresponding to the contour region pixel data or the corresponding pixel data, and generating an equation wherein the mixture ratio is an unknown number, based on region specifying information specifying a non-mixed region made up of a foreground region and background region and a mixed region. A least square approximation unit 423 detects the mixture ratio by solving the equation. The present invention can be applied to signals processing devices for processing image signals.

摘要翻译： 本发明涉及能够检测表示多个物体之间的混合状态的混合比率的图像处理装置。 轮廓区域信息生成单元421和法线方程式生成单元422以大致相同的混合比率提取位于轮廓区域的感兴趣的帧内的轮廓区域像素数据，从与感兴趣的帧不同的帧中提取对应的像素数据， 提取与轮廓区域像素数据或对应的像素数据相对应的背景像素数据，并且根据指定由前景区域和背景区域构成的非混合区域的区域指定信息，生成混合比率为未知数的方程式 和混合区域。 最小二乘法近似单元423通过求解该等式来检测混合比。 本发明可以应用于处理图像信号的信号处理装置。

公开(公告)号：US20080129873A1

公开(公告)日：2008-06-05

申请号：US11722460

申请日：2005-12-21

申请人： Takahiro Nagano ,  Tetsujiro Kondo ,  Tsutomu Watanabe ,  Junichi Ishibashi ,  Hisakazu Shiraki ,  Naoki Fujiwara ,  Masanori Kanemaru ,  Shinichiro Kaneko ,  Yasuhiro Suto

发明人： Takahiro Nagano ,  Tetsujiro Kondo ,  Tsutomu Watanabe ,  Junichi Ishibashi ,  Hisakazu Shiraki ,  Naoki Fujiwara ,  Masanori Kanemaru ,  Shinichiro Kaneko ,  Yasuhiro Suto

IPC分类号： H04N5/14

CPC分类号： G06T5/50 ,  G06T5/003 ,  G06T7/215 ,  G06T2207/20081 ,  G06T2207/20201 ,  H04N5/145 ,  H04N5/21

摘要： A motion-vector-setting section (31) sets a motion vector in units of pixel in a target image. Based on the motion vector, a target-pixel-setting section (35) sets a target pixel for each image in plural images to be processed. A motion-blur-amount-setting section (33) sets a motion blur amount in units of pixel based on the motion vector and the exposure-time ratio set in units of image in the exposure-time-ratio-setting section (32). A processing-region-setting section (36) sets processing regions corresponding to the target pixel for each of the plural images based on the motion blur amount. A processing-coefficient-setting section (37) sets processing coefficients based on the motion blur amount. A pixel-value-generating section (38) generates motion-blur-removed pixel values that correspond to the target pixel by linear combination of pixel values corresponding to pixels in the processing region and the processing coefficients, so that they can be output from an integration section (39) as one pixel value. By utilizing any time-directional information significantly, motion-blur-removing processing can be accurately performed.

摘要翻译： 运动矢量设定部（31）以目标图像中的像素为单位设定运动矢量。 基于运动矢量，目标像素设定部（35）在多个待处理图像中设定各图像的目标像素。 运动模糊量设定部（33）基于在曝光时间比设定部（32）中以图像为单位设定的运动矢量和曝光时间比设定像素单位的运动模糊量， 。 处理区域设置部分（36）基于运动模糊量设置与多个图像中的每一个对应的目标像素的处理区域。 处理系数设定部（37）基于运动模糊量设定处理系数。 像素值生成部（38）通过与处理区域中的像素对应的像素值和处理系数的线性组合，生成与目标像素对应的运动模糊去除像素值，从而可以从 积分部分（39）作为一个像素值。 通过显着地利用任何时间方向信息，可以准确地执行移动模糊去除处理。

公开(公告)号：US20080095400A1

公开(公告)日：2008-04-24

申请号：US11793701

申请日：2005-12-21

申请人： Takahiro Nagano ,  Tetsujiro Kondo ,  Tsutomu Watanabe ,  Junichi Ishibashi ,  Hisakazu Shiraki ,  Naoki Fujiwara ,  Masanori Kanemaru ,  Shinichiro Kaneko ,  Yasuhiro Suto

发明人： Takahiro Nagano ,  Tetsujiro Kondo ,  Tsutomu Watanabe ,  Junichi Ishibashi ,  Hisakazu Shiraki ,  Naoki Fujiwara ,  Masanori Kanemaru ,  Shinichiro Kaneko ,  Yasuhiro Suto

IPC分类号： G06K9/00

CPC分类号： H04N5/23248 ,  H04N5/23254 ,  H04N5/23258 ,  H04N5/23277

摘要： A shooting-information-detecting section (31) detects shooting information from an image pick-up section (10). A motion-detecting section (33) detects a motion direction of an image on an overall screen based on a motion direction of the image pick-up section contained in the shooting information. A processing-region-setting section (36) sets a processing region in at least any one of a predicted target image and a peripheral image thereof, which correspond to a target pixel in the predicted target image. A processing-coefficient-setting section (37) sets a motion-blur-removing-processing coefficient that corresponds to the motion direction detected in the motion-detecting section (33). A pixel-value-generating section (38) generates a pixel value that corresponds to the target pixel based on a pixel value of a pixel in the processing region set in the processing-region-setting section (36) and the processing coefficient set in the processing-coefficient-setting section (37). Motion-blur-removing processing can be accurately performed.

摘要翻译： 拍摄信息检测部（31）从摄像部（10）检测拍摄信息。 运动检测部分（33）根据包含在拍摄信息中的图像拾取部分的运动方向来检测整个屏幕上的图像的运动方向。 处理区域设定部（36）将对应于预测目标图像中的目标像素的预测对象图像和周边图像中的至少任一个设置处理区域。 处理系数设定部（37）设定与运动检测部（33）中检测到的运动方向对应的运动模糊去除处理系数。 像素值生成部（38）基于处理区域设定部（36）中设定的处理区域中的像素的像素值和设定的处理系数，生成与目标像素对应的像素值 处理系数设定部（37）。 可以精确地进行运动模糊去除处理。

公开(公告)号：US20080075362A1

公开(公告)日：2008-03-27

申请号：US11722141

申请日：2005-12-21

申请人： Takahiro Nagano ,  Tetsujiro Kondo ,  Tsutomu Watanabe ,  Junichi Ishibashi ,  Hisakazu Shiraki ,  Naoki Fujiwara ,  Masanori Kanemaru ,  Shinichiro Kaneko ,  Yasuhiro Suto

发明人： Takahiro Nagano ,  Tetsujiro Kondo ,  Tsutomu Watanabe ,  Junichi Ishibashi ,  Hisakazu Shiraki ,  Naoki Fujiwara ,  Masanori Kanemaru ,  Shinichiro Kaneko ,  Yasuhiro Suto

IPC分类号： G06K9/62

CPC分类号： H04N5/21 ,  H04N5/142 ,  H04N5/144

摘要： A motion-setting section (61) sets a motion amount and a motion direction for obtaining processing coefficients. A student-image-generating section (62) generates student images obtained by adding a motion blur to a teacher image not only based on the set motion amount and the set motion direction but also by changing at least one of the motion amount and motion direction in a specific ratio and student images obtained by adding no motion blur to the teacher image. A prediction-tap-extracting section (64) extracts, in order to extract a main term that mainly contains component of the target pixel, at least a pixel value of pixel in the student image whose space position roughly agrees with space position of the target pixel in the teacher image. A processing-coefficient-generating section (65) generates processing coefficients for predicting the target pixels in the teacher images from the pixel values of extracted pixels based on a relationship between the pixels thus extracted and the target pixels in the teacher images. The processing coefficients that are suitable for any motion blur removing which is robust against any shift of the motion vector can be generated through learning.

摘要翻译： 运动设定部（61）设定用于获得处理系数的运动量和运动方向。 学生图像生成部（62）生成不仅基于设定的运动量和设定的运动方向而将运动模糊添加到教师图像而获得的学生图像，而且通过改变运动量和运动方向中的至少一个 以特定比例和学生图像通过添加没有运动模糊获得的教师图像。 预测抽头部（64）为了提取主要包含目标像素的成分的主项，提取学生图像中的空间位置大致与目标的空间位置一致的像素的像素值 像素在老师的形象。 处理系数生成部（65）基于所提取的像素与教师图像中的目标像素之间的关系，从提取的像素的像素值生成用于预测教师图像中的目标像素的处理系数。 可以通过学习来产生适用于对运动矢量的任何移动而鲁棒的任何运动模糊去除的处理系数。

公开(公告)号：US20080008356A1

公开(公告)日：2008-01-10

申请号：US11722450

申请日：2005-12-21

申请人： Takahiro Nagano ,  Tetsujiro Kondo ,  Tsutomu Watanabe ,  Junichi Ishibashi ,  Hisakazu Shiraki ,  Naoki Fujiwara ,  Masanori Kanemaru ,  Shinichiro Kaneko ,  Yasuhiro Suto

发明人： Takahiro Nagano ,  Tetsujiro Kondo ,  Tsutomu Watanabe ,  Junichi Ishibashi ,  Hisakazu Shiraki ,  Naoki Fujiwara ,  Masanori Kanemaru ,  Shinichiro Kaneko ,  Yasuhiro Suto

IPC分类号： G06K9/00

CPC分类号： H04N5/23248 ,  G06T5/003 ,  G06T5/50 ,  G06T7/20 ,  G06T2207/20081 ,  G06T2207/20201 ,  H04N5/144 ,  H04N5/23254 ,  H04N5/23267

摘要： A target-pixel-setting section (31) sets a target pixel in a target image to be predicted. A motion-direction-detecting section (32) detects a motion direction corresponding to the target pixel. A pixel-value-extracting section (36) extracts from peripheral images corresponding to the target image, in order to extract a main term that mainly contains component of the target pixel in a moving object that encounters a motion blur in the peripheral images, at least pixel values of pixels in the peripheral images whose space position roughly agree with space position of the target pixel. A processing-coefficient-setting section (37a) sets a specific motion-blur-removing-processing coefficient. A pixel-value-generating section (38a) newly generates pixel values for processing from the pixel values extracted by the pixel-value-extracting section (36) corresponding to the motion direction and generates pixel values corresponding to the target pixel based on the pixel values for processing and the specific motion-blur-removing-processing coefficients. It is possible to perform a robust motion-blur-removing processing on any shifts of motion vector.

摘要翻译： 目标像素设置部分（31）设置要预测的目标图像中的目标像素。 运动方向检测部（32）检测与目标像素对应的运动方向。 像素值提取部分（36）从与目标图像相对应的外围图像中提取，以便提取主要包含在外围图像中遇到运动模糊的移动物体中的目标像素的分量的主项， 其空间位置与目标像素的空间位置大致一致的周边图像中的像素的最小像素值。 处理系数设定部（37a）设定特定的运动模糊去除处理系数。 像素值生成部（38a）根据与运动方向对应的像素值提取部（36）提取的像素值，新生成用于处理的像素值，并基于该像素值生成部生成与目标像素对应的像素值 用于处理的像素值和具体的运动模糊去除处理系数。 可以对运动矢量的任何移动执行鲁棒的运动模糊去除处理。

公开(公告)号：US20070268372A1

公开(公告)日：2007-11-22

申请号：US11670785

申请日：2007-02-02

申请人： Tetsujiro Kondo ,  Junichi Ishibashi ,  Takashi Sawao ,  Takahiro Nagano ,  Naoki Fujiwara ,  Toru Miyake ,  Seiji Wada

发明人： Tetsujiro Kondo ,  Junichi Ishibashi ,  Takashi Sawao ,  Takahiro Nagano ,  Naoki Fujiwara ,  Toru Miyake ,  Seiji Wada

IPC分类号： H04N5/228

CPC分类号： G06K9/4609 ,  G06T3/4007 ,  G06T7/12 ,  G06T2207/10016 ,  G06T2207/20192

摘要： An image processing device and method, where the image processing device includes a continuity region detector configured to detect a region having data continuity within image data made up of a plurality of pixels acquired by light signals of a real world being cast upon a plurality of detecting elements each having spatio-temporal integration effects, and a real world estimating unit configured to estimate the light signals by estimating a continuity of the real world light signals which have been lost.

摘要翻译： 一种图像处理装置和方法，其中所述图像处理装置包括连续性区域检测器，所述连续性区域检测器被配置为检测在由多个被检测的真实世界的光信号获取的多个像素构成的图像数据内具有数据连续性的区域 每一个具有时空积分效应的元件以及被配置为通过估计已经丢失的真实世界光信号的连续性来估计光信号的真实世界估计单元。