JP2001103358A - Chromatic aberration correction device - Google Patents

Chromatic aberration correction device

Info

Publication number
JP2001103358A
JP2001103358A JP27814199A JP27814199A JP2001103358A JP 2001103358 A JP2001103358 A JP 2001103358A JP 27814199 A JP27814199 A JP 27814199A JP 27814199 A JP27814199 A JP 27814199A JP 2001103358 A JP2001103358 A JP 2001103358A
Authority
JP
Japan
Prior art keywords
image
images
amount
chromatic aberration
correction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP27814199A
Other languages
Japanese (ja)
Inventor
Toru Aoki
青木  透
Narihiro Matoba
成浩 的場
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP27814199A priority Critical patent/JP2001103358A/en
Publication of JP2001103358A publication Critical patent/JP2001103358A/en
Pending legal-status Critical Current

Links

Landscapes

  • Color Television Image Signal Generators (AREA)
  • Studio Devices (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a chromatic aberration correction device that corrects the defocusing of images formed at different foci or at different positions of an image pickup element due to wavelength difference caused by differences of colors of an incident light in the case that the image pickup element forms an image of the incident light made incident via an optical system such as a lens and converts the light into an image signal. SOLUTION: A wavelength band separation section 3 separates an image signal resulting from converting an image formed by the image pickup element 2 receiving incident light through the optical system such as the lens into a plurality of images that are formed at different positions or different foci, a positional deviation quantity and defocusing quantity estimation section 5 estimates a positional deviation quantity and defocusing quantity of images by using one image among a plurality of the images as a reference image, and a positional deviation quantity and defocusing quantity correction section 15 corrects the defocusing of a plurality of the images formed at the different positions or the different foci of the image pickup element on the basis of the estimated positional deviation quantity and defocusing quantity.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、光学系を介して入
射された入射像を撮像素子で画像信号に変換する画像入
力装置の色収差補正装置に関するものである。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a chromatic aberration correcting device for an image input device for converting an incident image incident through an optical system into an image signal by an image sensor.

【0002】[0002]

【従来の技術】レンズ等の光学系を介して入射された入
射像を撮像素子で画像信号に変換する場合、レンズ等の
光学系の色収差が画像信号に現れる。これまではレンズ
の構成を変えたり、レンズのガラス材質を変えることで
レンズ等の光学系の色収差を低減していた。しかし、こ
の方法では光学系が高価になってしまうという問題点が
あった。
2. Description of the Related Art In a case where an incident image incident through an optical system such as a lens is converted into an image signal by an image sensor, chromatic aberration of the optical system such as a lens appears in the image signal. Up to now, the chromatic aberration of an optical system such as a lens has been reduced by changing the configuration of the lens or changing the glass material of the lens. However, this method has a problem that the optical system becomes expensive.

【0003】そこで、特開平5−3568号公報ではレ
ンズ等の光学系の色収差を、入射像を画像信号に変換し
た後で補正する方式が示されている。図21はレンズ1
に入射された光が撮像素子2の結像面では波長によって
異なる位置に結像している様子を示した図である。入射
光9は可視光域のほとんどの波長を含む光である。入射
光9はレンズ1の色収差のためにR光25、G光26、
B光27のように撮像素子2の異なる位置に結像され
る。レンズ1の中心を光軸中心10とする。光軸中心1
0から各光の結像位置までの距離はR光25がLr、G
光26がLg、B光27がLbとなる。
[0003] Japanese Patent Laid-Open Publication No. Hei 5-3568 discloses a method of correcting chromatic aberration of an optical system such as a lens after converting an incident image into an image signal. FIG. 21 shows the lens 1
FIG. 3 is a diagram showing a state in which light incident on the imaging surface of the image sensor 2 forms an image at different positions depending on the wavelength. The incident light 9 is light including almost all wavelengths in the visible light range. The incident light 9 has R light 25, G light 26,
An image is formed at a different position on the image sensor 2 like the B light 27. The center of the lens 1 is the optical axis center 10. Optical axis center 1
The distance from 0 to the imaging position of each light is as follows: R light 25 is Lr, G
The light 26 becomes Lg and the B light 27 becomes Lb.

【0004】図22は撮像素子2で得られる画像を示す
図である。図22に示したように波長によって結像位置
が異なるために、撮像素子2から得られる画像は図3
a、b、cのように波長によって大きさが異なるように
結像される。この3種の画像を重ね合わせた図が図3d
である。各画像間でずれている部分が色収差として現れ
る。
FIG. 22 is a diagram showing an image obtained by the image sensor 2. Since the imaging position differs depending on the wavelength as shown in FIG. 22, the image obtained from the image pickup device 2 is shown in FIG.
An image is formed such that the size differs depending on the wavelength as in a, b, and c. FIG. 3D shows a superimposition of these three images.
It is. A part shifted between the images appears as chromatic aberration.

【0005】即ち、特開平5−3568号公報ではG光
26によるG画像を基準にして、R光25によるR画像
およびB光27によるB画像を画像中心を中心にして縮
小あるいは拡大することでR画像およびB画像をG画像
に合わせ色収差を補正する方式が示されている。図23
は特開平5−3568号公報に記載の色補正方式を示し
ている。撮像画像35に対して、画像中心36を中心に
した拡大あるいは縮小を施すことで色収差補正前画素位
置37から色収差補正後画素位置38を求める。
That is, in JP-A-5-3568, the R image by the R light 25 and the B image by the B light 27 are reduced or enlarged around the image center with reference to the G image by the G light 26. A method for correcting chromatic aberration by matching an R image and a B image with a G image is shown. FIG.
Shows a color correction method described in Japanese Patent Application Laid-Open No. Hei 5-3568. By enlarging or reducing the captured image 35 with the image center 36 as the center, the chromatic aberration corrected pixel position 38 is obtained from the chromatic aberration corrected pixel position 37.

【0006】また、特開昭62−145991号公報で
は図24に示すように片方の画像B12上にウインドウ
を区切り、もう一方の画像A11上で上記ウインドウ内
の画像と最も相関が高くなる位置を求めて画像の位置ず
れを補正する位置ずれ補正装置が示されている。
In Japanese Unexamined Patent Publication No. Sho 62-145991, a window is divided on one image B12 as shown in FIG. 24, and a position having the highest correlation with an image in the window on the other image A11. A misregistration correction device for correcting a misregistration of an image obtained is shown.

【0007】[0007]

【発明が解決しようとする課題】しかし、レンズ1と撮
像素子2の位置関係は図25のようにレンズ1の光軸と
撮像素子2とが垂直でない場合もあり、また図26のよ
うにレンズ1の光軸中心10と撮像素子2の結像面中心
がずれている場合もある。図26の場合では撮像素子2
で部分的に入射像の合焦画像が得られないため、結像位
置のずれおよび焦点のずれを補正する方式が必要であ
る。
However, the positional relationship between the lens 1 and the image sensor 2 may be such that the optical axis of the lens 1 is not perpendicular to the image sensor 2 as shown in FIG. In some cases, the center 10 of the optical axis 1 and the center of the imaging plane of the image sensor 2 are shifted. In the case of FIG.
However, since a focused image of an incident image cannot be obtained partially, a method of correcting a shift of an imaging position and a shift of a focus is required.

【0008】しかし、特開平5−3568号公報に記載
の方式では焦点のずれを補正することはできないという
問題点があった。また、図26の場合には、レンズ1の
光軸中心10と撮像素子2の結像面中心がずれているた
め、特開平5−3568号公報に記載の方式では対応で
きないという問題点もあった。
However, the method described in Japanese Patent Application Laid-Open No. Hei 5-3568 has a problem that it is not possible to correct the defocus. Further, in the case of FIG. 26, since the center 10 of the optical axis of the lens 1 and the center of the imaging plane of the image sensor 2 are displaced, there is also a problem that the method described in JP-A-5-3568 cannot cope. Was.

【0009】さらに、補正量を求める際に、特開昭62
−145991号公報に記載の装置では結像位置のずれ
を求めることはできるが、焦点位置のずれを求めること
はできなかった。
Further, when obtaining the correction amount, Japanese Patent Application Laid-Open
In the device described in Japanese Patent Application No. -145991, it is possible to determine the deviation of the imaging position, but it is not possible to determine the deviation of the focal position.

【0010】本発明は、上記のような課題を解決するた
めになされたものであり、レンズ等の光学系で発生する
色収差、撮像素子の傾き等によって発生する結像位置の
ずれ量(位置ずれ量)および焦点位置のずれ量(焦点ず
れ量)を推定し、この推定された結像位置のずれ量と焦
点位置のずれ量とにより、上記色収差、結像位置のずれ
および焦点位置のずれを補正する色収差補正装置を提供
することを目的とする。
SUMMARY OF THE INVENTION The present invention has been made to solve the above-described problems, and has a chromatic aberration generated in an optical system such as a lens, a shift amount of an image formation position caused by a tilt of an image pickup device, and the like. Amount) and the shift amount of the focus position (focus shift amount), and the chromatic aberration, the shift of the image formation position, and the shift of the focus position are calculated based on the estimated shift amount of the imaging position and the shift amount of the focus position. It is an object of the present invention to provide a chromatic aberration correction device for performing correction.

【0011】[0011]

【課題を解決するための手段】第1の発明は、光学系を
介して入射された入射光を結像し、画像信号に変換する
撮像素子と、上記撮像素子により変換された複数の画像
信号を、上記入射光の色が違うことで生じる波長の差に
より異なった焦点位置に結像された複数の画像に分離す
る分離手段と、上記分離手段により分離された複数の画
像中の一つの画像を基準画像にして他の画像の焦点位置
のずれ量を推定する推定手段と、上記推定手段により推
定された焦点ずれ量に基づいて上記異なった焦点位置に
結像された画像の焦点ずれを補正する補正手段と、を備
えたものである。
According to a first aspect of the present invention, there is provided an image pickup device for forming an image of incident light incident through an optical system and converting the image into an image signal, and a plurality of image signals converted by the image pickup device. Separating means for separating a plurality of images formed at different focal positions due to a difference in wavelength caused by a difference in the color of the incident light, and one image in the plurality of images separated by the separating means Estimating means for estimating the amount of shift of the focal position of another image with reference to the reference image, and correcting the defocus of the image formed at the different focal position based on the amount of defocus estimated by the estimating means Correction means for performing the correction.

【0012】第2の発明は、上記画像の任意の部分の画
像のボケと画像のエッジの強調性との程度を求め上記焦
点位置のずれ量を推定する推定手段を備えたものであ
る。
According to a second aspect of the present invention, there is provided an estimating means for determining the degree of blur of an image of an arbitrary portion of the image and enhancing the edge of the image and estimating the shift amount of the focal position.

【0013】第3の発明は、上記入射光が上記撮像素子
の異なった位置に結像されたときには、上記画像の任意
の部分を上記基準画像に重ね合わせ最も相関が高くなる
重ね合わせ位置を求めて上記焦点位置のずれ量を推定す
る推定手段を備えたものである。
According to a third aspect of the present invention, when the incident light is formed at a different position on the image pickup device, an arbitrary portion of the image is superimposed on the reference image to obtain a superposition position having the highest correlation. And an estimating means for estimating the shift amount of the focal position.

【0014】第4の発明は、上記推定手段により推定さ
れた上記焦点位置のずれ量に基づいて上記光学系に対す
る上記撮像素子の傾きにより生じる複数の画像の焦点ず
れを補正する第1の補正係数と、上記波長の差により生
じる複数の画像の焦点ずれを補正する第2の補正係数と
を算出する演算手段を備え、上記補正手段は、上記第1
と第2の補正係数に基づいて上記異なった焦点位置に結
像された複数の画像の焦点ずれを補正するものである。
According to a fourth aspect of the present invention, there is provided a first correction coefficient for correcting a defocus of a plurality of images caused by an inclination of the image pickup device with respect to the optical system, based on the shift amount of the focal position estimated by the estimating means. And a calculating means for calculating a second correction coefficient for correcting a defocus of a plurality of images caused by the wavelength difference.
And a second correction coefficient for correcting the defocus of the plurality of images formed at the different focal positions.

【0015】[0015]

【発明の実施の形態】実施の形態1.以下、この発明の
実施の形態1を図を参照して説明する。図1は、実施の
形態1の色収差推定装置の構成図である。レンズ1を透
過した入射像は撮像素子2に結像される。本実施の形態
では光学系を代表してレンズについて記載しているが光
学系は例えば凹面鏡等のレンズ以外の物でもかまわな
い。撮像素子2では結像された像の光電変換が行われ、
画像信号へと変換される。画像信号は波長帯域分離部3
で波長帯域の異なる複数の画像に分離される。
DESCRIPTION OF THE PREFERRED EMBODIMENTS Embodiment 1 Hereinafter, a first embodiment of the present invention will be described with reference to the drawings. FIG. 1 is a configuration diagram of a chromatic aberration estimation device according to the first embodiment. The incident image transmitted through the lens 1 is formed on the image sensor 2. In this embodiment, a lens is described as a representative of the optical system, but the optical system may be an object other than a lens such as a concave mirror. The imaging device 2 performs photoelectric conversion of the formed image,
It is converted into an image signal. The image signal is sent to the wavelength band separation unit 3
Is separated into a plurality of images having different wavelength bands.

【0016】ここで、波長帯域の異なる複数の画像を画
像群4と呼ぶ。例えば撮像素子2がR、G、Bの3種類
のフィルタを備えている場合は3種類の画像が生成さ
れ、この3種類の画像から画像群4が構成される。ま
た、レンズ1の前にバンドパスフィルタを挿入する光学
系の場合、種類の異なるバンドパスフィルタを差し替え
て撮像することでバンドパスフィルタの種類と同じ数の
画像を得ることができ、これらの画像から画像群4が構
成される。
Here, a plurality of images having different wavelength bands are referred to as an image group 4. For example, when the image sensor 2 includes three types of filters of R, G, and B, three types of images are generated, and an image group 4 is formed from the three types of images. In the case of an optical system in which a band-pass filter is inserted in front of the lens 1, the same number of images as the types of the band-pass filters can be obtained by replacing the band-pass filters of different types and imaging. Form an image group 4.

【0017】波長帯域が異なる複数の画像を撮像する
と、各画像間に色収差によるずれが発生する。図2は、
レンズ1に対して傾いた撮像素子7と傾きのない撮像素
子8に入射光9が結像する様子を示す図である。入射光
9はレンズ1を通して傾いた撮像素子7に結像される。
図3は図2の一部分を拡大したものである。図に示すよ
うに傾きのない撮像素子8の結像位置は光軸中心10か
らL0の位置にある。しかし、傾いた撮像素子7の結像
位置は光軸中心からLsの位置にある。このL0とLs
の差が傾きによる位置ずれである。
When a plurality of images having different wavelength bands are picked up, a shift due to chromatic aberration occurs between the images. FIG.
FIG. 3 is a diagram illustrating a state in which incident light 9 forms an image on an image sensor 7 tilted with respect to the lens 1 and an image sensor 8 having no tilt. The incident light 9 forms an image on the image sensor 7 inclined through the lens 1.
FIG. 3 is an enlarged view of a part of FIG. As shown in the figure, the image forming position of the image sensor 8 having no inclination is located at a position L0 from the optical axis center 10. However, the image forming position of the inclined image sensor 7 is located at Ls from the optical axis center. This L0 and Ls
Is the displacement due to the inclination.

【0018】図4は、図2の一部分を拡大したものであ
る。図4に示すように、傾きのない撮像素子8に焦点が
合うように設定すると、傾いた撮像素子7は焦点がずれ
る。ずれの大きさはDsである。これが傾きによる焦点
ずれである。ここで、焦点が合わない波長の光の像は結
像面では広がりを持ったボケた画像になってしまう。
FIG. 4 is an enlarged view of a part of FIG. As shown in FIG. 4, when the image sensor 8 that is not tilted is set to be in focus, the image sensor 7 that is tilted is out of focus. The magnitude of the shift is Ds. This is the defocus due to the inclination. Here, an image of light having a wavelength that is out of focus becomes a widened and blurred image on the imaging surface.

【0019】画像群4内の各画像間の傾きによる位置ず
れ量および傾きによる焦点ずれ量は、位置ずれ量焦点ず
れ量推定部5で推定される。位置ずれ量焦点ずれ量推定
部5では画像群4内の1つの画像を基準にして他の画像
の位置ずれ量および焦点ずれ量を推定する。
The amount of positional deviation due to the inclination between the images in the image group 4 and the amount of defocus due to the inclination are estimated by the positional deviation amount defocus amount estimating unit 5. The position shift amount focus shift amount estimating unit 5 estimates the position shift amount and the focus shift amount of another image based on one image in the image group 4.

【0020】図5は、位置ずれ量および焦点ずれ量を推
定する方法を示す図である。画像A11と画像B12は
同じ被写体を撮像した画像であり、波長帯域が異なる。
被写体は全ての波長帯域を含む物が望ましく白と黒の解
像度チャート等が望ましい。画像A11が基準画像であ
り、画像B12が位置ずれ量および焦点ずれ量を求める
画像である。画像B12内にウインドウ13を区切り、
ウインドウ13内の画像に対して平滑化フィルタあるい
は鮮鋭化フィルタをかけた後、画像A11上に重ね合わ
せ、最も相関が高くなる重ね合わせ位置を探索する。
FIG. 5 is a diagram showing a method for estimating the amount of positional shift and the amount of focus shift. The image A11 and the image B12 are images obtained by capturing the same subject, and have different wavelength bands.
It is desirable that the object includes all wavelength bands, and a white and black resolution chart or the like is desirable. An image A11 is a reference image, and an image B12 is an image for which a positional shift amount and a focus shift amount are obtained. Separate window 13 within image B12,
After applying a smoothing filter or a sharpening filter to the image in the window 13, the image is superimposed on the image A <b> 11, and a superposition position having the highest correlation is searched.

【0021】このとき、平滑化フィルタあるいは鮮鋭化
フィルタは、パラメータで平滑化あるいは鮮鋭化の程度
を変えることができる。また、重ね合わせ位置とともに
フィルタのパラメータも探索する。ここで、平滑化フィ
ルタは画像を滑らかにする、あるいは画像をぼかすため
のフィルタであり、鮮鋭化フィルタは画像のエッジ部分
を強調するフィルタである。
At this time, the degree of smoothing or sharpening of the smoothing filter or sharpening filter can be changed by a parameter. Also, the filter parameters are searched together with the superposition position. Here, the smoothing filter is a filter for smoothing or blurring the image, and the sharpening filter is a filter for enhancing the edge portion of the image.

【0022】次に、最も相関が高くなるフィルタのパラ
メータおよび重ね合わせ位置を求める。重ね合わせ位置
は位置ずれ量になり、フィルタパラメータは焦点ずれ量
になる。このようにして位置ずれ量および焦点ずれ量を
求めることができる。位置ずれ量は方向と大きさを持つ
ベクトル量であり、位置ずれベクトルと呼ぶ。
Next, the parameter of the filter and the superposition position where the correlation becomes highest are obtained. The superimposition position is a displacement amount, and the filter parameter is a defocus amount. In this way, the position shift amount and the focus shift amount can be obtained. The displacement amount is a vector amount having a direction and a magnitude, and is called a displacement vector.

【0023】また、焦点ずれ量は正負の値を持つスカラ
ー量である。正の場合は平滑化、負の場合は鮮鋭化とい
うように符号によってフィルタの種類を区別する。この
ように、従来の色収差を推定する方法では位置ずれ量の
みを推定するものであったが本実施の形態では位置ずれ
量とともに焦点ずれ量も推定することが可能である。
The defocus amount is a scalar value having positive and negative values. The type of filter is distinguished by a code, such as smoothing for a positive value and sharpening for a negative value. As described above, in the conventional method for estimating chromatic aberration, only the amount of positional deviation is estimated, but in the present embodiment, it is possible to estimate the amount of defocus as well as the amount of positional deviation.

【0024】上記の方法を用いて、画像B12内の全て
の画素について位置ずれベクトルおよび焦点ずれ量を求
めることができる。各画素毎の位置ずれベクトルおよび
焦点ずれ量はメモリ等の記憶装置6に保持しておく。こ
の処理を画像群4の基準画像以外の全画像に対して行う
ことで、全画像の位置ずれベクトルおよび焦点ずれ量が
記憶装置6に保持される。このようにすることで撮像時
に位置ずれベクトルおよび焦点ずれ量を知ることがで
き、色収差の補正に使用することが可能になる。色収差
の補正では位置ずれ量および焦点ずれ量からデジタル画
像処理で補正する方法、あるいは位置ずれ量および焦点
ずれ量を使用して機械的に光学系を動かす方法等があ
る。
Using the above-described method, the displacement vector and the amount of defocus can be obtained for all the pixels in the image B12. The displacement vector and the amount of defocus for each pixel are stored in a storage device 6 such as a memory. By performing this process on all the images other than the reference image of the image group 4, the displacement vector and the amount of defocus of all the images are stored in the storage device 6. By doing so, the position shift vector and the amount of focus shift can be known at the time of imaging, and can be used for correcting chromatic aberration. In the correction of chromatic aberration, there is a method of correcting the positional deviation amount and the defocus amount by digital image processing, or a method of mechanically moving the optical system using the positional deviation amount and the defocus amount.

【0025】なお、本実施の形態では、入射光9からレ
ンズ1、撮像素子2、波長帯域分離部3を経て得られた
画像群4から位置ずれベクトルおよび焦点ずれ量を推定
する色収差推定装置について記載したが、あらかじめ何
らかの手法で画像群4が得られている場合には上記推定
方式を用いることで位置ずれベクトルおよび焦点ずれ量
を推定することができる。
In the present embodiment, a chromatic aberration estimating apparatus for estimating a displacement vector and a defocus amount from an image group 4 obtained from the incident light 9 via the lens 1, the image sensor 2, and the wavelength band separation unit 3 is described. As described above, when the image group 4 is obtained in advance by any method, the position shift vector and the focus shift amount can be estimated by using the above-described estimation method.

【0026】実施の形態2.以下、この発明の実施の形
態2を図を参照して説明する。図6は、実施の形態2の
色収差補正装置の構成図である。レンズ1、撮像素子
2、波長帯域分離部3、画像群4、位置ずれ量焦点ずれ
量推定部5および記憶装置6については実施の形態1と
同様である。実施の形態2では、実施の形態1と異な
り、色収差の補正を行う位置ずれ焦点ずれ補正部15を
備えている。
Embodiment 2 FIG. Hereinafter, a second embodiment of the present invention will be described with reference to the drawings. FIG. 6 is a configuration diagram of the chromatic aberration correction device according to the second embodiment. The lens 1, the imaging device 2, the wavelength band separation unit 3, the image group 4, the positional shift amount and the focus shift amount estimating unit 5, and the storage device 6 are the same as those in the first embodiment. The second embodiment is different from the first embodiment in that a position shift / focus shift correcting unit 15 for correcting chromatic aberration is provided.

【0027】位置ずれ焦点ずれ補正部15は、記憶装置
25に保持されている各画素の位置ずれベクトルおよび
焦点ずれ量を用いて色収差の補正を行う。位置ずれ補正
処理は、画素の移動処理であり、画像中の全画素に対し
て各画素毎の位置ずれ量の分だけ画素を移動する処理で
ある。焦点ずれ補正処理は、フィルタリング処理であ
り、画像中の全画素に対して各画素毎の焦点ずれ量に対
応したフィルタリングを施す処理である。従来の色収差
補正では、位置ずれ量のみを補正するものであったが、
本実施の形態の色収差補正処理では焦点ずれ量も補正す
ることが可能である。
The position shift / focus shift correcting section 15 corrects chromatic aberration using the position shift vector and the focus shift amount of each pixel held in the storage device 25. The displacement correction process is a process of moving a pixel, and is a process of moving a pixel by an amount corresponding to a displacement of each pixel with respect to all pixels in an image. The defocus correction process is a filtering process in which all pixels in the image are subjected to filtering corresponding to the defocus amount of each pixel. In the conventional chromatic aberration correction, only the displacement amount is corrected.
In the chromatic aberration correction processing of this embodiment, it is also possible to correct the amount of defocus.

【0028】上記の補正処理を画像群4の基準画像以外
の全画像の全画素に対して行うことで色収差の補正を行
うことが可能となり、色収差のない画像群4を得ること
ができる。
By performing the above-described correction processing on all the pixels of all the images other than the reference image of the image group 4, it is possible to correct the chromatic aberration, and the image group 4 without chromatic aberration can be obtained.

【0029】なお、本実施の形態では入射光9からレン
ズ1、撮像素子2、波長帯域分離部3を経て得られた画
像群4から色収差の補正を行う色収差補正装置について
記載したが、あらかじめ何らかの手法で画像群4が得ら
れている場合には、上記補正方式を用いることで色収差
を補正することができる。
In the present embodiment, a chromatic aberration correction apparatus for correcting chromatic aberration from an image group 4 obtained from the incident light 9 through the lens 1, the image pickup device 2, and the wavelength band separation unit 3 has been described. When the image group 4 is obtained by the method, the chromatic aberration can be corrected by using the above-described correction method.

【0030】実施の形態3.以下、この発明の実施の形
態3を図を参照して説明する。図7は、実施の形態3の
色収差推定装置の構成図である。レンズ1、撮像素子
2、波長帯域分離部3、画像群4および位置ずれ量焦点
ずれ量推定部5については実施の形態1と同様である。
実施の形態3では、実施の形態1と異なり、位置ずれベ
クトルおよび焦点ずれ量から補正パラメータを算出する
補正パラメータ算出部5を備えている。
Embodiment 3 Hereinafter, a third embodiment of the present invention will be described with reference to the drawings. FIG. 7 is a configuration diagram of a chromatic aberration estimation device according to the third embodiment. The lens 1, the image sensor 2, the wavelength band separation unit 3, the image group 4, and the positional shift amount / focus shift amount estimating unit 5 are the same as those in the first embodiment.
The third embodiment is different from the first embodiment in that a correction parameter calculation unit 5 that calculates a correction parameter from a displacement vector and a focus shift amount is provided.

【0031】また、算出された補正パラメータを保持し
ておく記憶装置17も備えている。実施の形態1の記憶
装置6では全画素の位置ずれベクトルおよび焦点ずれ量
を保持しておくために大規模な記憶装置を必要とした。
しかし、実施の形態3の記憶装置17では補正パラメー
タのみを保持しておくだけでよいので小規模な記憶装置
で十分である。
Further, a storage device 17 for holding the calculated correction parameters is provided. In the storage device 6 according to the first embodiment, a large-scale storage device is required to hold the displacement vectors and the defocus amounts of all the pixels.
However, in the storage device 17 of the third embodiment, only the correction parameters need to be stored, so a small-scale storage device is sufficient.

【0032】補正パラメータは、実施の形態1で算出さ
れた位置ずれベクトルおよび焦点ずれ量から求められ
る。補正パラメータを求めるために、撮像素子の傾きお
よびレンズの倍率による位置ずれおよび焦点ずれについ
てモデル化する。
The correction parameter is obtained from the positional deviation vector and the defocus amount calculated in the first embodiment. In order to obtain the correction parameters, modeling is performed on the position shift and the focus shift due to the inclination of the image sensor and the magnification of the lens.

【0033】図8は、傾いた撮像素子7および傾きのな
い撮像素子8と、レンズ1との関係を示す図である。ま
た、図9は被写体が真円形のものであった場合の画像を
示す図である。図9は、傾きのない撮像素子8の画像1
8と傾いた撮像素子7の画像19とを表している。図に
示すように、傾きのない撮像素子8の画像18は被写体
と同じ真円形になる。しかし、傾いた撮像素子7の画像
19は2つの半楕円を組み合わせた形になる。
FIG. 8 is a diagram showing the relationship between the lens 1 and the image sensor 7 having a tilt and the image sensor 8 having no tilt. FIG. 9 is a diagram showing an image when the subject is a true circle. FIG. 9 shows an image 1 of the image sensor 8 having no tilt.
8 and an image 19 of the image sensor 7 tilted. As shown in the figure, the image 18 of the image sensor 8 having no inclination has the same true circle as the subject. However, the image 19 of the tilted image sensor 7 has a shape obtained by combining two semi-ellipses.

【0034】図9では説明を簡単にするために、傾きの
軸が撮像素子の垂直方向と同じにして、光学系からの画
像の中心である光軸中心と撮像素子の中心を同じにし
た。しかし、実際には傾きの軸は任意の方向である。ま
た光軸中心と撮像素子の中心もずれている。
In FIG. 9, for the sake of simplicity, the tilt axis is set to be the same as the vertical direction of the image sensor, and the center of the optical axis, which is the center of the image from the optical system, is made the same as the center of the image sensor. However, in practice, the axis of inclination is an arbitrary direction. Also, the center of the optical axis and the center of the image sensor are shifted.

【0035】図10は、傾きの軸が任意の方向で、光軸
中心10と撮像中心が異なる場合の画像を示す図であ
る。光軸中心10は(X0,Y0)で表される。また傾
きの軸は式1の直線で表される。 a(X−X0)+b(Y−Y0)=0(式1) 入射光9は式1の直線を境界にして左右非対称に結像さ
れる。そこで式1の直線を分割直線22と呼ぶ。
FIG. 10 is a diagram showing an image in the case where the tilt axis is in an arbitrary direction and the optical axis center 10 is different from the imaging center. The optical axis center 10 is represented by (X0, Y0). The axis of the inclination is represented by the straight line in Equation 1. a (X−X0) + b (Y−Y0) = 0 (Expression 1) The incident light 9 is imaged asymmetrically with respect to the straight line of Expression 1 as a boundary. Therefore, the straight line of Expression 1 is referred to as a dividing straight line 22.

【0036】傾いた撮像素子7は、傾きのない撮像素子
8と比較して画像が結像する位置が異なる。図11は、
撮像素子の傾きによって位置ずれが生じる様子を示した
図である。即ち、図11は傾いた撮像素子7と傾きのな
い撮像素子8とに対するレンズ1からの入射光の結像位
置のずれを示す図である。
The tilted image sensor 7 differs from the image sensor 8 having no tilt in the position where an image is formed. FIG.
FIG. 4 is a diagram illustrating a state in which a position shift occurs due to a tilt of an imaging element. That is, FIG. 11 is a diagram illustrating a shift in the image forming position of the incident light from the lens 1 with respect to the tilted image sensor 7 and the image sensor 8 without tilt.

【0037】図に示すように、傾きのない撮像素子8の
分割直線22と入射光x23との距離をL0xとする
と、傾いた撮像素子7の分割直線22と入射光x23と
の距離はLxになる。同様に、傾きのない撮像素子8の
分割直線22と入射光y24との距離をL0yとする
と、傾いた撮像素子7の分割直線22と入射光y24と
の距離はLyになる。入射光x23と入射光y24は撮
像素子上で分割直線22を挟んで反対側に入射される。
As shown in the drawing, if the distance between the divided straight line 22 of the image sensor 8 having no inclination and the incident light x23 is L0x, the distance between the divided straight line 22 of the inclined image sensor 7 and the incident light x23 is Lx. Become. Similarly, assuming that the distance between the split straight line 22 of the image sensor 8 having no tilt and the incident light y24 is L0y, the distance between the split straight line 22 of the tilted image sensor 7 and the incident light y24 is Ly. The incident light x23 and the incident light y24 are incident on opposite sides of the division straight line 22 on the image sensor.

【0038】撮像素子の傾きによる位置ずれを補正する
ためには、LxからL0xを求めることが必要である。
撮像素子の傾きが微小である場合には、LxとL0xが
比例すると考えてもよい。よってL0xはLxにある係
数を乗算することで求められる。この係数をJxと呼
ぶ。Jxは式2で表される。 Jx=L0x/Lx(式2) 同様にLyからL0yを求める係数Jyは式3で表され
る。 Jy=L0y/Ly(式3)
In order to correct the displacement caused by the inclination of the image pickup device, it is necessary to calculate L0x from Lx.
When the inclination of the image sensor is small, it may be considered that Lx and L0x are proportional. Therefore, L0x is obtained by multiplying Lx by a certain coefficient. This coefficient is called Jx. Jx is represented by Equation 2. Jx = L0x / Lx (Equation 2) Similarly, a coefficient Jy for obtaining L0y from Ly is expressed by Equation 3. Jy = L0y / Ly (Equation 3)

【0039】また、図12は撮像素子の傾きによって焦
点ずれが生じる様子を示した図である。即ち、図12は
傾いた撮像素子7と傾きのない撮像素子8とに対するレ
ンズ1からの入射光の焦点位置のずれを示す図である。
分割直線22に対して入射光x23側では焦点ずれはD
xであり、入射光y24側では焦点ずれはDyである。
DxおよびDyの長さに応じて平滑化あるいは鮮鋭化フ
ィルタのパラメータを決定して画像に適用することで、
撮像素子の傾きによる焦点ずれを補正することができ
る。
FIG. 12 is a diagram showing a state in which defocus occurs due to the inclination of the image pickup device. That is, FIG. 12 is a diagram showing the shift of the focal position of the incident light from the lens 1 with respect to the tilted image sensor 7 and the image sensor 8 without tilt.
The defocus is D on the side of the incident light x23 with respect to the division straight line 22.
x, and the defocus on the incident light y24 side is Dy.
By determining the parameters of the smoothing or sharpening filter according to the length of Dx and Dy and applying them to the image,
Defocus due to the inclination of the image sensor can be corrected.

【0040】撮像素子の傾きを補正するためには、Lx
からDxを求めることが必要である。撮像素子の傾きが
微小である場合には、LxとDxが比例すると考えても
よい。よってDxはLxにある係数を乗算することで求
められる。この係数をKxと呼ぶ。Kxは式4で表され
る。 Kx=Dx/Lx(式4) 同様にLyからDyを求める係数Kyは式5で表され
る。 Ky=Dy/Ly(式5)
To correct the inclination of the image sensor, Lx
It is necessary to determine Dx from When the inclination of the image sensor is small, it may be considered that Lx and Dx are proportional. Therefore, Dx is obtained by multiplying Lx by a certain coefficient. This coefficient is called Kx. Kx is represented by Equation 4. Kx = Dx / Lx (Equation 4) Similarly, a coefficient Ky for obtaining Dy from Ly is represented by Equation 5. Ky = Dy / Ly (Equation 5)

【0041】従来の技術の中で説明した図21は、複数
の波長の光を含む入射光9が撮像素子2に結像している
様子をあらわしている。レンズ1の倍率が波長によって
微妙に異なるために、各波長の光は撮像素子2上の異な
る位置に結像する。これがレンズ1の倍率による位置ず
れ(以下、倍率による位置ずれと記す)である。
FIG. 21 described in the prior art shows a state in which incident light 9 including light of a plurality of wavelengths forms an image on the image sensor 2. Since the magnification of the lens 1 is slightly different depending on the wavelength, light of each wavelength forms an image at a different position on the image sensor 2. This is a displacement of the lens 1 due to magnification (hereinafter, referred to as a displacement due to magnification).

【0042】図21中のLr,Lg,Lbは、光軸中心
10から各波長の光への距離である。G光26を基準に
してB光27およびR光25を補正する。LgはLrに
比例するためにLgはLrにある係数を乗算することで
求められる。この係数をJrと呼ぶ。Jrは式6で表さ
れる。 Jr=Lg/Lr(式6) 同様にLbからLgを求める係数Jbは式7で表され
る。 Jb=Lg/Lb(式7)
Lr, Lg, and Lb in FIG. 21 are distances from the optical axis center 10 to light of each wavelength. The B light 27 and the R light 25 are corrected based on the G light 26. Since Lg is proportional to Lr, Lg can be obtained by multiplying Lr by a certain coefficient. This coefficient is called Jr. Jr is represented by Equation 6. Jr = Lg / Lr (Equation 6) Similarly, a coefficient Jb for obtaining Lg from Lb is represented by Equation 7. Jb = Lg / Lb (Equation 7)

【0043】図13は、図21の一部分を拡大したもの
である。図13に示すようにG光26に焦点が合ってい
る場合には、B光27は撮像素子2よりも手前に焦点が
合い、R光25は撮像素子2よりも奥に焦点が合う。こ
れがレンズ1の倍率による焦点ずれ(以下、倍率による
焦点ずれと記す)である。
FIG. 13 is an enlarged view of a part of FIG. As shown in FIG. 13, when the G light 26 is focused, the B light 27 is focused before the image sensor 2, and the R light 25 is focused farther than the image sensor 2. This is a focus shift due to the magnification of the lens 1 (hereinafter, referred to as a focus shift due to the magnification).

【0044】B光27の焦点ずれの量は、図13中のD
bであり、R光25の焦点ずれ量はDrである。Drは
Lr−Lgに比例する。よってDrはLr−Lgにある
係数を乗算することで求められる。この係数をKrと呼
ぶ。Krは式8で表される。 Kr=Dr/(Lr−Lg)(式8) 同様にLb−LgからDbを求める係数Kbは式9で表
される。 Kb=Db/(Lb−Lg)(式9)
The amount of defocus of the B light 27 is represented by D in FIG.
b, and the defocus amount of the R light 25 is Dr. Dr is proportional to Lr-Lg. Therefore, Dr is obtained by multiplying Lr-Lg by a certain coefficient. This coefficient is called Kr. Kr is represented by Equation 8. Kr = Dr / (Lr-Lg) (Equation 8) Similarly, a coefficient Kb for obtaining Db from Lb-Lg is represented by Equation 9. Kb = Db / (Lb-Lg) (Equation 9)

【0045】上記に示したように、モデル化することで
画像中の全画素での位置ずれベクトルおよび焦点ずれ量
は、光軸中心10(X0,Y0)、分割直線22の傾き
b/a、傾きによる位置ずれ補正係数Jx,Jy、傾き
による焦点ずれ補正係数Kx,Ky、倍率による位置ず
れ補正係数Jr,Jb、倍率による焦点ずれ補正係数K
r,Kbで表すことができる。これらの値を補正パラメ
ータと呼ぶ。
As described above, by modeling, the displacement vector and the defocus amount of all the pixels in the image can be calculated as follows: the optical axis center 10 (X0, Y0), the inclination b / a of the dividing straight line 22, Slope-based position shift correction coefficients Jx, Jy, tilt-based focus shift correction coefficients Kx, Ky, magnification-based position shift correction coefficients Jr, Jb, and scale-based focus shift correction coefficient K
r and Kb. These values are called correction parameters.

【0046】次に、補正パラメータを算出する方法につ
いて述べる。ここでは、画像数が3の画像群4を例にし
て説明する。3枚の画像をそれぞれR画像、G画像、B
画像と呼ぶ。G画像を基準画像にする。するとG画像に
対してR画像およびB画像の位置ずれベクトルおよび焦
点ずれ量が求められる。
Next, a method of calculating a correction parameter will be described. Here, the image group 4 having three images will be described as an example. Each of the three images is an R image, a G image, and a B image.
Called an image. The G image is used as a reference image. Then, the displacement vector and the amount of defocus of the R image and the B image with respect to the G image are obtained.

【0047】はじめに、光軸中心10および分割直線2
2の傾きを求める。図14は、R画像に対する倍率によ
る位置ずれベクトルの分布を表す図である。光軸中心1
0の条件は、図14に示すように位置ずれベクトルが0
であり、焦点ずれ量が0であることである。また分割直
線22は光軸中心10を通り、光軸中心10から等距離
での位置ずれベクトルが同じである2点を通ることが条
件である。このような条件を用いてR画像およびB画像
の位置ずれベクトルおよび焦点ずれ量から光軸中心10
および分割直線22の傾きを求める。
First, the optical axis center 10 and the split straight line 2
Find the slope of 2. FIG. 14 is a diagram illustrating a distribution of a displacement vector with respect to an R image depending on a magnification. Optical axis center 1
The condition of 0 is that the displacement vector is 0 as shown in FIG.
That is, the defocus amount is 0. The condition is that the dividing straight line 22 passes through the optical axis center 10 and passes through two points having the same displacement vector at the same distance from the optical axis center 10. Using such conditions, the optical axis center 10 can be calculated from the displacement vector and the defocus amount of the R image and the B image.
And the inclination of the division straight line 22 is obtained.

【0048】次に、傾きによる位置ずれ補正係数Jx,
Jyを求める。図15は、R画像に対する傾きによる位
置ずれベクトルの分布を表す図であり、傾きによる位置
ずれ補正係数による補正の様子を示している。分割直線
22に対して垂直な方向に位置ずれベクトルをそれぞれ
Jx倍、Jy倍することで傾きによる位置ずれを補正す
ることが可能である。Jxを乗算することで分割直線2
2の片側で光軸中心10から等距離にある位置ずれベク
トルの大きさが全て同じになるようなJxを求める。同
様に、Jyを乗算することで分割直線22のもう一方の
側で光軸中心10から等距離にある位置ずれベクトルの
大きさが全て同じになるようなJyを求める。
Next, a displacement correction coefficient Jx,
Find Jy. FIG. 15 is a diagram illustrating a distribution of a displacement vector due to a tilt with respect to the R image, and illustrates a state of correction using a displacement correction coefficient due to a tilt. By multiplying the displacement vector by Jx times and Jy times in the direction perpendicular to the division straight line 22, the displacement due to the inclination can be corrected. Dividing line 2 by multiplying by Jx
Jx such that the magnitudes of the displacement vectors at the same distance from the optical axis center 10 on one side of 2 are all the same. Similarly, Jy is obtained by multiplying Jy such that the magnitudes of the displacement vectors at the same distance from the optical axis center 10 on the other side of the division straight line 22 are all the same.

【0049】次に、倍率による位置ずれ補正係数Jr,
Jbを求める。図16は、倍率による位置ずれ補正係数
での補正の様子を示す図である。傾きによる位置ずれベ
クトルを補正した後、光軸中心10を中心にして放射状
に配置された位置ずれベクトルをJr倍あるいはJb倍
することで倍率による位置ずれを補正することが可能で
ある。R画像28の位置ずれベクトルに対してJrを乗
算することで光軸中心10から等距離にある位置ずれベ
クトルの大きさが全て同じになるようなJrを求める。
同様にB画像の位置ずれベクトルに対してJbを乗算す
ることで光軸中心10から等距離にある位置ずれベクト
ルの大きさが全て同じになるようなJbを求める。
Next, a position shift correction coefficient Jr,
Find Jb. FIG. 16 is a diagram illustrating a state of correction using a position shift correction coefficient based on magnification. After correcting the positional shift vector due to the tilt, the positional shift vector radially arranged around the optical axis center 10 is multiplied by Jr times or Jb times, whereby the positional shift due to magnification can be corrected. By multiplying the displacement vector of the R image 28 by Jr, Jr is obtained such that the displacement vectors at the same distance from the optical axis center 10 all have the same magnitude.
Similarly, by multiplying the displacement vector of the B image by Jb, Jb is obtained such that the displacement vectors at the same distance from the optical axis center 10 all have the same magnitude.

【0050】次に、傾きによる焦点ずれ補正係数Kx,
Kyを求める。傾きによる位置ずれ補正係数を求める場
合と同様に、Kxを乗算することで分割直線22の片側
で光軸中心10から等距離にある焦点ずれ量が全て同じ
になるようなKxを求める。またKyについても同様に
Kyを乗算することで分割直線22のもう一方の側で光
軸中心10から等距離にある焦点ずれ量が全て同じにな
るようなKyを求める。
Next, the defocus correction coefficient Kx,
Find Ky. Similarly to the case of obtaining the position shift correction coefficient due to the inclination, Kx is obtained by multiplying Kx such that all the defocus amounts at the same distance from the optical axis center 10 on one side of the division straight line 22 are the same. Similarly, Ky is multiplied by Ky to determine Ky such that all the defocus amounts at the same distance from the optical axis center 10 on the other side of the division straight line 22 are the same.

【0051】次に、倍率による焦点ずれ補正係数Kr,
Kbを求める。倍率による位置ずれ補正係数を求める場
合と同様に、R画像28の焦点ずれ量に対してKrを乗
算することで光軸中心10から等距離にある焦点ずれ量
が全て同じになるようなKrを求める。同様にB画像の
焦点ずれ量に対してKbを乗算することで光軸中心10
から等距離にある位置ずれベクトルが全て同じになるよ
うなKbを求める。
Next, the defocus correction coefficient Kr,
Find Kb. As in the case of obtaining the displacement correction coefficient based on the magnification, Kr is multiplied by Kr to the defocus amount of the R image 28 so that the defocus amounts at the same distance from the optical axis center 10 are all the same. Ask. Similarly, by multiplying the defocus amount of the B image by Kb, the optical axis center 10
Kb is determined so that all the displacement vectors at the same distance from are the same.

【0052】以上のような方法で求められた補正パラメ
ータを、記憶装置17に保持しておく。この処理を画像
群4の基準画像以外の全画像に対して行うことで、全画
像の補正パラメータが記憶装置17に保持される。この
ようにすることで撮像時に補正パラメータを知ることが
でき、色収差の補正に使用することが可能になる。
The correction parameters obtained by the above method are stored in the storage device 17. By performing this process on all images other than the reference image of the image group 4, the correction parameters of all images are stored in the storage device 17. By doing so, the correction parameter can be known at the time of imaging, and can be used for correcting chromatic aberration.

【0053】なお、本実施の形態では入射光9からレン
ズ1、撮像素子2、波長帯域分離部3を経て得られた画
像群4から補正パラメータを推定する色収差推定装置に
ついて記載したが、あらかじめ何らかの手法で画像群4
が得られている場合には上記推定方式を用いることで補
正パラメータを推定することができる。
In this embodiment, the chromatic aberration estimating apparatus for estimating the correction parameter from the image group 4 obtained from the incident light 9 through the lens 1, the image pickup device 2, and the wavelength band separation unit 3 has been described. Image group 4 by technique
Is obtained, the correction parameter can be estimated by using the above estimation method.

【0054】実施の形態4.以下、この発明の実施の形
態4を図を参照して説明する。図17は、実施の形態4
の色収差補正装置の構成図である。レンズ1、撮像素子
2、波長帯域分離部3、画像群4、位置ずれ量焦点ずれ
量推定部5、補正パラメータ算出部16および記憶装置
17については実施の形態3と同様であが、実施の形態
4では実施の形態3と異なり、色収差の補正を行う位置
ずれ焦点ずれ補正部29を備えている。
Embodiment 4 Hereinafter, a fourth embodiment of the present invention will be described with reference to the drawings. FIG. 17 shows the fourth embodiment.
1 is a configuration diagram of a chromatic aberration correction device. The lens 1, the image sensor 2, the wavelength band separation unit 3, the image group 4, the positional shift amount and the focus shift amount estimating unit 5, the correction parameter calculating unit 16 and the storage device 17 are the same as those in the third embodiment. The fourth embodiment differs from the third embodiment in that a position shift / focus shift correcting unit 29 for correcting chromatic aberration is provided.

【0055】位置ずれ焦点ずれ補正部29は、記憶装置
17に保持されている補正パラメータを用いて色収差の
補正を行う。具体的な補正処理の流れを図18のフロー
チャートに示す。
The misregistration correction unit 29 corrects chromatic aberration using the correction parameters stored in the storage device 17. A specific flow of the correction process is shown in a flowchart of FIG.

【0056】補正する画像中のある画素に対して位置ず
れベクトルおよび焦点ずれ量を求める。はじめに補正の
対象となる画素が分割直線22に対してどちらの側にあ
るかを判定する(ステップS1)。図19は、R画像に
対して倍率による位置ずれ補正を行う様子を示す図であ
る。図19に示すように補正対象画素(X,Y)が分割
直線22のx側にある場合について説明する。補正対象
画像はR画像28であり、図示していないが基準画像は
G画像である。
A position shift vector and a focus shift amount are obtained for a certain pixel in the image to be corrected. First, it is determined on which side of the dividing line 22 the pixel to be corrected is located (step S1). FIG. 19 is a diagram illustrating a state in which a position shift is corrected for an R image by a magnification. A case where the correction target pixel (X, Y) is on the x side of the division straight line 22 as shown in FIG. 19 will be described. The correction target image is the R image 28, and the reference image is a G image (not shown).

【0057】次に、倍率による位置ずれを補正する。補
正対象画素(X,Y)と光軸中心10を結ぶベクトルV
raを求める(ステップS2)。次に、式6で求めたJ
rとVraを乗算することで倍率による位置ずれを補正
したベクトルVrbを求める(ステップS3)。図19
に示すようにベクトルVraとベクトルVrbは同じ方
向である。倍率による位置ずれを補正した後の補正対象
画素は(X1,Y1)に移動する。
Next, the displacement due to the magnification is corrected. Vector V connecting correction target pixel (X, Y) and optical axis center 10
Ra is obtained (step S2). Next, J calculated by equation (6)
By multiplying r and Vra, a vector Vrb in which the displacement due to the magnification has been corrected is obtained (step S3). FIG.
The vector Vra and the vector Vrb are in the same direction as shown in FIG. The pixel to be corrected after correcting the displacement due to the magnification moves to (X1, Y1).

【0058】次に、傾きによる位置ずれを補正する。図
20は、R画像に対して傾きによる位置ずれ補正を行う
様子を示す図である。補正対象画素(X1,Y1)を通
り、分割直線22と垂直なベクトルLraを求める(ス
テップS4)。次に、式2で求めたJxとLraを乗算
することで傾きによる位置ずれを補正したベクトルLr
bを求める(ステップS5)。図20に示すようにベク
トルLraとベクトルLrbは同じ方向である。傾きに
よる位置ずれを補正した後の補正対象画素は(X2,Y
2)に移動する。また光軸中心10から(X2,Y2)
へのベクトルはLrcで表される。
Next, the displacement due to the inclination is corrected. FIG. 20 is a diagram illustrating a state in which the R image is subjected to position shift correction due to inclination. A vector Lra that passes through the pixel to be corrected (X1, Y1) and is perpendicular to the division straight line 22 is obtained (step S4). Next, a vector Lr obtained by multiplying Jx and Lra obtained by Expression 2 to correct the displacement due to the inclination.
b is obtained (step S5). As shown in FIG. 20, the vector Lra and the vector Lrb are in the same direction. The pixels to be corrected after correcting the displacement due to the inclination are (X2, Y
Go to 2). Also, from the optical axis center 10 (X2, Y2)
Is represented by Lrc.

【0059】補正対象画素に対する最終的な位置ずれ補
正ベクトルVrは式10で求められる。 Vr=Vrc―Vrb ( 式10) なお、ここでは、G画像を基準画像にしてR画像28に
対する補正量を求めたがB画像に対してもR画像28と
同様に補正量を求める。
The final displacement correction vector Vr for the pixel to be corrected is obtained by equation (10). Vr = Vrc−Vrb (Equation 10) Here, the correction amount for the R image 28 is obtained using the G image as the reference image, but the correction amount is obtained for the B image in the same manner as the R image 28.

【0060】続いて、倍率による焦点ずれを補正する。
倍率による焦点ずれ補正量Fraは位置ずれ補正時に求
めたベクトルVraとベクトルVrbおよび式8から求
めたKrから式11で求められる。 Fra=Kr×(|Vrb|−|Vra|)(式11)
Subsequently, the defocus due to the magnification is corrected.
The defocus correction amount Fra based on the magnification can be obtained by Expression 11 from the vectors Vra and Vrb obtained at the time of correcting the positional deviation and Kr obtained from Expression 8. Fra = Kr × (| Vrb |-| Vra |) (Equation 11)

【0061】次に、傾きによる焦点ずれを補正する。傾
きによる焦点ずれ補正量Frbは位置ずれ補正時に求め
たベクトルVrbおよび式4で求めたKxから式12で
求められる。 Frb=Kx×|Vrb| ( 式12)
Next, the defocus due to the inclination is corrected. The defocus correction amount Frb due to the inclination can be obtained by Expression 12 from the vector Vrb obtained at the time of correcting the position deviation and Kx obtained by Expression 4. Frb = Kx × | Vrb | (Equation 12)

【0062】補正対象画素に対する最終的な焦点ずれ補
正量Frは式13で求められる。 Fr=Fra+Frb ( 式13) なお、ここでは、G画像を基準画像にしてR画像28に
対する補正量を求めたがB画像に対してもR画像28と
同様に補正量を求める。
The final defocus correction amount Fr for the pixel to be corrected is obtained by Expression 13. Fr = Fra + Frb (Equation 13) In this case, the correction amount for the R image 28 is calculated using the G image as the reference image, but the correction amount is calculated for the B image in the same manner as the R image 28.

【0063】以上のようにして、補正する画像に対して
各画素毎の位置ずれ補正ベクトルおよび焦点ずれ補正量
を求めて、補正処理を行うことで色収差の補正が可能と
なり、色収差のない画像群4を得ることができる。
As described above, the chromatic aberration can be corrected by obtaining the positional shift correction vector and the focus shift correction amount for each pixel with respect to the image to be corrected, and performing the correction processing. 4 can be obtained.

【0064】なお、本実施の形態では入射光9からレン
ズ1、撮像素子2、波長帯域分離部3を経て得られた画
像群4から色収差の補正を行う色収差補正装置について
記載したが、あらかじめ何らかの手法で画像群4が得ら
れている場合には上記補正方式を用いることで色収差を
補正することができる。
In the present embodiment, a chromatic aberration correcting apparatus for correcting chromatic aberration from an image group 4 obtained from the incident light 9 through the lens 1, the image pickup device 2, and the wavelength band separation unit 3 has been described. When the image group 4 is obtained by the method, the chromatic aberration can be corrected by using the above-described correction method.

【0065】以上、実施の形態1〜4で、光学系を介し
て入射された入射像を撮像素子で画像信号に変換する画
像入力装置の色収差推定装置及び色収差補正装置につい
て説明したが、この色収差推定装置及び色収差補正装置
は、例えばデジタルカメラ等の画像入力装置に利用する
ことができる。
The chromatic aberration estimating device and the chromatic aberration correcting device of the image input device for converting the incident image incident via the optical system into an image signal by the image pickup device have been described in the first to fourth embodiments. The estimation device and the chromatic aberration correction device can be used for an image input device such as a digital camera.

【0066】[0066]

【発明の効果】この発明は、以上説明したように構成さ
れているので、以下に示すような効果を奏する。
Since the present invention is configured as described above, it has the following effects.

【0067】第1の発明では、光学系を介して入射され
た色の違う物体の入射像を撮像素子が複数の画像信号に
変換し、変換された複数の画像信号を複数の画像に分離
し、分離された複数の画像中の一つの画像を基準画像に
して他の画像の位置ずれ量と焦点ずれ量とを推定し、他
の画像の焦点位置のずれ量を補正することにより、色の
違う物体の入射像が光学系を介して入射されたときの画
像の焦点ずれを補正することができる。
In the first invention, the image pickup device converts an incident image of an object having a different color incident through the optical system into a plurality of image signals, and separates the converted plurality of image signals into a plurality of images. By using one of the separated images as a reference image, estimating the amount of positional shift and the amount of defocus of another image, and correcting the amount of shift of the focal position of the other images, It is possible to correct a defocus of an image when an incident image of a different object is incident via the optical system.

【0068】第2の発明では、焦点位置のずれ量を推定
する画像の任意の部分の画像のボケと画像のエッジの強
調性との程度を求めることにより、焦点位置のずれ量を
推定することができる。
In the second invention, the amount of shift of the focal position is estimated by obtaining the degree of blur of an image of an arbitrary portion of the image for which the amount of shift of the focal position is to be estimated and the degree of enhancement of the edge of the image. Can be.

【0069】第3の発明では、入射光が撮像素子の異な
った位置に結像されたときには、焦点ずれ量を推定する
画像の任意の部分を基準画像に重ね合わせ最も相関が高
くなる重ね合わせ位置を求めることにより、焦点ずれ量
と位置ずれ量とを推定することができる。
In the third aspect, when the incident light is formed at different positions on the image pickup device, an arbitrary portion of the image for which the amount of defocus is to be estimated is superimposed on the reference image, and the superposition position at which the correlation is highest is obtained. , The amount of defocus and the amount of positional deviation can be estimated.

【0070】第4の発明では、推定手段により推定され
た焦点位置のずれ量に基づいて光学系に対する撮像素子
の傾きにより生じる複数の画像の焦点ずれを補正する第
1の補正係数と、上記波長の差により生じる複数の画像
の焦点ずれを補正する第2の補正係数とにより、画像の
焦点ずれを補正するので、色の違う物体の入射像が光学
系を介して入射されたときの画像の焦点ずれを補正する
ことができる。
In the fourth invention, the first correction coefficient for correcting the defocus of a plurality of images caused by the inclination of the image pickup device with respect to the optical system based on the amount of shift of the focal position estimated by the estimating means; The defocus of the images is corrected by the second correction coefficient for correcting the defocus of a plurality of images caused by the difference between the images. Defocus can be corrected.

【図面の簡単な説明】[Brief description of the drawings]

【図1】 実施の形態1の色収差推定装置の構成図。FIG. 1 is a configuration diagram of a chromatic aberration estimation device according to a first embodiment.

【図2】 実施の形態1において撮像素子に入射光が結
像する様子を示す図。
FIG. 2 is a diagram showing a state in which incident light forms an image on an imaging element in Embodiment 1.

【図3】 実施の形態1において撮像素子に入射光が結
像する一部分を拡大した図。
FIG. 3 is an enlarged view of a part where incident light forms an image on an image sensor in Embodiment 1.

【図4】 実施の形態1において撮像素子に入射光が結
像する一部分を拡大した図。
FIG. 4 is an enlarged view of a part where incident light forms an image on an image sensor in Embodiment 1.

【図5】 実施の形態1において位置ずれ量および焦点
ずれ量を推定する方法を示す図。
FIG. 5 is a diagram showing a method for estimating a position shift amount and a focus shift amount in the first embodiment.

【図6】 実施の形態2の色収差推定装置の構成図。FIG. 6 is a configuration diagram of a chromatic aberration estimation device according to a second embodiment.

【図7】 実施の形態3の色収差推定装置の構成図。FIG. 7 is a configuration diagram of a chromatic aberration estimation device according to a third embodiment.

【図8】 実施の形態3において撮像素子とレンズとの
関係を示す図。
FIG. 8 is a diagram illustrating a relationship between an imaging element and a lens in Embodiment 3.

【図9】 実施の形態3において被写体が真円形のもの
であった場合の画像を示す図。
FIG. 9 is a diagram showing an image when a subject is a perfect circle in the third embodiment.

【図10】 実施の形態3において光軸中心と撮像中心
が異なる場合の画像を示す図。
FIG. 10 is a diagram showing an image in the case where the optical axis center and the imaging center are different in the third embodiment.

【図11】 実施の形態3において撮像素子の傾きによ
って位置ずれが生じる様子を示した図。
FIG. 11 is a diagram illustrating a state in which a position shift occurs due to an inclination of an image sensor in Embodiment 3.

【図12】 実施の形態3において撮像素子の傾きによ
って焦点ずれが生じる様子を示した図。
FIG. 12 is a diagram illustrating a state in which a focus shift occurs due to a tilt of an image sensor in Embodiment 3.

【図13】 実施の形態3において入射光が結像された
撮像素子の結像面を拡大した図。
FIG. 13 is an enlarged view of an image forming surface of an image pickup element on which incident light is formed in Embodiment 3;

【図14】 実施の形態3において倍率による位置ずれ
ベクトルの分布を示す図。
FIG. 14 is a diagram showing a distribution of a displacement vector due to magnification in the third embodiment.

【図15】 実施の形態3において撮像素子の傾きによ
る位置ずれベクトルの分布を示す図。
FIG. 15 is a diagram showing a distribution of a displacement vector due to an inclination of an image sensor in the third embodiment.

【図16】 実施の形態3において位置ずれ補正係数で
の補正の様子を示す図。
FIG. 16 is a diagram showing a state of correction using a position shift correction coefficient in the third embodiment.

【図17】 実施の形態4の色収差補正装置の構成図。FIG. 17 is a configuration diagram of a chromatic aberration correction device according to a fourth embodiment.

【図18】 実施の形態4において補正処理の流れを示
すフローチャート。
FIG. 18 is a flowchart illustrating a flow of a correction process according to the fourth embodiment.

【図19】 実施の形態4において倍率による位置ずれ
補正を行う様子を示す図。
FIG. 19 is a diagram showing a state in which position shift correction based on magnification is performed in the fourth embodiment.

【図20】 実施の形態4において撮像素子の傾きによ
る位置ずれ補正を行う様子を示す図。
FIG. 20 is a diagram illustrating a state in which a position shift due to an inclination of an image sensor is corrected in the fourth embodiment.

【図21】 従来の色収差補正方式において入射光が撮
像素子に結像する様子を示す図。
FIG. 21 is a diagram illustrating a state in which incident light forms an image on an image sensor in a conventional chromatic aberration correction method.

【図22】 従来の色収差補正方式において波長によっ
て大きさが異なる画像が得られる様子を示す図。
FIG. 22 is a diagram illustrating a state in which images having different sizes depending on wavelengths are obtained in a conventional chromatic aberration correction method.

【図23】 従来の色収差補正方式を説明する図。FIG. 23 is a diagram illustrating a conventional chromatic aberration correction method.

【図24】 従来の色収差補正方法の補正量を求める方
法を示す図。
FIG. 24 is a diagram showing a method for obtaining a correction amount in a conventional chromatic aberration correction method.

【図25】 従来の色収差補正方式においてレンズの光
軸と撮像素子とが垂直でない場合を示す図。
FIG. 25 is a diagram showing a case where the optical axis of the lens is not perpendicular to the image sensor in the conventional chromatic aberration correction method.

【図26】 従来の色収差補正方式においてレンズの光
軸中心と撮像素子の結像面中心がずれている場合を示す
図。
FIG. 26 is a diagram showing a case where the center of the optical axis of the lens and the center of the imaging plane of the image sensor are shifted in the conventional chromatic aberration correction method.

【符号の説明】[Explanation of symbols]

1 レンズ、2 撮像素子、3 波長帯域分離部、4
画像群、5 位置ずれ量焦点ずれ量推定部、6 記憶装
置、7 傾いた撮像素子、8 傾きのない撮像素子、9
入射光、10 光軸中心。
1 lens, 2 image sensor, 3 wavelength band separation unit, 4
Image group, 5 position shift amount, focus shift amount estimating unit, 6 storage device, 7 tilted image sensor, 8 image sensor without tilt, 9
Incident light, 10 optical axis center.

───────────────────────────────────────────────────── フロントページの続き Fターム(参考) 5C022 AA00 AB21 AB51 AB68 AC42 AC54 AC69 5C065 AA01 BB48 CC01 DD01 EE12 GG21 GG22 GG32  ──────────────────────────────────────────────────続 き Continued on the front page F term (reference) 5C022 AA00 AB21 AB51 AB68 AC42 AC54 AC69 5C065 AA01 BB48 CC01 DD01 EE12 GG21 GG22 GG32

Claims (4)

【特許請求の範囲】[Claims] 【請求項1】 光学系を介して入射された入射光を結像
し、画像信号に変換する撮像素子と、 上記撮像素子により変換された複数の画像信号を、上記
入射光の色が違うことで生じる波長の差により異なった
焦点位置に結像された複数の画像に分離する分離手段
と、 上記分離手段により分離された複数の画像中の一つの画
像を基準画像にして他の画像の焦点位置のずれ量を推定
する推定手段と、 上記推定手段により推定された焦点ずれ量に基づいて上
記異なった焦点位置に結像された画像の焦点ずれを補正
する補正手段と、を備えたことを特徴とする色収差補正
装置。
1. An image pickup device that forms an image of incident light incident through an optical system and converts the image light into an image signal, and that a plurality of image signals converted by the image pickup device have different colors of the incident light. Separating means for separating into a plurality of images formed at different focal positions due to the difference in wavelengths caused by the wavelength difference; and focusing on another image using one of the plurality of images separated by the separating means as a reference image. Estimating means for estimating a positional shift amount, and correcting means for correcting a defocus of an image formed at the different focal position based on the defocus amount estimated by the estimating means. Characteristic chromatic aberration correction device.
【請求項2】 上記推定手段は、上記画像の任意の部分
の画像のボケと画像のエッジの強調性との程度を求め上
記焦点位置のずれ量を推定することを特徴とする請求項
1記載の色収差補正装置。
2. The image processing apparatus according to claim 1, wherein the estimating unit obtains a degree of blur of an image of an arbitrary part of the image and a degree of enhancement of an edge of the image, and estimates the amount of shift of the focal position. Chromatic aberration corrector.
【請求項3】 上記推定手段は、上記入射光が上記撮像
素子の異なった位置に結像されたときには、上記画像の
任意の部分を上記基準画像に重ね合わせ最も相関が高く
なる重ね合わせ位置を求めて上記焦点位置のずれ量を推
定することを特徴とする請求項1記載の色収差補正装
置。
3. The estimating means, when the incident light is imaged at a different position on the image sensor, superimposes an arbitrary part of the image on the reference image and determines a superposition position having the highest correlation. 2. The chromatic aberration corrector according to claim 1, wherein the amount of deviation of the focal position is estimated.
【請求項4】 上記推定手段により推定された上記焦点
位置のずれ量に基づいて上記光学系に対する上記撮像素
子の傾きにより生じる複数の画像の焦点ずれを補正する
第1の補正係数と、上記波長の差により生じる複数の画
像の焦点ずれを補正する第2の補正係数とを算出する演
算手段を備え、 上記補正手段は、上記第1と第2の補正係数に基づいて
上記異なった焦点位置に結像された複数の画像の焦点ず
れを補正することを特徴とする請求項1記載の色収差補
正装置。
4. A first correction coefficient for correcting a focus shift of a plurality of images caused by a tilt of the image pickup device with respect to the optical system based on the shift amount of the focal position estimated by the estimation means, and the wavelength. Computing means for calculating a second correction coefficient for correcting a defocus of a plurality of images caused by the difference between the two images, wherein the correcting means sets the different focal positions on the basis of the first and second correction coefficients. 2. The chromatic aberration corrector according to claim 1, wherein defocus of a plurality of formed images is corrected.
JP27814199A 1999-09-30 1999-09-30 Chromatic aberration correction device Pending JP2001103358A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP27814199A JP2001103358A (en) 1999-09-30 1999-09-30 Chromatic aberration correction device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP27814199A JP2001103358A (en) 1999-09-30 1999-09-30 Chromatic aberration correction device

Publications (1)

Publication Number Publication Date
JP2001103358A true JP2001103358A (en) 2001-04-13

Family

ID=17593167

Family Applications (1)

Application Number Title Priority Date Filing Date
JP27814199A Pending JP2001103358A (en) 1999-09-30 1999-09-30 Chromatic aberration correction device

Country Status (1)

Country Link
JP (1) JP2001103358A (en)

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006511900A (en) * 2002-12-20 2006-04-06 ワーナー ブラザーズ エンターテイメント インコーポレーテッド Reduction of resolution difference of separated colors
WO2007007878A1 (en) * 2005-07-14 2007-01-18 Nikon Corporation Image processing device and image processing method
JP2007028041A (en) * 2005-07-14 2007-02-01 Nikon Corp Image processing apparatus
JP2007028040A (en) * 2005-07-14 2007-02-01 Nikon Corp Image processing apparatus
JP2007028042A (en) * 2005-07-14 2007-02-01 Nikon Corp Image processing apparatus
WO2007037229A1 (en) * 2005-09-29 2007-04-05 Nikon Corporation Image processing apparatus and image processing method
JP2007304525A (en) * 2006-05-15 2007-11-22 Ricoh Co Ltd Image input device, electronic equipment, and image input method
KR100843433B1 (en) 2006-11-22 2008-07-03 삼성전기주식회사 Method for measuring amount of blurring of micro camera module
JP2008532449A (en) * 2005-03-07 2008-08-14 ディーエックスオー ラブズ Using color digital images, a method of activating function, ie sharpness change
CN100428778C (en) * 2005-02-08 2008-10-22 奥林巴斯映像株式会社 Color adjustment method and apparatus
JP2009140496A (en) * 2007-12-03 2009-06-25 Ricoh Co Ltd Electro-optic color image processing system and lens system
JP2009219123A (en) * 2008-03-12 2009-09-24 Thomson Licensing Correcting method of color aberration
JP2010041403A (en) * 2008-08-05 2010-02-18 Mitsubishi Electric Corp Device and method for correcting image
JP2010177832A (en) * 2009-01-28 2010-08-12 Nikon Corp Image processing apparatus and image processing method
JP2012015781A (en) * 2010-06-30 2012-01-19 Sony Corp Image processing apparatus, image processing method, and program
JP2012044498A (en) * 2010-08-20 2012-03-01 Sony Corp Imaging apparatus, aberration correction method and program
JP2012198031A (en) * 2011-03-18 2012-10-18 Ricoh Co Ltd Image correction method and image correction device
GB2500983A (en) * 2012-03-06 2013-10-09 Csr Technology Inc Using Multiple Colour Images to Determine Lens Focus Position for Digital Camera Autofocus
JP2013540286A (en) * 2010-09-29 2013-10-31 アプライド プレシジョン インコーポレイテッド Calibration targets for microscopic imaging
JP2014511508A (en) * 2011-02-25 2014-05-15 ボード・オブ・リージエンツ,ザ・ユニバーシテイ・オブ・テキサス・システム Focus error estimation in images
JP2014532188A (en) * 2011-10-18 2014-12-04 ルミネックス コーポレーション Image data processing method and system
KR20170096891A (en) * 2016-02-17 2017-08-25 삼성전자주식회사 Methods of correcting color fringe and processing image data using the same

Cited By (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006511900A (en) * 2002-12-20 2006-04-06 ワーナー ブラザーズ エンターテイメント インコーポレーテッド Reduction of resolution difference of separated colors
JP4709649B2 (en) * 2002-12-20 2011-06-22 ワーナー ブラザーズ エンターテイメント インコーポレーテッド Reduction of resolution difference of separated colors
CN100428778C (en) * 2005-02-08 2008-10-22 奥林巴斯映像株式会社 Color adjustment method and apparatus
JP2008532449A (en) * 2005-03-07 2008-08-14 ディーエックスオー ラブズ Using color digital images, a method of activating function, ie sharpness change
JP2007028040A (en) * 2005-07-14 2007-02-01 Nikon Corp Image processing apparatus
JP2007028042A (en) * 2005-07-14 2007-02-01 Nikon Corp Image processing apparatus
JP2007028041A (en) * 2005-07-14 2007-02-01 Nikon Corp Image processing apparatus
WO2007007878A1 (en) * 2005-07-14 2007-01-18 Nikon Corporation Image processing device and image processing method
US8509533B2 (en) 2005-07-14 2013-08-13 Nikon Corporation Image processing device and image processing method
US8233710B2 (en) 2005-07-14 2012-07-31 Nikon Corporation Image processing device and image processing method
WO2007037229A1 (en) * 2005-09-29 2007-04-05 Nikon Corporation Image processing apparatus and image processing method
US7973850B2 (en) 2005-09-29 2011-07-05 Nikon Corporation Image processing apparatus and image processing method
JP2007304525A (en) * 2006-05-15 2007-11-22 Ricoh Co Ltd Image input device, electronic equipment, and image input method
KR100843433B1 (en) 2006-11-22 2008-07-03 삼성전기주식회사 Method for measuring amount of blurring of micro camera module
JP2009140496A (en) * 2007-12-03 2009-06-25 Ricoh Co Ltd Electro-optic color image processing system and lens system
JP2009219123A (en) * 2008-03-12 2009-09-24 Thomson Licensing Correcting method of color aberration
JP2010041403A (en) * 2008-08-05 2010-02-18 Mitsubishi Electric Corp Device and method for correcting image
JP2010177832A (en) * 2009-01-28 2010-08-12 Nikon Corp Image processing apparatus and image processing method
EP2424248A3 (en) * 2010-06-30 2015-06-03 Sony Corporation Image processing device, image processing method, and program
JP2012015781A (en) * 2010-06-30 2012-01-19 Sony Corp Image processing apparatus, image processing method, and program
JP2012044498A (en) * 2010-08-20 2012-03-01 Sony Corp Imaging apparatus, aberration correction method and program
JP2013540286A (en) * 2010-09-29 2013-10-31 アプライド プレシジョン インコーポレイテッド Calibration targets for microscopic imaging
US10802261B2 (en) 2010-09-29 2020-10-13 Global Life Sciences Solutions Usa Llc Calibration targets for microscope imaging
JP2014511508A (en) * 2011-02-25 2014-05-15 ボード・オブ・リージエンツ,ザ・ユニバーシテイ・オブ・テキサス・システム Focus error estimation in images
JP2012198031A (en) * 2011-03-18 2012-10-18 Ricoh Co Ltd Image correction method and image correction device
JP2014532188A (en) * 2011-10-18 2014-12-04 ルミネックス コーポレーション Image data processing method and system
GB2500983A (en) * 2012-03-06 2013-10-09 Csr Technology Inc Using Multiple Colour Images to Determine Lens Focus Position for Digital Camera Autofocus
US8619182B2 (en) 2012-03-06 2013-12-31 Csr Technology Inc. Fast auto focus techniques for digital cameras
KR20170096891A (en) * 2016-02-17 2017-08-25 삼성전자주식회사 Methods of correcting color fringe and processing image data using the same
KR102406215B1 (en) * 2016-02-17 2022-06-08 삼성전자주식회사 Methods of correcting color fringe and processing image data using the same

Similar Documents

Publication Publication Date Title
JP2001103358A (en) Chromatic aberration correction device
JP5528173B2 (en) Image processing apparatus, imaging apparatus, and image processing program
JP4440341B2 (en) Calibration method, calibration apparatus, and calibration system including the apparatus
JP5188651B2 (en) Image processing apparatus and imaging apparatus using the same
US8717414B2 (en) Method and apparatus for matching color image and depth image
KR20190089922A (en) Digital calibration of optical system aberrations
WO2009153983A1 (en) Image processing device, imaging device, method, and program
JP6489932B2 (en) Image processing apparatus, imaging apparatus, image processing method, and program
JP2001092968A (en) Device and method for stereo matching and method for specifying corresponding infinite-point
US9118878B2 (en) Image processing apparatus that corrects for chromatic aberration for taken image, image pickup apparatus, method of correcting for chromatic aberration of magnification therefor, and storage medium
JPH08205181A (en) Chromatic aberration correcting circuit and image pickup device with chromatic aberration correcting function
JP5528139B2 (en) Image processing apparatus, imaging apparatus, and image processing program
JP5367053B2 (en) Image processing apparatus, image processing program, image processing method, and imaging apparatus
JP2011160255A5 (en)
JP4994158B2 (en) Image correction device
JP2010086139A (en) Image processing method, image processing apparatus, and image pickup apparatus
JP6274744B2 (en) Image processing apparatus and image processing method
JPH06153087A (en) Method for correcting picture element defect
JP6856999B2 (en) Image processing equipment, image processing methods and programs
JP6652294B2 (en) Image processing device, imaging device, image processing method, program, and storage medium
JP2019134431A (en) Image processing apparatus, imaging apparatus, image processing method, and program
JP7445508B2 (en) Imaging device
JP2001298657A (en) Image forming method and image forming device
JP6469324B1 (en) Image reading device
JP2017126952A (en) Image processing unit, imaging apparatus, and image processing program

Legal Events

Date Code Title Description
RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20040625

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20051014

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20051206

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20060111

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060127

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060530

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060728

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20061003