JP2000253411A - Image pickup device and method for processing image for the image pickup device - Google Patents

Image pickup device and method for processing image for the image pickup device

Info

Publication number
JP2000253411A
JP2000253411A JP11053384A JP5338499A JP2000253411A JP 2000253411 A JP2000253411 A JP 2000253411A JP 11053384 A JP11053384 A JP 11053384A JP 5338499 A JP5338499 A JP 5338499A JP 2000253411 A JP2000253411 A JP 2000253411A
Authority
JP
Japan
Prior art keywords
color
signal
image
false
frequency component
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP11053384A
Other languages
Japanese (ja)
Inventor
Masami Sugimori
正已 杉森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP11053384A priority Critical patent/JP2000253411A/en
Priority to US09/484,989 priority patent/US6958772B1/en
Priority to EP00300408A priority patent/EP1022912B1/en
Priority to DE60045785T priority patent/DE60045785D1/en
Publication of JP2000253411A publication Critical patent/JP2000253411A/en
Priority to US11/200,377 priority patent/US7542076B2/en
Priority to US12/428,898 priority patent/US7929026B2/en
Withdrawn legal-status Critical Current

Links

Landscapes

  • Color Television Image Signal Generators (AREA)

Abstract

PROBLEM TO BE SOLVED: To reduce false colors generated by color interpolation and to remove isolated pixels in a hue signal from which false colors are removed. SOLUTION: The image pickup device is provided with an image pickup element (CCD) 5, a lens 2 for forming an image on the element 5, an A/D converter 7 for converting an image signal outputted from the element 5 into a digital signal, and a color interpolation circuit 9 for interpolating the colors of the digital signal converted by the A/D converter 7 and preparing image data consisting of a plurality of color planes. The device is also provided with a separation circuit 17 for separating the image data consisting of a plurality of color planes into a luminance signal and a hue signal, an HPE 18 for extracting a high frequency component from the separated luminance signal, a false color suppressing circuit 13 for reducing false colors generated in the circuit 9 by reducing the gain of the hue signal existing in a prescribed color area in accordance with the high frequency component of the luminance signal and the hue signal, and median filters 20a, 20b for removing isolated pixel data from the hue signal whose false colors are suppressed by the circuit 13.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、例えばデジタルカ
メラやデジタルビデオ等の撮像装置及び前記撮像装置に
おける画像処理方法に関するものである。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image pickup apparatus such as a digital camera and a digital video, and an image processing method in the image pickup apparatus.

【0002】[0002]

【従来の技術】従来の単板のデジタルカメラにおいてレ
ンズを交換できるカメラはほとんどなく、ほとんどレン
ズ一体型のシステムとなっている。そのため予め光学的
ローパスフィルタやIRカットフィルタ等は、レンズを
通った光により画像信号を生成するCCDの前に設けら
れていて、モアレや偽色に対してある程度の効果が得ら
れている。しかし、レンズを交換できるカメラの場合に
は、IRカットフィルタはCCDのガラス面上に薄膜で
形成することにより、CCDの前段に配置することは可
能である。しかし、光学的ローパスフィルタをCCDの
前段に配置するためのスペースを取ると実質的にカメラ
本体のサイズが大きくなってしまう。また、このような
光学的ローパスフィルタを挿入することによってモアレ
や偽色はある程度軽減できるが、画像の空間周波数が低
下するという問題があり、その結果、銀塩写真のような
ピントの鋭さがなくなってしまう。そのような理由によ
り、光学的ローパスフィルタを設けない光学系の重要性
が高まっている。
2. Description of the Related Art In conventional single-panel digital cameras, there are hardly any cameras whose lenses can be exchanged, and the system is almost a lens-integrated type. Therefore, an optical low-pass filter, an IR cut filter, and the like are provided before the CCD that generates an image signal by light passing through the lens, and a certain effect against moiré and false colors is obtained. However, in the case of a camera having a replaceable lens, the IR cut filter can be disposed in front of the CCD by forming a thin film on the glass surface of the CCD. However, if a space for arranging the optical low-pass filter in front of the CCD is taken, the size of the camera body is substantially increased. In addition, by inserting such an optical low-pass filter, moiré and false colors can be reduced to some extent, but there is a problem that the spatial frequency of the image is lowered, and as a result, sharpness of focus like a silver halide photograph is lost. Would. For that reason, the importance of an optical system without an optical low-pass filter is increasing.

【0003】また、このような光学的ローパスフィルタ
を設けても、単板CCDのデジタルカメラの場合にはベ
イヤー配列に代表されるように、G(緑)に対してR
(赤)とB(青)の画像が少なく色の間隔が広くなり色
補間する際に偽色が発生することになる。また従来の色
補間の方法として、デジタルフィルタ等によって3つの
カラープレーンを作る方法もあるが、ハードウェア的に
フィルタのタップ数が制限されてしまい、本来持ってい
る画像データの解像力を十分に引き出すことができなか
った。
[0003] In addition, even if such an optical low-pass filter is provided, in the case of a single-chip CCD digital camera, as represented by the Bayer arrangement, R (green) is applied to G (green).
There are few images of (red) and B (blue), and the color interval is widened, so that a false color is generated at the time of color interpolation. As a conventional color interpolation method, there is also a method of creating three color planes using a digital filter or the like. However, the number of taps of the filter is limited by hardware, and the original resolution of image data is sufficiently obtained. I couldn't do that.

【0004】そこで従来は、米国特許第5373322
号や米国特許第5629734号に代表されるような画
像処理、特に色補間処理を行うことにより解像力の高い
画像データを得ることが提案されている。これらの手法
はモアレに対しては改善されないが、偽色を減少させる
ことに対しては効果があるとされている。
Therefore, conventionally, US Pat. No. 5,373,322
It has been proposed to obtain image data having a high resolution by performing image processing such as represented by U.S. Pat. Although these techniques do not improve against moiré, they are said to be effective in reducing false colors.

【0005】[0005]

【発明が解決しようとする課題】しかし、このような従
来の手法を採用しても、色補間する際の偽色を完全に消
去することはできなかった。これについて以下に説明す
る。
However, even if such a conventional method is employed, it is not possible to completely eliminate false colors during color interpolation. This will be described below.

【0006】まず図200に示すように、画素ピッチの
間隔で縦縞の白い線がCCDのGとRのライン上で露光
されると、従来の色補間処理を施すことにより、赤
(R)、黄色(Y)の縦縞の画像になってしまう(図2
00において、斜線部は黒でデータ“0”とする)。又
同様に、図201のように、画素ピッチの間隔で縦縞の
白い線がCCDの緑(G)と青(B)のライン上で露光
されると、上記色補間処理によって、青(B)とシアン
(C)の縦縞の画像になってしまう。尚、図200と図
201において、縦縞でなく横縞でも同様の結果が得ら
れ、赤(R)、黄色(Y)、又は、青(B)とシアン
(C)の縦縞の画像ができあがってしまう。
First, as shown in FIG. 200, when white lines of vertical stripes are exposed on the G and R lines of the CCD at pixel pitch intervals, a conventional color interpolation process is performed to obtain red (R), It becomes an image of vertical stripes of yellow (Y) (Fig. 2
At 00, the hatched portion is black and the data is “0”). Similarly, as shown in FIG. 201, when white lines of vertical stripes are exposed on the green (G) and blue (B) lines of the CCD at pixel pitch intervals, the blue (B) And a vertical stripe image of cyan (C). Note that in FIGS. 200 and 201, the same result is obtained not only for vertical stripes but also for horizontal stripes, and an image of vertical stripes of red (R), yellow (Y), or blue (B) and cyan (C) is completed. .

【0007】更に別のパターンとして、図202に示す
ように、チェッカーフラグパターンのような白い画像を
CCDのRとBで露光すると、上記色補間処理により、
白であるにも拘らずマゼンタ(M)の画像になってしま
う。又同様に図203に示すように、チェッカーフラグ
パターンのような白い画像をCCDのGで露光すると、
上記色補間処理により、白であるにも拘らず、緑(G)
の画像になってしまう。
As another pattern, as shown in FIG. 202, when a white image such as a checker flag pattern is exposed by R and B of the CCD, the above color interpolation process
The image is magenta (M) despite being white. Similarly, as shown in FIG. 203, when a white image such as a checker flag pattern is exposed with G of a CCD,
Due to the color interpolation processing, green (G) despite being white
Image.

【0008】そこで、このような偽色を除去するため
に、パーソナルコンピュータ上のアプリケーション・プ
ログラムにより、色空間を例えばRGBからL*a*b*
に変換し、a*,b*のそれぞれにフィルタをかけるなど
の処理を施すことにより、偽色に対する処理を行ってい
る。但し、図202、図203に示すされるチェッカー
フラグパターンの場合、緑もしくはマゼンタの低周波の
画像と区別することはできず、偽色として判別すること
ができない。又このままJPEGで圧縮するからといっ
て無理に色差の周波数の帯域を制限してしまうと画像が
眠くなってしまい、偽色のレベルは下がるものの、その
偽色成分が周辺画素に広がってしまうという問題があっ
た。
In order to eliminate such false colors, an application program on a personal computer is used to change the color space from, for example, RGB to L * a * b *.
, And performing a process such as applying a filter to each of a * and b *, thereby performing a process for a false color. However, in the case of the checker flag patterns shown in FIGS. 202 and 203, they cannot be distinguished from green or magenta low-frequency images and cannot be identified as false colors. If the frequency band of the color difference is forcibly limited just because the image is compressed by JPEG as it is, the image becomes sleepy and the level of the false color is reduced, but the false color component spreads to the surrounding pixels. There was a problem.

【0009】本発明は上記従来例に鑑みてなされたもの
で、色補間処理によって発生する偽色を減少させること
ができる撮像装置及び前記撮像装置における画像処理方
法を提供することを目的とする。
SUMMARY OF THE INVENTION The present invention has been made in view of the above conventional example, and has as its object to provide an image pickup apparatus and an image processing method in the image pickup apparatus which can reduce false colors generated by color interpolation processing.

【0010】また本発明の目的は、撮像装置の大型化や
コストアップを防止して偽色を減少させることができる
撮像装置及び前記撮像装置における画像処理方法を提供
することにある。
It is another object of the present invention to provide an imaging apparatus capable of preventing an increase in the size and cost of the imaging apparatus and reducing false colors, and an image processing method in the imaging apparatus.

【0011】また本発明の目的は、比較的簡易な構成で
孤立した画素における偽色を減少させることができる撮
像装置及び前記撮像装置における画像処理方法を提供す
ることにある。
It is another object of the present invention to provide an image pickup apparatus capable of reducing false colors in isolated pixels with a relatively simple configuration and an image processing method in the image pickup apparatus.

【0012】[0012]

【課題を解決するための手段】上記目的を達成するため
に本発明の撮像装置は以下のような構成を備える。即
ち、撮像素子と、前記撮像素子に像を結像させるための
結像手段と、前記撮像素子から出力される画像信号をデ
ジタル信号に変換するA/D変換手段と、前記A/D変
換手段により変換されたデジタル信号を色補間し、複数
のカラープレーンの画像データを作成する色補間手段
と、前記複数のカラープレーンの画像データを輝度信号
と色差信号とに分離する分離手段と、前記分離手段によ
り分離された輝度信号の高周波成分を抽出する抽出手段
と、前記抽出手段により抽出された輝度信号の高周波成
分と前記色差信号から得られた色相信号とに応じて前記
色補間手段で発生する偽色を減少させる偽色除去手段
と、前記偽色除去手段により偽色が除去された色相信号
に対して孤立画素を除去する孤立点除去手段とを有する
ことを特徴とする。
In order to achieve the above object, an image pickup apparatus according to the present invention has the following arrangement. That is, an image sensor, an image forming means for forming an image on the image sensor, an A / D converter for converting an image signal output from the image sensor into a digital signal, and the A / D converter A color interpolating means for color-interpolating the digital signal converted by the above to generate image data of a plurality of color planes; a separating means for separating the image data of the plurality of color planes into a luminance signal and a color difference signal; Extracting means for extracting a high-frequency component of the luminance signal separated by the means; and the color interpolation means generating the high-frequency component of the luminance signal extracted by the extracting means and the hue signal obtained from the color difference signal. It is characterized by having false color removing means for reducing false colors and isolated point removing means for removing isolated pixels from the hue signal from which false colors have been removed by the false color removing means.

【0013】上記目的を達成するために本発明の撮像装
置は以下のような構成を備える。即ち、撮像素子と、前
記撮像素子に像を結像させるための結像手段と、前記撮
像素子から出力される画像信号をデジタル信号に変換す
るA/D変換手段と、前記A/D変換手段により変換さ
れたデジタル信号を色補間し、複数のカラープレーンの
画像データを作成する色補間手段と、前記複数のカラー
プレーンの色空間から別の表色系の色空間に変換する色
空間変換手段と、前記別の表色系の色空間の画像データ
を輝度信号と色相信号とに分離する分離手段と、前記分
離手段により分離された輝度信号の高周波成分を抽出す
る抽出手段と、前記分離手段により分離された色相信号
に対して孤立画素の除去を行う孤立点除去手段と、前記
抽出手段により抽出された輝度信号の高周波成分と前記
孤立点除去手段により孤立画素が除去された色相信号と
に応じて前記色補間手段で発生する偽色を減少させる偽
色除去手段とを有することを特徴とする。
[0013] In order to achieve the above object, an imaging apparatus according to the present invention has the following configuration. That is, an image sensor, an image forming means for forming an image on the image sensor, an A / D converter for converting an image signal output from the image sensor into a digital signal, and the A / D converter Color interpolation means for color-interpolating the digital signal converted by the above to create image data of a plurality of color planes, and color space conversion means for converting the color space of the plurality of color planes to another color space of a color system Separating means for separating the image data in the color space of the other color system into a luminance signal and a hue signal; extracting means for extracting a high-frequency component of the luminance signal separated by the separating means; Point removing means for removing an isolated pixel from the hue signal separated by the above, a high-frequency component of the luminance signal extracted by the extracting means, and a hue signal from which the isolated pixel is removed by the isolated point removing means. And having a false color removal means for reducing the false color generated by the color interpolating means according to and.

【0014】上記目的を達成するために本発明の撮像装
置における画像処理方法は以下のような工程を備える。
即ち、撮像素子を有し、前記撮像素子に結像された映像
に対応する画像信号を生成する撮像装置における画像処
理方法であって、前記撮像素子から出力される画像信号
をデジタル信号に変換するA/D変換工程と、A/D変
換工程で変換されたデジタル信号を色補間し、複数のカ
ラープレーンの画像データを作成する色補間工程と、前
記複数のカラープレーンの画像データを輝度信号と色差
信号とに分離する分離工程と、前記分離工程で分離され
た輝度信号の高周波成分を抽出する抽出工程と、前記抽
出工程で抽出された輝度信号の高周波成分と前記色差信
号から得られた色相信号とに応じて前記色補間工程で発
生する偽色を減少させる偽色除去工程と、前記偽色除去
工程で偽色が除去された色相信号に対して孤立画素を除
去する孤立点除去工程とを有することを特徴とする。
In order to achieve the above object, an image processing method in an image pickup apparatus according to the present invention includes the following steps.
That is, an image processing method in an image pickup apparatus having an image sensor and generating an image signal corresponding to a video image formed on the image sensor, wherein the image signal output from the image sensor is converted into a digital signal An A / D conversion step, a color interpolation step of performing color interpolation on the digital signal converted in the A / D conversion step to create image data of a plurality of color planes, and converting the image data of the plurality of color planes into a luminance signal. A separation step of separating the color signal into a color difference signal, an extraction step of extracting a high frequency component of the luminance signal separated in the separation step, and a hue obtained from the high frequency component of the luminance signal extracted in the extraction step and the color difference signal. A false color removing step of reducing a false color generated in the color interpolation step in accordance with the signal, and an isolated point removing step of removing an isolated pixel from the hue signal from which the false color has been removed in the false color removing step. And having a degree.

【0015】上記目的を達成するために本発明の撮像装
置における画像処理方法は以下のような工程を備える。
即ち、撮像素子を有し、前記撮像素子に結像された映像
に対応する画像信号を生成する撮像装置における画像処
理方法であって、前記撮像素子から出力される画像信号
をデジタル信号に変換するA/D変換工程と、A/D変
換工程で変換されたデジタル信号を色補間し、複数のカ
ラープレーンの画像データを作成する色補間工程と、前
記複数のカラープレーンの色空間から別の表色系の色空
間に変換する色空間変換工程と、前記別の表色系の色空
間の画像データを輝度信号と色相信号とに分離する分離
工程と、前記分離工程で分離された輝度信号の高周波成
分を抽出する抽出工程と、前記抽出工程で抽出された輝
度信号の高周波成分と前記孤立点除去工程で孤立画素が
除去された色相信号とに応じて前記色補間工程で発生す
る偽色を減少させる偽色除去工程とを有することを特徴
とする。
In order to achieve the above object, an image processing method in an image pickup apparatus according to the present invention includes the following steps.
That is, an image processing method in an image pickup apparatus having an image sensor and generating an image signal corresponding to a video image formed on the image sensor, wherein the image signal output from the image sensor is converted into a digital signal An A / D conversion step, a color interpolation step of color-interpolating the digital signal converted in the A / D conversion step to create image data of a plurality of color planes, and another table from the color space of the plurality of color planes A color space conversion step of converting the color data into a color space; a separation step of separating the image data of the another color space into a luminance signal and a hue signal; An extraction step of extracting a high-frequency component, and a false color generated in the color interpolation step according to the high-frequency component of the luminance signal extracted in the extraction step and the hue signal from which the isolated pixels have been removed in the isolated point removal step. Decrease And having a false color removal step.

【0016】[0016]

【発明の実施の形態】本発明の実施の形態に係る具体例
を説明する前に、本実施の形態に係る特徴を説明する
と、上述した偽色をなくすためには、RGBの各色成分
毎にCCDを配した3板カメラを使用するのが理想的で
あるが、このような構成にするとカメラ自体のサイズが
増大してしまう。そこで、赤(R)から黄色(Y)と、
青(B)からシアン(C)への偽色は高周波であること
に着目し、輝度の周波数成分が高い孤立点等を除去し、
色相が所定範囲の場合に、その色差信号のゲインを低下
させることにより、その偽色の発生を抑制する点にあ
る。
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Before describing a specific example according to an embodiment of the present invention, the features of the present embodiment will be described. In order to eliminate the above-described false color, each of the RGB color components must be Although it is ideal to use a three-plate camera having a CCD, such a configuration increases the size of the camera itself. Then, from red (R) to yellow (Y),
Focusing on the fact that the false color from blue (B) to cyan (C) has a high frequency, an isolated point having a high luminance frequency component is removed,
When the hue is in a predetermined range, the generation of the false color is suppressed by reducing the gain of the color difference signal.

【0017】以下、添付図面を参照して本発明の好適な
実施の形態を詳細に説明する。
Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings.

【0018】[実施の形態1]図1は、本実施の形態1
のデジタルカメラにおける画像処理回路の構成を中心に
示すブロック図である。
[Embodiment 1] FIG. 1 shows Embodiment 1 of the present invention.
FIG. 2 is a block diagram mainly showing the configuration of an image processing circuit in the digital camera of FIG.

【0019】カメラに入射される光1はレンズ2を通過
し、絞り3で光量調節が行われ、シャッタ(不図示)が
開いている時間だけCCD5に露光される。また光1は
CCD5に露光される前に、CCD5が赤外領域の光を
検出しない様にIRフィルタ4によって長波長側の周波
数領域(帯域)がカットされる。そしてCCD5に露光
された光1は電荷量としてCCD5内に蓄積されて電気
信号として出力される。この電気信号はCDS・AGC
回路6で所定のゲインに増幅され、A/D変換器7でデ
ジタルデータに変換される。このデジタルデータに変換
された画像データは、ホワイトバランス回路8でRGB
のゲインが調整され、図2に示すように、色補間回路9
で、例えばRGB3つのカラープレーンに生成される。
また、RGB3プレーンで表された画像データは、マス
キング処理回路10でRGBの色相に関する調整が行わ
れ、ガンマ変換回路11でディスプレイ等に表示するの
に必要な処理が施される。次に、画像データは、RGB
3プレーンのままだとデータ数が多いので、JPEG等
の圧縮処理が行われる。
The light 1 incident on the camera passes through the lens 2, the light amount is adjusted by the stop 3, and the CCD 5 is exposed only during the time when a shutter (not shown) is open. Before the light 1 is exposed to the CCD 5, a frequency region (band) on a longer wavelength side is cut by the IR filter 4 so that the CCD 5 does not detect light in the infrared region. The light 1 exposed on the CCD 5 is stored in the CCD 5 as a charge amount and output as an electric signal. This electric signal is CDS / AGC
The signal is amplified to a predetermined gain by the circuit 6 and converted to digital data by the A / D converter 7. The image data converted into the digital data is converted into RGB data by the white balance circuit 8.
Is adjusted, and as shown in FIG.
Are generated on, for example, three color planes of RGB.
The image data represented by the three RGB planes is adjusted by the masking processing circuit 10 with respect to RGB hues, and the gamma conversion circuit 11 performs processing necessary for display on a display or the like. Next, the image data is RGB
Since the number of data is large if three planes remain, compression processing such as JPEG is performed.

【0020】まず、RGB/YUV変換回路12で色空
間をRGBからY色差に変換する。これは例えば、以下
の式に基づいて行われる。
First, the RGB / YUV conversion circuit 12 converts the color space from RGB to Y color difference. This is performed, for example, based on the following equation.

【0021】 Y= 0.29900×R+0.58700×G+0.11400×B …(1) U= -0.16874×R−0.33126×G+0.50000×B …(2) V= 0.50000×R−0.41869×G−0.08131×B …(3) また、色補間回路9で得られたRGB3プレーンの画像
は、高周波成分と色相を検出するために、まず、RGB
/Y変換回路17において、上記式(1)を用いて輝度
信号Yを計算する。次に、この求められた輝度信号Yの
高周波成分を検出するために、空間ハイパスフィルタ
(HPF)18により、図3に示すような空間ハイパス
フィルタ演算が行われる。また、RGB/Y変換回路1
7により求められた輝度信号Yは、色相を検出するため
に色相検出回路19に送られ、ここで色差信号R−Y、
B−Yが計算される。尚、図3において、入力信号はマ
トリクス300で乗算された後、減算器301でこの乗
算結果から入力信号を減算することにより、空間ハイパ
スフィルタ演算が行われている。
Y = 0.29900 × R + 0.58700 × G + 0.11400 × B (1) U = −0.16874 × R−0.33126 × G + 0.50000 × B (2) V = 0.50000 × R−0.41869 × G−0.08131 × B (3) The image of the RGB3 plane obtained by the color interpolation circuit 9 is first converted to RGB in order to detect a high frequency component and a hue.
The / Y conversion circuit 17 calculates the luminance signal Y using the above equation (1). Next, in order to detect the high-frequency component of the obtained luminance signal Y, a spatial high-pass filter (HPF) 18 performs a spatial high-pass filter operation as shown in FIG. RGB / Y conversion circuit 1
7 is sent to the hue detection circuit 19 to detect the hue, where the color difference signals RY,
BY is calculated. In FIG. 3, after the input signal is multiplied by a matrix 300, a subtractor 301 subtracts the input signal from the result of the multiplication to perform a spatial high-pass filter operation.

【0022】偽色抑圧回路13では、空間ハイパスフィ
ルタ18で得られた輝度信号Yの高周波成分と、色相検
出回路19で得られた色相情報とから、RGB/YUV
変換回路12から出力される色差空間のUとVのゲイン
を下げることによって、偽色を抑圧する。
In the false color suppression circuit 13, RGB / YUV is obtained from the high frequency component of the luminance signal Y obtained by the spatial high-pass filter 18 and the hue information obtained by the hue detection circuit 19.
By lowering the gains of U and V in the color difference space output from the conversion circuit 12, false colors are suppressed.

【0023】この偽色抑圧処理について図4及び図5を
参照して説明する。
This false color suppression processing will be described with reference to FIGS.

【0024】まず、注目画素の色がY、R−Y、B−Y
の色空間において所定の範囲(図5の斜線で示される領
域)に有るかどうか判断し、もし偽色と思われる範囲の
領域の色であれば、空間ハイパスフィルタ18で得られ
る輝度信号の高周波成分の値に応じて、図4に示される
ように、ある値“of1”以上ならば、色差信号UとVの
ゲインを下げる。これにより偽色を抑圧することができ
る。
First, the color of the target pixel is Y, RY, BY.
Is determined to be within a predetermined range (the area indicated by oblique lines in FIG. 5) in the color space, and if the color is in a range considered to be a false color, the high frequency of the luminance signal obtained by the spatial high-pass filter 18 According to the value of the component, as shown in FIG. 4, if the value is equal to or more than a certain value “of1”, the gain of the color difference signals U and V is reduced. Thereby, false colors can be suppressed.

【0025】以上説明した偽色の出方で、赤(R)から
黄色(Y)、青(B)からシアン(C)の偽色のパター
ンは、輝度が変化しているために高周波成分を検出すれ
ば偽色として検出できる。しかし、文字の周りの偽色は
孤立的であり、周りの画素の輝度に対して変化している
とは限らない。
In the above-described false color appearance, the false color pattern of red (R) to yellow (Y) and blue (B) to cyan (C) has a high frequency component due to a change in luminance. If detected, it can be detected as a false color. However, the false color around the character is isolated and does not always change with respect to the brightness of the surrounding pixels.

【0026】そこで本実施の形態では、メディアンフィ
ルタ20a,20bにより色差信号UとVに関して孤立
点除去を行い、更に偽色の除去を行う。これを説明した
図が図6である。注目画素を含む3×3の領域の要素を
小さい順に並べて、その注目画素の値を並べた中間値で
置き換える。これにより、周りの色相と極端に離れた色
の画素がなくなることになる。特に、ローパスフィルタ
をかけることを行わないので、解像力を極端に落とすこ
とにはならず、周りの画素に影響してしまうこともな
い。
Therefore, in the present embodiment, the median filters 20a and 20b remove the isolated points from the color difference signals U and V, and further remove the false color. FIG. 6 illustrates this. The elements of the 3 × 3 area including the target pixel are arranged in ascending order, and the value of the target pixel is replaced with the arranged intermediate value. As a result, there is no pixel having a color extremely far from the surrounding hue. In particular, since no low-pass filter is applied, the resolving power is not extremely reduced, and the surrounding pixels are not affected.

【0027】図6において、図6(A)は注目画素(a
*22)600とその周辺画素を含む3×3画素からなる
画素マトリクスを示し、図6(B)はこの3×3画素の
画素値をグラフ化したもので、その平均値を求めるのに
使用される。図6(C)は、注目画素(a*22)をこの
平均画素値(中間値)で置換えた状態を示している。
FIG. 6A shows the target pixel (a
* 22) Shows a pixel matrix composed of 3 × 3 pixels including 600 and its surrounding pixels. FIG. 6B is a graph of the pixel values of the 3 × 3 pixels, which is used to calculate the average value. Is done. FIG. 6C shows a state where the pixel of interest (a * 22) is replaced with this average pixel value (intermediate value).

【0028】上記構成による偽色抑圧処理ついて説明す
ると、空間HPF18により、例えば図200乃至図2
03で説明したような縦縞或はチェッカーフラグパター
ンのような高周波成分を抽出し、その高周波領域で、図
200乃至図203で説明したような偽色が発生するよ
うな(例えば図200の例ではRとY成分の所定領域、
図201の例ではCとB成分の所定領域、図202及び
図203ではRとB成分の所定領域で、これらは図5の
斜線部に相当している)色差信号UとVのゲインを下げ
ることにより、前述した偽色の発生を防止するものであ
る。こうして偽色の抑圧を行った後、更に上述のメディ
アンフィルタ20a,20bをかけることにより、孤立
した画素をなくすようにしている。
The false color suppressing process according to the above configuration will be described.
A high frequency component such as a vertical stripe or a checker flag pattern described in FIG. 03 is extracted, and a false color described in FIGS. 200 to 203 is generated in the high frequency region (for example, in the example of FIG. 200, Predetermined regions of R and Y components,
In the example of FIG. 201, the predetermined regions of the C and B components, and in FIGS. 202 and 203, the predetermined regions of the R and B components, which correspond to the hatched portions in FIG. This prevents occurrence of the false color described above. After the false color is suppressed in this way, the above-described median filters 20a and 20b are further applied to eliminate isolated pixels.

【0029】次に、ローパスフィルタ(LPF)14
a,14bで、水平或は垂直方向にローパスフィルタを
かけ、間引き回路15で、Y:U:V=4:4:4か
ら、Y:U:V=4:2:2ないしはY:U:V=4:
1:1といった所定のJPEGフォーマットに従った色
差信号の間引きを行う。そしてJPEG回路16で、J
PEG圧縮を行う。これによって、偽色の少ない圧縮さ
れた画像を作ることができる。
Next, a low-pass filter (LPF) 14
a, 14b, a low-pass filter is applied in the horizontal or vertical direction, and a thinning circuit 15 converts Y: U: V = 4: 4: 4 to Y: U: V = 4: 2: 2 or Y: U: V = 4:
The color difference signal is thinned out according to a predetermined JPEG format such as 1: 1. Then, in the JPEG circuit 16, J
Perform PEG compression. As a result, a compressed image with less false colors can be created.

【0030】また、ここでは輝度信号Yを計算するに当
り、上記式(1)式を用いているが、簡易的な輝度信号
Yeを用いても可能である。たとえば、 Ye=R+2×G+B (4) により求めてもよい。
Although the above equation (1) is used for calculating the luminance signal Y here, it is also possible to use a simple luminance signal Ye. For example, Ye = R + 2 × G + B (4)

【0031】また、これら輝度信号を計算せずに、緑
(G)の信号成分を用いて輝度信号として採用すること
も可能である。
It is also possible to adopt the green (G) signal component as a luminance signal without calculating these luminance signals.

【0032】図7は、本実施の形態1に係る偽色除去処
理を説明するフローチャートである。
FIG. 7 is a flowchart for explaining the false color removal processing according to the first embodiment.

【0033】図において、まずステップS1で、色補間
処理を実行した後のRGB信号を入力し、そのRGB信
号から輝度成分Yを生成し、ステップS2で、空間ハイ
パスフィルタ(HPF)18により、輝度信号Yの高周
波成分を取り出す。ステップS3でRB信号は、この輝
度信号Yとの差分がとられ色差信号R−Y,B−Yが生
成される。ステップS4で色差信号から色相信号を生成
し、その色相信号が、偽色となり得る色範囲にあるか否
かを判定する。そして、ステップS5で偽色であるとき
はステップS6に進み、その偽色部分の色差信号の利得
をその画素の高周波成分の量に応じて低下させる。これ
により、例えば図5で示すような色空間において、色補
正により生じた偽色成分を抑えることができる。
In the figure, first, in step S1, an RGB signal after color interpolation processing is input, and a luminance component Y is generated from the RGB signal. In step S2, a luminance component Y is generated by a spatial high-pass filter (HPF) 18. The high frequency component of the signal Y is extracted. In step S3, the difference between the RB signal and the luminance signal Y is obtained to generate color difference signals RY and BY. In step S4, a hue signal is generated from the color difference signal, and it is determined whether or not the hue signal is in a color range that can be a false color. If the color is a false color in step S5, the process proceeds to step S6, and the gain of the color difference signal of the false color portion is reduced according to the amount of the high frequency component of the pixel. Thus, for example, in a color space as shown in FIG. 5, a false color component generated by color correction can be suppressed.

【0034】このように本実施の形態1によれば、赤か
ら黄色及び青からシアンへの偽色の発生を防止でき、さ
らに孤立的な偽色を除去することができるという効果が
ある。
As described above, according to the first embodiment, it is possible to prevent the generation of false colors from red to yellow and blue to cyan, and to remove isolated false colors.

【0035】[実施の形態2]前述の実施の形態1にお
いては、偽色を検出する手段を色補間回路9の後に設
け、RGB3プレーンになった信号を用いて行った。こ
れは色補間回路9の後に、マスキング処理、γ変換とい
った色相が変化する処理要因があるため、検出される偽
色の色相範囲が変化する可能性があるためである。従っ
て、輝度信号Yを計算して色差信号R−Y、B−Yを求
めていた。しかし、この偽色検出手段は、この位置に限
らない。例えば、JPEG圧縮するためにはRGBから
輝度、色差の色空間に変換する必要があるので、これら
の信号から偽色を検出することも可能である。また前述
の実施の形態1では、偽色抑圧後のメディアンフィルタ
20a,20bにおいて、輝度信号Yと色差信号U,V
との間で遅延が発生し、輝度信号を遅らせなければなら
なくなる。この遅れを利用したのが本実施の形態2であ
る。
[Second Embodiment] In the first embodiment described above, means for detecting a false color is provided after the color interpolation circuit 9, and the detection is performed by using the RGB three plane signals. This is because, after the color interpolation circuit 9, there are processing factors such as masking processing and γ conversion that change the hue, so that the hue range of the detected false color may change. Therefore, the luminance signal Y is calculated to obtain the color difference signals RY and BY. However, the false color detecting means is not limited to this position. For example, since JPEG compression requires conversion from RGB to a color space of luminance and color difference, it is possible to detect a false color from these signals. Further, in the first embodiment, the luminance signal Y and the color difference signals U, V in the median filters 20a, 20b after the false color suppression.
And a delay occurs, and the luminance signal must be delayed. The second embodiment utilizes this delay.

【0036】そこで、本発明の実施の形態2に係るデジ
タルカメラの画像処理部の構成を図8に示す。尚、この
図8では、前述の図1と共通する部分は同じ番号で示
し、それらの説明を省略する。
FIG. 8 shows the configuration of the image processing unit of the digital camera according to Embodiment 2 of the present invention. In FIG. 8, the same parts as those in FIG. 1 described above are denoted by the same reference numerals, and description thereof will be omitted.

【0037】このカメラに入射される光1はレンズ2を
通過し、絞り3で光量調節が行われ、シャッタ(不図
示)が開いている時間だけCCD5に露光される。また
光1はCCD5に露光される前に、CCD5が赤外領域
の光を検出しない様にIRフィルタ4によって長波長側
の領域がカットされる。そしてCCD5で露光された光
はCCD5内で電荷量として蓄積されて電気信号として
出力され、CDS・AGC回路6で所定のゲインに増幅
された後、A/D変換器7でデジタルデータに変換され
る。こうしてデジタルデータに変換された画像データ
は、ホワイトバランス回路8でRGBのゲインが調整さ
れ、前述の図2に示すように色補間回路9で例えばRG
B3つのカラープレーンに生成される。このRGB3プ
レーンからなる画像データは、マスキング処理回路10
でRGBの色の色相に関する調整が行われ、ガンマ変換
回路11でディスプレイ等に表示するのに必要な処理が
施される。この画像データは、RGB/YUV変換回路
12により、RGBからY色差の色空間に変換される。
The light 1 incident on the camera passes through the lens 2, the light amount is adjusted by the stop 3, and the CCD 5 is exposed only during the time when a shutter (not shown) is open. Before the light 1 is exposed to the CCD 5, an area on the long wavelength side is cut by the IR filter 4 so that the CCD 5 does not detect light in the infrared region. The light exposed by the CCD 5 is accumulated in the CCD 5 as a charge amount, output as an electric signal, amplified by a CDS / AGC circuit 6 to a predetermined gain, and converted into digital data by an A / D converter 7. You. The image data converted into digital data in this manner is adjusted in RGB gain by the white balance circuit 8 and, as shown in FIG.
B are generated on three color planes. The image data composed of the three RGB planes is supplied to a masking processing circuit 10.
The gamma conversion circuit 11 performs processing necessary for displaying on a display or the like. This image data is converted by the RGB / YUV conversion circuit 12 from RGB to a color space of Y color difference.

【0038】この内、輝度信号Yは、その高周波成分を
検出するために空間HPF18に送られて、図3の様な
フィルタ演算が施される。この間、色差信号UとVはメ
ディアンフィルタ20a,20bに送られ、上述したよ
うに図6に示すようなメディアンフィルタがかけられ
る。これにより、輝度信号Yの高周波成分が検出されて
いる時間に色差信号にメディアンフィルタを施し、片方
だけの遅延によるメモリの無駄を削減することができ
る。
Of these, the luminance signal Y is sent to the spatial HPF 18 to detect its high frequency component, and is subjected to a filter operation as shown in FIG. During this time, the color difference signals U and V are sent to the median filters 20a and 20b, and are subjected to a median filter as shown in FIG. 6 as described above. Thereby, the median filter is applied to the color difference signal during the time when the high frequency component of the luminance signal Y is detected, and it is possible to reduce waste of memory due to only one delay.

【0039】次に色相検出回路19は、偽色の色相範囲
に注目画素が存在しているか否かを判断する。ここで
は、前述の図5の色空間R−Y、B−Yでなく、図9に
示すように、RGB/YUV変換回路12から出力され
たUとVを用いている。
Next, the hue detection circuit 19 determines whether or not the target pixel exists in the hue range of the false color. Here, U and V output from the RGB / YUV conversion circuit 12 are used as shown in FIG. 9 instead of the above-described color spaces RY and BY in FIG.

【0040】そこで、上述の実施の形態1と同様に、注
目画素の色が偽色の色相の範囲内に入っていれば、前述
の図4に示すように、偽色抑圧回路13で空間HPF1
8の出力に応じて、値が「of1」 以上であれば色差信号
UとVのゲインを下げる。
Therefore, as in the above-described first embodiment, if the color of the target pixel falls within the range of the hue of the false color, as shown in FIG.
If the value is equal to or more than "of1" according to the output of 8, the gain of the color difference signals U and V is reduced.

【0041】この時、例えば、ホワイトバランスによっ
て、色相範囲を変える必要があることが考えられる。例
えば、赤のゲインを上げた場合、色相範囲を赤側に寄せ
ることを行ったり、色相角を広げたりすることである。
At this time, it may be necessary to change the hue range depending on, for example, the white balance. For example, when the gain of red is increased, the hue range is shifted to the red side, or the hue angle is increased.

【0042】次に、LPF14a,14bで、水平ある
いは垂直方向にローパスフィルタをかける。次に、間引
き回路15で、Y:U:V=4:4:4から、Y:U:
V=4:2:2ないしはY:U:V=4:1:1といっ
た所定のJPEGフォーマットに従った色差信号の間引
きを行い、JPEG16でJPEG圧縮を行う。
Next, a low-pass filter is applied in the horizontal or vertical direction by the LPFs 14a and 14b. Next, in the thinning circuit 15, from Y: U: V = 4: 4: 4, Y: U:
A color difference signal is thinned out according to a predetermined JPEG format such as V = 4: 2: 2 or Y: U: V = 4: 1: 1, and JPEG compression is performed by JPEG16.

【0043】これによって、偽色の少ない圧縮された画
像を作ることができる。
Thus, a compressed image with less false colors can be created.

【0044】尚、本発明は、複数の機器(例えばホスト
コンピュータ、インターフェース機器、リーダ、プリン
タなど)から構成されるシステムに適用しても、一つの
機器からなる装置(例えば、複写機、ファクシミリ装置
など)に適用してもよい。
Even if the present invention is applied to a system including a plurality of devices (for example, a host computer, an interface device, a reader, a printer, etc.), a device including one device (for example, a copying machine, a facsimile machine) Etc.).

【0045】また、本発明の目的は、前述した実施形態
の機能を実現するソフトウェアのプログラムコードを記
録した記憶媒体(または記録媒体)を、システムあるい
は装置に供給し、そのシステムあるいは装置のコンピュ
ータ(またはCPUやMPU)が記憶媒体に格納されたプログ
ラムコードを読み出し実行することによっても、達成さ
れる。この場合、記憶媒体から読み出されたプログラム
コード自体が前述した実施形態の機能を実現することに
なり、そのプログラムコードを記憶した記憶媒体は本発
明を構成することになる。また、コンピュータが読み出
したプログラムコードを実行することにより、前述した
実施形態の機能が実現されるだけでなく、そのプログラ
ムコードの指示に基づき、コンピュータ上で稼働してい
るオペレーティングシステム(OS)などが実際の処理の一
部または全部を行い、その処理によって前述した実施形
態の機能が実現される場合も含まれる。
An object of the present invention is to supply a storage medium (or a recording medium) on which a program code of software for realizing the functions of the above-described embodiments is recorded to a system or an apparatus, and to provide a computer (or a computer) of the system or the apparatus. Alternatively, the present invention is also achieved when a CPU or an MPU reads and executes a program code stored in a storage medium. In this case, the program code itself read from the storage medium implements the functions of the above-described embodiment, and the storage medium storing the program code constitutes the present invention. By executing the program code read by the computer, not only the functions of the above-described embodiments are realized, but also an operating system (OS) running on the computer based on the instruction of the program code. This also includes a case where some or all of the actual processing is performed and the functions of the above-described embodiments are realized by the processing.

【0046】さらに、記憶媒体から読み出されたプログ
ラムコードが、コンピュータに挿入された機能拡張カー
ドやコンピュータに接続された機能拡張ユニットに備わ
るメモリに書込まれた後、そのプログラムコードの指示
に基づき、その機能拡張カードや機能拡張ユニットに備
わるCPUなどが実際の処理の一部または全部を行い、そ
の処理によって前述した実施形態の機能が実現される場
合も含まれる。
Further, after the program code read from the storage medium is written into the memory provided in the function expansion card inserted into the computer or the function expansion unit connected to the computer, the program code is read based on the instruction of the program code. This also includes the case where the CPU provided in the function expansion card or the function expansion unit performs part or all of the actual processing, and the processing realizes the functions of the above-described embodiments.

【0047】以上説明したように本実施の形態によれ
ば、輝度信号の高周波成分と色相の赤から黄色と青から
シアンの間の色を検出し、色差信号U、Vのゲインを低
下させ、更に孤立画素をなくすことによって、色補間で
発生する偽色を抑圧することができる。
As described above, according to this embodiment, the high-frequency component of the luminance signal and the hue between red and yellow and the color between blue and cyan are detected, and the gains of the color difference signals U and V are reduced. Further, by eliminating isolated pixels, false colors generated by color interpolation can be suppressed.

【0048】又本実施の形態によれば、輝度色差信号の
色空間で、色差信号にメディアンフィルタを施し、輝度
信号の高周波成分と色差信号において赤から黄色と、青
からシアンの間の色を検出し、色差信号U、Vのゲイン
を低下させることにより、色補間で発生する偽色を抑圧
することができる。
According to the present embodiment, the color difference signal is subjected to a median filter in the color space of the luminance color difference signal, and the color between red to yellow and blue to cyan in the high frequency component of the luminance signal and the color difference signal. By detecting and reducing the gain of the color difference signals U and V, false colors generated by color interpolation can be suppressed.

【0049】また、輝度信号の高周波成分を検出してい
る時間に色差信号にメディアンフィルタをかけることに
よって、輝度信号と色差信号の遅延をあわせるための回
路等を削減することができる。
Further, by applying a median filter to the chrominance signal during the time when the high frequency component of the luminance signal is being detected, it is possible to reduce a circuit for adjusting the delay between the luminance signal and the chrominance signal.

【0050】[0050]

【発明の効果】以上説明したように本発明によれば、色
補間処理によって発生する偽色を減少させることができ
る。
As described above, according to the present invention, it is possible to reduce false colors generated by the color interpolation processing.

【0051】また本発明によれば、撮像装置の大型化や
コストアップを防止して偽色を減少させることができる
という効果がある。
Further, according to the present invention, it is possible to prevent an increase in the size and cost of the image pickup apparatus and reduce false colors.

【0052】また本発明によれば、比較的簡易な構成で
孤立した画素における偽色を減少させることができると
いう効果がある。
Further, according to the present invention, there is an effect that false colors in isolated pixels can be reduced with a relatively simple configuration.

【0053】また、本発明は、特にRGBの色空間を輝
度信号と色差信号に分けてから色相を求めたているが、
必ずしもそれに限るものではない。例えば、RGBの色
空間において、(R/G)/(B/G)の計算を行うこ
とによって色相信号とすることも可能である。
In the present invention, the hue is obtained after the RGB color space is divided into a luminance signal and a color difference signal.
It is not necessarily limited to this. For example, a hue signal can be obtained by calculating (R / G) / (B / G) in the RGB color space.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明の実施の形態1に係るデジタルカメラの
画像処理部の構成を示すブロック図である。
FIG. 1 is a block diagram illustrating a configuration of an image processing unit of a digital camera according to Embodiment 1 of the present invention.

【図2】本実施の形態に係る色補間を説明するための概
念図である。
FIG. 2 is a conceptual diagram illustrating color interpolation according to the present embodiment.

【図3】本実施の形態における高周波フィルタの構成を
示すブロック図である。
FIG. 3 is a block diagram illustrating a configuration of a high-frequency filter according to the present embodiment.

【図4】本実施の形態の偽色抑圧部における処理を説明
するグラフ図である。
FIG. 4 is a graph illustrating processing in a false color suppression unit according to the present embodiment.

【図5】本実施の形態に係る偽色抑制における偽色の色
相範囲例を示す図である。
FIG. 5 is a diagram showing an example of a hue range of a false color in false color suppression according to the present embodiment.

【図6】本実施の形態のメディアンフィルタにおける孤
立画素値の除去を説明する図である。
FIG. 6 is a diagram illustrating removal of an isolated pixel value in the median filter according to the present embodiment.

【図7】本実施の形態に係る偽色抑圧処理を説明するフ
ローチャートである。
FIG. 7 is a flowchart illustrating a false color suppression process according to the present embodiment.

【図8】本発明の実施の形態2に係るデジタルカメラの
画像処理部の構成を示すブロック図である。
FIG. 8 is a block diagram illustrating a configuration of an image processing unit of a digital camera according to Embodiment 2 of the present invention.

【図9】本実施の形態2に係る偽色抑制における偽色の
色相範囲例を示す図である。
FIG. 9 is a diagram showing an example of a hue range of a false color in false color suppression according to the second embodiment.

【図10】一般的な偽色の発生プロセスを説明する概念
図である。
FIG. 10 is a conceptual diagram illustrating a general process of generating a false color.

【図11】一般的な偽色の発生プロセスを説明する概念
図である。
FIG. 11 is a conceptual diagram illustrating a general process of generating a false color.

【図12】一般的な偽色の発生プロセスを説明する概念
図である。
FIG. 12 is a conceptual diagram illustrating a general process of generating a false color.

【図13】一般的な偽色の発生プロセスを説明する概念
図である。
FIG. 13 is a conceptual diagram illustrating a general process of generating a false color.

Claims (13)

【特許請求の範囲】[Claims] 【請求項1】 撮像素子と、 前記撮像素子に像を結像させるための結像手段と、 前記撮像素子から出力される画像信号をデジタル信号に
変換するA/D変換手段と、 前記A/D変換手段により変換されたデジタル信号を色
補間し、複数のカラープレーンの画像データを作成する
色補間手段と、 前記複数のカラープレーンの画像データを輝度信号と色
差信号とに分離する分離手段と、 前記分離手段により分離された輝度信号の高周波成分を
抽出する抽出手段と、 前記抽出手段により抽出された輝度信号の高周波成分と
前記色差信号から得られた色相信号とに応じて前記色補
間手段で発生する偽色を減少させる偽色除去手段と、 前記偽色除去手段により偽色が除去された色相信号に対
して孤立画素を除去する孤立点除去手段と、を有するこ
とを特徴とする撮像装置。
An imaging device configured to form an image on the imaging device; an A / D conversion device configured to convert an image signal output from the imaging device into a digital signal; Color interpolation means for color-interpolating the digital signal converted by the D conversion means to create image data of a plurality of color planes, and separation means for separating the image data of the plurality of color planes into a luminance signal and a color difference signal. Extracting means for extracting a high-frequency component of the luminance signal separated by the separating means; and the color interpolating means according to a high-frequency component of the luminance signal extracted by the extracting means and a hue signal obtained from the color difference signal. False color removing means for reducing the false color generated in the above, and isolated point removing means for removing an isolated pixel from the hue signal from which the false color has been removed by the false color removing means. Imaging device according to claim.
【請求項2】 前記偽色除去手段は、 前記輝度信号の高周波成分と前記色相信号とに基づいて
偽色の色範囲かどうかを判定する判定手段と、 前記判定手段により判定された色範囲の色差信号を低下
させる手段と、 を有することを特徴とする請求項1に記載の撮像装置。
2. A false color removing unit, comprising: a determining unit that determines whether a color range of a false color is based on a high frequency component of the luminance signal and the hue signal; The imaging device according to claim 1, further comprising: a unit configured to reduce a color difference signal.
【請求項3】 撮像素子と、 前記撮像素子に像を結像させるための結像手段と、 前記撮像素子から出力される画像信号をデジタル信号に
変換するA/D変換手段と、 前記A/D変換手段により変換されたデジタル信号を色
補間し、複数のカラープレーンの画像データを作成する
色補間手段と、 前記複数のカラープレーンの色空間から別の表色系の色
空間に変換する色空間変換手段と、 前記別の表色系の色空間の画像データを輝度信号と色相
信号とに分離する分離手段と、 前記分離手段により分離された輝度信号の高周波成分を
抽出する抽出手段と、 前記分離手段により分離された色相信号に対して孤立画
素の除去を行う孤立点除去手段と、 前記抽出手段により抽出された輝度信号の高周波成分と
前記孤立点除去手段により孤立画素が除去された色相信
号とに応じて前記色補間手段で発生する偽色を減少させ
る偽色除去手段と、 を有することを特徴とする撮像装置。
3. An image sensor, image forming means for forming an image on the image sensor, A / D converting means for converting an image signal output from the image sensor into a digital signal, Color interpolation means for color-interpolating the digital signal converted by the D conversion means to create image data of a plurality of color planes; and a color for converting the color space of the plurality of color planes to another color space of a color system Space conversion means, separation means for separating the image data of the color space of another color system into a luminance signal and a hue signal, extraction means for extracting a high-frequency component of the luminance signal separated by the separation means, An isolated point removing unit that removes an isolated pixel from the hue signal separated by the separating unit; a high frequency component of a luminance signal extracted by the extracting unit; and an isolated pixel removed by the isolated point removing unit. Imaging apparatus characterized by having a false color removal means for reducing the false color generated by the color interpolating means in accordance with the hue signal.
【請求項4】 前記偽色除去手段は、 前記輝度信号の高周波成分と前記色相信号とに基づいて
偽色の色範囲かどうかを判定する判定手段と、 前記判定手段により判定された色範囲の色差信号を低下
させる手段と、を有することを特徴とする請求項3に記
載の撮像装置。
4. A false color removing unit, comprising: a determining unit that determines whether a color range of a false color is based on a high frequency component of the luminance signal and the hue signal; The image pickup apparatus according to claim 3, further comprising: means for reducing a color difference signal.
【請求項5】 前記色空間変換手段は、YUVか、Y,
R−Y,B−Y、もしくは,G,R−G,B−Gの色空
間に変換することを特徴とする請求項3に記載の撮像装
置。
5. The color space conversion means according to claim 1, wherein said color space conversion means is YUV, Y,
The image pickup apparatus according to claim 3, wherein the image is converted into a color space of RY, BY, or G, RG, BG.
【請求項6】 前記偽色除去手段により偽色が除去され
た色信号における高周波成分を除去する低周波通過フィ
ルタ手段を更に有することを特徴とする請求項1又は3
に記載の撮像装置。
6. A filter according to claim 1, further comprising a low-frequency pass filter for removing a high-frequency component in the color signal from which the false color has been removed by said false-color remover.
An imaging device according to claim 1.
【請求項7】 前記偽色の色範囲は、赤から黄色を含む
色領域と、青からシアンを含む色領域を含むことを特徴
とする請求項1又は3に記載の撮像装置。
7. The imaging apparatus according to claim 1, wherein the false color range includes a color region including red to yellow and a color region including blue to cyan.
【請求項8】 撮像素子を有し、前記撮像素子に結像さ
れた映像に対応する画像信号を生成する撮像装置におけ
る画像処理方法であって、 前記撮像素子から出力される画像信号をデジタル信号に
変換するA/D変換工程と、 A/D変換工程で変換されたデジタル信号を色補間し、
複数のカラープレーンの画像データを作成する色補間工
程と、 前記複数のカラープレーンの画像データを輝度信号と色
差信号とに分離する分離工程と、 前記分離工程で分離された輝度信号の高周波成分を抽出
する抽出工程と、 前記抽出工程で抽出された輝度信号の高周波成分と前記
色差信号から得られた色相信号とに応じて前記色補間工
程で発生する偽色を減少させる偽色除去工程と、 前記偽色除去工程で偽色が除去された色相信号に対して
孤立画素を除去する孤立点除去工程と、 を有することを特徴とする撮像装置における画像処理方
法。
8. An image processing method in an image pickup apparatus having an image pickup device and generating an image signal corresponding to a video image formed on the image pickup device, wherein the image signal output from the image pickup device is a digital signal. A / D conversion step of converting the digital signal into a color signal, and color-interpolating the digital signal converted in the A / D conversion step.
A color interpolation step of creating image data of a plurality of color planes, a separation step of separating the image data of the plurality of color planes into a luminance signal and a color difference signal, and a high frequency component of the luminance signal separated in the separation step. An extracting step of extracting, a false color removing step of reducing a false color generated in the color interpolation step according to a high frequency component of a luminance signal extracted in the extracting step and a hue signal obtained from the color difference signal, An image processing method for an imaging apparatus, comprising: an isolated point removing step of removing an isolated pixel from a hue signal from which a false color has been removed in the false color removing step.
【請求項9】 撮像素子を有し、前記撮像素子に結像さ
れた映像に対応する画像信号を生成する撮像装置におけ
る画像処理方法であって、 前記撮像素子から出力される画像信号をデジタル信号に
変換するA/D変換工程と、 A/D変換工程で変換されたデジタル信号を色補間し、
複数のカラープレーンの画像データを作成する色補間工
程と、 前記複数のカラープレーンの色空間から別の表色系の色
空間に変換する色空間変換工程と、 前記別の表色系の色空間の画像データを輝度信号と色相
信号とに分離する分離工程と、 前記分離工程で分離された輝度信号の高周波成分を抽出
する抽出工程と、 前記抽出工程で抽出された輝度信号の高周波成分と前記
孤立点除去工程で孤立画素が除去された色相信号とに応
じて前記色補間工程で発生する偽色を減少させる偽色除
去工程と、 を有することを特徴とする撮像装置における画像処理方
法。
9. An image processing method in an image pickup apparatus having an image pickup device and generating an image signal corresponding to a video image formed on the image pickup device, wherein the image signal output from the image pickup device is a digital signal. An A / D conversion step of converting the digital signal into a color signal;
A color interpolation step of creating image data of a plurality of color planes, a color space conversion step of converting the color space of the plurality of color planes to a color space of another color system, and the color space of another color system A separating step of separating the image data into a luminance signal and a hue signal, an extracting step of extracting a high-frequency component of the luminance signal separated in the separating step, and a high-frequency component of the luminance signal extracted in the extracting step. A false color removing step of reducing a false color generated in the color interpolation step according to the hue signal from which the isolated pixel has been removed in the isolated point removing step.
【請求項10】 前記偽色除去工程は、 前記輝度信号の高周波成分と前記色相信号とに基づいて
偽色の色範囲かどうかを判定する判定工程と、 前記判定工程で判定された色範囲の色差信号を低下させ
る工程と、 を有することを特徴とする請求項8又は9に記載の画像
処理方法。
10. The false color removing step includes: determining a color range of a false color based on a high-frequency component of the luminance signal and the hue signal; and determining whether the color range is determined in the determining step. The method according to claim 8, further comprising: reducing a color difference signal.
【請求項11】 前記色空間変換工程では、YUVか、
Y,R−Y,B−Y、もしくは,G,R−G,B−Gの
色空間に変換することを特徴とする請求項9に記載の画
像処理方法。
11. In the color space conversion step, YUV or
10. The image processing method according to claim 9, wherein the image is converted into a color space of Y, RY, BY, or G, RG, BG.
【請求項12】 前記偽色除去工程で偽色が除去された
色信号における高周波成分を除去する工程を更に有する
ことを特徴とする請求項8又は9に記載の画像処理方
法。
12. The image processing method according to claim 8, further comprising a step of removing a high-frequency component in the color signal from which the false color has been removed in the false color removing step.
【請求項13】 前記偽色の色範囲は、赤から黄色を含
む色領域と、青からシアンを含む色領域を含むことを特
徴とする請求項8又は9に記載の画像処理方法。
13. The image processing method according to claim 8, wherein the false color range includes a color region including red to yellow and a color region including blue to cyan.
JP11053384A 1999-01-20 1999-03-01 Image pickup device and method for processing image for the image pickup device Withdrawn JP2000253411A (en)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP11053384A JP2000253411A (en) 1999-03-01 1999-03-01 Image pickup device and method for processing image for the image pickup device
US09/484,989 US6958772B1 (en) 1999-01-20 2000-01-18 Image sensing apparatus and image processing method therefor
EP00300408A EP1022912B1 (en) 1999-01-20 2000-01-20 Image sensing apparatus
DE60045785T DE60045785D1 (en) 1999-01-20 2000-01-20 Imaging device
US11/200,377 US7542076B2 (en) 1999-01-20 2005-08-08 Image sensing apparatus having a color interpolation unit and image processing method therefor
US12/428,898 US7929026B2 (en) 1999-01-20 2009-04-23 Image sensing apparatus and image processing method thereof using color conversion and pseudo color removing

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP11053384A JP2000253411A (en) 1999-03-01 1999-03-01 Image pickup device and method for processing image for the image pickup device

Publications (1)

Publication Number Publication Date
JP2000253411A true JP2000253411A (en) 2000-09-14

Family

ID=12941340

Family Applications (1)

Application Number Title Priority Date Filing Date
JP11053384A Withdrawn JP2000253411A (en) 1999-01-20 1999-03-01 Image pickup device and method for processing image for the image pickup device

Country Status (1)

Country Link
JP (1) JP2000253411A (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001065859A1 (en) * 2000-03-01 2001-09-07 Matsushita Electric Industrial Co., Ltd. Image pickup apparatus
JP2003102025A (en) * 2001-09-20 2003-04-04 Canon Inc Image processing method, imaging device, and program
KR101143833B1 (en) 2007-05-29 2012-07-12 삼성테크윈 주식회사 Image signal processing apparatus generating brightness signal of high reproducibility
JP2019003443A (en) * 2017-06-15 2019-01-10 オリンパス株式会社 Image processing device, image processing method, and image processing program

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001065859A1 (en) * 2000-03-01 2001-09-07 Matsushita Electric Industrial Co., Ltd. Image pickup apparatus
JP2003102025A (en) * 2001-09-20 2003-04-04 Canon Inc Image processing method, imaging device, and program
JP4717294B2 (en) * 2001-09-20 2011-07-06 キヤノン株式会社 Image processing method, imaging apparatus, and program
KR101143833B1 (en) 2007-05-29 2012-07-12 삼성테크윈 주식회사 Image signal processing apparatus generating brightness signal of high reproducibility
JP2019003443A (en) * 2017-06-15 2019-01-10 オリンパス株式会社 Image processing device, image processing method, and image processing program

Similar Documents

Publication Publication Date Title
US7542076B2 (en) Image sensing apparatus having a color interpolation unit and image processing method therefor
JP5045421B2 (en) Imaging apparatus, color noise reduction method, and color noise reduction program
JP4233257B2 (en) Method and apparatus for extending the effective dynamic range of an imaging device and use of residual images
JP4154847B2 (en) Image processing apparatus, image processing method, and computer-readable recording medium storing image processing program
US7697044B2 (en) Image processing apparatus and image processing method
JP4717294B2 (en) Image processing method, imaging apparatus, and program
EP1528793B1 (en) Image processing apparatus, image-taking system and image processing method
JP4503823B2 (en) Image signal processing method
JP2004088149A (en) Imaging system and image processing program
US6542187B1 (en) Correcting for chrominance interpolation artifacts
WO2017154293A1 (en) Image processing apparatus, imaging apparatus, image processing method, and program
JP2008141658A (en) Electronic camera and image processor
JP4182566B2 (en) Digital camera and computer-readable recording medium
JP4392891B2 (en) Imaging apparatus and image processing method in the imaging apparatus
JP3633561B2 (en) Image processing apparatus, image processing method, and program
JP2000217123A (en) Image pickup device and image processing method for image pickup device
JP2000253411A (en) Image pickup device and method for processing image for the image pickup device
JP2003348382A (en) Contour emphasizing circuit
JP4306687B2 (en) Image processing method, image processing program, and image processing apparatus
JP3617455B2 (en) Image processing apparatus, image processing method, and recording medium
JP2000217124A (en) Image pickup device and image processing method for the image pickup device
JP2005354585A (en) Device, method and program of image processing
JP2005136497A (en) Image processing method, and image processing apparatus
JP4155559B2 (en) Signal processing apparatus and method
JP2000165895A (en) Image pickup device

Legal Events

Date Code Title Description
A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20060509