JPH06339145A - Color image pickup device - Google Patents
Color image pickup deviceInfo
- Publication number
- JPH06339145A JPH06339145A JP5151436A JP15143693A JPH06339145A JP H06339145 A JPH06339145 A JP H06339145A JP 5151436 A JP5151436 A JP 5151436A JP 15143693 A JP15143693 A JP 15143693A JP H06339145 A JPH06339145 A JP H06339145A
- Authority
- JP
- Japan
- Prior art keywords
- signal
- color
- difference
- signals
- filter
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Color Television Image Signal Generators (AREA)
- Processing Of Color Television Signals (AREA)
Abstract
Description
【０００１】[0001]
【産業上の利用分野】本発明は、２次元的に複数個の受
光素子（画素）が配置された撮像素子を備えたカラー撮
像装置に関するものである。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a color image pickup apparatus having an image pickup element in which a plurality of light receiving elements (pixels) are two-dimensionally arranged.
【０００２】[0002]
【従来の技術】図９、図１０、図１１は従来より知られ
ているカラー固体撮像素子の色フィルタの配列構成の例
を示す図である。図９は赤色光透過フィルタＲ、緑色光
透過フィルタＧ、青色光透過フィルタＢが垂直にストラ
イプ状に並んだいわゆるストライプフィルタと呼ばれる
構成である。これに対し、図１０、図１１はいわゆるモ
ザイクフィルタと呼ばれる構成で、図１０では緑色光透
過フィルタＧは垂直にストライプ状になっており、赤色
光透過フィルタＲおよび青色光透過フィルタＢがそれぞ
れ２行おき２列にＧフィルタの間に配置され、また図１
１ではマゼンダ光透過フィルタＭｇ、緑色光透過フィル
タＧｒ、シアン光透過フィルタＣｙ、黄色光透過フィル
タＹｅが水平方向に２画素、垂直方向に４画素の８画素
の色フィルタを１単位として、図に示す順序で配置され
ている。2. Description of the Related Art FIG. 9, FIG. 10 and FIG. 11 are views showing an example of the arrangement of color filters of a conventionally known color solid-state image pickup device. FIG. 9 shows a so-called stripe filter in which a red light transmission filter R, a green light transmission filter G, and a blue light transmission filter B are vertically arranged in a stripe shape. On the other hand, FIG. 10 and FIG. 11 have a so-called mosaic filter configuration. In FIG. 10, the green light transmission filter G is vertically striped, and the red light transmission filter R and the blue light transmission filter B each have two stripes. It is arranged in two columns every two rows between the G filters, and also in FIG.
In FIG. 1, the magenta light transmission filter Mg, the green light transmission filter Gr, the cyan light transmission filter Cy, and the yellow light transmission filter Ye are two pixels in the horizontal direction and four pixels in the vertical direction. They are arranged in the order shown.
【０００３】しかしながら、これらの色フィルタ配列を
もつ撮像素子には次のような問題がある。すなわち、図
９に示す構成の色フィルタを設けた撮像素子では、水平
方向にサンプリング周波数の１／３の周波数の色信号キ
ャリアが発生するため、折り返し歪みを考慮するとナイ
キスト周波数であるサンプリング周波数の１／２の周波
数までを解像することができない。However, the image pickup device having these color filter arrays has the following problems. That is, in the image pickup device provided with the color filter having the configuration shown in FIG. 9, a color signal carrier having a frequency of 1/3 of the sampling frequency is generated in the horizontal direction. The frequency up to / 2 cannot be resolved.
【０００４】図１０に示す構成の色フィルタを設けた撮
像素子は、垂直方向２画素ごとにＲフィルタとＢフィル
タとが並んでいるため、垂直方向に色モアレが発生しや
すく、特に有彩色画像で見苦しいシーンが出てくる。In the image pickup device provided with the color filter having the structure shown in FIG. 10, since the R filter and the B filter are arranged every two pixels in the vertical direction, color moire is liable to occur in the vertical direction, and a chromatic image is particularly formed. Then an unsightly scene comes out.
【０００５】図１１に示す構成の色フィルタを設けた撮
像素子は、補色フィルタで構成されているため、図１０
に示す構成の色フィルタを設けた撮像素子より感度は高
いが、画素の出力信号間の差信号で色信号を形成するた
め、色信号のＳ／Ｎ比が悪く、更に、出力信号を量子化
しディジタル処理を行う際に、色信号の量子化誤差が大
きくなり好ましくない。Since the image pickup device provided with the color filter having the structure shown in FIG. 11 is composed of complementary color filters, the image pickup device shown in FIG.
Although the sensitivity is higher than that of the image pickup device provided with the color filter having the configuration shown in FIG. 3, since the color signal is formed by the difference signal between the output signals of the pixels, the S / N ratio of the color signal is poor, and the output signal is quantized. When performing digital processing, the quantization error of the color signal becomes large, which is not preferable.
【０００６】更に、図１０、図１１に示す構成の色フィ
ルタを設けた撮像素子は、ともに水平方向にサンプリン
グ周波数の１／２の周波数に色信号キャリアが発生する
ため、折り返し歪みのためナイキスト周波数であるサン
プリング周波数の１／２までを解像することができな
い。Further, in the image pickup device provided with the color filter having the configuration shown in FIGS. 10 and 11, since the color signal carrier is generated at a frequency of 1/2 of the sampling frequency in the horizontal direction, the Nyquist frequency is generated due to aliasing distortion. It is impossible to resolve up to 1/2 of the sampling frequency.
【０００７】これに対し、米国特許第３９７１０６５号
明細書に開示されている、いわゆるベイヤー配列と呼ば
れる色フィルタ配列を有する撮像素子がある。これは図
１２（ａ）、（ｂ）に示すように、撮像素子の水平方向
のピッチをＰH 、垂直方向のピッチをＰV とすると、緑
色光透過フィルタＧ（同図（ａ））あるいは輝度信号透
過フィルタＹ（同図（ｂ））は、水平方向のピッチ２Ｐ
H 、垂直方向のピッチＰV で水平方向のピッチＰH だけ
オフセットされたオフセットサンプリング構造で配置さ
れ、赤色光透過フィルタＲ及び青色光透過フィルタＢは
水平方向のピッチ２ＰH 、垂直方向のピッチ２ＰV の矩
形格子状サンプリング構造で配置されているものであ
る。このようなベイヤー配列を有する撮像素子を用いる
と、水平垂直方向にモアレが少なく、Ｓ／Ｎ比の良い良
好な画像が得られることが知られている。On the other hand, there is an image pickup device having a color filter array called a Bayer array, which is disclosed in US Pat. No. 3,971,065. As shown in FIGS. 12A and 12B, when the horizontal pitch of the image sensor is P H and the vertical pitch is P V , the green light transmission filter G (FIG. 12A) or The luminance signal transmission filter Y ((b) in the figure) has a horizontal pitch 2P.
H , the pitch P V in the vertical direction is offset by the pitch P H in the horizontal direction, and the red light transmission filter R and the blue light transmission filter B are arranged in a horizontal pitch 2P H and a vertical pitch 2P. They are arranged in a V- shaped rectangular grid sampling structure. It is known that when an image pickup device having such a Bayer array is used, a good image with a small S / N ratio and less moire in the horizontal and vertical directions can be obtained.
【０００８】[0008]
【発明が解決しようとする課題】しかしながら、このベ
イヤー配列を有する撮像素子を用いても、以下に示す問
題が発生する。すなわち、図１３（ａ）、（ｂ）はそれ
ぞれ図１２（ａ）、（ｂ）に示す色フィルタの撮像素子
で発生する信号キャリアの位置を２次元周波平面（ｆ
H , ｆV ）上に表したときの特性図である。However, even if the image pickup device having this Bayer array is used, the following problems occur. That is, in FIGS. 13A and 13B, the position of the signal carrier generated in the image sensor of the color filter shown in FIGS. 12A and 12B is represented by the two-dimensional frequency plane (f).
H, is a characteristic diagram when expressed on the f V).
【０００９】ここで図１２（ａ）に示す色フィルタの撮
像素子では、各画素からの出力信号をそのままスイッチ
ングして切り替えることにより輝度信号を形成してお
り、図１２（ｂ）に示す色フィルタの撮像素子では、Ｙ
フィルタが配置された画素からの信号のみを用いて輝度
信号を形成している。In the image sensor of the color filter shown in FIG. 12A, the luminance signal is formed by switching and switching the output signal from each pixel as it is, and the color filter shown in FIG. In the image sensor of
The luminance signal is formed using only the signals from the pixels in which the filters are arranged.
【００１０】いずれの場合も周波数空間上、（１／２Ｐ
H ，０）および（０，１／２ＰV ）に色差信号のキャリ
アが発生していることが分かる。すなわち、ベイヤー配
列を有する撮像素子の場合も、サンプリング周波数の１
／２の周波数に色キャリアが発生するため、ナイキスト
周波数であるサンプリング周波数の１／２の周波数まで
を解像することができない。In either case, in the frequency space, (1 / 2P
It can be seen that carriers of the color difference signals are generated at ( H , 0) and (0, 1 / 2P V ). That is, even in the case of an image sensor having a Bayer array, the sampling frequency is 1
Since a color carrier is generated at a frequency of / 2, it is not possible to resolve up to 1/2 of the sampling frequency, which is the Nyquist frequency.
【００１１】本発明はこのような問題に鑑みてなされた
もので、解像度が良く、モアレが少なく、かつＳ／Ｎ比
の良好な画像を得ることのできるカラー撮像装置を提供
することを目的とするものである。The present invention has been made in view of the above problems, and an object of the present invention is to provide a color image pickup apparatus capable of obtaining an image having a good resolution, a small moire, and a good S / N ratio. To do.
【００１２】[0012]
【課題を解決するための手段】本発明のカラー撮像装置
は、次の（ａ）、（ｂ）、（ｃ）の構成要素を備えたこ
とを特徴とするものである。 (a) 画素が水平方向のピッチＰH 、垂直方向のピッチＰ
V の矩形格子状に配置された撮像素子。 (b) 上記画素に対応して設けられた水平方向のピッチ２
ＰH 、垂直方向のピッチＰV で水平方向にＰH だけオフ
セットされたオフセットサンプリング構造を有する第１
の色フィルタと、水平方向のピッチ２ＰH 、垂直方向の
ピッチ２ＰV の矩形格子状サンプリング構造を有する第
２の色フィルタ及び第３の色フィルタ。 (c) 上記第１の色フィルタ、第２の色フィルタ、第３の
色フィルタに対応する画素から出力される第１の色信
号、第２の色信号、第３の色信号に基づいて、第１の色
信号のうち第２の色信号の画素と同じ列の画素による信
号のみを同時化し、第２の色信号との差をとった信号を
第１の差信号とし、第１の色信号のうち第２の色信号の
画素と同じ行の画素による信号のみを同時化し、第２の
色信号との差をとった信号を第２の差信号とすると共
に、第１の色信号のうち第３の色信号の画素と同じ列の
画素による信号のみを同時化し、第３の色信号との差を
とった信号を第３の差信号とし、第１の色信号のうち第
３の色信号の画素と同じ行の画素による信号のみを同時
化し、第３の色信号との差をとった信号を第４の差信号
とし、上記第１の差信号と第２の差信号とを変数とした
関数と、上記第３の差信号と第４の差信号とを変数とし
た関数とをそれぞれ色差信号と成す色差信号生成手段。The color image pickup device of the present invention is characterized by including the following components (a), (b) and (c). (a) Pixels are horizontal pitch P H and vertical pitch P H
Image sensors arranged in a V- shaped rectangular grid. (b) Horizontal pitch 2 provided corresponding to the above pixels
P H, first with offset offset sampling structure only P H in the horizontal direction in the vertical pitch P V
And a second color filter and a third color filter having a rectangular lattice sampling structure with a horizontal pitch of 2P H and a vertical pitch of 2P V. (c) Based on the first color signal, the second color signal, and the third color signal output from the pixels corresponding to the first color filter, the second color filter, and the third color filter, Of the first color signals, only the signals from the pixels in the same column as the pixels of the second color signal are synchronized, and the signal that is the difference from the second color signal is taken as the first difference signal. Of the signals, only the signals from the pixels in the same row as the pixels of the second color signal are synchronized, and the signal that is the difference from the second color signal is taken as the second difference signal, and the first color signal Among them, only the signals from the pixels in the same column as the pixels of the third color signal are synchronized, and the signal that is the difference from the third color signal is taken as the third difference signal. Only the signals of the pixels in the same row as the pixels of the color signal are synchronized, and the signal that is the difference from the third color signal is taken as the fourth difference signal. And a second difference signal as a variable, and a function using the third difference signal and the fourth difference signal as variables as color difference signals.
【００１３】[0013]
【作用】本発明のカラー撮像装置によれば、２次元周波
数空間上の（１／２ＰH ，０）および（０，１／２
ＰV ）の色差信号のキャリアが抑制され、モアレの発生
が軽減される。According to the color image pickup apparatus of the present invention, (1 / 2P H , 0) and (0, 1/2) in the two-dimensional frequency space
The carrier of the color difference signal of P V ) is suppressed, and the occurrence of moire is reduced.
【００１４】[0014]
【実施例】以下本発明の実施例について図面を用いて説
明する。Embodiments of the present invention will now be described with reference to the drawings.
【００１５】図１は、本発明の第１実施例によるカラー
撮像装置を示すブロック図である。被写体からの光は、
図示しない結像光学系により撮像素子（センサ）１０１
に入射する。撮像素子１０１には、図２に示すベイヤー
配列のＲ、Ｇ1 、Ｇ2 、Ｂフィルタ（フィルタアレイ）
が設けられている。撮像素子１０１から１画素ごとに読
み出された画像信号は、色分離部１０２によりＲ、
Ｇ1 、Ｇ2 、Ｂ信号に分離される。ここで、Ｇ1 、Ｇ2
信号は図２に示されるようにそれぞれＲ、Ｂの画素と同
じ列のＧの画素の信号である。これらの信号は、ホワイ
トバランス部（ＷＢ）１１１でＲ、Ｇ1 、Ｇ2 、Ｂ信号
のゲインがホワイトバランスセンサ（ＡＷＢ）１２０よ
り得られた色温度情報をもとにホワイトバランス調整さ
れ、次にγ変換部１１２でγ変換され、その後、Ａ／Ｄ
（アナログ−デジタル）変換器１０３でＡ／Ｄ変換され
る。FIG. 1 is a block diagram showing a color image pickup apparatus according to the first embodiment of the present invention. The light from the subject
Imaging device (sensor) 101 by an imaging optical system (not shown)
Incident on. The image sensor 101 includes R, G 1 , G 2 , and B filters (filter array) of the Bayer array shown in FIG.
Is provided. The image signal read out from the image sensor 101 for each pixel is R by the color separation unit 102.
It is separated into G 1 , G 2 and B signals. Where G 1 and G 2
As shown in FIG. 2, the signals are signals of G pixels in the same column as R and B pixels, respectively. These signals are subjected to white balance adjustment in the white balance section (WB) 111 based on the color temperature information obtained by the white balance sensor (AWB) 120 for the gains of the R, G 1 , G 2 and B signals. Is converted to γ by the γ conversion unit 112, and then A / D
A / D conversion is performed by the (analog-digital) converter 103.
【００１６】Ｇ1 、Ｇ2 信号を用いる輝度信号は、スイ
ッチ回路（ＳＷＹ）１２６によりスイッチングされるこ
とにより読み出し順に並べられ、バンドパスフィルタ
（ＢＰＦ）１１６で得られる輝度信号の高域成分Ｙ
H は、後述する手法で得られる輝度信号の低域成分ＹL
と加算器１１７で加算され、エンハンスメント回路１４
２でエンハンスされ、Ｄ／Ａ（デジタル−アナログ）変
換器１１８でＤ／Ａ変換され出力される。Luminance signals using the G 1 and G 2 signals are arranged in the reading order by being switched by the switch circuit (SWY) 126, and the high frequency component Y of the luminance signal obtained by the bandpass filter (BPF) 116.
H is the low frequency component Y L of the luminance signal obtained by the method described later.
Is added by the adder 117, and the enhancement circuit 14
2 is enhanced, and D / A (digital-analog) converter 118 D / A converts and outputs.
【００１７】一方、色信号は、Ａ／Ｄ変換器１０３の出
力のＲ（γ乗）信号、Ｇ1 （γ乗）信号、Ｇ2 （γ乗）
信号、Ｂ（γ乗）信号が補間フィルタ１０６、１０７、
１０８、１０９に入力され、各々同時化された信号Ｒ
（γ乗）、Ｇ1 （γ乗）、Ｇ2（γ乗）、Ｂ（γ乗）と
なる（以下、γ乗を省略する）。なお、補間フィルタ１
０６〜１０９での補間は、水平及び垂直方向に隣接する
画素の信号値をそのままもってくる前置補間ないしは、
水平及び垂直方向の帯域を余り落とさないものが望まし
く、いずれかの補間方法あるいはそれらの組み合わせを
行っても良い。On the other hand, the color signals are the R (γ power) signal, G 1 (γ power) signal and G 2 (γ power) of the output of the A / D converter 103.
Signals and B (γ power) signals are interpolation filters 106, 107,
Signals R that are input to 108 and 109 and are synchronized with each other
(Γ-th power), G 1 (γ-th power), G 2 (γ-th power), and B (γ-th power) (hereinafter, the γ-th power will be omitted). The interpolation filter 1
The interpolation in 06 to 109 is a pre-interpolation in which the signal values of pixels adjacent in the horizontal and vertical directions are directly taken, or
It is desirable that the bands in the horizontal and vertical directions are not dropped so much, and any interpolation method or a combination thereof may be performed.
【００１８】同時化されたＲ信号、Ｇ1 信号は加算器１
２９で第１の差信号Ｒ−Ｇ1 信号となり、Ｒ信号、Ｇ2
信号は加算器１３９で第２の差信号Ｒ−Ｇ2 信号とな
り、Ｂ信号、Ｇ2 信号は加算器１３０で第３の差信号Ｂ
−Ｇ2 信号となり、Ｂ信号、Ｇ1 信号は加算器１４０で
第４の差信号Ｂ−Ｇ1 信号となり、これら第１、第２、
第３、第４の差信号が色差信号生成回路１４１に入力さ
れる。The synchronized R signal and G 1 signal are added by the adder 1
At 29, it becomes the first difference signal R-G 1 signal, and the R signal, G 2
The signal becomes the second difference signal R−G 2 signal in the adder 139, and the B signal and the G 2 signal are added in the third difference signal B in the adder 130.
-G 2 signal, the B signal and G 1 signal become the fourth difference signal B-G 1 signal in the adder 140, and these first, second,
The third and fourth difference signals are input to the color difference signal generation circuit 141.
【００１９】この色差信号生成回路１４１は、入力した
４つの差信号から関数Ｆr 、Ｆb をそれぞれ定義して、
２つの差信号Ｆr ，Ｆb Ｆr （Ｒ−Ｇ1 ，Ｒ−Ｇ2 ）＝Ｒ−Ｇ …(1) Ｆb （Ｂ−Ｇ1 ，Ｂ−Ｇ2 ）＝Ｂ−Ｇ …(2) を出力するものである。関数Ｆr 、Ｆb には例えば、差
信号を重みとした次のような式を用いる。[0019] The color difference signal generation circuit 141, the function Fr four differential signal input, F b and defining respectively,
Two difference signals F r , F b F r (R-G 1 , R-G 2 ) = R-G (1) F b (B-G 1 , B-G 2 ) = B-G (2) ) Is output. For the functions F r and F b , for example, the following equations using the difference signal as a weight are used.
【００２０】[0020]
【数１】 [Equation 1]
【００２１】[0021]
【数２】 [Equation 2]
【００２２】また、図３のように判定回路１５０と関数
生成回路１５１を設けて関数Ｆr 、Ｆb を生成すること
もできる。このとき、関数Ｆr 、Ｆb は次のように定義
する。Further, as shown in FIG. 3, the decision circuit 150 and the function generation circuit 151 may be provided to generate the functions F r and F b . At this time, the functions F r and F b are defined as follows.
【００２３】 （色差信号生成方法３） Ｆr （Ｒ−Ｇ1 ，Ｒ−Ｇ2 ）＝Ｋa （Ｒ−Ｇ1 ）＋Ｋb （Ｒ−Ｇ2 ） Ｋa ，Ｋb ＝０，１ …(7) Ｆb （Ｂ−Ｇ1 ，Ｂ−Ｇ2 ）＝Ｋc （Ｂ−Ｇ1 ）＋Ｋd （Ｂ−Ｇ2 ） Ｋc ，Ｋd ＝０，１ …(8) (Color Difference Signal Generation Method 3) F r (R−G 1 , R−G 2 ) = K a (R−G 1 ) + K b (R−G 2 ) K a , K b = 0, 1 ... (7) F b (B- G 1, B-G 2) = K c (B-G 1) + K d (B-G 2) K c, K d = 0,1 ... (8)
【００２４】判定回路１５０は例えば次のような判定方
法を用いる。 ｜Ｒ−Ｇ1 ｜＜｜Ｒ−Ｇ2 ｜＋Ｋe のとき Ｋa ＝１，Ｋb ＝０ …(9) ｜Ｒ−Ｇ1 ｜＞｜Ｒ−Ｇ2 ｜＋Ｋe のとき Ｋa ＝０，Ｋb ＝１ …(10) ｜Ｂ−Ｇ1 ｜＜｜Ｂ−Ｇ2 ｜＋Ｋf のとき Ｋc ＝０，Ｋd ＝１ …(11) ｜Ｒ−Ｇ1 ｜＞｜Ｒ−Ｇ2 ｜＋Ｋf のとき Ｋc ＝１，Ｋd ＝０ …(12) Ｋe , Ｋf ：任意定数The determination circuit 150 uses the following determination method, for example. When │R-G 1 │ <│R-G 2 │ + K e Ka = 1, K b = 0 (9) │R-G 1 │> │R-G 2 │ + K e Ka = 0, K b = 1 ... (10) | B-G 1 | <| B-G 2 | + K f When K c = 0, K d = 1 ... (11) | R-G 1 |> | R- When G 2 | + K f K c = 1 and K d = 0 (12) K e , K f : arbitrary constant
【００２５】以上の方法では、いずれも差信号Ｒ−Ｇ1
と差信号Ｒ−Ｇ2 または差信号Ｂ−Ｇ1 と差信号Ｂ−Ｇ
2 のうち値の小さい方の信号を優先的に選択するように
している。従って、この原理を利用した方法であれば、
色差信号生成回路１４１は上述の方法に限ったものでは
ない。In any of the above methods, the difference signal R-G 1
And difference signal R-G 2 or difference signal B-G 1 and difference signal B-G
The signal with the smaller value of 2 is preferentially selected. Therefore, if it is a method using this principle,
The color difference signal generation circuit 141 is not limited to the above method.
【００２６】色差信号生成回路１４１より出力された２
つの色差信号であるＲ−Ｇ、Ｂ−Ｇはローパスフィルタ
１３７、１３８で所定の帯域制限がなされ、色差マトリ
クス処理部１１３に入力され、2 output from the color difference signal generation circuit 141
The color difference signals R-G and B-G are subjected to predetermined band limitation by the low-pass filters 137 and 138 and input to the color difference matrix processing unit 113.
【００２７】[0027]
【数３】 [Equation 3]
【００２８】という変換が行われ、色差信号Ｒ−Ｙ、Ｂ
−Ｙが生成される。ここで、図４（ａ）に示す周波数
（１／２ＰH ，０）の空間周波数を有する白黒の被写体
が撮像素子１０１により採取されるとする。この被写体
は周期２ＰHの縦縞であり、このような被写体に対して
は、Ｒ信号＝Ｇ1 信号、Ｂ信号＝Ｇ2信号となるため、
加算器１２９、１３０より出力されるＲ−Ｇ1 信号、Ｂ
−Ｇ2信号はいずれも零となる。ゆえに、色差マトリク
ス処理部１１３から出力される色差信号Ｒ−Ｙ、Ｂ−Ｙ
も零となる。このとき、周波数（１／２ＰH ，０）上で
のＲ信号のキャリアとＧ1 信号のキャリアとは同位相で
あり、Ｂ信号のキャリアとＧ2 信号のキャリアとは同位
相である。従って、この周波数でのこれらの差信号Ｒ−
Ｇ1 信号、Ｂ−Ｇ2 信号のキャリアを消滅させることが
できるため、色差信号のキャリアが発生せずモアレが抑
制される。The conversion is performed, and the color difference signals R-Y, B
-Y is generated. Here, it is assumed that a monochrome subject having a spatial frequency of (1 / 2P H , 0) shown in FIG. This subject has vertical stripes with a period of 2P H , and for such a subject, R signal = G 1 signal and B signal = G 2 signal.
RG 1 signal output from the adders 129 and 130, B
Both -G 2 signal becomes zero. Therefore, the color difference signals R-Y and B-Y output from the color difference matrix processing unit 113.
Is also zero. At this time, the carrier of the R signal and the carrier of the G 1 signal on the frequency (1 / 2P H , 0) have the same phase, and the carrier of the B signal and the carrier of the G 2 signal have the same phase. Therefore, these difference signals R- at this frequency
Since the carriers of the G 1 signal and the B-G 2 signal can be eliminated, the carrier of the color difference signal is not generated and the moire is suppressed.
【００２９】次に、図４（ｂ）に示す周波数（０，１／
２ＰV ）の空間周波数である白黒の被写体が撮像素子１
０１により採取されるとする。この被写体は周期２ＰV
の横縞であり、このような被写体に対しては、Ｒ信号＝
Ｇ2 信号、Ｂ信号＝Ｇ1 信号となるため、加算器１３
９、１４０より出力されるＲ−Ｇ2 、Ｂ−Ｇ1 信号はい
ずれも零となる。ゆえに、色差マトリクス処理部１１３
から出力される色差信号Ｒ−Ｙ、Ｂ−Ｙも零となる。こ
のとき、周波数（０，１／２ＰV ）上でのＲ信号のキャ
リアとＧ2 信号のキャリアとは同位相であり、Ｂ信号の
キャリアとＧ1 信号のキャリアとは同位相である。従っ
て、この周波数でのこれらの差信号Ｒ−Ｇ2 信号、Ｂ−
Ｇ1 信号のキャリアを消滅させることができるため、色
差信号のキャリアが発生せずモアレが抑制される。Next, the frequency (0,1 /
A black and white subject having a spatial frequency of 2P V ) is the image sensor 1
01 for sampling. This subject is the period 2P V
Horizontal stripes, and for such a subject, R signal =
Since the G 2 signal and the B signal = G 1 signal, the adder 13
R-G 2 outputted from 9,140, both B-G 1 signal is zero. Therefore, the color difference matrix processing unit 113
The color-difference signals R-Y and B-Y that are output from the same are also zero. At this time, the carrier of the R signal and the carrier of the G 2 signal have the same phase on the frequency (0,1 / 2P V ) and the carrier of the B signal and the carrier of the G 1 signal have the same phase. Therefore, these difference signal R-G 2 signal at this frequency, B-
Since the carrier of the G 1 signal can be eliminated, the carrier of the color difference signal is not generated, and moire is suppressed.
【００３０】また、本実施例は色つきの被写体の場合で
も白黒の被写体と同様にモアレを抑える効果があるが、
一方で上述のように色差信号の小さいほうを選択する
と、常に色信号の変化の少ない方が選択されるため、結
果として色調の変化の小さくなった画像となってしまう
ことがある。これを防ぐために、本実施例では水平また
は垂直方向の色差のうち、色差の小さい方を優先的に選
択しながら色差の大きい方も考慮して差信号を生成する
こともできる構成になっている。Further, this embodiment has the effect of suppressing moire even in the case of a colored subject, as in the case of a monochrome subject.
On the other hand, if the one with the smaller color difference signal is selected as described above, the one with less change in the color signal is always selected, and as a result, an image with less change in color tone may be obtained. In order to prevent this, in the present embodiment, of the color differences in the horizontal or vertical direction, the one with the smaller color difference is preferentially selected, and the difference signal can also be generated in consideration of the one with the larger color difference. .
【００３１】また、通常水平方向と垂直方向とでは帯域
制限フィルタが異なるので、判定式の任意定数で判定条
件を非対称にすることによって、帯域に余裕のある差信
号Ｒ−Ｇ1 、Ｂ−Ｇ2 あるいは差信号Ｒ−Ｇ2 、Ｂ−Ｇ
1 により多くの帯域を与えて出力することもできる。Further, since the band limiting filters are usually different in the horizontal direction and the vertical direction, the difference signals R-G 1 and B-G with a margin in the band can be obtained by making the judgment condition asymmetric with an arbitrary constant of the judgment formula. 2 or difference signal R-G 2 , BG
It is also possible to output by giving more bands to 1 .
【００３２】これらの色差信号は次にＤ／Ａ変換器１１
４、１１５でＤ／Ａ変換され出力される。更に補間フィ
ルタ１０６、１０７、１０８、１０９からの出力信号
は、ローパスフィルタ１３５で所定の帯域に制限され、
輝度信号の低域成分ＹL が輝度信号生成回路１２７で、 ＹL ＝０．３０Ｒ（αＧ1 ＋βＧ2 ）＋０．１１Ｂ …(14) （但し、α＋β＝０．５９）により生成され、前述した
ように輝度の高域成分ＹH と加算器１１７で加算され、
Ｄ／Ａ変換器１１８でＤ／Ａ変換され出力される。な
お、一般に色差信号Ｒ−Ｙ、Ｂ−Ｙ、輝度の低域成分Ｙ
L は輝度信号Ｙに比べて十分帯域が狭いため、同時化さ
れたＲ信号、Ｇ1 信号、Ｇ2 信号、Ｂ信号の色差マトリ
クス処理部１１３、輝度信号生成回路１２７等での処理
は、間引きなどを行って輝度信号Ｙの処理より遅いクロ
ックで行っても良い。These color difference signals are then sent to the D / A converter 11
4, 115 is D / A converted and output. Furthermore, the output signals from the interpolation filters 106, 107, 108 and 109 are limited to a predetermined band by the low pass filter 135,
The low-frequency component Y L of the luminance signal is generated by the luminance signal generation circuit 127 by Y L = 0.30R (αG 1 + βG 2 ) + 0.11B (14) (where α + β = 0.59), and is described above. And the high frequency component Y H of the luminance is added by the adder 117,
The D / A converter 118 D / A converts and outputs. In general, the color difference signals R-Y, B-Y, and the low-frequency component Y of luminance are used.
Since L has a sufficiently narrow band compared to the luminance signal Y, the processing by the color difference matrix processing unit 113, the luminance signal generation circuit 127, and the like of the synchronized R signal, G 1 signal, G 2 signal, and B signal is thinned out. For example, a clock slower than the processing of the luminance signal Y may be performed.
【００３３】次に本発明の第２実施例について説明す
る。第２実施例は、第１実施例と輝度信号形成の方法が
異なる。Next, a second embodiment of the present invention will be described. The second embodiment differs from the first embodiment in the method of forming the luminance signal.
【００３４】図５は本実施例によるカラー撮像装置を示
すブロック図である。被写体からの光は、図示しない結
像光学系により撮像素子（センサ）２０１に入射する。
撮像素子２０１には図６に示すベイヤー配列のＹ、Ｒ、
Ｂフィルタが設けられている。撮像素子２０１から１画
素ごとに読み出された画像信号は、色分離部２０２によ
りＹ、Ｒ、Ｂ信号に分離された後、ホワイトバランス部
（ＷＢ）２１１でＹ、Ｒ、Ｂ信号のゲインがホワイトバ
ランスセンサ（ＡＷＢ）２２０より得られた色温度情報
をもとにホワイトバランス調整され、次にγ変換部２１
２でγ変換され、その後、Ａ／Ｄ変換器２０３でＡ／Ｄ
変換される。FIG. 5 is a block diagram showing a color image pickup apparatus according to this embodiment. Light from a subject enters an image sensor (sensor) 201 by an imaging optical system (not shown).
The image sensor 201 has Y, R, and
A B filter is provided. The image signal read from the image sensor 201 for each pixel is separated into Y, R, and B signals by the color separation unit 202, and then the gains of the Y, R, and B signals are increased by the white balance unit (WB) 211. White balance is adjusted based on the color temperature information obtained from the white balance sensor (AWB) 220, and then the γ conversion unit 21
2 is converted into γ, and then the A / D converter 203 performs A / D conversion.
To be converted.
【００３５】輝度信号は、Ｙ（γ乗）信号を補間フィル
タ２２５によりオフセットサンプリング構造を２次元的
に補間した後、ローパスフィルタ２３６で所定の帯域に
制限された後、エンハンスメント回路２４２でエンハン
スされ、Ｄ／Ａ変換器２１８でＤ／Ａ変換され出力され
る。The luminance signal is two-dimensionally interpolated with the offset sampling structure of the Y (γ-th power) signal by the interpolation filter 225, limited to a predetermined band by the low-pass filter 236, and then enhanced by the enhancement circuit 242. The D / A converter 218 D / A converts and outputs.
【００３６】一方、色分離部の出力のうちＹ信号（γ
乗）は（以下γ乗を省略する）、図６に示すような位置
にあるＹ1 とＹ2 に分離される。このように分離された
Ｙ1 信号、Ｙ2 信号は、Ｒ信号、Ｂ信号とともに補間フ
ィルタ２０６、２０７、２０８、２０９に入力され、各
々同時化されたＲ信号、Ｙ1 信号、Ｙ2 信号、Ｂ信号と
なる。なお、補間フィルタ２０６〜２０９での補間は、
水平及び垂直方向に隣接する画素の信号値をそのままも
ってくる前置補間ないしは、水平及び垂直方向の帯域を
余り落とさないものが望ましく、いずれかの補間方法あ
るいはそれらの組み合わせを行っても良い。On the other hand, the Y signal (γ
6) (hereinafter, the γth power is omitted) is separated into Y 1 and Y 2 at the positions shown in FIG. Thus separated Y 1 signal, Y 2 signal, R signal, the B signal is inputted to the interpolation filter 206, 207, 208 and 209, respectively synchronized to the R signal, Y 1 signal, Y 2 signal, It becomes the B signal. Note that the interpolation by the interpolation filters 206 to 209 is
Pre-interpolation, in which the signal values of pixels adjacent in the horizontal and vertical directions are kept as they are, or one that does not drop the bands in the horizontal and vertical directions, and any interpolation method or a combination thereof may be performed.
【００３７】同時化されたＲ信号、Ｙ1 信号は加算器２
２９で第１の差信号Ｒ−Ｙ1 信号となり、Ｒ信号、Ｙ2
信号は加算器２３９で第２の差信号Ｒ−Ｙ2 信号とな
り、Ｂ信号とＹ2 信号は加算器２３０で第３の差信号Ｂ
−Ｙ2 信号となり、Ｂ信号、Ｙ1 信号は加算器２４０で
第４の差信号Ｂ−Ｙ1 信号となり、これら第１、第２、
第３、第４の差信号が色差信号生成回路２４１に入力さ
れる。The synchronized R and Y 1 signals are added by the adder 2
At 29, it becomes the first difference signal RY 1 signal, and the R signal, Y 2
The signal becomes the second difference signal RY 2 signal at the adder 239, and the B signal and the Y 2 signal become the third difference signal B at the adder 230.
-Y 2 signal, B signal, Y 1 signal becomes a fourth difference signal B-Y 1 signal in the adder 240, and these first, second,
The third and fourth difference signals are input to the color difference signal generation circuit 241.
【００３８】この色差信号生成回路２４１は、入力した
４つの差信号から関数Ｆr 、Ｆb をそれぞれ定義して、
２つの差信号Ｆr 、Ｆb Ｆr （Ｒ−Ｙ1 、Ｒ−Ｙ2 ）＝Ｒ−Ｙ …(15) Ｆb （Ｂ−Ｙ1 、Ｂ−Ｙ2 ）＝Ｂ−Ｙ …(16) を出力するものである。関数Ｆr 、Ｆb には例えば、差
信号を重みとした次のような式を用いる。The color difference signal generation circuit 241 defines functions F r and F b from the four input difference signals,
Two differential signal F r, F b F r ( R-Y 1, R-Y 2) = R-Y ... (15) F b (B-Y 1, B-Y 2) = B-Y ... (16 ) Is output. For the functions F r and F b , for example, the following equations using the difference signal as a weight are used.
【００３９】[0039]
【数４】 [Equation 4]
【００４０】[0040]
【数５】 [Equation 5]
【００４１】また、図７のように判定回路２５０と関数
生成回路２５１を設けて関数Ｆr 、Ｆb を生成すること
もできる。このとき、関数Ｆr 、Ｆb は次のように定義
する。Further, as shown in FIG. 7, the decision circuit 250 and the function generation circuit 251 may be provided to generate the functions F r and F b . At this time, the functions F r and F b are defined as follows.
【００４２】 （色差信号生成方法３） Ｆr （Ｒ−Ｙ1 、Ｒ−Ｙ2 ）＝Ｋa （Ｒ−Ｙ1 ）＋Ｋb （Ｒ−Ｙ2 ） Ｋa ，Ｋb ＝０，１ …(21) Ｆb （Ｂ−Ｙ1 、Ｂ−Ｙ2 ）＝Ｋc （Ｂ−Ｙ1 ）＋Ｋd （Ｂ−Ｙ2 ） Ｋc ，Ｋd ＝０，１ …(22)(Color Difference Signal Generation Method 3) F r (R−Y 1 , R−Y 2 ) = K a (R−Y 1 ) + K b (R−Y 2 ) K a , K b = 0, 1 ... (21) F b (B- Y 1, B-Y 2) = K c (B-Y 1) + K d (B-Y 2) K c, K d = 0,1 ... (22)
【００４３】判定回路２５０は例えば次のような判定方
法を用いる。 ｜Ｒ−Ｙ1 ｜＜｜Ｒ−Ｙ2 ｜＋Ｋe のとき Ｋa ＝１，Ｋb ＝０ …(23) ｜Ｒ−Ｙ1 ｜＞｜Ｒ−Ｙ2 ｜＋Ｋe のとき Ｋa ＝０，Ｋb ＝１ …(24) ｜Ｂ−Ｙ1 ｜＜｜Ｂ−Ｙ2 ｜＋Ｋf のとき Ｋc ＝０，Ｋd ＝１ …(25) ｜Ｒ−Ｙ1 ｜＞｜Ｒ−Ｙ2 ｜＋Ｋf のとき Ｋc ＝１，Ｋd ＝０ …(26) Ｋe , Ｋf ：任意定数The determination circuit 250 uses the following determination method, for example. When | R−Y 1 | <| R−Y 2 | + K e Ka = 1, K b = 0 (23) | R−Y 1 |> | R−Y 2 | + K e Ka = 0, K b = 1 ... (24) | B−Y 1 | <| B−Y 2 | + K f When K c = 0, K d = 1 ... (25) | R−Y 1 |> | R− When Y 2 | + K f K c = 1 and K d = 0 (26) K e , K f : arbitrary constant
【００４４】以上の方法では、いずれも差信号Ｒ−Ｙ1
と差信号Ｒ−Ｙ2 または差信号Ｂ−Ｙ1 と差信号Ｂ−Ｙ
2 のうち値の小さい方の信号を優先的に選択するように
している。従って、この原理を利用した方法であれば、
色差信号生成回路２４１は上述の方法に限ったものでは
ない。In any of the above methods, the difference signal RY 1
And the difference signal RY 2 or the difference signal BY 1 and the difference signal BY
The signal with the smaller value of 2 is preferentially selected. Therefore, if it is a method using this principle,
The color difference signal generation circuit 241 is not limited to the above method.
【００４５】ここで、図８（ａ）に示す周波数（１／２
ＰH ，０）の空間周波数である白黒の被写体が撮像素子
２０１により採取されるとする。この被写体は周期２Ｐ
H の縦縞であり、このような被写体に対しては、Ｒ信号
＝Ｙ1 信号、Ｂ信号＝Ｙ2 信号となるため、加算器２２
９、２３０より出力されるＲ−Ｙ1 信号、Ｂ−Ｙ2 信号
はいずれも零となり、色差信号Ｒ−Ｙ、Ｂ−Ｙは零とな
る。このとき、周波数（１／２ＰH ，０）上でのＲ信号
のキャリアとＹ1 信号のキャリアとは同位相であり、Ｂ
信号のキャリアとＹ2 信号のキャリアとは同位相であ
る。従って、この周波数でのこれらの差信号Ｒ−Ｙ1 信
号、Ｂ−Ｙ2 信号のキャリアを消滅させることができる
ため、色差信号のキャリアが発生せずモアレが抑制され
る。Here, the frequency (1/2) shown in FIG.
It is assumed that a monochrome subject having a spatial frequency of P H , 0) is sampled by the image sensor 201. This subject has a period of 2P
Since it is a vertical stripe of H , and for such a subject, R signal = Y 1 signal and B signal = Y 2 signal, the adder 22
R-Y 1 signal outputted from 9,230, B-Y 2 signal becomes zero both the color difference signals R-Y, B-Y is zero. At this time, the carrier of the R signal and the carrier of the Y 1 signal on the frequency (1 / 2P H , 0) have the same phase, and
The signal carrier and the Y 2 signal carrier have the same phase. Therefore, these difference signal R-Y 1 signal at this frequency, since the carrier B-Y 2 signal can be eliminated, the carrier chrominance signal moire does not occur can be suppressed.
【００４６】次に、図８（ｂ）に示す周波数（０，１／
２ＰV ）の空間周波数である白黒の被写体が撮像素子２
０１により採取されるとする。この被写体は周期２ＰV
の横縞であり、このような被写体に対しては、Ｒ信号＝
Ｙ2 信号、Ｂ信号＝Ｙ1 信号となるため、加算器２３
９、２４０より出力されるＲ−Ｙ2 、Ｂ−Ｙ1 信号はい
ずれも零となり、色差信号Ｒ−Ｙ、Ｂ−Ｙは零となる。
このとき、周波数（０，１／２ＰV ）上でのＲ信号のキ
ャリアとＹ2 信号のキャリアとは同位相であり、Ｂ信号
のキャリアとＹ1 信号のキャリアとは同位相である。従
って、この周波数でのこれらの差信号Ｒ−Ｙ2 信号、Ｂ
−Ｙ1 信号のキャリアを消滅させることができるため、
色差信号のキャリアが発生せずモアレが抑制される。Next, the frequency (0, 1 /
The black and white subject having a spatial frequency of 2P V ) is the image sensor 2
01 for sampling. This subject is the period 2P V
Horizontal stripes, and for such a subject, R signal =
Since the Y 2 signal and the B signal = Y 1 signal, the adder 23
R-Y 2 outputted from 9,240, B-Y 1 signal becomes zero both the color difference signals R-Y, B-Y is zero.
At this time, the carrier of the R signal and the carrier of the Y 2 signal on the frequency (0, 1 / 2P V ) are in phase, and the carrier of the B signal and the carrier of the Y 1 signal are in phase. Therefore, these difference signals RY 2 signals, B, at this frequency
Since the carrier of the −Y 1 signal can be eliminated,
Moire is suppressed without the generation of color difference signal carriers.
【００４７】また、本実施例は色つきの被写体の場合で
も白黒の被写体と同様にモアレを抑える効果があるが、
一方で上述のように色差信号の小さいほうを選択する
と、常に色信号の変化の少ない方が選択されるため、結
果として色調の変化の小さくなった画像となってしまう
ことがある。これを防ぐために、本実施例では水平また
は垂直方向の色差のうち、色差の小さい方を優先的に選
択しながら色差の大きい方も考慮して差信号を生成する
こともできる構成になっている。In addition, this embodiment has the effect of suppressing moire even in the case of a colored subject as in the case of a monochrome subject.
On the other hand, if the one with the smaller color difference signal is selected as described above, the one with less change in the color signal is always selected, and as a result, an image with less change in color tone may be obtained. In order to prevent this, in the present embodiment, of the color differences in the horizontal or vertical direction, the one with the smaller color difference is preferentially selected, and the difference signal can also be generated in consideration of the one with the larger color difference. .
【００４８】また、通常水平方向と垂直方向とでは帯域
制限フィルタが異なるので、判定式の任意定数で判定条
件を非対称にすることによって、帯域に余裕のある差信
号Ｒ−Ｙ1 、Ｂ−Ｙ2 あるいは差信号Ｒ−Ｙ2 、Ｂ−Ｙ
1 により多くの帯域を与えて出力することもできる。Further, since the band limiting filters are usually different in the horizontal direction and the vertical direction, the difference signals R-Y 1 and B-Y having a band margin can be obtained by making the judgment condition asymmetric with an arbitrary constant of the judgment formula. 2 or difference signal R-Y 2 , BY
It is also possible to output by giving more bands to 1 .
【００４９】これらの色差信号は次にＤ／Ａ変換器２１
４、２１５でＤ／Ａ変換され出力される。These color difference signals are then sent to the D / A converter 21.
4, 215 D / A converted and output.
【００５０】[0050]
【発明の効果】以上説明したように、本発明によれば撮
像素子にベイヤー配列のフィルタアレイを設け、上述の
信号処理を施すことにより、ナイキスト周波数のキャリ
アを抑制することができ、モアレが少なく、かつナイキ
スト周波数まで解像されたＳ／Ｎ比の良好な画像を得る
ことのできるカラー撮像装置を提供することができる。As described above, according to the present invention, by providing the image sensor with the Bayer array filter array and performing the above-described signal processing, it is possible to suppress the carrier at the Nyquist frequency and reduce the moire. It is possible to provide a color image pickup device capable of obtaining an image having a good S / N ratio resolved up to the Nyquist frequency.
【図１】本発明の第１実施例によるカラー撮像装置を示
すブロック図である。FIG. 1 is a block diagram showing a color image pickup apparatus according to a first embodiment of the present invention.
【図２】上記第１実施例に用いるベイヤー配列の色フィ
ルタの配列例を示す構成図である。FIG. 2 is a configuration diagram showing an arrangement example of a Bayer arrangement color filter used in the first embodiment.
【図３】図１のカラー撮像装置における色差信号生成回
路を示すブロック図である。3 is a block diagram showing a color difference signal generation circuit in the color image pickup apparatus of FIG.
【図４】図２の色フィルタにナイキスト周波数の白黒の
縦縞及び横縞の被写体が入射した場合の構成図である。FIG. 4 is a configuration diagram of a case where black and white vertical stripes and horizontal stripes having a Nyquist frequency are incident on the color filter of FIG.
【図５】本発明の第２実施例によるカラー撮像装置を示
すブロック図である。FIG. 5 is a block diagram showing a color image pickup apparatus according to a second embodiment of the present invention.
【図６】上記第２実施例に用いるベイヤー配列の色フィ
ルタの配列例を示す構成図である。FIG. 6 is a configuration diagram showing an array example of a Bayer array color filter used in the second embodiment.
【図７】図５のカラー撮像装置における色差信号生成回
路を示すブロック図である。7 is a block diagram showing a color difference signal generation circuit in the color image pickup apparatus of FIG.
【図８】図６の色フィルタにナイキスト周波数の白黒の
縦縞及び横縞の被写体が入射した場合の構成図である。8 is a configuration diagram in the case where an object having vertical and horizontal vertical stripes and horizontal stripes having a Nyquist frequency is incident on the color filter of FIG.
【図９】従来のカラー撮像素子の色フィルタの配列構成
の例を示す構成図である。FIG. 9 is a configuration diagram showing an example of an array configuration of color filters of a conventional color image sensor.
【図１０】従来のカラー撮像素子の色フィルタの配列構
成の例を示す構成図である。FIG. 10 is a configuration diagram showing an example of an array configuration of color filters of a conventional color image sensor.
【図１１】従来のカラー撮像素子の色フィルタの配列構
成の例を示す構成図である。FIG. 11 is a configuration diagram showing an example of an array configuration of color filters of a conventional color image sensor.
【図１２】ベイヤー配列の色フィルタの配列例を示す構
成図である。FIG. 12 is a configuration diagram showing an arrangement example of color filters in a Bayer arrangement.
【図１３】図１２の色フィルタによる信号キャリアの位
置を示す構成図である。13 is a configuration diagram showing a position of a signal carrier by the color filter of FIG.
２０２ 色分離部 ２０６ 補間フィルタ ２０７ 補間フィルタ ２０８ 補間フィルタ ２０９ 補間フィルタ ２２９ 加算器 ２３０ 加算器 ２３６ ローパスフィルタ ２３７ ローパスフィルタ ２３８ ローパスフィルタ ２３９ 加算器 ２４０ 加算器 ２４１ 色差信号生成回路 202 color separation unit 206 interpolation filter 207 interpolation filter 208 interpolation filter 209 interpolation filter 229 adder 230 adder 236 low pass filter 237 low pass filter 238 low pass filter 239 adder 240 adder 241 color difference signal generation circuit
Claims (1)
のピッチＰV の矩形格子状に配置された撮像素子と、 上記画素に対応して設けられた水平方向のピッチ２
ＰH 、垂直方向のピッチＰV で水平方向にＰH だけオフ
セットされたオフセットサンプリング構造を有する第１
の色フィルタと、 水平方向のピッチ２ＰH 、垂直方向のピッチ２ＰV の矩
形格子状サンプリング構造を有する第２の色フィルタ及
び第３の色フィルタと、 上記第１の色フィルタ、第２の色フィルタ、第３の色フ
ィルタに対応する画素から出力された第１の色信号、第
２の色信号、第３の色信号に基づいて、上記第１の色信
号のうち上記第２の色信号の画素と同じ列の画素による
信号のみを同時化し、上記第２の色信号との差をとった
信号を第１の差信号とし、上記第１の色信号のうち上記
第２の色信号の画素と同じ行の画素による信号のみを同
時化し、上記第２の色信号との差をとった信号を第２の
差信号とすると共に、 上記第１の色信号のうち上記第３の色信号の画素と同じ
列の画素による信号のみを同時化し、上記第３の色信号
との差をとった信号を第３の差信号とし、上記第１の色
信号のうち上記第３の色信号の画素と同じ行の画素によ
る信号のみを同時化し、上記第３の色信号との差をとっ
た信号を第４の差信号とし、 上記第１の差信号と上記第２の差信号とを変数とした関
数を第１の色差信号とすると共に、上記第３の差信号と
上記第４の差信号とを変数とした関数を第２の色差信号
とする色差信号生成手段とを備えたことを特徴とするカ
ラー撮像装置。1. An image sensor in which pixels are arranged in a rectangular lattice pattern having a horizontal pitch P H and a vertical pitch P V , and a horizontal pitch 2 provided corresponding to the pixels.
P H, first with offset offset sampling structure only P H in the horizontal direction in the vertical pitch P V
Color filter, a second color filter and a third color filter having a rectangular lattice sampling structure with a horizontal pitch 2P H and a vertical pitch 2P V , the first color filter, and the second color The second color signal of the first color signals based on the first color signal, the second color signal, and the third color signal output from the pixels corresponding to the filter and the third color filter. Signal of the pixel in the same column as that of the second color signal, and a signal obtained by taking a difference from the second color signal is used as a first difference signal. Only the signals from the pixels in the same row as the pixels are synchronized, and the signal that is the difference from the second color signal is used as the second difference signal, and the third color signal of the first color signals is used. Signal from the pixel in the same column as that of The obtained signal is used as a third difference signal, and only the signals of the pixels in the same row as the pixels of the third color signal in the first color signal are synchronized to obtain the difference from the third color signal. The difference signal as the fourth difference signal, and the function having the first difference signal and the second difference signal as variables is the first color difference signal, and the third difference signal and the fourth difference signal A color image pickup device, comprising: a color difference signal generation unit that uses a function having a difference signal as a variable as a second color difference signal.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP15143693A JP3450374B2 (en) | 1993-05-28 | 1993-05-28 | Color imaging device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP15143693A JP3450374B2 (en) | 1993-05-28 | 1993-05-28 | Color imaging device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH06339145A true JPH06339145A (en) | 1994-12-06 |
| JP3450374B2 JP3450374B2 (en) | 2003-09-22 |
Family
ID=15518575
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP15143693A Expired - Fee Related JP3450374B2 (en) | 1993-05-28 | 1993-05-28 | Color imaging device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3450374B2 (en) |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20010058767A (en) * | 1999-12-30 | 2001-07-06 | 서평원 | Color image interpolation method |
| US6570616B1 (en) | 1997-10-17 | 2003-05-27 | Nikon Corporation | Image processing method and device and recording medium in which image processing program is recorded |
| KR100421348B1 (en) * | 1999-10-19 | 2004-03-06 | 마츠시타 덴끼 산교 가부시키가이샤 | Color image pickup apparatus |
| JP2009105977A (en) * | 2009-02-09 | 2009-05-14 | Canon Inc | Signal processing apparatus and method |
| JP2010068516A (en) * | 2008-09-08 | 2010-03-25 | Samsung Electronics Co Ltd | Color interpolation apparatus and method |
| JP2013198160A (en) * | 2012-03-19 | 2013-09-30 | Aptina Imaging Corp | Imaging system provided with transparent filter pixel |
| US10616536B2 (en) | 2018-01-12 | 2020-04-07 | Semiconductor Components Industries, Llc | Imaging systems having broadband monochromatic and chromatic image sensors |
-
1993
- 1993-05-28 JP JP15143693A patent/JP3450374B2/en not_active Expired - Fee Related
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6570616B1 (en) | 1997-10-17 | 2003-05-27 | Nikon Corporation | Image processing method and device and recording medium in which image processing program is recorded |
| KR100421348B1 (en) * | 1999-10-19 | 2004-03-06 | 마츠시타 덴끼 산교 가부시키가이샤 | Color image pickup apparatus |
| KR20010058767A (en) * | 1999-12-30 | 2001-07-06 | 서평원 | Color image interpolation method |
| JP2010068516A (en) * | 2008-09-08 | 2010-03-25 | Samsung Electronics Co Ltd | Color interpolation apparatus and method |
| JP2009105977A (en) * | 2009-02-09 | 2009-05-14 | Canon Inc | Signal processing apparatus and method |
| JP2013198160A (en) * | 2012-03-19 | 2013-09-30 | Aptina Imaging Corp | Imaging system provided with transparent filter pixel |
| US9191635B2 (en) | 2012-03-19 | 2015-11-17 | Semiconductor Components Industries, Llc | Imaging systems with clear filter pixels |
| US9521380B2 (en) | 2012-03-19 | 2016-12-13 | Semiconductor Components Industries, Llc | Imaging systems with clear filter pixels |
| US9942527B2 (en) | 2012-03-19 | 2018-04-10 | Semiconductor Components Industries, Llc | Imaging systems with clear filter pixels |
| US10070104B2 (en) | 2012-03-19 | 2018-09-04 | Semiconductor Components Industries, Llc | Imaging systems with clear filter pixels |
| US10616536B2 (en) | 2018-01-12 | 2020-04-07 | Semiconductor Components Industries, Llc | Imaging systems having broadband monochromatic and chromatic image sensors |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3450374B2 (en) | 2003-09-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7973831B2 (en) | Solid-state image sensor and imaging apparatus using the same | |
| US4591900A (en) | Encoding pattern for single chip CCD camera processing scheme | |
| EP0502539B1 (en) | Color image pickup apparatus | |
| CA2002591C (en) | A signal processing circuit for a solid-state image pickup device | |
| JP3450374B2 (en) | Color imaging device | |
| JP3576600B2 (en) | Color imaging device | |
| JP3246612B2 (en) | Color imaging device | |
| JPS6351437B2 (en) | ||
| JP3017312B2 (en) | Color imaging device | |
| JP3017310B2 (en) | Color imaging device | |
| JP3450366B2 (en) | Color imaging device | |
| JP3017311B2 (en) | Color imaging device | |
| JPS5875393A (en) | Single plate type color image pickup device | |
| JP3252966B2 (en) | Color imaging device | |
| JP3049434B2 (en) | Color imaging device | |
| JP3018101B2 (en) | Color imaging device | |
| JPH089395A (en) | Color image pickup device | |
| JPH04280191A (en) | Color image pickup device | |
| JPH04278791A (en) | Color image pickup device | |
| JPH0640670B2 (en) | Solid-state imaging device | |
| JPH04165885A (en) | Color image pickup device | |
| JPH07118811B2 (en) | Video signal processor | |
| JPH04170191A (en) | Picture signal processing unit | |
| JPH04165887A (en) | Picture signal processor | |
| JPH05244610A (en) | Method and device for solid-state color image pickup |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080711 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080711 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090711 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090711 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100711 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100711 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110711 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120711 Year of fee payment: 9 |
|
| LAPS | Cancellation because of no payment of annual fees |