JP3408169B2 - Image data processing method and image data processing device - Google Patents

Image data processing method and image data processing device

Info

Publication number
JP3408169B2
JP3408169B2 JP33417798A JP33417798A JP3408169B2 JP 3408169 B2 JP3408169 B2 JP 3408169B2 JP 33417798 A JP33417798 A JP 33417798A JP 33417798 A JP33417798 A JP 33417798A JP 3408169 B2 JP3408169 B2 JP 3408169B2
Authority
JP
Japan
Prior art keywords
color
data
component
image data
complementary
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP33417798A
Other languages
Japanese (ja)
Other versions
JP2000165897A (en
Inventor
俊郎 中莖
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sanyo Electric Co Ltd
Original Assignee
Sanyo Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sanyo Electric Co Ltd filed Critical Sanyo Electric Co Ltd
Priority to JP33417798A priority Critical patent/JP3408169B2/en
Priority to TW088116708A priority patent/TW453124B/en
Priority to US09/448,028 priority patent/US6674465B1/en
Priority to KR10-1999-0052330A priority patent/KR100376957B1/en
Publication of JP2000165897A publication Critical patent/JP2000165897A/en
Application granted granted Critical
Publication of JP3408169B2 publication Critical patent/JP3408169B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/646—Circuits for processing colour signals for image enhancement, e.g. vertical detail restoration, cross-colour elimination, contour correction, chrominance trapping filters
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/135—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on four or more different wavelength filter elements
    • H04N25/136—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on four or more different wavelength filter elements using complementary colours

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Color Television Image Signal Generators (AREA)
  • Processing Of Color Television Signals (AREA)
  • Image Processing (AREA)
  • Facsimile Image Signal Circuits (AREA)

Description

【発明の詳細な説明】Detailed Description of the Invention

【０００１】[0001]

【発明の属する技術分野】本発明は、補色成分を表す補
色データから、原色成分を表す原色データを生成する画
像データの処理方法及びその方法を採用した画像データ
処理装置に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image data processing method for generating primary color data representing a primary color component from complementary color data representing a complementary color component, and an image data processing apparatus employing the method.

【０００２】[0002]

【従来の技術】図７は、ＣＣＤイメージセンサを用いた
撮像装置の構成を示すブロック図であり、図８は、ＣＣ
Ｄイメージセンサに装着されるモザイク型のカラーフィ
ルタの一例を示す平面図である。2. Description of the Related Art FIG. 7 is a block diagram showing the structure of an image pickup device using a CCD image sensor, and FIG.
It is a top view showing an example of a mosaic type color filter with which a D image sensor is equipped.

【０００３】ＣＣＤイメージセンサ１は、複数の受光画
素、複数の垂直シフトレジスタ及び通常１つの水平シフ
トレジスタを有している。複数の受光画素は、受光面に
一定の間隔で行列配置され、それぞれ受光した被写体画
像に対応して情報電荷を発生して蓄積する。複数の垂直
シフトレジスタは、受光画素の各列に対応して配置さ
れ、各受光画素に蓄積された情報電荷を順次垂直方向へ
転送する。そして、水平シフトレジスタは、垂直シフト
レジスタの出力側に配置され、複数の垂直シフトレジス
タから転送出力される情報電荷を受け取り、１行単位で
転送出力する。これにより、各受光画素に蓄積された情
報電荷量に応じて電圧値を変化させる画像信号Ｉ0が出
力される。The CCD image sensor 1 has a plurality of light receiving pixels, a plurality of vertical shift registers, and usually one horizontal shift register. The plurality of light receiving pixels are arranged in a matrix on the light receiving surface at regular intervals, and generate and accumulate information charges corresponding to the received object images. The plurality of vertical shift registers are arranged corresponding to each column of the light receiving pixels, and sequentially transfer the information charges accumulated in each light receiving pixel in the vertical direction. The horizontal shift register is arranged on the output side of the vertical shift register, receives the information charges transferred and output from the plurality of vertical shift registers, and transfers and outputs the information charges in units of one row. As a result, the image signal I0 whose voltage value is changed according to the amount of information charges accumulated in each light receiving pixel is output.

【０００４】アナログ処理回路２は、ＣＣＤ１から入力
される画像信号Ｉ0に対し、サンプルホールド、レベル
クランプ等の処理を施し、所定のフォーマットに従う画
像信号Ｉ1を生成する。例えば、サンプルホールド処理
においては、ＣＣＤ１の出力動作に同期してリセットレ
ベルと信号レベルとが交互に繰り返される画像信号Ｉ0
から、信号レベルのみが取り出される。また、レベルク
ランプ処理においては、画像信号Ｉ0の水平走査期間の
終端に設定される黒基準レベルが各水平走査期間毎に所
定のレベルにクランプされる。Ａ／Ｄ変換回路３は、ア
ナログ処理回路２から入力される画像信号Ｉ1をアナロ
グ処理回路２の動作、即ち、ＣＣＤ１の出力動作に従う
タイミングで量子化し、ＣＣＤ１の各受光画素に対応す
る情報をデジタル値で表す画像データＤを生成する。The analog processing circuit 2 subjects the image signal I0 input from the CCD 1 to processing such as sample hold and level clamp, and generates an image signal I1 according to a predetermined format. For example, in the sample hold process, the image signal I0 in which the reset level and the signal level are alternately repeated in synchronization with the output operation of the CCD 1
From, only the signal level is extracted. Further, in the level clamp processing, the black reference level set at the end of the horizontal scanning period of the image signal I0 is clamped to a predetermined level for each horizontal scanning period. The A / D conversion circuit 3 quantizes the image signal I1 input from the analog processing circuit 2 at a timing according to the operation of the analog processing circuit 2, that is, the output operation of the CCD 1, and digitalizes information corresponding to each light receiving pixel of the CCD 1. Image data D represented by a value is generated.

【０００５】デジタル処理回路４は、Ａ／Ｄ変換回路３
から入力される画像データＤに対して、色分離、マトリ
クス演算等の処理を施し、輝度データＹ及び色差データ
Ｕ、Ｖを生成する。例えば、色分離処理においては、Ｃ
ＣＤ１の各受光面に装着されるカラーフィルタの色配列
に従って画像データＤが振り分けられ、複数の色成分デ
ータが生成される。また、マトリクス演算処理において
は、振り分けられた各色成分データから光の三原色に対
応した原色データが生成され、さらに、その原色データ
を所定の割合で合成することにより色差データが生成さ
れる。The digital processing circuit 4 includes an A / D conversion circuit 3
The image data D input from is subjected to processing such as color separation and matrix calculation to generate luminance data Y and color difference data U and V. For example, in the color separation process, C
The image data D is distributed according to the color arrangement of the color filter mounted on each light receiving surface of the CD 1, and a plurality of color component data is generated. In the matrix calculation process, primary color data corresponding to the three primary colors of light are generated from the distributed color component data, and color difference data is generated by combining the primary color data at a predetermined ratio.

【０００６】駆動回路５は、後述するタイミング制御回
路６からの各種タイミング信号に応答し、ＣＣＤ１の各
シフトレジスタに対して多相の駆動クロックを供給す
る。例えば、垂直シフトレジスタに対し、４相の垂直転
送クロックφvを供給し、水平シフトレジスタに対して
２相の水平転送クロックφhを供給する。タイミング制
御回路６は、一定周期の基準クロックに従い、ＣＣＤ１
の垂直走査のタイミングを決定する垂直タイミング信号
と水平走査のタイミングを決定する水平タイミング信号
とを生成し、駆動回路５に供給する。同時に、アナログ
処理回路２、Ａ／Ｄ変換回路３及びデジタル処理回路４
に対して、各回路の動作をＣＣＤ１の出力動作に同期さ
せるためのタイミングクロックＣＴを供給する。The drive circuit 5 responds to various timing signals from a timing control circuit 6 which will be described later and supplies a multi-phase drive clock to each shift register of the CCD 1. For example, a 4-phase vertical transfer clock φv is supplied to the vertical shift register, and a 2-phase horizontal transfer clock φh is supplied to the horizontal shift register. The timing control circuit 6 uses the CCD 1 according to a reference clock having a constant cycle.
A vertical timing signal that determines the vertical scanning timing and a horizontal timing signal that determines the horizontal scanning timing are generated and supplied to the drive circuit 5. At the same time, the analog processing circuit 2, the A / D conversion circuit 3, and the digital processing circuit 4
On the other hand, the timing clock CT for synchronizing the operation of each circuit with the output operation of the CCD 1 is supplied.

【０００７】ところで、カラー撮像を行う場合、ＣＣＤ
１の各受光画素を所定の色成分に対応付けるため、受光
面に色分離用のカラーフィルタが装着される。このカラ
ーフィルタは、垂直方向につながる複数のセグメントが
配置されるストライブ型及び各受光画素毎に対応付けて
複数のセグメントが配置されるモザイク型があげられ
る。例えば、モザイク型のカラーフィルタは、図８に示
すように、ＣＣＤ１の受光部の各画素に対応して複数の
セグメントに分割され、各セグメントに、Ｙｅ（イエロ
ー）、Ｃｙ（シアン）、Ｗ（ホワイト）及びＧ（グリー
ン）の各色成分が周期的に割り当てられる。ここでは、
Ｗ及びＧの各成分が奇数行に交互に配置され、Ｙｅ及び
Ｃｙの各成分が偶数行に交互に配置されている。このよ
うなカラーフィルタが装着されたＣＣＤ１から得られる
画像信号は、奇数行の読み出しでＷ及びＧの各成分が繰
り返され、偶数行の読み出しではＹｅ及びＣｙの各成分
が繰り返される。By the way, when performing color image pickup, the CCD
A color filter for color separation is mounted on the light receiving surface in order to associate each light receiving pixel of No. 1 with a predetermined color component. Examples of this color filter include a stripe type in which a plurality of segments connected in the vertical direction are arranged and a mosaic type in which a plurality of segments are arranged in association with each light receiving pixel. For example, as shown in FIG. 8, the mosaic type color filter is divided into a plurality of segments corresponding to each pixel of the light receiving portion of the CCD 1, and each segment has Ye (yellow), Cy (cyan), and W ( The white) and G (green) color components are periodically assigned. here,
The W and G components are alternately arranged in odd rows, and the Ye and Cy components are alternately arranged in even rows. In the image signal obtained from the CCD 1 equipped with such a color filter, each component of W and G is repeated in the reading of the odd-numbered row, and each component of Ye and Cy is repeated in the reading of the even-numbered row.

【０００８】図９は、映像信号処理装置としてのデジタ
ル信号処理部４の構成を示すブロック図であり、図１０
は、その動作を説明するタイミング図である。この図に
おいては、図８に示すモザイク型のカラーフィルタがＣ
ＣＤ１に装着された場合に対応している。FIG. 9 is a block diagram showing the configuration of the digital signal processing section 4 as a video signal processing device, and FIG.
FIG. 6 is a timing diagram explaining the operation. In this figure, the mosaic type color filter shown in FIG.
It corresponds to the case of being attached to CD1.

【０００９】色分離回路１１は、各色成分がカラーフィ
ルタの各セグメントの配列に対応する順序で連続する画
像データＤを各色成分毎に振り分けて色成分データＣ[Y
e]、Ｃ[Cy]、Ｃ[G]、Ｃ[W]を生成する。Ａ／Ｄ変換回路
３から入力される画像データＤは、図１０に示すよう
に、奇数行（ＯＤＤ）の読み出し動作においては、Ｇ成
分及びＷ成分が交互に連続し、偶数行（ＥＶＥＮ）の読
み出しではＹｅ成分及びＣｙ成分が交互に連続する。そ
こで、色分離回路１１は、画像データＤを少なくとも１
行分保持することにより、各行の読み出しの際に全ての
色成分データＣ[Ye]、Ｃ[Cy]、Ｃ[G]、Ｃ[W]の出力を可
能にしている。即ち、奇数行の読み出しが行われている
ときには、その行の画像データＤを振り分けて色成分デ
ータＣ[G]、Ｃ[W]を出力し、同時に、１行前の画像デー
タＤを振り分けて色成分データＣ[Ye]、Ｃ[Cy]を出力す
るように構成される。さらに、シリアルに出力される画
像データＤの振り分けによって間欠的になる各色成分デ
ータＣ[Ye]、Ｃ[Cy]、Ｃ[G]、Ｃ[W]は、同一データを連
続して２度出力することによって補間される。The color separation circuit 11 sorts the image data D in which the respective color components are continuous in the order corresponding to the arrangement of the respective segments of the color filter for each color component, and the color component data C [Y
e], C [Cy], C [G], and C [W] are generated. As shown in FIG. 10, in the image data D input from the A / D conversion circuit 3, the G component and the W component are alternately continuous in an odd number row (ODD) read operation, and the even number row (EVEN) is read. In reading, the Ye component and the Cy component are alternately continuous. Therefore, the color separation circuit 11 outputs at least one image data D.
By holding the lines, it is possible to output all the color component data C [Ye], C [Cy], C [G], C [W] when reading each line. That is, when the odd-numbered row is being read, the image data D of that row is distributed and the color component data C [G] and C [W] are output, and at the same time, the image data D of the immediately preceding row is distributed. The color component data C [Ye] and C [Cy] are output. Further, the respective color component data C [Ye], C [Cy], C [G], and C [W], which are intermittent due to the distribution of the serially output image data D, output the same data twice in succession. Is interpolated.

【００１０】色演算回路１２は、色分離回路１１から入
力される色成分データＣ[Ye]、Ｃ[Cy]、Ｃ[G]、Ｃ[W]に
対して、例えば、 Ｙｅ−Ｇ＝Ｒ Ｃｙ−Ｇ＝Ｂ Ｇ＝Ｇ の式に従う色演算処理を施し、光の三原色（Ｒ：赤、
Ｇ：緑、Ｂ：青）に対応する原色データＰ[R]、Ｐ[G]、
Ｐ[B]を生成する。The color calculation circuit 12 responds to the color component data C [Ye], C [Cy], C [G], C [W] input from the color separation circuit 11, for example, Ye-G = R. Cy-G = B G = G is subjected to color calculation processing, and the three primary colors of light (R: red,
G: green, B: blue) corresponding primary color data P [R], P [G],
Generate P [B].

【００１１】ホワイトバランス制御回路１３は、色演算
回路１２から入力される原色データＰ[R]、Ｐ[G]、Ｐ
[B]に対して、各色毎に設定される固有のゲインを与え
ることにより、各色のバランスを調整する。即ち、ホワ
イトバランス制御回路１３では、ＣＣＤの受光画素にお
いて生じる色成分毎の感度の差を補償するため、原色デ
ータＰ[R]、Ｐ[G]、Ｐ[B]のゲインを色毎に個別に設定
することにより再生画面の色再現性を向上させている。The white balance control circuit 13 receives the primary color data P [R], P [G], P from the color calculation circuit 12.
The balance of each color is adjusted by giving a unique gain set for each color to [B]. That is, in the white balance control circuit 13, the gains of the primary color data P [R], P [G], and P [B] are individually set for each color in order to compensate for the difference in sensitivity between the color components generated in the light receiving pixels of the CCD. By setting to, the color reproducibility of the playback screen is improved.

【００１２】色差マトリクス回路１４は、ホワイトバラ
ンス制御回路１３から入力される原色データＰ[R]、Ｐ
[G]、Ｐ[B]に対して色差データＵ、Ｖを生成する。即
ち、各原色データＰ[R]、Ｐ[G]、Ｐ[B]を３：６：１の
割合で合成することにより、輝度情報を生成し、この輝
度情報をＢ成分に対応する原色データＰ[B]から差し引
くことによって色差データＵを生成し、Ｒ成分に対応す
る原色データＰ[R]から差し引くことによって色差デー
タＶを生成する。The color difference matrix circuit 14 has primary color data P [R], P [P] input from the white balance control circuit 13.
Color difference data U and V are generated for [G] and P [B]. That is, the luminance information is generated by synthesizing the primary color data P [R], P [G], and P [B] at a ratio of 3: 6: 1, and the luminance information is generated by the primary color data corresponding to the B component. The color difference data U is generated by subtracting it from P [B], and the color difference data V is generated by subtracting it from the primary color data P [R] corresponding to the R component.

【００１３】一方、輝度演算回路１５は、色分離回路１
１に入力される画像データＤに含まれる４つの色成分を
合成することにより、輝度データＹを生成する。即ち、
Ｙｅ、Ｃｙ、Ｇ、Ｗの各成分を合成すれば、 Ｙｅ＋Ｃｙ＋Ｇ＋Ｗ＝（Ｂ＋Ｇ）＋（Ｒ＋Ｇ）＋Ｇ＋（Ｒ＋Ｇ＋Ｂ） ＝２Ｒ＋４Ｇ＋２Ｂ となり、Ｒ、Ｇ及びＢの各成分が１：２：１の割合で合
成された輝度データＹを得ることができる。本来、輝度
信号は、ＮＴＳＣ方式の規格によれば、Ｒ、Ｇ及びＢの
各成分を３：６：１の割合で合成して生成されるもので
あるが、これに近い割合で合成して生成したものであれ
ば、実用上問題はない。On the other hand, the brightness calculation circuit 15 includes the color separation circuit 1
The luminance data Y is generated by synthesizing the four color components included in the image data D input to 1. That is,
If the respective components of Ye, Cy, G and W are combined, then Ye + Cy + G + W = (B + G) + (R + G) + G + (R + G + B) = 2R + 4G + 2B, and the respective components of R, G and B are combined at a ratio of 1: 2: 1. The luminance data Y thus obtained can be obtained. Originally, the luminance signal is generated by synthesizing each component of R, G, and B at a ratio of 3: 6: 1 according to the standard of NTSC system, but is synthesized at a ratio close to this. If it is generated, there is no problem in practical use.

【００１４】アパーチャ回路１６は、輝度データＹに含
まれる特定の周波数成分を強調してアパーチャデータを
生成し、このアパーチャデータを輝度データＹに加算す
る。即ち、被写体画像の輪郭を強調するため、画像信号
Ｙから画像データＤを得る際のサンプリング周波数の１
／４の周波数成分を強調するように画像データＤに対し
てフィルタリング処理を施し、アパーチャデータを生成
するように構成される。このようにして生成される輝度
データＹは、色差データＵ、Ｖと共に外部の表示機器あ
るいは記録機器へ供給される。The aperture circuit 16 emphasizes a specific frequency component contained in the luminance data Y to generate aperture data, and adds this aperture data to the luminance data Y. That is, in order to emphasize the contour of the subject image, the sampling frequency of 1 when the image data D is obtained from the image signal Y is obtained.
The image data D is filtered so as to emphasize the / 4 frequency component, and aperture data is generated. The luminance data Y thus generated is supplied to an external display device or recording device together with the color difference data U and V.

【００１５】[0015]

【発明が解決しようとする課題】色演算回路１２の色演
算処理では、Ｙｅ及びＣｙの各成分からそれぞれＧ成分
を差し引くことによってＲ及びＢの成分を生成するよう
にしているため、カラーフィルタの分光特性のばらつき
によっては、ＲあるいはＢの成分が負の値を示す場合が
起こり得る。例えば、Ｇ成分が強く、Ｒ、Ｂ成分が弱い
光の場合、本来ならば、Ｙｅ、Ｃｙ成分がＧ成分よりも
僅かに大きい値を示し、Ｒ、Ｂ成分は、「０」に近い正
の値を示すはずである。しかしながら、Ｙｅ、Ｃｙフィ
ルタが、所望の光を透過できず、Ｙｅ、Ｃｙ成分が、Ｇ
成分よりも小さい値でしか得られなくなると、演算処理
の結果、Ｒ、Ｂ成分が負の値で表される。このような負
の値は、本来色成分として取り得ない値であり、偽信号
となって再生画面の画質を劣化させる原因となる。In the color calculation processing of the color calculation circuit 12, the R and B components are generated by subtracting the G component from each of the Ye and Cy components. Depending on the dispersion of the spectral characteristics, the R or B component may have a negative value. For example, in the case of light in which the G component is strong and the R and B components are weak, originally, the Ye and Cy components show slightly larger values than the G component, and the R and B components are positive values close to “0”. Should show a value. However, the Ye and Cy filters cannot transmit the desired light, and the Ye and Cy components are G
When only values smaller than the components are obtained, the R and B components are represented by negative values as a result of the arithmetic processing. Such a negative value is a value that cannot be originally taken as a color component and becomes a false signal, which causes deterioration of the image quality of the reproduction screen.

【００１６】そこで本発明は、カラーフィルタの各色成
分毎の分光感度にばらつきがあった場合でも、色演算処
理において影響を受けにくくすることを目的とする。Therefore, an object of the present invention is to make the color calculation processing less susceptible to influences even if there are variations in the spectral sensitivity of each color component of the color filter.

【００１７】[0017]

【課題を解決するための手段】本発明の画像データの処
理方法は、光の三原色の補色を表す第１乃至第３の補色
データから、光の三原色を表す第１乃至第３の原色デー
タを生成する画像データ処理方法であって、上記第１の
補色データと上記第２の補色データとの積の平方根から
第１の原色データを生成し、上記第１の補色データと上
記第３の補色データとの積の平方根から第２の原色デー
タを生成すると共に、上記第２の補色データと上記第３
の補色データとの積の平方根から第３の原色データを生
成することを特徴としている。According to a method of processing image data of the present invention, first to third complementary color data representing light three primary colors are converted from first to third complementary color data representing complementary colors of light three primary colors. An image data processing method for generating, wherein first primary color data is generated from a square root of a product of the first complementary color data and the second complementary color data, and the first complementary color data and the third complementary color are generated. The second primary color data is generated from the square root of the product of the data and the second complementary color data and the third complementary color data.
It is characterized in that the third primary color data is generated from the square root of the product of the complementary color data and.

【００１８】そして、本発明の画像データ処理装置は、
光の三原色に対する補色を表す第１乃至第３の補色成分
が所定の規則で繰り返される画像データを取り込み、光
の三原色を表す第１乃至第３の原色データを生成する画
像データ処理装置であって、上記画像データを成分別に
分離して第１乃至第３の補色データを生成する分離回路
と、上記第１乃至第３の補色データの内の２つを互いに
乗算して第１乃至第３の積を生成する乗算回路と、上記
第１乃至第３の積の平方根を算出して第１乃至第３の根
を生成する開平回路と、を備え、上記第１乃至第３の根
を光の上記第１乃至第３の原色データとして扱うことを
特徴としている。The image data processing device of the present invention is
An image data processing device for taking in image data in which first to third complementary color components representing complementary colors to the three primary colors of light are repeated according to a predetermined rule, and generating first to third primary color data representing the three primary colors of light. , A separation circuit that separates the image data into components to generate first to third complementary color data, and two of the first to third complementary color data, which are multiplied by each other to obtain first to third complementary color data. A multiplication circuit for generating a product and a square root circuit for calculating a square root of the first to third products to generate first to third roots are provided. It is characterized in that it is handled as the first to third primary color data.

【００１９】本発明によれば、２種類の補色データを乗
算することで、両補色データに共通に含まれる原色成分
が強調され、その他の原色成分が減衰される。さらに、
２種類の補色データを乗算して得られた積の平方根をと
ることで、その根と元の補色データとの次数が合わせら
れる。これにより、２種類の補色データを乗算して得ら
れた積の平方根を原色データとして取り扱うことが可能
になる。これらの演算過程では、減算処理を用いていな
いため、演算過程で負の値が表れることはない。According to the present invention, by multiplying the two types of complementary color data, the primary color components commonly included in both complementary color data are emphasized and the other primary color components are attenuated. further,
By taking the square root of the product obtained by multiplying the two types of complementary color data, the orders of the root and the original complementary color data are matched. This makes it possible to handle the square root of the product obtained by multiplying the two types of complementary color data as primary color data. Since no subtraction process is used in these calculation processes, a negative value does not appear in the calculation process.

【００２０】[0020]

【発明の実施の形態】図１は、本発明の画像データ処理
装置の構成を示すブロック図であり、図２は、その動作
を説明するタイミング図である。ここで、装置に入力さ
れる画像データＤは、例えば、光の三原色の補色（Ｙ
ｅ：イエロー、Ｍｇ：マゼンタ、Ｃｙ：シアン）からな
るストライプフィルタが装着されたイメージセンサから
得られるものであり、３種類の補色成分が繰り返される
ものとする。1 is a block diagram showing the configuration of an image data processing apparatus of the present invention, and FIG. 2 is a timing chart for explaining its operation. Here, the image data D input to the device is, for example, a complementary color (Y
It is obtained from an image sensor equipped with a stripe filter composed of e: yellow, Mg: magenta, and Cy: cyan), and three types of complementary color components are repeated.

【００２１】色分離回路２１は、１画素単位で入力され
る画像データＤを色成分毎に振り分け、Ｙｅ、Ｍｇ、Ｃ
ｙに対応する補色データＣ[Ye]、Ｃ[Mg]、Ｃ[Cy]を生成
する。即ち、画像データＤでは、各補色成分が、例え
ば、Ｙｅ、Ｍｇ、Ｃｙの順に１画素単位で繰り返される
ため、一定の順序で３つに振り分けることで、各補色成
分を表す補色データＣ[Ye]、Ｃ[Mg]、Ｃ[Cy]が生成され
る。第１〜第３のラッチ回路２２ａ〜２２ｃは、色分離
回路２１に対して並列に接続され、色分離回路２１から
入力される補色データＣ[Ye]、Ｃ[Mg]、Ｃ[Cy]をそれぞ
れラッチし、色分離回路２１から次のデータが出力され
るまでラッチしたデータを繰り返し出力する。画像デー
タＤを３つに分離して得られる補色データＣ[Ye]、Ｃ[M
g]、Ｃ[Cy]の場合、データ量が画像データＤの１／３で
あり、それぞれ３画素毎に１回更新されるため、連続す
る３画素は同じデータで表されることになる。The color separation circuit 21 distributes the image data D input in units of one pixel for each color component, and Ye, Mg, C
Complementary color data C [Ye], C [Mg], C [Cy] corresponding to y is generated. That is, in the image data D, since each complementary color component is repeated in the order of, for example, Ye, Mg, and Cy in a unit of one pixel, the complementary color data C [Ye representing each complementary color component is divided into three in a fixed order. ], C [Mg], and C [Cy] are generated. The first to third latch circuits 22a to 22c are connected in parallel to the color separation circuit 21 and receive the complementary color data C [Ye], C [Mg], C [Cy] input from the color separation circuit 21. Each is latched, and the latched data is repeatedly output until the next data is output from the color separation circuit 21. Complementary color data C [Ye], C [M obtained by separating the image data D into three
In the case of g] and C [Cy], the data amount is ⅓ of the image data D and is updated once every three pixels, so that three consecutive pixels are represented by the same data.

【００２２】第１の乗算回路２３ａは、第１及び第２の
ラッチ回路２２ａ、２２ｂに接続され、各ラッチ回路２
２ａ、２２ｂから得られる補色データＣ[Ye]、Ｃ[Mg]を
乗算して、第１の積Ｐ[r]を生成する。そして、第２の
乗算回路２３ｂは、第１及び第３のラッチ回路２２ａ、
２２ｃに接続され、各ラッチ回路２２ａ、２２ｃから得
られる補色データＣ[Ye]、Ｃ[Cy]を乗算して、第２の積
Ｐ[g]を生成する。さらに、第３の乗算回路２３ｃは、
第２及び第３のラッチ回路２２ｂ、２２ｃに接続され、
各ラッチ回路２２ｂ、２２ｃから得られる補色データＣ
[Mg]、Ｃ[Cy]を乗算して、第３の積Ｐ[b]を生成する。
第１〜第３の開平回路２４ａ〜２４ｃは、それぞれ第１
〜第３の乗算回路２３ａ〜２３ｃに接続され、各乗算回
路２３ａ〜２３ｃから入力される第１〜第３の積Ｐ
[r]、Ｐ[g]、Ｐ[b]の平方根を算出し、第１〜第３の根
Ｐ[R]、Ｐ[G]、Ｐ[B]を出力する。これら第１〜第３の
根Ｐ[R]、Ｐ[G]、Ｐ[B]は、そのまま、光の三原色に対
応する３種類の原色データとしてホワイトバランス回路
２５へ供給される。The first multiplication circuit 23a is connected to the first and second latch circuits 22a and 22b, and each latch circuit 2
Complementary color data C [Ye] and C [Mg] obtained from 2a and 22b are multiplied to generate a first product P [r]. Then, the second multiplication circuit 23b includes the first and third latch circuits 22a,
22c is connected, and the complementary color data C [Ye] and C [Cy] obtained from the latch circuits 22a and 22c are multiplied to generate a second product P [g]. Furthermore, the third multiplication circuit 23c
Connected to the second and third latch circuits 22b and 22c,
Complementary color data C obtained from each latch circuit 22b, 22c
Multiply [Mg] and C [Cy] to generate a third product P [b].
The first to third square root circuits 24a to 24c are respectively the first
~ First to third products P connected to the third multiplication circuits 23a to 23c and input from the respective multiplication circuits 23a to 23c
The square roots of [r], P [g], and P [b] are calculated, and the first to third roots P [R], P [G], and P [B] are output. The first to third roots P [R], P [G], P [B] are directly supplied to the white balance circuit 25 as three types of primary color data corresponding to the three primary colors of light.

【００２３】ホワイトバランス制御回路２５は、第１〜
第３の開平回路２４ａ〜２４ｃから入力される原色デー
タＰ[R]、Ｐ[B]、Ｐ[G]に対して、各色毎に設定される
固有のゲインを与えて各色のバランスを調整し、白い被
写体が再生画面上で同じように白く再生されるようにす
る。そして、色差マトリクス回路２６は、ホワイトバラ
ンス制御回路２５から入力される原色データＰ[R]、Ｐ
[B]、Ｐ[G]に対して色差データＵ、Ｖを生成する。この
ホワイトバランス制御回路２５及び色差マトリクス回路
２６については、図９に示すホワイトバランス制御回路
１３及び色差マトリクス回路１４と同一のものである。The white balance control circuit 25 includes
A unique gain set for each color is given to the primary color data P [R], P [B], P [G] input from the third square root circuits 24a to 24c to adjust the balance of each color. , Make sure that the white subject is reproduced as white on the playback screen. Then, the color difference matrix circuit 26 receives the primary color data P [R], P [P] input from the white balance control circuit 25.
Color difference data U and V are generated for [B] and P [G]. The white balance control circuit 25 and the color difference matrix circuit 26 are the same as the white balance control circuit 13 and the color difference matrix circuit 14 shown in FIG.

【００２４】ここで、本発明の画像データの処理方法に
ついて説明する。The image data processing method of the present invention will now be described.

【００２５】図３は、光の三原色とそれらの補色とに対
応付けられたカラーフィルタの分光特性を示す図であ
り、図４は、本発明の画像データの処理方法によって再
現された各色成分のカラーベクトル図（実測値）であ
る。FIG. 3 is a diagram showing the spectral characteristics of the color filters associated with the three primary colors of light and their complementary colors, and FIG. 4 is a graph of each color component reproduced by the image data processing method of the present invention. It is a color vector diagram (actual measurement value).

【００２６】一般に、光の三原色（Ｒ：レッド、Ｇ：グ
リーン、Ｂ：ブルー）に対応するカラーフィルタは、図
３の波線に示すような分光特性を示す。Ｒフィルタは、
波長の長い赤色の光に対応する部分で透過率が極大値を
示し、赤色よりも波長の短い光に対しては透過率が低下
する。逆に、Ｂフィルタは、波長の短い青色の光に対応
する部分で透過率が極大値を示し、青色よりも波長の長
い光に対しては透過率が低下する。そして、Ｇフィルタ
は、ＲフィルタとＧフィルタとの中間の特性を示す。Generally, a color filter corresponding to the three primary colors of light (R: red, G: green, B: blue) exhibits spectral characteristics as shown by the broken line in FIG. The R filter is
The transmittance shows a maximum value in a portion corresponding to red light having a long wavelength, and the transmittance decreases for light having a wavelength shorter than red. On the contrary, the B filter has a maximum transmittance in a portion corresponding to blue light having a short wavelength, and has a low transmittance for light having a wavelength longer than blue. Then, the G filter exhibits an intermediate characteristic between the R filter and the G filter.

【００２７】これに対して、Ｒ、Ｇ、Ｂの補色（Ｙｅ、
Ｍｇ、Ｃｙ）に対応するフィルタは、図３の実線に示す
ような分光特性を示す。即ち、Ｒの補色となるＣｙフィ
ルタは、Ｒフィルタと相反する特性を示し、赤色の光に
対応する部分を除いた短波長側で透過率が高くなる。ま
た、Ｂの補色となるＹｅフィルタは、Ｂフィルタと相反
する特性を示し、青色の光に対応する部分を除いた長波
長側で透過率が高くなる。そして、Ｇの補色となるＭｇ
フィルタは、緑色の光に対応する部分を除いて透過率が
高くなる。On the other hand, the complementary colors of R, G and B (Ye,
The filter corresponding to Mg, Cy) exhibits a spectral characteristic as shown by the solid line in FIG. That is, the Cy filter, which is a complementary color of R, exhibits characteristics that are contradictory to those of the R filter, and has a high transmittance on the short wavelength side excluding the portion corresponding to red light. In addition, the Ye filter, which is a complementary color of B, exhibits characteristics contradictory to the B filter, and has a high transmittance on the long wavelength side excluding the portion corresponding to blue light. And Mg that is a complementary color of G
The filter has a high transmittance except for a portion corresponding to green light.

【００２８】ここで、Ｙｅフィルタを透過した光に応じ
て得られたＹｅ成分と、Ｍｇフィルタを透過した光に応
じて得られたＭｇ成分とを乗算すると、両成分に含まれ
ているＲ成分が強調され、一方の成分にしか含まれない
Ｂ成分及びＧ成分は減衰される。同様に、Ｍｇフィルタ
を透過した光に応じて得られたＭｇ成分と、Ｃｙフィル
タを透過した光に応じて得られたＣｙ成分とを乗算する
ことにより、両成分に含まれているＢ成分が強調され、
一方の成分にしか含まれないＧ成分及びＲ成分は減衰さ
れる。また、Ｃｙフィルタを透過した光に応じて得られ
たＣｙ成分と、Ｙｅフィルタを透過した光に応じて得ら
れたＹｅ成分とを乗算することにより、両成分に含まれ
ているＧ成分が強調され、一方の成分にしか含まれない
Ｂ成分及びＲ成分は減衰される。このようにして得られ
る各補色成分の積は、特定の原色成分に対応付けられる
が、補色成分の乗算により、実際の原色成分に対しては
二乗倍の値として表される。そこで、各積の平方根をと
ることにより、各原色成分を近似的に表すことができ
る。When the Ye component obtained according to the light transmitted through the Ye filter is multiplied by the Mg component obtained according to the light transmitted through the Mg filter, the R component contained in both components is multiplied. Is emphasized, and the B and G components included in only one component are attenuated. Similarly, by multiplying the Mg component obtained according to the light transmitted through the Mg filter and the Cy component obtained according to the light transmitted through the Cy filter, the B component contained in both components is calculated. Emphasized,
The G and R components included in only one component are attenuated. Further, by multiplying the Cy component obtained according to the light transmitted through the Cy filter and the Ye component obtained according to the light transmitted through the Ye filter, the G component included in both components is emphasized. The B and R components included in only one component are attenuated. The product of each complementary color component obtained in this way is associated with a specific primary color component, but is expressed as a squared value with respect to the actual primary color component by multiplication of the complementary color components. Therefore, by taking the square root of each product, each primary color component can be approximately represented.

【００２９】ここで、補色系のカラーフィルタを装着し
たイメージセンサによって、光の三原色（Ｒ、Ｇ、Ｂ）
及びそれらの補色（Ｙｅ、Ｍｇ、Ｃｙ）の６色からなる
カラーバーを撮像して得られる出力信号に対し、上述の
処理方法を施して生成された画像信号を測定したカラー
ベクトルは、図４（ａ）に示す結果となった。同様のカ
ラーバーを撮像して得られる出力信号に対し、図９に示
す従来の処理方法を施して生成された画像信号を測定し
たカラーベクトルは、図４（ｂ）に示すとおりである。
尚、図４（ａ）、（ｂ）では、横軸がＢ−Ｙ（Ｕ）、縦
軸がＲ−Ｙ（Ｖ）をそれぞれ示し、図中の６カ所の○
は、原色及び補色の理想位置を表している。それぞれの
結果を比較すると、本発明の処理方法による画像信号の
方が、図中に示した各色成分の理想位置にかたまってい
ることが確認できる。Here, the three primary colors of light (R, G, B) are detected by an image sensor equipped with a complementary color filter.
And a color vector obtained by measuring an image signal generated by applying the above-described processing method to an output signal obtained by imaging a color bar consisting of six colors of their complementary colors (Ye, Mg, Cy) is shown in FIG. The result is shown in (a). A color vector obtained by measuring an image signal generated by applying the conventional processing method shown in FIG. 9 to an output signal obtained by imaging a similar color bar is as shown in FIG. 4B.
In FIGS. 4A and 4B, the horizontal axis represents BY (U) and the vertical axis represents RY (V), and the six circles in FIG.
Indicates the ideal position of the primary color and the complementary color. By comparing the respective results, it can be confirmed that the image signal obtained by the processing method of the present invention is concentrated at the ideal position of each color component shown in the drawing.

【００３０】以上の処理方法においては、減算処理を用
いていないため、各カラーフィルタの分光特性にばらつ
きが生じたとしても、色演算処理の過程で負の値が生じ
ることはない。In the above processing method, since the subtraction processing is not used, even if the spectral characteristics of each color filter vary, a negative value does not occur in the process of the color calculation processing.

【００３１】図５は、本発明の処理方法を採用するのに
適したモザイク型のカラーフィルタの構成を示す平面図
であり、図６は、そのカラーフィルタを装着したイメー
ジセンサから得られた画像信号を各補色成分に分離する
分離部の構成を示すブロック図である。この分離部は、
図１に示す処理装置において、色分離回路２１及び第１
〜第３のラッチ回路２２ａ〜２２ｃに置き換えて用いる
ものである。FIG. 5 is a plan view showing the structure of a mosaic type color filter suitable for adopting the processing method of the present invention, and FIG. 6 is an image obtained from an image sensor equipped with the color filter. It is a block diagram showing the composition of the separation part which separates a signal into each complementary color component. This separation is
In the processing apparatus shown in FIG. 1, the color separation circuit 21 and the first
~ Used by replacing with the third latch circuits 22a to 22c.

【００３２】カラーフィルタは、各セグメントがＹｅ、
Ｍｇ、Ｃｙ及びＧの各成分に対応付けられている。この
うち、Ｍｇ成分及びＧ成分が奇数行に交互に配置され、
Ｙｅ成分及びＣｙ成分が偶数行に交互に配置される。こ
こで、Ｙｅ、Ｍｇ、Ｃｙの各成分は、色情報の生成に加
えて、輝度情報の生成に用いられ、Ｇ成分は、輝度情報
の生成のみに用いられる。このようなカラーフィルタを
装着したイメージセンサでは、奇数行から読み出された
画像信号においてＭｇ成分とＧ成分とが交互に連続し、
偶数行から読み出された画像信号においてＹｅ成分とＣ
ｙ成分とが交互に連続することになる。In the color filter, each segment is Ye,
It is associated with each component of Mg, Cy and G. Of these, the Mg component and the G component are alternately arranged in odd rows,
The Ye component and the Cy component are arranged alternately in even rows. Here, each component of Ye, Mg, and Cy is used for generation of luminance information in addition to generation of color information, and the G component is used only for generation of luminance information. In the image sensor equipped with such a color filter, the Mg component and the G component are alternately continuous in the image signal read from the odd-numbered row,
Ye component and C in the image signal read from the even row
The y component and the y component are alternately continuous.

【００３３】分離部は、第１〜第３のラインメモリ３１
ａ〜３１ｃ、フィルタ演算回路３２及びセレクタ回路３
３より構成される。第１〜第３のラインメモリ３１ａ〜
３１ｃは、直列に接続され、画像データＤを３行分記憶
すると共に、各行の画像データＤ[L1]、Ｄ[L2]、Ｄ[L3]
を同時に読み出してフィルタ演算回路３２へ供給できる
できるように構成される。The separating unit includes the first to third line memories 31.
a to 31c, filter operation circuit 32, and selector circuit 3
It consists of 3. First to third line memories 31a to
The reference numeral 31c is connected in series and stores the image data D for three rows, and the image data D [L1], D [L2], D [L3] of each row.
Can be simultaneously read and supplied to the filter arithmetic circuit 32.

【００３４】フィルタ演算回路３２は、第１〜第３のラ
インメモリ３１ａ〜３１ｃから入力される画像データＤ
[L1]、Ｄ[L2]、Ｄ[L3]を３列分保持し、３行×３列単位
のフィルタ演算によって、カラーフィルタの各セグメン
トに対応する色成分データＣ[1]、Ｃ[2]、Ｃ[3]、Ｃ[4]
を生成する。例えば、図５において、波線に示す９画素
に対しては、中心の画素を目標画素とし、目標画素のＭ
ｇ成分は、そのまま色成分データＣ[1]として出力され
る。そして、目標画素の左右に位置するＧ成分の２画素
から、それらの平均値が色成分データＣ[2]として出力
され、目標画素の上下に位置するＹｅ成分の２画素か
ら、それらの平均値が色成分データＣ[3]として出力さ
れる。さらに、４角に位置するＣｙ成分の４画素は、そ
れらの平均値が色成分データＣ[4]として出力される。
このような色成分データＣ[1]、Ｃ[2]、Ｃ[3]、Ｃ[4]と
各色成分Ｙｅ、Ｍｇ、Ｃｙ、Ｇとの対応関係は、目標画
素がずれる毎に切り換えられる。The filter arithmetic circuit 32 is provided with the image data D input from the first to third line memories 31a to 31c.
[L1], D [L2], and D [L3] are held for three columns, and the color component data C [1], C [2 corresponding to each segment of the color filter are obtained by the filter operation in units of 3 rows × 3 columns. ], C [3], C [4]
To generate. For example, in FIG. 5, for the nine pixels indicated by the wavy line, the central pixel is set as the target pixel, and M
The g component is output as it is as the color component data C [1]. Then, the average value of the two G component pixels located on the left and right of the target pixel is output as color component data C [2], and the average value of the two pixels of the Ye component located above and below the target pixel is calculated. Is output as the color component data C [3]. Further, for the four pixels of the Cy component located at the four corners, their average value is output as the color component data C [4].
The correspondence relationship between the color component data C [1], C [2], C [3], C [4] and the color components Ye, Mg, Cy, G is switched each time the target pixel is displaced.

【００３５】セレクタ回路３３は、色成分データＣ
[1]、Ｃ[2]、Ｃ[3]、Ｃ[4]の内、常にＹｅ、Ｍｇ及びＣ
ｙの各成分を表すものを選択し、補色データＣ[Ye]、Ｃ
[Mg]、Ｃ[Cy]として出力する。この選択動作は、目標画
素の色成分に応じて、４つのパターンが切り換えられ
る。従って、図１に示す第１〜第３のラッチ回路２２ａ
〜２ｃと同様に、全ての期間で欠落することのない３種
類の補色データＣ[Ye]、Ｃ[Mg]、Ｃ[Cy]が出力され、図
１に示す処理装置において第１〜第３の乗算回路２３ａ
〜２３ｃにそれぞれ入力される。このような分離部によ
れば、モザイク型のカラーフィルタにおいても、本願発
明の処理装置を適用することが可能になる。The selector circuit 33 uses the color component data C
Of [1], C [2], C [3], C [4], always Ye, Mg and C
The one representing each component of y is selected, and the complementary color data C [Ye], C
Output as [Mg] and C [Cy]. In this selection operation, four patterns are switched according to the color component of the target pixel. Therefore, the first to third latch circuits 22a shown in FIG.
3 to 2c, three types of complementary color data C [Ye], C [Mg], and C [Cy] that are not lost in all the periods are output, and the first to the third in the processing device shown in FIG. Multiplication circuit 23a
23 to 23c, respectively. With such a separating unit, the processing device of the present invention can be applied to a mosaic type color filter.

【００３６】以上の実施形態においては、イメージセン
サとしてＣＣＤを例示しているが、イメージセンサとし
ては、その他にＭＯＳセンサを用いることも可能であ
る。また、カラーフィルタの構成としては、少なくとも
３種類の補色（Ｙｅ、Ｍｇ、Ｃｙ）を備えていれば適用
可能であり、その他の色成分と組み合わせることも可能
である。In the above embodiment, the CCD is used as an example of the image sensor, but it is also possible to use a MOS sensor as the image sensor. The color filter can be applied as long as it has at least three types of complementary colors (Ye, Mg, Cy), and can be combined with other color components.

【００３７】[0037]

【発明の効果】本発明によれば、補色成分から原色成分
を生成するための演算処理の過程で減算処理を用いてい
ないため、色成分毎の感度にばらつきが生じたとして
も、負の値が表れることはなく、擬信号の発生を防止す
ることができる。また、基準のカラーバーを撮像して得
られる画像信号を実際に測定したカラーベクトルが、減
算処理を用いて原色信号を生成する従来の方法と比較し
て、理想の値に近くなっており、色の再現性の向上が望
める。According to the present invention, since the subtraction process is not used in the process of generating the primary color component from the complementary color component, even if the sensitivity varies among the color components, a negative value is obtained. Does not appear, and the generation of pseudo signals can be prevented. Further, the color vector obtained by actually measuring the image signal obtained by imaging the reference color bar is closer to the ideal value as compared with the conventional method of generating the primary color signal by using the subtraction process. It can be expected to improve color reproducibility.

【図面の簡単な説明】[Brief description of drawings]

【図１】本発明の画像データ処理装置の構成を示すブロ
ック図である。FIG. 1 is a block diagram showing a configuration of an image data processing device of the present invention.

【図２】本発明の画像データ処理装置の動作を説明する
タイミング図である。FIG. 2 is a timing diagram illustrating the operation of the image data processing device of the present invention.

【図３】カラーフィルタの分光特性を示す図である。FIG. 3 is a diagram showing spectral characteristics of a color filter.

【図４】カラーバーに対応する画像信号を測定して得ら
れたカラーベクトル図である。FIG. 4 is a color vector diagram obtained by measuring an image signal corresponding to a color bar.

【図５】モザイク型カラーフィルタの一例を示す構成図
である。FIG. 5 is a configuration diagram showing an example of a mosaic type color filter.

【図６】モザイクフィルタに対応した色分離部の構成を
示すブロック図である。FIG. 6 is a block diagram showing a configuration of a color separation unit corresponding to a mosaic filter.

【図７】従来の固体撮像素子の構成を示すブロック図で
ある。FIG. 7 is a block diagram showing a configuration of a conventional solid-state image sensor.

【図８】モザイク型カラーフィルタの一例を示す構成図
である。FIG. 8 is a configuration diagram showing an example of a mosaic type color filter.

【図９】従来の画像データ処理装置の構成を示すブロッ
ク図である。FIG. 9 is a block diagram showing a configuration of a conventional image data processing device.

【図１０】従来の画像データ処理装置の動作を説明する
タイミング図である。FIG. 10 is a timing diagram illustrating the operation of the conventional image data processing device.

【符号の説明】[Explanation of symbols]

１ ＣＣＤイメージセンサ ２ アナログ処理回路 ３ Ａ／Ｄ変換回路 ４ デジタル処理回路 ５ 駆動回路 ６ タイミング制御回路 １１、２１ 色分離回路 １２ 色演算回路 １３、２５ ホワイトバランス制御回路 １４、２６ 色差マトリクス回路 １５ 輝度演算回路 １６ アパーチャ回路 ２２ａ〜２２ｃ ラッチ回路 ２３ａ〜２３ｃ 乗算回路 ２４ａ〜２４ｃ 開平回路 ３１ａ〜３１ｃ ラインメモリ ３２ フィルタ演算回路 ３３ セレクタ回路 1 CCD image sensor 2 analog processing circuit 3 A / D conversion circuit 4 Digital processing circuit 5 drive circuit 6 Timing control circuit 11, 21 color separation circuit 12-color arithmetic circuit 13, 25 White balance control circuit 14, 26 color difference matrix circuit 15 Luminance calculation circuit 16 Aperture circuit 22a to 22c Latch circuit 23a-23c Multiplier circuit 24a-24c Square root circuit 31a to 31c line memory 32 filter operation circuit 33 Selector circuit

Claims (5)

(57)【特許請求の範囲】(57) [Claims] 【請求項１】 光の三原色の補色を表す第１乃至第３の
補色データから、光の三原色を表す第１乃至第３の原色
データを生成する画像データ処理方法であって、上記第
１の補色データと上記第２の補色データとの積の平方根
から第１の原色データを生成し、上記第１の補色データ
と上記第３の補色データとの積の平方根から第２の原色
データを生成すると共に、上記第２の補色データと上記
第３の補色データとの積の平方根から第３の原色データ
を生成することを特徴とする画像データの処理方法。1. An image data processing method for generating first to third primary color data representing the three primary colors of light from first to third complementary color data representing the complementary colors of the three primary colors of light. First primary color data is generated from a square root of a product of complementary color data and the second complementary color data, and second primary color data is generated from a square root of a product of the first complementary color data and the third complementary color data. In addition, the method for processing image data is characterized in that the third primary color data is generated from the square root of the product of the second complementary color data and the third complementary color data. 【請求項２】 上記第１、第２及び第３の補色データ
は、それぞれイエロー、マゼンタ及びシアンの各色を表
し、上記第１、第２及び第３の原色データは、それぞれ
レッド、グリーン及びブルーの各色を表すことを特徴と
する請求項１に記載の画像データ処理方法。2. The first, second and third complementary color data respectively represent yellow, magenta and cyan colors, and the first, second and third primary color data respectively are red, green and blue. The image data processing method according to claim 1, wherein each color is represented. 【請求項３】 光の三原色に対する補色を表す第１乃至
第３の補色成分が所定の規則で繰り返される画像データ
を取り込み、光の三原色を表す第１乃至第３の原色デー
タを生成する画像データ処理装置であって、上記画像デ
ータを成分別に分離して第１乃至第３の補色成分データ
を生成する分離回路と、上記第１乃至第３の色成分デー
タの内の２つを互いに乗算して第１乃至第３の積を生成
する乗算回路と、上記第１乃至第３の積の平方根を算出
して第１乃至第３の根を生成する開平回路と、を備え、
上記第１乃至第３の根を上記第１乃至第３の原色データ
として扱うことを特徴とする画像データ処理装置。3. Image data for generating first to third primary color data representing the three primary colors of light by taking in image data in which first to third complementary color components representing complementary colors of the three primary colors of light are repeated according to a predetermined rule. A processing device, wherein a separation circuit that separates the image data into components to generate first to third complementary color component data and two of the first to third color component data are multiplied by each other. A multiplication circuit for generating first to third products and a square root circuit for calculating square roots of the first to third products to generate first to third roots,
An image data processing apparatus, wherein the first to third roots are treated as the first to third primary color data. 【請求項４】 上記分離回路は、各成分毎に分離された
第１乃至第３の補色成分データをそれぞれ所定期間保持
し、それぞれの成分が欠落する期間に繰り返し出力して
補間するフィルタ回路を含むことを特徴とする請求項３
に記載の画像データ処理装置。4. The filter circuit for holding the first to third complementary color component data separated for each component for a predetermined period, and repeatedly outputting and interpolating each component during the period when each component is missing. 4. Including
The image data processing device according to. 【請求項５】 上記第１乃至第３の根を光の三原色を表
す第１乃至第３の原色データと見なし、それぞれ所定の
割合で合成して第１及び第２の色差データを生成するマ
トリクス回路をさらに備えたことを特徴とする請求項４
に記載の画像データ処理装置。5. A matrix that regards the first to third roots as first to third primary color data representing the three primary colors of light and synthesizes them at a predetermined ratio to generate first and second color difference data. The circuit according to claim 4, further comprising a circuit.
The image data processing device according to.
JP33417798A 1998-11-25 1998-11-25 Image data processing method and image data processing device Expired - Fee Related JP3408169B2 (en)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP33417798A JP3408169B2 (en) 1998-11-25 1998-11-25 Image data processing method and image data processing device
TW088116708A TW453124B (en) 1998-11-25 1999-09-29 Method and device for processing graphic data
US09/448,028 US6674465B1 (en) 1998-11-25 1999-11-23 Image processing apparatus which does not generate a false signal even if unevenness of spectral sensitivities of the color filter occurs
KR10-1999-0052330A KR100376957B1 (en) 1998-11-25 1999-11-24 A apparatus and a method for processing image data

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP33417798A JP3408169B2 (en) 1998-11-25 1998-11-25 Image data processing method and image data processing device

Publications (2)

Publication Number Publication Date
JP2000165897A JP2000165897A (en) 2000-06-16
JP3408169B2 true JP3408169B2 (en) 2003-05-19

Family

ID=18274406

Family Applications (1)

Application Number Title Priority Date Filing Date
JP33417798A Expired - Fee Related JP3408169B2 (en) 1998-11-25 1998-11-25 Image data processing method and image data processing device

Country Status (4)

Country Link
US (1) US6674465B1 (en)
JP (1) JP3408169B2 (en)
KR (1) KR100376957B1 (en)
TW (1) TW453124B (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7330209B2 (en) * 1999-12-20 2008-02-12 Texas Instruments Incorporated Digital still camera system and complementary-color-filtered array interpolation method

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4926247A (en) * 1986-10-15 1990-05-15 Olympus Optical Co., Ltd. Color imaging apparatus including a means for electronically non-linearly expanding and compressing dynamic range of an image signal
US5130786A (en) * 1989-09-12 1992-07-14 Image Data Corporation Color image compression processing with compensation
GB9001429D0 (en) * 1990-01-22 1990-03-21 British Broadcasting Corp Improvements in television
JP3854662B2 (en) * 1996-06-12 2006-12-06 キヤノン株式会社 Imaging device
JP3443344B2 (en) * 1998-12-18 2003-09-02 三洋電機株式会社 Image data processing method and image data processing device

Also Published As

Publication number Publication date
KR100376957B1 (en) 2003-03-26
JP2000165897A (en) 2000-06-16
TW453124B (en) 2001-09-01
KR20000035633A (en) 2000-06-26
US6674465B1 (en) 2004-01-06

Similar Documents

Publication Publication Date Title
US5734424A (en) Image pickup apparatus capable of providing moving video signal and still video signal
JP4212134B2 (en) Image signal processing device
JP4641675B2 (en) Image signal processing device
JPH10234047A (en) Single ccd color camera
JP3991011B2 (en) Image signal processing device
EP0520759A2 (en) Solid state camera apparatus
US6900838B1 (en) Method of processing image signal from solid-state imaging device, image signal processing apparatus, image signal generating apparatus and computer program product for image signal processing method
JPH06133321A (en) Ccd image pickup device
JPH11262022A (en) Single-board type color camera
JP3408169B2 (en) Image data processing method and image data processing device
JP3443344B2 (en) Image data processing method and image data processing device
JP3895878B2 (en) Image data processing device
JP2920380B2 (en) Color signal processing device
JP2004350319A (en) Image signal processing method, image signal processing apparatus using the method, and recording medium with program code representing procedures of the method recorded thereon
JP2744261B2 (en) Color signal processing device
JP3459538B2 (en) Color signal processing circuit for single-chip color camera
JPH05916B2 (en)
JP2922911B2 (en) Solid color camera
JP3213527B2 (en) Image information processing device
JP3490832B2 (en) Imaging device
JP2007074748A (en) Image signal processing apparatus
KR0137232B1 (en) Still digital camera
JPS59158693A (en) Image pickup device
JPH09187019A (en) Image pickup device
JP2000050288A (en) Video signal processing method and image-pickup device

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090314

Year of fee payment: 6

LAPS Cancellation because of no payment of annual fees