JP2001045515A - Electronic image pickup device and white balance adjustment method - Google Patents

Abstract

PROBLEM TO BE SOLVED: To obtain a natural picture even in the case of photographing a moving picture by an electronic image pickup device that does not quickly responds to a change in the white balance after the white balance is once adjusted while quickly tracing a large change caused in the white balance. SOLUTION: The white balance adjustment method employs a CCD 12 that applies photoelectric conversion to an optical image being a photographing object into image information by each color component via at least 3-color filters and stores the image information to a DRAM 20, a sample-hold circuit 15, an A/D converter 16, a color process circuit 17, a DMA controller 18, a DRAM interface 19 and a CPU 21 that obtains a mean value of the image information by each color component stored in the DRAM 20, obtains a coefficient of the image information by each color component with respect to the obtained mean value of the image information by each of other color components through the use of the obtained mean value of the image information by each color component on the basis of the mean value of the image information of the color component closest to the luminance signal and calculates an adjustment value of the white balance on the basis of the obtained coefficients.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【０００１】[0001]

【発明の属する技術分野】本発明は、ＣＣＤ等の撮像素
子を用いたデジタルカメラなどの電子撮像装置及びこの
装置に適用されるホワイトバランス調整方法に関する。[0001] 1. Field of the Invention [0002] The present invention relates to an electronic image pickup apparatus such as a digital camera using an image pickup device such as a CCD, and a white balance adjusting method applied to this apparatus.

【０００２】[0002]

【従来の技術】一般に、ＣＣＤ等の撮像素子を用いたビ
デオカメラやデジタルカメラなどではホワイトバランス
調整を自動で行なっている。この自動ホワイトバランス
調整は、基本的に１画面分の画像データについて、全て
の画像データあるいは白と見做す範囲の画像データのＲ
ＧＢ各色成分毎の全画素の総和値、あるいは１画素当た
りの平均値を求め、各色成分毎の該値が等しいものとな
るように、Ｇ成分の値を基準として固定化し、他のＲ成
分及びＢ成分の画素信号に対する増幅器での各ゲインを
調整するものである。2. Description of the Related Art Generally, in a video camera, a digital camera and the like using an image pickup device such as a CCD, a white balance is automatically adjusted. This automatic white balance adjustment is basically performed for all image data or image data in a range regarded as white for image data for one screen.
The sum of all the pixels for each of the GB components or the average value for each pixel is obtained, and the values of the G component are fixed so that the values for each of the color components are equal. It adjusts each gain of the amplifier for the B component pixel signal.

【０００３】図５はこの自動ホワイトバランス調整に係
る一連の処理工程を例示するもので、その当初には、対
象となる１枚分の画像データを、データ圧縮を行なう前
のビットマップファイルの状態で記憶しているバッファ
メモリとしてのＤＲＡＭから読出し（ステップＡ０
１）、ＲＧＢの各色成分毎に全画素データの総和から１
画素当たりの平均値（図及び以下文中では「ΣＲ（ａｖ
ｅ）」「ΣＧ（ａｖｅ）」「ΣＢ（ａｖｅ）」と示す）
を算出する（ステップＡ０２）。FIG. 5 shows an example of a series of processing steps relating to the automatic white balance adjustment. Initially, one target image data is converted into a state of a bitmap file before data compression. Is read from the DRAM as the buffer memory stored at step A0 (step A0).
1) from the sum of all pixel data for each of the RGB color components
The average value per pixel (in the figures and in the following text, "@R (av
e), "@G (ave)", "@B (ave)")
Is calculated (step A02).

【０００４】次いで、Ｒ成分の上記平均値「ΣＲ（ａｖ
ｅ）」がＧ成分の同値「ΣＧ（ａｖｅ）」と等しいか否
かにより、Ｒ成分のホワイトバランス調整が必要である
か否かを判断する（ステップＡ０３）。Next, the above-mentioned average value of the R component “ΣR (av
"e)" is equal to the G component equivalent value "$ G (ave)" to determine whether or not white balance adjustment of the R component is necessary (step A03).

【０００５】ここで、両値が等しくなく、調整が必要で
あると判断した場合にのみ、Ｇ成分の同値に対する大小
に応じて、撮像素子であるＣＣＤの出力するアナログ値
の画像データを増幅する増幅器のための特にＲ成分のゲ
インを予め設定されている定数分だけ加減調整する（ス
テップＡ０４）。Here, only when it is determined that the two values are not equal and adjustment is necessary, the image data of the analog value output from the CCD, which is the image sensor, is amplified according to the magnitude of the same value of the G component. In particular, the gain of the R component for the amplifier is adjusted by a preset constant (step A04).

【０００６】次いで、同様にＢ成分の上記平均値「ΣＢ
（ａｖｅ）」がＧ成分の同値「ΣＧ（ａｖｅ）」と等し
いか否かにより、Ｂ成分のホワイトバランス調整が必要
であるか否かを判断する（ステップＡ０５）。Next, similarly, the average value of the B component “ΣB
(Ave) ”is equal to the G component equivalent value“ ΣG (ave) ”to determine whether or not white balance adjustment of the B component is necessary (step A05).

【０００７】ここで、両値が等しくなく、調整が必要で
あると判断した場合にのみ、Ｇ成分の同値に対する大小
に応じて、撮像素子であるＣＣＤの出力するアナログ値
の画像データを増幅する増幅器のための特にＢ成分のゲ
インを予め設定されている定数分だけ加減調整する（ス
テップＡ０６）。Here, only when it is determined that the two values are not equal and adjustment is necessary, the image data of the analog value output from the CCD as the image pickup element is amplified according to the magnitude of the same value of the G component. In particular, the gain of the B component for the amplifier is adjusted by a preset constant (step A06).

【０００８】その後、上記Ｒ，Ｂの各色成分のゲインを
調整することで全体のホワイトバランス調整のための処
理を終えたか否かを判断し（ステップＡ０７）、終えて
いないと判断した場合には再び上記ステップＡ０１から
の処理に戻る一方、終えたと判断すると、以上でこの一
連の処理を終了するものである。Thereafter, it is determined whether or not the processing for adjusting the overall white balance has been completed by adjusting the gain of each of the R and B color components (step A07). While returning to the processing from step A01 again, when it is determined that the processing has been completed, this series of processing is completed.

【０００９】上記処理において、Ｇ成分を基準とするの
は、Ｇ成分が輝度信号により近く、Ｒ成分、Ｂ成分に対
して相対的なレベルが高いために、調整により飽和して
しまう可能性が高いからである。In the above processing, the G component is used as a reference because the G component is closer to the luminance signal and has a higher level relative to the R component and the B component. Because it is expensive.

【００１０】[0010]

【発明が解決しようとする課題】しかしながら、上記の
ような処理工程を実施するデジタルカメラにあっては、
記録モード時に取込む被写体の画像が激しく変化する場
合が少なくない。そのため、被写体の変化に対してホワ
イトバランスを迅速に追従させないと、撮影者の望むシ
ャッタタイミングでホワイトバランス調整が間に合わ
ず、カメラの反応が遅いという印象を撮影者に与えてし
まうことになる。However, in a digital camera that performs the above-described processing steps,
In many cases, the image of the subject captured in the recording mode changes drastically. Therefore, if the white balance is not made to quickly follow the change in the subject, the white balance adjustment cannot be made in time at the shutter timing desired by the photographer, giving an impression to the photographer that the response of the camera is slow.

【００１１】一方で、一旦ホワイトバランスが適度に調
整された後に、被写体の変化に対して液晶ファインダに
表示される画像の色合いが大きく変わると、撮影者のシ
ャッタ操作の妨げになったり、同一の光源下で撮影され
た画像の色合いが被写体によって大きく異なってしまう
という不具合を生じる。On the other hand, once the white balance is appropriately adjusted and the color of the image displayed on the liquid crystal finder greatly changes in response to a change in the subject, it hinders the photographer from operating the shutter or causes the same. A problem arises in that the color of an image captured under a light source varies greatly depending on the subject.

【００１２】これに加えて、デジタルカメラの多機能化
が進み、動画撮影機能を搭載することを考えた場合、ホ
ワイトバランスを被写体の変化に対して敏感に追従させ
ると、得られる動画像は不自然なものとなる。[0012] In addition, when digital cameras have become more multifunctional and a moving image shooting function is considered, if the white balance is sensitive to changes in the subject, the resulting moving image will not be obtained. It becomes natural.

【００１３】本発明は上記のような実情に鑑みてなされ
たもので、その目的とするところは、ホワイトバランス
が大きく変化した場合にはこれに迅速に追従する反面、
一旦ホワイトバランスが調整された後はホワイトバラン
スの変化に対しても過敏に反応せず、動画撮影時にも自
然な画像を得ることが可能な電子撮像装置及びこの装置
に適用するホワイトバランス調整方法を提供することに
ある。The present invention has been made in view of the above-mentioned circumstances, and an object of the present invention is to quickly follow a large change in white balance.
Once the white balance is adjusted, an electronic imaging device that does not react sensitively to changes in the white balance and can obtain a natural image even when shooting a moving image, and a white balance adjustment method applied to this device. To provide.

【００１４】[0014]

【課題を解決するための手段】請求項１記載の発明は、
撮像対象となる光像を少なくとも３色の色フィルタを介
して各色成分毎の画像情報に光電変換する撮像素子と、
この撮像素子で得た各色成分毎の画像情報の平均値を求
める第１の演算手段と、この第１の演算手段で求めた各
色成分毎の画像情報の平均値を用い、最も輝度信号に近
い色成分の画像情報の平均値を基準として他の各色成分
毎の画像情報の平均値に対する係数を求める第２の演算
手段と、この第２の演算手段で求めた各係数によりホワ
イトバランスの調整値を算出する第３の演算手段とを具
備したことを特徴とする。According to the first aspect of the present invention,
An image sensor that photoelectrically converts an optical image to be imaged into image information for each color component through at least three color filters;
The first arithmetic means for obtaining the average value of the image information for each color component obtained by the image sensor, and the average value of the image information for each color component obtained by the first arithmetic means are used, and are closest to the luminance signal. A second calculating means for obtaining a coefficient for the average value of the image information for each of the other color components based on the average value of the image information of the color components; and a white balance adjustment value obtained by the respective coefficients obtained by the second calculating means. And a third calculating means for calculating

【００１５】このような構成とすれば、予め設定された
ステップ幅毎にホワイトバランスを調整して行くのでは
なく、最も輝度信号に近い色成分の画像情報の平均値に
対する他の色成分の画像情報の平均値の係数からホワイ
トバランスの調整値を算出することで一括してホワイト
バランスを調整することができるため、より短時間のう
ちに被写体の変化に対してホワイトバランスを追従させ
ることができる。With such a configuration, the white balance is not adjusted for each preset step width, but the image of the other color component is compared with the average value of the image information of the color component closest to the luminance signal. By calculating the white balance adjustment value from the coefficient of the average value of the information, the white balance can be adjusted collectively, so that the white balance can follow the change of the subject in a shorter time. .

【００１６】請求項２記載の発明は、上記請求項１記載
の発明において、上記第３の演算手段で算出したホワイ
トバランスの調整値に対して所定値を加減して微調整す
る第４の演算手段をさらに具備したことを特徴とする。According to a second aspect of the present invention, in the first aspect of the present invention, a fourth operation for finely adjusting the white balance adjustment value calculated by the third arithmetic means by adding or subtracting a predetermined value. It is characterized by further comprising means.

【００１７】このような構成とすれば、上記請求項１記
載の発明の作用に加えて、より正確なホワイトバランス
調整を行なうことができる。According to such a configuration, more accurate white balance adjustment can be performed in addition to the operation of the first aspect of the present invention.

【００１８】請求項３記載の発明は、上記請求項１記載
の発明において、上記第１の演算手段で求めた各色成分
毎の画像情報の平均値を用い、最も輝度信号に近い色成
分の画像情報の平均値を基準として他の各色成分毎の画
像情報の平均値に対する、上記第１の係数より調整幅の
小さい第２の係数を求める第５の演算手段と、この第５
の演算手段で求めた各第２の係数により第２のホワイト
バランスの調整値を算出する第６の演算手段とをさらに
具備したことを特徴とする。According to a third aspect of the present invention, in the first aspect of the present invention, an image of a color component closest to a luminance signal is used by using an average value of image information for each color component obtained by the first arithmetic means. A fifth calculating means for obtaining a second coefficient having a smaller adjustment width than the first coefficient with respect to the average value of the image information for each of the other color components based on the average value of the information;
And a sixth calculating means for calculating a second white balance adjustment value using each second coefficient obtained by the calculating means.

【００１９】このような構成とすれば、上記請求項１記
載の発明の作用に加えて、ホワイトバランスの粗調整後
に正確な調整値に収束するまでの画像での色合いの変化
を自然なものとすることができる。With such a configuration, in addition to the operation of the first aspect of the present invention, a change in the color tone of the image until the convergence to an accurate adjustment value after the coarse adjustment of the white balance is made natural. can do.

【００２０】請求項４記載の発明は、上記請求項１また
は２記載の発明において、上記撮像装置は自動露出機能
を有し、該自動露出機能により絞り値が変化した場合に
上記第２の演算手段で求めた各第１の係数により上記第
３の演算手段でホワイトバランスの調整値を算出するこ
とを特徴とする。According to a fourth aspect of the present invention, in the first or second aspect of the present invention, the image pickup apparatus has an automatic exposure function, and the second operation is performed when an aperture value is changed by the automatic exposure function. The white balance adjustment value is calculated by the third calculating means using each of the first coefficients obtained by the means.

【００２１】このような構成とすれば、上記請求項１ま
たは２記載の発明の作用に加えて、絞り値に変化が生じ
た際にのみ、上記第１の係数を用いたホワイトバランス
調整の基底となる値の演算をし直すこととなるので、絞
り値が変化しない状態では表示される被写体の画像の色
合いが変化してしまうことがなく、モニタ表示される画
像が極めて自然な違和感のないものとなる。With such a configuration, in addition to the effect of the first or second aspect of the present invention, the basis of the white balance adjustment using the first coefficient only when the aperture value changes. Is calculated again, so that the hue of the displayed image of the subject does not change in the state where the aperture value does not change, and the image displayed on the monitor does not have an extremely natural feeling of strangeness Becomes

【００２２】請求項５記載の発明は、撮像対象となる光
像を少なくとも３色の色フィルタを介して各色成分毎の
画像情報に光電変換する撮像素子で得た、各色成分毎の
画像情報の平均値を求める第１の演算工程と、この第１
の演算工程で求めた各色成分毎の画像情報の平均値を用
い、最も輝度信号に近い色成分の画像情報の平均値を基
準として他の各色成分毎の画像情報の平均値に対する第
１の係数を求める第２の演算工程と、この第２の演算工
程で求めた各第１の係数によりホワイトバランスの調整
値を算出する第３の演算工程とを有したことを特徴とす
る。According to a fifth aspect of the present invention, the image information of each color component obtained by an image sensor that photoelectrically converts an optical image to be imaged into image information of each color component through at least three color filters. A first calculating step for obtaining an average value;
Using the average value of the image information for each color component obtained in the calculation step, and using the average value of the image information of the color component closest to the luminance signal as a reference, the first coefficient for the average value of the image information for each of the other color components And a third calculation step of calculating a white balance adjustment value using each of the first coefficients obtained in the second calculation step.

【００２３】このような方法とすれば、予め設定された
ステップ幅毎にホワイトバランスを調整していくのでは
なく、最も輝度信号に近い色成分の画像情報の平均値に
対する他の色成分の画像情報の平均値の係数からホワイ
トバランスの調整値を算出することで一括してホワイト
バランスを調整することができるため、より短時間のう
ちに被写体の変化に対してホワイトバランスを追従させ
ることができる。With this method, the white balance is not adjusted for each preset step width, but the image of the other color component is compared with the average value of the image information of the color component closest to the luminance signal. By calculating the white balance adjustment value from the coefficient of the average value of the information, the white balance can be adjusted collectively, so that the white balance can follow the change of the subject in a shorter time. .

【００２４】請求項６記載の発明は、上記請求項５記載
の発明において、上記第３の演算工程で算出したホワイ
トバランスの調整値に対して所定値を加減して微調整す
る第４の演算工程をさらに具備したことを特徴とする。According to a sixth aspect of the present invention, in the fourth aspect of the present invention, a fourth operation of finely adjusting the white balance adjustment value calculated in the third operation step by adding or subtracting a predetermined value to or from the white balance adjustment value. The method further comprises a step.

【００２５】このような方法とすれば、上記請求項５記
載の発明の作用に加えて、より正確なホワイトバランス
調整を行なわせることができる。According to such a method, in addition to the effect of the fifth aspect of the invention, more accurate white balance adjustment can be performed.

【００２６】請求項７記載の発明は、上記請求項５記載
の発明において、上記第１の演算工程で求めた各色成分
毎の画像情報の平均値を用い、最も輝度信号に近い色成
分の画像情報の平均値を基準として他の各色成分毎の画
像情報の平均値に対する、上記第１の係数より調整幅の
小さい第２の係数を求める第５の演算工程と、この第５
の演算工程で求めた各第２の係数により第２のホワイト
バランスの調整値を算出する第６の演算工程とをさらに
具備したことを特徴とする。According to a seventh aspect of the present invention, in the fifth aspect of the present invention, an image of a color component closest to a luminance signal is used by using an average value of image information for each color component obtained in the first calculation step. A fifth calculation step of obtaining a second coefficient having a smaller adjustment width than the first coefficient with respect to the average value of the image information for each of the other color components based on the average value of the information;
And a sixth calculating step of calculating a second white balance adjustment value using each of the second coefficients obtained in the calculating step.

【００２７】このような方法とすれば、上記請求項５記
載の発明の作用に加えて、ホワイトバランスの粗調整後
に正確な調整値に収束するまでの画像での色合いの変化
を自然なものとさせることができる。According to this method, in addition to the effect of the fifth aspect of the present invention, the change in the color tone of the image until the convergence to the accurate adjustment value after the coarse adjustment of the white balance is made natural. Can be done.

【００２８】[0028]

【発明の実施の形態】（第１の実施の形態）以下本発明
をデジタルカメラに適用した場合の第１の実施の形態に
ついて図面を参照して説明する。DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS (First Embodiment) A first embodiment in which the present invention is applied to a digital camera will be described with reference to the drawings.

【００２９】図１はその回路構成を示すもので、１０が
デジタルカメラである。このデジタルカメラ１０は、記
録モードと再生モードとを設定可能であり、記録モード
の状態においては、レンズ１１の後方に配置された、原
色系（ＲＧＢ）のカラーフィルタを有するＣＣＤ１２
は、タイミング発生器（ＴＧ）１３、垂直ドライバ１４
によって走査駆動され、一定周期毎に光電変換出力を１
画面分出力する。FIG. 1 shows the circuit configuration, and reference numeral 10 denotes a digital camera. The digital camera 10 can set a recording mode and a reproduction mode. In the recording mode, a CCD 12 having a primary color (RGB) color filter disposed behind the lens 11 is provided in the recording mode.
Is a timing generator (TG) 13 and a vertical driver 14
Scanning drive, and the photoelectric conversion output is
Output for the screen.

【００３０】この光電変換出力は、アナログ値の信号の
状態で図示しない増幅器でＲＧＢの各色成分毎に適宜ゲ
イン調整された後に、サンプルホールド回路（Ｓ／Ｈ）
１５でサンプルホールドされ、Ａ／Ｄ変換器（Ａ／Ｄ）
１６でデジタルデータに変換され、カラープロセス回路
１７でカラープロセス処理が行なわれて、デジタル値の
輝度・色差マルチプレクス信号（ＹＵＶデータ）がＤＭ
Ａ（Ｄｉｒｅｃｔ Ｍｅｍｏｒｙ Ａｃｃｅｓｓ）コン
トローラ１８に出力される。This photoelectric conversion output is appropriately adjusted in gain for each of the R, G, and B color components by an amplifier (not shown) in a state of an analog value signal, and then output to a sample / hold circuit (S / H).
A / D converter (A / D) sampled and held at 15
The digital data is converted into digital data by a color processing circuit 17 and color processing is performed by a color processing circuit 17, and a luminance / color difference multiplex signal (YUV data) of a digital value is converted into a DM signal.
A (Direct Memory Access) A is output to the controller 18.

【００３１】ＤＭＡコントローラ１８は、カラープロセ
ス回路１７のＹＵＶデータ出力を、同じくカラープロセ
ス回路１７の同期信号、メモリ書込みイネーブル、クロ
ック出力を用いて一度ＤＭＡコントローラ１８内部のバ
ッファに書込み、ＤＲＡＭインタフェース（Ｉ／Ｆ）１
９を介してＤＲＡＭ２０にＤＭＡ転送を行なう。The DMA controller 18 once writes the YUV data output of the color process circuit 17 to a buffer inside the DMA controller 18 using the synchronization signal, memory write enable, and clock output of the color process circuit 17 as well, and the DRAM interface (I / F) 1
9 to the DRAM 20 via the DMA transfer.

【００３２】ＣＰＵ２１は、上記ＹＵＶデータのＤＲＡ
Ｍ２０へのＤＭＡ転送終了後に、このＹＵＶデータをＤ
ＲＡＭインタフェース１９を介してＤＲＡＭ２０より読
出し、ＶＲＡＭコントローラ２２を介してＶＲＡＭ２３
に書込む。The CPU 21 performs DRA of the YUV data.
After the DMA transfer to M20 is completed, this YUV data is
The data is read from the DRAM 20 via the RAM interface 19 and the VRAM 23 is read via the VRAM controller 22.
Write to.

【００３３】デジタルビデオエンコーダ（以下「ビデオ
エンコーダ」と略称する）２４は、上記ＹＵＶデータを
ＶＲＡＭコントローラ２２を介してＶＲＡＭ２３より定
期的に読出し、これらのデータを元にビデオ信号を発生
して表示部２５に出力する。A digital video encoder (hereinafter abbreviated as "video encoder") 24 periodically reads the YUV data from the VRAM 23 through the VRAM controller 22, generates a video signal based on the data, and displays the video signal. 25.

【００３４】この表示部２５は、例えばバックライト付
のカラー液晶表示パネルとその駆動回路とで構成され、
カメラの背面側に配設されて、記録モード時にはＥＶＦ
（Ｅｌｅｃｔｒｏｎｉｃ Ｖｉｅｗ Ｆｉｎｄｅｒ：電
子ビューファインダ）として機能するもので、ビデオエ
ンコーダ２４からのビデオ信号に基づいた表示を行なう
ことで、その時点でＣＣＤ１２から取込んでいる画像情
報に基づく画像を表示することとなる。The display section 25 is composed of, for example, a color liquid crystal display panel with a backlight and its driving circuit.
Located on the back side of the camera, EVF in recording mode
(Electronic View Finder), which displays an image based on the image information captured from the CCD 12 at that time by performing display based on the video signal from the video encoder 24. Become.

【００３５】そして、このように表示部２５にその時点
での画像がリアルタイムに表示されている状態で、記録
保存を行ないたいタイミングでキー入力部２６を構成す
るシャッタキーを操作すると、トリガ信号を発生する。
ＣＰＵ２１は、このトリガ信号に応じてその時点でＣＣ
Ｄ１２から取込んでいる１画面分のＹＵＶデータのＤＲ
ＡＭ２０へのＤＭＡ転送の終了後、直ちにＣＣＤ１２か
らのＤＲＡＭ２０への経路を停止し、記録保存の状態に
遷移する。When the shutter key constituting the key input unit 26 is operated at a timing when the user wants to perform recording and saving while the image at that time is displayed on the display unit 25 in real time, a trigger signal is generated. appear.
In response to the trigger signal, the CPU 21
DR of one screen of YUV data taken from D12
Immediately after the end of the DMA transfer to the AM 20, the path from the CCD 12 to the DRAM 20 is stopped, and the state transits to the state of recording and saving.

【００３６】この記録保存の状態では、ＣＰＵ２１がＤ
ＲＡＭ２０に書込まれている１フレーム分のＹＵＶデー
タをＤＲＡＭインタフェース１９を介してＹ，Ｃｂ，Ｃ
ｒの各コンポーネント毎に縦８画素×横８画素の基本ブ
ロックと呼称される単位で読出してＪＰＥＧ回路２７に
書込み、このＪＰＥＧ回路２７でＡＤＣＴ（Ａｄａｐｔ
ｉｖｅ Ｄｉｓｃｒｅｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓ
ｆｏｒｍ：適応離散コサイン変換）、エントロピ符号化
方式であるハフマン符号化等の処理により圧縮した符号
データを該ＪＰＥＧ回路２７から読出して、このデジタ
ルカメラ１０の記録媒体となる、不揮発性メモリである
フラッシュメモリ２８に書込む。In this recording and storage state, the CPU 21
The YUV data for one frame written in the RAM 20 is transferred to the Y, Cb, C
r is read out in units called a basic block of 8 pixels by 8 pixels for each component and written to the JPEG circuit 27, and the ADCC (Adapt
live Discrete Cosine Trans
form: Adaptive Discrete Cosine Transform), code data compressed by a process such as Huffman coding which is an entropy coding method is read out from the JPEG circuit 27, and a flash as a non-volatile memory serving as a recording medium of the digital camera 10. Write to memory 28.

【００３７】そして、１フレーム分のＹＵＶデータの圧
縮処理及びフラッシュメモリ２８への全圧縮データの書
込み終了に伴なって、ＣＰＵ２１は再度ＣＣＤ１２から
ＤＲＡＭ２０への経路を起動する。When the compression processing of one frame of YUV data and the writing of all the compressed data to the flash memory 28 are completed, the CPU 21 activates the path from the CCD 12 to the DRAM 20 again.

【００３８】なお、上記キー入力部２６は、上述したシ
ャッタキーの他に、記録（ＲＥＣ）モードと再生（ＰＬ
ＡＹ）モードとを切換える録／再モード切換えキー、画
像選択キー等から構成され、キー操作に伴なう信号は直
接ＣＰＵ２１へ送出される。The key input section 26 has a recording (REC) mode and a reproduction (PL) mode in addition to the shutter key.
An AY) mode is composed of a recording / reproducing mode switching key, an image selection key, and the like, and a signal accompanying the key operation is directly transmitted to the CPU 21.

【００３９】シャッタキーは、２段階の押圧操作を行な
うものとし、一般の撮影においては１段階目の半押し状
態で、ＡＦ（オートフォーカス）、ＡＥ（自動露光）、
及びＡＷＢ（自動ホワイトバランス調整）の各実行値を
ロックして撮影に備え、２段階目の全押し状態で、上述
したトリガ信号を出力しての撮影動作に随時移行するも
のである。The shutter key performs a two-stage pressing operation. In general photographing, AF (autofocus), AE (automatic exposure),
In addition, the execution values of AWB (automatic white balance adjustment) are locked to prepare for shooting, and in the second-step full-press state, the above-described trigger signal is output to shift to the shooting operation at any time.

【００４０】また、再生モードでは、ＣＰＵ２１はＣＣ
Ｄ１２からＤＲＡＭ２０への経路を停止し、キー入力部
２６の画像選択キー等の操作に応じてＣＰＵ２１がフラ
ッシュメモリ２８から特定の１フレーム分の符号データ
を読出してＪＰＥＧ回路２７に書込み、ＪＰＥＧ回路２
７で伸長処理を行なって得られた縦８画素×横８画素の
基本ブロック単位に、ＶＲＡＭコントローラ２２を介し
てＶＲＡＭ２３へ１フレーム分のＹＵＶデータを展開記
憶させる。すると、ビデオエンコーダ２４は、ＶＲＡＭ
２３に展開記憶されている１フレーム分のＹＵＶデータ
を元にビデオ信号を発生し、表示部２５で表示させる。In the reproduction mode, the CPU 21
The path from D12 to the DRAM 20 is stopped, and in response to an operation of an image selection key or the like of the key input unit 26, the CPU 21 reads out a specific one frame of code data from the flash memory 28 and writes it into the JPEG circuit 27, and the JPEG circuit 2
In step S7, one frame of YUV data is developed and stored in the VRAM 23 via the VRAM controller 22 in units of 8 × 8 basic blocks obtained by performing the expansion process. Then, the video encoder 24 converts the VRAM
A video signal is generated based on one frame of YUV data expanded and stored in the storage unit 23 and displayed on the display unit 25.

【００４１】次に、本実施の形態に係る記録モード時の
自動ホワイトバランス調整の動作について説明する。Next, the operation of the automatic white balance adjustment in the recording mode according to the present embodiment will be described.

【００４２】図２は主としてＣＰＵ２１の制御の下に実
行される自動ホワイトバランス調整の一連の処理工程を
例示するもので、その当初には、対象となる１枚分の画
像データを、データ圧縮を行なう前のビットマップファ
イルの状態で記憶しているバッファメモリとしてのＤＲ
ＡＭ２０から読出し（ステップＢ０１）、ＲＧＢの各色
成分毎に全画素データの総和から１画素当たりの平均値
（図及び以下文中では「ΣＲ（ａｖｅ）」「ΣＧ（ａｖ
ｅ）」「ΣＢ（ａｖｅ）」と示す）を算出する（ステッ
プＢ０２）。FIG. 2 exemplifies a series of processing steps of automatic white balance adjustment mainly executed under the control of the CPU 21. Initially, one image data to be processed is subjected to data compression. DR as buffer memory stored in the state of bitmap file before performing
The data is read out from the AM 20 (step B01), and for each of the RGB color components, the average value per pixel is calculated from the sum total of all the pixel data (in the figures and in the following text, "@R (ave)", "@G (av
e) ”(shown as“ ΣB (ave) ”) (step B02).

【００４３】次いで、後述するホワイトバランスの仮ロ
ック状態ではないことを確認した上で（ステップＢ０
３）、次の演算 （その時点でのＲゲイン）×（「ΣＧ（ａｖｅ）」／「ΣＲ（ａｖｅ）」） ‥‥(1) を実行し、得た値を新たなＲゲインとして設定する（ス
テップＢ０４）。Next, after confirming that the white balance is not in the temporarily locked state described later (step B0).
3) Then, the following calculation (R gain at that time) × (“ΣG (ave)” / “ΣR (ave)”) ‥‥ (1) is executed, and the obtained value is set as a new R gain. (Step B04).

【００４４】同様にして、次の演算 （その時点でのＢゲイン）×（「ΣＧ（ａｖｅ）」／「ΣＢ（ａｖｅ）」） ‥‥(2) を実行し、得た値を新たなＢゲインとして設定する（ス
テップＢ０５）。Similarly, the following calculation (B gain at that time) × (“ΣG (ave)” / “ΣB (ave)”) ‥‥ (2) is executed, and the obtained value is replaced with a new B value. The gain is set (step B05).

【００４５】次いで、上記式（１）中で用いた値 「ΣＧ（ａｖｅ）」／「ΣＲ（ａｖｅ）」 が概ね「１」であるか否かを判断し（ステップＢ０
６）、概ね「１」である場合には、さらに、上記式
（２）中で用いた値 「ΣＧ（ａｖｅ）」／「ΣＢ（ａｖｅ）」 も概ね「１」であるか否かを判断する（ステップＢ０
７）。Next, it is determined whether or not the value "$ G (ave)" / "$ R (ave)" used in the above equation (1) is approximately "1" (step B0).
6) If the value is approximately “1”, it is further determined whether the value “ΔG (ave)” / “ΔB (ave)” used in the above equation (2) is also approximately “1”. (Step B0
7).

【００４６】ここでも、概ね「１」であると判断する
と、上記「ΣＲ（ａｖｅ）」「ΣＧ（ａｖｅ）」「ΣＢ
（ａｖｅ）」の３値はそれぞれ略等しい状態となるの
で、概ねホワイトバランスがとれたものとして、ホワイ
トバランスの仮ロック状態とする（ステップＢ０８）。Here, if it is determined that the value is approximately “1”, the above-mentioned “$ R (ave)”, “$ G (ave)”, “$ B
Since the three values of “(ave)” are substantially equal, it is assumed that the white balance has been substantially obtained and the white balance is temporarily locked (step B08).

【００４７】また、上記ステップＢ０６あるいはＢ０７
でいずれかの値が「１」を大きく外れていると判断した
場合には、再び上記ステップＢ０１からの処理に戻る。
そして、ステップＢ０１〜Ｂ０７の処理を繰返し実行
し、Ｒゲイン及びＢゲインを順次可変設定していくこと
で、上記「ΣＲ（ａｖｅ）」「ΣＧ（ａｖｅ）」「ΣＢ
（ａｖｅ）」の３値がそれぞれ略等しい状態となったと
ステップＢ０７で判断すると、ステップＢ０８でホワイ
トバランスの仮ロック状態とする。Further, step B06 or B07
If it is determined that any of the values deviates greatly from "1", the process returns to the process from step B01 again.
Then, the processes of steps B01 to B07 are repeatedly executed, and the R gain and the B gain are sequentially and variably set, so that the above-mentioned “ΣR (ave)”, “ΣG (ave)”, “ΣB”
If it is determined in step B07 that the three values of “(ave)” have become substantially equal to each other, a temporary lock state of the white balance is set in step B08.

【００４８】その後、上記「ΣＲ（ａｖｅ）」と「ΣＧ
（ａｖｅ）」とが正確に等しいか否かにより、Ｒ成分の
微調整が必要であるか否かを判断する（ステップＢ０
９）。Thereafter, the "@R (ave)" and "@G
(Ave) ”is determined to be exactly equal or not to determine whether fine adjustment of the R component is necessary (step B0).
9).

【００４９】ここで、両値が正確には等しくなく、微調
整が必要であると判断した場合にのみ、Ｇ成分の同値に
対する大小に応じて、Ｒゲインを予め設定されている定
数分だけ加減調整する（ステップＢ１０）。Here, only when it is determined that the two values are not exactly equal and fine adjustment is required, the R gain is adjusted by a predetermined constant according to the magnitude of the G component with respect to the same value. Adjustment is performed (step B10).

【００５０】この時に用いる定数は、すでに概ねの調整
はなされており、微調整のために用いるものであるた
め、上記図５での説明で述べた定数に比してごく小さな
値となる。Since the constant used at this time has already been roughly adjusted and is used for fine adjustment, it has a very small value as compared with the constant described in FIG.

【００５１】その後、今度は上記「ΣＢ（ａｖｅ）」と
「ΣＧ（ａｖｅ）」とが正確に等しいか否かにより、Ｂ
成分の微調整も必要であるか否かを判断する（ステップ
Ｂ１１）。Then, this time, whether or not “$ B (ave)” and “$ G (ave)” are exactly equal,
It is determined whether or not fine adjustment of the components is also necessary (step B11).

【００５２】ここで、両値が正確には等しくなく、微調
整が必要であると判断した場合にのみ、Ｇ成分の同値に
対する大小に応じて、Ｂゲインを予め設定されている定
数分だけ加減調整する（ステップＢ１２）。この時に用
いる定数も、微調整のためのごく小さな値となる。Here, only when it is determined that the two values are not exactly equal and fine adjustment is necessary, the B gain is adjusted by a predetermined constant according to the magnitude of the same value of the G component. Adjustment is performed (step B12). The constant used at this time also becomes a very small value for fine adjustment.

【００５３】その後、上記Ｒ，Ｂの各ゲインを微調整す
ることで全体のホワイトバランス調整のための処理を終
えたか否かを判断し（ステップＢ１３）、終えていない
と判断した場合には再び上記ステップＢ０１からの処理
に戻る。Thereafter, it is determined whether or not the process for adjusting the overall white balance has been completed by finely adjusting the R and B gains (step B13). The process returns to the process from step B01.

【００５４】このとき、ホワイトバランスの仮ロック状
態を設定しているために、ステップＢ０３でこれを判断
してステップＢ０４〜Ｂ０８の処理は省略する。At this time, since the temporary lock state of the white balance has been set, this is determined in step B03, and the processing in steps B04 to B08 is omitted.

【００５５】したがって、ステップＢ０１〜Ｂ０３，Ｂ
０９〜Ｂ１３の処理を繰返し実行することで、「ΣＲ
（ａｖｅ）」「ΣＧ（ａｖｅ）」「ΣＢ（ａｖｅ）」の
３値が全て正確に等しい状態となると、ステップＢ１３
でこれを判断し、以上でこの図２の一連の処理を終了す
る。Therefore, steps B01 to B03, B
By repeatedly executing the processing from 09 to B13, “ΣR
When all three values of (ave), “$ G (ave)”, and “$ B (ave)” are exactly the same, step B13
Then, the series of processes in FIG. 2 is completed.

【００５６】このように、始めから予め設定されたステ
ップ幅毎にホワイトバランスを調整していくのではな
く、最も輝度信号に近い色成分であるＧ成分の１画素当
たりの平均値に対する他の色成分の画像情報の平均値の
係数からホワイトバランスの調整値を算出することで一
括してホワイトバランスを調整し、その後に微小な定数
で微調整するため、より短時間のうちに被写体の変化に
対してホワイトバランスを極めて正確に追従させること
ができる。As described above, instead of adjusting the white balance for each step width set in advance from the beginning, other colors for the average value per pixel of the G component which is the color component closest to the luminance signal are obtained. By calculating the white balance adjustment value from the coefficient of the average value of the component image information, the white balance is adjusted collectively, and then finely adjusted with a small constant. On the other hand, the white balance can be made to follow very accurately.

【００５７】また、「ΣＧ（ａｖｅ）」／「ΣＲ（ａｖ
ｅ）」及び「ΣＧ（ａｖｅ）」／「ΣＢ（ａｖｅ）」が
概ね「１」になった場合に、ホワイトバランスが概ねと
れたものとして仮ロックすることとしたが、「ΣＲ（ａ
ｖｅ）」／「ΣＧ（ａｖｅ）」あるいは「ΣＢ（ａｖ
ｅ）」／「ΣＧ（ａｖｅ）」が「１」を中心とする、あ
る値の範囲内に入った時点でホワイトバランスが概ねと
れたものしてもよいし、「ΣＲ（ａｖｅ）」−「ΣＧ
（ａｖｅ）」あるいは「ΣＢ（ａｖｅ）」−「ΣＧ（ａ
ｖｅ）」が「０」を中心するある値の範囲内に入った時
点でホワイトバランスが概ねとれたものしてもよい。Also, "@G (ave)" / "@ R (av
e) "and" $ G (ave) "/" $ B (ave) "become substantially" 1 ", and the white balance is assumed to be substantially obtained, and temporary locking is performed.
ve) ”/“ $ G (ave) ”or“ $ B (av
e) "/" $ G (ave) "may be approximately white when the value falls within a certain value range around" 1 ", or" $ R (ave) "-" ΣG
(Ave) ”or“ $ B (ave) ”-“ $ G (a
ve) may be approximately white balance when the value falls within a certain value range centered on “0”.

【００５８】さらに「ΣＲ（ａｖｅ）」−「ΣＧ（ａｖ
ｅ）」あるいは「ΣＢ（ａｖｅ）」−「ΣＧ（ａｖ
ｅ）」のとりうる値をいくつかのゾーンに分割し、各ゾ
ーンに対して微調整の定数をそれぞれ設定するようにし
てもよい。Further, "@R (ave)"-"@ G (av
e) ”or“ ΣB (ave) ”−“ ΣG (av
e)) may be divided into several zones, and a fine adjustment constant may be set for each zone.

【００５９】（第２の実施の形態）以下本発明をデジタ
ルカメラに適用した場合の第２の実施の形態について図
面を参照して説明する。(Second Embodiment) Hereinafter, a second embodiment in which the present invention is applied to a digital camera will be described with reference to the drawings.

【００６０】なお、その回路構成については上記図１と
同様であるので、同一部分は同一符号を用いるものとし
てその図示及び説明は省略する。Since the circuit configuration is the same as that of FIG. 1, the same parts are denoted by the same reference numerals and their illustration and description are omitted.

【００６１】次に、本実施の形態に係る記録モード時の
自動ホワイトバランス調整の動作について説明する。Next, the operation of the automatic white balance adjustment in the recording mode according to the present embodiment will be described.

【００６２】図３は主としてＣＰＵ２１の制御の下に実
行される自動ホワイトバランス調整の一連の処理工程を
例示するもので、その当初には、対象となる１枚分の画
像データを、データ圧縮を行なう前のビットマップファ
イルの状態で記憶しているバッファメモリとしてのＤＲ
ＡＭ２０から読出し（ステップＣ０１）、ＲＧＢの各色
成分毎に全画素データの総和から１画素当たりの平均値
「ΣＲ（ａｖｅ）」「ΣＧ（ａｖｅ）」「ΣＢ（ａｖ
ｅ）」を算出する（ステップＣ０２）。FIG. 3 exemplifies a series of processing steps of automatic white balance adjustment mainly executed under the control of the CPU 21. Initially, one image data to be processed is subjected to data compression. DR as buffer memory stored in the state of bitmap file before performing
The data is read out from the AM 20 (step C01), and the average value per pixel “ΣR (ave)”, “ΣG (ave)”, “ΣB (av) is calculated from the sum of all pixel data for each of the RGB color components.
e) is calculated (step C02).

【００６３】次いで、ホワイトバランスの仮ロック状態
ではないことを確認した上で（ステップＣ０３）、上記
式（１）を実行し、得た値を新たなＲゲインとして設定
する（ステップＣ０４）。Next, after confirming that the white balance is not in the temporary locked state (step C03), the above equation (1) is executed, and the obtained value is set as a new R gain (step C04).

【００６４】同様にして、上記式（２）を実行し、得た
値を新たなＢゲインとして設定する（ステップＣ０
５）。Similarly, the above equation (2) is executed, and the obtained value is set as a new B gain (step C0).
5).

【００６５】次いで、上記式（１）中で用いた値 「ΣＧ（ａｖｅ）」／「ΣＲ（ａｖｅ）」 が概ね「１」であるか否かを判断し（ステップＣ０
６）、概ね「１」である場合には、さらに、上記式
（２）中で用いた値 「ΣＧ（ａｖｅ）」／「ΣＢ（ａｖｅ）」 も概ね「１」であるか否かを判断する（ステップＣ０
７）。Next, it is determined whether or not the value "$ G (ave)" / "$ R (ave)" used in the above equation (1) is approximately "1" (step C0).
6) If the value is approximately “1”, it is further determined whether the value “ΔG (ave)” / “ΔB (ave)” used in the above equation (2) is also approximately “1”. (Step C0
7).

【００６６】ここでも、概ね「１」であると判断する
と、上記「ΣＲ（ａｖｅ）」「ΣＧ（ａｖｅ）」「ΣＢ
（ａｖｅ）」の３値はそれぞれ略等しい状態となるの
で、概ねホワイトバランスがとれたものとして、ホワイ
トバランスの仮ロック状態とする（ステップＣ０８）。Also here, when it is determined that the value is approximately “1”, the above “$ R (ave)”, “$ G (ave)”, “$ B
Since the three values of “(ave)” are substantially equal to each other, it is assumed that the white balance has been substantially obtained and the white balance is temporarily locked (step C08).

【００６７】また、上記ステップＣ０６あるいはＣ０７
でいずれかの値が「１」を大きく外れていると判断した
場合には、再び上記ステップＣ０１からの処理に戻る。
そして、ステップＣ０１〜Ｃ０７の処理を繰返し実行
し、Ｒゲイン及びＢゲインを順次可変設定していくこと
で、上記「ΣＲ（ａｖｅ）」「ΣＧ（ａｖｅ）」「ΣＢ
（ａｖｅ）」の３値がそれぞれ略等しい状態となったと
ステップＣ０７で判断すると、ステップＣ０８でホワイ
トバランスの仮ロック状態とする。Further, the above-mentioned Step C06 or C07
If it is determined that any of the values deviates significantly from "1", the process returns to the process from step C01.
Then, the processes of steps C01 to C07 are repeatedly executed to sequentially and variably set the R gain and the B gain, whereby the above-mentioned “ΔR (ave)”, “ΔG (ave)”, “ΔB
If it is determined in step C07 that the three values of “(ave)” have become substantially equal to each other, a temporary lock state of the white balance is set in step C08.

【００６８】その後、次の演算 (その時点でのＲゲイン)×((「ΣＧ(ａｖｅ)」／「ΣＲ(ａｖｅ)」)＋１)／２ ‥‥(3) を実行し、その時点でのＲゲインに目的とするＲゲイン
（「１」）との中間値を乗じ、得た値を新たなＲゲイン
として設定する（ステップＣ０９）。Then, the following calculation (R gain at that time) × ((“ΣG (ave)” / “ΣR (ave)”) + 1) / 2 ‥‥ (3) is executed, and The R gain is multiplied by an intermediate value with the target R gain (“1”), and the obtained value is set as a new R gain (step C09).

【００６９】同様にして、次の演算 (その時点でのＢゲイン)×((「ΣＧ(ａｖｅ)」／「ΣＢ(ａｖｅ)」)＋１)／２ ‥‥(4) を実行し、その時点でのＢゲインに目的とするＢゲイン
（「１」）との中間値を乗じ、得た値を新たなＢゲイン
として設定する（ステップＣ１０）。Similarly, the following calculation (B gain at that time) × ((“ΣG (ave)” / “ΣB (ave)”) + 1) / 2 ‥‥ (4) is executed. Is multiplied by an intermediate value with the target B gain (“1”), and the obtained value is set as a new B gain (step C10).

【００７０】その後、除算「「ΣＧ（ａｖｅ）」／「Σ
Ｒ（ａｖｅ）」」の商が「１」であるか否かにより「Σ
Ｇ（ａｖｅ）」と「ΣＲ（ａｖｅ）」とが正確に等し
く、上記ステップＣ０９での中間値の設定が目的とする
Ｒゲインに収束したか否かを判断する（ステップＣ１
１）。Thereafter, the division “「 G (ave) ”/“ Σ
R (ave) ”is“ 1 ”depending on whether the quotient is“ 1 ”or not.
It is determined whether or not “G (ave)” is exactly equal to “ａR (ave)”, and whether the setting of the intermediate value in step C09 has converged to the target R gain (step C1).
1).

【００７１】ここで、両値が正確に等しく、上記商が
「１」であると判断すると、同様にして除算「「ΣＧ
（ａｖｅ）」／「ΣＢ（ａｖｅ）」」の商が「１」であ
るか否かにより「ΣＧ（ａｖｅ）」と「ΣＢ（ａｖ
ｅ）」とが正確に等しく、上記ステップＣ１０での中間
値の設定が目的とするＢゲインに収束したか否かを判断
する（ステップＣ１２）。Here, when it is determined that both values are exactly equal and the quotient is “1”, the division “「 G
(@Ave) / "@ B (ave)" and "@G (ave)" and "@B (av)" depending on whether the quotient is "1" or not.
e) is exactly equal, and it is determined whether or not the setting of the intermediate value in step C10 has converged to the target B gain (step C12).

【００７２】上記ステップＣ１１あるいはステップＣ１
２で除算の商が「１」ではないと判断した場合には、ま
だゲイン設定された中間値が目的とする値に収束してい
ないことになるので、再び上記ステップＣ０１からの処
理を繰返す。The above step C11 or step C1
If it is determined in step 2 that the quotient of the division is not "1", the intermediate value for which the gain has been set has not yet converged to the target value, and the processing from step C01 is repeated again.

【００７３】このとき、ホワイトバランスの仮ロック状
態を設定しているために、ステップＣ０３でこれを判断
してステップＣ０４〜Ｃ０８の処理は省略する。At this time, since the temporary lock state of the white balance has been set, this is determined in step C03, and the processing in steps C04 to C08 is omitted.

【００７４】そして、ステップＣ１１とステップＣ１２
の双方で各商が「１」であると判断すると、これで全体
のホワイトバランス調整のための処理を終えたものとし
て、以上でこの図２の一連の処理を終了する。Then, Step C11 and Step C12
When it is determined that each quotient is "1", it is determined that the process for adjusting the overall white balance has been completed, and the series of processes in FIG. 2 is completed.

【００７５】このように、始めから予め設定されたステ
ップ幅毎にホワイトバランスを調整していくのではな
く、最も輝度信号に近い色成分であるＧ成分の１画素当
たりの平均値に対する他の色成分の画像情報の平均値の
係数からホワイトバランスの調整値を算出することで一
括してホワイトバランスを粗調整し、その後にその時点
でのホワイトバランスに目的とするホワイトバランスと
の中間値を乗ずることにより順次調整していくことで、
最終的に正確なホワイトバランスに収束させるようにし
たため、粗調整後に徐々にホワイトバランスが正確に調
整されることとなり、表示部２５でモニタ表示される被
写体の色合いの変化を自然なものとすることができる。As described above, instead of adjusting the white balance for each of the preset step widths from the beginning, other colors for the average value per pixel of the G component, which is the color component closest to the luminance signal, are compared. The white balance is roughly adjusted by calculating the white balance adjustment value from the coefficient of the average value of the component image information, and then the white balance at that point is multiplied by the intermediate value of the target white balance. By adjusting sequentially,
In order to finally converge to an accurate white balance, the white balance is gradually and accurately adjusted after the coarse adjustment, and the change in the color of the subject displayed on the display unit 25 is natural. Can be.

【００７６】また、乗ずる係数は目的とするＲ及びＢゲ
イン（「１」）と「ΣＧ（ａｖｅ）」／「ΣＲ（ａｖ
ｅ）」及び「ΣＧ（ａｖｅ）」／「ΣＢ（ａｖｅ）」と
の間の値であればよいので、上記式（３）、（４）の演
算を(その時点でのＲゲイン)×((「ΣＧ(ａｖｅ)」／
「ΣＲ(ａｖｅ)」)＋２)／３、(その時点でのＢゲイン)
×((「ΣＧ(ａｖｅ)」／「ΣＢ(ａｖｅ)」)＋２)／３と
いうようにＧとＲ、ＧとＢのブレンド量を変えることで
ゲインの変化のスピードを調整してもよい。The coefficients to be multiplied are the desired R and B gains (“1”) and “ΔG (ave)” / “ΔR (av
e) ”and“ ΔG (ave) ”/“ ΔB (ave) ”. Therefore, the calculation of the above equations (3) and (4) is performed by (R gain at that time) × ( ("@G (ave)" /
“ΣR (ave)”) + 2) / 3 (B gain at that time)
The speed of the gain change may be adjusted by changing the blend amount of G and R, or G and B, such as × ((“(G (ave)” / “ΣB (ave)”) + 2) / 3.

【００７７】さらに「ΣＧ（ａｖｅ）」／「ΣＲ（ａｖ
ｅ）」あるいは「ΣＧ（ａｖｅ）」／「ΣＢ（ａｖ
ｅ）」のとりうる値をいくつかのゾーンに分割し、各ゾ
ーンに対して上記の方法でホワイトバランスの追従速度
をそれぞれ設定するようにしてもよい。Further, "@G (ave)" / "@ R (av
e) ”or“ $ G (ave) ”/“ $ B (av
e)) may be divided into several zones, and the white balance following speed may be set for each zone by the above-described method.

【００７８】（第３の実施の形態）以下本発明をデジタ
ルカメラに適用した場合の第３の実施の形態について図
面を参照して説明する。(Third Embodiment) Hereinafter, a third embodiment in which the present invention is applied to a digital camera will be described with reference to the drawings.

【００７９】なお、その回路構成については上記図１と
同様であるので、同一部分は同一符号を用いるものとし
てその図示及び説明は省略する。Since the circuit configuration is the same as that of FIG. 1, the same parts are denoted by the same reference numerals and their illustration and description are omitted.

【００８０】また、このデジタルカメラ１０ではＡＥ
（自動露出）機能を有し、記録モード時にあってはＡＥ
機能によりＣＣＤ１２に入射する光量を絞り値を可変す
ることで制御するものとする。In this digital camera 10, the AE
(Automatic exposure) function and AE when in recording mode
The function controls the amount of light incident on the CCD 12 by varying the aperture value.

【００８１】次に、本実施の形態に係る記録モード時の
自動ホワイトバランス調整の動作について説明する。Next, the operation of the automatic white balance adjustment in the recording mode according to the present embodiment will be described.

【００８２】図４は主としてＣＰＵ２１の制御の下に実
行される自動ホワイトバランス調整の一連の処理工程を
例示するもので、その当初には、対象となる１枚分の画
像データを、データ圧縮を行なう前のビットマップファ
イルの状態で記憶しているバッファメモリとしてのＤＲ
ＡＭ２０から読出し（ステップＤ０１）、ＲＧＢの各色
成分毎に全画素データの総和から１画素当たりの平均値
「ΣＲ（ａｖｅ）」「ΣＧ（ａｖｅ）」「ΣＢ（ａｖ
ｅ）」を算出する（ステップＤ０２）。FIG. 4 exemplifies a series of processing steps of automatic white balance adjustment mainly executed under the control of the CPU 21. At first, one image data to be processed is subjected to data compression. DR as buffer memory stored in the state of bitmap file before performing
The data is read from the AM 20 (step D01), and the average value per pixel “ΔR (ave)”, “ΔG (ave)”, “ΔB (av) is calculated from the sum of all pixel data for each of the RGB color components.
e) ”(step D02).

【００８３】次いで、ホワイトバランスがロック状態で
はないことを確認した上で（ステップＤ０３）、上記式
（１）を実行し、得た値を新たなＲゲインとして設定す
る（ステップＤ０４）。Next, after confirming that the white balance is not in the locked state (step D03), the above equation (1) is executed, and the obtained value is set as a new R gain (step D04).

【００８４】同様にして、上記式（２）を実行し、得た
値を新たなＢゲインとして設定する（ステップＤ０
５）。Similarly, the above equation (2) is executed, and the obtained value is set as a new B gain (step D0).
5).

【００８５】次いで、上記式（１）中で用いた値 「ΣＧ（ａｖｅ）」／「ΣＲ（ａｖｅ）」 が概ね「１」であるか否かを判断し（ステップＤ０
６）、概ね「１」である場合には、さらに、上記式
（２）中で用いた値 「ΣＧ（ａｖｅ）」／「ΣＢ（ａｖｅ）」 も概ね「１」であるか否かを判断する（ステップＤ０
７）。Next, it is determined whether or not the value “ΣG (ave)” / “ΣR (ave)” used in the above equation (1) is approximately “1” (step D0).
6) If the value is approximately “1”, it is further determined whether the value “ΔG (ave)” / “ΔB (ave)” used in the above equation (2) is also approximately “1”. (Step D0
7).

【００８６】ここでも、概ね「１」であると判断する
と、上記「ΣＲ（ａｖｅ）」「ΣＧ（ａｖｅ）」「ΣＢ
（ａｖｅ）」の３値はそれぞれ略等しい状態となるの
で、概ねホワイトバランスがとれたものとして、ホワイ
トバランスのロック状態とする（ステップＤ０８）。Here, when it is determined that the value is approximately “1”, the above “ΣR (ave)”, “ΣG (ave)”, “ΣB”
Since the three values of “(ave)” are substantially equal to each other, it is assumed that the white balance has been substantially achieved and the white balance is locked (step D08).

【００８７】また、上記ステップＤ０６あるいはＤ０７
でいずれかの値が「１」を大きく外れていると判断した
場合には、再び上記ステップＤ０１からの処理に戻る。
そして、ステップＤ０１〜Ｄ０７の処理を繰返し実行
し、Ｒゲイン及びＢゲインを順次可変設定していくこと
で、上記「ΣＲ（ａｖｅ）」「ΣＧ（ａｖｅ）」「ΣＢ
（ａｖｅ）」の３値がそれぞれ略等しい状態となったと
ステップＤ０７で判断すると、ステップＤ０８でホワイ
トバランスのロック状態とする。Further, the above-mentioned step D06 or D07
If it is determined that any of the values deviates greatly from "1", the process returns to the process from step D01 again.
Then, the processing of steps D01 to D07 is repeatedly executed, and the R gain and the B gain are sequentially and variably set, so that the above-mentioned “ΔR (ave)”, “ΔG (ave)”, “ΔB
If it is determined in step D07 that the three values of “(ave)” have become substantially equal to each other, a locked state of the white balance is set in step D08.

【００８８】その後、上記ＡＥ機能により選択している
その時点での絞り値を取得してＣＰＵ２１の内部レジス
タに保持し（ステップＤ０９）、前回の同処理で取得し
ていた絞り値との差が１［ＥＶ］以上であるか否か、す
なわち前回から絞り値がある程度変化したか否かを判断
する（ステップＤ１０）。After that, the aperture value at that time selected by the AE function is acquired and held in the internal register of the CPU 21 (step D09), and the difference from the aperture value acquired in the previous same process is obtained. It is determined whether or not it is 1 [EV] or more, that is, whether or not the aperture value has changed to some extent from the previous time (step D10).

【００８９】ここで、前回の絞り値との差が１［ＥＶ］
以上であると判断した場合にのみ、上記ステップＤ０８
で設定したホワイトバランスのロック状態を解除し（ス
テップＤ１１）、その後に全体のホワイトバランス調整
のための処理を終えたか否かを判断し（ステップＤ１
２）、終えていないと判断した場合には再び上記ステッ
プＤ０１からの処理に戻る。Here, the difference from the previous aperture value is 1 [EV].
Only when it is determined that the above is the case, step D08
The locked state of the white balance set in step (1) is released (step D11), and thereafter, it is determined whether or not the processing for adjusting the entire white balance has been completed (step D1).
2) If it is determined that the processing has not been completed, the process returns to the processing from step D01.

【００９０】このとき、ホワイトバランスのロック状態
を設定している場合には、ステップＤ０３でこれを判断
してステップＤ０４〜Ｄ０８の処理を省略する反面、絞
り値の変化が大きいためにロック状態を解除している場
合には、ステップＤ０３でこれを判断して、ステップＤ
０４，Ｄ０５での処理により新たなＲゲイン，Ｂゲイン
を設定し直す。At this time, if the locked state of the white balance is set, it is determined in step D03 and the processing of steps D04 to D08 is omitted, but the locked state is changed because the change in the aperture value is large. If it has been released, this is determined in step D03,
New R gains and B gains are reset by the processing in steps 04 and D05.

【００９１】これにより、絞り値が一定である限り、表
示部２５でモニタ表示される被写体の状態が変化したと
しても、常に同じ色合いを保ったまま撮影を行なうこと
ができ、例えばズーム機能により被写体としての人物の
顔が徐々に画面中で大きくなるような表示を行なう場合
でも、絞り値が変わらない限り、表示される肌の色合い
が急激に変化してしまうようなことがなく、表示部２５
での表示がきわめて自然なものとなる。As a result, as long as the aperture value is constant, even if the state of the subject displayed on the monitor on the display unit 25 changes, the photographing can be performed while always maintaining the same color. Even when the display is performed such that the face of the person gradually increases in the screen, the displayed skin tone does not suddenly change as long as the aperture value does not change.
Display becomes very natural.

【００９２】なお、上記第１乃至第３の実施の形態で
は、ＣＣＤ１２が原色系のカラーフィルタを有するもの
として、ＲＧＢの各色成分を出力し、ホワイトバランス
調整として図示しない増幅器でＧ成分を基準とし、Ｒ，
Ｂの各色成分のゲイン調整を行なった後にサンプルホー
ルド回路１５へ送られるものとして説明したが、これに
限るものではなく、例えばＣＣＤ１２が補色系のカラー
フィルタを有する場合には、ホワイトバランス調整とし
て輝度信号に最も近いＹ（イエロー）成分を基準とし
て、Ｍｇ（マゼンタ），Ｃｙ（シアン）の各色成分のゲ
イン調整を図示しない増幅器で行なうこととなる。In the first to third embodiments, assuming that the CCD 12 has a color filter of primary color system, each color component of RGB is output, and an amplifier (not shown) uses the G component as a reference for white balance adjustment. , R,
Although the description has been made assuming that the gain of each color component B is sent to the sample and hold circuit 15 after the gain adjustment, the present invention is not limited to this. For example, when the CCD 12 has a complementary color filter, the With the Y (yellow) component closest to the signal as a reference, the gain of each color component of Mg (magenta) and Cy (cyan) is adjusted by an amplifier (not shown).

【００９３】また、上記ホワイトバランスの調整方法
も、ＣＣＤ１２の出力する信号を増幅する増幅器でのゲ
インを可変するのではなく、例えばカラープロセス回路
１７またはＤＭＡコントローラ１８により、デジタル値
の画像データの各画素に対して各色成分毎に異なる乗数
を乗じるものとしてもよい。Also, the above-mentioned white balance adjustment method does not vary the gain of the amplifier for amplifying the signal output from the CCD 12, but uses, for example, the color process circuit 17 or the DMA controller 18 to output each digital image data. The pixel may be multiplied by a different multiplier for each color component.

【００９４】その他、本発明は実施の形態に限定するも
のではなく、その要旨を逸脱しない範囲内で種々変形し
て実施することが可能であるものとする。In addition, the present invention is not limited to the embodiment, and can be variously modified and implemented without departing from the gist thereof.

【００９５】[0095]

【発明の効果】請求項１記載の発明によれば、予め設定
されたステップ幅毎にホワイトバランスを調整して行く
のではなく、最も輝度信号に近い色成分の画像情報の平
均値に対する他の色成分の画像情報の平均値の係数から
ホワイトバランスの調整値を算出することで一括してホ
ワイトバランスを調整することができるため、より短時
間のうちに被写体の変化に対してホワイトバランスを追
従させることができる。According to the first aspect of the present invention, the white balance is not adjusted for each preset step width, but the white balance is adjusted with respect to the average value of the image information of the color component closest to the luminance signal. By calculating the white balance adjustment value from the coefficient of the average value of the color component image information, the white balance can be adjusted collectively, so that the white balance can follow the subject change in a shorter time. Can be done.

【００９６】請求項２記載の発明によれば、上記請求項
１記載の発明の効果に加えて、より正確なホワイトバラ
ンス調整を行なうことができる。According to the second aspect of the invention, more accurate white balance adjustment can be performed in addition to the effects of the first aspect of the invention.

【００９７】請求項３記載の発明によれば、上記請求項
１記載の発明の効果に加えて、ホワイトバランスの粗調
整後に正確な調整値に収束するまでの画像での色合いの
変化を自然なものとすることができる。According to the third aspect of the present invention, in addition to the effects of the first aspect of the present invention, a change in color tone in an image until the convergence to an accurate adjustment value after coarse adjustment of the white balance is natural. Things.

【００９８】請求項４記載の発明によれば、上記請求項
１または２記載の発明の効果に加えて、絞り値に変化が
生じた際にのみ、上記第１の係数を用いたホワイトバラ
ンス調整の基底となる値の演算をし直すこととなるの
で、絞り値が変化しない状態では表示される被写体の画
像の色合いが急激に変化してしまうことがなく、モニタ
表示される画像が極めて自然な違和感のないものとな
る。According to the fourth aspect of the present invention, in addition to the effects of the first or second aspect of the present invention, the white balance adjustment using the first coefficient is performed only when the aperture value changes. Is calculated again, so that the hue of the image of the displayed subject does not suddenly change when the aperture value does not change, and the image displayed on the monitor is extremely natural. There is no discomfort.

【００９９】請求項５記載の発明によれば、予め設定さ
れたステップ幅毎にホワイトバランスを調整していくの
ではなく、最も輝度信号に近い色成分の画像情報の平均
値に対する他の色成分の画像情報の平均値の係数からホ
ワイトバランスの調整値を算出することで一括してホワ
イトバランスを調整することができるため、より短時間
のうちに被写体の変化に対してホワイトバランスを追従
させることができる。According to the fifth aspect of the present invention, instead of adjusting the white balance for each preset step width, the other color components are compared with the average value of the image information of the color component closest to the luminance signal. Since the white balance can be adjusted collectively by calculating the white balance adjustment value from the coefficient of the average value of the image information of the image information, the white balance can follow the change of the subject in a shorter time. Can be.

【図面の簡単な説明】[Brief description of the drawings]

【図１】本発明の第１の実施の形態に係るデジタルカメ
ラの回路構成を示すブロック図。FIG. 1 is a block diagram showing a circuit configuration of a digital camera according to a first embodiment of the present invention.

【図２】同実施の形態に係るホワイトバランス調整の処
理内容を示すフローチャート。FIG. 2 is a flowchart showing processing content of white balance adjustment according to the embodiment.

【図３】本発明の第２の実施の形態に係るホワイトバラ
ンス調整の処理内容を示すフローチャート。FIG. 3 is a flowchart showing processing content of white balance adjustment according to a second embodiment of the present invention.

【図４】本発明の第３の実施の形態に係るホワイトバラ
ンス調整の処理内容を示すフローチャート。FIG. 4 is a flowchart showing processing content of white balance adjustment according to a third embodiment of the present invention.

【図５】従来の一般的なホワイトバランス調整の処理内
容を示すフローチャート。FIG. 5 is a flowchart showing processing content of a conventional general white balance adjustment.

【符号の説明】[Explanation of symbols]

１０…デジタルカメラ １１…レンズ １２…ＣＣＤ １３…タイミング発生器（ＴＧ） １４…垂直ドライバ １５…サンプルホールド回路（Ｓ／Ｈ） １６…Ａ／Ｄ変換器 １７…カラープロセス回路 １８…ＤＭＡコントローラ １９…ＤＲＡＭインタフェース ２０…ＤＲＡＭ ２１…ＣＰＵ ２２…ＶＲＡＭコントローラ ２３…ＶＲＡＭ ２４…デジタルビデオエンコーダ ２５…表示部 ２６…キー入力部 ２７…ＪＰＥＧ回路 ２８…フラッシュメモリ DESCRIPTION OF SYMBOLS 10 ... Digital camera 11 ... Lens 12 ... CCD 13 ... Timing generator (TG) 14 ... Vertical driver 15 ... Sampling and holding circuit (S / H) 16 ... A / D converter 17 ... Color process circuit 18 ... DMA controller 19 ... DRAM interface 20 DRAM 21 CPU 22 VRAM controller 23 VRAM 24 Digital video encoder 25 Display unit 26 Key input unit 27 JPEG circuit 28 Flash memory

───────────────────────────────────────────────────── フロントページの続き Ｆターム(参考） 5C065 AA03 BB02 BB04 CC01 CC08 CC09 DD02 EE12 FF03 GG18 GG23 GG29 GG30 GG32 GG44 5C066 AA01 BA13 CA08 CA17 CA23 DA01 DB01 DD06 EA03 EA17 EC01 GA01 GA32 GA33 GB01 HA02 KA12 KD02 KD06 KE03 KE09 KE11 KE17 KE19 KF01 KM02 KM11 KP02  ──────────────────────────────────────────────────続 き Continued on the front page F term (reference) 5C065 AA03 BB02 BB04 CC01 CC08 CC09 DD02 EE12 FF03 GG18 GG23 GG29 GG30 GG32 GG44 5C066 AA01 BA13 CA08 CA17 CA23 DA01 DB01 DD06 EA03 EA17 EC01 GA01 GA32 GA12 GB01 KE03 KA03 KE11 KE17 KE19 KF01 KM02 KM11 KP02

Claims (7)

【特許請求の範囲】[Claims] 【請求項１】撮像対象となる光像を少なくとも３色の色
フィルタを介して各色成分毎の画像情報に光電変換する
撮像素子と、 この撮像素子で得た各色成分毎の画像情報の平均値を求
める第１の演算手段と、 この第１の演算手段で求めた各色成分毎の画像情報の平
均値を用い、最も輝度信号に近い色成分の画像情報の平
均値を基準として他の各色成分毎の画像情報の平均値に
対する第１の係数を求める第２の演算手段と、 この第２の演算手段で求めた各第１の係数によりホワイ
トバランスの調整値を算出する第３の演算手段とを具備
したことを特徴とする電子撮像装置。An image sensor for photoelectrically converting a light image to be imaged into image information for each color component through at least three color filters, and an average value of image information for each color component obtained by the image sensor. Using the average value of the image information of each color component obtained by the first arithmetic means, and using the average value of the image information of the color component closest to the luminance signal as a reference, A second calculating means for calculating a first coefficient with respect to an average value of image information for each image; a third calculating means for calculating a white balance adjustment value based on each first coefficient obtained by the second calculating means; An electronic imaging device comprising: 【請求項２】上記第３の演算手段で算出したホワイトバ
ランスの調整値に対して所定値を加減して微調整する第
４の演算手段をさらに具備したことを特徴とする請求項
１記載の電子撮像装置。2. The apparatus according to claim 1, further comprising a fourth calculating means for finely adjusting the white balance adjustment value calculated by said third calculating means by adding or subtracting a predetermined value. Electronic imaging device. 【請求項３】上記第１の演算手段で求めた各色成分毎の
画像情報の平均値を用い、最も輝度信号に近い色成分の
画像情報の平均値を基準として他の各色成分毎の画像情
報の平均値に対する、上記第１の係数より調整幅の小さ
い第２の係数を求める第５の演算手段と、 この第５の演算手段で求めた各第２の係数により第２の
ホワイトバランスの調整値を算出する第６の演算手段と
をさらに具備したことを特徴とする請求項１記載の電子
撮像装置。3. An image information for each color component based on an average value of image information of a color component closest to a luminance signal using an average value of image information for each color component obtained by the first arithmetic means. A fifth calculating means for obtaining a second coefficient having a smaller adjustment width than the first coefficient with respect to an average value of the second coefficient; and adjusting a second white balance with each second coefficient obtained by the fifth calculating means. 2. The electronic imaging apparatus according to claim 1, further comprising: a sixth calculating means for calculating a value. 【請求項４】上記電子撮像装置は自動露出機能を有し、 該自動露出機能により絞り値が変化した場合に上記第２
の演算手段で求めた各第１の係数により上記第３の演算
手段でホワイトバランスの調整値を算出することを特徴
とする請求項１または２記載の電子撮像装置。4. The electronic image pickup apparatus has an automatic exposure function, and when the aperture value is changed by the automatic exposure function, the second image pickup apparatus is set to the second position.
3. The electronic imaging apparatus according to claim 1, wherein the third calculating means calculates a white balance adjustment value using each of the first coefficients obtained by the calculating means. 【請求項５】撮像対象となる光像を少なくとも３色の色
フィルタを介して各色成分毎の画像情報に光電変換する
撮像素子で得た、各色成分毎の画像情報の平均値を求め
る第１の演算工程と、 この第１の演算工程で求めた各色成分毎の画像情報の平
均値を用い、最も輝度信号に近い色成分の画像情報の平
均値を基準として他の各色成分毎の画像情報の平均値に
対する第１の係数を求める第２の演算工程と、 この第２の演算工程で求めた各第１の係数によりホワイ
トバランスの調整値を算出する第３の演算工程とを有し
たことを特徴とするホワイトバランス調整方法。5. A first method for obtaining an average value of image information for each color component obtained by an image sensor for photoelectrically converting a light image to be imaged into image information for each color component through at least three color filters. Using the average value of the image information for each color component obtained in the first calculation step, and using the average value of the image information of the color component closest to the luminance signal as a reference, the image information for each other color component And a third calculation step of calculating a white balance adjustment value using each of the first coefficients obtained in the second calculation step. A white balance adjustment method characterized by the following. 【請求項６】上記第３の演算工程で算出したホワイトバ
ランスの調整値に対して所定値を加減して微調整する第
４の演算工程をさらに具備したことを特徴とする請求項
５記載のホワイトバランス調整方法。6. The apparatus according to claim 5, further comprising a fourth operation step of finely adjusting a white balance adjustment value calculated in said third operation step by adding or subtracting a predetermined value. White balance adjustment method. 【請求項７】上記第１の演算工程で求めた各色成分毎の
画像情報の平均値を用い、最も輝度信号に近い色成分の
画像情報の平均値を基準として他の各色成分毎の画像情
報の平均値に対する、上記第１の係数より調整幅の小さ
い第２の係数を求める第５の演算工程と、 この第５の演算工程で求めた各第２の係数により第２の
ホワイトバランスの調整値を算出する第６の演算工程と
をさらに具備したことを特徴とする請求項５記載のホワ
イトバランス調整方法。7. An image information for each color component based on an average value of image information of a color component closest to a luminance signal using an average value of image information for each color component obtained in the first calculation step. A fifth calculation step for obtaining a second coefficient having a smaller adjustment width than the first coefficient with respect to the average value of the second coefficient; and adjusting the second white balance with each second coefficient obtained in the fifth calculation step. 6. The white balance adjustment method according to claim 5, further comprising a sixth calculation step of calculating a value.