JP2008301279A - ホワイトバランス補正装置及び方法、及び撮像装置 - Google Patents

Abstract

【課題】 ホワイトバランス補正を行うために、より的確に被写体を照明した光源を特定できるようにすること。
【解決手段】 撮像素子から得た被写体の画像信号から前記被写体の模様に関する情報を検出する情報検出部（１３１）と、前記模様に関する情報を用いて、前記被写体を照明した光源を推定する光源推定部（１１１）と、前記推定された光源に応じて、前記画像信号から白を示す画像信号を判断して抽出し、該抽出した画像信号が白を示す信号となるようにホワイトバランス補正を行うホワイトバランス補正手段（１０６、１１０）とを有する。
【選択図】 図１

Description

本発明は、ホワイトバランス補正装置及び方法及び、当該ホワイトバランス補正装置を搭載した撮像装置に関する。更に詳しくは、撮影時に被写体を照明した光源を特定して、特定した光源に応じたホワイトバランスを行うホワイトバランス補正装置及び方法及び当該ホワイトバランス補正装置を搭載した撮像装置に関する。

昨今のビデオカメラをはじめとする撮像装置では、オートホワイトバランス時に外測センサを用いず、撮像素子の出力信号のみの情報を基にして制御を行うTTL（Through The Lens）方式が主流である。このようなホワイトバランス補正を行うホワイトバランス補正装置を搭載した撮像装置として、例えば、特許文献１に次の様な撮像装置が記載されている。

先ず、赤（Ｒ）、緑（G）、青（B）の色信号から色差信号（Ｒ‐Ｙ、Ｂ‐Ｙ）、輝度信号（Ｙ）を得るとともに、画像データを細かなブロックに分割し、各分割ブロック内で信号を平均化する。また、撮像装置の絞りの解放状態を示す信号、撮像素子の電子シャッタの制御状態を示す信号、及び、ＡＧＣアンプのゲイン状態を取得する。そして、各分割ブロックの輝度信号、絞りの解放状態、電子シャッタの制御状態、ＡＧＣアンプのゲイン状態から被写体の照度を検出し、この照度情報に基づいて光源を推定する。そして、各分割ブロックの信号値の内、推定した光源情報に基づいて白色に近い信号を抽出し、抽出した信号を目標の白に近づけるように赤（Ｒ）および青（Ｂ）信号のホワイトバランスゲインを決定する。

図５は光源の種類に応じた白抽出範囲の概念を示した図である。図５において６００は色差平面における白抽出範囲を示している。上述した白色に近い信号の抽出では、輝度信号が所定の閾値よりも大きく、且つ、白抽出範囲６００内に入っている信号を抽出する。光源が太陽光（屋外）であった場合には、白抽出範囲６００を図５（ａ）に示すように青系の色を無彩色と判断するような範囲とする。また、光源が人工灯（屋内）であった場合には、白抽出範囲６００を図５（ｂ）に示すようにハロゲン灯に対応する赤および蛍光灯に対応する緑系の色を無彩色と判断するような範囲とする。

一方で、コンピュータビジョンの分野では、一枚の静止画像から光源を推定して、屋外・屋内を判定する手法が従来から数多く提案されている（例えば、非特許文献1参照）。

これらの手法は、光源推定を行う特徴パラメータを複数持ち、一般的なシーンにおいては屋外／屋内の識別率が高い。しかしながら、ビデオカメラをはじめとする撮像装置のホワイトバランス制御装置が苦手とする被写体（屋内蛍光灯と屋外の草木の緑のシーン、屋内の白い壁と屋外の空のシーンなど）に対しては、識別が困難であるとされてきた。

特開平5‐６４２１９号公報 Martin Szummer and Rosalind W. picard，"Indoor-Outdoor Image Classification"IEEE Intl Workshop on Content-based Access of Image Video Database, Jan 1998．

上述したように照度情報を基準として屋外・屋内を識別する装置では、屋外の日陰などの暗い場所で撮影した際に、屋内であるとシーンを誤判断してしまう場合がある。これは、照度だけを基準として閾値処理すると、屋内光と屋外光の分布が重なる部分があり、１次元の特徴の閾値では光源を分けることができないことが原因である。

また一般的に屋内の光源の照度は屋外の太陽光に比べて低いとされてきたが、昨今では照度や色温度の高い屋内の光源環境も数多く存在する。例えば蛍光灯の中でも業務用のものは家庭等で用いる蛍光灯に比べて、色温度・照度ともに高い。つまり屋内に限った環境下においても、上述した光源の判断方法では、適切なホワイトバランス補正が行えない場合がある。

本発明は上記問題点を鑑みてなされたものであり、ホワイトバランス補正を行うために、より的確に被写体を照明した光源を特定できるようにすることを目的とする。

上記目的を達成するために、本発明のホワイトバランス補正装置は、撮像素子から得た被写体の画像信号から前記被写体の模様に関する情報を検出する情報検出手段と、前記模様に関する情報を用いて、前記被写体を照明した光源を推定する光源推定手段と、前記推定された光源に応じて、前記画像信号から白を示す画像信号を判断して抽出し、該抽出した画像信号が白を示す信号となるようにホワイトバランス補正を行うホワイトバランス補正手段とを有する。

また、本発明のホワイトバランス補正方法は、撮像素子から得た被写体の画像信号から模様に関する情報を検出する情報検出工程と、前記模様に関する情報を用いて、前記被写体を照明した光源を推定する光源推定工程と、前記推定された光源に応じて、前記画像信号から白を示す画像信号を判断して抽出し、該抽出した画像信号が白を示す信号となるようにホワイトバランス補正を行うホワイトバランス補正工程とを有する。

また、別の構成によれば、本発明のホワイトバランス補正装置は、撮像素子から得た被写体の画像信号から前記被写体の模様に関する情報を検出する情報検出手段と、前記画像信号から、所定の色相に属する画像信号の特徴情報を検出する色情報検出手段と、被写体の照度を検出する照度検出手段と、前記模様に関する情報と、前記特徴情報と、前記照度とを用いて、前記被写体を照明した光源を推定する光源推定手段と、前記推定された光源に応じて、前記画像信号から白を示す画像信号を判断して抽出し、該抽出した画像信号が白を示す信号となるようにホワイトバランス補正を行うホワイトバランス補正手段とを有する。

更に、本発明のホワイトバランス補正方法は、撮像素子から得た被写体の画像信号から模様に関する情報を検出する情報検出工程と、前記画像信号から、所定の色相に属する画像信号の特徴情報を検出する色情報検出工程と、被写体の照度を検出する照度検出工程と、前記模様に関する情報と、前記特徴情報と、前記照度とを用いて、前記被写体を照明した光源を推定する光源推定工程と、前記推定された光源に応じて、前記画像信号から白を示す画像信号を判断して抽出し、該抽出した画像信号が白を示す信号となるようにホワイトバランス補正を行うホワイトバランス補正工程とを有する。

また、本発明の撮像装置は、上述したホワイトバランス補正装置を搭載したことを特徴とする。

本発明によれば、ホワイトバランス補正を行うために、より的確に被写体を照明した光源を特定することが可能となる。

以下、添付図面を参照して本発明を実施するための最良の形態を詳細に説明する。

＜第１の実施形態＞
図１は本発明の第１の実施形態におけるオートホワイトバランス補正装置を備えた撮像装置の構成の一例を示すブロック図である。

図１において１０１は被写体の光束を結像するレンズ、１０２は絞り、１０３は入射した光を光電変換する撮像素子、１０４は撮像素子１０３からの信号を適正レベルに増幅するＡＧＣアンプである。１２０は、ＡＧＣアンプ１０４から出力された信号を処理するカメラ信号処理部、１３０は撮像装置全体を制御するカメラ制御マイコンであり、このカメラ制御マイコン１３０内にホワイトバランスのゲインを設定する機能が含まれている。

カメラ信号処理部１２０内において、１０５は撮像素子１０３で生成された信号を輝度信号（Ｙ）と色信号（Ｒ、Ｇ、Ｂ）に変換する輝度・色信号生成部である。また、１０６は輝度・色信号生成部１０５から出力される色信号（Ｒ、Ｇ、Ｂ）に対して利得を制御し、ホワイトバランスを制御するホワイトバランス制御部、１０７は色差信号（Ｒ‐Ｙ、Ｂ‐Ｙ）生成部である。更に、カメラ信号処理部１２０は、撮像素子１０３で生成された信号から被写体の模様に関する情報を検出して出力する情報検出部１１３を含む。模様に関する情報としては、ここでは被写体に含まれる水平及び垂直エッジ成分の量とし、撮像素子１０３で生成された信号から被写体の空間周波数解析（即ち、周波数成分の解析）を行って抽出する。

１０８は、輝度・色信号生成部１０５から出力された輝度信号（Ｙ）及び色差信号生成部１０７から出力された色差信号（Ｒ‐Ｙ、Ｂ‐Ｙ）から、標準テレビ信号等に変換するエンコーダ部である。

１０９は、輝度信号（Ｙ）、色差信号（Ｒ‐Ｙ、Ｂ‐Ｙ）を所定の領域毎に分割する信号分割部、１１２は被写体の照度を検出する照度検出部である。１１１は照度検出部からの照度情報及び情報検出部１１３からの垂直・水平エッジ成分の量を基に被写体を照明した光源を推定する光源推定部である。１１０は信号分割部１０９から得られた信号及び光源推定部１１１からの光源情報に基づいてホワイトバランスを補正するためのゲインを決定するホワイトバランスゲイン決定部である。このホワイトバランスのゲインを決定するホワイトバランスゲイン決定部１１０と、決定されたゲインを用いて実際にホワイトバランス補正を行うホワイトバランス制御部１０６により、ホワイトバランス補正手段が構成される。

次に上記構成を有する撮像装置の動作について説明する。

撮像素子１０３に入射した光は、光電変換され、ＡＧＣアンプ１０４で適正レベルに増幅された後、輝度・色信号生成部１０５及び情報検出部１１３に出力される。情報検出部１１３では、入力された信号から被写体の空間周波数を解析し、被写体に含まれる水平・垂直エッジ成分の量の抽出して光源推定部１１１に入力する。一方、輝度・色信号生成部１０５では輝度信号（Ｙ）、色信号（Ｒ、Ｇ、Ｂ）が生成され、このうち色信号はホワイトバランス制御部１０６へ出力される。ホワイトバランス制御部１０６では、後に説明するホワイトバランスゲイン決定部１１０から出力されるホワイトバランスゲイン制御信号に基づき色信号のゲインを調節し、ゲイン調節された色信号（Ｒ、Ｇ、Ｂ）を色差信号生成部１０７へ出力する。色差信号生成部１０７では色信号（Ｒ、Ｇ、Ｂ）から色差信号（Ｒ‐Ｙ、Ｂ‐Ｙ）を生成し、色差信号をエンコーダ１０８及び信号分割部１０９へ出力する。エンコーダ１０８では輝度信号（Y）、及び色差信号（Ｒ‐Ｙ、Ｂ‐Ｙ）からＮＴＳＣなどの標準テレビジョン信号を生成し出力する。

信号分割部１０９では画像信号をブロック（例えば、８×８領域）に分割し、各ブロックにおける輝度信号（Ｙ）、色差信号（Ｒ‐Ｙ、Ｂ‐Ｙ）の平均値を算出する。そして、ホワイトバランスゲイン決定部１１０へは平均輝度信号及び平均色差信号を、照度検出部１１２へは平均輝度信号をそれぞれ出力する。

照度検出部１１２には、絞り１０２の解放状態を示す信号、撮像素子１０３の電子シャッタの制御状態を示す信号、ＡＧＣアンプ１０４のゲイン状態を示す信号がそれぞれ入力される。照度検出部１１２ではこれら入力された信号と、上述した信号分割部１０９からの輝度信号とから被写体の照度を検出し、検出した照度情報を光源推定部１１１に出力する。

光源推定部１１１では、照度検出部１１２から入力された照度情報と、情報検出部１１３から出力された垂直・水平エッジ成分の量との２種類の特徴量に基いて光源を推定する。

図２は、本第１の実施形態において、光源推定部１１１において行われる、光源及び被写体の識別に上記２種類の特徴量を利用した場合の判定基準の一例を示す図である。

一般的に、水平・垂直のエッジ成分を多く含む画像は人工物が被写体であることが多く、逆に、水平・垂直のエッジ成分が少ない画像は自然物が被写体であることが多い。

従って、本第１の実施形態では、模様に関する情報が示す水平・垂直のエッジ成分が予め設定された第１の閾値以上の場合には、画像が屋内、特に、蛍光灯下で撮影されたものと判断する。次に、その画像の照度が予め設定された第１の照度よりも低い場合には、一般的な家庭用の蛍光灯（第１の蛍光灯）下で撮影が行われていると判定する。また、予め設定された第２の照度よりも高い場合には、蛍光灯の中でも、家庭用の蛍光灯よりも色温度・照度ともに高い業務用の蛍光灯（第２の蛍光灯）下で撮影していると判定する。

また、模様に関する情報が示す水平・垂直のエッジ成分が予め設定された第２に閾値以下の場合には、画像が屋外、つまり、太陽光下で撮影されたものと判断する。次に、その画像の照度が予め設定された第３の照度よりも高い場合には、太陽光であって、且つ、日向で撮影されたものと判定し、予め設定された第４の照度よりも低い場合には、同じ太陽光でも、日陰（又は曇天下）で撮影されたものと判定する。

なお、模様に関する情報が示す水平・垂直のエッジ成分が第１の閾値と第２の閾値との中間である場合には、従来の公知の方法により光源を推定する。

そして、光源推定部１１１は、上述のようにして得た光源の判定結果をホワイトバランスゲイン決定部１１０に送る。ホワイトバランスゲイン決定部１１０では、この送られた判定結果に基づいて、信号分割部１０９から出力された輝度信号（Ｙ）、色差信号（Ｒ‐Ｙ、Ｂ‐Ｙ）から白色に近い信号を抽出する。そして、抽出した白に近い信号を、目標の白に近づけるようにホワイトバランスゲインを決定し、ホワイトバランス制御部１０６に送る。

上記の通り本第１の実施形態によれば、撮像装置から得られた被写体の照度情報と、画像の模様に関する情報が示す水平・垂直エッジ成分を利用して光源を推定することにより、屋外と屋内の光源推定精度が向上する。具体的には、１）屋外の日陰の太陽光、２）屋外の日向の太陽光、３）屋内の家庭用の蛍光灯（第１の蛍光灯）、４）屋内の業務用の蛍光灯（第２の蛍光灯）の４種類の光源を区別することが可能となる。

このように、従来のように照度情報のみに基づいて光源を推定するよりも、より的確に光源を推定することが可能になるため、ホワイトバランス補正の精度を向上させることができる。

なお、上記第１の実施形態において、第１及び第２の閾値、及び第１〜第４の照度は、様々な光源下で撮影して得た画像を基にして、統計的手法により設定することができる。

また、上記第１の実施形態においては照度を２種類に分類したが、本発明はこれに限るものではなく、３種類以上に分類しても勿論構わない。その場合、屋外の撮影であれば、例えば、昼間の撮影と朝・夕の撮影とを分類するといったように、より細かく光源を分類することが可能になる。

また、上述した例では情報検出部１１３は、水平・垂直エッジ成分を検出してその量を出力するものとしたが、模様に関する情報として検出するのは、水平・垂直エッジ成分に限るものではなく、他の特徴量を検出するようにしても構わない。例えば、高周波成分を検出し、その量を用いて光源を特定するように構成することも可能である。

また、ウェーブレット変換を用いることにより、水平エッジ・垂直エッジ成分/高周波・低周波成分に加えて、それらが画面上のどの部分に存在しているか（画面の位置情報）がわかる。そのため、例えば画面の下の方は道路なので、人工物、画面の上の方は空なので自然物等の推定し光源を推定するように構成することも可能である。

＜第２の実施形態＞
次に、本発明の第２の実施形態について説明する。

第２の実施形態では第１の実施形態で用いた照度情報及び模様に関する情報に加え、特定の色相に属する画像信号から得られる特徴情報（平均彩度・平均輝度）を特徴量パラメータに加えた場合について説明する。

図３は、本第２の実施形態におけるオートホワイトバランス補正装置を備えた撮像装置の構成の一例を示すブロック図である。図３において、図１と同様の構成には同じ参照番号を付して説明を省略し、第１の実施形態と異なる構成及び処理について説明する。

図３において、３３０はカメラ制御マイコンであるが、本第２の実施形態においては、以下の構成を有する。先ず、３１３は画像信号から特定の色相に属する画像信号の特徴情報を検出する色情報検出部であり、本第２の実施形態では、特定の色相として緑を検出するものとし、緑ブロック検出部３１４、緑彩度検出部３１５、緑輝度検出部３１６を含む。３１１は光源を推定する光源推定部、３１０は信号分割部１０９から得られた信号及び光源推定部３１１からの光源情報に基づきホワイトバランスのゲインを決定するホワイトバランス決定部３１０である。

また、３１２は被写体の照度を検出する照度検出部である。ここでは、カメラ制御マイコン３３０から独立した構成としているが、第１の実施形態と同様に、カメラ制御マイコン３３０内に構成しても勿論構わない。

次に、上記構成を有する撮像装置における光源推定処理について説明する。

先ず、信号分割部１０９から出力される各ブロック毎の平均輝度信号（Ｙ）及び平均色差信号（Ｒ‐Ｙ、Ｂ‐Ｙ）のうち、ホワイトバランスゲイン決定部１１０へは平均輝度信号及び平均色差信号が、照度検出部３１２へは輝度信号がそれぞれ出力される。更に、緑ブロック検出部３１４へは色差信号が出力され、緑輝度検出部３１６へは輝度信号が出力される。

緑ブロック検出部３１４では、入力された平均色差信号に対して緑の色相領域に入るかを判定し、緑の色相領域に入ったブロックの情報を緑彩度検出部３１５および緑輝度検出部３１６へ出力する。緑彩度検出部３１５では、緑の色相領域に入ったブロックの彩度を取得し、緑の色相領域に入った全ブロックの彩度の平均値を算出し、緑ブロック平均彩度として光源推定部３１１へ出力する。

一方、緑輝度検出部３１６では緑の色相領域に入ったブロックの輝度値（Ｙ）を取得し、緑の色相領域に入った全ブロックの輝度の平均値を算出して、緑ブロック平均輝度として光源推定部３１１へ出力する。

光源推定部３１１は、第１の実施形態と同様にして照度検出部３１２から照度情報を、また、情報検出部１１３からは水平・垂直のエッジ成分を得る。更に、本第２の実施形態では、緑彩度検出部３１５から出力される緑ブロック平均彩度及び、緑輝度検出部３１６から出力される緑ブロック平均輝度を加えた４種類の特徴量から、光源を推定する。

屋外を撮影して得られる緑は、草木や芝生の緑であることが多く、比較的彩度が高く、輝度が低くなる傾向がある。一方、屋内を撮影して得られる緑は、比較的輝度が高く、白に近い被写体に蛍光灯の光が反射して緑になることがあるため、彩度が低く、輝度が高くなる傾向がある。そのため、緑ブロックの平均輝度と平均彩度を光源判定の要素として加えることで、光源判定の精度をさらに向上させることが可能である。

図４は照度、水平・垂直のエッジ成分の量に加え、緑ブロック平均彩度及び緑ブロック平均輝度の特徴量に基づく光源の判定結果の一例を示す図である。

上述した第１の実施形態においてはエッジ量が少なく、照度が低いものは屋外の日陰の太陽光であると判定したが、さらに緑ブロック平均輝度の情報を用いることで、上記条件に加えて緑輝度が高いものは屋内の家庭用の蛍光灯であると判定される。例えば屋内蛍光灯下で観葉植物などを接写するようなシーンなどがこの条件に分類される（緑ブロック平均彩度を使えばさらに詳細に分類される）。

同様に、第１の実施形態ではエッジ量が多く、照度が低い場合は屋内の家庭用の蛍光灯であると判断したが、緑ブロック平均輝度の情報を用いることで、上記条件に加えて緑輝度が低いものは屋外の日陰の太陽光であると判定される。例えば屋外日陰でビルなど人工物の前で植物などを撮影するようなシーンがこの条件に分類される（緑ブロック平均彩度を使えばさらに詳細に分類される）。

光源推定部３１１は、上述のようにして得た光源の判定結果をホワイトバランスゲイン決定部１１０に送る。ホワイトバランスゲイン決定部１１０では、この送られた判定結果に基づいて、信号分割部１０９から出力された輝度信号（Ｙ）、色差信号（Ｒ‐Ｙ、Ｂ‐Ｙ）から白色に近い信号を抽出する。そして、抽出した白に近い信号を、目標の白に近づけるようにホワイトバランスゲインを決定し、ホワイトバランス制御部１０６に送る。

上記の通り本第２の実施形態によれば、さらに緑の色相領域から得られる画像の特徴情報（平均彩度・平均輝度）を特徴量パラメータに加えることで、特殊な撮影シーン（例えば屋内で観葉植物を撮影する場合）などを含めたより詳細な光源推定が可能となる。このように、より的確に光源を推定することが可能になるため、ホワイトバランス補正の精度を向上させることができる。

なお、図４における各特徴パラメータの「少」「多」、「高」「低」は、各特徴パラメータについて予め設定した閾値と各特徴パラメータとを比較して判定する。また、各閾値は、様々な光源下で撮影して得た画像を基にして、統計的手法により適宜設定することができる。

なお、特定の色相として、緑成分の情報を検出する場合について説明したが、緑成分以外に赤成分や青成分の場合も考えられる。

赤成分の場合は、屋外の夕焼けと屋内の電球(ハロゲン)とを誤判別する状況がある。電球(ハロゲン)を完全に引き込もうとすると、夕焼けも引き込んでしまう。照度を使って区別しているため（夕焼けは照度が高く、電球は照度が低い）、例えば照度が高い電球などの光源下では夕焼け（屋外）と誤判別してしまい引き込まない。

□ここで、模様に関する情報として、水平・垂直エッジ成分を検出することにより、夕焼けは垂直・水平エッジ成分が少なく、電球（ハロゲン）は屋内のため垂直・水平エッジ成分が多いことにより、誤判別が防止できる。
また、青成分の場合も考えられる。青成分の場合は、屋外の空と屋外の日陰とを誤判別する状況がある。屋外日陰を完全に引き込もうとすると、空の青も引き込んでしまう。つまり、空の青を残して、日陰の引き込みはある程度許容してしまう。

□模様に関する情報として、ウェーブレット変換等を使い高周波・低周波成分情報を使う。それにより、空は低周波成分であり、屋外日陰は場所にもよるが、草木のある場所など一般的に比較的高周波成分であるとして、誤判別が防止できる。
なお、上記実施の形態において、撮像装置としてデジタルビデオカメラを想定して説明した。しかしながら、本発明の撮像装置はデジタルビデオカメラに限られるものではなく、デジタルカメラ、カメラ付き携帯端末（カメラ付き携帯電話を含む）等、被写体光学像を変換して電気的な画像信号を出力可能なものであれば、どのようなものであってもよい。

本発明の第１の実施形態における撮像装置の構成を示すブロック図である。 本発明の第１の実施形態における特徴パラメータの組み合わせによる光源推定結果を示す図である。 本発明の第２の実施形態における撮像装置の構成を示すブロック図である。 本発明の第２の実施形態における特徴パラメータの組み合わせによる光源推定結果を示す図である。 従来の光源の種類に応じた白抽出範囲を示す図である。

符号の説明

１０１ レンズ
１０２ 絞り
１０３ 撮像素子
１０４ ＡＧＣアンプ
１０５ 輝度・色信号生成部
１０６ ホワイトバランス制御部
１０７ 色差信号生成部
１０８ エンコーダ
１０９ 信号分離部
１１０ ホワイトバランスゲイン決定部
１１１、３１１ 光源推定部
１１２、３１２ 照度検出部
１１３ 情報検出部
１２０ カメラ信号処理部
１３０、３３０ カメラ制御マイコン
３１３ 色情報検出部
３１４ 緑ブロック検出部
３１５ 緑彩度検出部
３１６ 緑輝度検出部

Claims (9)

1. 撮像素子から得た被写体の画像信号から前記被写体の模様に関する情報を検出する情報検出手段と、
   前記模様に関する情報を用いて、前記被写体を照明した光源を推定する光源推定手段と、
   前記推定された光源に応じて、前記画像信号から白を示す画像信号を判断して抽出し、該抽出した画像信号が白を示す信号となるようにホワイトバランス補正を行うホワイトバランス補正手段と
   を有することを特徴とするホワイトバランス補正装置。
2. 前記模様に関する情報は、周波数成分及びエッジ成分の少なくとも一つに関する情報であることを特徴とする請求項１に記載のホワイトバランス補正装置。
3. 前記模様に関する情報は、前記被写体の画像信号のエッジ成分の量を示す情報であって、
   前記光源推定手段は、
   前記エッジ成分の量が予め設定された第１の閾値よりも多く、且つ、照度が予め設定された第１の照度よりも低い場合には、光源を第１の蛍光灯と推定し、
   前記エッジ成分の量が前記第１の閾値よりも多く、且つ、前記照度が予め設定された第２の照度よりも高い場合には、光源を前記第１の蛍光灯よりも色温度及び照度が高い第２の蛍光灯と推定し、
   前記エッジ成分の量が、前記第１の閾値よりも低い予め設定された第２の閾値よりも少なく、且つ、前記照度が予め設定された第３の照度よりも高い場合には、光源を日向の太陽光と推定し、
   前記エッジ成分の量が、前記第２の閾値よりも少なく、且つ、前記照度が予め設定された第４の照度よりも低い場合には、光源を日陰の太陽光又は曇天と推定する
   ことを特徴とする請求項１に記載のホワイトバランス補正装置。
4. 撮像素子から得た被写体の画像信号から前記被写体の模様に関する情報を検出する情報検出手段と、
   前記画像信号から、所定の色相に属する画像信号の特徴情報を検出する色情報検出手段と、
   被写体の照度を検出する照度検出手段と、
   前記模様に関する情報と、前記特徴情報と、前記照度とを用いて、前記被写体を照明した光源を推定する光源推定手段と、
   前記推定された光源に応じて、前記画像信号から白を示す画像信号を判断して抽出し、該抽出した画像信号が白を示す信号となるようにホワイトバランス補正を行うホワイトバランス補正手段と
   を有することを特徴とするホワイトバランス補正装置。
5. 前記色情報検出手段は、
   画像信号が前記所定の色相に属しているかどうかを判定する判定手段と、
   前記判定手段により判定された前記所定の色相に属している画像信号の彩度の平均値を算出する彩度検出手段と、
   前記判定手段により判定された前記所定の色相に属している画像信号の輝度の平均値を算出する輝度検出手段とを有し、
   前記特徴情報は、前記彩度検出手段により算出された彩度の平均値及び、前記輝度検出手段により算出された輝度の平均値であることを特徴とする請求項４に記載のホワイトバランス補正装置。
6. 前記模様に関する情報は、周波数成分及びエッジ成分の少なくとも一つに関する情報であることを特徴とする請求項４又は５に記載のホワイトバランス補正装置。
7. 請求項１乃至６のいずれか１項に記載のホワイトバランス補正装置を搭載したことを特徴とする撮像装置。
8. 撮像素子から得た被写体の画像信号から模様に関する情報を検出する情報検出工程と、
   前記模様に関する情報を用いて、前記被写体を照明した光源を推定する光源推定工程と、
   前記推定された光源に応じて、前記画像信号から白を示す画像信号を判断して抽出し、該抽出した画像信号が白を示す信号となるようにホワイトバランス補正を行うホワイトバランス補正工程と
   を有することを特徴とするホワイトバランス補正方法。
9. 撮像素子から得た被写体の画像信号から模様に関する情報を検出する情報検出工程と、
   前記画像信号から、所定の色相に属する画像信号の特徴情報を検出する色情報検出工程と、
   被写体の照度を検出する照度検出工程と、
   前記模様に関する情報と、前記特徴情報と、前記照度とを用いて、前記被写体を照明した光源を推定する光源推定工程と、
   前記推定された光源に応じて、前記画像信号から白を示す画像信号を判断して抽出し、該抽出した画像信号が白を示す信号となるようにホワイトバランス補正を行うホワイトバランス補正工程と
   を有することを特徴とするホワイトバランス補正方法。

Images