JP2011124955A

JP2011124955A - 画像処理方法及び画像処理装置

Info

Publication number: JP2011124955A
Application number: JP2009283434A
Authority: JP
Inventors: Yutaka Hiyama; 豊檜山
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2009-12-14
Filing date: 2009-12-14
Publication date: 2011-06-23

Abstract

【課題】異なる光源下で撮影された２つの画像で画素単位の位置合わせが不可能の場合でもこれらの画像の色合わせを高速に行うことである。
【解決手段】原画を第１、第２の光源下それぞれで撮影して得られた第１と第２の画像データにより表現される色を合わせる色合わせ処理で次のような画像処理を行う。即ち、第１と第２の画像データの主要色を判定する。次に、第１の画像データに関し、その主要色から離れた色の画素と該画素の色に近い色をもつクラスタ領域の画素を抽出する。一方、第２の画像データに関し、その主要色から離れた色の画素と該画素の色に近い色をもつクラスタ領域の画素も抽出する。そして、第１と第２の画像データそれぞれに関して抽出されたクラスタ領域を対応付け、クラスタペアを構成する。最後に、第１と第２の画像データそれぞれの主要色の対応関係と構成されたクラスタペアの対応関係とに基づき、色合わせに用いる色変換パラメータを生成する。
【選択図】図２

Description

本発明は、例えば、フラッシュ撮影画像の色をフラッシュを使用しない時に見える色に変換する画像処理方法及びその方法を用いた画像処理装置に関する。

近年、デジタル技術によってレプリカ作成が行われている。つまり、原画をデジタルカメラ等で撮影し、撮影されたデジタルデータ画像を色補正等の画像処理を行って、プリンタに出力することによって、レプリカを作成するのである。この時、照明斑を無くし原画を精細に撮影するためには、フラッシュ等を用いて撮影することが望ましい。しかし、フラッシュ光は自然光に近い分光特性をもっている為、フラッシュ撮影を行って作成したレプリカは自然光では原画に近い色となるが、蛍光灯下では違った色に見えてしまう。この様な撮影に使用した照明と異なる照明下の画像の再現方法として、フラッシュ光を使用した画像と使用してない画像の２枚の画像を連続して撮影し、フラッシュ光が有無の２枚の画像を用いて補正する方法が提案されている（特許文献１）。

特開２００３−２９６７２０号公報

しかしながら上記従来の方法では以下のような問題があった。

レプリカ作成において、原画サイズが大きい場合、解像度を上げる為に何枚かに分けて分割撮影を行い、撮影後、分割撮影された画像を合成する。このため、分割画像を合成する時に画像が歪んだり、拡大圧縮が行われる為、合成されたフラッシュ撮影した画像とフラッシュ無しで撮影した画像を平行移動するだけでは、合成画像全体を画素単位で位置合わせをすることは出来なかった。

特許文献１に開示された画像処理装置は、フラッシュ撮影画像とフラッシュ無し撮影画像が、少なくとも平行移動によって画素単位で位置が合わせられることが前提となっている。従って、分割撮影を行って、画像を合成する場合、大きなサイズの原画のレプリカ作成には適応することが出来なかった。たとえ分割合成を行わなくても、何らかの理由で、フラッシュ撮影画像とフラッシュ無し画像が画素単位で位置が合っていない場合、この装置は適応出来なかった。

また、画素単位で位置が合っていない２つの画像の対応関係を求める方法として、パターンマッチングを行う方法が考えられるが、画像の全ての領域でパターンマッチングを行うと処理時間がかかるという問題があった。

本発明は上記従来例に鑑みてなされたもので撮影光源の異なる２つの画像が画素単位で位置合わせが不可能でも、第１の光源で撮影された画像を第２の光源で撮影された画像の色に高速に色合わせできる画像処理方法と画像処理装置を提供することを目的とする。

上記目的を達成するために本発明の画像処理方法は次のような構成からなる。

即ち、原画を第１の光源下で撮影することにより得られた第１の画像データにより表現される色に前記原画を第２の光源下で撮影することにより得られた第２の画像データにより表現される色に合わせる色合わせ処理を行う画像処理方法であって、前記第１の画像データの主要色を判定する第１の判定工程と、前記第１の画像データに関し、前記第１の画像データの主要色から離れた色の画素と該画素の色に近い色をもつクラスタ領域の画素を抽出する第１の抽出工程と、前記第２の画像データの主要色を判定する第２の判定工程と、前記第２の画像データに関し、前記第２の画像データの主要色から離れた色の画素と該画素の色に近い色をもつクラスタ領域の画素を抽出する第２の抽出工程と、前記第１の抽出工程において抽出されたクラスタ領域と該クラスタ領域に対応する前記第２の抽出工程において抽出されたクラスタ領域を対応付け、クラスタペアを構成する対応付け工程と、前記第１の画像データの主要色と前記第２の画像データの主要色との対応関係と、前記対応付け工程において構成されたクラスタペアの対応関係とに基づいて、前記色合わせに用いる色変換パラメータを生成する生成工程とを有することを特徴とする。

また他の発明によれば、その方法を適用した画像処理装置を備える。

従って本発明によれば、原画を例えばフラッシュ有りと無しのような２つの光源下で撮影し、これら２つの画像の画素単位の位置合わせが困難な場合でも、ある光源下で撮影された画像の色を別の光源下で撮影された画像の色へ高速に合わせることができる。

本発明の実施例１に従う画像処理装置の構成を示すブロック図である。図１に示す画像処理装置の動作の概要を示すフローチャートである。入力したフラッシュ撮影画像の色値分布を示すヒストグラムである。抽出された色の画素位置と隣接するクラスタ領域を検出する方法を説明する図である。クラスタペアの構成方法を説明する図である。実施例１に従う主要色対応関係を生成する処理を示すフローチャートである。主要色の平均を取る領域を説明する図である。実施例２に従うエッジ検出処理を示すフローチャートである。実施例２に従う閉領域の検出方法を説明する図である。実施例２に従う閉領域検出処理を示すフローチャートである。

以下添付図面を参照して本発明の好適な実施例について、さらに具体的かつ詳細に説明する。なお、以下の実施例で開示する構成は一例に過ぎず、本発明は図示された構成に限定されるものではない。

図１は、本発明に従う実施例１の画像処理装置の構成を示すブロック図である。この装置は、ＤＶＤ、ＵＳＢメモリ、ＳＤカードなどの画像データを入出力する外部記憶装置１を装着可能である。そして、この装置は内部に、画像処理を実行するＣＰＵ２、入力画像等を表示する表示装置３、キー入力のためのキー入力部４、ＣＰＵ２で実行される画像処理プログラムを格納するＲＯＭ５を備える。さらに、この装置は、外部記憶装置１から入力した画像データを記憶したり、プログラムの実行に使用されるワーク領域として用いられるＲＡＭ６を備えている。なお、ＤＶＤ、ＵＳＢメモリ、ＳＤカードなどの外部記憶装置１にはデジタルカメラ１００などで撮影された同じ原画に対するフラッシュ撮影画像ファイルとフラッシュ無し撮影ファイルとが格納されている。

フラッシュ無し撮影ファイルは第１の光源下（例えば、蛍光灯などの観察光）で撮影された画像ファイル或いは画像データ（第１の画像データ）である。一方、フラッシュ撮影画像ファイルは第２の光源下（例えば、自然光や自然光に近い分光特性をもつフラッシュ光）で撮影された画像ファイル或いは画像データ（第２の画像データ）である。

次に、画像処理装置の動作について、図２に示すフローチャートを参照して説明する。以下の動作は画像処理装置のＣＰＵ２がＲＯＭ５に格納された画像処理プログラムを実行することにより実現される。

まず、ステップＳ１では、外部記憶装置１に記憶されたフラッシュ撮影画像ファイルを読み込むことによりフラッシュ撮影画像データを装置内に入力する。ステップＳ２ではステップＳ１と同様にしてフラッシュ無し撮影画像データを入力する。

ステップＳ３では、フラッシュ撮影画像の主要色を判定する（第１の判定）。これについては、図３に示す主要色の判定方法を模式的に示す図を参照して説明する。ここでは、入力画像の各画素は各色成分が８ビットで表現されるＲＧＢデータとし、全ての画素の色値を基に図３のようなヒストグラムを作成する。図３に示す例では、ＲＧＢ色空間の領域を１６×１６×１６に分割し、４０９６個各領域毎の画素数を表している。図３の例では、（８，９，６）の領域が最多（最頻値）となっている。従って、この領域の色を主要色とする。

これにより、各画素のＲＧＢ各成分を表現する８ビットのうちの上位４ビットだけを調べることにより、このヒストグラムを作成できる。このようにして、処理する画像データ量や処理時間を削減することができる。

ステップＳ４では、ステップＳ３で判定された主要色と、予め決められた閾値（Ｔｈ）以上の色差が有る色を抽出する。

次にステップＳ５では、抽出された色の画素位置と隣接するクラスタ領域を検出する（第１の抽出）。これについては、図４を参照してその検出方法を説明する。図４（ａ）において、注目画素５０１の周辺画素について、注目画素の色値との色差が予め決められた閾値Ｔｈ１未満かを調べる。なお、図４（ａ）の例では、斜線部が色差Ｔｈ１未満の領域で、白抜きの領域が、色差Ｔｈ１以上の領域を示している。

この実施例では、図４（ｂ）に示すように注目画素５０１に隣接する周辺８画素からなる黒く塗りつぶされた領域を調べる。その次に、図４（ｃ）に示すように、上記周辺８画素を囲む１６画素からなる黒く塗りつぶされた領域を調べる。このようにして調査対象となる周辺画素を拡大してゆきながら、調査を繰り返し行い、調査領域の全ての画素が、色差Ｔｈ１以上になるまで、調査を続ける。図４の例では、最外郭まで調査が行われると調査領域の全ての画素が色差Ｔｈ１以上となる。ここで探索を終了して、図４（ａ）に示した矩形領域（１１×１１画素）をクラスタ領域として記憶する。このような調査をステップＳ４では抽出された全ての色に対して行うが、図４の注目画素以外の斜線部の画素については、次の色の調査からは除外する。

このようにして、フラッシュ撮影画像に関し、主要色からは離れた（異なる）色の画素（特徴画素）とその画素の色に近い領域（クラスタ領域）の画素だけが処理対象として抽出される。

ステップＳ６で、フラッシュ無し撮影画像の主要色を判定する（第２の判定）。その判定方法は、ステップＳ３で説明したフラッシュ撮影画像の場合と同じである。従って、フラッシュ無し撮影画像に関しても、処理する画像データ量を削減することができる。さらにステップＳ７では、フラッシュ無し撮影画像の主要色と異なる色を抽出する。その抽出方法は、ステップＳ４で説明したフラッシュ撮影画像の場合と同じである。さらに、ステップＳ８では、フラッシュ無し撮影画像の抽出された色の画素位置と隣接するクラスタ領域を検出する（第２の抽出）。その検出方法は、ステップＳ５で説明したフラッシュ撮影画像の場合と同じである。このようにしてフラッシュ撮影画像と同様に検出されたクラスタ領域を記憶する。

このようにして、フラッシュ無し撮影画像に関し、主要色からは離れた（異なる）色の画素（特徴画素）とその画素の色に近い色の領域（クラスタ領域）の画素だけが処理対象として抽出される。

次にステップＳ９で、ステップＳ５で検出されたクラスタ領域に、その領域に対応するステップＳ８で検出されたクラスタ領域を対応付け、クラスタペアを構成するかどうかを判定する。これについては、図５を参照してその構成方法を説明する。

ここでは、２つのクラスタのクラスタ内の画素数、クラスタの幅、クラスタの高さ、クラスタの中心座標を用いて、２つのクラスタが互いに対応するクラスタペアを構成するかどうかを判定する。無論、これらの２つ以上を組み合わせて総合的に判定しても良い。クラスタ内の画素数は、図５に示す斜線部の画素数で定義する。クラスタの幅は図５に示す斜線領域の横軸方向で最も長い部分と定義する。即ち、図５に示す例では画素６０４から画素６０３までの画素数である。同様にクラスタの高さは図５に示す斜線領域の縦軸方向で、最も長い部分と定義する。図５に示す例では、画素６０１から画素６０５までの画素数である。クラスタの中心座標は、幅を定義する時に使用された画素群と高さを定義する時に使用された画素群との交点部分の画素と定義する。図５に示す例では、画素６０２である。この対応関係は、各クラスタを特徴付けるクラスタ内の画素数、クラスタの幅、クラスタの高さ、クラスタの中心座標などのパラメータの比較によって判断される。クラスタペアと判定されたクラスタについて、色差Ｔｈ１未満の画素、即ち、図４（ａ）の例では、その斜線部に含まれる画素の平均値を、フラッシュ撮影画像とフラッシュ無し撮影画像について算出し、対応関係を作成する。

ステップＳ１０では、ステップＳ３で判定されたフラッシュ撮影画像についての主要色とステップＳ６で判定されたフラッシュ無し撮影画像についての主要色との対応関係を作成する。これについては、図６に示すフローチャートを参照して説明する。

まず、ステップＳ６１では、ステップＳ９でクラスタペアと判定されたフラッシュ撮影画像とフラッシュ無し撮影画像のクラスタの中心座標の位置ずれを算出し、全てのクラスタペアの中心座標の位置ずれの平均値を算出する。

ステップＳ６２では、ステップＳ６１で算出された位置ずれの平均値だけフラッシュ撮影画像の画素の座標を移動する。これにより、フラッシュ撮影画像とフラッシュ無し撮影画像の対応画素の位置座標を大まかに合わせることができる。

ステップＳ６３では、フラッシュ撮影画像から主要色をサンプリングする。全体から満遍なくサンプリングする為に、座標系の原点（０，０）の画素から縦横共に１００画素毎にサンプリングするものとする。無論、本発明は１００画素というサンプリング間隔の値に限定されるものではなく、他の値を用いることができる。サンプリングした画素が、主要色で無い場合は、処理対象から除外する。

ステップＳ６４では、図７に示すようにサンプリングされた主要色の注目画素の周辺５画素分の色値の平均値を算出する。ここで、周辺５画素とは、注目画素が上下左右に最大で５画素分の距離がある画素のことを指し、図７において、注目画素を黒で塗りつぶされた画素であるとすれば、その周辺５画素は合計、１２１画素となる。この実施例では、その１２１画素の平均値を算出する。この時、主要色で無い画素があった場合は、処理対象から除外される。

ステップＳ６５では、ステップＳ６３でサンプリングされた画素と同じ座標のフラッシュ無し画像の画素の周辺５画素分の色値の平均値を算出する。この時、フラッシュ無し画像において、主要色でない画素があった場合は、処理対象から除外する。

ステップＳ６６では、ステップＳ６４とステップＳ６５で算出された色値の平均値の対応関係で主要色の対応関係を作成する。ステップＳ６４〜ステップＳ６６までの処理をステップＳ６３でサンプリングされた画素全てで行い、対応関係を作成する。

次に説明は図２に戻ると、ステップＳ１１で、ステップＳ１０で作成された主要色の対応関係とステップＳ９で判定されたクラスタペアの対応関係を基に色合わせに用いる色変換パラメータを生成する。ここで、色変換パラメータの生成方法について説明する。フラッシュ撮影画像の色からフラッシュ無し撮影画像への変換式が、式１の関係が成り立っているものとする。

┌ ┐ ┌ ┐┌ ┐
｜Ｒ｜｜Ａ００Ａ０１Ａ０２｜｜Ｒ０｜
｜｜｜｜｜｜
｜Ｇ｜＝｜Ａ１０Ａ１１Ａ１２｜｜Ｇ０｜ …… （１）
｜｜｜｜｜｜
｜Ｂ｜｜Ａ２０Ａ２１Ａ２２｜｜Ｂ０｜
└ ┘ └ ┘└ ┘

ステップＳ９〜Ｓ１０で作成された色値の対応関係が成り立つように変換マトリックスの各要素を最小２乗法で求める。この実施例では、３×３のマトリクスを用いたが、本発明はこれに限定されるものではなく、他のサイズのマトリクスを用いても良い。

従って以上説明した実施例に従えば、フラッシュ撮影画像とフラッシュ無し撮影画像からより少ない量のデータを用いて主要色を求め、さらに、その主要色から離れた色の画素とその画素の色に近い色の領域だけが処理対象として抽出される。これにより、主要色を中心とし、離散的な色をもつ画素のデータだけを用いてフラッシュ撮影画像とフラッシュ無し撮影画像の対応画素の位置を大まかながらも合わせることができる。また、主要色のサンプリングも離散的に行われるので、対象画像全面から均等に位置合わせに必要なデータを得ることができる。

従って、従来と比較して、処理データ量が少ないためにより高速に処理が実行されるとともに、対象画像全面から均等に位置合わせに必要な処理データを得られるので、偏りのない良好な位置合わせを実現することができる。

ここでは、実施例１とは異なるエッジ検出によるクラスタ領域の検出、及びエッジ画素で囲まれた閉領域を検出する方法について説明する。

図８はエッジ検出処理を示すフローチャートである。

まず、ステップＳ８１では特徴画素として検出された全画素に対してＣＩＥＬＡＢ値を求める。原画の画像データがＲＧＢデータである場合、公知の計算式に基づきＲＧＢ値からＣＩＥＬＡＢ値（Ｌ＊，ａ＊，ｂ＊）を算出する。

ステップＳ８２〜ステップＳ８６は、特徴画素として検出された個々の画素に対する処理である。

ステップＳ８２では、特徴画素として検出された一つの注目画素に対してその周辺４画素が同じく特徴画素であるかどうかを調べる。一つでも特徴画素以外の画素が周辺に存在した場合、処理はステップＳ８７に進み、その画素はエッジ画素であると見なす。これに対して、全ての周辺画素が特徴画素であれば処理はステップＳ８３に進む。

ステップＳ８３では、特徴画素として検出された個々の画素夫々に対してその周辺４画素夫々に対して色差ｄＥを式（２）を用いて算出する。

ｄＥ＝｛(Ｌ₁−Ｌ₀)²＋(ａ₁−ａ₀)²＋(ｂ₁−ｂ₀)²｝^1/2 ……（２）
ここで、（Ｌ₀，ａ₀，ｂ₀）と（Ｌ₁，ａ₁，ｂ₁）は比較する２つの画素のＣＩＥＬＡＢ値である。

ステップＳ８４では、周辺４画素との色差のうち最も大きな色差を、周辺との最大色差ｄＥmaxとして選択する。ステップＳ８５では、最大色差と予め設定した閾値を比較し、最大色差が閾値より大きければ処理はステップＳ８７へ進み、そうでなければステップＳ８６へ進む。閾値は画像の特性によって最適な値が異なるが、通常５〜１０程度を指定すると好適な結果が得られることが多い。

ステップＳ８６では注目画素は非エッジとして、その判定結果をメモリ（ＲＡＭ６）に格納し、その後処理はステップＳ８８へ進む。ステップＳ８７では注目画素はエッジとして、その判定結果をメモリ（ＲＡＭ６）に格納する。その後、処理はステップＳ８８へ進む。以上で注目画素に対するエッジ判定が完了する。

次に、ステップＳ８８では、特徴画素として検出された全画素に対してエッジ判定が完了したかどうかを判断し、未判定の画素が残っていれば、処理はステップＳ８２に戻り、残りの画素の判定を続ける。これに対して、全ての画素に対する判定が完了したと判断されたなら、エッジ画素の検出は完了する。

なお、この実施例ではより正確性を期すためにＣＩＥＬＡＢ値から色差を算出した。より高速な計算が求められる場合には、単純に２つの画素のＲＧＢ値に対してそのままユーグリット距離（ＲＧＢ空間での距離）を求め、その距離が所定の閾値より大きいかどうかでエッジを判定するといった簡略化した方法を実行しても良い。

次に、エッジ画素で囲まれた閉領域を求める方法について説明する。

ここで、図９に示すように、画像の左上を起点にＸ方向（横方向）を主走査方向、Ｙ方向（縦方向）を副走査方向として、各画素に対して次の処理を行う。

特徴画素でない画素には識別ＩＤ＝０を割り振る。これに対して、特徴画素であるがエッジ画素と判定された画素には識別ＩＤ＝−１を割り振る。特徴画素であり非エッジ画素と判定された画素に対しては、最初に現れた画素に対しては識別ＩＤ＝１を割り振る。１以上のＩＤは閉領域の候補画素を表す。２回目以降に現れた画素に対しては、図１０に示すフローチャートの処理に基づき識別ＩＤを割り振る。

以下、図１０に示す識別ＩＤ割り振り処理について説明する。

ステップＳ１０１では、注目画素の上画素と左画素が共にエッジであるかどうかを調べる。ここで、共にエッジであれば、処理はステップＳ１０５に進み、この画素は新しい候補画素と見なされ、識別ＩＤとして過去に割り当てた識別ＩＤの最大値に１を加えた値を割り当てる。これに対して、２つの画素の少なくともどちらかがエッジでなければ、処理はステップＳ１０２に進む。

ステップＳ１０２では、注目画素の上画素と左画素のどちらかがエッジであるかどうかを調べる。ここで、２つの画素のどちらかがエッジであれば、注目画素はエッジでない方の画素と同じ閉領域を構成すると見なし、処理はステップＳ１０６に進み、エッジでない方の画素の識別ＩＤをそのまま割り当てる。これに対して、２つの画素のどちらもエッジでなければ、処理はステップＳ１０３に進む。

ステップＳ１０３では、上画素と左画素のＩＤが同じであるかどうかを調べる。ここで２つの画素のＩＤが同じであれば注目画素は上画素および左画素と同じ閉領域を構成すると見なし、処理はステップＳ１０７に進み、それらの識別ＩＤをそのまま割り当てる。これに対して、２つのＩＤが異なる場合には、処理はステップＳ１０４に進む。

処理がステップＳ１０４に達した場合、上画素の候補領域と、左画素の候補領域が注目画素を接点に接していたことになる為、一方の候補領域のＩＤをもう一方の候補領域のＩＤに全て置換することで同じ候補領域とする。即ち、これまで１以上のＩＤを割り振った画素を全て調べ、大きい方の識別ＩＤを有する画素のＩＤを全て小さい方の識別ＩＤに置換する。その後、注目画素自体にも小さい方の識別ＩＤを割り当てる。

上記ルールを適用しながら画像全体の画素を調べ終えると、１以上のＩＤが割り当てられた画素は全て閉領域を構成する画素となる。同じＩＤが割り当てられた画素が一つの閉領域を構成することになる。

以上、エッジ検出に基づき検出された全ての閉領域が、クラスタ領域となる。

以上説明したようにこの実施例によれば、クラスタ領域として抽出された画像の部分からフラッシュ撮影画像とフラッシュ無し撮影画像の対応関係を作成することができる。このようにすることでも、より少ない量の画像データから対応関係が作成されるので、実施例１と同様に高速に処理が実行される。

また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或は装置に供給し、そのシステム或は装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。

Claims

原画を第１の光源下で撮影することにより得られた第１の画像データにより表現される色に前記原画を第２の光源下で撮影することにより得られた第２の画像データにより表現される色に合わせる色合わせ処理を行う画像処理方法であって、
前記第１の画像データの主要色を判定する第１の判定工程と、
前記第１の画像データに関し、前記第１の画像データの主要色から離れた色の画素と該画素の色に近い色をもつクラスタ領域の画素を抽出する第１の抽出工程と、
前記第２の画像データの主要色を判定する第２の判定工程と、
前記第２の画像データに関し、前記第２の画像データの主要色から離れた色の画素と該画素の色に近い色をもつクラスタ領域の画素を抽出する第２の抽出工程と、
前記第１の抽出工程において抽出されたクラスタ領域と該クラスタ領域に対応する前記第２の抽出工程において抽出されたクラスタ領域を対応付け、クラスタペアを構成する対応付け工程と、
前記第１の画像データの主要色と前記第２の画像データの主要色との対応関係と、前記対応付け工程において構成されたクラスタペアの対応関係とに基づいて、前記色合わせに用いる色変換パラメータを生成する生成工程とを有することを特徴とする画像処理方法。
前記第１の抽出工程は、前記第１の抽出工程において抽出された領域に対してエッジ検出処理を適用し、該エッジ検出処理により検出されたエッジに囲まれた閉領域をクラスタとして抽出し、
前記第２の抽出工程は、前記第２の抽出工程において抽出された領域に対して前記エッジ検出処理を適用し、該エッジ検出処理により検出されたエッジに囲まれた閉領域をクラスタとして抽出することを特徴とする請求項１に記載の画像処理方法。
前記対応付け工程は、前記第１の抽出工程において抽出されたクラスタ領域と前記第２の抽出工程において抽出されたクラスタ領域において、前記クラスタの中心座標、前記クラスタの画素数、前記クラスタの幅、前記クラスタの高さのうち少なくとも一つ以上に基づき、クラスタペアを構成するかどうかを判定することを特徴とする請求項１に記載の画像処理方法。
前記第１の光源はフラッシュ光であり、
前記第２の光源は観察光であることを特徴とする請求項１乃至３のいずれか１項に記載の画像処理方法。
原画を第１の光源下で撮影することにより得られた第１の画像データにより表現される色に前記原画を第２の光源下で撮影することにより得られた第２の画像データにより表現される色に合わせる色合わせ処理を行う画像処理装置であって、
前記第１の画像データの主要色を判定する第１の判定手段と、
前記第１の画像データに関し、前記第１の画像データの主要色から離れた色の画素と該画素の色に近い色をもつクラスタ領域の画素を抽出する第１の抽出手段と、
前記第２の画像データの主要色を判定する第２の判定手段と、
前記第２の画像データに関し、前記第２の画像データの主要色から離れた色の画素と該画素の色に近い色をもつクラスタ領域の画素を抽出する第２の抽出手段と、
前記第１の抽出手段によって抽出されたクラスタ領域と該クラスタ領域に対応する前記第２の抽出手段によって抽出されたクラスタ領域を対応付け、クラスタペアを構成する対応付け手段と、
前記第１の画像データの主要色と前記第２の画像データの主要色との対応関係と、前記対応付け手段によって構成されたクラスタペアの対応関係とに基づいて、前記色合わせに用いる色変換パラメータを生成する生成手段とを有することを特徴とする画像処理装置。
コンピュータを請求項５に記載の画像処理装置の各手段として機能させるためのプログラム。