JP4056185B2

JP4056185B2 - カラー映像処理装置及び方法

Info

Publication number: JP4056185B2
Application number: JP29653899A
Authority: JP
Inventors: 性徳李; 昌容金; 斗植朴; 亮錫徐; 正 ▲樺▼ 金
Original assignee: Samsung Electronics Co Ltd
Current assignee: Samsung Electronics Co Ltd
Priority date: 1998-10-22
Filing date: 1999-10-19
Publication date: 2008-03-05
Anticipated expiration: 2019-10-19
Also published as: KR100278642B1; KR20000026693A; JP2000138948A; US6639628B1

Description

【発明の属する技術分野】
【０００１】
本発明は映像処理装置及び方法に係り、特にカラー映像処理装置及び方法に関する。
【従来の技術】
【０００２】
カメラのようなカラー映像入力装置を使用して場面を撮影し、撮影された映像データをモニターのような映像出力装置を用いて再現する時や、インターネットからダウンロードした映像データをディスプレーしようとする場合、再現される映像の色を元の場面映像の色と一致させることがカラー映像処理分野で重要な問題である。このような問題を解決するためには、被写体を照射する照明(以下、場面照明と称する)に対する照明色を求めて映像入力装置の基準白色点をそれに一致させることと、再現する映像が有する白色点と再現する映像出力装置のディスプレー色温度との間の光源色処理問題が核心である。
【０００３】
しかし、ほとんどのカメラは一つまたは二つの基準照明を使用して全ての回路が調整されるため、基準照明以外の照明下で被写体を撮影する場合、映像出力装置で再現される映像は場面映像と異なる色に示される問題があり、カメラの基準照明と被写体の場面照明との間の照明色または色温度の差が大きいほど再現された映像の色と被写体の元来色との間の色差がさらに大きくなるという問題がある。
【０００４】
また、被写体の照明がカメラの基準照明と一致したとしても、カメラによって撮影された映像をディスプレーするモニターの陰極線管色温度と被写体に照射される照明色に差がある場合、その色温度差に該当する程度の色変形を誘発する問題がある。場面映像の色と再現映像の色を一致させるための従来の一般的な方法で、使用者によりモニター上で映像取扱ソフトウェア(例: Adobe社のPhotoshop)でRed、Green、Blue(以下、RGBと称する)または色相、輝度、彩度の三原色の量を調整して映像が変更できる。
【０００５】
しかし、熟練者ではなく一般の使用者が二つの映像間の色一致のための最適のRGB比率値を求めるためには長時間と努力が要求される短所があり、特に光源間の不均衡により現れる問題を色相などの調整を通じて克服し難い。二つの映像の色一致に核心になる場面照明の照明色と映像入力装置の白色均衡を一致させる方法がカメラ分野で一部適用されている。
【０００６】
このような方法としてはたとえば光学センサーを用いる方法があるが、これは米国特許第４,６１６,２５３号と第４,８０５,０１０号に示されている。前記資料では、被写体を照射する照明色成分を検出する目的でカメラ装置に光学センサーを内蔵したりまたは独立的な装置として使用して照明から放射される照明色の色座標値を求め、その色座標値をカメラの白色として設定して最適の場面映像を得る。
【０００７】
しかし、このような方法は、光検出器を使用する場合、付加的なハードウェアの付着に従う費用負担の外にもハードウェアで直接対応できない遠距離撮影で得られる映像に適用するには問題がある。また、カメラ装置が白色調節できる高級型であるべきという制限が付加される。さらに、予め定義されたカメラではなく他種の映像入力装置から作られたカラー映像は色一致することができないという短所がある。
【０００８】
映像入力装置の種類とは関係なく、照明色推定の問題を解決するための従来の方法が米国特許第４,６８５,０７１号に示されている。前記方法はカラー映像自体から照明色を検出する。即ち、前記方法は映像から鏡のように反射する光(specularly reflected light＝Highlight)を用いて明るさに独立的な色変化を検出するために映像を色度座標を有する色座標空間上に投影し、彩度と色相が最も急に変わる色境界を検出し、彩度の変化による色境界周囲のデータ集合を使用して照明色を検出する。この場合、彩度の変化による境界か、色相の変化による境界かを区別するために色境界の両辺にあるデータ集合を収集して直線近似し、両辺から収集されたデータ集合から求めた直線の傾斜が同じ場合、彩度による境界で決定し、照明色検出のためのデータ集合とし、このような彩度の変化による境界点周囲の多くのデータ集合から得られた直線の交点の経路から照明色として決定する変数を求める。
【０００９】
しかし、前記方法は遂行時間が長い短所がある。また各境界点データから両辺のデータ収集が難しいだけでなく、境界点単位で処理することによって多くの境界点から両辺のデータを収集し、直線近似して比較、判断する作業が反復されるべき短所がある。また、色度図上で照明色の計算のためにいくつかの有効なハイライトが存在すべき問題がある。
【００１０】
他の従来の方法が米国特許第５,４９５,４２８号に示されている。前記方法は照明色のはじめになる直線を探すために映像データを色度空間ヒストグラム上に投影させ、色度空間上で各々のクラスターに対する主軸直線を計算し、直線が収斂する位置の色度値を求める。しかし、前記方法は複雑な境界変化検出方法を使用しないが、その代りに全てのクラスターを対象として計算を遂行することによってやはり長時間がかかり、映像内の物体の色が似ている場合、クラスターの固まり現象が発生して正確性が落ち、また映像内に強いハイライト情報が存在してこそ安全性のある照明色の抽出ができるという短所がある。
【００１１】
図８は、映像の生成及び再現過程を示す一般の映像処理システムの構成を示すブロック図である。図８を参照すれば、任意の照明により照射される人間と木がある場面は、例えば色温度５０００Kを有する任意の基準照明で設定されたカメラで撮影でき、また例えば色温度７５００Kを有するさらに他の任意の基準照明で設定されたカメラにより撮影できる。また、例えば銀塩写真の形態に印画された映像が、例えば色温度２８００Kの固有の照明設定を有するイメージスキャナーにより読取られる場合もある。また、入力映像は映像入力装置が定義できないインターネット上でダウンロードされた映像である場合もある。上記の方法により得られた映像データは、コンピュータまたは映像処理装置により任意の映像出力装置でディスプレーされる。この場合、モニターもその色温度設定が異なったりする。即ち、場面映像は一つであるが、映像入力装置との照明色の差によって、そして任意の光源を有する映像データとモニターのディスプレー色温度差によりいろいろな他の色を有する多くの映像が現れる。
【発明が解決しようとする課題】
【００１２】
本発明が達成しようとする技術的課題は、映像の構成要素、映像入力装置種類とは関係なくて安定的に場面映像と再現映像の色を一致させうるカラー映像処理装置を提供することである。本発明が達成しようとする他の技術的な課題は、前記カラー映像処理装置内で具現されるカラー映像処理方法を提供することである。
【課題を解決するための手段】
【００１３】
前記課題を達成するために、本発明によるカラー映像処理装置は、映像入力装置から出力される第１RGB信号を入力し、映像処理を遂行してディスプレー手段に出力するカラー映像処理装置において、入力されたRGB信号を相異なる所定の複数のN個の照明色を使用してRGB空間上の信号を所定の色空間上の信号に光源変換する手段と、所定の色空間上の信号を、ディスプレー手段に対する所定の複数のM個の色温度を使用してRGB空間上に光源変換する手段とを含み、N×M個の映像信号を生成し、出力することを特徴とする。
【００１４】
また、入力されたRGB信号をバッファリングして出力する第１フレームメモリ手段と、
前記第１フレームメモリ手段から出力されたRGB信号を入力してダウンサンプリングすることによってRGB信号を出力する映像サンプリング部と、ダウンサンプリングされたRGB信号を相異なる所定のN個の照明色を用いて光源変換を遂行し、出力装置の色温度を以って光源変換を遂行して光源変換されたRGB信号を出力する色変換部と、光源変換されたRGB信号をバッファリングして出力する第２フレームメモリ手段とをさらに含むことを特徴とする。
【００１５】
また、前記色変換部は、所定のN個の照明色を用いてRGB空間上の信号を所定の色空間上の信号に光源変換する行列を計算する並列接続されたN個の行列演算器を具備する第１演算部を含むことが望ましい。
【００１６】
また、前記色変換部は、ディスプレー手段に対する所定のM個の色温度を使用して所定の色空間上の信号をRGB空間上の信号に光源変換するための行列を計算する並列接続されたM個の行列演算器を具備する第２演算部をさらに含むことが望ましい。
【００１７】
また、前記色変換部は、所定のN個の照明色を使用してRGB空間上の信号を所定の色空間上の信号に光源変換する行列に関する情報を貯蔵し、所定の第１制御信号に応答して前記情報を出力する第１メモリ、及び前記第１メモリから出力された前記情報に従って行列演算を遂行する第１行列演算部を具備する第１演算部を含むことが望ましい。
【００１８】
また、前記色変換部は、所定の色空間上の信号を、ディスプレー手段に対する所定のM個の色温度を使用してRGB空間上に光源変換する行列に関する情報を貯蔵し、所定の第２制御信号に応答して前記情報を供給する第２メモリ、及び前記第２メモリから出力された前記情報に従って行列演算を遂行する第２行列演算部を具備する第２演算部をさらに含むことが望ましい。
【００１９】
また、前記所定の色空間は標準色空間であることが望ましい。また、前記所定の色空間は、変換された信号の大きさが以前のRGB信号の大きさと線形的な関係を有する色空間であることがさらに望ましい。代案として、前記所定の色空間は、CIEXYZ、CIEUVW色空間、又はuv色度座標空間、若しくはY、R-Y、B-Y座標を適用した色空間よりなる、国際照明委員会が勧告する標準色空間群の中で選択されたことでもよい。また、前記色変換部の所定のN個の照明色は、人間の視覚で区別し易い差を持って日常で頻繁に用いられる２８００K、４３００K、５０００K、５５００K、６５００K、又は７５００Kの色温度を含む群から少なくとも一つ以上を含むことが望ましい。
【００２０】
また、前記色変換部は、照明の色温度を知っている場合には
【００２１】
【数２】

を使用して光源変換を遂行することが望ましい。
【００２２】
前記他の課題を達成するために、本発明によるカラー映像処理方法は、映像入力装置から出力されるRGB空間上の信号を映像処理してディスプレー手段に出力するカラー映像処理方法において、(a-１)所定の複数のN個の照明色を使用してRGB空間上の信号を所定の色空間上の信号に光源変換する段階と、(a-２)所定の色空間上の信号をディスプレー手段に対する所定の複数のM個の色温度を使用してRGB空間上に光源変換し、N×M個の映像信号を生成する段階と、(b)光源変換されたN×M個の映像信号をディスプレー手段に映像として示す段階と、(c)ディスプレー手段に示されたN×M個の映像の中で視感的に最適の映像を選択する段階と、(d)(c)段階で選択した映像に当る照明色を最適照明色として選択する段階とを含むことを特徴とする。
【００２３】
また、前記(a)段階の所定のN個の照明色は、人間の視覚で区別し易い差を持って日常で頻繁に用いられる、概略２８００K、４３００K、５０００K、５５００K、６５００K、又は７５００Kの色温度よりなる群から選択された少なくとも一つ以上の照明色を含むことが望ましい。また、前記(a)段階で前記所定の色空間は、変換された信号の大きさが以前のRGB信号の大きさと線形的な関係を有する色空間であることが望ましい。代案として、前記(a)段階で前記所定の色空間は、CIEXYZ、CIEUVW色空間、又はuv色度座標空間、若しくはY、R-Y、B-Y座標を適用した色空間よりなる、国際照明委員会が勧告する標準色空間群の中で選択されたことが望ましい。
【発明の実施の形態】
【００２４】
以下、添付した図面を参照して本発明に係る望ましい実施例を説明する。図１には、本発明の実施例に係るカラー映像処理装置の主要部分に対する構成を示した。
【００２５】
図１を参照すれば、本発明によるカラー映像処理装置２０は、第１フレームメモリ２０２、映像サンプリング部２０４、色変換部２０６、及び第２フレームメモリ２０８を具備する。
【００２６】
このようなカラー映像処理装置２０の動作を説明すれば、先に、第１フレームメモリ２０２は、入力された三原色の第１RGB信号Rin、Gin、Binをバッファリングして出力する。映像サンプリング部２０４は、前記第１フレームメモリ２０２から出力された第１RGB信号を入力してダウンサンプリングすることによって第２RGB信号を出力する。
【００２７】
例えば、入力された第１RGB信号の映像空間解像度が６４０(幅)×４８０(高さ)で、カラーモニター２１０の空間解像度が１２８０(幅)×１０２４(高さ)とし、６または１８個の比較映像をカラーモニター２１０上にディスプレーすれば、映像サンプリング部２０４のダウンサンプリング比は、前記空間解像度を考慮してマイコン(図示せず)からの制御信号Cont#addr#Aに従って決定される。言い換えれば、映像サンプリング部２０４は入力された映像の空間解像度を出力装置に合うように変換して色変換部２０６に出力する。映像サンプリング部２０４はまた、場合によってマイコンの制御下でダウンサンプリングを遂行せずに映像を通過させる機能を遂行することもできる。
【００２８】
色変換部２０６は、ダウンサンプリングされて出力された第２RGB信号を後述される方法で選択された６個の代表照明色を使用して光源変換し、光源変換された信号をカラーモニター２１０に対する３つの代表色温度を使用して第３RGB信号で光源変換を遂行する。第２フレームメモリ２０８はマイコンからの第２制御信号Cont#addr#Bに応答して変換された第３RGB信号を順次に貯蔵してカラーモニター２１０に出力する。図２には色変換部２０６の詳細な構成を示した。
【００２９】
図２を参照すれば、色変換部２０６は第１演算部３２と第２演算部３４とを具備する。第１演算部３２は６個の行列演算器３２１、３２２、３２３、３２４、３２５、３２６を具備する。行列演算器３２１、３２２、３２３、３２４、３２５、３２６は並列に接続される。第２演算部３４は３個の行列演算器３４１、３４２、３４３を具備する。行列演算器３４１、３４２、３４３は並列に接続される。
【００３０】
６個の行列演算器３２１、３２２、３２３、３２４、３２５、３２６は各々異なる６個の代表照明色を使用して入力されたRGB空間上の信号をXYZ空間上の信号に光源変換する行列を各々計算する。３個の行列演算器３４１、３４２、３４３はディスプレー手段の各々異なる３個の色温度を使用してXYZ空間上の信号をRGB空間上の信号に変換する行列を各々計算する。
【００３１】
行列演算器３２１、３２２、３２３、３２４、３２５、３２６と行列演算器３４１、３４２、３４３は、マイクロコンピュータ(図示せず)からの制御信号(Cont)に応答して行列演算を遂行する。行列演算器３２１、３２２、３２３、３２４、３２５、３２６は入力されたRGB空間上の信号をXYZ空間上の信号に光源変換するための行列演算を遂行する時、６個の照明色に該当する相異なる行列係数値を使用する。
【００３２】
また、各行列演算器３４１、３４２、３４３は、入力されたXYZ空間上の信号をRGB空間上の信号に光源変換するための行列演算を遂行する時、３個の色温度に該当する相異なる行列係数値を使用する。結果的に、ディスプレー上には６個の照明色と３個のディスプレーに対する色温度を組合した総１８個の映像がディスプレーされる。使用者は１８個の映像中で視覚的に適合した映像を選択する。
【００３３】
これにより、該当映像を光源変換するのに使われた場面映像の照明色とディスプレー手段の色温度が最適照明色及び色温度として決定される。以上、本発明によるカラー映像処理装置の色変換部２０６では、RGB色空間とCIEXYZ色空間との間の光源変換を遂行することを例として説明した。
【００３４】
しかし、これに限定されず、色変換部２０６が入力されたRGB空間上の信号を所定の色空間上の信号に変換するとする時、前記所定の色空間は国際照明委員会が勧告する他の標準色空間でありうる。前記所定の色空間は、変換された色空間上の信号の大きさが変換前のRGB空間上の信号の大きさと線形的な関係を有することができる色空間であることがさらに望ましい。このような色空間としてCIEUVW色空間がある。
【００３５】
また、前記所定の色空間は、カラー映像分野の産業で広く用いられるY、R-Y、B-Y座標を適用した色空間でありうる。代案として、前記色変換部は必要によってRGB空間とrg色度座標空間との間の光源変換を遂行することもできる。一方、各行列別に一つずつの行列演算器を使用して計算するように具現することは望ましくない。
【００３６】
図３には色変換部２０６の実際的な構成の一例を示した。図３を参照すれば、色変換部２０６は第１演算部４２と第２演算部４４を具備する。
【００３７】
第１演算部４２は第１メモリ４２２と第１行列演算部４２４を具備する。動作を説明すれば、第１行列演算部４２４に必要な代表照明色別行列係数はマイコン制御信号Cont#Cに応答して第１メモリ４２２からダウンロードされて設定され、第２行列演算部４４４に必要な代表照明色別行列係数はマイコン制御信号Cont#Dに応答して第２メモリ４４２からダウンロードされて設定される。これにより、第１行列演算部４２はRGBからXYZへの信号変換を、第２行列演算部４４はXYZからRGBへの信号変換を遂行する。
【００３８】
次に、どのように代表照明を選択し、光源変換を遂行するかに対して詳細に説明する。
【００３９】
人間の目は照明変化に従う被写体の色変化に鈍感な色恒常性(Color Constancy)を有するということは一般的に知られた理論である。反面、カメラのようなカラー映像入力装置の場合は、被写体を照射する照明の分光スペクトル(以下、照明色)に従って三刺激値間の比率が大きく変わる。映像で色の表現は:
【００４０】
【数３】

のようにRGBまたはCIEXYZ(以下、XYZ)のような三刺激値で表現される。
【００４１】
即ち、物体表面の分光反射度S(λ)と物体を照射する照明の分光スペクトルE(λ)、及びカメラなどのセンサー分光特性r_k(λ)の掛け算の和で表現される。従って、数式２の照明色のような照明要素は再現色に影響を及ぼす主要要素として作用される。
【００４２】
図４には、本発明の実施例に係るカラー映像処理装置に適用した代表照明のスペクトル分布を示した。図４を参照すれば、本発明の実施例に係るカラー映像処理装置に使われた照明は、周辺で主に用いられる、例えば２８００Kの色温度を有する白熱灯、４３００Kの色温度を有する蛍光灯、並びに各々５０００K、５５００K、６５００K、及び７５００Kの色温度を有する４種の太陽光で総６種類である。
【００４３】
図５には、前記代表照明の色温度を色度図で示した。図５を参照すれば、このような６種類の照明色は色座標上で相異なる位置にあることが分かり、これは照明の色成分が相異なることを意味する。
【００４４】
【表１】

表１には、場面照明として用いられる６種の照明に対する代表的な色温度対XYZ＆xy座標値の関係を示した。
【００４５】
例えば、色温度２８００Kの白熱灯と色温度７５００Kの太陽光熱でXYZ値を比較すれば、X値は１０%以上、Z値は７０%以上の差があることが分かる。一方、RGB信号をXYZ信号に変換するためには、RGB三原色のXYZ値と照明のXYZ値で計算された伝達関数行列Aが定義されるべきである。
【００４６】
【数４】

RGB三原色のXYZ値は、カメラあるいはイメージスキャナーごとに固有なフィルターの設計があるので値は各々若干異なる場合があるが、XYZ分光感度と類似の分光感度を有するフィルターを設計することが望ましいので、例えば現在業界標準のCCIR ６０１あるいはCCIR ７０９のRGB三原色の中で一つを使用することが望ましい。
【００４７】
【表２】

表２で白色光(white)は、照明色であって場面照明を意味し、場面の照明色は変化が多くてまた変化量も大きい場合があるので数式２が定義できない。
【００４８】
しかし、ほとんどの照明色は本発明で使用した６個の代表照明色中いずれか一つで定義できる。この照明色の個数は必要によって増加または減少させうる。２８００Kの色温度を有する白熱灯を照明として使用した場合、数式４は数式５のように示すことができる。
【００４９】
【数５】

数式５は再び数式６及び数式７のように変換できる。
【００５０】
【数６】

【００５１】
【数７】

また、類似に、４３００Kの色温度を有する蛍光灯、並びに各々５０００K、５５００K、６５００K、及び７５００Kの色温度を有する４種の太陽光熱を照明として使用した場合、数式４は数式８のように示すことができる。
【００５２】
【数８】

図６には、本発明の実施例に係るカラー映像処理装置に適用したモニター色温度を色度図に示した。図６を参照すれば、モニターで広く使われる３種の色温度(５０００K、６５００K、９３００K)がXY色度座標上に示されている。
【００５３】
【表３】

表３には、モニターで用いられる代表的な色温度対XYZ＆xyの関係を示した。即ち、３個の色温度を有するモニターに対してXYZ三刺激値とxy色度座標値を示した。
【００５４】
表３のように色温度５０００Kと９３００Kを比較すればX軸で色温度間の差は小さいものの、Z軸の場合には大きい差があることが分かる。XYZ空間上の信号をRGB空間上の信号に光源変換する過程は、数式７のように行列式で示すことができる。数式９の行列式で、ディスプレー手段の各々異なる３個の色温度(５０００K、６５００K、９３００K)が行列係数を決定するのに使用される。
【００５５】
【数９】

以上のような方法によってモニターの色温度と照明色に従って総１８個の映像がモニター上に同時にまたは順次にディスプレーされる。使用者はこの映像の中で場面映像と類似の色分布を有する映像を選択することによって最適照明色とディスプレー色温度を決定して、場面映像と再現映像との間の色一致が達成できる。
【００５６】
前述した本発明に係るカラー映像処理装置で具現されるカラー映像処理方法の主要段階を図７に示した。
【００５７】
図７を参照すれば、本発明に係るカラー映像処理方法は、先に被写体を照射する代表照明色を選定する(段階８０２)。本実施例では２８００K、４３００K、５０００K、５５００K、６５００K、７５００Kの色温度に該当する照明色が代表照明色として選択された。
このような代表照明色は人間の視覚によって容易に区別できる差を持って日常で頻繁に使われることが望ましい。これよりさらに細分化した照明色を使用することもできるが、この場合は視覚的に区別することにおいてより細心な注意が要求される。
【００５８】
次に、モニターの色温度を知っているかどうかを決定する(段階８０６)。段階８０６でモニターの色温度を知らないことと決定された場合には、所定の３個の色温度をモニターの代表色温度と設定する(段階８０８)。
【００５９】
本実施例では５０００K、６５００K、及び９３００Kの３種の色温度を代表色温度と設定する。反面に、段階８０６でモニターの色温度を知っていることと決定された場合には、知っている色温度を代表色温度と設定する(段階８１０)。
【００６０】
ここで、XYZ三刺激値またはxy色度座標値を示すための色空間としては、CCIR６０１が使われうる。さて、段階８０２で選択された各代表照明色を使用してRGB-XYZ光源変換行列係数を計算する(段階８２０)。次に、前記行列係数を使用してRGB-XYZ光源変換を遂行する(段階８２２)。また、選択された各代表色温度を使用してXYZ-RGB光源変換行列係数を計算する(段階８２４)。
【００６１】
次に、前記行列係数を使用してXYZ-RGB光源変換を遂行する(段階８２６)。
【００６２】
次に、光源変換された複数の映像をモニター上にディスプレー(段階８２８)し、使用者は視感的に場面映像と最も類似の映像または使用者が最も好む映像を選択する(段階８３０)。即ち、モニターの色温度種類と場面の照明色に従って総１８個の映像がモニター上に同時にまたは順次にディスプレーされ、使用者はこの映像の中で場面映像と類似の色分布を有する映像を選択することによって場面映像と再現映像との間の色一致を達成するための最適照明色とディスプレー色温度が決定される。
【００６３】
以上で説明した光源変換過程を一つの式で簡略化して示すと、
【００６４】
【数１０】

と同じである。
【００６５】
ここで、W_Sは場面照明色、W_Rは再現用基準照明色、W_Dはモニターの色温度を示す。即ち、場面映像と再現映像との間の色一致映像が選択されれば、この三個の白色点(照明色または色温度)に対する変数も決定されるので、場面に照射される照明色W_Sが抽出される。以上の実施例のように、周辺でよく使われる照明色を代表照明色として使用することが望ましい。
【００６６】
しかし、代案として、照明の色温度Tcが知られた場合、下記のように照明色温度Tc対標準色空間(色度値xy)間の変換公式を用いて代表照明色の範囲と間隔を調節して使用することができる。
【００６７】
【数１１】

【発明の効果】
【００６８】
前述したように本発明によれば、場面で被写体を照射する照明(場面照明)の照明色と映像出力装置のディスプレー色温度に対する推定のために、多様な照明色を有する照明を使用して光源変換を遂行し、これを通じて作られた映像を使用者が選択するようにすることによって、使用者が光源を知らない場合にも自然なカラー映像または好みの色の映像が得られる。
【００６９】
またこのような過程を通じて撮影された映像における場面照明に対する情報も得られる長所がある。これにより、本発明は従来技術の問題点の場面映像で光源の種類、映像出力装置の色温度設定状態、ハードウェアの複雑度、映像の構成要素の制限、または映像の複雑度などに関係なく、正確性と安全性の側面でさらに効果的な方法が提供でき、方法の具現はハードウェアまたはソフトウェアで具現できる。従って本発明は、映像処理システム、カラーカメラ、カラーイメージングソフトウェアなどに広く適用できる。
【００７０】
前述したように、本発明に係るカラー映像処理装置は、場面で被写体を照射する照明の照明色と、映像出力装置のディスプレー色温度に対する推定のために多様な色温度を有する照明を使用して光源変換を遂行し、使用者がこれを通じて作られた映像が選択できるようにすることによって、光源に対する情報がなくても自然なカラー映像または好みの色の映像が得られる。
【図面の簡単な説明】
【図１】本発明の実施例に係るカラー映像処理装置の構成を示すブロック図である。
【図２】図１の装置の色変換部の構成例を示すブロック図である。
【図３】図１の装置の色変換部の他の構成例を示すブロック図である。
【図４】本発明の実施例に係るカラー映像処理装置に適用した代表照明に対するスペクトル分布図である。
【図５】本発明の実施例に係るカラー映像処理装置に適用した代表照明の色温度を示す色度図グラフである。
【図６】本発明の実施例に係るカラー映像処理装置に適用したモニター色温度を示す色度図グラフである。
【図７】本発明の実施例に係るカラー映像処理方法の主要段階を示すフローチャートである。
【図８】映像の生成及び再現過程を示す一般の映像処理システムの構成を示すブロック図である。
【符号の説明】
２０カラー映像処理装置
２０２第１フレームメモリ
２０４映像サンプリング部
２０６色変換部
２０８第２フレームメモリ
２１０カラーモニター

Claims

映像入力装置から出力される第１RGB信号を入力し、映像処理を遂行してディスプレー手段に出力するカラー映像処理装置において、
入力されたRGB信号を相異なる所定の複数のN個の照明色を使用してRGB空間上の信号を所定の色空間上の信号に光源変換する手段と、
所定の色空間上の信号を、ディスプレー手段に対する所定の複数のM個の色温度を使用してRGB空間上に光源変換する手段とを含み、
N × M 個の映像信号を生成し、出力することを特徴とするカラー映像処理装置。
入力されたRGB信号をバッファリングして出力する第１フレームメモリ手段と、
前記第１フレームメモリ手段から出力されたRGB信号を入力してダウンサンプリングすることによってRGB信号を出力する映像サンプリング部と、
ダウンサンプリングされたRGB信号を相異なる所定のN個の照明色を用いて光源変換を遂行し、出力装置の色温度を以って光源変換を遂行して光源変換されたRGB信号を出力する色変換部と、
光源変換されたRGB信号をバッファリングして出力する第２フレームメモリ手段とをさらに含むことを特徴とする請求項１に記載のカラー映像処理装置。
前記色変換部は、所定のN個の照明色を用いてRGB空間上の信号を所定の色空間上の信号に光源変換する行列を計算する並列接続されたN個の行列演算器を具備する第１演算部を含むことを特徴とする請求項１に記載のカラー映像処理装置。
前記色変換部は、ディスプレー手段に対する所定のM個の色温度を使用して所定の色空間上の信号をRGB空間上の信号に光源変換するための行列を計算する並列接続されたM個の行列演算器を具備する第２演算部をさらに含むことを特徴とする請求項３に記載のカラー映像処理装置。
前記色変換部は、所定のN個の照明色を使用してRGB空間上の信号を所定の色空間上の信号に光源変換する行列に関する情報を貯蔵し、所定の第１制御信号に応答して前記情報を出力する第１メモリ、及び前記第１メモリから出力された前記情報に従って行列演算を遂行する第１行列演算部を具備する第１演算部を含むことを特徴とする請求項１に記載のカラー映像処理装置。
前記色変換部は、所定の色空間上の信号を、ディスプレー手段に対する所定のM個の色温度を使用してRGB空間上に光源変換する行列に関する情報を貯蔵し、所定の第２制御信号に応答して前記情報を供給する第２メモリ、及び前記第２メモリから出力された前記情報に従って行列演算を遂行する第２行列演算部を具備する第２演算部をさらに含むことを特徴とする請求項５に記載のカラー映像処理装置。
前記所定の色空間は、標準色空間であることを特徴とする請求項３乃至請求項６中いずれか一つに記載のカラー映像処理装置。
前記所定の色空間は、変換された信号の大きさが以前のRGB信号の大きさと線形的な関係を有する色空間であることを特徴とする請求項３乃至請求項６中いずれか一つに記載のカラー映像処理装置。
前記所定の色空間は、CIEXYZ、CIEUVW色空間、又はuv色度座標空間、若しくはY、R-Y、B-Y座標を適用した色空間よりなる、国際照明委員会が勧告する標準色空間群の中で選択されたことを特徴とする請求項３乃至請求項６中いずれか一つに記載のカラー映像処理装置。
前記色変換部の所定のN個の照明色は、人間の視覚で区別し易い差を持って日常で頻繁に用いられる２８００K、４３００K、５０００K、５５００K、６５００K、又は７５００Kの色温度を含む群から少なくとも一つ以上を含むことを特徴とする請求項１に記載のカラー映像処理装置。
前記色変換部は、照明の色温度を知っている場合には、

を使用して光源変換を遂行することを特徴とする請求項１に記載のカラー映像処理装置。
映像入力装置から出力されるRGB空間上の信号を映像処理してディスプレー手段に出力するカラー映像処理方法において、
(a- １ ) 所定の複数の N 個の照明色を使用して RGB 空間上の信号を所定の色空間上の信号に光源変換する段階と、
(a- ２ ) 所定の色空間上の信号をディスプレー手段に対する所定の複数の M 個の色温度を使用して RGB 空間上に光源変換し、 N × M 個の映像信号を生成する段階と、
(b)光源変換されたN×M個の映像信号をディスプレー手段に映像として示す段階と、
(c)ディスプレー手段に示されたN×M個の映像の中で視感的に最適の映像を選択する段階と、
(d)(c)段階で選択した映像に当る照明色を最適照明色として選択する段階とを含むことを特徴とするカラー映像処理方法。
前記(a)段階の所定のN個の照明色は、人間の視覚で区別し易い差を持って日常で頻繁に用いられる、約２８００K、４３００K、５０００K、５５００K、６５００K、又は７５００Kの色温度よりなる群から選択された少なくとも一つ以上の照明色を含むことを特徴とする請求項１２に記載のカラー映像処理方法。
前記(a)段階で前記所定の色空間は、変換された信号の大きさが以前のRGB信号の大きさと線形的な関係を有する色空間であることを特徴とする請求項１２に記載のカラー映像処理方法。
前記(a)段階で前記所定の色空間は、CIEXYZ、CIEUVW色空間、又はuv色度座標空間、若しくはY、R-Y、B-Y座標を適用した色空間よりなる、国際照明委員会が勧告する標準色空間群の中で選択されたことを特徴とする請求項１４に記載のカラー映像処理方法。