JPH09327024A - 画像処理装置 - Google Patents
画像処理装置Info
- Publication number
- JPH09327024A JPH09327024A JP8146049A JP14604996A JPH09327024A JP H09327024 A JPH09327024 A JP H09327024A JP 8146049 A JP8146049 A JP 8146049A JP 14604996 A JP14604996 A JP 14604996A JP H09327024 A JPH09327024 A JP H09327024A
- Authority
- JP
- Japan
- Prior art keywords
- image
- color vector
- vector
- light
- color
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Color Television Image Signal Generators (AREA)
- Processing Of Color Television Signals (AREA)
- Processing Or Creating Images (AREA)
- Image Processing (AREA)
Abstract
(57)【要約】
【課題】この発明は、マルチバンドで撮像した物体画像
と照明光の分光分布から物体色ベクトル、照明光ベクト
ル、環境光ベクトルを抽出し、これらベクトルと係数を
独立に変更して優れた色再現性を達成すること。 【解決手段】電子カメラ1で4種類以上のマルチバンド
で物体画像と照明光の分光分布が撮像されると、その画
像データは画像メモリ2を介して制御部3に転送され
る。そして、画像データ演算部6にて、上記画像データ
を基に、上記光源色ベクトル、物体色ベクトル及び環境
光ベクトルが算出される。これら算出されたベクトル
は、データメモリ7に送られる。画像の取り込みやデー
タ転送処理の過程は、キーボード4やマウス5を介し
て、オペレータにより指示される。
と照明光の分光分布から物体色ベクトル、照明光ベクト
ル、環境光ベクトルを抽出し、これらベクトルと係数を
独立に変更して優れた色再現性を達成すること。 【解決手段】電子カメラ1で4種類以上のマルチバンド
で物体画像と照明光の分光分布が撮像されると、その画
像データは画像メモリ2を介して制御部3に転送され
る。そして、画像データ演算部6にて、上記画像データ
を基に、上記光源色ベクトル、物体色ベクトル及び環境
光ベクトルが算出される。これら算出されたベクトル
は、データメモリ7に送られる。画像の取り込みやデー
タ転送処理の過程は、キーボード4やマウス5を介し
て、オペレータにより指示される。
Description
【0001】
【発明の属する技術分野】この発明は、カラー画像の色
変更を行う画像処理装置に関するものである、特に照明
光の分光反射特性を考慮した色再現性の優る画像処理装
置に関する。
変更を行う画像処理装置に関するものである、特に照明
光の分光反射特性を考慮した色再現性の優る画像処理装
置に関する。
【0002】
【従来の技術】近年、バーチャルリアリティ(仮想現実
感)に関係するシステムの中で、カラー画像に対する色
変更処理が注目されている。具体的なシステムの一例と
しては、住空間プレゼンテーションシステムがある。こ
れは撮像装置を介して室内空間の画像をコンピュータに
取り込み、壁紙、家具、カーテンの模様や色等を、ユー
ザの希望に合わせて変え、雰囲気を楽しむものである。
この中には住空間プレゼンテーションシステムとして、
各部屋毎の室内空間画像に於いて照明を点灯させて、居
住空間のリアリティを表現するライトシミュレーション
が提案されている。
感)に関係するシステムの中で、カラー画像に対する色
変更処理が注目されている。具体的なシステムの一例と
しては、住空間プレゼンテーションシステムがある。こ
れは撮像装置を介して室内空間の画像をコンピュータに
取り込み、壁紙、家具、カーテンの模様や色等を、ユー
ザの希望に合わせて変え、雰囲気を楽しむものである。
この中には住空間プレゼンテーションシステムとして、
各部屋毎の室内空間画像に於いて照明を点灯させて、居
住空間のリアリティを表現するライトシミュレーション
が提案されている。
【0003】一方、物体の色の見え方や光沢感の変更に
かかる色変更処理の方法が、例えば特開平5−4083
3号公報に開示されている。この特開平5−40833
号公報による画像制御方法は、画像中の任意の色、光
沢、影等の自然さを保存したままで色を変更することを
目的としている。そして、上記画像制御方法では、取り
込んだ画像から、物体色ベクトルと照明光ベクトルを抽
出し、これら2つのベクトルと独立の2次反射光ベクト
ルを更に選択し、これら3つのベクトルを変更すること
によって目的を達成している。
かかる色変更処理の方法が、例えば特開平5−4083
3号公報に開示されている。この特開平5−40833
号公報による画像制御方法は、画像中の任意の色、光
沢、影等の自然さを保存したままで色を変更することを
目的としている。そして、上記画像制御方法では、取り
込んだ画像から、物体色ベクトルと照明光ベクトルを抽
出し、これら2つのベクトルと独立の2次反射光ベクト
ルを更に選択し、これら3つのベクトルを変更すること
によって目的を達成している。
【0004】ここで、物体色ベクトルに関係する拡散反
射と照明光ベクトルに関係する鏡面反射について、図1
7を参照して説明する。鏡面反射とは、物体に入射する
全ての波長成分が反射され、大部分の光線が入射角に等
しい反射角に反射することを意味し、上記反射角からず
れた方向では急激にその強度が弱くなる。
射と照明光ベクトルに関係する鏡面反射について、図1
7を参照して説明する。鏡面反射とは、物体に入射する
全ての波長成分が反射され、大部分の光線が入射角に等
しい反射角に反射することを意味し、上記反射角からず
れた方向では急激にその強度が弱くなる。
【0005】また、拡散反射とは、照明光の特定の波長
領域の光が物体に吸収された後、それ以外の波長が反射
することを意味する。入射光線の拡散強度は、物体面に
対する法線方向に最も強く散乱し、拡散方向のなす角を
θとすると、cosθに比例する強度となる。つまり、
表面と平行をなす角度でゼロとなる。
領域の光が物体に吸収された後、それ以外の波長が反射
することを意味する。入射光線の拡散強度は、物体面に
対する法線方向に最も強く散乱し、拡散方向のなす角を
θとすると、cosθに比例する強度となる。つまり、
表面と平行をなす角度でゼロとなる。
【0006】上記鏡面反射は、その色成分が光源と同じ
色成分をとることから、光源色ベクトルと称されてい
る。一方、上記拡散反射は、物体固有の反射率で決まる
ことから物体色ベクトルと称されている。観察される色
は、これら拡散反射と鏡面反射が合成されたものであ
る。
色成分をとることから、光源色ベクトルと称されてい
る。一方、上記拡散反射は、物体固有の反射率で決まる
ことから物体色ベクトルと称されている。観察される色
は、これら拡散反射と鏡面反射が合成されたものであ
る。
【0007】
【発明が解決しようとする課題】ところで、上記特開平
5−40833号公報に於いては、オペレータの判断に
よって画像中の適当な画像が選択されることにより、物
体色ベクトルが抽出されるということが開示されてい
る。物体色ベクトルは、物体の分光反射率と照明光の分
光分布の積で求められるものである。
5−40833号公報に於いては、オペレータの判断に
よって画像中の適当な画像が選択されることにより、物
体色ベクトルが抽出されるということが開示されてい
る。物体色ベクトルは、物体の分光反射率と照明光の分
光分布の積で求められるものである。
【0008】しかしながら、上記特開平5−40833
号公報では、照明光ベクトル(すなわち光源色ベクト
ル)は画像中の最大輝度の画素か、若しくは白色とする
と記載されている。
号公報では、照明光ベクトル(すなわち光源色ベクト
ル)は画像中の最大輝度の画素か、若しくは白色とする
と記載されている。
【0009】このため、照明光が白色に近い場合はあま
り問題ないが、白色から大きく離れている場合は、照明
光の影響で実際と異なる物体色ベクトルが抽出されるこ
とになり、シミュレーションの色再現性が低下してしま
う。一方、黒色のような拡散反射の小さい物体を対象と
している場合では、物体表面からの拡散光線を用いて照
明光ベクトルを抽出することは困難となる。
り問題ないが、白色から大きく離れている場合は、照明
光の影響で実際と異なる物体色ベクトルが抽出されるこ
とになり、シミュレーションの色再現性が低下してしま
う。一方、黒色のような拡散反射の小さい物体を対象と
している場合では、物体表面からの拡散光線を用いて照
明光ベクトルを抽出することは困難となる。
【0010】加えて、物体色ベクトルと照明光ベクトル
が正しく抽出されないため、これらのベクトルを用いて
色変更のシミュレーションを行う際に、色再現性が低下
するという課題を有している。
が正しく抽出されないため、これらのベクトルを用いて
色変更のシミュレーションを行う際に、色再現性が低下
するという課題を有している。
【0011】更に、上記特開平5−40833号公報で
は、RGB画像を対象としているために、色純度の高い
輝度スペクトルから成る光源や、鋭い吸収性を有する物
体色のシミュレーションには対応できないという課題が
あった。
は、RGB画像を対象としているために、色純度の高い
輝度スペクトルから成る光源や、鋭い吸収性を有する物
体色のシミュレーションには対応できないという課題が
あった。
【0012】また、特開平6−236440号公報に
は、カラー自然画の物体領域の色、柄等を変更するシミ
ュレーション方法が開示されている。この変更シミュレ
ーションに於いて、画素中の色は、照明光ベクトルと、
分光反射率に対応する物体色ベクトルと、環境光ベクト
ルの線形和で表されるとされている。
は、カラー自然画の物体領域の色、柄等を変更するシミ
ュレーション方法が開示されている。この変更シミュレ
ーションに於いて、画素中の色は、照明光ベクトルと、
分光反射率に対応する物体色ベクトルと、環境光ベクト
ルの線形和で表されるとされている。
【0013】しかしながら、物体表面が蛍光性材料で構
成される場合、例えば光沢のある洋服生地や壁の塗装材
等で構成される場合、照明光ベクトルや物体色ベクトル
に加えて、発光成分(蛍光ベクトル)が寄与する。した
がって、物体表面が蛍光性材料の場合、上記特開平6−
236440号公報による方法では、正確なシミュレー
ションを行うことは困難なものであった。
成される場合、例えば光沢のある洋服生地や壁の塗装材
等で構成される場合、照明光ベクトルや物体色ベクトル
に加えて、発光成分(蛍光ベクトル)が寄与する。した
がって、物体表面が蛍光性材料の場合、上記特開平6−
236440号公報による方法では、正確なシミュレー
ションを行うことは困難なものであった。
【0014】この発明は上記実状に鑑みてなされたもの
であり、正確な物体色ベクトル、光源色ベクトルを抽出
することができ、色再現性の良い画像処理装置を提供す
ることを目的とする。またこの発明は、物体表面が蛍光
性材料であった場合に光沢感を保持して、色再現性の良
い画像処理装置を提供することを目的とする。
であり、正確な物体色ベクトル、光源色ベクトルを抽出
することができ、色再現性の良い画像処理装置を提供す
ることを目的とする。またこの発明は、物体表面が蛍光
性材料であった場合に光沢感を保持して、色再現性の良
い画像処理装置を提供することを目的とする。
【0015】
【課題を解決するための手段】すなわちこの発明は、光
源からの光を物体に照射し、この物体の画像を撮像する
画像処理装置に於いて、上記光源からの光及び上記物体
の画像の画素値を、少なくとも4つの波長領域の成分に
分解して取り込む電子カメラと、上記光源からの光の上
記波長領域の成分値から光源色ベクトルを、上記波長領
域の成分から成る物体の成分分解画像から物体色ベクト
ル及び環境色ベクトルを推定する制御手段と、少なくと
も4次元色空間中に、上記光源色ベクトル、上記物体色
ベクトル及び上記環境色ベクトルを設定し、上記物体の
画像の各画素値を上記光源色ベクトル、上記物体色ベク
トル及び上記環境色ベクトルの線形結合で表す演算手段
とを具備することを特徴とする。
源からの光を物体に照射し、この物体の画像を撮像する
画像処理装置に於いて、上記光源からの光及び上記物体
の画像の画素値を、少なくとも4つの波長領域の成分に
分解して取り込む電子カメラと、上記光源からの光の上
記波長領域の成分値から光源色ベクトルを、上記波長領
域の成分から成る物体の成分分解画像から物体色ベクト
ル及び環境色ベクトルを推定する制御手段と、少なくと
も4次元色空間中に、上記光源色ベクトル、上記物体色
ベクトル及び上記環境色ベクトルを設定し、上記物体の
画像の各画素値を上記光源色ベクトル、上記物体色ベク
トル及び上記環境色ベクトルの線形結合で表す演算手段
とを具備することを特徴とする。
【0016】またこの発明は、上記画像処理装置に於い
て、上記演算手段で表された上記物体の画像の各画素値
を記憶する記憶手段と、この記憶手段に記憶された上記
光源色ベクトル、上記物体色ベクトル、上記環境色ベク
トルと、上記演算手段により上記ベクトルの線形結合で
表された物体画像の画素値に於ける上記各ベクトルに対
する3つの係数とのうち、少なくとも1つを変更するデ
ータ変更手段と、このデータ変更手段による変更がなさ
れた後に上記光源色ベクトル、上記物体色ベクトル、上
記環境色ベクトルと、上記3つの係数から、上記物体画
像に対応する再生画像を合成する合成手段と、この合成
手段で合成された画像を表示する表示手段とを更に具備
することを特徴とする。
て、上記演算手段で表された上記物体の画像の各画素値
を記憶する記憶手段と、この記憶手段に記憶された上記
光源色ベクトル、上記物体色ベクトル、上記環境色ベク
トルと、上記演算手段により上記ベクトルの線形結合で
表された物体画像の画素値に於ける上記各ベクトルに対
する3つの係数とのうち、少なくとも1つを変更するデ
ータ変更手段と、このデータ変更手段による変更がなさ
れた後に上記光源色ベクトル、上記物体色ベクトル、上
記環境色ベクトルと、上記3つの係数から、上記物体画
像に対応する再生画像を合成する合成手段と、この合成
手段で合成された画像を表示する表示手段とを更に具備
することを特徴とする。
【0017】更にこの発明は、上記画像処理装置に於い
て、上記電子カメラに設けられるもので、上記物体に照
射する光の所定の波長の光を遮断するフィルタを更に具
備し、上記電子カメラは、上記物体からの蛍光による画
像のみを撮像することを特徴とする。
て、上記電子カメラに設けられるもので、上記物体に照
射する光の所定の波長の光を遮断するフィルタを更に具
備し、上記電子カメラは、上記物体からの蛍光による画
像のみを撮像することを特徴とする。
【0018】この発明の画像処理装置にあっては、撮像
に用いる電子カメラは可視域の光線を少なくとも4つの
波長領域に分解する機能を有する。上記電子カメラを用
いて物体画像を撮像するにあたり、物体画像の撮像に加
え、撮像する物体を照射する光線の分光特性も同電子カ
メラで撮像する。これらの光源からの光の波長領域の成
分値を用いて光源色ベクトルを求め、上記波長領域の色
成分から成る物体画像と、先に求めた光源色ベクトルを
用いて、物体色ベクトルと環境色ベクトルを推定する。
物体画像の各画素は、上記光源色ベクトル、物体色ベク
トル及び環境光色ベクトルの線形結合で表す。
に用いる電子カメラは可視域の光線を少なくとも4つの
波長領域に分解する機能を有する。上記電子カメラを用
いて物体画像を撮像するにあたり、物体画像の撮像に加
え、撮像する物体を照射する光線の分光特性も同電子カ
メラで撮像する。これらの光源からの光の波長領域の成
分値を用いて光源色ベクトルを求め、上記波長領域の色
成分から成る物体画像と、先に求めた光源色ベクトルを
用いて、物体色ベクトルと環境色ベクトルを推定する。
物体画像の各画素は、上記光源色ベクトル、物体色ベク
トル及び環境光色ベクトルの線形結合で表す。
【0019】また、この発明の画像処理装置では、上記
得られた光源色ベクトル、物体色ベクトル、環境光色ベ
クトルと、これらの係数を基に画像を合成する。この画
像処理装置は、上記3つのベクトルである光源色ベクト
ル、物体色ベクトル、環境光色ベクトルと、これらの係
数のうち少なくとも1つを変更する手段を有し、変更後
のこれらベクトル及び係数を用いて上記物体画像に対応
する再生画像を合成する。
得られた光源色ベクトル、物体色ベクトル、環境光色ベ
クトルと、これらの係数を基に画像を合成する。この画
像処理装置は、上記3つのベクトルである光源色ベクト
ル、物体色ベクトル、環境光色ベクトルと、これらの係
数のうち少なくとも1つを変更する手段を有し、変更後
のこれらベクトル及び係数を用いて上記物体画像に対応
する再生画像を合成する。
【0020】更に、この発明の画像処理装置では、照明
光が物体に照射され、この物体からの放射光をフィルタ
を介して電子カメラで撮像する。上記フィルタは照明光
の光をカットするものであり、物体からの散乱光はフィ
ルタでカットするため、電子カメラでは純粋に物体から
の蛍光を撮像する。
光が物体に照射され、この物体からの放射光をフィルタ
を介して電子カメラで撮像する。上記フィルタは照明光
の光をカットするものであり、物体からの散乱光はフィ
ルタでカットするため、電子カメラでは純粋に物体から
の蛍光を撮像する。
【0021】
【発明の実施の形態】以下、図面を参照してこの発明の
実施の形態を説明する。図1は、この発明の画像処理装
置の第1の実施の形態の構成を示すブロック図である。
実施の形態を説明する。図1は、この発明の画像処理装
置の第1の実施の形態の構成を示すブロック図である。
【0022】図1に於いて、この画像処理装置は、4種
類以上の光を透過する波長領域(以下、マルチバンドと
記す)で物体画像と照明光の分光分布を撮像して画像デ
ータを得る電子カメラ1と、これら画像データを記憶す
る画像メモリ2と、この画像メモリ2に接続されると共
に全体の制御を司る制御部3と、この制御部3に接続さ
れてオペレータからの指示を入力するためのキーボード
4及びマウス5と、上記画像データを基に光源色ベクト
ル、物体色ベクトル及び環境光ベクトルを算出するため
の画像データ演算部6と、この画像データ演算部6で算
出されたベクトルを記憶するデータメモリ7を備えてい
る。
類以上の光を透過する波長領域(以下、マルチバンドと
記す)で物体画像と照明光の分光分布を撮像して画像デ
ータを得る電子カメラ1と、これら画像データを記憶す
る画像メモリ2と、この画像メモリ2に接続されると共
に全体の制御を司る制御部3と、この制御部3に接続さ
れてオペレータからの指示を入力するためのキーボード
4及びマウス5と、上記画像データを基に光源色ベクト
ル、物体色ベクトル及び環境光ベクトルを算出するため
の画像データ演算部6と、この画像データ演算部6で算
出されたベクトルを記憶するデータメモリ7を備えてい
る。
【0023】このような構成の画像処理装置に於いて、
電子カメラ1で4種類以上のマルチバンドで物体画像と
照明光の分光分布が撮像されると、その画像データは画
像メモリ2を介して制御部3に転送される。そして、画
像データ演算部6にて、上記画像データを基に、上記光
源色ベクトル、物体色ベクトル及び環境光ベクトルが算
出される。これら算出されたベクトルは、データメモリ
7に送られる。
電子カメラ1で4種類以上のマルチバンドで物体画像と
照明光の分光分布が撮像されると、その画像データは画
像メモリ2を介して制御部3に転送される。そして、画
像データ演算部6にて、上記画像データを基に、上記光
源色ベクトル、物体色ベクトル及び環境光ベクトルが算
出される。これら算出されたベクトルは、データメモリ
7に送られる。
【0024】尚、画像の取り込みやデータ転送処理の過
程は、キーボード4やマウス5を介して、オペレータに
より指示される。図2は、マルチバンドの物体画像を撮
像する電子カメラ1の構成を示した斜視図である。図2
に於いて、電子カメラ1は、対物レンズ11と結像レン
ズ12及び取り込んだ画像を結像するCCD13を有し
て成る。そして、対物レンズ11と結像レンズ12の間
には、複数個、例えば図2の場合16個のカラーフィル
タから成るバンドパスフィルタ(BPF)14を円周状
に配した円盤15が配設されている。したがって、入力
画像は、対物レンズ11、バンドパスフィルタ14、結
像レンズ12を介してCCD13上に結像される。
程は、キーボード4やマウス5を介して、オペレータに
より指示される。図2は、マルチバンドの物体画像を撮
像する電子カメラ1の構成を示した斜視図である。図2
に於いて、電子カメラ1は、対物レンズ11と結像レン
ズ12及び取り込んだ画像を結像するCCD13を有し
て成る。そして、対物レンズ11と結像レンズ12の間
には、複数個、例えば図2の場合16個のカラーフィル
タから成るバンドパスフィルタ(BPF)14を円周状
に配した円盤15が配設されている。したがって、入力
画像は、対物レンズ11、バンドパスフィルタ14、結
像レンズ12を介してCCD13上に結像される。
【0025】上記バンドパスフィルタ14は、16個の
カラーフィルタから成るもので、各フィルタは400n
m〜700nmの可視光線を20nmの波長間隔で16
分割するものである。そして、円盤15の1回転分16
枚で1画素が構成される。
カラーフィルタから成るもので、各フィルタは400n
m〜700nmの可視光線を20nmの波長間隔で16
分割するものである。そして、円盤15の1回転分16
枚で1画素が構成される。
【0026】この他、分光方法としては、ハーフミラー
を組み合わせ光を複数に分割した後にバンドパスフィル
タを通過させる方法や、プリズムを用いて光を分光する
等の変形も考えられる。電子カメラ1による照明光の分
光分布の計測は、減衰フィルタを介して照明光を直接カ
メラに導入して良い。或いは、分光反射率が可視光線に
対して均一である白色板に照明光を照射し、この散乱光
を計測しても良い。尚、ここで用いられる白色板は、可
視光に対する分光反射率が一定であるものでなければな
らない。
を組み合わせ光を複数に分割した後にバンドパスフィル
タを通過させる方法や、プリズムを用いて光を分光する
等の変形も考えられる。電子カメラ1による照明光の分
光分布の計測は、減衰フィルタを介して照明光を直接カ
メラに導入して良い。或いは、分光反射率が可視光線に
対して均一である白色板に照明光を照射し、この散乱光
を計測しても良い。尚、ここで用いられる白色板は、可
視光に対する分光反射率が一定であるものでなければな
らない。
【0027】次に、マルチバンドで撮像した画像データ
から、物体色ベクトル、照明光色ベクトル及び環境光色
ベクトルを求める方法について説明する。ここで、各々
の画素に対応するマルチバンドの画素色ベクトルCは、
光源色ベクトルCs 、疑似物体色ベクトルCb 、環境色
ベクトルCa の線形結合で表される。
から、物体色ベクトル、照明光色ベクトル及び環境光色
ベクトルを求める方法について説明する。ここで、各々
の画素に対応するマルチバンドの画素色ベクトルCは、
光源色ベクトルCs 、疑似物体色ベクトルCb 、環境色
ベクトルCa の線形結合で表される。
【0028】 C=ms Cs +mb Cb +Ca …(1) ここで、ms 、mb は、それぞれCs 、Cb に対する係
数であり、それぞれ鏡面反射成分、拡散反射成分に関係
する。各々をベクトル表記すると、下記式のごとくな
る。
数であり、それぞれ鏡面反射成分、拡散反射成分に関係
する。各々をベクトル表記すると、下記式のごとくな
る。
【0029】
【数1】 ここで、照明光の影響を受けている疑似物体色ベクトル
Cb は、真の物体色ベクトルCo と照明光色ベクトルC
s の各成分毎の積で表される。
Cb は、真の物体色ベクトルCo と照明光色ベクトルC
s の各成分毎の積で表される。
【0030】
【数2】
【0031】したがって、光源色の影響を除いた純粋な
物体色ベクトルCo を求めるには、擬似物体色ベクトル
の各要素を照明光色ベクトルのそれで割れば良い。図3
は、電子カメラ1の撮像により得られた物体の純粋な物
体色ベクトルの分光分布を表したものである。同実施の
形態に於ける電子カメラ1は、可視領域400nm〜7
00nmを16に分割するもので、各々の強度はその波
長領域の成分値を表している。
物体色ベクトルCo を求めるには、擬似物体色ベクトル
の各要素を照明光色ベクトルのそれで割れば良い。図3
は、電子カメラ1の撮像により得られた物体の純粋な物
体色ベクトルの分光分布を表したものである。同実施の
形態に於ける電子カメラ1は、可視領域400nm〜7
00nmを16に分割するもので、各々の強度はその波
長領域の成分値を表している。
【0032】図4及び図5は、物体を照射する光線の分
光成分から成る光源色ベクトルの一例を表したもので、
図4は蛍光灯の分光分布を、図5は白熱電球の分光分布
を表したものである。尚、ここでは両者の分光分布と
も、データベースに保存されているものとする。
光成分から成る光源色ベクトルの一例を表したもので、
図4は蛍光灯の分光分布を、図5は白熱電球の分光分布
を表したものである。尚、ここでは両者の分光分布と
も、データベースに保存されているものとする。
【0033】図6及び図7は、図3の純粋な物体色ベク
トルの各成分値と、図4及び図5の光源色ベクトルの各
成分の積を求めた結果の画像データを表したものであ
る。これは、後述する疑似物体色ベクトルに相当する。
トルの各成分値と、図4及び図5の光源色ベクトルの各
成分の積を求めた結果の画像データを表したものであ
る。これは、後述する疑似物体色ベクトルに相当する。
【0034】ここで、図8を参照して、各々の画素に対
応する画素色ベクトルの集合である画像データから光源
色ベクトルCs 、擬似物体色ベクトルCb 、擬似環境色
ベクトルCa 及び係数ms 、mb を求める方法について
説明する。
応する画素色ベクトルの集合である画像データから光源
色ベクトルCs 、擬似物体色ベクトルCb 、擬似環境色
ベクトルCa 及び係数ms 、mb を求める方法について
説明する。
【0035】撮像された画像データは、例えば壁面や机
の表面等のように、同色(類似色)の領域毎にセグメン
トとして分割される。図8は、セグメント中の画像デー
タを16次元の色空間内にプロットした成分分解画像を
示したものである。
の表面等のように、同色(類似色)の領域毎にセグメン
トとして分割される。図8は、セグメント中の画像デー
タを16次元の色空間内にプロットした成分分解画像を
示したものである。
【0036】同図に於いて、16次元の各座標軸は、上
述した16種類のカラーフィルタの透過波長領域に対応
しており、原点に近いほど明度が低くなり、離れるに従
って明度が高くなる。図8中に示される斜線部分は、セ
グメント中の画素データ分布を表している。
述した16種類のカラーフィルタの透過波長領域に対応
しており、原点に近いほど明度が低くなり、離れるに従
って明度が高くなる。図8中に示される斜線部分は、セ
グメント中の画素データ分布を表している。
【0037】ここで、光源色ベクトルCs は、既に測定
してある照明光の分光から決定される。また、各々の画
素データは、物体色ベクトルと光源色ベクトルにより作
成される平行四辺形内に分布する特徴を利用して、先に
求められた光源色ベクトルCs と擬似物体色ベクトルC
b とを分離する。すると、図8に於ける原点(黒)から
擬似物体色ベクトルCb の始点までを結ぶベクトルが環
境色ベクトルCa となる。環境色ベクトルCa は光源光
をカットし、このときの白色参照板に色を上記電子カメ
ラ1で撮像することにより得られる。
してある照明光の分光から決定される。また、各々の画
素データは、物体色ベクトルと光源色ベクトルにより作
成される平行四辺形内に分布する特徴を利用して、先に
求められた光源色ベクトルCs と擬似物体色ベクトルC
b とを分離する。すると、図8に於ける原点(黒)から
擬似物体色ベクトルCb の始点までを結ぶベクトルが環
境色ベクトルCa となる。環境色ベクトルCa は光源光
をカットし、このときの白色参照板に色を上記電子カメ
ラ1で撮像することにより得られる。
【0038】この後、上述した方法により、照明光の影
響を除去した物体色ベクトルと環境色ベクトルが求めら
れる。画素色ベクトルは、光源光色ベクトル及び物体色
ベクトルに射影することで係数ms 、mb が求められ
る。これは、セグメント中の全画素に対して行われる。
色空間をN次元で表しているため、画素データを各一次
元の照明光ベクトル、物体色ベクトル及び環境ベクトル
分布の線形結合で表すことが困難である場合は、C=m
s Cs +mb1Cb1+mb2Cb2+mb3Cb3+…+Ca のよ
うに、物体色ベクトルの次元数を増やしても良い。
響を除去した物体色ベクトルと環境色ベクトルが求めら
れる。画素色ベクトルは、光源光色ベクトル及び物体色
ベクトルに射影することで係数ms 、mb が求められ
る。これは、セグメント中の全画素に対して行われる。
色空間をN次元で表しているため、画素データを各一次
元の照明光ベクトル、物体色ベクトル及び環境ベクトル
分布の線形結合で表すことが困難である場合は、C=m
s Cs +mb1Cb1+mb2Cb2+mb3Cb3+…+Ca のよ
うに、物体色ベクトルの次元数を増やしても良い。
【0039】次に、図9(a)及び(b)のフローチャ
ートを参照して、第1の実施の形態に於ける画像処理装
置の動作を説明する。先ず、電子カメラ1によって対象
物体の画像が入力される(ステップS1)。次いで、上
記電子カメラ1で照明光の分光特性が測定される(ステ
ップS2)。そして、得られた物体画像に対して、オペ
レータのキーボード4またはマウス5による指示で、同
一物体または同色領域毎にセグメント化(領域分割)が
行われる(ステップS3)。
ートを参照して、第1の実施の形態に於ける画像処理装
置の動作を説明する。先ず、電子カメラ1によって対象
物体の画像が入力される(ステップS1)。次いで、上
記電子カメラ1で照明光の分光特性が測定される(ステ
ップS2)。そして、得られた物体画像に対して、オペ
レータのキーボード4またはマウス5による指示で、同
一物体または同色領域毎にセグメント化(領域分割)が
行われる(ステップS3)。
【0040】次いで、このステップS3で得られたセグ
メント毎に、上記した各種ベクトルが算出される(ステ
ップS4)。そして、上記各々のベクトルに対する係数
が算出されると(ステップS5)、これらベクトルと係
数がデータメモリ7に記憶されて保存される(ステップ
S6)。
メント毎に、上記した各種ベクトルが算出される(ステ
ップS4)。そして、上記各々のベクトルに対する係数
が算出されると(ステップS5)、これらベクトルと係
数がデータメモリ7に記憶されて保存される(ステップ
S6)。
【0041】図9(b)は、上記ステップS4に於ける
ベクトル算出の処理動作の詳細を説明するサブルーチン
である。この場合、初めに光源色ベクトルが算出され
(ステップS11)、続いて物体色ベクトルが算出され
る(ステップS12)。そして、最後に環境色ベクトル
が算出される(ステップS13)。
ベクトル算出の処理動作の詳細を説明するサブルーチン
である。この場合、初めに光源色ベクトルが算出され
(ステップS11)、続いて物体色ベクトルが算出され
る(ステップS12)。そして、最後に環境色ベクトル
が算出される(ステップS13)。
【0042】尚、これらのベクトル算出の処理の順序
は、上記ステップの順序に限られるものではない。次
に、この発明の第2の実施の形態を説明する。
は、上記ステップの順序に限られるものではない。次
に、この発明の第2の実施の形態を説明する。
【0043】図10は、この発明の第2の実施の形態に
係る画像処理装置の構成を示すブロック図である。尚、
以下に示される実施の形態に於いて、上述した第1の実
施の形態と同じ部分には同一の参照番号を付して説明は
省略する。
係る画像処理装置の構成を示すブロック図である。尚、
以下に示される実施の形態に於いて、上述した第1の実
施の形態と同じ部分には同一の参照番号を付して説明は
省略する。
【0044】図10に於いて、この第2の実施の形態に
係る画像処理装置は、上述した光源色ベクトル 、物体
色ベクトル 、環境色ベクトルと係数を記憶しているデ
ータメモリ7と、制御部3を有すると共に、この制御部
3に接続されたキーボード4及びマウス5と、画像デー
タ演算部6と、表示画像用メモリ18を介してカラーデ
ィスプレイ19とから構成されている。
係る画像処理装置は、上述した光源色ベクトル 、物体
色ベクトル 、環境色ベクトルと係数を記憶しているデ
ータメモリ7と、制御部3を有すると共に、この制御部
3に接続されたキーボード4及びマウス5と、画像デー
タ演算部6と、表示画像用メモリ18を介してカラーデ
ィスプレイ19とから構成されている。
【0045】このような構成の画像処理装置に於いて、
第1の実施の形態で述べられたように、予め算出された
光源色ベクトルCs 、物体色ベクトルCb 、環境色ベク
トルCa と係数ms 、mb がデータメモリ17から読み
出されて、制御部3に転送される。これらデータの変更
は、データ変更部17にて行われる。実際には、データ
の変更はキーボード4やマウス5を介したオペレータの
入力データに基いて行われる。
第1の実施の形態で述べられたように、予め算出された
光源色ベクトルCs 、物体色ベクトルCb 、環境色ベク
トルCa と係数ms 、mb がデータメモリ17から読み
出されて、制御部3に転送される。これらデータの変更
は、データ変更部17にて行われる。実際には、データ
の変更はキーボード4やマウス5を介したオペレータの
入力データに基いて行われる。
【0046】ここで、変更する各ベクトル及び係数と、
その効果について説明する。照明光ベクトルCs は照明
光の色に関係するもので、該ベクトルCs の伸縮で照明
光の強弱が表される。上述したように、係数ms は物体
表面の表面反射成分に関係し、係数ms が大きくなる
と、表面の艶が増したように見える。一方、物体色ベク
トルCb は、物体の色に関係する拡散反射に関係する。
係数mb が大きくなると物体そのものの色が強く表さ
れ、艶が減少するように見える。
その効果について説明する。照明光ベクトルCs は照明
光の色に関係するもので、該ベクトルCs の伸縮で照明
光の強弱が表される。上述したように、係数ms は物体
表面の表面反射成分に関係し、係数ms が大きくなる
と、表面の艶が増したように見える。一方、物体色ベク
トルCb は、物体の色に関係する拡散反射に関係する。
係数mb が大きくなると物体そのものの色が強く表さ
れ、艶が減少するように見える。
【0047】これらのデータに基いて、画像データ演算
部6で表示用の物体画像が合成される。これらの操作
は、上述した第1の実施の形態と同様に、キーボード4
やマウス5を介してオペレータにより行われる。そし
て、得られた画像データは、表示用画像メモリ18に転
送され、対応する画像がカラーディスプレイ19に表示
される。
部6で表示用の物体画像が合成される。これらの操作
は、上述した第1の実施の形態と同様に、キーボード4
やマウス5を介してオペレータにより行われる。そし
て、得られた画像データは、表示用画像メモリ18に転
送され、対応する画像がカラーディスプレイ19に表示
される。
【0048】ここで、画像データ演算部6に於けるプロ
セスを説明する。尚、この第2の実施の形態に於ける画
像演算のプロセスは、上述した第1の実施の形態のプロ
セスを逆に辿るものである。
セスを説明する。尚、この第2の実施の形態に於ける画
像演算のプロセスは、上述した第1の実施の形態のプロ
セスを逆に辿るものである。
【0049】先ず、真の物体色ベクトルCo と光源色ベ
クトルCs の各項の積から、擬似物体ベクトルCb が算
出される。次に、ここまでで得られている、物体色ベク
トルCo 、光源色ベクトルCs 、環境色ベクトルCa 及
び係数ms 、mb を、上記(1)式に代入することによ
り画素値ベクトルCが得られる。
クトルCs の各項の積から、擬似物体ベクトルCb が算
出される。次に、ここまでで得られている、物体色ベク
トルCo 、光源色ベクトルCs 、環境色ベクトルCa 及
び係数ms 、mb を、上記(1)式に代入することによ
り画素値ベクトルCが得られる。
【0050】次に、図11のフローチャートを参照し
て、第2の実施の形態の動作を説明する。初めに、デー
タメモリ7に格納されている光源色ベクトルCs 、物体
色ベクトルCb 、環境色ベクトルCa と係数ms 、mb
が読み出される(ステップS21)。続いて、データメ
モリ7より読み出された各ベクトルとその係数につい
て、変更するか否かが判断される(ステップS22〜S
27)。すなわち、物体色ベクトル(ステップS2
2)、光源色ベクトル(ステップS23)、環境色ベク
トル(ステップS24)、物体色係数(ステップS2
5)、光源色係数(ステップS26)、環境色係数(ス
テップS27)である。
て、第2の実施の形態の動作を説明する。初めに、デー
タメモリ7に格納されている光源色ベクトルCs 、物体
色ベクトルCb 、環境色ベクトルCa と係数ms 、mb
が読み出される(ステップS21)。続いて、データメ
モリ7より読み出された各ベクトルとその係数につい
て、変更するか否かが判断される(ステップS22〜S
27)。すなわち、物体色ベクトル(ステップS2
2)、光源色ベクトル(ステップS23)、環境色ベク
トル(ステップS24)、物体色係数(ステップS2
5)、光源色係数(ステップS26)、環境色係数(ス
テップS27)である。
【0051】これらの各ベクトルまたは係数の判断に於
いて、変更がある場合には、キーボード4またはマウス
5によりオペレータの指示でこれらのベクトルまたは係
数が変更される(ステップS31〜S36)。
いて、変更がある場合には、キーボード4またはマウス
5によりオペレータの指示でこれらのベクトルまたは係
数が変更される(ステップS31〜S36)。
【0052】上記ステップS22〜S27にて、変更が
終了したならば、画像データの演算処理が行われて、物
体画像が作成される(ステップS28)。ここで得られ
た画像データは、RGB系の表示装置で表示可能なデー
タに変換された(ステップS29)後、カラーディスプ
レイ19に表示される(ステップS30)。
終了したならば、画像データの演算処理が行われて、物
体画像が作成される(ステップS28)。ここで得られ
た画像データは、RGB系の表示装置で表示可能なデー
タに変換された(ステップS29)後、カラーディスプ
レイ19に表示される(ステップS30)。
【0053】ここで、RGBへの変換は、マルチバンド
データをCRTに表示するために行われるもので、例え
ば、図12に示されるRGB各々の視感度について、こ
れとマルチバンドの各要素との積を求めればよい。
データをCRTに表示するために行われるもので、例え
ば、図12に示されるRGB各々の視感度について、こ
れとマルチバンドの各要素との積を求めればよい。
【0054】次に、図13乃至図15を参照して、この
発明の第3の実施の形態を説明する。図13は、この発
明の第3の実施の形態に係る画像処理装置の主要部の構
成を示すブロック図である。同実施の形態に於いて、上
述した第1及び第2の実施の形態と同じ部分には同一の
参照番号を付して説明は省略する。
発明の第3の実施の形態を説明する。図13は、この発
明の第3の実施の形態に係る画像処理装置の主要部の構
成を示すブロック図である。同実施の形態に於いて、上
述した第1及び第2の実施の形態と同じ部分には同一の
参照番号を付して説明は省略する。
【0055】図13に於いて、この第3の実施の形態に
係る画像処理装置は、データメモリ7と、制御部3と、
キーボード4及びマウス5と、画像データ演算部6と、
表示画像用メモリ18及びカラーディスプレイ19と、
照明光色データベース20とから構成されている。
係る画像処理装置は、データメモリ7と、制御部3と、
キーボード4及びマウス5と、画像データ演算部6と、
表示画像用メモリ18及びカラーディスプレイ19と、
照明光色データベース20とから構成されている。
【0056】この照明光色データベース20は、例え
ば、照明光の分光特性を測定し、これを基に光源色ベク
トルのデータベース作成するためのものである。すなわ
ち、この照明光色データベース20に作成されたデータ
が、対象物体に照射される照明光の影響を調べる照明シ
ミュレーションに用いられる。上記データベースには、
例えば、上述した図3乃至図7のデータが該当する。
ば、照明光の分光特性を測定し、これを基に光源色ベク
トルのデータベース作成するためのものである。すなわ
ち、この照明光色データベース20に作成されたデータ
が、対象物体に照射される照明光の影響を調べる照明シ
ミュレーションに用いられる。上記データベースには、
例えば、上述した図3乃至図7のデータが該当する。
【0057】また、図14は、図13に示された構成の
画像処理装置による物体画像の撮像状態の例を示した図
である。図14に於いて、対象物体23には、光源24
より照明光が照射されている。そして、上記対象物体2
3が、電子カメラ1により取り込まれて物体画像と照明
光の分光分布が計測される。撮像された物体画像は、コ
ンピュータ25に送られる。
画像処理装置による物体画像の撮像状態の例を示した図
である。図14に於いて、対象物体23には、光源24
より照明光が照射されている。そして、上記対象物体2
3が、電子カメラ1により取り込まれて物体画像と照明
光の分光分布が計測される。撮像された物体画像は、コ
ンピュータ25に送られる。
【0058】このコンピュータ25内のCPUでは、上
述した光源色ベクトル、物体色ベクトル、環境光色ベク
トル及び物体色係数と光源色係数が算出される。これら
算出されたデータは、コンピュータ25に内蔵されたメ
モリに保存される。そして、このメモリに保存された上
記各データと予め想定された照明特性を基にして作成さ
れた画像が、CRT26の画面上に表示される。
述した光源色ベクトル、物体色ベクトル、環境光色ベク
トル及び物体色係数と光源色係数が算出される。これら
算出されたデータは、コンピュータ25に内蔵されたメ
モリに保存される。そして、このメモリに保存された上
記各データと予め想定された照明特性を基にして作成さ
れた画像が、CRT26の画面上に表示される。
【0059】尚、これらの処理は、コンピュータ25に
接続されたキーボード27やマウス28を介して手順が
入力されるようになっている。図15は、この発明が適
用された室内シミュレーション装置に於いて合成された
画像の例を示したものである。ここでは、画像が合成さ
れる手順について説明する。
接続されたキーボード27やマウス28を介して手順が
入力されるようになっている。図15は、この発明が適
用された室内シミュレーション装置に於いて合成された
画像の例を示したものである。ここでは、画像が合成さ
れる手順について説明する。
【0060】先ず、電子カメラに1によりマルチバンド
の画像が入力され、この入力された画像を基に、オペレ
ータの判断により物体毎にセグメンテーション化され
る。図15に於ける具体的なセグメントは、天井面、床
面、壁をはじめ、ドア、机の上面、机の脚、蛍光灯がそ
れである。
の画像が入力され、この入力された画像を基に、オペレ
ータの判断により物体毎にセグメンテーション化され
る。図15に於ける具体的なセグメントは、天井面、床
面、壁をはじめ、ドア、机の上面、机の脚、蛍光灯がそ
れである。
【0061】このようにセグメント化された領域内の各
々の画像に対して、それぞれ成分分解が施される。すな
わち、物体色ベクトルと環境色ベクトルが抽出され、画
素毎に係数ms 、mb が算出される。尚、光源色ベクト
ルは電子カメラ1により撮像された蛍光灯の発光特性か
ら算出されるものである。
々の画像に対して、それぞれ成分分解が施される。すな
わち、物体色ベクトルと環境色ベクトルが抽出され、画
素毎に係数ms 、mb が算出される。尚、光源色ベクト
ルは電子カメラ1により撮像された蛍光灯の発光特性か
ら算出されるものである。
【0062】この後、物体色係数及び光源色係数が求め
られる。各々のベクトルまたは係数が変更された後は、
上記(1)式に従って、色変更された画像が合成され
る。次に、この発明の第4の実施の形態を説明する。
られる。各々のベクトルまたは係数が変更された後は、
上記(1)式に従って、色変更された画像が合成され
る。次に、この発明の第4の実施の形態を説明する。
【0063】図16は、この発明の第4の実施の形態に
係る画像処理装置の構成例を示す外観図である。同実施
の形態に於いて、上述した第1乃至第3の実施の形態と
同じ部分には同一の参照番号を付して説明は省略する。
係る画像処理装置の構成例を示す外観図である。同実施
の形態に於いて、上述した第1乃至第3の実施の形態と
同じ部分には同一の参照番号を付して説明は省略する。
【0064】図16に於いて、対象物体31に対して紫
外光線から成る照明光32が照射される。このとき、対
象物体31からの蛍光光線は、フィルタ33を介して電
子カメラ1で撮像される。上記フィルタ33は、紫外光
をカットするためのものであり、紫外線の散乱成分がこ
こでカットされる。そのため、電子カメラ1では、純粋
に対象物体31からの蛍光が撮像される。尚、上記照明
光32は、可視光全域に渡る蛍光スペクトルが得られる
紫外光が好適であるといえる。
外光線から成る照明光32が照射される。このとき、対
象物体31からの蛍光光線は、フィルタ33を介して電
子カメラ1で撮像される。上記フィルタ33は、紫外光
をカットするためのものであり、紫外線の散乱成分がこ
こでカットされる。そのため、電子カメラ1では、純粋
に対象物体31からの蛍光が撮像される。尚、上記照明
光32は、可視光全域に渡る蛍光スペクトルが得られる
紫外光が好適であるといえる。
【0065】例えば、図16に示されるように、対象物
体であるマネキンの洋服の生地や、壁紙等に用いられて
いる素材は、蛍光性の材料が多く用いられている。した
がって、この第4の実施の形態は、洋品店の店内のディ
スプレイや住宅のモデルルームのシミュレーションに有
効である。
体であるマネキンの洋服の生地や、壁紙等に用いられて
いる素材は、蛍光性の材料が多く用いられている。した
がって、この第4の実施の形態は、洋品店の店内のディ
スプレイや住宅のモデルルームのシミュレーションに有
効である。
【0066】照明光を遮断するフィルタを設けて物体か
らの蛍光による画像のみを撮像する構成は、ステルスバ
ーコードでは公知であるが、この実施の形態では、更に
その光を少なくとも4つの波長領域の成分に分解して電
子カメラに取り込んでいる。ステルスバーコードでフィ
ルタを設けるのはリード特性に悪影響を与えないためで
ある。
らの蛍光による画像のみを撮像する構成は、ステルスバ
ーコードでは公知であるが、この実施の形態では、更に
その光を少なくとも4つの波長領域の成分に分解して電
子カメラに取り込んでいる。ステルスバーコードでフィ
ルタを設けるのはリード特性に悪影響を与えないためで
ある。
【0067】一方、第4の実施の形態による構成では、
鏡面反射成分乃至拡散反射成分と蛍光成分とを分離する
ためにフィルタを設けているので、構成も目的も異な
る。これにより、より蛍光成分を独立させて、シミュレ
ーションすることができる。
鏡面反射成分乃至拡散反射成分と蛍光成分とを分離する
ためにフィルタを設けているので、構成も目的も異な
る。これにより、より蛍光成分を独立させて、シミュレ
ーションすることができる。
【0068】この第4の実施の形態を応用することによ
り、工業製品の色デザインや、それを販売する場合の照
明条件を決定するのに用いることができる。更に、住宅
のモデルルームへの応用として、住空間のレイアウト及
び照明シミュレーションに用いることができる。
り、工業製品の色デザインや、それを販売する場合の照
明条件を決定するのに用いることができる。更に、住宅
のモデルルームへの応用として、住空間のレイアウト及
び照明シミュレーションに用いることができる。
【0069】尚、この発明の上記実施態様によれば、以
下の如き構成を得ることができる。 (1) 光源からの光を物体に照射し、この物体の画像
を撮像する画像処理装置に於いて、上記光源からの光及
び上記物体の画像の画素値を、少なくとも4つの波長領
域の成分に分解して取り込む電子カメラと、上記光源か
らの光の上記波長領域の成分値から光源色ベクトルを、
上記波長領域の成分から成る物体の成分分解画像から物
体色ベクトル及び環境色ベクトルを推定する制御手段
と、少なくとも4次元色空間中に、上記光源色ベクト
ル、上記物体色ベクトル及び上記環境色ベクトルを設定
し、上記物体の画像の各画素値を上記光源色ベクトル、
上記物体色ベクトル及び上記環境色ベクトルの線形結合
で表す演算手段とを具備することを特徴とする画像処理
装置。
下の如き構成を得ることができる。 (1) 光源からの光を物体に照射し、この物体の画像
を撮像する画像処理装置に於いて、上記光源からの光及
び上記物体の画像の画素値を、少なくとも4つの波長領
域の成分に分解して取り込む電子カメラと、上記光源か
らの光の上記波長領域の成分値から光源色ベクトルを、
上記波長領域の成分から成る物体の成分分解画像から物
体色ベクトル及び環境色ベクトルを推定する制御手段
と、少なくとも4次元色空間中に、上記光源色ベクト
ル、上記物体色ベクトル及び上記環境色ベクトルを設定
し、上記物体の画像の各画素値を上記光源色ベクトル、
上記物体色ベクトル及び上記環境色ベクトルの線形結合
で表す演算手段とを具備することを特徴とする画像処理
装置。
【0070】(2) 上記演算手段で表された上記物体
の画像の各画素値を記憶する記憶手段と、この記憶手段
に記憶された上記光源色ベクトル、上記物体色ベクト
ル、上記環境色ベクトルと、上記演算手段により上記ベ
クトルの線形結合で表された物体画像の画素値に於ける
上記各ベクトルに対する3つの係数とのうち、少なくと
も1つを変更するデータ変更手段と、このデータ変更手
段による変更がなされた後に上記光源色ベクトル、上記
物体色ベクトル、上記環境色ベクトルと、上記3つの係
数から、上記物体画像に対応する再生画像を合成する合
成手段と、この合成手段で合成された画像を表示する表
示手段とを更に具備することを特徴とする上記(1)に
記載の画像処理装置。
の画像の各画素値を記憶する記憶手段と、この記憶手段
に記憶された上記光源色ベクトル、上記物体色ベクト
ル、上記環境色ベクトルと、上記演算手段により上記ベ
クトルの線形結合で表された物体画像の画素値に於ける
上記各ベクトルに対する3つの係数とのうち、少なくと
も1つを変更するデータ変更手段と、このデータ変更手
段による変更がなされた後に上記光源色ベクトル、上記
物体色ベクトル、上記環境色ベクトルと、上記3つの係
数から、上記物体画像に対応する再生画像を合成する合
成手段と、この合成手段で合成された画像を表示する表
示手段とを更に具備することを特徴とする上記(1)に
記載の画像処理装置。
【0071】(3) 上記制御手段で推定された光源色
ベクトルを光源色ベクトルデータベースとして格納する
格納手段を更に具備し、上記合成手段は、上記格納手段
に格納された光源色ベクトルを読み出し、この読み出さ
れた光源色ベクトルを用いて上記物体画像に対応する再
生画像を合成することを特徴とする上記(2)に記載の
画像処理装置。
ベクトルを光源色ベクトルデータベースとして格納する
格納手段を更に具備し、上記合成手段は、上記格納手段
に格納された光源色ベクトルを読み出し、この読み出さ
れた光源色ベクトルを用いて上記物体画像に対応する再
生画像を合成することを特徴とする上記(2)に記載の
画像処理装置。
【0072】(4) 上記電子カメラに設けられるもの
で、上記物体に照射する光の所定の波長の光を遮断する
フィルタを更に具備し、上記電子カメラは、上記物体か
らの蛍光による画像のみを撮像することを特徴とする上
記(1)に記載の画像処理装置。
で、上記物体に照射する光の所定の波長の光を遮断する
フィルタを更に具備し、上記電子カメラは、上記物体か
らの蛍光による画像のみを撮像することを特徴とする上
記(1)に記載の画像処理装置。
【0073】上記(1)の構成によれば、直接計測され
た照明光の分光分布を用いて光源光ベクトルを決め、こ
れを利用して物体色ベクトルと環境光ベクトルを導出す
る。このため、照明光が白色からずれている場合であっ
ても、正確なベクトルを求めることができる。また、少
なくとも4つの波長領域での画像処理に必要な、照明光
物体及び環境光の色ベクトルの規定をすることで、物体
色・照明光変更シミュレーションの基礎データを得るこ
とが可能となる。更に、RGB系より多次元でのシミュ
レーションを行っていることから、実体の物体色を忠実
に再現することができる。
た照明光の分光分布を用いて光源光ベクトルを決め、こ
れを利用して物体色ベクトルと環境光ベクトルを導出す
る。このため、照明光が白色からずれている場合であっ
ても、正確なベクトルを求めることができる。また、少
なくとも4つの波長領域での画像処理に必要な、照明光
物体及び環境光の色ベクトルの規定をすることで、物体
色・照明光変更シミュレーションの基礎データを得るこ
とが可能となる。更に、RGB系より多次元でのシミュ
レーションを行っていることから、実体の物体色を忠実
に再現することができる。
【0074】上記(2)の構成によれば、光源色ベクト
ル、物体色ベクトル、環境色ベクトルと各係数を独立に
変更することで、照明光の色や強弱、物体の表面性の状
態等の変更を再現よくシミュレートすることができる。
ル、物体色ベクトル、環境色ベクトルと各係数を独立に
変更することで、照明光の色や強弱、物体の表面性の状
態等の変更を再現よくシミュレートすることができる。
【0075】上記(3)の構成によれば、種々の照明光
に対応して分光分布を用意しておくことで、照明シミュ
レーションを効率的に行うことができる。上記(4)の
構成によれば、物体の分光反射だけでなく、蛍光特性も
考慮することで、蛍光材料に対して、光沢感を保持した
ままのシミュレーション画像を作成できる。
に対応して分光分布を用意しておくことで、照明シミュ
レーションを効率的に行うことができる。上記(4)の
構成によれば、物体の分光反射だけでなく、蛍光特性も
考慮することで、蛍光材料に対して、光沢感を保持した
ままのシミュレーション画像を作成できる。
【0076】
【発明の効果】以上のようにこの発明によれば、正確な
物体色ベクトル、光源色ベクトルを抽出することがで
き、色再現性の良い画像処理装置を提供することができ
る。またこの発明によれば、物体表面が蛍光性材料であ
った場合に光沢感を保持して、色再現性の良い画像処理
装置を提供することができる。
物体色ベクトル、光源色ベクトルを抽出することがで
き、色再現性の良い画像処理装置を提供することができ
る。またこの発明によれば、物体表面が蛍光性材料であ
った場合に光沢感を保持して、色再現性の良い画像処理
装置を提供することができる。
【図1】この発明の画像処理装置の第1の実施の形態の
構成を示すブロック図である。
構成を示すブロック図である。
【図2】マルチバンドの物体画像を撮像する電子カメラ
1の構成を示した斜視図である。
1の構成を示した斜視図である。
【図3】電子カメラ1の撮像により得られた物体の純粋
な物体色ベクトルの分光分布を表した図である。
な物体色ベクトルの分光分布を表した図である。
【図4】物体を照射する光線の分光成分から成る光源色
ベクトルの一例を表したもので、蛍光灯の分光分布図で
ある。
ベクトルの一例を表したもので、蛍光灯の分光分布図で
ある。
【図5】物体を照射する光線の分光成分から成る光源色
ベクトルの一例を表したもので、白熱電球の分光分布図
である。
ベクトルの一例を表したもので、白熱電球の分光分布図
である。
【図6】図3の純粋な物体色ベクトルの各成分値と、図
4の光源色ベクトルの各成分の積を求めた結果の画像デ
ータを表した図である。
4の光源色ベクトルの各成分の積を求めた結果の画像デ
ータを表した図である。
【図7】図3の純粋な物体色ベクトルの各成分値と、図
5の光源色ベクトルの各成分の積を求めた結果の画像デ
ータを表した図である。
5の光源色ベクトルの各成分の積を求めた結果の画像デ
ータを表した図である。
【図8】セグメント中の画像データを16次元の色空間
内にプロットした成分分解画像を示した図である。
内にプロットした成分分解画像を示した図である。
【図9】(a)は第1の実施の形態に於ける画像処理装
置の動作を説明するフローチャート、(b)は同図
(a)のステップS4に於けるベクトル算出の処理動作
の詳細を説明するサブルーチンである。
置の動作を説明するフローチャート、(b)は同図
(a)のステップS4に於けるベクトル算出の処理動作
の詳細を説明するサブルーチンである。
【図10】この発明の第2の実施の形態に係る画像処理
装置の構成を示すブロック図である。
装置の構成を示すブロック図である。
【図11】第2の実施の形態に於ける画像処理装置の動
作を説明するフローチャートである。
作を説明するフローチャートである。
【図12】RGB各々の視感度について表した図であ
る。
る。
【図13】この発明の第3の実施の形態に係る画像処理
装置の主要部の構成を示すブロック図である。
装置の主要部の構成を示すブロック図である。
【図14】図13に示された構成の画像処理装置による
物体画像の撮像状態の例を示した図である。
物体画像の撮像状態の例を示した図である。
【図15】この発明が適用された室内シミュレーション
装置に於いて合成された画像の例を示した図である。
装置に於いて合成された画像の例を示した図である。
【図16】この発明の第4の実施の形態に係る画像処理
装置の構成例を示す外観図である。
装置の構成例を示す外観図である。
【図17】物体色ベクトルに関係する拡散反射と照明光
ベクトルに関係する鏡面反射について説明する図であ
る。
ベクトルに関係する鏡面反射について説明する図であ
る。
1 電子カメラ、 2 画像メモリ、 3 制御部、 4、27 キーボード、 5、28 マウス、 6 画像データ演算部、 7 データメモリ、 11 対物レンズ、 12 結像レンズ、 13 CCD、 14 バンドパスフィルタ(BPF)、 15 円盤、 17 データ変更部、 18 表示用画像メモリ、 19 カラーディスプレイ、 20 照明光色データベース、 23、31 対象物体、 24 光源、 25 コンピュータ、 26 CRT、 32 照明光、 33 フィルタ。
Claims (3)
- 【請求項1】 光源からの光を物体に照射し、この物体
の画像を撮像する画像処理装置に於いて、 上記光源からの光及び上記物体の画像の画素値を、少な
くとも4つの波長領域の成分に分解して取り込む電子カ
メラと、 上記光源からの光の上記波長領域の成分値から光源色ベ
クトルを、上記波長領域の成分から成る物体の成分分解
画像から物体色ベクトル及び環境色ベクトルを推定する
制御手段と、 少なくとも4次元色空間中に、上記光源色ベクトル、上
記物体色ベクトル及び上記環境色ベクトルを設定し、上
記物体の画像の各画素値を上記光源色ベクトル、上記物
体色ベクトル及び上記環境色ベクトルの線形結合で表す
演算手段とを具備することを特徴とする画像処理装置。 - 【請求項2】 上記演算手段で表された上記物体の画像
の各画素値を記憶する記憶手段と、 この記憶手段に記憶された上記光源色ベクトル、上記物
体色ベクトル、上記環境色ベクトルと、上記演算手段に
より上記ベクトルの線形結合で表された物体画像の画素
値に於ける上記各ベクトルに対する3つの係数とのう
ち、少なくとも1つを変更するデータ変更手段と、 このデータ変更手段による変更がなされた後に上記光源
色ベクトル、上記物体色ベクトル、上記環境色ベクトル
と、上記3つの係数から、上記物体画像に対応する再生
画像を合成する合成手段と、 この合成手段で合成された画像を表示する表示手段とを
更に具備することを特徴とする請求項1に記載の画像処
理装置。 - 【請求項3】 上記電子カメラに設けられるもので、上
記物体に照射する光の所定の波長の光を遮断するフィル
タを更に具備し、 上記電子カメラは、上記物体からの蛍光による画像のみ
を撮像することを特徴とする請求項1に記載の画像処理
装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP8146049A JPH09327024A (ja) | 1996-06-07 | 1996-06-07 | 画像処理装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP8146049A JPH09327024A (ja) | 1996-06-07 | 1996-06-07 | 画像処理装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JPH09327024A true JPH09327024A (ja) | 1997-12-16 |
Family
ID=15398948
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP8146049A Pending JPH09327024A (ja) | 1996-06-07 | 1996-06-07 | 画像処理装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JPH09327024A (ja) |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11143031A (ja) * | 1997-11-11 | 1999-05-28 | Konica Corp | 非可視画像情報を用いた可視画像出力方法および可視画像形成方法 |
JP2000090233A (ja) * | 1998-09-08 | 2000-03-31 | Olympus Optical Co Ltd | 画像処理装置 |
JP2000333185A (ja) * | 1999-05-21 | 2000-11-30 | Fuji Photo Film Co Ltd | 撮影装置並びにホワイトバランス調整方法および装置 |
JP2000333186A (ja) * | 1999-05-19 | 2000-11-30 | Fuji Photo Film Co Ltd | マルチバンド画像出力方法および装置 |
JP2001275125A (ja) * | 2000-03-24 | 2001-10-05 | Semiconductor Energy Lab Co Ltd | カラー画像撮影及び再生装置、カラー画像再現システムおよびカラー画像再現方法。 |
JP2003259380A (ja) * | 2002-03-05 | 2003-09-12 | Fuji Film Microdevices Co Ltd | 固体撮像素子およびこれを用いた撮像装置 |
JP2004145773A (ja) * | 2002-10-28 | 2004-05-20 | Japan Science & Technology Agency | 通信ネットワークを介した商品画像の色再現方法 |
WO2008001943A1 (en) * | 2006-06-30 | 2008-01-03 | Fujifilm Corporation | Method and apparatus for diffusion based image relighting |
WO2008001941A1 (en) * | 2006-06-30 | 2008-01-03 | Fujifilm Corporation | Method and apparatus for diffusion based illumination normalization |
US7783187B2 (en) | 2006-11-14 | 2010-08-24 | Fujitsu Limited | Illumination controller, illumination control method, and imaging apparatus |
JP2017187994A (ja) * | 2016-04-07 | 2017-10-12 | 富士ゼロックス株式会社 | 画像処理装置、画像処理方法、画像処理システムおよびプログラム |
-
1996
- 1996-06-07 JP JP8146049A patent/JPH09327024A/ja active Pending
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11143031A (ja) * | 1997-11-11 | 1999-05-28 | Konica Corp | 非可視画像情報を用いた可視画像出力方法および可視画像形成方法 |
JP2000090233A (ja) * | 1998-09-08 | 2000-03-31 | Olympus Optical Co Ltd | 画像処理装置 |
JP2000333186A (ja) * | 1999-05-19 | 2000-11-30 | Fuji Photo Film Co Ltd | マルチバンド画像出力方法および装置 |
JP2000333185A (ja) * | 1999-05-21 | 2000-11-30 | Fuji Photo Film Co Ltd | 撮影装置並びにホワイトバランス調整方法および装置 |
JP2001275125A (ja) * | 2000-03-24 | 2001-10-05 | Semiconductor Energy Lab Co Ltd | カラー画像撮影及び再生装置、カラー画像再現システムおよびカラー画像再現方法。 |
JP2003259380A (ja) * | 2002-03-05 | 2003-09-12 | Fuji Film Microdevices Co Ltd | 固体撮像素子およびこれを用いた撮像装置 |
JP2004145773A (ja) * | 2002-10-28 | 2004-05-20 | Japan Science & Technology Agency | 通信ネットワークを介した商品画像の色再現方法 |
WO2008001943A1 (en) * | 2006-06-30 | 2008-01-03 | Fujifilm Corporation | Method and apparatus for diffusion based image relighting |
WO2008001941A1 (en) * | 2006-06-30 | 2008-01-03 | Fujifilm Corporation | Method and apparatus for diffusion based illumination normalization |
JP2009543161A (ja) * | 2006-06-30 | 2009-12-03 | 富士フイルム株式会社 | 拡散ベースの画像再照明のための方法および装置 |
US7747045B2 (en) | 2006-06-30 | 2010-06-29 | Fujifilm Corporation | Method and apparatus for diffusion based illumination normalization |
US7783187B2 (en) | 2006-11-14 | 2010-08-24 | Fujitsu Limited | Illumination controller, illumination control method, and imaging apparatus |
JP2017187994A (ja) * | 2016-04-07 | 2017-10-12 | 富士ゼロックス株式会社 | 画像処理装置、画像処理方法、画像処理システムおよびプログラム |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4231661B2 (ja) | 色再現装置 | |
JP3962588B2 (ja) | 三次元画像処理方法、三次元画像処理装置、三次元画像処理システムおよび三次元画像処理プログラム | |
US7044613B2 (en) | Realistic scene illumination reproduction | |
US6639628B1 (en) | Apparatus and method for processing color images | |
US4992963A (en) | Method and apparatus for determining ambient light and surface reflectance | |
CN110945561B (zh) | 高光谱成像分光光度计和*** | |
JP4910001B2 (ja) | 画像処理用の二光源二色性反射モデル | |
JP2006215756A (ja) | 画像処理装置および画像処理方法ならびにそのプログラム | |
JPH1185952A (ja) | 色再現装置 | |
JPH09327024A (ja) | 画像処理装置 | |
CN112437872A (zh) | 用于成像设备的颜色校准的方法和*** | |
WO2011148776A1 (en) | Image processing apparatus and image processing method | |
US7970236B2 (en) | Image transform apparatus and image transform program | |
CN109565577A (zh) | 色彩校正装置、色彩校正***、色彩校正用全息图、色彩校正方法以及程序 | |
JP2005249764A (ja) | 物体色測定方式 | |
Darling et al. | Real-time multispectral rendering with complex illumination | |
JP4174707B2 (ja) | 分光測定システム、色再現システム | |
JP2009271093A (ja) | 色票処理装置、色票処理方法及び色票処理プログラム | |
JP3962825B2 (ja) | 画像処理装置、及び、プログラム | |
WO2017195863A1 (ja) | 撮像装置 | |
Navvab et al. | Evaluation of historical museum interior lighting system using fully immersive virtual luminous environment | |
KR20200045264A (ko) | 검사 영역 결정 방법 및 이를 이용하는 외관 검사 장치 | |
Tominaga et al. | Appearance reconstruction of fluorescent objects based on reference geometric factors | |
JP7087743B2 (ja) | 色処理装置及びプログラム | |
JP7134532B1 (ja) | 画像合成表示装置、方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20060213 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060307 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20060704 |