JP4561465B2 - 画像編集装置 - Google Patents

Description

本発明は、複数のカラー画像データに、そのカラー画像データを解析した画像情報コードをそれぞれ付加し、その画像情報コードに基づき、指定された画像情報に対応する複数のカラー画像データをピックアップして表示する画像編集装置に関する。

近年、パーソナルコンピュータ（パソコン）の著しい普及に伴い、これに撮影した画像を表示するためのデジタルスチールカメラ（以下、単にデジタルカメラという）も著しい普及を示している。そして、これらのパソコンとデジタルカメラを使用して、パソコンにデジタルカメラからの画像を取込み、その取込んだ画像の中から何枚かの画像を選択してプリントする等の選択作業や、スクラップブッキングを作成するためにその取込んだ画像の中からイメージに合った画像を選択して取り出す等の選択作業が増加している。この画像を選択する際にはビデオモニタにインデックス画像を表示し、先頭画像からカーソルで順次追従させて所望の画像位置でカーソルを停止させ選択しているので、仮に、所望の画像が最後にあることが分かっていても、カーソルを順に最後まで追従させる必要があり、画像の選択に時間がかかりすぎるという問題がある。

上記のような問題を解決するために、例えば、特許文献１には、ビデオモニタにデジタルカメラからの複数のサムネイル画像を整列させて表示し、ビデオモニタの画面内で自在に移動可能にカーソルを表示しその位置（座標）を得て、カーソルを停止させた位置にある画像を印刷出力画像候補とし、確認入力があると選択画像として、それに対応する高解像度の画像をデジタルカメラからメモリに取込み、ビデオモニタに表示すると共に、表示示された画像にインデックスを付す機能を有している発明が開示されている。

特開平１０−１２６７２４号公報

しかしながら、特許文献１に記載されている画像選択方式では、メモリに取込んだ複数の画像データを表示装置の画面内に所定の大きさでｍ×ｎに整列させて表示し、カーソルを停止させた位置に表示されている画像を選択画像候補とする画像選択方式であるので基本的に画像の選択に時間がかかるという問題は変わらない。また、スクラップブッキングを作成する際に、例えば、明るくて黄色の強いイメージの画像を多数の画像の中から選択したつもりでも、その画像がメモリに取込んだ複数の画像データの中で１番明るくて黄色の強いイメージの画像であるかどうか分からないという問題がある。

以上のような状況に鑑み、本発明は、上述した問題点を解決するためになされたものであり、複数のカラー画像データに、そのカラー画像データを解析した画像情報コードをそれぞれ付加し、その画像情報コードに基づき、指定された画像情報に対応する複数のカラー画像データをピックアップして表示する画像編集装置を提供することを目的とする。

前記目的を達成するために請求項１に係る画像編集装置は、複数のカラー画像データを記憶する画像データ記憶手段と、前記画像データ記憶手段に記憶されたカラー画像データの明度、彩度及び色相の各画像情報を解析し、数値化するための演算を行う画像データ解析演算手段と、前記画像データ解析演算手段により解析演算された画像情報の平均化演算を行う平均データ演算手段と、前記平均データ演算手段を介して平均化された画像情報のコード化された画像情報コードをカラー画像データに付加する第１のデータ付加手段と、各画像情報を設定する設定手段と、前記設定手段を介して設定された画像情報と前記第１のデータ付加手段を介してカラー画像データに付加された平均化された画像情報コードとに基づき、前記設定された画像情報に対応する前記カラー画像データの候補を前記画像データ記憶手段に記憶されている複数のカラー画像からピックアップするピックアップ手段と、前記ピックアップ手段を介してピックアップされたカラー画像データを表示する表示手段とを備え、前記画像データ解析演算手段は、前記画像データ記憶手段に記憶されたカラー画像データの色相の画像情報を解析し、数値化するための演算を行う場合には、（１）カラー画像データから１画素のＲＧＢデータを読み込む処理を実施し、（２）前記（１）の処理で読み込まれたＲＧＢデータについて、Ｒのデータが最大値であれば、有彩色成分に占めるＢとＧの差分の割合に基づいて色相位置を数値化するための演算を行う処理を実施し、（３）前記（１）の処理で読み込まれたＲＧＢデータについて、Ｇのデータが最大値であれば、有彩色成分に占めるＢとＲの差分の割合とＧ純色色相位置に基づいて色相位置を数値化するための演算を行う処理を実施し、（４）前記（１）の処理で読み込まれたＲＧＢデータについて、Ｂのデータが最大値であれば、有彩色成分に占めるＧとＲの差分の割合とＢ純色色相位置に基づいて色相位置を数値化するための演算を行う処理を実施し、（５）前記（２）乃至前記（４）のいずれか一つの処理で数値化された色相位置を、全体を基準値としたときの値ｉに換算する処理を実施し、（６）前記（５）の処理で換算された値ｉに対応する変数ｈ（ｉ）をインクリメントする処理を実施し、（７）前記（１）乃至前記（６）の各処理を該当カラー画像データの全画素について実施し、前記平均データ演算手段は、該当カラー画像データの色相の画像情報の平均化演算を行うために、（８）前記（６）の処理で取り扱われた各変数ｈ（ｉ）のうち最頻値であるＭＡＸｈ（ｉ）を、該当カラー画像データの全画素数Ｎで除することにより、全画素の色相分布の最頻値の平均値であるＭＡＸｈ（ｉ）／Ｎを算出するための演算を行う処理を実施し、（９）前記（８）の処理で算出された全画素の色相分布の最頻値の平均値であるＭＡＸｈ（ｉ）／Ｎに基づいて、全画素の色相分布の最頻値の色相位置ｉを特定するための演算を行う処理を実施し、（１０）前記（９）の処理で特定された全画素の色相分布の最頻値の色相位置ｉを平均化された画像情報として扱う、ことを特徴とする。

また、請求項２に係る画像編集装置は、請求項１に記載の画像編集装置において、前記第１のデータ付加手段によりカラー画像データに付加される平均化された画像情報が、各カラー画像データの固有情報を記憶する記憶エリアに設けられているユーザー用データエリアに記憶されることを特徴とする。

また、請求項３に係る画像編集装置は、請求項１または請求項２に記載の画像編集装置において、前記平均化された画像情報の値が取り得る範囲を複数に区分するとともに、その区分された各範囲の値とカラー画像データの画像の有するイメージを分類分けする色彩イメージランクとを対応して記憶する色彩テーブルと、前記色彩テーブルに基づき、前記平均データ演算手段を介して演算されたカラー画像データにおける平均化された画像情報に対応する色彩イメージランクを抽出するとともに、その抽出された色彩イメージランクをコード化した情報コードをカラー画像データに付加する第２のデータ付加手段と、前記色彩イメージランクを指定するランク指定手段とを備え、前記ランク指定手段により指定された色彩イメージランクに基づくカラー画像データの候補をピックアップして表示することを特徴とする。

また、請求項４に係る画像編集装置は、請求項３に記載の画像編集装置において、前記第２のデータ付加手段によりカラー画像データに付加される色彩イメージランクの情報コードは、各カラー画像データの固有情報を記憶する記憶エリアに設けられているユーザー用データエリアに記憶されることを特徴とする。

請求項１に係る画像編集装置は、複数のカラー画像データを記憶する画像データ記憶手段と、画像データ記憶手段に記憶されたカラー画像データの明度、彩度及び色相の各画像情報を解析し、数値化するための演算を行う画像データ解析演算手段と、画像データ解析演算手段により解析演算された画像情報の平均化演算を行う平均データ演算手段と、平均データ演算手段を介して平均化された画像情報のコード化された画像情報コードをカラー画像データに付加する第１のデータ付加手段と、各画像情報を設定する設定手段と、設定手段を介して設定された画像情報と第１のデータ付加手段を介してカラー画像データに付加された平均化された画像情報コードとに基づき、設定された画像情報に対応するカラー画像データの候補を画像データ記憶手段に記憶されている複数のカラー画像からピックアップするピックアップ手段と、ピックアップ手段を介してピックアップされたカラー画像データを表示する表示手段とを備えたので、所望する明るさ、鮮やかさ、色合いのカラー画像データを瞬時に検索して見ることができる。また、基準とするカラー画像を解析することによって他のカラー画像を比較、分類分けすることができる。更に、観察するカラー画像に対する明るさ、鮮やかさ、色合いの個人差を排除できる。

また、請求項２に係る画像編集装置では、第１のデータ付加手段によりカラー画像データに付加される平均化された画像情報は、各カラー画像データの固有情報を記憶する記憶エリアに設けられているユーザー用データエリアに記憶されるので、独自のフォーマットを起こす必要が無い。また、データの互換性も保たれる。更に、ユーザー用データエリアを画像編集装置の外部メモリとして使用できる。

また、請求項３に係る画像編集装置では、平均化された画像情報の値が取り得る範囲を複数に区分するとともに、その区分された各範囲の値とカラー画像データの画像の有するイメージを分類分けする色彩イメージランクとを対応して記憶する色彩テーブルと、色彩テーブルに基づき、平均データ演算手段を介して演算されたカラー画像データにおける平均化された画像情報に対応する色彩イメージランクを抽出するとともに、その抽出された色彩イメージランクをコード化した情報コードをカラー画像データに付加する第２のデータ付加手段と、色彩イメージランクを指定するランク指定手段とを備え、ランク指定手段により指定された色彩イメージランクに基づくカラー画像データの候補をピックアップして表示するので、所望する画像を明るさ、鮮やかさ、色合いだけでなくイメージで瞬時に検索して見ることができる。また、イメージを言葉にすることによってヒューマンインターフェイスにあった検索ができる。

また、請求項４に係る画像編集装置では、第２のデータ付加手段によりカラー画像データに付加される色彩イメージランクの情報コードは、各カラー画像データの固有情報を記憶する記憶エリアに設けられているユーザー用データエリアに記憶されるので、独自のフォーマットを起こす必要が無い。また、データの互換性も保たれる。更に、ユーザー用データエリアを画像編集装置の外部メモリとして使用できる。

以下、本発明を具体化した実施形態に基づいて図面を参照しつつ詳細に説明する。図１は本発明の画像編集装置の構成図である。画像編集装置１は、画像データ格納処理部２、画像データ記憶部３、画像データ解析処理部４、検索情報付加処理部５、検索処理部６、表示処理部７及び図示しないシリアルインターフェイス、パラレルインターフェイス、ＵＳＢインターフェイスと電源部から構成されている（更に、メモリーカードインターフェイスを設けてもよい）。

また、画像編集装置１には、文字入力部８、画像表示部９、デジタルカメラ１０がケーブルを介して接続可能であり、電源補充用にＡ／Ｃアダプタ１１の接続も可能である。
尚、必要であればプリンタを接続してもよい。そのプリンタはカラー印刷が可能で、高品質なカラー画像の再現印刷が可能な濃・淡カラープリンタであることが望ましい。

画像データ格納処理部２は、検索情報付加処理部５の信号によってデジタルカメラ１０から画像データを取り込み画像データ記憶部３に記憶させる。また、検索情報付加処理部５の信号によって画像データ記憶部３に記憶された画像データを画像データ解析処理部４に送り、解析されたデータを画像データ記憶部３に戻して画像データ記憶部３に記憶されている画像データに付加する。更に、検索処理部６の信号によって検索条件にあった解析データを付加した画像データが画像データ記憶部３からピックアップされて検索処理部６に送られる。

画像データ記憶部３には、デジタルカメラ１０が有しているのと同様のＥｘｉｆ準拠画像データの形式で画像データが記憶される。ここで、図２はＥｘｉｆデータの内部構造を示す説明図である。図２に示すように、Ｅｘｉｆデータ１２は、Ｅｘｉｆヘッダー１２ａ、メインイメージデータ１２ｂ、Ｅｘｉｆサブデータ１２ｃ、サムネイルイメージデータ１２ｄで構成され、Ｅｘｉｆサブデータ１２ｃの中に撮影情報等が記憶されるカメラデータエリア１２ｅ、メーカー固有の情報を設定できるメーカーノートエリア１２ｆ、使用者がコメント情報を記憶させるユーザーコメントエリア１２ｇを有している。そして、画像データ解析処理部４で解析された解析データは、このユーザーコメントエリア１２ｇに記憶される。そして、ユーザーコメントエリア１２ｇが用意されていないとき、もしくは余裕がないときにはメーカーノートエリア１２ｆが使用される。
上述のユーザーコメントエリア１２ｇに書き込まれる検索情報付加データの内部構造を図３に示す。図３はユーザーコメントエリアに書き込まれる検索情報付加データの内部構造を示す説明図である。例えば、Tag No.１には色彩イメージ、Tag No.２には全画素の明度の総計の平均、Tag No.３には全画素の彩度の総計の平均、Tag No.４には全画素の色相分布の最頻値の平均、Tag No.５には全画素の色相分布の最頻値の位置等が書き込まれる。また、図４にメーカーノートエリア１２ｆのメーカーノートエリアデータ格納領域２２を示す。図４はメーカーノートエリアデータ格納領域を示す説明図である。例えば、オフセット８の位置にTagのエントリー数、オフセット１０の位置にTag １のデータ、オフセット２２の位置にTag ２のデータ等が書き込まれる。
尚、必要であればデジタルカメラ１０が有しているメディアを外部メモリとして使用してもよい。

画像データ解析処理部４では、画像データ記憶部３に記憶されたカラー画像データの明度、彩度及び色相の各画像情報を解析し、数値化するための演算を行う。また、解析演算された画像情報の平均化演算を行う。また、平均化された画像情報を複数の範囲に区分するとともに、その区分された各範囲の画像情報とカラー画像データの画像の有するイメージを分類分けしコード化する。

検索情報付加処理部５では、画像データ記憶部３に記憶されたカラー画像データの明度、彩度及び色相の各画像情報を数値化し、平均化した画像情報を画像データ記憶部３に記憶されたカラー画像データに付加する。そして、平均化された画像情報を複数の範囲に区分するとともに、その区分された各範囲の画像情報とカラー画像データの画像の有するイメージを分類分けしコード化した情報コードを画像データ記憶部３に記憶されているカラー画像データに付加する。

検索処理部６は、カラー画像データに付加されている平均化された画像情報コードに基づいて、設定された検索条件に対応するカラー画像データの候補を画像データ記憶部３に記憶されている複数のカラー画像からピックアップする。また、設定された検索条件により、画像の有するイメージを分類分けしコード化した情報コードに基づくカラー画像データの候補を画像データ記憶部３に記憶されている複数のカラー画像からピックアップする。

表示処理部７は、検索処理部６でピックアップされたカラー画像データを画像表示部９に出力する。画像表示部９には、高画質のカラー液晶ディスプレイのビデオモニタ１３が使用される。

また、検索情報付加処理部５に色彩イメージを入力する場合や検索処理部６に検索条件を入力する場合には、文字入力部８にキーボード１４が使用される。更にキーボード１４は、画像編集装置１の起動や終了及び命令の入力にも使用される。
また、検索情報付加処理部５や検索処理部６の処理の仕方がビデオモニタ１３に指示される場合は文字入力部８にマウス１５が使用されユーザーインターフェイスが重視されたものになる。尚、文字入力部８にはスイッチパネルやジョイスティックを使用してもよい。

上記の構成において、画像編集装置１の動作を図５乃至図１６に基づいて説明する。尚、フローチャートの図面におけるステップは、Ｓと略記する。

図５は画像編集装置の状態遷移図である。図５によって、画像編集装置１の概略の動作を説明する。
先ず、画像編集装置１の電源がＯＮされ（Ｓ１）、キーボード１４またはマウス１５によって編集処理が選択されると（Ｓ２）、デジタルカメラ１０からカラー画像データを読み込み画像データ記憶部３に記憶させ、記憶したカラー画像データを画像データ解析処理部４に転送する（Ｓ３）。画像データ解析処理部４でカラー画像データの解析処理をおこない（Ｓ４）、解析されたカラー画像データを検索情報として使用するために、読み込まれたカラー画像データに検索情報付加処理をする（Ｓ５）。
こうして編集処理されたカラー画像データを使用して後述するスクラップブッキング１９（図１４参照）を作成する場合には、そこに貼り付けるイメージに合ったカラー画像を選択しなければならない。そのために、画像編集装置１をキーボード１４またはマウス１５によってプレビュー処理の状態にする（Ｓ６）。そして、イメージに合った検索情報の入力処理をおこない（Ｓ７）、検索候補抽出処理によって抽出されてビデオモニタ１３に表示された複数のカラー画像の中から、最もイメージに合ったカラー画像を選択する（Ｓ８）。選択されたカラー画像をプレビュー処理の中で配置し（Ｓ６）、できあがったスクラップブッキング１９を、ビデオモニタ１３に表示、またはプリンタで印刷処理する（Ｓ９）。そして、電源をＯＦＦして終了する。

次に、各処理について詳細に説明する。
先ず、図６に基づいて画像データ解析処理を説明する。図６は画像データ解析処理のフローチャートである。画像データ解析処理部４では、画像データ記憶部３に記憶されたカラー画像データの明度（Ｖ）、彩度（Ｓ）及び色相（Ｈ）の各画像情報をＲ（赤）、Ｇ（緑）、Ｂ（青）データを基にして解析し、数値化するための演算を行う。

始めに、画像データ解析処理部４の初期設定を行う（Ｓ１０１）。そして、画像データ記憶部３に記憶されたカラー画像データを読み込み、カラー画像データの全画素のサーチをおこない全画素がサーチされたか判別する（Ｓ１０２）。全画素がサーチされていなければ（Ｓ１０２、ＮＯ）、該当１画素のＲＧＢデータの読み込みをおこなう（Ｓ１０３）。そして、読み込まれたＲＧＢデータに基づいて明度（Ｖ）と彩度（Ｓ）を数値化するための演算を行う（Ｓ１０４）。次に、色相（Ｈ）を数値化するためのステップにはいる。まずＳ１０５に進み、Ｒのデータが最大値であるか判別する。Ｒのデータが最大値でなければ（Ｓ１０５、ＮＯ）、次のＳ１０７に進み、Ｒのデータが最大値であれば（Ｓ１０５、ＹＥＳ）、Ｓ１０６に進む。このＳ１０６では有彩色成分に占めるＢとＧの差分の割合に基づいて色相（Ｈ）を数値化するための演算を行う。そして、次のＳ１０７に進む。Ｓ１０７ではＧのデータが最大値であるか判別する。Ｇのデータが最大値でなければ（Ｓ１０７、ＮＯ）、次のＳ１０９に進み、Ｇのデータが最大値であれば（Ｓ１０７、ＹＥＳ）、Ｓ１０８に進む。このＳ１０８では有彩色成分に占めるＢとＲの差分の割合とＧ純色色相位置に基づいて色相（Ｈ）を数値化するための演算を行う。そして、次のＳ１０９に進む。Ｓ１０９ではＢのデータが最大値であるか判別する。Ｂのデータが最大値でなければ（Ｓ１０９、ＮＯ）、次のＳ１１１に進み、Ｂのデータが最大値であれば（Ｓ１０９、ＹＥＳ）、Ｓ１１０に進む。このＳ１１０では有彩色成分に占めるＧとＲの差分の割合とＢ純色色相位置に基づいて色相（Ｈ）を数値化するための演算を行う。そして、次のＳ１１１に進む。Ｓ１１１では色相位置Ｈを色相位置Ｈの全体を１００としたときの値に換算し、Ｓ１１２で該当１画素の代表色相値ｈ(H)を１増やしてＳ１０２に戻る。このＳ１０２からＳ１１２をカラー画像データの全画素について実施して全画素の明度（Ｖ）、彩度（Ｓ）及び色相（Ｈ）の各画像情報をＲＧＢデータを基にして解析し、数値化する。そして、全画素がサーチされると（Ｓ１０２，ＹＥＳ）終了する。

続いて、図７、図８、図９に基づいて、検索情報付加処理を説明する。図７、図８、図９は検索情報付加処理のフローチャートである。ここでは、図６の画像データ解析処理によって解析され、数値化されたカラー画像データの明度、彩度及び色相の各画像情報を平均化し、平均化された画像情報を画像データ記憶部３に記憶されているカラー画像データに付加する処理をおこなう。そして、平均化された画像情報を複数の範囲に区分するとともに、その区分された各範囲の画像情報とカラー画像データの画像の有するイメージを分類分けしコード化した情報コードを画像データ記憶部３に記憶されたカラー画像データに付加する。

先ず、Ｓ２０１では全画素の明度の総計の平均値Ｖ／Ｎを演算し、その値を図３に示す検索情報付加データ１６のTag No.２に書き込む準備をする。次に、Ｓ２０２に進み、全画素の彩度の総計の平均値Ｓ／Ｎを演算し、その値を図３に示す検索情報付加データ１６のTag No.３に書き込む準備をする。次に、Ｓ２０３に進み、全画素の色相分布の最頻値の平均値ＭＡＸｈ(ｉ)／Ｎを演算し、その値を図３に示す検索情報付加データ１６のTag No.４に書き込む準備をするとともに、全画素の色相分布の最頻値の位置ｉを演算し、その値を図３に示す検索情報付加データ１６のTag No.５に書き込む準備をする。

そして、Ｓ２０４に進み、色彩イメージの設定を図１０に示す色彩イメージ自動設定用範囲テーブル１７に基づいて自動設定するか、図１１に示す色彩イメージ手動設定画面１８でおこなうか判定する。

上述の図１０は色彩イメージ自動設定用範囲テーブルを示す説明図である。図１０に示すように、色彩イメージ自動設定用範囲テーブル１７は、各平均化される画像情報の値を複数の範囲に区分し、その区分された各範囲にカラー画像の有する色彩イメージが色彩イメージ番号とともに割り付けられている。そして、この色彩イメージ自動設定用範囲テーブル１７を使用することによって、各平均化されて出された画像情報の値をその区分された各範囲に当て嵌めることによってカラー画像の有する色彩イメージが色彩イメージ番号とともにピックアップできる。

また、図１１は読み込んだ画像に色彩イメージを手動設定する方法を示す説明図である。図１１の色彩イメージ手動設定画面１８に示す表示された色彩イメージ設定画像１８ａに対し、表示されている色彩イメージを選択するキーワード群１８ｂの色彩イメージを選択して決定ボタン１８ｆにより色彩イメージが決定される。詳細は後述する。

ここで、Ｓ２０４で自動が選択されるとＳ２０５に進み、図１０の色彩イメージ自動設定用範囲テーブル１７よりＶ／Ｎの該当範囲にある色彩イメージ番号をピックアップする。次に、Ｓ２０６に進み、色彩イメージ自動設定用範囲テーブル１７よりＳ／Ｎの該当範囲にある色彩イメージ番号をピックアップする。次に、Ｓ２０７に進み、色彩イメージ自動設定用範囲テーブル１７よりＭＡＸｈ(ｉ)／Ｎ及びｉの該当範囲にある色彩イメージ番号をピックアップする。

そして、Ｓ２０８に進み、Ｓ２０５からＳ２０７の各ステップで色彩イメージ番号のピックアップが一つもなしか判定する。色彩イメージ番号のピックアップがある場合（Ｓ２０８、ＮＯ）、Ｓ２０９に進み、ＭＡＸｈ(ｉ)／Ｎかつｉのピックアップがなしか判定する。ＭＡＸｈ(ｉ)／Ｎかつｉのピックアップがある場合（Ｓ２０９、ＮＯ）、Ｓ２１０に進み、Ｓ／Ｎのピックアップがなしか判定する。Ｓ／Ｎのピックアップがある場合（Ｓ２１０、ＮＯ）、Ｓ２１１に進み、Ｖ／Ｎのピックアップがなしか判定する。Ｖ／Ｎのピックアップがある場合（Ｓ２１１、ＮＯ）、Ｓ２１２に進み、Ｖ／Ｎ＆Ｓ／Ｎ＆ＭＡＸｈ(ｉ)／Ｎ＆ｉの最も該当する範囲の中央にある色彩イメージ番号をピックアップしてTag No.１に書き込む準備をし、Ｓ２２４に進む。

次に、Ｓ２１１に戻って説明すると、Ｖ／Ｎのピックアップがない場合（Ｓ２１１、ＹＥＳ）、Ｓ２１３に進み、Ｓ／Ｎ＆ＭＡＸｈ(ｉ)／Ｎ＆ｉの最も該当する範囲の中央にある色彩イメージ番号をピックアップしてTag No.１に書き込む準備をし、Ｓ２２４に進む。

次に、Ｓ２１０に戻って説明すると、Ｓ／Ｎのピックアップがない場合（Ｓ２１０、ＹＥＳ）、Ｓ２１４に進み、Ｖ／Ｎのピックアップがなしか判定する。Ｖ／Ｎのピックアップがある場合（Ｓ２１４、ＮＯ）、Ｓ２１５に進み、Ｖ／Ｎ＆ＭＡＸｈ(ｉ)／Ｎ＆ｉの最も該当する範囲の中央にある色彩イメージ番号をピックアップしてTag No.１に書き込む準備をし、Ｓ２２４に進む。

次に、Ｓ２１４に戻って説明すると、Ｖ／Ｎのピックアップがない場合（Ｓ２１４、ＹＥＳ）、Ｓ２１６に進み、ＭＡＸｈ(ｉ)／Ｎ＆ｉの最も該当する範囲の中央にある色彩イメージ番号をピックアップしてTag No.１に書き込む準備をし、Ｓ２２４に進む。

次に、Ｓ２０９に戻って説明すると、ＭＡＸｈ(ｉ)／Ｎかつｉのピックアップがない場合（Ｓ２０９、ＹＥＳ）、Ｓ２１７に進み、Ｓ／Ｎのピックアップがなしか判定する。Ｓ／Ｎのピックアップがある場合（Ｓ２１７、ＮＯ）、Ｓ２１８に進み、Ｖ／Ｎのピックアップがなしか判定する。Ｖ／Ｎのピックアップがある場合（Ｓ２１８、ＮＯ）、Ｓ２１９に進み、Ｖ／Ｎ＆Ｓ／Ｎの最も該当する範囲の中央にある色彩イメージ番号をピックアップしてTag No.１に書き込む準備をし、Ｓ２２４に進む。

次に、Ｓ２１８に戻って説明すると、Ｖ／Ｎのピックアップがない場合（Ｓ２１８、ＹＥＳ）、Ｓ２２０に進み、Ｓ／Ｎの最も該当する範囲の中央にある色彩イメージ番号をピックアップしてTag No.１に書き込む準備をし、Ｓ２２４に進む。

次に、Ｓ２１７に戻って説明すると、Ｓ／Ｎのピックアップがない場合（Ｓ２１７、ＹＥＳ）、Ｓ２２１に進み、Ｖ／Ｎの最も該当する範囲の中央にある色彩イメージ番号をピックアップしてTag No.１に書き込む準備をし、Ｓ２２４に進む。

次に、Ｓ２０８に戻って説明すると、色彩イメージ番号のピックアップがない場合（Ｓ２０８、ＹＥＳ）、Ｓ２２２に進み、Tag No.１に色彩イメージ番号１を書き込む準備をし、Ｓ２２４に進む。

次に、Ｓ２０４に戻って説明すると、Ｓ２０４で手動が選択されるとＳ２２３に進み、Tag No.１に操作者が設定した色彩イメージ番号を書き込む準備をし、Ｓ２２４に進む。

そして、Ｓ２２４では図２に示すＥｘｉｆデータの内部構造にユーザーコメントエリア１２ｇを示すTag（９２８６ｈ）をサーチしてその存在を判定する。ユーザーコメントエリア１２ｇを示すTag（９２８６ｈ）が存在する場合は（Ｓ２２４、有）、Ｓ２２５に進み、ユーザーコメントエリア１２ｇの大きさが所望情報の書き込みが可能であるか判定する。ユーザーコメントエリア１２ｇの大きさが所望情報の書き込みが可能である場合は（Ｓ２２５、ＹＥＳ）、Ｓ２２６に進み、ユーザーコメントエリア１２ｇにTag No.１〜５までの今までに書き込む準備がされたデータを９バイト目から上書きで書き込む（先頭から８バイトは予約領域）。そして、終了する。
また、Ｓ２２４でユーザーコメントエリア１２ｇを示すTag（９２８６ｈ）が存在しない場合は（Ｓ２２４、無）、Ｓ２２７に進む。また、Ｓ２２５でユーザーコメントエリア１２ｇの大きさが不足するときも（Ｓ２２５、ＮＯ）、Ｓ２２７に進む。

そして、Ｓ２２７では図２に示すＥｘｉｆデータの内部構造にメーカーノートエリア１２ｆを示すTag（９２７Ｃｈ）をサーチしてその存在を判定する。メーカーノートエリア１２ｆを示すTag（９２７Ｃｈ）が存在する場合は（Ｓ２２７、有）、Ｓ２２８に進み、メーカーノートエリア１２ｆの最終Tagの終わりからTag No.１〜５までの書き込みデータ分をずらす。

次に、Ｓ２２９に進み、そのずらしたエリアにTag No.１〜５までの今までに書き込む準備がされたデータを書き込む。

そして、Ｓ２３０に進み、メーカーノートエリア１２ｆのファイルサイズを書き込んだ分増やし、メーカーノートエリア１２ｆのTag数を５増やす。さらにメーカーノートエリア１２ｆ以降のデータ領域のオフセットアドレスを全て書き込んだ分増やして終了する。

また、メーカーノートエリア１２ｆを示すTag（９２７Ｃｈ）が存在しない場合は（Ｓ２２７、無）、Ｓ２３１に進み、「その画像ファイルには検索情報の書き込みは不可」の旨のエラー表示をして終了する。

そして、図６の画像データ解析処理、図７、図８、図９の画像情報付加処理を画像データ記憶部３に記憶されているカラー画像データ個々の全てに施すことによって、検索用情報が画像データ記憶部３に記憶されているカラー画像データ個々の全てに付加される。

続いて、係る検索用情報を使用して、所望するカラー画像データをピックアップするための検索情報入力処理について、図１２に基づいて説明する。図１２は検索情報入力処理のフローチャートである。尚、解析時の明度は明るさ、彩度は鮮やかさ、色相は色合いに相当する。
先ず、Ｓ３０１で検索条件の選択をする。Ｓ３０２に進み、検索条件が明るさかどうかの判定をする。明るさであれば（Ｓ３０２、ＹＥＳ）、Ｓ３０３に進み、所望の明るさを指定する。その後、Ｓ３０４に進み、所望の候補数を指定し、Ｓ３１２進む。

また、Ｓ３０２で明るさでなければ（Ｓ３０２、ＮＯ）、Ｓ３０５に進み、検索条件が鮮やかさかどうかの判定をする。鮮やかさであれば（Ｓ３０５、ＹＥＳ）、Ｓ３０６に進み、所望の鮮やかさを指定する。その後、Ｓ３０７に進み、所望の候補数を指定し、Ｓ３１２進む。

更に、Ｓ３０５で鮮やかさでなければ（Ｓ３０５、ＮＯ）、Ｓ３０８に進み、検索条件が色合いかどうかの判定をする。色合いであれば（Ｓ３０８、ＹＥＳ）、Ｓ３０９に進み、所望の色合いを指定する。その後、Ｓ３１０に進み、所望の候補数を指定し、Ｓ３１２進む。

そして、Ｓ３０８で色合いでなければ（Ｓ３０８、ＮＯ）、Ｓ３１１に進み、検索条件に所望の色彩イメージを指定し、Ｓ３１２に進む。

このＳ３１２では検索を開始する検索ボタンを操作する。この操作によって、Ｓ３１３に進み、各選択された検索条件によって検索候補抽出処理がおこなわれる。
尚、図１２の検索情報入力処理のフローチャートでは検索条件の指定を明るさ、鮮やかさ、色合いの単独でおこなっているがこれらの組合せでおこなってもよい。

続いて、図１２で指定された検索条件で、その候補を抽出してピックアップする検索候補抽出処理について図１３に基づいて説明する。図１３は検索候補抽出処理のフローチャートである。
先ず、Ｓ４０１で指定の候補を読み込み、Ｓ４０２で検索条件は明るさかどうか判定する。検索条件が明るさである場合は（Ｓ４０２、ＹＥＳ）、Ｓ４０３に進み、指定の明るさに該当する候補を降順に指定の候補数分をピックアップして終了する。

また、Ｓ４０２で検索条件が明るさでない場合は（Ｓ４０２、ＮＯ）、Ｓ４０４に進み、検索条件は鮮やかさかどうか判定する。検索条件が鮮やかさである場合は（Ｓ４０４、ＹＥＳ）、Ｓ４０５に進み、指定の鮮やかさに該当する候補を降順に指定の候補数分をピックアップして終了する。

更に、Ｓ４０４で検索条件が鮮やかさでない場合は（Ｓ４０４、ＮＯ）、Ｓ４０６に進み、検索条件は色合いかどうか判定する。検索条件が色合いである場合は（Ｓ４０６、ＹＥＳ）、Ｓ４０７に進み、指定の色合いに該当する候補を降順に指定の候補数分をピックアップして終了する。

そして、Ｓ４０６で検索条件が色合いでない場合は（Ｓ４０６、ＮＯ）、Ｓ４０８に進み、指定の色彩イメージに該当する候補を降順に全てピックアップして終了する。

このように動作する画像編集装置１に接続されるビデオモニタ１３の画面表示について説明する。
先ず、図１１の表示画面から説明する。図１１は読み込んだ画像に色彩イメージを手動設定する方法を示す説明図である。この表示画面は、検索情報付加処理中に色彩イメージ設定を手動にしたときに表示される。ビデオモニタ１３に表示された色彩イメージ手動設定画面１８には色彩イメージ設定画像１８ａ、色彩イメージを選択するキーワード群１８ｂ、頁を進める次頁ボタン１８ｃ、頁を戻す前頁ボタン１８ｄ、頁指定／頁表示１８ｅ、色彩イメージを決定する決定ボタン１８ｆ、色彩イメージを変更する修正ボタン１８ｇが表示されている。
この表示画面の使い方は、色彩イメージ設定画像１８ａを次頁ボタン１８ｃと前頁ボタン１８ｄで設定してから、色彩イメージを選択するキーワード群１８ｂの中から色彩イメージ設定画像１８ａに合った色彩イメージを選択して決定ボタン１８ｆで決定する。このときの頁は頁指定／頁表示１８ｅに表示されている。また、修正したい頁があるときは次頁ボタン１８ｃと前頁ボタン１８ｄで頁を指定してその頁を開き、修正ボタン１８ｇで情報をリセットしてから、再度、色彩イメージを選択するキーワード群１８ｂの中から色彩イメージ設定画像１８ａに合った色彩イメージを選択して決定ボタン１８ｆで決定する。次頁ボタン１８ｃを順次頁を送りながら画像データ記憶部３に記憶されたカラー画像データに色彩イメージを手動で付加していく。これらの操作はマウス１５のポインタでおこなわれる。そして、図１１の表示画面は８／１０００枚目のカラー画像データに色彩イメージ２０のCoolが選択されていることを意味する。尚、指定するページはキーボード１４から直接その頁を指定してもよい。

次に、図１４、図１５、図１６のビデオモニタ１３の画面表示に基づいて、画像編集装置１の使用方法の一例を説明する。図１４はスクラップブッキングを作成するためのプレビュー全体の画面表示を示す説明図、図１５はカラー画像データの全体から所望の明るさ、鮮やかさ、色合いの画像を自動抽出する方法を説明する説明図、図１６はカラー画像データの全体から所望の色彩イメージ画像を自動抽出する方法を示す説明図である。

先ず、図１４に示すようなスクラップブッキング１９を作成する。アイテム１９ａ〜１９ｅは各アイテムの画像データからイメージに合った画像データを読み出して貼り付ける。貼り付け作業の中で、アイテム１９ｂにやや明るいイメージのカラー画像を貼り付ける必要性が生じたとき、そのために多数のカラー画像から目的のカラー画像を一枚一枚探すのは時間も掛かり大変な作業である。しかも、極端な差が無いと候補が増えて決まらない場合もある。そこで、本発明の画像編集装置１を使用してイメージに合ったカラー画像データを簡単に読み出す方法を説明する。

先ず、ビデオモニタ１３の画面表示をキーボード１４からのキー入力で図１５の画面表示に変更する。ここで、画面表示の内容について説明する。先ず、ビデオモニタ１３に表示された所望ＨＳＶの画像自動抽出画面２０には、検索条件に対する所望の候補画像２０ａ、２０ｂ、２０ｃが降順に表示される。そして、候補数によってはスクロールボタン２０ｒによって候補画像をスクロールさせる。次に、検索条件は明るさ、鮮やかさ、色合い、色彩イメージの４項目であり、それぞれの記号の前に明るさの指定スポット２０ｄ、鮮やかさの指定スポット２０ｅ、色合いの指定スポット２０ｆ、色彩イメージの指定スポット２０ｇが配置され、マウス１５で指定スポットを選択すると選択された指定スポットの検索条件になり、指定スポットが変色する。また、それぞれの記号の後には明るさの幅を設定するスライダ２０ｈ、鮮やかさの幅を設定するスライダ２０ｋ、色合いの位置を決めるスライダ２０ｍが配置されている。そして、各指定スポットが選択されると対応するスライダのツマミも変色する。更に、キーボード１４から入力される候補数が表示される候補数表示部２０ｎが検索ボタン２０ｐとともに配置されている。
この表示画面の使い方は、マウス１５で明るさの指定スポット２０ｄを選択すると指定スポット２０ｄが変色し、検索条件は明るさになる。前述したように、スライダ２０ｈのツマミも変色し、マウス１５でこのツマミを移動させて明るさの幅をやや明るい位置に設定する。次に、キーボード１４から候補数５を入力して検索ボタン２０ｐをマウス１５で選択すると検索が開始され指定の明るさに該当する５枚の候補が左から降順に表示される。表示は３枚であるので、確認のためにマウス１５でスクロールボタン２０ｒを選択し、画面をスクロールすることによって残りの２枚を確認することができる。表示された候補がイメージに合わなければスライダ２０ｈのツマミで微調整することによってイメージに合う候補を探すことができる。ここでは、最初に表示された左の候補画像２０ａが所望の明るさのカラー画像であるので、このカラー画像データを取り込み、図１４の画面表示に戻ってスクラップブッキング１９のアイテム１９ｂの位置に候補画像２０ａを貼り付けて完成させる。

また、図１５の所望ＨＳＶの画像自動抽出画面２０のとき、検索条件で色彩イメージが選択されるとビデオモニタ１３の画面表示には図１６の色彩イメージ自動抽出画面２１が表示される。ビデオモニタ１３に表示された色彩イメージ自動抽出画面２１には、色彩イメージに対する所望の抽出候補画像２１ａ、２１ｂ、２１ｃが降順に表示される。候補数によってはスクロールボタン２１ｄによって抽出候補画像をスクロールさせて表示させる。そして、色彩イメージを選択するキーワード群２１ｅ、色彩イメージ画像を抽出する抽出ボタン２１ｆ、抽出された候補数を表示する候補数表示２１ｇが表示されている。
この表示画面の使い方は、図１６の色彩イメージ自動抽出画面２１が表示されたとき、色彩イメージを選択するキーワード群２１ｅからマウス１５によって所望する色彩イメージを選択し、マウス１５によって抽出ボタン２１ｆを選択すると指定の色彩イメージに該当する候補を全て降順にピックアップして抽出候補画像２１ａ、２１ｂ、２１ｃが降順に表示される。更に、ピックアップされた候補数を候補数表示２１ｇに表示する。
そして、図１６の表示画面は、色彩イメージを選択するキーワード群２１ｅから色彩イメージに２０のCoolを選択してから抽出ボタン２１ｆによって抽出をおこない、抽出された抽出候補画像２１ａ、２１ｂ、２１ｃが降順に表示され、さらに候補数表示２１ｇによって候補数が１０枚あることを示している。
このようにして色彩イメージを選択するキーワード群２１ｅからも所望するカラー画像データを自動的に抽出して収得することができる。このときの抽出候補画像２１ａが所望するカラー画像データであるので、前述の図１４の画面表示に戻ってスクラップブッキング１９のアイテム１９ｂの位置に抽出候補画像２１ａを貼り付けて完成させてもよい。
これらの動作及び使用されるデータは、図６の画像データ解析処理、図７、図８、図９の検索情報付加処理、図１２の検索情報入力処理、図１３の検索候補抽出処理に基づいている。

以上詳細に説明したと通り、本実施形態に係る画像編集装置１では、複数のカラー画像データを記憶する画像データ記憶部３と、画像データ記憶部３に記憶されたカラー画像データの明度、彩度及び色相の各画像情報を解析し、数値化するための演算を行う画像データ解析処理部４と、さらに画像データ解析処理部４では、解析演算された画像情報の平均化演算も行う。また画像データ解析処理部４で平均化された画像情報のコード化された画像情報コードをカラー画像データに付加する第１の検索情報付加処理部５と、各画像情報を設定する文字入力部８と、文字入力部８を介して設定された画像情報と第１の検索情報付加処理部５を介してカラー画像データに付加された平均化された画像情報コードとに基づき、設定された画像情報に対応するカラー画像データの候補を画像データ記憶部３に記憶されている複数のカラー画像からピックアップする検索処理部６と、検索処理部６を介してピックアップされたカラー画像データを表示する表示処理部７とを備えたので、所望する明るさ、鮮やかさ、色合いのカラー画像データを瞬時に検索して見ることができる。また、基準とするカラー画像を解析することによって他のカラー画像を比較、分類分けすることができる。更に、観察するカラー画像に対する明るさ、鮮やかさ、色合いの個人差を排除できる。

また、第1の検索情報付加処理部５によりカラー画像データに付加される平均化された画像情報を、各カラー画像データの固有情報を記憶する記憶エリアに設けられているユーザーコメントエリア１２ｇに記憶されるので、独自のフォーマットを起こす必要が無い。また、データの互換性も保たれる。更に、ユーザーコメントエリア１２ｇを画像編集装置１の外部メモリとして使用できる。

更に、平均化された画像情報を複数の範囲に区分するとともに、その区分された各範囲の画像情報とカラー画像データの画像の有するイメージを分類分けする色彩イメージ自動設定用範囲テーブル１７とを対応して記憶する色彩テーブルと、色彩テーブルに基づき、平均化演算も行う画像データ解析処理部４を介して演算されたカラー画像データにおける平均化された画像情報に対応する色彩イメージランクを抽出するとともに、その抽出された色彩イメージランクをコード化した情報コードをカラー画像データに付加する第２の検索情報付加処理部５と、色彩イメージランクを指定する文字入力部８と検索処理部６とを備え、文字入力部８と検索処理部６により指定された色彩イメージランクに基づくカラー画像データの候補をピックアップして表示するので、所望する画像を明るさ、鮮やかさ、色合いだけでなくイメージで瞬時に検索して見ることができる。また、イメージを言葉にすることによってヒューマンインターフェイスにあった検索ができる。

尚、本発明は前記実施形態に限定されることはなく、本発明の要旨を逸脱しない範囲内で種々の改良、変形が可能であることは勿論である。

画像データを解析処理し数値化することによって画像データの位置づけを明確にするので色を共通語にするデザイン関係の用途にも適用できる。

本発明の画像編集装置の構成図である。 Ｅｘｉｆデータの内部構造を示す説明図である。 ユーザーコメントエリアに書き込まれる検索情報付加データの内部構造を示す説明図である。 メーカーノートエリアデータ格納領域を示す説明図である。 画像編集装置の状態遷移図である。 画像データ解析処理のフローチャートである。 検索情報付加処理のフローチャートである。 検索情報付加処理のフローチャートである。 検索情報付加処理のフローチャートである。 色彩イメージ自動設定用範囲テーブルを示す説明図である。 読み込んだ画像に色彩イメージを手動設定する方法を示す説明図である。 検索情報入力処理のフローチャートである。 検索候補抽出処理のフローチャートである。 スクラップブッキングを作成するためのプレビュー全体の画面表示を示す説明図である。 カラー画像データの全体から所望の明るさ（鮮やかさ、色合い）の画像を自動抽出する方法を説明する説明図である。 、カラー画像データの全体から所望の色彩イメージ画像を自動抽出する方法を示す説明図である。

１．画像編集装置
２．画像データ格納処理部
３．画像データ記憶部
４．画像データ解析処理部
５．検索情報付加処理部
６．検索処理部
７．表示処理部
８．文字入力部
９．画像表示部
１２．Ｅｘｉｆデータ
１３．ビデオモニタ
１４．キーボード
１５．マウス
１６．検索情報付加データ
１７．色彩イメージ自動設定用範囲テーブル

Claims (4)

1. 複数のカラー画像データを記憶する画像データ記憶手段と、
   前記画像データ記憶手段に記憶されたカラー画像データの明度、彩度及び色相の各画像情報を解析し、数値化するための演算を行う画像データ解析演算手段と、
   前記画像データ解析演算手段により解析演算された画像情報の平均化演算を行う平均データ演算手段と、
   前記平均データ演算手段を介して平均化された画像情報のコード化された画像情報コードをカラー画像データに付加する第１のデータ付加手段と、
   各画像情報を設定する設定手段と、
   前記設定手段を介して設定された画像情報と前記第１のデータ付加手段を介してカラー画像データに付加された平均化された画像情報コードとに基づき、前記設定された画像情報に対応する前記カラー画像データの候補を前記画像データ記憶手段に記憶されている複数のカラー画像からピックアップするピックアップ手段と、
   前記ピックアップ手段を介してピックアップされたカラー画像データを表示する表示手段とを備え、
   前記画像データ解析演算手段は、
   前記画像データ記憶手段に記憶されたカラー画像データの色相の画像情報を解析し、数値化するための演算を行う場合には、
   （１）カラー画像データから１画素のＲＧＢデータを読み込む処理を実施し、
   （２）前記（１）の処理で読み込まれたＲＧＢデータについて、Ｒのデータが最大値であれば、有彩色成分に占めるＢとＧの差分の割合に基づいて色相位置を数値化するための演算を行う処理を実施し、
   （３）前記（１）の処理で読み込まれたＲＧＢデータについて、Ｇのデータが最大値であれば、有彩色成分に占めるＢとＲの差分の割合とＧ純色色相位置に基づいて色相位置を数値化するための演算を行う処理を実施し、
   （４）前記（１）の処理で読み込まれたＲＧＢデータについて、Ｂのデータが最大値であれば、有彩色成分に占めるＧとＲの差分の割合とＢ純色色相位置に基づいて色相位置を数値化するための演算を行う処理を実施し、
   （５）前記（２）乃至前記（４）のいずれか一つの処理で数値化された色相位置を、全体を基準値としたときの値ｉに換算する処理を実施し、
   （６）前記（５）の処理で換算された値ｉに対応する変数ｈ（ｉ）をインクリメントする処理を実施し、
   （７）前記（１）乃至前記（６）の各処理を該当カラー画像データの全画素について実施し、
   前記平均データ演算手段は、
   該当カラー画像データの色相の画像情報の平均化演算を行うために、
   （８）前記（６）の処理で取り扱われた各変数ｈ（ｉ）のうち最頻値であるＭＡＸｈ（ｉ）を、該当カラー画像データの全画素数Ｎで除することにより、全画素の色相分布の最頻値の平均値であるＭＡＸｈ（ｉ）／Ｎを算出するための演算を行う処理を実施し、
   （９）前記（８）の処理で算出された全画素の色相分布の最頻値の平均値であるＭＡＸｈ（ｉ）／Ｎに基づいて、全画素の色相分布の最頻値の色相位置ｉを特定するための演算を行う処理を実施し、
   （１０）前記（９）の処理で特定された全画素の色相分布の最頻値の色相位置ｉを平均化された画像情報として扱う、
   ことを特徴とする画像編集装置。
2. 前記第１のデータ付加手段によりカラー画像データに付加される平均化された画像情報は、各カラー画像データの固有情報を記憶する記憶エリアに設けられているユーザー用データエリアに記憶されることを特徴とする請求項１に記載の画像編集装置。
3. 前記平均化された画像情報の値が取り得る範囲を複数に区分するとともに、その区分された各範囲の値とカラー画像データの画像の有するイメージを分類分けする色彩イメージランクとを対応して記憶する色彩テーブルと、前記色彩テーブルに基づき、前記平均データ演算手段を介して演算されたカラー画像データにおける平均化された画像情報に対応する色彩イメージランクを抽出するとともに、その抽出された色彩イメージランクをコード化した情報コードをカラー画像データに付加する第２のデータ付加手段と、前記色彩イメージランクを指定するランク指定手段とを備え、前記ランク指定手段により指定された色彩イメージランクに基づくカラー画像データの候補をピックアップして表示することを特徴とする請求項１又は請求項２に記載の画像編集装置。
4. 前記第２のデータ付加手段によりカラー画像データに付加される色彩イメージランクの情報コードは、各カラー画像データの固有情報を記憶する記憶エリアに設けられているユーザー用データエリアに記憶されることを特徴とする請求項３に記載の画像編集装置。

Images