JP5483819B2 - 二次元停止画像に対して没入感を生成する方法およびシステム、または没入感を生成するためのファクタ調節方法、イメージコンテンツ分析方法およびスケーリングパラメータ予測方法 - Google Patents

Description

本発明は、二次元停止画像に対して没入感を生成する方法およびシステム、または没入感を生成するためのファクタ調節方法、イメージコンテンツ分析方法およびスケーリングパラメータ予測方法に関する。

ＴＶやプロジエクタ、映画などで見られる大型サイズ（例えば、視野角５０゜以上）のディスプレイにおいて、ディスプレイサイズの増加は、人々により高いリアリティ、十分な関連性、または強い存在感を感じさせる一種の没入感を引き起こすものであると言える。このような没入感は、イメージの品質とは別に、イメージに対して極めて高い好感を与えるようになる。

一般的なサイズ（例えば、視野角３０゜以下）のディスプレイでは、同じイメージやビデオコンテンツを再生する他のサイズのディスプレイと比べてみるとき、このような没入感が感じられ難いという問題点がある。

視野角の差が生じる最大の理由は、ディスプレイのサイズ差にある。すなわち、物理的に異なるサイズのディスプレイを見るときに、視野角が相違するためである。例えば、大きいサイズのディスプレイでは、視野角も大きいため、視野角が網膜の大部分をカバーする。これに反し、相対的に小さいサイズのディスプレイでは、視野角も小さいため、視野角は単に網膜の主な部分だけしかカバーできない。
特許公開平１１−１６７４８７号公報 大韓民国特許公開第２００３−０８７１９５号公報 大韓民国特許公開第２００４−０９０３７３号公報

本発明は、イメージの背景イメージまたは前景イメージにそれぞれ個別的に用いられる４つの独立的なファクタを調節することで、一般的なサイズのディスプレイに対して没入感を生成する没入感生成方法およびシステムを提供することを目的とする。

また、本発明は、イメージの明度（ｂｒｉｇｈｔｎｅｓｓ ｏｒ ｌｉｇｈｔｎｅｓｓ）、彩度（ｓａｔｕｒａｔｉｏｎ ｏｒ ｃｈｒｏｍａ）、および色調を含む知覚属性を用いて属性情報を獲得するイメージ分析を介し、属性情報に基づいてスケーリングパラメータを予測してファクタを調節することで、ディスプレイに対する没入感を生成することができるイメージ分析方法、スケーリングパラメータ予測方法、およびファクタ調節方法を提供することを目的とする。

本発明の一実施形態に係るイメージに対して没入感を生成する方法は、入力されたイメージの色空間を変換する段階と、背景マスクをロードして前記イメージを前景イメージおよび背景イメージに分離する段階と、イメージコンテンツ分析を介して前記色空間に対する知覚属性に基づいた属性情報を前記前景イメージまたは前記背景イメージによって獲得する段階と、前記属性情報に基づいてスケーリングパラメータを予測する段階と、前記スケーリングパラメータに基づいて前記イメージを強調する段階とを含む。

本発明の一側面によれば、入力されたイメージの色空間を変換する前記段階は、ＲＧＢ（Ｒｅｄ−Ｇｒｅｅｎ−Ｂｌｕｅ）デジタル信号を含む色空間を前記知覚属性を含む色空間に変換する段階であり、前記知覚属性は、前記イメージの明度、彩度、および色調のうちの少なくとも１つを含むようになる。

本発明の一側面によれば、背景マスクをロードして前記イメージを前景イメージおよび背景イメージに分離する前記段階は、前記イメージの色情報および周波数（ｆｒｅｑｕｅｎｃｙ）情報に基づいて前記イメージを前記前景イメージおよび前記背景イメージに分離する段階である。

本発明の一側面によれば、前記知覚属性は、前記前景イメージまたは前記背景イメージの明度、彩度、および色調のうちの少なくとも１つを含むようになり、イメージコンテンツ分析を介して前記色空間に対する知覚属性に基づいた属性情報を前記前景イメージまたは前記背景イメージによって獲得する前記段階は、前記明度、前記彩度、または前記色調に基づいて前記属性情報を獲得する段階である。

本発明の一側面によれば、前記属性情報に基づいてスケーリングパラメータを予測する前記段階は、（１）前記前景イメージと前記背景イメージとの間に明度の差の彩度の差に対する第１比率、（２）前記前景イメージおよび前記背景イメージの間に前記彩度の差の前記明度の差に対する第２比率、および（３）前記前景イメージの平均彩度のうちの少なくとも１つを用いて前記スケーリングパラメータを予測する段階である。

本発明の一側面によれば、前記スケーリングパラメータに基づいて前記イメージを強調する前記段階は、（１）前記前景イメージに対する明度強調、（２）前記前景イメージに対する彩度強調、（３）前記前景イメージに対するコントラスト強調、および（４）前記背景イメージに対するソフトブラーのうちの少なくとも１つを介して前記イメージを強調する段階である。

本発明の一実施形態に係るイメージに対する没入感生成に用いられるファクタを調節する方法は、入力されたイメージを前景イメージおよび背景イメージに分離する段階と、前記前景イメージの明度、彩度、およびコントラストのうちの少なくとも１つを強調する段階とを含む。

本発明の一実施形態に係るイメージコンテンツ分析方法は、入力されたイメージの色空間を変換する段階と、背景マスクをロードして前記イメージを前景イメージおよび背景イメージに分離する段階と、前記色空間に対する知覚属性に基づいて前記前景イメージまたは前記背景イメージによる属性情報を獲得する段階とを含む。

本発明の一実施形態に係るスケーリングパラメータ予測方法は、入力されたイメージの変換された色空間に対する知覚属性に基づいて属性情報を獲得する段階と、前記属性情報に基づいて前記イメージの前景イメージまたは背景イメージに対するスケーリングパラメータを予測する段階とを含む。

本発明によれば、イメージの背景イメージまたは前景イメージにそれぞれ個別的に用いられる４つの独立的なファクタを調節することで、一般的なサイズのディスプレイに対して没入感を生成することができる。

また、本発明によれば、イメージの明度、彩度、および色調を含む知覚属性を用いて属性情報を獲得し、属性情報に基づいてスケーリングパラメータを予測してファクタを調節することで、ディスプレイに対する没入感を生成することができる。

Ｉ．背景
本発明は、高精細テレビ（ＨＤＴＶ）やデジタルプロジエクタなどの一般的なサイズのディスプレイにおいて没入感を生成するカラーイメージを強調する方法に関する。

人間の視覚システムにおいて、視野角は、網膜に到達して頭に伝達される情報の量を示すのに極めて重要である。このとき、相違する網膜離心率に対する視覚的な反応が均一でないことは周知の事実である。網膜の中心部は、網膜離心率の漸次的な増加に対して余り敏感でない反面、最も正確な情報を反映するものである。このため、大きいサイズのイメージを見るときには、イメージの境界が中心部分に比べて相対的にぼけ、イメージに没入し難くなるという現象が容易に見受けられる。

しかし、視野角３０゜以下の小さいサイズのイメージにおいては、このような現象は明確でない。したがって、イメージの前景および背景は、ディスプレイサイズが増加するほど容易に区分される。すなわち、前景と背景がより明確に区分されるようにすることで、二次元停止画像の没入感を引き起こすことができる。このとき、前景イメージと背景イメージは、没入感の生成においてそれぞれ重要な要素となる。

背景イメージの場合、ソフトブラー（ｓｏｆｔ ｂｌｕｒ）が没入感の生成に用いられるようになる。明度と彩度、また大きい視野角を有するイメージをシミュレーションするために、背景イメージから減少されるようになる。さらに、ディスプレイの視野角の増加は、全体的な色感がさらにうすくかつ明るくなる。また、コントラスト感度も高くなる。このため、明暗、彩度、およびコントラスト感度は、大きいサイズのディスプレイのシミュレーション時に、画質を高めるために必要である。

このような３種類のファクタそれぞれは、前景イメージと背景イメージとの間にさらに大きい差異点を与えるために、前景イメージと背景イメージで互いに異なるように処理されるようになる。例えば、前景イメージにおいては明度（または彩度）が強調される反面、背景イメージの明度（または彩度）が減少し、コントラスト感度は前景イメージでのみ用いられるようになる。

背景イメージに対するソフトブラー、前景イメージに対するコントラスト感度、前景イメージと背景イメージのための明度および彩度という４種類のファクタは、テストイメージに対して個別的またはともに結合されて実行されるようになる。このようなファクタそれぞれに対して等しい強調技法がすべてのテストイメージに採択されるようになる。

このとき、一対比較法（ｐａｉｒ ｃｏｍｐａｒｉｓｏｎ ｍｅｔｈｏｄ）を用いて没入感生成の性能を証明するための精神物理学的な実験が実行される。例えば、観察者がテストページと没入感生成の条件に応じて生成されたイメージとをそれぞれ比較する。実験結果により、４種類のファクタに対する処理のそれぞれが没入感を生成し得ることを明確に証明した。しかし、このような性能は、イメージコンテンツに極めて依存的である。没入感生成の条件が適用されたファクタにおいて結合したファクタの性能は、個別ファクタの性能よりも優れいてた。このとき、没入感生成は、４種類のファクタの間により適合した結合が適用され、さらに没入し得る感覚を発生させるようになる。

したがって、一般的なサイズのディスプレイのための没入感生成を目的とするために、イメージコンテンツに応じて自動的に４つの独立的なイメージ処理を適用することが重要となる。いくつかの研究においては、色相情報の減少がイメージに良くないことが証明されているため、本明細書においては、背景イメージ情報が明度および彩度を処理することにおいて保護されるようにする。その結果として、４つの独立的なファクタに対する処理は次の通りとなる。

１．前景イメージのための彩度強調
２．前景イメージのための明度強調
３．前景イメージのためのコントラスト強調
４．背景イメージのためのソフトブラー
ＩＩ．本発明に係る没入感生成方法
以下、添付の図面を参照して、本発明に係る多様な実施形態を詳しく説明する。

一般的なサイズのディスプレイのためのイメージ強調方法を用いて没入感を生成する際には、格別な注意を払うことが要求される。没入感に影響を与える４つのファクタの大部分が、二次元の停止画像に対して可能な限り多くの没入感を生成するために採択および結合される。イメージ選好が主なイシューであるとは言い難いが、イメージ選好は没入感生成方法の発展と関連がある。しかし、没入感生成方法において、イメージ選好の減少は避けることができる。

本発明において、イメージに対する没入感強調は、人間の３種類の知覚属性に基づいて設計されるようになる。明度、彩度、およびコントラスト感度に対する強調が前景イメージで用いられる間、イメージのソフトブラーは背景イメージで用いられるようになる。１つのイメージコンテンツに対する分析が当該イメージコンテンツに基づいた互いに異なる処理のための互いに異なるスケーリングパラメータを割り当てるために採択されるのである。

図１は、本発明の一実施形態において、没入感生成方法を説明するためのフローチャートである。

段階Ｓ１０１で、２次元停止画像に没入感を生成させる没入感生成システムは、色空間を変換させる。すなわち、没入感を生成するために、ＲＧＢデジタル信号などの元来の色空間は、人間の視覚システムと関連がないため、色空間が直接的に没入感の生成に用いられることはない。

したがって、視覚システムにおいて最終結果を示す明度、彩度、または色調などの人間の知覚属性が没入感の生成に用いられるようになる。互いに異なるフィールドを用いる互いに異なるアプリケーションを介して、ＲＧＢデジタル信号を人間の知覚属性に変換する多くの色空間が存在する。

例えば、変換された色空間として、「ＣＩＥＣＡＭ０２」、「ＣＩＥＬＡＢ」、および「ＨＳＶ」を挙げることができる。「ＣＩＥＣＡＭ０２」は、主に正確な色出現予測に用いられるし、「ＣＩＥＬＡＢ」は、主に色やイメージの差を判断するのに用いられる。また、「ＨＳＶ」は、主にカラーデザインや簡単な産業アプリケーションに用いられる。本発明において、すべての色空間は、ＲＧＢデジタル信号を人間の知覚属性に変換するために採択されるようになる。

下記の表１のように、色空間それぞれに人間の知覚属性の互いに異なる名称と略語が適用されるようになる。例えば、「ＣＩＥＣＡＭ０２」は、数学的モデルと実験的仮定を介して発展されたため、本明細書では略語でＪ、Ｃ、およびＨを用いている。

用いられる互いに異なるモデルにおいて、スケーリングパラメータまたはスレッシュホールドは、たとえ構造と方程式が同じように提示されていたとしても差異点を有する。「ＣＩＥＣＡＭ０２」または「ＣＩＥＬＡＢ」において、ＲＧＢデジタル信号とＣＩＥ比色法（ＣＩＥ ＸＹＺ）との関係に基づく装置キャラクタリゼーションの実行が必要となる。互いに異なるディスプレイのために、互いに異なる方法が用いられるようになる。このとき、最も共通した２つの方法として、ＧＯＧモデルとＰＬＣＣモデルがある。ＧＯＧモデルは、主に陰極線管（ＣＲＴ）ディスプレイのように線形またはパワーガンマ曲線を有する装置で用いられるようになる。また、ＰＬＣＣモデルは、液晶ディスプレイ（ＬＣＤ）または有機発光ダイオード（ＯＬＥＤ）モバイルディスプレイのように不均衡なギャマット曲線を有する装置で用いられるようになる。

段階Ｓ１０２で、没入感生成システムは、背景マスクをロードする。背景マスクは、前景イメージと背景イメージを分離するのに用いられるようになる。例えば、デジタルナンバー「０」に前景イメージのピクセルが与えられたことに反し、デジタルナンバー「１」には背景イメージのピクセルが与えられる。このような背景分離は、イメージ処理の分野において長期間に渡って興味が持たれ、様々な研究を介して多くの方法が発展して来た。一般的に、停止画像に対する背景分離は、停止画像に対する色情報および周波数情報を用いて実行されるようになる。前景イメージが複雑なコンテンツを有してより高い周波数を有する反面、背景イメージはより均一である上に低い周波数を有するものと仮定する。このとき、背景分離は、背景イメージの色情報を探知し、当該色情報に基づいて背景イメージの境界を探知した後、境界を平坦にすることで実行されるようになる。

段階Ｓ１０３で、没入感生成システムは、イメージコンテンツを分析する。互いに異なるイメージに対して、イメージコンテンツは重要な差を有するようになる。このとき、上述した４種類の支配的なファクタを用いた没入感の生成に対する性能は、イメージコンテンツによって重要な影響を受ける。言い換えれば、没入感の生成に対する性能は、互いに異なるイメージに等しいイメージ処理を用いるときに差異点を有する。したがって、それぞれのイメージに対する没入感を可能な限り強調するために、イメージコンテンツに基づいたイメージ強調が必須となる。

ソフトブラーの効果が背景イメージの平坦度と極めて連関性が高く、コントラスト強調の性能は、前景イメージの彩度と逆関係にある。また、彩度と明度の強調において、明度および彩度は、それぞれが互いに対して極めて密接な関係にあり、互いに独立的なファクタとして関係することはない。これだけでなく、このような性能は、前景イメージと背景イメージとの間の明度差および彩度差の比率と関連性が極めて高い。したがって、没入感生成システムは、イメージコンテンツの分析を介して、イメージに対する人間の知覚属性に基づいた属性情報を次のように導き出すことができる。

１．前景イメージの平均明度（Ｊ_Ｍ）
２．前景イメージの平均彩度（Ｃ_Ｍ）
３．前景イメージと背景イメージとの間の明度差（ΔＪ）
４．前景イメージと背景イメージとの間の彩度差（ΔＣ）
５．背景イメージのイメージ平坦度（Ｓ）
すなわち、前景イメージと背景イメージに基づいて、Ｊ_ＭおよびＣ_Ｍは、前景イメージの明度と彩度の平均によって獲得される。また、前景イメージと背景イメージとの間に明度と彩度の平均に対する差異を用いることで、ΔＪおよびΔＣが計算されるようになる。

背景イメージのイメージ平坦度において、イメージ平坦度は、背景イメージにおいて柔らかいピクセルの比率として定義されるようになる。このとき、柔らかいピクセルとは、周囲のピクセルが同じ様子を有する任意のピクセルを意味するものである。例えば、任意のピクセルと当該任意のピクセルの周辺ピクセルそれぞれと間に平均色差が１．５以下である場合に、このようなピクセルを柔らかいピクセルとして決定するようになる。ΔＥ_{ＣＡＭ０２}は、柔らかいピクセルと下記の式（１１）のような関連がある。

式（１１）を詳察すれば、「ＣＩＥＬＡＢ」における色差異は、与えられた色空間が「ＣＩＥＬＡＢ」である場合に用いられるようになる。また、ＲＧＢデジタル信号の差異点は、与えられた色空間が「ＨＳＶ」である場合に用いられるようになる。このとき、背景イメージの平坦度は、下記の式（１２）に示されたように、背景イメージにおいて、柔らかいピクセルの総合を全体ピクセルの総合で分った値段として定義されるようになる。

式（１１）および式（１２）において、Ｓは背景イメージの平坦度を、Ｓ_ｘ，ｙは柔らかいピクセル（ｘ、ｙ）を、ＢＰは背景イメージの任意のピクセルを、Ｊ、ａｃ、およびｂｃはピクセルのための「ＣＩＥＣＡＭ０２」における色情報をそれぞれ意味するものである。

段階Ｓ１０４で、没入感生成システムは、スケーリングパラメータを予測する。それぞれのイメージコンテンツに基づいて、基本的な属性情報は、没入感を生成するために要約されるようになる。段階Ｓ１０４で、それぞれの没入感生成ファクタのためのスケーリングパラメータは、イメージコンテンツからの情報に基づいて予測されるようになる。

彩度強調において、スケーリングパラメータＫ_ｓ１は、前景イメージと背景イメージとの間の明度の差の彩度の差に対する比率（ΔＪ／ΔＣ）に対して、この比率が確実なスレッシュホールド以下である場合に、極めて密接な関係を有する。このようなスケーリングパラメータは、大きいスケールは彩度の差が小さいときに適用されるのに反し、さらに小さいスケールが与えられたときには、前景イメージと背景イメージとの間のさらに大きい彩度の差という結果を生成する。

彩度のためのスケールは、下記の式（１３）のように予測されるようになる。

明度の強調において、スケーリングパラメータＫ_Ｂ１は、前景イメージおよび背景イメージの間に彩度の差の明度の差に対する比率（ΔＣ／ΔＪ）に対し、この比率が確実なスレッシュホールド以下の比率である場合に、関連性が極めて高い。この場合、前景イメージと背景イメージとの間に明度差が小さい場合に大きいスケールが適用されるのに反し、さらに小さい明度のスケールが前景イメージと背景イメージとの間の大きい明度差として用いられる。明度のスケールであるＫ_Ｂ１は、下記の式（１４）のように示される線形関係によって予測されるようになる。

コントラスト強調において、スケーリングパラメータＫ_ＣＳ１は、前景イメージの平均彩度と関連性が極めて高い。イメージがイメージの前景イメージにおいて高い彩度を有するときに、より小さいコントラスト強調は、没入感生成が期待されるようになる。この反面、より大きいコントラスト強調は、前景イメージがより明確でないときに期待されるようになる。コントラスト強調のためのスケーリングパラメータは、線形関数を用いた下記の式（１５）によって予測されるようになる。

ソフトブラーにおいて、背景イメージの平坦度Ｓは、スケーリングパラメータとして直接的に用いられるようになる。

段階Ｓ１０５で、没入感生成システムは、イメージの明度を強調する。前景イメージのピクセルにおいて、明度の強調は、下記の式（１６）のように与えられたパワー関数を用いて実行されるようになる。

ここで、Ｊ_ｉｎおよびＪ_ｏｕｔは、明度を強調するために入力および出力される明度を意味するものである。また、Ｋ_Ｂ１およびＫ_Ｂ２は、スケーリングパラメータを意味するものである。

図２は、明度を強調する方法を説明するための一例である。グラフ２００で示されるように、パワー関数は、パスポイント（０、０）および（１００、１００）が強制されるようになる。パスポイント（０、０）が対応するディスプレイのダークポイントを示す反面、パスポイント（１００、１００）は、ディスプレイのホワイトポイントを示している。すなわち、グラフ２００は、入力明度と出力明度の関係を説明している。

段階Ｓ１０６で、没入感生成システムは、イメージの彩度を強調する。このとき、前景イメージのそれぞれのピクセルのための彩度強調は、下記の式（１７）のように与えられた線形関数を用いるようになる。

ここで、Ｃ_ｉｎおよびＣ_ｏｕｔは、それぞれ彩度強調の処理において入力および出力される彩度を意味するものである。また、Ｋ_Ｓは、彩度強調のためのスケーリングパラメータを意味するものである。

図３は、彩度を強調する方法を説明するための一例である。グラフ３００に示されるように、式（１７）は、明確でない色の彩度がサイズ効果によって変わるため、ポイント（０、０）が強要される。

段階Ｓ１０７で、没入感生成システムは、イメージのコントラストを強調する。コントラスト強調は、イメージの前景イメージのために与えられた式（１８）ないし式（２２）によって実行されるようになる。前景イメージのコントラストを増加させるために関連したダークカラーの明度は、パワー関数によって減少するようになる。このとき、明度は、前景イメージの平均明度よりも小さい。一方、関連したホワイトカラーの明度は、さらに大きくなるように処理されるようになる。このとき、明度は、前景イメージの平均明度よりも大きい。

ここで、Ｊ_ｉｎおよびＪ_ｏｕｔは、コントラスト強調のために入力および出力明度を、Ｊ_Ｍは前景イメージの平均明度を、Ｋ_ＣＳ１およびＫ_ＣＳ２は、Ｊ_Ｍよりもさらに小さい明度のためのスケーリングパラメータを、Ｋ_ＣＬ１、前記Ｋ_ＣＬ２、およびＫ_ＣＬ３は、Ｊ_Ｍよりも大きい明度のためのスケーリングパラメータをそれぞれ意味するものである。

図４は、コントラストを強調する方法を説明するための一例である。グラフ４００に示されるように、明度がＪ_Ｍよりも小さい場合に、パワー関数は、ポイント（０、０）および（Ｊ_Ｍ、Ｊ_Ｍ）を通過する。もしそうではなければ、パワー関数は、ポイント（Ｊ_Ｍ、Ｊ_Ｍ）および（１００、１００）を通過する。

段階Ｓ１０８で、没入感生成システムは、背景イメージに対するソフトブラーを実行する。このとき、背景イメージのためのソフトブラーは、平均フィルタを用いて実行されるようになる。平均フィルタは、背景イメージのそれぞれのピクセルを通過する。また、実行のスケールは、背景イメージの平坦度Ｓに依存的である。没入感生成システムは、平坦度Ｓが８０％以上である場合にソフトブラーを実行しない。例えば、背景イメージのための３×３平均フィルタは、平坦度Ｓが５０％と８０％の間である場合に用いられるようになるし、５×５平均フィルタは、平坦度Ｓが５０％よりも小さい場合に用いられるようになる。

段階Ｓ１０９で、没入感生成システムは、色空間を変換する。

イメージの強調後、没入感生成システムは、前景イメージと背景イメージすべてに対して予測されたＪ_ｏｕｔ、Ｃ_ｏｕｔ、およびＨ_ｏｕｔを用いて新しい没入イメージを結合して生成するようになる。このとき、色空間の変換は、人間の知覚属性をＲＧＢデジタル信号に変換するために実行されるようになる。「ＣＩＥＣＡＭ０２」および「ＣＩＥＬＡＢ」に対する色空間のために、リバース色出現モデルだけでなく、装置キャラクタリゼーションモデルも実行されるようになる。

以上のように、段階Ｓ１０１ないし段階Ｓ１０９を用いることで、イメージに没入感が生成されるように処理することができる。

図５は、本発明の一実施形態において、没入感生成方法を説明するためのブロック図である。

ここで、図１を用いて説明した没入感生成システムは、入力イメージとしてＲ_ｉｎ、Ｇ_ｉｎ、Ｂ_ｉｎの入力を受けて色空間変換２０１過程を処理するようになる。すなわち、ＲＧＢデジタル信号などの元来の色空間は、人間の視覚システムと関連がなく、色空間が直接的に没入感の生成に用いられ得ない。したがって、人間の没入感を生成するために、没入感生成システムは、入力イメージの色空間を明度、彩度、または色調のように人間の知覚属性を有する色空間に変換するようになる。

このとき、色空間変換５０１の出力は、色空間「ＣＩＥＣＡＭ０２」である場合に、上述したようにＪ、Ｃ、Ｈの値を有するようになるし、没入感生成システムは、出力に対して背景マスクをロード５０２して背景イメージ５０３と前景イメージ５０４に分離するようになる。すなわち、Ｊ、Ｃ、およびＨは、それぞれＪ_Ｂ、Ｃ_Ｂ、およびＨ_Ｂで表現される背景イメージ５０３とＪ_Ｆ、Ｃ_Ｆ、およびＨ_Ｆで表現される前景イメージ５０４とに分離されるようになる。

このように分離された背景イメージ５０３と前景イメージ５０４は、イメージに対するコンテンツ分析５０５を介してイメージに対する人間の知覚属性に基づいた情報を得るようになる。すなわち、Ｊ_Ｂ、Ｃ_Ｂ、Ｈ_Ｂ、Ｊ_Ｆ、Ｃ_Ｆ、およびＨ_Ｆを分析することで、前景イメージの平均明度Ｊ_Ｍ、イメージの平均彩度Ｃ_Ｍ、前景イメージと背景イメージとの間の明度差ΔＪ、前景イメージと背景イメージとの間の彩度差ΔＣ、および背景イメージのイメージ平坦度Ｓのように知覚属性に基づいた情報が得られるようになる。

この後、知覚属性に基づいた情報は、スケーリングパラメータ予測５０６に用いられるようになる。すなわち、上述した式（１３）ないし式（１５）を用いることで、コントラスト強調５０７、明度強調５０８、および彩度強調５０９に必要なスケーリングパラメータを予測するようになる。ソフトブラー５１０は、イメージ平坦度Ｓと背景イメージ５０３とを用いて実行されるようになる。

より詳細に説明すれば、没入感生成システムは、コントラスト強調５０７、明度強調５０８、および彩度強調５０９で予測されたスケーリングパラメータであるＫ_Ｃ１、Ｋ_Ｂ１、およびＫ_ｓ１と前景イメージ５０４であるＪ_Ｆ、Ｃ_Ｆ、およびＨ_Ｆを用いて第１結果Ｊ_Ｆ１、Ｃ_Ｆ１、およびＨ_Ｆ１を得るようになるし、ソフトブラー５１０でイメージ平坦度Ｓと背景イメージ５０３とを用いて第２結果Ｊ_Ｂ１、Ｃ_Ｂ１、およびＨ_Ｂ１を得るようになる。

最後に、没入感生成システムは、色空間変換５１１を介して第１結果と第２結果を入力イメージなどのＲＧＢデジタル信号であるＲ_ＯＵＴ、Ｇ_ＯＵＴ、およびＢ_ＯＵＴに変換することで、入力イメージに没入感を生成することができる。

図６は、本発明の一実施形態において、没入感生成システムの内部構造を説明するためのブロック図である。ここで、図６に示されるように、没入感生成システム６００は、色空間変換部６０１と、背景マスクロード部６０２と、イメージコンテンツ分析部６０３と、スケーリングパラメータ予測部６０４と、明度強調部６０５と、彩度強調部６０６と、コントラスト強調部６０７と、ソフトブラー部６０８とを含むようになる。

色空間変換部６０１は、色空間を変換させる。すなわち、人間の没入感を生成するために、ＲＧＢデジタル信号などの元来の色空間は人間視覚システムと関連がないため、色空間が直接的に没入感の生成に用いることができない。

したがって、視覚システムにおいて最終結果を示す明度、彩度、または色調などの人間の知覚属性が没入感の生成に用いられるようになる。互いに異なるフィールドを用いる互いに異なるアプリケーションを介して、ＲＧＢデジタル信号を人間の知覚属性に変換する多くの色空間が存在する。

例えば、変換された色空間として「ＣＩＥＣＡＭ０２」、「ＣＩＥＬＡＢ」、および「ＨＳＶ」を挙げることができる。「ＣＩＥＣＡＭ０２」は、主に正確な色出現予測に用いられるし、「ＣＩＥＬＡＢ」は、主に色やイメージの差を判断するのに用いられる。また、「ＨＳＶ」は、主にカラーデザインと簡単な産業アプリケーションに用いられるようになる。本発明において、すべての色空間は、ＲＧＢデジタル信号を人間の知覚属性に変換するために採択されるようになる。

背景マスクロード部６０２は、背景マスクをロードする。このとき、背景マスクは、前景イメージと背景イメージを分離するのに用いられるようになる。例えば、デジタルナンバー「０」に前景イメージのピクセルが与えられたことに反し、デジタルナンバー「１」には背景イメージのピクセルが与えられる。このような背景分離は、イメージ処理の分野において長期間に渡って興味が持たれ、様々な研究によって多くの方法が発展してきた。一般的に、停止画像に対する背景分離は、停止画像に対する色情報および周波数情報を用いて実行されるようになる。前景イメージが複雑なコンテンツを有してより高い周波数を有する反面、背景イメージはより均一である上にさらに低い周波数を有するものと仮定する。このとき、背景分離は、背景イメージの色情報を探知し、当該色情報に基づいて背景イメージの境界を探知した後、境界を平坦にさせることで実行されるようになる。

イメージコンテンツ分析部６０３は、イメージコンテンツを分析する。互いに異なるイメージに対して、イメージコンテンツは重要な差を有するようになる。このとき、上述した４種類の支配的なファクタを用いた没入感の生成に対する性能は、イメージコンテンツによって重要な影響を受ける。言い換えれば、没入感の生成に対する性能は、互いに異なるイメージに等しいイメージ処理を用いるときに差を有する。したがって、それぞれのイメージに対する没入感を可能な限り強調するために、イメージコンテンツに基づいたイメージ強調は必須である。

ソフトブラーの効果が背景イメージの平坦度と関連性が極めて高く、コントラスト強調の性能は前景イメージの彩度と逆関係にある。また、彩度と明度の強調において、明度および彩度はそれぞれが互いに対して極めて密接な関係にあり、互いに独立したファクタとして関係し得ない。これだけでなく、性能は、前景イメージと背景イメージとの間の明度差および彩度差の比率と関連性が極めて高い。したがって、没入感生成システムは、イメージコンテンツの分析を介して、イメージに対する人間の知覚属性に基づいた情報を次のように導き出すことができる。

１．前景イメージの平均明度（Ｊ_Ｍ）
２．前景イメージの平均彩度（Ｃ_Ｍ）
３．前景イメージと背景イメージとの間の明度差（ΔＪ）
４．前景イメージと背景イメージとの間の彩度差（ΔＣ）
５．背景イメージのイメージ平坦度（Ｓ）
すなわち、前景イメージと背景イメージに基づき、Ｊ_ＭおよびＣ_Ｍは、前景イメージの明度と彩度の平均を介して獲得される。また、前景イメージと背景イメージとの間に明度と彩度の平均に対する差異を用いることで、ΔＪおよびΔＣを計算できるようになる。

背景イメージのイメージ平坦度において、イメージ平坦度は、背景イメージにおいて柔らかいピクセルの比率として定義されるようになる。このとき、柔らかいピクセルとは、周囲のピクセルが等しい様子を有する任意のピクセルを意味するものである。例えば、任意のピクセルと当該任意のピクセルの周辺ピクセルそれぞれとの間に平均色差が１．５以下である場合に、ピクセルを柔らかいピクセルとして決定するようになる。ΔＥ_{ＣＡＭ０２}は、柔らかいピクセルと上述した式（１１）のような関連がある。

式（１１）を詳察すれば、「ＣＩＥＬＡＢ」における色差異点は、与えられた色空間が「ＣＩＥＬＡＢ」である場合に用いられるようになる。また、ＲＧＢデジタル信号の差異点は、与えられた色空間が「ＨＳＶ」である場合に用いられるようになる。このとき、背景イメージの平坦度は、上述した式（１２）に示されたように、背景イメージにおいて柔らかいピクセルの総合を全体ピクセルの総合で分った値として定義されるようになる。

式（１１）および式（１２）において、Ｓは背景イメージの平坦度を、Ｓ_ｘ，ｙは柔らかいピクセル（ｘ、ｙ）を、ＢＰは背景イメージの任意のピクセルを、Ｊ、ａｃ、およびｂｃは、ピクセルのための「ＣＩＥＣＡＭ０２」における色情報をそれぞれ意味するものである。

スケーリングパラメータ予測部６０４は、スケーリングパラメータを予測する。それぞれのイメージコンテンツに基づき、基本的な情報は、没入感生成のために要約されるようになる。スケーリングパラメータ予測部６０４は、それぞれの没入感生成ファクタのためのスケーリングパラメータをイメージコンテンツからの情報に基づいて予測することができる。

彩度強調において、スケーリングパラメータＫ_ｓ１は、前景イメージと背景イメージとの間の明度の差と彩度の差の比率（ΔＪ／ΔＣ）に対し、この比率が確実なスレッシュホールド以下である場合に極めて密接な関係を有する。このようなスケーリングパラメータは、大きいスケールは彩度の差が小さいときに適用されるのに反し、より小さいスケールが与えられたときには、前景イメージと背景イメージとの間のさらに大きい彩度の差という結果を生成する。彩度のためのスケールは、上述した式（１３）のように予測されるようになる。

明度の強調において、スケーリングパラメータＫ_Ｂ１は、前景イメージおよび背景イメージの間に彩度の差と明度の差の比率（ΔＣ／ΔＪ）に対し、この比率が確実であるスレッシュホールド以下の比率である場合に関連性が極めて高い。この場合に、前景イメージと背景イメージとの間の明度差が小さい場合に大きいスケールが適用されるのに反し、より小さい明度のスケールが前景イメージと背景イメージとの間の大きい明度差として用いられる。明度のスケールであるＫ_Ｂ１は、式（１４）のように示される線形関係によって予測されるようになる。

コントラスト強調において、スケーリングパラメータＫ_ＣＳ１は、前景イメージの平均彩度と関連性が極めて高い。イメージが当該イメージの前景イメージにおいて高い彩度を有するとき、さらに小さいコントラスト強調は、没入感生成が期待されるようになる。この反面、さらに大きいコントラスト強調は、前景イメージがより明確でないときに期待されるようになる。コントラスト強調のためのスケーリングパラメータは、線形関数を用いた上述した式（１５）によって予測されるようになる。

ソフトブラーにおいて、背景イメージの平坦度Ｓは、スケーリングパラメータとして直接的に用いられるようになる。

明度強調部６０５は、イメージの明度を強調する。このとき、前景イメージのピクセルにおいて、明度の強調は、上述した式（１６）のように、与えられたパワー関数を用いて実行されるようになる。パワー関数は、パスポイント（０、０）および（１００、１００）が強制されるようになる。この場合、パスポイント（０、０）が対応するディスプレイのダークポイントを示す反面、パスポイント（１００、１００）は、ディスプレイのホワイトポイントを示す。

彩度強調部６０６は、イメージの彩度を強調する。このとき、前景イメージのそれぞれのピクセルのための彩度強調は、上述した式（１７）のように、与えられた線形関数を用いるようになる。ここで、Ｃ_ｉｎおよびＣ_ｏｕｔは、それぞれ彩度強調の処理において入力および出力される彩度を意味するものである。また、Ｋ_Ｓは、彩度強調のためのスケーリングパラメータを意味するものである。式（１７）は、明確でない色の彩度がサイズ効果によって変化するため、ポイント（０、０）が強要される。

コントラスト強調部６０７は、イメージのコントラストを強調する。このとき、コントラスト強調は、イメージの前景イメージのために与えられた上述した式（１８）ないし式（２２）によって実行されるようになる。前景イメージのコントラストを増加させるために関連したダークカラーの明度は、パワー関数によって減少するようになる。このとき、明度は、前景イメージの平均明度よりも小さい。この反面、関連したホワイトカラーの明度は、さらに大きくなるように処理されるようになる。このとき、明度は、前景イメージの平均明度よりも大きい。明度がＪ_Ｍよりも小さい場合に、パワー関数は、ポイント（０、０）および（Ｊ_Ｍ、Ｊ_Ｍ）を通過する。もしそうではなければ、パワー関数は、ポイント（Ｊ_Ｍ、Ｊ_Ｍ）および（１００、１００）を通過する。

ソフトブラー部６０８は、背景イメージに対するソフトブラーを実行する。このとき、背景イメージのためのソフトブラーは、平均フィルタを用いて実行されるようになる。平均フィルタは、背景イメージのそれぞれのピクセルを通過する。また、実行のスケールは、背景イメージの平坦度Ｓに依存的である。没入感生成システムは、平坦度Ｓが８０％以上である場合に、ソフトブラーを実行しない。例えば、背景イメージのための３×３平均フィルタは、平坦度Ｓが５０％と８０％との間の場合に用いられるようになるし、５×５平均フィルタは、平坦度Ｓが５０％よりも小さい場合に用いられるようになる。

イメージの強調後、色空間変換部６０１は、前景イメージと背景イメージすべてに対して予測されたＪ_ｏｕｔ、Ｃ_ｏｕｔ、およびＨ_ｏｕｔを用いて新しい没入イメージを結合して生成するようになる。このとき、色空間の変換は、人間の知覚属性をＲＧＢデジタル信号に変換するために実行されるようになる。

このように、本発明に係る没入感生成方法または没入感生成システムを用いることで、イメージの背景イメージまたは前景イメージにそれぞれ個別的に用いられる４つの独立的なファクタを調節し、一般的なサイズのディスプレイに対して没入感を生成することができる。

イメージに対する没入感生成に用いられるファクタを調節する方法、イメージコンテンツを分析する方法、およびスケーリングパラメータを予測する方法については、既に詳しく説明したため、追加的な説明は省略する。

本発明に係る実施形態は、コンピュータにより具現される多様な動作を実行するためのプログラム命令を含むコンピュータ読み取り可能な媒体を含む。前記媒体は、プログラム命令、データファイル、データ構造などを単独または組み合わせて含むこともできる。前記媒体およびプログラム命令は、本発明の目的のために特別に設計されて構成されたものでもよく、コンピュータソフトウェア分野の技術を有する当業者にとって公知であり使用可能なものであってもよい。コンピュータ読み取り可能な記録媒体の例としては、ハードディスク、フロッピー（登録商標）ディスクおよび磁気テープのような磁気媒体、ＣＤ−ＲＯＭ、ＤＶＤのような光記録媒体、フロプティカルディスクのような磁気−光媒体、およびＲＯＭ、ＲＡＭ、フラッシュメモリなどのようなプログラム命令を保存して実行するように特別に構成されたハードウェア装置が含まれる。前記媒体は、プログラム命令、データ構造などを保存する信号を送信する搬送波を含む光または金属線、導波管などの送信媒体でもある。プログラム命令の例としては、コンパイラによって生成されるもののような機械語コードだけでなく、インタプリタなどを用いてコンピュータによって実行される高級言語コードを含む。前記したハードウェア要素は、本発明の動作を実行するために一以上のソフトウェアモジュールとして作動するように構成することができ、その逆もできる。

上述したように、本発明の好ましい実施形態を参照して説明したが、該当の技術分野において熟練した当業者にとっては、特許請求の範囲に記載された本発明の思想および領域から逸脱しない範囲内で、本発明を多様に修正および変更させることができることを理解することができるであろう。すなわち、本発明の技術的範囲は、特許請求の範囲に基づいて定められ、発明を実施するための最良の形態により制限されるものではない。

本発明の一実施形態において、没入感生成方法を説明するためのフローチャートである。 明度を強調する方法を説明するための一例である。 彩度を強調する方法を説明するための一例である。 コントラストを強調する方法を説明するための一例である。 本発明の一実施形態において、没入感生成方法を説明するためのブロック図である。 本発明の一実施形態において、没入感生成システムの内部構造を説明するためのブロック図である。

符号の説明

６００ 没入感生成システム
６０１ 色空間変換部
６０２ 背景マスクロード部
６０３ イメージコンテンツ分析部
６０４ スケーリングパラメータ予測部
６０５ 明度強調部
６０６ 彩度強調部
６０７ コントラスト強調部
６０８ ソフトブラー部

Claims (36)

1. イメージに対して没入感を生成する方法において、
   入力されたイメージの色空間を変換する段階と、
   背景マスクをロードして前記イメージを前景イメージおよび背景イメージに分離する段階と、
   イメージコンテンツ分析を介して前記色空間に関して知覚属性に基づいた属性情報を前記前景イメージまたは前記背景イメージによって獲得する段階であって、前記属性情報は、前記前景イメージまたは前記背景イメージの明度、彩度、または色調に基づく属性情報および前記背景イメージのイメージ平坦度に基づく属性情報を含み、前記イメージ平坦度は、前記背景イメージにおいて柔らかいピクセルの比率を含み、前記柔らかいピクセルは、周囲のピクセルそれぞれとの平均色差を用いて決定されることを特徴とする、段階と、
   前記属性情報に基づいてスケーリングパラメータを予測する段階と、
   前記スケーリングパラメータに基づいて前記イメージを強調する段階と、
   を含むことを特徴とする没入感生成方法。
2. 入力されたイメージの色空間を変換する前記段階は、
   ＲＧＢデジタル信号を含む色空間を前記知覚属性を含む色空間に変換する段階であって、
   前記知覚属性は、前記イメージの明度、彩度、および色調のうちの少なくとも１つを含むことを特徴とする請求項１に記載の没入感生成方法。
3. 背景マスクをロードして前記イメージを前景イメージおよび背景イメージに分離する前記段階は、
   前記イメージの色情報および周波数情報に基づいて前記イメージを前記前景イメージおよび前記背景イメージに分離する段階であることを特徴とする請求項１に記載の没入感生成方法。
4. 前記属性情報は、
   （１）前記前景イメージの平均明度、
   （２）前記前景イメージの平均彩度、
   （３）前記前景イメージと前記背景イメージとの間の明度差、
   （４）前記前景イメージと前記背景イメージとの間の彩度差、および
   （５）前記背景イメージのイメージ平坦度
   のうちの少なくとも１つを含むことを特徴とする請求項１に記載の没入感生成方法。
5. 前記属性情報に基づいてスケーリングパラメータを予測する前記段階は、
   （１）前記前景イメージと前記背景イメージとの間の明度の差の彩度の差に対する第１比率、
   （２）前記前景イメージおよび前記背景イメージの間に前記彩度の差の前記明度の差に対する第２比率、および
   （３）前記前景イメージの平均彩度
   のうちの少なくとも１つを用いて前記スケーリングパラメータを予測することを特徴とする請求項１に記載の没入感生成方法。
6. 前記スケーリングパラメータは、彩度に対するスケールを含み、
   前記スケールは、下記の式を用いて計算されることを特徴とする請求項５に記載の没入感生成方法であって、
   

   

   前記Ｋ_Ｓは前記スケールを、前記ΔＪ／ΔＣは前記第１比率をそれぞれ意味する没入感生成方法。
7. 前記スケーリングパラメータは、明度に対するスケールを含み、
   前記スケールは、下記の式を用いて計算されることを特徴とする請求項５に記載の没入感生成方法であって、
   

   

   前記Ｋ_Ｂ１は前記スケールを、前記ΔＣ／ΔＪは前記第２比率をそれぞれ意味する没入感生成方法。
8. 前記スケーリングパラメータは、コントラストに対するスケールを含み、
   前記スケールは、下記の式を用いて計算されることを特徴とする請求項５に記載の没入感生成方法であって、
   

   

   前記Ｋ_ＣＳ１は前記スケールを、前記Ｃ_Ｍは前記前景イメージの平均彩度をそれぞれ意味する没入感生成方法。
9. 前記スケーリングパラメータに基づいて前記イメージを強調する前記段階は、
   （１）前記前景イメージに対する明度強調、
   （２）前記前景イメージに対する彩度強調、
   （３）前記前景イメージに対するコントラスト強調、および
   （４）前記背景イメージに対するソフトブラー
   のうちの少なくとも１つを介して前記イメージを強調する段階であることを特徴とする請求項１に記載の没入感生成方法。
10. 前記明度強調は、前記前景イメージのピクセルに対して下記の式を含むパワー関数を用いて実行されることを特徴とする請求項９に記載の没入感生成方法であって、
    

    

    前記Ｊ_ｉｎおよび前記Ｊ_ｏｕｔは、前記明度の強調のために入力および出力される明度を、前記Ｋ_Ｂ１および前記Ｋ_Ｂ２は、前記スケーリングパラメータを意味する没入感生成方法。
11. 前記彩度強調は、前記前景イメージのピクセルに対して下記の式を含む線形関数を用いて実行されることを特徴とする請求項９に記載の没入感生成方法であって、
    

    

    前記Ｃ_ｉｎおよび前記Ｃ_ｏｕｔは、それぞれ前記彩度強調の処理において入力および出力される彩度を、前記Ｋ_Ｓは、前記彩度強調のための前記スケーリングパラメータを意味する没入感生成方法。
12. 前記コントラスト強調は、前記前景イメージに対して下記の式を用いて実行されることを特徴とする請求項９に記載の没入感生成方法であって、
    

    

    前記Ｊ_ｉｎおよび前記Ｊ_ｏｕｔは、前記コントラスト強調のための入力および出力明度を、前記Ｊ_Ｍは前記前景イメージの平均明度を、前記Ｋ_ＣＳ１および前記Ｋ_ＣＳ２は、前記Ｊ_Ｍよりもさらに小さい明度のためのスケーリングパラメータを、前記Ｋ_ＣＬ１、前記Ｋ_ＣＬ２、および前記Ｋ_ＣＬ３は、前記Ｊ_Ｍよりも大きい明度のためのスケーリングパラメータをそれぞれ意味する没入感生成方法。
13. 請求項１２に記載の没入感生成方法であって、前記Ｋ_ＣＳ２、前記Ｋ_ＣＬ１、前記Ｋ_ＣＬ２、および前記Ｋ_ＣＬ３は、それぞれ下記の式（７）ないし式（１０）を用いて計算されることを特徴とする没入感生成方法
    

    
14. 前記ソフトブラーは、前記背景イメージのイメージ平坦度を前記スケーリングパラメータとして用いて実行されることを特徴とする請求項９に記載の没入感生成方法。
15. 前記強調されたイメージの色空間を再変換する段階、
    をさらに含むことを特徴とする請求項１に記載の没入感生成方法。
16. 前記強調されたイメージの色空間を再変換する前記段階は、
    前記強調されたイメージの色空間をＲＧＢデジタル信号を含む色空間に変換する段階であることを特徴とする請求項１５に記載の没入感生成方法。
17. イメージに対する没入感生成に用いられるファクタを調節する方法において、
    入力されたイメージを前景イメージおよび背景イメージに分離する段階と、
    前記前景イメージの明度、彩度、およびコントラストのうちの少なくとも１つを強調する段階と、
    前記背景イメージのイメージ平坦度に依存的となるような実行スケールで、前記背景イメージに対して、平均フィルターを使用したソフトブラーを実行する段階であって、前記イメージ平坦度は、前記背景イメージにおいて柔らかいピクセルの比率を含み、前記柔らかいピクセルは、周囲のピクセルそれぞれとの平均色差を用いて決定されることを特徴とする、段階と、
    を含むことを特徴とするファクタ調節方法。
18. 入力されたイメージを前景イメージおよび背景イメージに分離する前記段階は、
    入力されたイメージの色空間を変換する段階と、
    背景マスクをロードして前記イメージを前景イメージおよび背景イメージに分離する段階と、
    を含むことを特徴とする請求項１７に記載のファクタ調節方法。
19. 前記前景イメージの明度、彩度、およびコントラストのうちの少なくとも１つを強調する前記段階は、
    イメージコンテンツ分析を介して前記色空間に対する知覚属性に基づいた属性情報を前記前景イメージまたは前記背景イメージによって獲得する段階と、
    前記属性情報に基づいてスケーリングパラメータを予測する段階と、
    前記スケーリングパラメータに基づいて前記イメージを強調する段階と、
    を含むことを特徴とする請求項１７に記載のファクタ調節方法。
20. 前記知覚属性は、前記前景イメージまたは前記背景イメージの明度、彩度、および色調のうちの少なくとも１つを含み、
    イメージコンテンツ分析を介して前記色空間に対する知覚属性に基づいた属性情報を前記前景イメージまたは前記背景イメージによって獲得する前記段階は、
    前記明度、前記彩度、または前記色調に基づいて前記属性情報を獲得する段階であることを特徴とする請求項１９に記載のファクタ調節方法。
21. 前記属性情報は、
    （１）前記前景イメージの平均明度、
    （２）前記前景イメージの平均彩度、
    （３）前記前景イメージと前記背景イメージとの間の明度差、
    （４）前記前景イメージと前記背景イメージとの間の彩度差、および
    （５）前記背景イメージのイメージ平坦度
    のうちの少なくとも１つを含むことを特徴とする請求項２０に記載のファクタ調節方法。
22. 前記属性情報に基づいてスケーリングパラメータを予測する前記段階は、
    （１）前記前景イメージと前記背景イメージとの間に明度の差の彩度の差に対する第１比率、
    （２）前記前景イメージおよび前記背景イメージとの間に前記彩度の差の前記明度の差に対する第２比率、および
    （３）前記前景イメージの平均彩度
    のうちの少なくとも１つを用いて前記スケーリングパラメータを予測することを特徴とする請求項２１に記載のファクタ調節方法。
23. 前記スケーリングパラメータに基づいて前記イメージを強調する前記段階は、
    （１）前記前景イメージに対する明度強調、
    （２）前記前景イメージに対する彩度強調、
    （３）前記前景イメージに対するコントラスト強調、および
    のうちの少なくとも１つを介して前記イメージを強調する段階であることを特徴とする請求項１９に記載のファクタ調節方法。
24. 入力されたイメージの色空間に対する知覚属性に基づいた属性情報であって、前景と背景とがより明確に区別されることによって没入感が生成されるように、前景イメージを背景イメージと対比してより強調するために使用される属性情報を獲得するためのイメージコンテンツ分析方法において、
    入力されたイメージの色空間を変換する段階と、
    背景マスクをロードして前記イメージを前景イメージおよび背景イメージに分離する段階と、
    前記色空間に対する知覚属性に基づいて前記前景イメージまたは前記背景イメージによる属性情報を獲得する段階であって、前記属性情報は前記前景イメージまたは前記背景イメージの明度、彩度または色調、および、前記背景イメージのイメージ平坦度に基づいて獲得され、前記イメージ平坦度は、前記背景イメージにおいて柔らかいピクセルの比率を含み、前記柔らかいピクセルは、周囲のピクセルそれぞれとの平均色差を用いて決定されることを特徴とする、段階と、
    を含むことを特徴とするイメージコンテンツ分析方法。
25. 入力されたイメージの色空間を変換する前記段階は、
    ＲＧＢデジタル信号を含む色空間を前記知覚属性を含む色空間に変換する段階であって、
    前記知覚属性は、前記イメージの明度、彩度、および色調のうちの少なくとも１つを含むことを特徴とする請求項２４に記載のイメージコンテンツ分析方法。
26. 前記知覚属性は、前記前景イメージまたは前記背景イメージの明度、彩度、および色調のうちの少なくとも１つを含み、
    イメージコンテンツ分析を介して前記色空間に対する知覚属性に基づいた属性情報を前記前景イメージまたは前記背景イメージによって獲得する前記段階は、
    前記明度、前記彩度、または前記色調に基づいて前記属性情報を獲得する段階であることを特徴とする請求項２４に記載のイメージコンテンツ分析方法。
27. 前記属性情報は、
    （１）前記前景イメージの平均明度、
    （２）前記前景イメージの平均彩度、
    （３）前記前景イメージと前記背景イメージとの間の明度差、
    （４）前記前景イメージと前記背景イメージとの間の彩度差、および
    （５）前記背景イメージのイメージ平坦度
    のうちの少なくとも１つを含むことを特徴とする請求項２６に記載のイメージコンテンツ分析方法。
28. 前景と背景とがより明確に区別されることによって没入感が生成されるように、前景イメージを背景イメージと対比してより強調するためにスケーリングパラメータに基づいて前記イメージを強調する処理において使用される、スケーリングパラメータを予測する方法において、
    入力されたイメージの変換された色空間に対する知覚属性に基づいて属性情報を獲得する段階と、
    前記属性情報に基づいて前記イメージの前景イメージまたは背景イメージに対するスケーリングパラメータを予測する段階であって、前記前景イメージのコントラスト強調のためのスケーリングパラメータの予測は、前期前景イメージの彩度がより高い場合に前記前景イメージに対してより小さいコントラスト強調を実行し、前記前景イメージの彩度がより低い場合に前記前景イメージに対してより大きいコントラスト強調を実行するように実行される、段階と、
    を含み、
    前記イメージ平坦度は、前記背景イメージにおいて柔らかいピクセルの比率を含み、前記柔らかいピクセルは、周囲のピクセルそれぞれとの平均色差を用いて決定されることを特徴とするスケーリングパラメータの予測方法。
29. 前記属性情報に基づいて前記イメージの前景イメージまたは背景イメージに対するスケーリングパラメータを予測する前記段階は、
    （１）前記前景イメージと前記背景イメージとの間に明度の差の彩度の差に対する第１比率、
    （２）前記前景イメージおよび前記背景イメージとの間に前記彩度の差の前記明度の差に対する第２比率、および
    （３）前記前景イメージの平均彩度
    のうちの少なくとも１つを用いて前記スケーリングパラメータを予測することを特徴とする請求項２８記載のスケーリングパラメータ予測方法。
30. 入力されたイメージの変換された色空間に対する知覚属性に基づいて属性情報を獲得する前記段階は、
    入力されたイメージの色空間を変換する段階と、
    背景マスクをロードして前記イメージを前景イメージおよび背景イメージに分離する段階と、
    イメージコンテンツ分析を介して前記色空間に対する知覚属性に基づいた属性情報を前記前景イメージまたは前記背景イメージによって獲得する段階と、
    を含むことを特徴とする請求項２８に記載のスケーリングパラメータ予測方法。
31. 請求項１乃至１６のいずれか一項の方法を実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体。
    
32. イメージに対して没入感を生成するシステムにおいて、
    入力されたイメージの色空間を変換し、強調されたイメージの色空間を再変換する色空間変換部と、
    背景マスクをロードして前記イメージを前景イメージおよび背景イメージに分離する背景マスクロード部と、
    イメージコンテンツ分析を介して前記色空間に対する知覚属性に基づいた属性情報を前記前景イメージまたは前記背景イメージによって獲得するイメージコンテンツ分析部であって、属性情報は、前記前景イメージまたは前記背景イメージの明度、彩度、または色調に基づいて獲得される属性情報および前記背景イメージのイメージ平坦度に基づいて獲得される属性情報を含み、前記イメージ平坦度は、前記背景イメージにおいて柔らかいピクセルの比率を含み、前記柔らかいピクセルは、周囲のピクセルそれぞれとの平均色差を用いて決定されることを特徴とする、イメージコンテンツ分析部と、
    前記属性情報に基づいてスケーリングパラメータを予測するスケーリングパラメータ予測部と、
    前記スケーリングパラメータに基づいて前記イメージを強調するイメージ強調部と、
    を含むことを特徴とする没入感生成システム。
33. 前記知覚属性は、前記前景イメージまたは前記背景イメージの明度、彩度、および色調のうちの少なくとも１つを含み、
    前記イメージコンテンツ分析部は、
    前記明度、前記彩度、または前記色調に基づいて前記属性情報を獲得する段階であることを特徴とする請求項３２に記載の没入感生成システム。
34. 前記属性情報は、
    （１）前記前景イメージの平均明度、
    （２）前記前景イメージの平均彩度、
    （３）前記前景イメージと前記背景イメージとの間の明度差、
    （４）前記前景イメージと前記背景イメージとの間の彩度差、および
    （５）前記背景イメージのイメージ平坦度
    のうちの少なくとも１つを含むことを特徴とする請求項３３に記載の没入感生成システム。
35. 前記スケーリングパラメータ予測部は、
    （１）前記前景イメージと前記背景イメージとの間に明度の差の彩度の差に対する第１比率、
    （２）前記前景イメージおよび前記背景イメージとの間に前記彩度の差の前記明度の差に対する第２比率、および
    （３）前記前景イメージの平均彩度
    のうちの少なくとも１つを用いて前記スケーリングパラメータを予測することを特徴とする請求項３２に記載の没入感生成システム。
36. 前記イメージ強調部は、
    前記前景イメージに対する明度を強調する明度強調部と、
    前記前景イメージに対する彩度を強調する彩度強調部と、
    前記前景イメージに対するコントラストを強調するコントラスト強調部と、
    前記背景イメージに対するソフトブラーを実行するソフトブラー部と、
    を含むことを特徴とする請求項３２に記載の没入感生成システム。

Images