JP6379636B2 - 情報処理装置、情報記録媒体、および画像処理方法、並びにプログラム - Google Patents

Description

本開示は、情報処理装置、情報記録媒体、および画像処理方法、並びにプログラムに関する。さらに詳細には、複数画像を重畳表示する場合に、統一された色空間の画像として表示を行うことを可能とした情報処理装置、情報記録媒体、および画像処理方法、並びにプログラムに関する。

映画等の様々なコンテンツを記録する情報記録媒体（メディア）として、ＤＶＤ(Digital Versatile Disc)や、ＢＤ（Ｂｌｕ−ｒａｙ（登録商標） Ｄｉｓｃ）が多く利用されている。

これらの各ディスクには、予め規定されたデータ記録フォーマットで画像や、音声、さらに、字幕、その他のグラフィックデータ等が、記録される。
一方、これらのディスクに記録された画像を表示するためのテレビ等の表示装置は、近年、画素数の増加によって解像度が向上している。

例えば、従来のテレビは水平画素数×垂直画素数＝７２０×４８０の画素数を有し、ＳＤ（Ｓｔａｎｄａｒｄ Ｄｅｆｉｎｉｔｉｏｎ）画像のみを表示可能であった。
これに対して、現在、広く普及しているハイビジョンテレビは、水平画素数×垂直画素数＝１９２０×１０８０の画素数を持ち、ＨＤ（Ｈｉｇｈ Ｄｅｆｉｎｉｔｉｏｎ）画像（ＨＤコンテンツ）の表示が可能である。
さらに、昨今、ＨＤ画像の４倍の画素、すなわち、例えば、水平画素数×垂直画素数＝４０９６×２１６０の画素からなるいわゆる４Ｋ規格（４Ｋフォーマット）に従った画像を表示可能とした４Ｋテレビが開発され、現在、普及段階にある。
４Ｋテレビは、水平画素数×垂直画素数＝４０９６×２１６０の表示部を有しており、ＨＤ画像の４倍の解像度の画像（４Ｋ画像（４Ｋコンテンツ））を表示することができる。さらに、高解像度の８Ｋ画像を表示する表示装置についても検討されている。

これらの各解像度の画像を持つコンテンツについては、利用する色空間について国際規格（ＩＴＵ）の規定が設けられている。すなわち、出力可能色に対応した色空間を規定している。
ＳＤ画像とＨＤ画像については、以下に示す色空間に従ったコンテンツとすることが規定されている。
ＳＤ画像は、ＢＴ．６０１、
ＨＤ画像は、ＢＴ．７０９、

さらに、４Ｋ画像については、ＢＴ．２０２０、およびＢＴ．７０９、これら２つの色空間をサポートすること、すなわちこれら２つの色空間の少なくともいずれかに対応する色を出力可能なコンテンツとすることが求められている。
なお、ＢＴ．６０１よりＢＴ．７０９の方がより広い色領域を持つ色空間を規定しており、さらにＢＴ．２０２０は、ＢＴ．７０９より広い色空間を規定している。ＢＴ．２０２０の規定する色空間は、ほぼ肉眼で観察する色空間に近く、より高精度で自然な色の出力が実現される。

なお、これらの色空間を有するコンテンツの表示については、例えば特許文献１（特開２０１０−２６３５９８号公報）等に記載されている。

特開２０１０−２６３５９８号公報

ＢＤに記録されるコンテンツは、現状において、ＨＤ画像、４Ｋ画像等、様々なコンテンツが混在している。従って、各コンテンツの色空間も上記の３種類の異なる設定のものが混在しているというのが現状である。

ここで問題となるのが、ＢＴ．７０９、ＢＴ．２０２０等、異なる色空間の色領域を持つ画像を重畳して表示する場合である。このように異なる色空間の画像コンテンツを混在させて出力すると、同じ「赤」の出力を行った場合でも微妙な色の違いが発生し、視聴者に違和感を与えてしまうことがある。

例えば、メイン画像である映画等の映像（Ｖｉｄｅｏ）がＢＴ．２０２０の色空間のコンテンツであり、その映像に重畳表示するコンテンツ、例えば、字幕コンテンツや、アイコンやアニメ等のグラフィックコンテンツがＢＴ．７０９の色空間のコンテンツである場合、これらのコンテンツを重畳表示すると、視聴者は色の統一感のなさを感じ、違和感を発生させてしまうという問題がある。

本開示は、例えばこのような問題点に鑑みてなされたものであり、異なる色空間に対応する画像データを重畳して表示する場合に、視聴者に違和感を発生させない画像を生成して出力可能とした情報処理装置、情報記録媒体、および画像処理方法、並びにプログラムを提供するものである。

本開示の第１の側面は、
複数の画像データを重畳して表示画像を生成する画像処理部を有し、
前記画像処理部は、
メイン画像の色空間情報と、
前記メイン画像に重畳するサブ画像の色空間情報を取得し、
サブ画像の色空間がメイン画像の色空間と異なる場合に、サブ画像の色空間をメイン画像の色空間に一致させる色空間変換処理を実行して、メイン画像と同じ色空間を持つ重畳用画像信号を生成し、生成した重畳用画像信号をメイン画像に重畳して出力画像信号を生成する情報処理装置にある。

本開示の第２の側面は、
メイン画像データと、
前記メイン画像の色空間情報と、
前記メイン画像に重畳するサブ画像データと、
前記サブ画像の色空間情報を格納した情報記録媒体であり、
前記メイン画像とサブ画像を重畳して表示画像を生成する再生装置に、
各画像の色空間情報を取得させて、各画像の色空間を一致させる色空間変換処理を行なわせることを可能とした情報記録媒体にある。

本開示の第３の側面は、
情報処理装置において実行する画像処理方法であり、
画像処理部が、
メイン画像の色空間情報と、前記メイン画像に重畳するサブ画像の色空間情報を取得する処理と、
サブ画像の色空間がメイン画像の色空間と異なる場合に、サブ画像の色空間をメイン画像の色空間に一致させる色空間変換処理を実行して、メイン画像と同じ色空間を持つ重畳用画像信号を生成する処理と、
前記重畳用画像信号をメイン画像に重畳して出力画像信号を生成する処理を実行する画像処理方法にある。

本開示の第４の側面は、
情報処理装置において画像処理を実行させるプログラムであり、
前記プログラムは、画像処理部に、
メイン画像の色空間情報と、前記メイン画像に重畳するサブ画像の色空間情報を取得する処理と、
サブ画像の色空間がメイン画像の色空間と異なる場合に、サブ画像の色空間をメイン画像の色空間に一致させる色空間変換処理を実行して、メイン画像と同じ色空間を持つ重畳用画像信号を生成する処理と、
前記重畳用画像信号をメイン画像に重畳して出力画像信号を生成する処理を実行させるプログラムにある。

なお、本開示のプログラムは、例えば、様々なプログラム・コードを実行可能な情報処理装置やコンピュータ・システムに対して、コンピュータ可読な形式で提供する記憶媒体、通信媒体によって提供可能なプログラムである。このようなプログラムをコンピュータ可読な形式で提供することにより、情報処理装置やコンピュータ・システム上でプログラムに応じた処理が実現される。

本開示のさらに他の目的、特徴や利点は、後述する本開示の実施例や添付する図面に基づくより詳細な説明によって明らかになるであろう。なお、本明細書においてシステムとは、複数の装置の論理的集合構成であり、各構成の装置が同一筐体内にあるものには限らない。

本開示の一実施例の構成によれば、異なる色空間の画像データを重畳表示した場合の違和感を解消し、統一された色空間の重畳画像の表示が実現される。
具体的には、画像処理部がメイン画像の色空間情報と、メイン画像に重畳するサブ画像の色空間情報を取得する。さらに、サブ画像の色空間がメイン画像の色空間と異なる場合に、サブ画像の色空間をメイン画像の色空間に一致させる色空間変換処理を実行して、メイン画像と同じ色空間を持つ重畳用画像信号を生成する。その後、生成した重畳用画像信号をメイン画像に重畳して出力する。画像処理部は、例えば、パレット要素識別子やＲＧＢ信号からなる画像信号に対して、ルックアップテーブルを利用した色空間変換を実行する。
本構成により、異なる色空間の画像データを重畳表示した場合の違和感が解消され、統一された色空間の重畳画像表示を実現することができる。
なお、本明細書に記載された効果はあくまで例示であって限定されるものではなく、また付加的な効果があってもよい。

情報処理装置の利用例について説明する図である。 画像の重畳処理を伴う出力画像生成処理について説明する図である。 画像の重畳処理を伴う出力画像生成処理について説明する図である。 本開示の第１実施例に従って実行される画像の重畳処理を伴う出力画像生成処理について説明する図である。 色空間変換処理の一例について説明する図である。 本開示の第１実施例に従って実行される画像の重畳処理を伴う出力画像生成処理について説明する図である。 本開示の第１実施例に従って実行される画像の重畳処理を伴う出力画像生成処理について説明する図である。 本開示の第２実施例に従って実行される画像の重畳処理を伴う出力画像生成処理について説明する図である。 本開示の第２実施例に従って実行される画像の重畳処理を伴う出力画像生成処理について説明する図である。 ＢＤ−ＲＯＭの格納データの構成例について説明する図である。 プレイリストを適用した再生処理例について説明する図である。 プレイリストに従ったクリップ再生とＢＤ−Ｊグラフィックスの重畳処理と再生処理例について説明する図である。 色空間情報の格納例について説明する図である。 情報処理装置の実行する処理シーケンスについて説明するフローチャートを示す図である。 情報処理装置の構成例について説明する図である。

以下、図面を参照しながら本開示の情報処理装置、情報記録媒体、および画像処理方法、並びにプログラムの詳細について説明する。なお、説明は以下の項目に従って行なう。
１．コンテンツ再生処理の概要について
２．本開示の画像処理の第１実施例について
３．本開示の画像処理の第２実施例について
４．情報記録媒体の格納データとデータ再生処理例について
５．複数のデータファイルを利用した重畳画像データの再生例について
６．色空間情報の格納領域について
７．再生処理対象となる画像について
８．情報処理装置の実行する処理シーケンスについて
９．情報処理装置の構成例について
１０．本開示の構成のまとめ

［１．コンテンツ再生処理の概要について］
まず、コンテンツ再生処理の概要について説明する。
図１は、本開示の処理を適用可能なコンテンツ再生処理システムの一構成例を示す図である。図１には、再生対象となるコンテンツを格納した記録メディアである情報記録媒体１０１と、情報記録媒体１０１を装着し、情報記録媒体１０１に格納されたコンテンツの再生処理を実行する情報処理装置（再生装置）１０２、情報処理装置（再生装置）１０２が情報記録媒体１０１から読み出した再生コンテンツを表示する表示装置１０４を示している。

さらに、情報処理装置（再生装置）１０２に対して操作情報を出力する操作部（リモコン）１０３、情報処理装置（再生装置）１０２と表示装置１０４間のデータ伝送を行う、例えばＨＤＭＩ（登録商標）ケーブル等の接続ケーブル１０５を示している。

図１に示す例では、コンテンツを格納した情報記録媒体１０１をＢＤ（Ｂｌｕ−ｒａｙ（登録商標） Ｄｉｓｃ）とし、情報処理装置（再生装置）１０２をＢＤプレーヤとした例を示している。ただし、これらはその他の記録メディアと再生装置の組み合わせとしてもよい。

例えば、コンテンツ格納メディアである情報記録媒体１０１をフラッシュメモリとして、情報処理装置（再生装置）１０２をフラッシュメモリからのデータ読み出しを実行するメモリ再生装置の組み合わせとしてもよい。

情報記録媒体１０１には再生対象となるコンテンツが記録されている。記録コンテンツには、例えば以下の画像コンテンツが含まれる。
（ａ）メインとなる映画等の映像データ＝ビデオ画像
（ｂ）ビデオ画像に重畳表示可能なグラフィックスデータ＝ＢＤグラフィックス
（ｃ）ビデオ画像に重畳表示可能なＪａｖａ（登録商標）グラフッィクスデータ＝ＢＤ−Ｊグラフィックス

なお、（ｂ）ＢＤグラフィックは、例えばビットマップ構成の字幕データ等のプレゼンテーショングラフィックス（ＰＧ）、またはユーザ操作用のボタン等のアイコン等を構成するインタラクティブグラフィックス（ＩＧ）、またはテキストフォントのレンダリング処理によって生成する字幕データであるテキストサブタイトル（ＴＳＴ）等のデータによって構成される。
また、（ｃ）ＢＤ−Ｊグラフィックスには、Ｊａｖａ（登録商標）形式の画像データが含まれる。
上記（ａ），（ｂ），（ｃ）は独立したデータである。すなわち、それぞれ個別に生成可能なデータであり、情報記録媒体１０１に個別に記録可能である。これら（ａ），（ｂ），（ｃ）のデータは、カラー画像データであり、それぞれ特定の色空間に従ったカラー画像として生成される。

各画像データの色空間は、様々な設定があり得る。一例として、例えば、以下のような設定がある。
（ａ）ビデオ画像＝ＢＴ．２０２０、
（ｂ）ＢＤグラフィックス＝ＢＴ．７０９、
（ｃ）ＢＤ−Ｊグラフィックス＝ＢＴ．７０９、

なお、前述したように、ＢＴ．２０２０、ＢＴ．７０９等は、国際規格（ＩＴＵ）において規定された色空間である。ＢＴ．２０２０は、ＢＴ．７０９より広い色空間を規定しており、ＢＴ．２０２０の規定する色空間は、ほぼ肉眼で観察する色空間に近く、より高精度で自然な色の出力が実現される。

しかし、前述したように、ＢＴ．７０９、ＢＴ．２０２０等、異なる色空間の色領域を持つ画像を混在させて表示を行うと、同じ「赤」の出力を行った場合でも微妙な色の違いが発生し、視聴者に違和感を与えてしまうことである。
例えば、上記のように、メインとなる映画等の（ａ）ビデオ画像がＢＴ．２０２０の色空間のコンテンツであり、このビデオ画像に、ＢＴ．７０９の色空間を持つ上記の（ｂ）ＢＤグラフィックスや、（ｃ）ＢＤ−Ｊグラフィックスを重畳して表示すると、色の統一感が損なわれ、視聴者に違和感を生じさせることになる。

上記（ａ）〜（ｃ）の各コンテンツの重畳表示を行う場合の具体的な問題点について、図２を参照して説明する。
図２には、情報処理装置１０２の画像処理部が、情報記録媒体１０１から以下の３つの画像を読み出して、読み出した３つの画像データを重畳した画像を生成して表示装置に出力する場合の処理構成例を示している。
（ａ）映画等のビデオ画像に相当するメイン画像１５１、
（ｂ）字幕等を構成するＢＤグラフィックスに相当する第１サブ画像１５２、
（ｃ）Ｊａｖａ（登録商標）形式の画像データを有するＢＤ−Ｊグラフッイクスに相当する第２サブ画像１５３、
図２は、これら３つの画像の重畳画像を生成する処理を説明する図である。

なお、これら３つの画像は以下の色空間を持つカラー画像データであるとする。
メイン画像１５１は色空間ＢＴ．２０２０の画像データ、
第１サブ画像１５２は色空間ＢＴ．７０９の画像データ、
第２サブ画像１５３は色空間ＢＴ．７０９の画像データ、
上記設定であるとする。

情報処理装置１０２の画像処理部は、図２に示すように、メイン画像１５１から画像信号：ＹＣｒＣｂ［ＢＴ．２０２０］１６１を取得する。
なお、以下の説明において、ＹＣｒＣｂ［ＢＴ．２０２０］は、色空間ＢＴ．２０２０を有するＹＣｒＣｂ画像信号を示し、ＹＣｒＣｂ［ＢＴ．７０９］は、色空間ＢＴ．７０９を有するＹＣｒＣｂ画像信号を示す。

第１サブ画像１５２は、各画素対応の色情報を例えば２５６色対応のパレット要素識別子（ｐａｌｌｅｔ ｅｎｔｒｙ ｉｄ）として保持した画像データである。本例では、第１サブ画像１５２は色空間ＢＴ．７０９の画像データであり、パレット要素識別子も色空間ＢＴ．７０９の規定する色を指定する識別子によって構成される。

情報処理装置１０２の画像処理部は、図２に示すように、まず、第１サブ画像１５２から、パレット要素識別子（ｐａｌｌｅｔ ｅｎｔｒｙ ｉｄ）１６２を取得し、色変換部１５４において、パレット要素識別子を画像信号ＹＣｒＣｂ［ＢＴ．７０９］に変換する処理を行なう。

色変換部１５４は、パレット要素識別子（ｐａｌｌｅｔ ｅｎｔｒｙ ｉｄ）と画像信号ＹＣｒＣｂ［ＢＴ．７０９］との対応データを持つ色変換テーブル、すなわちカラールックアップテーブル（ＣＬＵＴ）を有し、この色変換テーブルを用いて、パレット要素識別子１６２を、画像信号ＹＣｒＣｂ［ＢＴ．７０９］に変換する処理を行なう。
色変換部１５４は、変換データとしての画像信号ＹＣｒＣｂ［ＢＴ．７０９］１６４を出力する。

また、第２サブ画像１５３は、例えばＲＧＢ画像信号を持つカラー画像として構成される。
本例では、第２サブ画像１５３は色空間ＢＴ．７０９の画像データであり、ＲＧＢ画像信号も色空間ＢＴ．７０９の規定する色に対応するＲＧＢ信号値によって構成される。

情報処理装置１０２の画像処理部は、図２に示すように、まず、第２サブ画像１５３から、ＲＧＢ画像信号１６３を取得し、色変換部１５５において、画像信号ＹＣｒＣｂ［ＢＴ．７０９］に変換する処理を行なう。
色変換部１５５は、例えば予め規定された演算を実行して、ＲＧＢ各信号値を適用して、ＹＣｒＣｂ各信号の値を算出する。
なお、ここで算出するＹＣｒＣｂ各信号の値は、色空間ＢＴ．７０９に対応するＹＣｒＣｂ信号値である。
色変換部１５５は、変換データとしての画像信号ＹＣｒＣｂ［ＢＴ．７０９］１６５を出力する。

重畳部１５６は、３つの画像信号の重畳処理を実行して１つの出力画像を生成する。
すなわち、以下の３つの画像の重畳処理を行なう。
（ａ）メイン画像１５１を構成する画像信号ＹＣｒＣｂ［ＢＴ．２０２０］１６１、
（ｂ）色変換部１５４の出力する第１サブ画像１５２を構成する画像信号ＹＣｒＣｂ［ＢＴ．７０９］、
（ｃ）色変換部１５５の出力する第２サブ画像１５３を構成する画像信号ＹＣｒＣｂ［ＢＴ．７０９］、
これらの３つの画像信号を重畳する処理を行なう。なお、重畳位置は再生プログラムに従って予め決定される。

重畳部１５６の生成した重畳画像信号は、図に示す画像信号：（ＹＣｒＣｂ［ＢＴ．２０２０］＆ＹＣｒＣｂ［ＢＴ．７０９］）１６６である。すなわち、色空間ＢＴ．２０２０に従った色出力を行う画像領域と、色空間ＢＴ．７０９に従った色出力を行う画像領域とが混在した画像となる。
この画像が表示用画像データ（ＢＤ Ｖｉｄｅｏ）１５７として、表示装置１０４に出力され、表示される。

この結果、表示装置１０４の表示画像は、色空間ＢＴ．２０２０に従った色出力を行う画像領域と、色空間ＢＴ．７０９に従った色出力を行う画像領域が混在した画像となる。
この結果、視聴者に色の統一感のなさを感じさせるといった問題を発生させることになる。

なお、図２に示す例は、
メイン画像１５１は色空間ＢＴ．２０２０の画像データ、
第１サブ画像１５２は色空間ＢＴ．７０９の画像データ、
第２サブ画像１５３は色空間ＢＴ．７０９の画像データ、
上記設定であり、メイン画像の出力画像領域は、色空間ＢＴ．２０２０の画像データとして出力され、第１サブ画像１５２と、第２サブ画像１５３の出力部分は、色空間ＢＴ．７０９の画像データとして出力される。

複数の画像を組み合わせて表示する場合の組み合わせパターンは様々であり、メイン画像が色空間ＢＴ．７０９に従った画像であり、サブ画像が色空間ＢＴ．２０２０に従った画像といった組み合わせの場合も、出力画像は視聴者に違和感を与える画像となる。

図３に示す例は、
メイン画像１５１は色空間ＢＴ．７０９の画像データ、
第１サブ画像１５２は色空間ＢＴ．２０２０の画像データ、
第２サブ画像１５３は色空間ＢＴ．７０９の画像データ、
上記設定とした構成における処理例を示している。
各処理部における処理は、図２を参照して説明したと同様の処理となる。

この図３に示す構成では、メイン画像の出力画像領域は、色空間ＢＴ．７０９の画像データとして出力され、第１サブ画像１５２の出力画像領域は色空間ＢＴ．２０２０の画像データ、第２サブ画像１５３の出力部分は、色空間ＢＴ．７０９の画像データとして出力される。
この場合も、出力画像の画像領域ごとに異なる色空間に対応した画素値が出力されることになり、視聴者に違和感を与える結果となる。

［２．本開示の画像処理の第１実施例について］
次に、図２、図３を参照して説明した問題点を解決する本開示の情報処理装置の実行する処理の一例について説明する。

図４には、先に説明した図２、図３と同様、情報処理装置１０２の画像処理部が、情報記録媒体１０１から以下の３つの画像を読み出して、読み出した３つの画像データを重畳して表示画像を生成する場合の処理構成例を示している。
（ａ）映画等のビデオ画像に相当するメイン画像２０１、
（ｂ）字幕等を構成するＢＤグラフィックスに相当する第１サブ画像２０２、
（ｃ）Ｊａｖａ（登録商標）形式の画像データを有するＢＤ−Ｊグラフッイクスに相当する第２サブ画像２０３、
図４は、これら３つの画像を重畳する処理を説明する図である。

図２を参照して説明したと同様、これら３つの画像は以下の色空間を持つカラー画像データであるとする。
メイン画像２０１は色空間ＢＴ．２０２０の画像データ、
第１サブ画像２０２は色空間ＢＴ．７０９の画像データ、
第２サブ画像２０３は色空間ＢＴ．７０９の画像データ、
上記設定であるとする。

情報処理装置１０２の画像処理部は、図４に示すように、メイン画像２０１から画像信号：ＹＣｒＣｂ［ＢＴ．２０２０］２１１を取得する。
なお、前述したようにＹＣｒＣｂ［ＢＴ．２０２０］は、色空間ＢＴ．２０２０を有するＹＣｒＣｂ画像信号を示し、ＹＣｒＣｂ［ＢＴ．７０９］は、色空間ＢＴ．７０９を有するＹＣｒＣｂ画像信号を示す。

なお、図４のＹＣｒＣｂ（Ｖ）［ＢＴ．２０２０］２１１中に示す（Ｖ）は、この画像信号がメイン画像２０１（＝Ｖ：Ｖｉｄｅｏ）の画像データの色空間と同一の色空間を持つ画像信号であることを意味する。
また、ＹＣｒＣｂ（Ｇ）は、この画像信号が第１サブ画像（＝Ｇ：Ｇｒａｐｈｉｃｓ）の画像データの色空間と同一の色空間を持つ画像信号であることを意味する。
同様に、ＹＣｒＣｂ（Ｂ）は、この画像信号が第２サブ画像（＝Ｂ：ＢＤ−Ｊ Ｇｒａｐｈｉｃｓ）の画像データをの色空間と同一の色空間を持つ画像信号であることを意味する。
図４に示す例では、ＹＣｒＣｂ（Ｖ）は色空間ＢＴ．２０２０の画像信号であり、ＹＣｒＣｂ（Ｇ）とＹＣｒＣｂ（Ｂ）は色空間ＢＴ．７０９の画像信号である。

第１サブ画像２０２は、各画素対応の色情報を例えば２５６色対応のパレット要素識別子（ｐａｌｌｅｔ ｅｎｔｒｙ ｉｄ）として保持した画像データである。
情報処理装置１０２の画像処理部は、図４に示すように、まず、第１サブ画像２０２から、パレット要素識別子（ｐａｌｌｅｔ ｅｎｔｒｙ ｉｄ）２１２を取得し、色変換部２０４において、画像信号ＹＣｒＣｂ［ＢＴ．７０９］に変換する。

色変換部２０４は、パレット要素識別子（ｐａｌｌｅｔ ｅｎｔｒｙ ｉｄ）と画像信号ＹＣｒＣｂ［ＢＴ．７０９］との対応データを持つ色変換テーブル、すなわちカラールックアップテーブル（ＣＬＵＴ）を有し、この色変換テーブルを用いて、パレット要素識別子２１２を、画像信号ＹＣｒＣｂ［ＢＴ．７０９］に変換する。
色変換部２０４は、変換データとしての画像信号ＹＣｒＣｂ［ＢＴ．７０９］２１４を出力する。

色変換部２０４の出力した画像信号ＹＣｒＣｂ［ＢＴ．７０９］２１４は、色空間変換部２０６に入力される。
色空間変換部２０６は、色空間ＢＴ．７０９の画像信号ＹＣｒＣｂ［ＢＴ．７０９］を、メイン画像２０１の色空間に一致する色空間ＢＴ．２０２０の画像信号ＹＣｒＣｂ［ＢＴ．２０２０］に変換する処理を実行する。

この色空間ＢＴ．７０９の画像信号ＹＣｒＣｂ［ＢＴ．７０９］を、色空間ＢＴ．２０２０の画像信号ＹＣｒＣｂ［ＢＴ．２０２０］に変換する処理は、例えば図５に示すシーケンスに従って実行される。
図５に示す画像信号の色空間変換処理は、国際規格（ＩＴＵ）に定められる仕様に従った変換処理である。
図５に示すステップＳ０１〜Ｓ０６を順次、実行して変換処理が行われる。
各ステップの処理は以下の通りである。

（ステップＳ０１）
まず、色空間ＢＴ．７０９の画像信号ＹＣｒＣｂ［ＢＴ．７０９］のＹＣｒＣｂ各信号値を、同じ色空間ＢＴ．７０９のＲ'Ｇ'Ｂ'各信号値に変換する。この変換処理は、国際規格の規定：ＩＴＵ−Ｒ ＢＴ．７０９−５ Ｐａｒｔ−２／３．２．３．３に従って実行可能である。
（ステップＳ０２）
次に、色空間ＢＴ．７０９のＲ'Ｇ'Ｂ'各信号値を、同じ色空間ＢＴ．７０９のＲＧＢ信号値に変換する。これは電気光学伝達関数（ＥＯＴＦ：Ｅｌｅｃｔｒｏ−Ｏｐｔｉｃａｌ ｔｒａｎｓｆｅｒ ｆｕｎｃｔｉｏｎ）を適用した処理として実行される。この変換処理は、国際規格の規定：ＩＴＵ−Ｒ ＢＴ．７０９−５ Ｐａｒｔ−２／１．２に従って実行可能である。

（ステップＳ０３）
次に、色空間ＢＴ．７０９の画像信号ＲＧＢの各信号値をＸＹＺ各信号値に変換する。この変換処理は、国際規格の規定：ＩＴＵ−Ｒ ＢＴ．７０９−５ Ｐａｒｔ−２／１．３．１．４に従って実行可能である。
なお、ＸＹＺ信号値は、デバイス非依存型のＸＹＺ表色系に従った色信号値であり、ＢＴ．７０９等の色空間に依存しない信号値となる。

（ステップＳ０４）
次に、ＸＹＺ表色系に従った画像信号ＸＹＺの各信号値を、色空間ＢＴ．２０２０のＲＧＢ各信号値に変換する。
ここで算出するＲＧＢ信号値は色空間ＢＴ．２０２０対応のＲＧＢ値となる。この変換処理は、国際規格の規定：ＩＴＵ−Ｒ ＢＴ．２０２０ ＴＡＢＬＥ３に従って実行可能である。
（ステップＳ０５）
次に、色空間ＢＴ．２０２０のＲＧＢ各信号値を、同じ色空間ＢＴ．２０２０のＲ'Ｇ'Ｂ'信号値に変換する。これは光学電気伝達関数（ＯＥＴＦ：Ｏｐｔｉｃａｌ−Ｅｌｅｃｔｒｏ ｔｒａｎｓｆｅｒ ｆｕｎｃｔｉｏｎ）を適用した処理として実行される。この変換処理は、国際規格の規定：ＩＴＵ−Ｒ ＢＴ．２０２０ＴＡＢＬＥ４に従って実行可能である。

（ステップＳ０６）
次に、色空間ＢＴ．２０２０のＲ'Ｇ'Ｂ'各信号値を、同じ色空間ＢＴ．２０２０のＹＣｒＣｂ信号値に変換する。この変換処理は、国際規格の規定：ＩＴＵ−Ｒ ＢＴ．２０２０ＴＡＢＬＥ４に従って実行可能である。

上記の処理ステップＳ０１〜Ｓ０６を実行することで、色空間ＢＴ．７０９の画像信号ＹＣｒＣｂ［ＢＴ．７０９］を、色空間ＢＴ．２０２０の画像信号ＹＣｒＣｂ［ＢＴ．２０２０］に変換することができる。
図４に示す色空間変換部２０６は、例えば上記の処理に従って、色空間ＢＴ．７０９の画像信号ＹＣｒＣｂ［ＢＴ．７０９］を、色空間ＢＴ．２０２０の画像信号ＹＣｒＣｂ［ＢＴ．２０２０］に変換する。

また、第２サブ画像２０３は、例えばＲＧＢ画像信号を持つカラー画像として構成される。
情報処理装置１０２の画像処理部は、図４に示すように、まず、第２サブ画像２０３から、ＲＧＢ画像信号２１３を取得し、色変換部２０５において、画像信号ＹＣｒＣｂ［ＢＴ．７０９］に変換する処理を行なう。
色変換部２０５は、例えば予め規定された演算を実行して、ＲＧＢ各信号値を適用して、ＹＣｒＣｂ各信号の値を算出する。
なお、ここで算出するＹＣｒＣｂ各信号の値は、色空間ＢＴ．７０９に対応するＹＣｒＣｂ信号値である。
色変換部２０５は、変換データとしての画像信号ＹＣｒＣｂ［ＢＴ．７０９］２１５を出力する。

色変換部２０５の出力した画像信号ＹＣｒＣｂ［ＢＴ．７０９］２１５は、色空間変換部２０７に入力される。
色空間変換部２０７は、色空間ＢＴ．７０９の画像信号ＹＣｒＣｂ［ＢＴ．７０９］を、メイン画像２０１の色空間に一致する色空間ＢＴ．２０２０の画像信号ＹＣｒＣｂ［ＢＴ．２０２０］に変換する処理を実行する。

色空間変換部２０７は、色空間変換部２０６と同様、例えば図５に示すステップＳ０１〜Ｓ０６の各処理を実行するシーケンスに従って、色空間ＢＴ．７０９の画像信号ＹＣｒＣｂ［ＢＴ．７０９］を、色空間ＢＴ．２０２０の画像信号ＹＣｒＣｂ［ＢＴ．２０２０］に変換する処理を実行する。

重畳部２０８は、３つの画像信号の重畳処理を実行して１つの出力画像を生成する。
すなわち、以下の３つの画像の重畳処理を行なう。
（ａ）メイン画像２０１を構成する画像信号ＹＣｒＣｂ［ＢＴ．２０２０］２１１、
（ｂ）色空間変換部２０６の出力する第１サブ画像２０２を構成する画像信号ＹＣｒＣｂ［ＢＴ．２０２０］２１６、
（ｃ）色空間変換部２０７の出力する第２サブ画像２０３を構成する画像信号ＹＣｒＣｂ［ＢＴ．２０２０］２１７、
これらの３つの画像信号を重畳する処理を行なう。なお、重畳位置は再生プログラムに従って予め決定される。

重畳部２０６に入力する３つの画像信号は、いずれも色空間ＢＴ．２０２０の画像信号であり、この結果生成される画像信号ＹＣｒＣｂ［ＢＴ．２０２０］２１８は、すべての画像領域が色空間ＢＴ．２０２０に従った色出力を行う画像となる。
この画像が表示用画像データ（ＢＤ Ｖｉｄｅｏ）２０９として、表示装置１０４に出力され、表示される。

この結果、表示装置１０４の表示画像は、全ての画像領域が、色空間ＢＴ．２０２０に従った色出力を行う画像領域となり、統一された色空間に従って色出力がなされる画像となり、視聴者に違和感を発生させない色の統一感を感じさせる画像を提供することが可能となる。

なお、図４を参照して説明した例は、
メイン画像２０１は色空間ＢＴ．２０２０の画像データ、
第１サブ画像２０２は色空間ＢＴ．７０９の画像データ、
第２サブ画像２０３は色空間ＢＴ．７０９の画像データ、
上記設定の画像の重畳表示処理を行なう場合の処理例である。
情報処理装置１０２の画像処理部は、第１サブ画像２０２と、第２サブ画像２０３の色空間ＢＴ．７０９の画像信号を変換して、メイン画像２０１の色空間ＢＴ．２０２０に合わせる処理を実行している。
このように、メイン画像２０１の色空間にサブ画像の色空間を一致させることで、統一感のある画像を生成して出力することが可能となる。

ただし、複数画像を組み合わせて表示する場合の画像の組み合わせパターンは様々である。例えば、メイン画像が色空間ＢＴ．７０９に従った画像であり、サブ画像が色空間ＢＴ．２０２０に従った画像といった組み合わせの場合もある。
図６に示す例は、
メイン画像２０１が色空間ＢＴ．７０９の画像データ、
第１サブ画像２０２が色空間ＢＴ．２０２０の画像データ、
第２サブ画像２０３が色空間ＢＴ．７０９の画像データ、
上記設定とした構成における処理例を示している。

図６に示す設定における情報処理装置１０２の画像処理部の処理について説明する。
情報処理装置１０２の画像処理部は、図６に示すように、メイン画像２０１から画像信号：ＹＣｒＣｂ［ＢＴ．７０９］２１１を取得する。

第１サブ画像２０２は、各画素対応の色情報を例えば２５６色対応のパレット要素識別子（ｐａｌｌｅｔ ｅｎｔｒｙ ｉｄ）として保持した画像データとして構成されている。
なお、図６に示す例では第１サブ画像２０２は、色空間ＢＴ．２０２０の画像データであり、各画素対応の色情報は色空間ＢＴ．２０２０対応のパレットの要素識別子（ｉｄ）によって構成される。
情報処理装置１０２の画像処理部は、図６に示すように、まず、第１サブ画像２０２から、パレット要素識別子（ｐａｌｌｅｔ ｅｎｔｒｙ ｉｄ）２１２を取得し、色変換部２０４において、画像信号ＹＣｒＣｂ［ＢＴ．２０２０］に変換する処理を行なう。

色変換部２０４は、パレット要素識別子（ｐａｌｌｅｔ ｅｎｔｒｙ ｉｄ）と画像信号ＹＣｒＣｂ［ＢＴ．２０２０］との対応データを持つ色変換テーブル、すなわちカラールックアップテーブル（ＣＬＵＴ）を有し、この色変換テーブルを用いて、パレット要素識別子２１２を、画像信号ＹＣｒＣｂ［ＢＴ．２０２０］に変換する処理を行なう。
色変換部２０４は、変換データとしての画像信号ＹＣｒＣｂ［ＢＴ．２０２０］２１４を出力する。

色変換部２０４の出力した画像信号ＹＣｒＣｂ［ＢＴ．２０２０］２１４は、色空間変換部２０６に入力される。
色空間変換部２０６は、色空間ＢＴ．２０２０の画像信号ＹＣｒＣｂ［ＢＴ．２０２０］を、メイン画像２０１の画像信号対応の色空間ＢＴ．７０９に合わせる処理を行なう。すなわち、色変換部２０４の出力した画像信号ＹＣｒＣｂ［ＢＴ．２０２０］２１４を色空間ＢＴ．７０９の画像信号ＹＣｒＣｂ［ＢＴ．７０９］に変換する処理を実行する。

色空間ＢＴ．２０２０の画像信号ＹＣｒＣｂ［ＢＴ．２０２０］を、色空間ＢＴ．７０９の画像信号ＹＣｒＣｂ［ＢＴ．７０９］に変換する処理は、先に説明した図５に示すシーケンスを逆に実行する処理となる。
図５に示す処理を逆に実行することで、色空間ＢＴ．２０２０の画像信号ＹＣｒＣｂ［ＢＴ．２０２０］を、色空間ＢＴ．７０９の画像信号ＹＣｒＣｂ［ＢＴ．７０９］に変換することができる。
図６に示す色空間変換部２０６は、例えば図５に示す処理を逆に実行することで、色空間ＢＴ．２０２０の画像信号ＹＣｒＣｂ［ＢＴ．２０２０］を、色空間ＢＴ．７０９の画像信号ＹＣｒＣｂ［ＢＴ．７０９］に変換する。

また、第２サブ画像２０３は、例えばＲＧＢ画像信号を持つカラー画像として構成される。
なお、この例では、第２サブ画像２０３は、色空間ＢＴ．７０９の画像信号を有し、ＲＧＢ信号はＢＴ．７０９対応の信号値を有する。

情報処理装置１０２の画像処理部は、図６に示すように、まず、第２サブ画像２０３から、ＲＧＢ画像信号２１３を取得し、色変換部２０５において、画像信号ＹＣｒＣｂ［ＢＴ．７０９］に変換する処理を行なう。
色変換部２０５は、例えば予め規定された演算を実行して、ＲＧＢ各信号値を適用して、ＹＣｒＣｂ各信号の値を算出する。
なお、ここで算出するＹＣｒＣｂ各信号の値は、色空間ＢＴ．７０９に対応するＹＣｒＣｂ信号値である。
色変換部２０５は、変換データとしての画像信号ＹＣｒＣｂ［ＢＴ．７０９］２１５を出力する。

色変換部２０５の出力した画像信号ＹＣｒＣｂ［ＢＴ．７０９］２１５は、色空間変換部２０７に入力される。
色空間変換部２０７は、色変換部２０５の出力した画像信号ＹＣｒＣｂ［ＢＴ．７０９］２１５を、メイン画像２０１の画像信号対応の色空間ＢＴ．７０９に合わせる処理を行なう。本例では、色変換部２０５の出力した画像信号ＹＣｒＣｂ［ＢＴ．７０９］２１５を、メイン画像２０１の画像信号対応の色空間ＢＴ．７０９に一致している。この場合、色空間変換部２０７は、色空間変換処理を行なうことなく、入力信号ＹＣｒＣｂ［ＢＴ．７０９］２１５をそのまま出力する。

重畳部２０８は、３つの画像信号の重畳処理を実行して１つの出力画像を生成する。
すなわち、以下の３つの画像の重畳処理を行なう。
（ａ）メイン画像２０１を構成する画像信号ＹＣｒＣｂ［ＢＴ．７０９］２１１、
（ｂ）色空間変換部２０６の出力する第１サブ画像２０２を構成する画像信号ＹＣｒＣｂ［ＢＴ．７０９］２１６、
（ｃ）色空間変換部２０７の出力する第２サブ画像２０３を構成する画像信号ＹＣｒＣｂ［ＢＴ．７０９］２１７、
これらの３つの画像信号を重畳する処理を行なう。なお、重畳位置は再生プログラムに従って予め決定される。

重畳部２０８に入力する３つの画像信号は、いずれも色空間ＢＴ．７０９の画像信号であり、この結果生成される画像信号ＹＣｒＣｂ［ＢＴ．７０９］２１８は、すべての画像領域が色空間ＢＴ．７０９に従った色出力を行う画像となる。
この画像が表示用画像データ（ＢＤ Ｖｉｄｅｏ）２０９として、表示装置１０４に出力され、表示される。

この結果、表示装置１０４の表示画像は、全ての画像領域が、色空間ＢＴ．７０９に従った色出力を行う画像領域となり、統一された色空間に従った色出力がなされ、視聴者に違和感を発生させない色の統一感を感じさせる画像を提供することが可能となる。

このように、情報処理装置１０２の画像処理部は、メイン画像の色空間に合わせるように、重畳するサブ画像の色空間を変更する処理を行なう。
図４、図６を参照して２つの具体的処理例について説明したが、より一般化した処理例として、以下のような色空間設定の場合の処理例について図７を参照して説明する。

図７に示す例は、
メイン画像２０１が色空間Ｖの画像データ、
第１サブ画像２０２が色空間Ｇの画像データ、
第２サブ画像２０３が色空間Ｂの画像データ、
上記設定とした構成における処理例を示している。
色空間Ｖ，Ｇ，Ｂは、例えばＢＴ．２０２０、ＢＴ．７０９等の色空間に対応する。

図７に示す構成において、第１サブ画像２０２の色空間変換処理を実行する色空間変換部２０６は、第１サブ画像２０２の色空間Ｇを、メイン画像２０１の色空間Ｖに一致させる色空間変換処理を実行する。
すなわち、
第１サブ画像２０２の画像信号ＹＣｒＣｂ（Ｇ）を画像信号ＹＣｒＣｂ（Ｖ）に変換する。

また、第２サブ画像２０３の色空間変換処理を実行する色空間変換部２０７は、第２サブ画像２０３の色空間Ｂを、メイン画像２０１の色空間Ｖに一致させる色空間変換処理を実行する。
すなわち、
第２サブ画像２０３の画像信号ＹＣｒＣｂ（Ｂ）を画像信号ＹＣｒＣｂ（Ｖ）に変換する。

重畳部２０８は、３つの画像信号の重畳処理を実行して１つの出力画像を生成する。
すなわち、以下の３つの画像の重畳処理を行なう。
（ａ）メイン画像２０１を構成する画像信号ＹＣｒＣｂ（Ｖ）２１１、
（ｂ）色空間変換部２０６の出力する第１サブ画像２０２を構成する画像信号ＹＣｒＣｂ（Ｖ）２１６、
（ｃ）色空間変換部２０７の出力する第２サブ画像２０３を構成する画像信号ＹＣｒＣｂ（Ｖ）２１７、
これらの３つの画像信号を重畳する処理を行なう。なお、重畳位置は再生プログラムに従って予め決定される。

重畳部２０６に入力する３つの画像信号は、いずれもメイン画像２０１の色空間Ｖと同じ色空間Ｖの画像信号であり、この結果生成される画像信号ＹＣｒＣｂ（Ｖ）２１８は、すべての画像領域が同一の色空間Ｖに従った色出力を行う画像となる。
この画像が表示用画像データ（ＢＤ Ｖｉｄｅｏ）２０９として、表示装置１０４に出力され、表示される。

この結果、表示装置１０４の表示画像は、全ての画像領域が、元々のメイン画像２０１の色空間Ｖに統一された色空間Ｖの色出力を行う画像領域となり、視聴者に違和感を発生させない色の統一感を感じさせる画像を出力することが可能となる。

［３．本開示の画像処理の第２実施例について］
次に、図８以下を参照して本開示の第２実施例について説明する。
図８には、先に説明した図４と同様、情報処理装置１０２の画像処理部が、情報記録媒体１０１から以下の３つの画像を読み出して、読み出した３つの画像データを重畳して表示画像を生成する場合の処理例を示している。
（ａ）映画等のビデオ画像に相当する色空間ＢＴ．２０２０のメイン画像２０１、
（ｂ）字幕等を構成するＢＤグラフィックスに相当する色空間ＢＴ．７０９の第１サブ画像２０２、
（ｃ）Ｊａｖａ（登録商標）形式の画像データを有するＢＤ−Ｊグラフッイクスに相当する色空間ＢＴ．７０９の第２サブ画像２０３、
図８は、これら３つの画像を重畳する処理を説明する図である。

この第２実施例では、パレット要素識別子（Ｐａｌｅｔｔｅ ｅｎｔｒｙ ｉｄ）によって構成される第１サブ画像２０２に対する処理のみが第１実施例と異なる処理となる。すなわち、図８に示す全色ＬＵＴ３０１、色空間変換部３０２、全色ＬＵＴ３０３、色変換部３０４が本実施例特有の処理を行なう。
その他の構成部における処理は第１実施例と同様である。

情報処理装置１０２の画像処理部は、図８に示すように、メイン画像２０１から画像信号：ＹＣｒＣｂ［ＢＴ．２０２０］２１１を取得する。
なお、前述したようにＹＣｒＣｂ［ＢＴ．２０２０］は、色空間ＢＴ．２０２０を有するＹＣｒＣｂ画像信号を示し、ＹＣｒＣｂ［ＢＴ．７０９］は、色空間ＢＴ．７０９を有するＹＣｒＣｂ画像信号を示す。

第１サブ画像２０２は、各画素対応の色情報を例えば２５６色対応のパレット要素識別子（ｐａｌｌｅｔ ｅｎｔｒｙ ｉｄ）として保持した画像データである。

この第２実施例では、情報処理装置１０２の画像処理部は、図８に示すように、第１サブ画像２０２から、パレット要素識別子（ｐａｌｌｅｔ ｅｎｔｒｙ ｉｄ）２１２を取得し、これを色変換部３０４において、画像信号ＹＣｒＣｂ［ＢＴ．２０２０］に変換する処理を行なう。

図８に示す例において、第１サブ画像２０２は、色空間ＢＴ．７０９の画像信号であり、パレット要素識別子（ｐａｌｌｅｔ ｅｎｔｒｙ ｉｄ）２１２も色空間ＢＴ．７０９に従って設定される色に対応する識別子である。
色変換部３０４は、この色空間ＢＴ．７０９のパレット要素識別子２１２を入力して、異なる色空間ＢＴ．２０２０の画像信号ＹＣｒＣｂ［ＢＴ．２０２０］に変換する処理を行なう。

本実施例において、色変換部３０４は、色空間ＢＴ．７０９対応のパレット要素識別子（ｐａｌｌｅｔ ｅｎｔｒｙ ｉｄ）と、色空間ＢＴ．２０２０の画像信号ＹＣｒＣｂ［ＢＴ．２０２０］との対応データを持つ色変換テーブル、すなわちカラールックアップテーブル（ＣＬＵＴ）を有する。

この色変換テーブルを用いて、色空間ＢＴ．７０９対応のパレット要素識別子２１２を、色空間ＢＴ．２０２０対応の画像信号ＹＣｒＣｂ［ＢＴ．２０２０］に変換する処理を行なう。

この変換処理に適用するルックアップテーブルを生成するための構成が、図８に示す全色ＬＵＴ３０１、色空間変換部３０２、全色ＬＵＴ３０３である。
全色ＬＵＴ３０１は、色空間ＢＴ．７０９対応のパレット要素識別子（ｐａｌｌｅｔ ｅｎｔｒｙ ｉｄ）を、色空間ＢＴ．７０９の画像信号ＹＣｒＣｂ［ＢＴ．７０９］に変換するためのルックアップテーブルであり、色空間ＢＴ．７０９対応のパレットの全要素（全ｉｄ）と、色空間ＢＴ．７０９の画像信号ＹＣｒＣｂ［ＢＴ．７０９］との対応データを持つルックアップテーブル（ＬＵＴ）である。

色空間変換部３０２は、全色ＬＵＴ３０１を入力し、このルックアップテーブルの各要素識別子（ｉｄ）対応の色空間ＢＴ．７０９の画像信号ＹＣｒＣｂ［ＢＴ．７０９］の値を、メイン画像２０１の色空間（本例ではＢＴ．２０２０）に対応する信号値、すなわちＹＣｒＣｂ［ＢＴ．２０２０］に書き換える処理を実行する。
このテーブル書き換えの結果として生成した全色ＬＵＴ３０３を色変換部３０４に出力する。

全色ＬＵＴ３０３は、色空間ＢＴ．７０９対応のパレット要素識別子（ｐａｌｌｅｔ ｅｎｔｒｙ ｉｄ）を、色空間ＢＴ．２０２０の画像信号ＹＣｒＣｂ［ＢＴ．２０２０］に変換するためのルックアップテーブルである。

色変換部３０４は、この全色ＬＵＴ３０３を適用して、第１サブ画像２０２を構成する色空間ＢＴ．７０９のパレット要素識別子（ｐａｌｌｅｔ ｅｎｔｒｙ ｉｄ）２１２を、色空間ＢＴ．２０２０の画像信号ＹＣｒＣｂ［ＢＴ．２０２０］に変換する処理を行なう。
色変換部３０４は、全色ＬＵＴ３０３を適用して生成した変換データである色空間ＢＴ．２０２０の画像信号ＹＣｒＣｂ［ＢＴ．２０２０］２１６を出力する。

また、第２サブ画像２０３は、例えばＲＧＢ画像信号を持つカラー画像として構成される。
情報処理装置１０２の画像処理部は、図８に示すように、まず、第２サブ画像２０３から、ＲＧＢ画像信号２１３を取得し、色変換部２０５において、画像信号ＹＣｒＣｂ［ＢＴ．７０９］に変換する処理を行なう。
色変換部２０５は、例えば予め規定された演算を実行して、ＲＧＢ各信号値を適用して、ＹＣｒＣｂ各信号の値を算出する。
なお、ここで算出するＹＣｒＣｂ各信号の値は、色空間ＢＴ．７０９に対応するＹＣｒＣｂ信号値である。
色変換部２０５は、変換データとしての画像信号ＹＣｒＣｂ［ＢＴ．７０９］２１５を出力する。

色変換部２０５の出力した画像信号ＹＣｒＣｂ［ＢＴ．７０９］２１５は、色空間変換部２０７に入力される。
色空間変換部２０７は、色空間ＢＴ．７０９の画像信号ＹＣｒＣｂ［ＢＴ．７０９］を、異なる色空間である色空間ＢＴ．２０２０の画像信号ＹＣｒＣｂ［ＢＴ．２０２０］に変換する処理を実行する。

色空間変換部２０７は、例えば図５に示すステップＳ０１〜Ｓ０６の各処理を実行するシーケンスに従って、色空間ＢＴ．７０９の画像信号ＹＣｒＣｂ［ＢＴ．７０９］を、色空間ＢＴ．２０２０の画像信号ＹＣｒＣｂ［ＢＴ．２０２０］に変換する処理を実行する。

重畳部２０８は、３つの画像信号の重畳処理を実行して１つの出力画像を生成する。
すなわち、以下の３つの画像の重畳処理を行なう。
（ａ）メイン画像２０１を構成する画像信号ＹＣｒＣｂ［ＢＴ．２０２０］２１１、
（ｂ）色変換部３０４の出力する第１サブ画像２０２を構成する画像信号ＹＣｒＣｂ［ＢＴ．２０２０］２１６、
（ｃ）色空間変換部２０７の出力する第２サブ画像２０３を構成する画像信号ＹＣｒＣｂ［ＢＴ．２０２０］２１７、
これらの３つの画像信号を重畳する処理を行なう。なお、重畳位置は再生プログラムに従って予め決定される。

重畳部２０６に入力する３つの画像信号は、いずれも色空間ＢＴ．２０２０の画像信号であり、この結果生成される画像信号ＹＣｒＣｂ［ＢＴ．２０２０］２１８は、すべての画像領域が色空間ＢＴ．２０２０に従った色出力を行う画像となる。
この画像が表示用画像データ（ＢＤ Ｖｉｄｅｏ）２０９として、表示装置１０４に出力され、表示される。

この結果、表示装置１０４の表示画像は、全ての画像領域が、色空間ＢＴ．２０２０に従った画像領域となる。すなわち、統一された色空間に従って色出力がなされ、視聴者に違和感を発生させない高品質な画像を出力することが可能となる。

このように、本実施例では、第１サブ画像２０２の色情報として設定されているパレット要素識別子２１２から、直接、メイン画像２０１の色空間と同じ色空間の画像信号に変換することを可能としたカラールックアップテーブル（ＣＬＵＴ）を利用して第１サブ画像２０２の色変換を実行する構成としている。
図８を参照して１つの具体的処理例について説明したが、より一般化した処理例として、以下のような色空間設定の場合の処理例について図９を参照して説明する。

図９に示す例は、
メイン画像２０１が色空間Ｖの画像データ、
第１サブ画像２０２が色空間Ｇの画像データ、
第２サブ画像２０３が色空間Ｂの画像データ、
上記設定とした構成における処理例を示している。

図９に示す構成において、第１サブ画像２０２の色変換を行う色変換部３０４は、第１サブ画像２０２から、色空間Ｇに従ったパレット要素識別子（ｐａｌｌｅｔ ｅｎｔｒｙ ｉｄ）２１２を取得し、これを、メイン画像２０１の色空間Ｖに対応する画像信号ＹＣｒＣｂ（Ｖ）に変換する処理を行なう。

図９に示す例において、第１サブ画像２０２は、色空間Ｇの画像信号であり、パレット要素識別子（ｐａｌｌｅｔ ｅｎｔｒｙ ｉｄ）２１２も色空間Ｇに従って設定された色対応の識別子である。
色変換部３０４は、この色空間Ｇのパレット要素識別子２１２を入力して、異なる色空間Ｖの画像信号ＹＣｒＣｂ（Ｖ）に変換する処理を行なう。

色変換部３０４は、色空間Ｇ対応のパレット要素識別子（ｐａｌｌｅｔ ｅｎｔｒｙ ｉｄ）と、色空間Ｖの画像信号ＹＣｒＣｂ（Ｖ）との対応データを持つ色変換テーブル、すなわちカラールックアップテーブル（ＣＬＵＴ）を有する。
このルックアップテーブルを生成するための構成が、全色ＬＵＴ３０１、色空間変換部３０２、全色ＬＵＴ３０３である。
全色ＬＵＴ３０１は、色空間Ｇ対応のパレット要素識別子（ｐａｌｌｅｔ ｅｎｔｒｙ ｉｄ）を、色空間Ｇの画像信号ＹＣｒＣｂ（Ｇ）に変換するためのルックアップテーブルであり、色空間Ｇ対応のパレットの全要素（全ｉｄ）と、色空間Ｇの画像信号ＹＣｒＣｂ（Ｇ）との対応データを持つルックアップテーブル（ＬＵＴ）である。

色空間変換部３０２は、全色ＬＵＴ３０１を入力し、このルックアップテーブルの各要素識別子（ｉｄ）対応の色空間Ｇの画像信号ＹＣｒＣｂ（Ｇ）の値を、メイン画像２０１の色空間Ｖに対応する信号値、すなわちＹＣｒＣｂ（Ｖ）に書き換える処理を実行する。
このテーブル書き換えの結果として生成した全色ＬＵＴ３０３を色変換部３０４に出力する。
全色ＬＵＴ３０３は、色空間Ｇ対応のパレット要素識別子（ｐａｌｌｅｔ ｅｎｔｒｙ ｉｄ）を、色空間Ｖの画像信号ＹＣｒＣｂ（Ｖ）に変換するためのルックアップテーブルである。

色変換部３０４は、この全色ＬＵＴ３０３を適用して、第１サブ画像２０２を構成する色空間Ｇのパレット要素識別子（ｐａｌｌｅｔ ｅｎｔｒｙ ｉｄ）２１２を、色空間Ｖの画像信号ＹＣｒＣｂ（Ｖ）に変換する。
色変換部３０４は、全色ＬＵＴ３０３を適用して生成した変換データである色空間Ｖの画像信号ＹＣｒＣｂ（Ｖ）２１６を出力する。

また、第２サブ画像２０３は、色空間Ｂ対応のＲＧＢ画像信号を持つカラー画像として構成される。
情報処理装置１０２の画像処理部は、図９に示すように、まず、第２サブ画像２０３から、ＲＧＢ画像信号２１３を取得し、色変換部２０５において、画像信号ＹＣｒＣｂ（Ｂ）に変換する処理を行なう。
色変換部２０５は、変換データとしての画像信号ＹＣｒＣｂ（Ｂ）２１５を出力する。

色変換部２０５の出力した画像信号ＹＣｒＣｂ（Ｂ）２１５は、色空間変換部２０７に入力される。
色空間変換部２０７は、色空間Ｂの画像信号ＹＣｒＣｂ（Ｂ）を、メイン画像２０１の色空間Ｖに一致する色空間Ｖの画像信号ＹＣｒＣｂ（Ｖ）に変換する処理を実行する。
色空間変換部２０７は、例えば図５に示すステップＳ０１〜Ｓ０６の各処理を実行するシーケンスに従って、色空間Ｂの画像信号ＹＣｒＣｂ（Ｂ）を、メイン画像２０１の色空間に一致する色空間Ｖの画像信号ＹＣｒＣｂ（Ｖ）に変換する処理を実行する。

重畳部２０８は、３つの画像信号の重畳処理を実行して１つの出力画像を生成する。
すなわち、以下の３つの画像の重畳処理を行なう。
（ａ）メイン画像２０１を構成する画像信号ＹＣｒＣｂ（Ｖ）２１１、
（ｂ）色変換部３０４の出力する第１サブ画像２０２を構成する画像信号ＹＣｒＣｂ（Ｖ）２１６、
（ｃ）色空間変換部２０７の出力する第２サブ画像２０３を構成する画像信号ＹＣｒＣｂ（Ｖ）２１７、
これらの３つの画像信号を重畳する処理を行なう。なお、重畳位置は再生プログラムに従って予め決定される。

重畳部２０６に入力する３つの画像信号は、いずれも元々のメイン画像２０１の色空間Ｖと同じ色空間Ｖの画像信号であり、この結果生成される画像信号ＹＣｒＣｂ（Ｖ）２１８は、すべての画像領域が色空間ＢＴ．２０２０に従った色出力を行う画像となる。
この画像が表示用画像データ（ＢＤ Ｖｉｄｅｏ）２０９として、表示装置１０４に出力され、表示される。

この結果、表示装置１０４の表示画像は、全ての画像領域が、色空間Ｖに従った色出力を行う画像領域となり、統一された色空間に従って色出力がなされる。これにより、視聴者に違和感を発生させない色の統一感を感じさせる画像の出力が可能となる。

このように、本実施例では、第１サブ画像２０２の色情報として設定されているパレット要素識別子２１２を直接、メイン画像２０１の色空間と同じ色空間の画像信号に変換するカラールックアップテーブル（ＣＬＵＴ）を用いて色変換を実行する構成としている。

［４．情報記録媒体の格納データとデータ再生処理例について］
次に、再生対象データを格納した情報記録媒体、すなわち図１に示す情報記録媒体１０１の格納データの構成例と再生処理例について説明する。

図１０は、情報記録媒体１０１の一例であるＲＯＭ型のＢＤ（Ｂｌｕ−ｒａｙ（登録商標） Ｄｉｓｃ）に記録されたＢＤＭＶフォーマットに従った記録データのディレクトリを示す図である。

ディレクトリは図１０に示すように管理情報設定部４０１（ＡＡＣＳディレクトリ）と、データ部４０２（ＢＤＭＶディレクトリ）に分離されている。
管理情報設定部４０１（ＡＡＣＳディレクトリ）には、データの暗号化鍵であるＣＰＳユニットキーファイルや利用制御情報ファイルなどが格納される。

一方、データ部４０２のＢＤＭＶディレクトリ以下には、
インデックスファイル、
プレイリストファイル、
クリップ情報ファイル、
クリップＡＶストリームファイル、
ＢＤＪＯファイル、
例えば、これらのファイルが記録される。

インデックスファイルには、再生処理に適用するインデックス情報としてのタイトル情報が格納される。
プレイリストファイルは、タイトルによって指定されの再生プログラムのプログラム情報に従ったコンテンツの再生順等を規定したファイルであり、再生位置情報を持クリップ情報に対する指定情報を有する。
クリップ情報ファイルは、プレイリストファイルによつて指定されるファイルであり、クリップＡＶストリームファイルの再生位置情報等を有する。
クリップＡＶストリームファイルは、再生対象となるＡＶストリームデータを格納したファイルである。
ＢＤＪＯファイルは、ＪＡＶＡ（登録商標）プログラム、コマンド等を格納したファイルの実行制御情報を格納したファイルである。
前述したＢＤ−Ｊグラフッィクスは、ＢＤＪＯファイル中の再生プログラムと再生データを利用して再生処理が行われる。

情報処理装置が情報記録媒体に記録されたコンテンツを再生するシーケンスは以下の通りである。
（ａ）まず、再生アプリケーションによってインデックスファイルから特定のタイトルを指定する。
（ｂ）指定されたタイトルに関連付けられた再生プログラムが選択される。
（ｃ）選択された再生プログラムのプログラム情報に従ってコンテンツの再生順等を規定したプレイリストが選択される。
（ｄ）選択されたプレイリストに規定されたクリップ情報によって、コンテンツ実データとしてのＡＶストリームあるいはコマンドが読み出されて、ＡＶストリームの再生や、コマンドの実行処理が行われる。

図１１は、情報記録媒体１０１に記録される以下のデータ、すなわち、
プレイリストファイル、
クリップ情報ファイル、
クリップＡＶストリームファイル、
これらのデータの対応関係を説明する図である。

実際の再生対象データである画像と音声データからなるＡＶストリームはクリップＡＶストリーム（Ｃｌｉｐ ＡＶ Ｓｔｒｅａｍ）ファイルとして記録され、さらに、これらのＡＶストリームの管理情報、再生制御情報ファイルとして、プレイリスト（ＰｌａｙＬｉｓｔ）ファイルと、クリップ情報（Ｃｌｉｐ Ｉｎｆｏｒｍａｔｉｏｎ）ファイルが規定される。

これら複数のカテゴリのファイルは、図１１に示すように、
プレイリスト（ＰｌａｙＬｉｓｔ）ファイルを含むプレイリストレイヤ、
クリップＡＶストリーム（Ｃｌｉｐ ＡＶ Ｓｔｒｅａｍ）ファイルと、クリップ情報（Ｃｌｉｐ Ｉｎｆｏｒｍａｔｉｏｎ）ファイルからなるクリップレイヤ、
これらの２つのレイヤに区分できる。

なお、一つのクリップＡＶストリーム（Ｃｌｉｐ ＡＶ Ｓｔｒｅａｍ）ファイルには一つのクリップ情報（Ｃｌｉｐ Ｉｎｆｏｒｍａｔｉｏｎ）ファイルが対応付けられ、これらのペアを一つのオブジェクトと考え、これらをまとめてクリップ（Ｃｌｉｐ）と呼ぶ場合もある。
クリップＡＶストリームファイルに含まれるデータの再生に適用する制御情報は、プレイリストファイルやクリップ情報ファイルに記録される。

クリップＡＶストリーム（Ｃｌｉｐ ＡＶ Ｓｔｒｅａｍ）ファイルは、例えばＭＰＥＧ２ＴＳ（トランスポートストリーム）をＢＤＭＶフォーマットの規定構造に従って配置したデータを格納している。
また、クリップ情報（Ｃｌｉｐ Ｉｎｆｏｒｍａｔｉｏｎ）ファイルには、例えば、クリップＡＶストリームファイルのバイト列データのデータ位置と、時間軸上に展開した場合の再生開始ポイントである（エントリポイント：ＥＰ）等の再生時間位置等の対応データ等、クリップＡＶストリームファイルの格納データの再生開始位置などを取得するための管理情報を格納している。

例えば、コンテンツの開始点からの再生時間経過位置を示すタイムスタンプが与えられた時、クリップ情報ファイルを参照して、クリップＡＶストリームファイルのデータ読み出し位置、すなわち再生開始点としてのアドレスを取得することが可能となる。

プレイリスト（ＰｌａｙＬｉｓｔ）ファイルは、クリップ（＝クリップ情報ファイル＋クリップＡＶストリームファイル）レイヤに含まれる再生可能データに対する再生区間の指定情報を有する。
プレイリスト（ＰｌａｙＬｉｓｔ）ファイルには、１つ以上のプレイアイテム（ＰｌａｙＩｔｅｍ）が設定され、プレイアイテムの各々が、クリップ（＝クリップ情報ファイル＋クリップＡＶストリームファイル）レイヤに含まれる再生可能データに対する再生区間の指定情報を有する。

［５．複数のデータファイルを利用した重畳画像データの再生例について］
次に、複数のデータファイルを利用した重畳画像データの再生例について、図１２を参照して説明する。

図１２に示すデータ再生例は、映画等のメイン画像を格納したクリップＡＶストリームファイルと、ＢＤ−Ｊグラフィックスを併せて適用した再生処理シーケンスの一例である。
図１２の最下段に示す時間軸（ｔ）の左から右に時間が経過し、再生処理が進行する。

図１２には、１つのプレイリストによって選択される３つのクリップを利用した再生処理例を示している。
なお、ここで、「クリップ」は、クリップＡＶストリームファイルとクリップ情報ファイルを含むものとして説明する。

クリップＡ１は、色空間ＢＴ．２０２０の画像データを格納したクリップである。
クリップＡ２は、色空間ＢＴ．７０９の画像データを格納したクリップである。
クリップＡ３は、色空間ＢＴ．２０２０の画像データを格納したクリップである。
これら３つのクリップを順次適用して再生処理が行われるものとする。

これらメイン画像を格納した３つのクリップを適用した映画等の再生処理に併せて、サブ画像であるＢＤ−Ｊグラフィックスデータの重畳処理が実行されるものとする。
ここで、ＢＤ−Ｊ画像は、色空間ＢＴ．７０９の画像データであるとする。
データ再生処理を実行する情報処理装置１０２の画像処理部は、上述した実施例に従ってＢＤ−Ｊ画像の色空間の変換処理を行なう。すなわち、メイン画像の色空間に一致させるようにたＢＤ−Ｊ画像の色空間変換処理を実行する。

ＢＤ−Ｊ画像データは、色空間ＢＴ．７０９のＲＧＢデータであるとする。
図１２に示す例では、時間ｔ１〜ｔ２は、色空間ＢＴ．２０２０の画像データを格納したクリップＡ１の再生が実行される。
従って、この時間ｔ１〜ｔ２の期間において、画像処理部は、図１２のステップＳ１１に示す処理、すなわち、ＢＤ−Ｊ画像データであるＢＴ．７０９のＲＧＢデータをＢＴ．２０２０のＹＣｂＣｒ信号に変換してＢＴ．２０２０のメイン画像、すなわちクリップ格納画像に重畳して出力する処理を実行する。

次の時間ｔ２〜ｔ３は、色空間ＢＴ．７０９の画像データを格納したクリップＡ２の再生が実行される。
従って、この時間ｔ２〜ｔ３の期間において、画像処理部は、図１２のステップＳ１２に示す処理、すなわち、ＢＤ−Ｊ画像データであるＢＴ．７０９のＲＧＢデータの色空間変換を行うことなく、ＢＴ．７０９のＹＣｒＣｂ信号としてＢＴ．７０９のメイン画像に重畳して出力する。

次の時間ｔ３〜ｔ４は、色空間ＢＴ．２０２０の画像データを格納したクリップＡ３の再生が実行される。
従って、この時間ｔ３〜ｔ４の期間において、画像処理部は、図１２のステップＳ１３に示す処理、すなわち、ＢＤ−Ｊ画像データであるＢＴ．７０９のＲＧＢデータをＢＴ．２０２０のＹＣｂＣｒ信号に変換してＢＴ．２０２０のメイン画像、すなわちクリップ格納画像に重畳して出力する処理を実行する。

このように、サブ画像の色空間を、メイン画像の色空間に一致させた重畳画像を生成して出力することで統一感のある画像を提供することが可能となる。

［６．色空間情報の格納領域について］
上述したように、本開示の情報処理装置１０２の画像処理部は、複数の異なるデータファイルに格納されたメイン画像、サブ画像を重畳した画像を生成して出力する際に、サブ画像の色空間をメイン画像の色空間に一致させる処理を実行する。

この色空間変換処理行うためには、メイン画像の色空間情報と、サブ画像の色空間情報を取得することが必要である。
すなわち、メイン画像や、サブ画像は、各画像の属性情報であるメタデータとして各画像データの色空間情報を保持する。
情報処理装置１０２の画像処理部は、各画像のメタデータを取得して、取得情報に従って各画像の色空間を判定し、判定結果に従って色空間変換処理を行なう。

図１３は、色空間情報の格納構成の一例を説明する図である。
図１３には、クリップ情報ファイルのデータ構成例を示している。
クリップ情報ファイルは、再生対象データ、すなわちクリップＡＶストリームファイルに格納した再生データに関する再生制御情報や属性情報を格納したファイルとして設定される。
このクリップ情報ファイルにクリップＡＶストリームファイルに格納したメイン画像やサブ画像の色空間情報を格納することが可能である。

具体的には、図１３に示すように、クリップ情報ファイル中に設定される以下の各リザーブフィールド（ｒｅｓｅｒｖｅｄ＿ｆｏ＿ｆｕｔｕｒｅ＿ｕｓｅ）に各画像の色空間情報を格納する。
（ａ）メイン画像については、メイン画像の属性情報記録フィールドに設定されたリザーブフィールド（ｒｅｓｅｒｖｅｄ＿ｆｏ＿ｆｕｔｕｒｅ＿ｕｓｅ）にメイン画像の色空間情報を格納する。
（ｂ）サブ画像であるプレゼンテーショングラフィックス（ＰＧ）、インタラクティブグラフィックス（ＩＧ）、テキストサブタイトル（ＴＳＴ）については、ＰＧ，ＩＧ，ＴＳＴ各々の属性情報記録フィールドに設定されたリザーブフィールド（ｒｅｓｅｒｖｅｄ＿ｆｏ＿ｆｕｔｕｒｅ＿ｕｓｅ）にこれら各サブ画像の色空間情報を格納する。
なお、もう１つのサブ画像であるＢＤ−ＪグラフィックスについてはＢＤＪＯファイル中に色空間情報を記録する。

なお、図１３に示す例は、クリップ情報ファイルに設定されるストリームコーディング情報（ＳｔｒｅａｍＣｏｄｉｎｇＩｎｆｏ）に設定されるリサーブフィールドに各画像の色空間情報を記録する例である。しかし、色空間情報の記録先は、図１３に示す構成に限らず、その他のフィールドに記録する構成としてもよい。

図１３に示すストリームコーディング情報（ＳｔｒｅａｍＣｏｄｉｎｇＩｎｆｏ）以外の、他の色空間情報の記録先候補としては、例えば、以下の候補がある。
クリップ情報ファイル中のターミナル情報（ＴｅｒｍｉｎａｌＩｎｆｏ）中に設定されるリサーブフィールド（ｒｅｓｅｒｖｅｄ＿ｆｏ＿ｆｕｔｕｒｅ＿ｕｓｅ）、
あるいは、クラスデバイス構成情報（Ｃｌａｓｓ Ｄｅｖｉｃｅ Ｃｏｎｆｉｇｕｌａｔｉｏｎ）中に記録する等の設定が可能である。
なお、これらの様々な記録先に対する具体的な色空間情報の記録例としては、
画像がＢＴ．７０９画像であるかＢＴ．２０２０画像であるかに応じて異なるフラグや定数を記録する設定とすることなどが可能である。この場合、再生処理を実行する情報処理装置が実行する再生プログラムが、これらのフィールドの記録データを取得して取得データに基づいて色空間判定処理を実行する。

情報処理装置１０２の画像処理部は、各画像を読み出して、重畳画像を生成する際に、各画像の属性情報を読み出して、メイン画像の色空間とサブ画像の色空間が一致していない場合は、サブ画像の色空間をメイン画像の色空間に一致させる色空間変換を実行する。その後、画像の重畳処理を実行して、１つの色空間に従った画像信号によって構成される画像を生成して出力する。

この他、例えば画像データがＨＥＶＣ（Ｈｉｇｈ Ｅｆｆｉｃｉｅｎｃｙ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）データである場合、上述した色空間情報は、ＨＥＶＣビデオストリーム中のメタデータ記録領域（例えばＳＥＩ（ｓｕｐｐｌｅｍｅｎｔａｌ ｅｎｈａｎｃｅｍｅｎｔ ｉｎｆｏｒｍａｔｉｏｎ）フィールド）に記録することが可能である。

なお、この場合、色空間情報、例えばＢＴ．７０９、ＢＴ．２０２０等の情報を直接記録する設定に限らず、色情報を決定するためのパラメータを記録する設定としてもよい。具体的には、例えば以下の色情報パラメータである。
ＶＵＩ／Ｃｏｌｏｒ ｄｅｓｃｒｉｐｔｉｏｎ
（ａ） ｃｏｌｏｒ＿ｐｒｉｍａｒｉｅｓ
（ｂ） ｔｒａｎｓｆｅｒ＿ｃｈａｒａｃｔｅｒｓｔｉｃｓ
（ｃ） ｍａｔｒｉｘ＿ｃｏｅｆｆｓ

例えば、色空間ＢＴ．７０９の画像データである場合は、上記パラメータの設定値を以下のように記録する。
（ａ）ｃｏｌｏｒ＿ｐｒｉｍａｒｉｅｓ＝１
ｇｒｅｅｎ：ｘ＝０．３００，ｙ＝０．６００
ｂｌｕｅ：ｘ＝０．１５０，ｙ＝０．０６０
ｒｅｄ：ｘ＝０．６４０，ｙ＝０．３３０
ｗｈｉｔｅＤ６５：ｘ＝０．３１２７，ｙ＝０．３２９０
（ｂ）ｔｒａｎｓｆｅｒ＿ｃｈａｒａｃｔｅｒｓｔｉｃｓ＝１
Ｖ＝１．０９９×Ｌｃ^０．４５−０．０９９ ｆｏｒ １≧Ｌｃ≧０．０１８
Ｖ＝４．５００×Ｌｃ ｆｏｒ ０．０１８＞Ｌｃ≧０
（ｃ）ｍａｔｒｉｘ＿ｃｏｅｆｆｓ＝１
Ｋ_Ｒ＝０．２１２６， Ｋ_Ｂ＝０．０７２２
例えば上記設定のパラメータをＨＥＶＣストリームの属性データ（メタデータ）として記録しておく。
再生処理を実行する情報処理装置の画像処理部は、これらのパラメータに基づいて、このＨＥＶＣストリーム画像が色空間ＢＴ．７０９の画像データであると判定する。

［７．再生処理対象となる画像について］
上述した実施例では、再生処理対象となる画像は、ＢＤ等の情報記録媒体に格納されたデータとして説明したが、この他、ハードディスク、あるいは外部装置、さらに、ネットワークや放送通信網等を介して外部サーバや放送局から受信するデータを再生する場合にも、本開示の処理が適用可能である。なお、画像データを外部から入力する場合には、その画像の色空間情報についても外部から入力する属性情報から取得することになる。

また、Ｗｅｂページ等を表示するために利用されるマークアップ言語であるＨＴＭＬやＸＭＬに従って表示される画像に対しても本開示の処理を適用可能である。
例えばＨＴＭＬ５は基本的にｓＲＧＢの色空間を利用している。ｓＲＧＢ色空間はほぼＢＴ．７０９の色空間に等しい色空間である。ただし、実際の表示に使われる色空間はＨＴＭＬ５ブラウザの環境依存となる。ＨＴＭＬ５のビデオ（ＶＩＤＥＯ）タグを使いビデオ再生を行なうと、ビデオストリームのＶＵＩ／ＣＯＬＯＲ ＰＲＩＭＡＲＹを参照し適切な色空間変換を行う設定となっている。具体的には、ＨＴＭＬ５ブラウザの表示用の色空間に変換される設定である。
従って、例えばＨＴＭＬ５自体に色空間の属性情報を追加することで、上述した本開始の処理を適用することができる。

［８．情報処理装置の実行する処理シーケンスについて］
次に、図１４に示すフローチャートを参照して情報処理装置の実行する処理のシーケンスについて説明する。

図１４に示すフローに従った処理は、情報処理装置１０２の画像処理部において実行される。情報処理装置の記憶部には、図１４に示すフローに従った処理を実行させるプログラムを格納しており、例えば画像処理部のプログラム実行機能を持つＣＰＵがこのプログラムを実行して、図１４に示すフローに従った処理を実行する。
以下、各ステップの処理について説明する。

（ステップＳ１０１）
まず、画像処理部は、ステップＳ１０１において、重畳処理および再生対象となる複数の画像の属性情報（メタデータ）を取得し、各画像の色空間情報を取得する。

（ステップＳ１０２）
次に、ステップＳ１０２において、メイン画像の色空間と異なる色空間を持つサブ画像が存在するか否かを判定する。
メイン画像の色空間と異なる色空間を持つサブ画像が存在すると判定した場合はステップＳ１０３に進む。
一方、メイン画像の色空間と異なる色空間を持つサブ画像が存在しないと判定した場合は、ステップＳ１０４に進む。

（ステップＳ１０３）
ステップＳ１０２において、メイン画像の色空間と異なる色空間を持つサブ画像が存在すると判定した場合、ステップＳ１０３において、メイン画像の色空間と異なる色空間を持つサブ画像の色空間をメイン画像の色空間に一致させる処理を行う。すなわち、サブ画像に対する色空間変換処理を実行する。

（ステップＳ１０４）
ステップＳ１０２において、メイン画像の色空間と異なる色空間を持つサブ画像が存在しないと判定した場合、あるいは、ステップＳ１０２において、メイン画像の色空間と異なる色空間を持つサブ画像が存在すると判定し、ステップＳ１０３において、サブ画像の色空間変換処理が終了するとステップＳ１０４に進む。
ステップＳ１０４では、すべて同じ色空間に設定されたメイン画像とサブ画像の重畳処理を実行して出力画像を生成する。

（ステップＳ１０５）
最後に、ステップＳ１０５において、複数画像の重畳処理により生成した出力画像を表示部に出力する。

［９．情報処理装置の構成例について］
最後に、本開示の処理を実行する情報処理装置の構成例について、図１５を参照して説明する。
図１５に示す情報処理装置５００は、図１に示す情報処理装置１０２に相当する。
例えば情報記録媒体からのデータ再生を実行し、再生画像を表示装置に出力する。
情報処理装置５００は、例えば、再生コンテンツを記録した情報記録媒体であるメディア５１０を装着可能な構成を持つ。
メディアインタフェース５０３は、メディア５１０を利用したデータ再生処理に適用するインタフェースである。画像処理等を実行するデータ処理部５０１の要求に従って、メディア５１０を利用したデータ読み取り処理などを行う。

メディア５１０は、例えばＢｌｕ−ｒａｙ（登録商標） ＤｉｓｃやＤＶＤ、ハードディスク、フラッシュメモリなど、各種のメデイア（情報記録媒体）によって構成される。

情報処理装置５００は、さらに、図１５に示すように、データ処理部（画像処理部）５０１、記憶部５０２、入力部５０４、出力部５０５、表示装置ＩＦ５０６、通信部５０７を有する。

データ処理部５０１は、プログラム実行機能を持つＣＰＵ等を有し、例えばデータ記録再生処理を実行する。さらに通信部５０７を介したデータ通信制御などを行う。具体的にはサーバ等の外部装置からデータを受信する場合の通信制御など、装置の実行する処理全般の制御を行う。
記憶部５０２は、ＲＡＭ，ＲＯＭ等によって構成され、データ処理部５０１において実行するプログラムや、各種パラメータ、受信データの格納領域などに利用される。

通信部５０７は、例えば、外部装置、サーバ、放送局等との通信処理に利用される。入力部５０４は、例えばユーザの操作部であり、データ記録または再生指示、コピー指示の入力など、様々な入力が行われる。なお、入力部５０４にはリモコン５０８も含まれ、リモコン操作情報の入力も可能である。出力部５０５は、ユーザに提示するメッセージの表示、警告音の出力等を行う表示部、スピーカ等によって構成される。
表示装置ＩＦ５０６は、テレビ等の表示装置５２０に対して再生画像、例えば複数の画像データを重畳して生成した画像等を出力する。

［１０．本開示の構成のまとめ］
以上、特定の実施例を参照しながら、本開示の実施例について詳解してきた。しかしながら、本開示の要旨を逸脱しない範囲で当業者が実施例の修正や代用を成し得ることは自明である。すなわち、例示という形態で本発明を開示してきたのであり、限定的に解釈されるべきではない。本開示の要旨を判断するためには、特許請求の範囲の欄を参酌すべきである。

なお、本明細書において開示した技術は、以下のような構成をとることができる。
（１） 複数の画像データを重畳して表示画像を生成する画像処理部を有し、
前記画像処理部は、
メイン画像の色空間情報と、
前記メイン画像に重畳するサブ画像の色空間情報を取得し、
サブ画像の色空間がメイン画像の色空間と異なる場合に、サブ画像の色空間をメイン画像の色空間に一致させる色空間変換処理を実行して、メイン画像と同じ色空間を持つ重畳用画像信号を生成し、生成した重畳用画像信号をメイン画像に重畳して出力画像信号を生成する情報処理装置。

（２）前記画像処理部は、所定の色空間対応のパレットのパレット要素識別子を色情報として有するサブ画像をメイン画像に重畳する処理を実行する構成であり、前記サブ画像のパレット要素識別子を、前記パレットと同じ色空間対応の画像信号に変換する色変換部と、前記色変換部の生成した画像信号を、前記メイン画像の色空間と同じ色空間を持つ重畳用画像信号に変換する色空間変換部を有する前記（１）に記載の情報処理装置。

（３）前記画像処理部は、所定の色空間対応のＲＧＢ信号を色情報として有するサブ画像をメイン画像に重畳する処理を実行する構成であり、前記サブ画像のＲＧＢ信号を、前記ＲＧＢ信号と同じ色空間対応の画像信号に変換する色変換部と、前記色変換部の生成した画像信号を、前記メイン画像の色空間と同じ色空間を持つ重畳用画像信号に変換する色空間変換部を有する前記（１）または（２）に記載の情報処理装置。

（４）前記画像処理部は、所定の色空間対応のパレットのパレット要素識別子を色情報として有するサブ画像をメイン画像に重畳する処理を実行する構成であり、前記サブ画像のパレット要素識別子を、前記メイン画像の色空間と同じ色空間を持つ重畳用画像信号に直接、変換する色変換部を有する前記（１）〜（３）いずれかに記載の情報処理装置。

（５）前記画像処理部は、前記サブ画像の色空間対応のパレットのパレット要素識別子と、前記サブ画像の色空間と異なるメイン画像の色空間の画像信号とを対応付けたルックアップテーブルを生成する色空間変換部を有し、前記色変換部は、前記色空間変換部の生成したルックアップテーブルを用いて、前記サブ画像のパレット要素識別子を、前記メイン画像の色空間と同じ色空間を持つ重畳用画像信号に直接、変換する前記（４）に記載の情報処理装置。

（６）前記メイン画像の色空間はＢＴ．２０２０、またはＢＴ．７０９であり、前記画像処理部は、前記サブ画像が、メイン画像の色空間と異なる場合に、サブ画像の色空間をメイン画像の色空間であるＢＴ．２０２０、またはＢＴ．７０９に一致させる色空間変換処理を実行する前記（１）〜（５）いずれかに記載の情報処理装置。

（７）前記画像処理部は、前記メイン画像、および前記サブ画像の色空間情報を各画像に対応する属性情報から取得する前記（１）〜（６）いずれかに記載の情報処理装置。

（８）前記メイン画像、およびサブ画像は、情報記録媒体に記録された画像データであり、前記画像処理部は、各画像の色空間情報を情報記録媒体に記録された属性情報記録ファイルから取得する前記（１）〜（７）いずれかに記載の情報処理装置。

（９）前記メイン画像、サブ画像はクリップＡＶストリームファイルに格納されており、前記画像処理部は、各画像の色空間情報を情報記録媒体に記録されたクリップ情報ファイルから取得する前記（８）に記載の情報処理装置。

（１０）前記メイン画像、およびサブ画像の少なくともいずれかの画像は、外部から通信部を介して入力するデータであり、前記画像処理部は、外部から入力する画像の色空間情報を、外部から入力する属性情報から取得する前記（１）〜（７）いずれかに記載の情報処理装置。

（１１）メイン画像データと、
前記メイン画像の色空間情報と、
前記メイン画像に重畳するサブ画像データと、
前記サブ画像の色空間情報を格納した情報記録媒体であり、
前記メイン画像とサブ画像を重畳して表示画像を生成する再生装置に、
各画像の色空間情報を取得させて、各画像の色空間を一致させる色空間変換処理を行なわせることを可能とした情報記録媒体。

（１２） 情報処理装置において実行する画像処理方法であり、
画像処理部が、
メイン画像の色空間情報と、前記メイン画像に重畳するサブ画像の色空間情報を取得する処理と、
サブ画像の色空間がメイン画像の色空間と異なる場合に、サブ画像の色空間をメイン画像の色空間に一致させる色空間変換処理を実行して、メイン画像と同じ色空間を持つ重畳用画像信号を生成する処理と、
前記重畳用画像信号をメイン画像に重畳して出力画像信号を生成する処理を実行する画像処理方法。

（１３） 情報処理装置において画像処理を実行させるプログラムであり、
前記プログラムは、画像処理部に、
メイン画像の色空間情報と、前記メイン画像に重畳するサブ画像の色空間情報を取得する処理と、
サブ画像の色空間がメイン画像の色空間と異なる場合に、サブ画像の色空間をメイン画像の色空間に一致させる色空間変換処理を実行して、メイン画像と同じ色空間を持つ重畳用画像信号を生成する処理と、
前記重畳用画像信号をメイン画像に重畳して出力画像信号を生成する処理を実行させるプログラム。

また、明細書中において説明した一連の処理はハードウェア、またはソフトウェア、あるいは両者の複合構成によって実行することが可能である。ソフトウェアによる処理を実行する場合は、処理シーケンスを記録したプログラムを、専用のハードウェアに組み込まれたコンピュータ内のメモリにインストールして実行させるか、あるいは、各種処理が実行可能な汎用コンピュータにプログラムをインストールして実行させることが可能である。例えば、プログラムは記録媒体に予め記録しておくことができる。記録媒体からコンピュータにインストールする他、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、インターネットといったネットワークを介してプログラムを受信し、内蔵するハードディスク等の記録媒体にインストールすることができる。

なお、明細書に記載された各種の処理は、記載に従って時系列に実行されるのみならず、処理を実行する装置の処理能力あるいは必要に応じて並列的にあるいは個別に実行されてもよい。また、本明細書においてシステムとは、複数の装置の論理的集合構成であり、各構成の装置が同一筐体内にあるものには限らない。

以上、説明したように、本開示の一実施例の構成によれば、異なる色空間の画像データを重畳表示した場合の違和感を解消し、統一された色空間の重畳画像の表示が実現される。
具体的には、画像処理部がメイン画像の色空間情報と、メイン画像に重畳するサブ画像の色空間情報を取得する。さらに、サブ画像の色空間がメイン画像の色空間と異なる場合に、サブ画像の色空間をメイン画像の色空間に一致させる色空間変換処理を実行して、メイン画像と同じ色空間を持つ重畳用画像信号を生成する。その後、生成した重畳用画像信号をメイン画像に重畳して出力する。画像処理部は、例えば、パレット要素識別子やＲＧＢ信号からなる画像信号に対して、ルックアップテーブルを利用した色空間変換を実行する。
本構成により、異なる色空間の画像データを重畳表示した場合の違和感が解消され、統一された色空間の重畳画像表示を実現することができる。

１０１ 情報記録媒体
１０２ 情報処理装置
１０３ 操作部（リモコン）
１０４ 入力表示装置
１０５ 接続ケーブル
１５１ メイン画像
１５２ 第１サブ画像
１５３ 第２サブ画像
１５４ 色変換部
１５５ 色変換部
１５６ 重畳部
１５７ 表示用画像データ
２０１ メイン画像
２０２ 第１サブ画像
２０３ 第２サブ画像
２０４ 色変換部
２０５ 色変換部
２０６ 色空間変換部
２０７ 色空間変換部
２０８ 重畳部
２０９ 表示用画像データ
３０１ 全色ＬＵＴ
３０２ 色空間変換部
３０３ 全色ＬＵＴ
３０４ 色変換部
５００ 情報処理装置
５０１ データ処理部
５０２ 記憶部
５０３ メディアインタフェース
５０４ 入力部
５０５ 出力部
５０６ 表示装置ＩＦ
５０７ 通信部
５０８ リモコン

Claims (10)

1. 複数の画像データを重畳して表示画像を生成する画像処理部を有し、
   前記画像処理部は、
   クリップＡＶストリームファイルに格納されたメイン画像の色空間情報を、前記クリップＡＶストリームファイルに対応する属性情報記録ファイルであるクリップ情報ファイルから取得し、
   メイン画像に重畳するサブ画像の色空間情報を、前記クリップ情報ファイル、または、別ファイルから取得し、
   メイン画像とサブ画像の色空間が異なるか否かを判定し、
   サブ画像の色空間がメイン画像の色空間と異なる場合に、サブ画像の色空間をメイン画像の色空間に一致させる色空間変換処理を実行して、メイン画像と同じ色空間を持つ重畳用画像信号を生成し、生成した重畳用画像信号をメイン画像に重畳して出力画像信号を生成し、
   前記画像処理部は、さらに、
   メイン画像再生に利用するクリップＡＶストリームファイルが複数ある場合、
   メイン画像を格納したクリップＡＶストリームファイル単位で、サブ画像との色空間比較処理を実行し、色空間が異なる場合にのみサブ画像の色空間変換を実行するクリップＡＶストリームファイル単位のサブ画像色空間変換制御を行う情報処理装置。
2. 前記画像処理部は、
   所定の色空間対応のパレットのパレット要素識別子を色情報として有するサブ画像をメイン画像に重畳する処理を実行する構成であり、
   前記サブ画像のパレット要素識別子を、前記パレットと同じ色空間対応の画像信号に変換する色変換部と、
   前記色変換部の生成した画像信号を、前記メイン画像の色空間と同じ色空間を持つ重畳用画像信号に変換する色空間変換部を有する請求項１に記載の情報処理装置。
3. 前記画像処理部は、
   所定の色空間対応のＲＧＢ信号を色情報として有するサブ画像をメイン画像に重畳する処理を実行する構成であり、
   前記サブ画像のＲＧＢ信号を、前記ＲＧＢ信号と同じ色空間対応の画像信号に変換する色変換部と、
   前記色変換部の生成した画像信号を、前記メイン画像の色空間と同じ色空間を持つ重畳用画像信号に変換する色空間変換部を有する請求項１に記載の情報処理装置。
4. 前記画像処理部は、
   所定の色空間対応のパレットのパレット要素識別子を色情報として有するサブ画像をメイン画像に重畳する処理を実行する構成であり、
   前記サブ画像のパレット要素識別子を、前記メイン画像の色空間と同じ色空間を持つ重畳用画像信号に直接、変換する色変換部を有する請求項１に記載の情報処理装置。
5. 前記画像処理部は、
   前記サブ画像の色空間対応のパレットのパレット要素識別子と、前記サブ画像の色空間と異なるメイン画像の色空間の画像信号とを対応付けたルックアップテーブルを生成する色空間変換部を有し、
   前記色変換部は、
   前記色空間変換部の生成したルックアップテーブルを用いて、前記サブ画像のパレット要素識別子を、前記メイン画像の色空間と同じ色空間を持つ重畳用画像信号に直接、変換する請求項４に記載の情報処理装置。
6. 前記メイン画像の色空間はＢＴ．２０２０、またはＢＴ．７０９であり、
   前記画像処理部は、
   前記サブ画像が、メイン画像の色空間と異なる場合に、サブ画像の色空間をメイン画像の色空間であるＢＴ．２０２０、またはＢＴ．７０９に一致させる色空間変換処理を実行する請求項１に記載の情報処理装置。
7. 前記メイン画像、およびサブ画像は、情報記録媒体に記録された画像データである請求項１に記載の情報処理装置。
8. 前記メイン画像、およびサブ画像の少なくともいずれかの画像は、外部から通信部を介して入力するデータであり、
   前記画像処理部は、
   外部から入力する画像の色空間情報を、外部から入力する属性情報から取得する請求項１に記載の情報処理装置。
9. 情報処理装置において実行する画像処理方法であり、
   画像処理部が、
   クリップＡＶストリームファイルに格納されたメイン画像の色空間情報を、前記クリップＡＶストリームファイルに対応する属性情報記録ファイルであるクリップ情報ファイルから取得し、
   メイン画像に重畳するサブ画像の色空間情報を、前記クリップ情報ファイル、または、別ファイルから取得し、
   メイン画像とサブ画像の色空間が異なるか否かを判定し、
   サブ画像の色空間がメイン画像の色空間と異なる場合に、サブ画像の色空間をメイン画像の色空間に一致させる色空間変換処理を実行して、メイン画像と同じ色空間を持つ重畳用画像信号を生成し、生成した重畳用画像信号をメイン画像に重畳して出力画像信号を生成し、
   前記画像処理部が、さらに、
   メイン画像再生に利用するクリップＡＶストリームファイルが複数ある場合、
   メイン画像を格納したクリップＡＶストリームファイル単位で、サブ画像との色空間比較処理を実行し、色空間が異なる場合にのみサブ画像の色空間変換を実行するクリップＡＶストリームファイル単位のサブ画像色空間変換制御を行う画像処理方法。
10. 情報処理装置において画像処理を実行させるプログラムであり、
    前記プログラムは、画像処理部に、
    クリップＡＶストリームファイルに格納されたメイン画像の色空間情報を、前記クリップＡＶストリームファイルに対応する属性情報記録ファイルであるクリップ情報ファイルから取得する処理と、
    メイン画像に重畳するサブ画像の色空間情報を、前記クリップ情報ファイル、または、別ファイルから取得する処理と、
    メイン画像とサブ画像の色空間が異なるか否かを判定する処理と、
    サブ画像の色空間がメイン画像の色空間と異なる場合に、サブ画像の色空間をメイン画像の色空間に一致させる色空間変換処理を実行して、メイン画像と同じ色空間を持つ重畳用画像信号を生成し、生成した重畳用画像信号をメイン画像に重畳して出力画像信号を生成する処理を実行させ、
    前記プログラムは、さらに、前記画像処理部に、
    メイン画像再生に利用するクリップＡＶストリームファイルが複数ある場合、
    メイン画像を格納したクリップＡＶストリームファイル単位で、サブ画像との色空間比較処理を実行させ、色空間が異なる場合にのみサブ画像の色空間変換を実行させるクリップＡＶストリームファイル単位のサブ画像色空間変換制御を行わせるプログラム。

Images