JP4324435B2 - 立体視用映像提供方法及び立体映像表示装置 - Google Patents

Description

この発明は、立体視用映像提供方法及び立体映像表示装置に関する。

立体視技術としては、従来よりパララックスバリアを用いる眼鏡無し立体視方法、偏光眼鏡や液晶シャッタ眼鏡などを用いる眼鏡有り立体視方法などが知られている。また、立体視させる映像についても、実写の映像だけでなく、コンピュータグラフィックスを用い、仮想空間上に配置したオブジェクトを平面に投影して描画処理する３Ｄ描画による映像がある。更には、前記描画処理を二視点において行なうことで、右眼映像と左眼映像を作成することができる。また、二つの映像を１チャンネルの映像として放送し、受信機側で立体視が行なえる方法が提案されている（特許文献１参照）。二つ以上の映像からなる映像ファイルを作成すれば、このファイルを開いたときに、立体映像を生成することができる。
特開平１０−１７４０６４号公報

しかしながら、上記従来技術では、立体視用映像の作成者側（提供側）で意図する処理（立体表示に限らず、平面表示なども）を受信側装置において行わせることができない。

この発明は、上記の事情に鑑み、立体視用映像の作成者側（提供側）で意図する処理を受け手側の装置（立体映像表示装置）において行わせることができる立体視用映像提供方法及び立体映像表示装置を提供することを目的とする。

この発明の立体視用映像提供方法は、上記の課題を解決するために、立体視用映像として用いられる視点が異なる複数の２次元映像をデータとして提供する際に、各２次元映像のデータごとに付与された視点番号情報又は映像データにおける各２次元映像領域ごとの視点番号情報を受信側で演算により取得するための情報と一つ以上の２次元映像を選択する情報としての視点番号情報とを付属情報として当該２次元映像のデータと共に提供することを特徴とする。

また、この発明の立体視用映像提供方法は、立体視用映像として用いられる視点が異なる複数の２次元映像をデータとして提供する際に、各２次元映像のデータごとに付与された視点番号情報又は映像データにおける各２次元映像領域ごとの視点番号情報を受信側で演算により取得するための情報と二つ以上の２次元映像を選択する情報としての視点番号情報とそれらの優先順位を示す優先順位情報とを付属情報として当該２次元映像のデータと共に提供することを特徴とする。

また、この発明の立体視用映像提供方法は、立体視用映像として用いられる視点が異なる複数の２次元映像をデータとして提供する際に、各２次元映像のデータごとに付与された視点番号情報又は映像データにおける各２次元映像領域ごとの視点番号情報を受信側で演算により取得するための情報と二つ以上の２次元映像を選択する情報としての視点番号情報を優先順に並べてなる情報とを付属情報として当該２次元映像のデータと共に提供することを特徴とする。

また、この発明の立体視用映像提供方法は、立体視用映像として用いられる視点が異なる複数の２次元映像をデータとして提供する際に、各２次元映像のデータごとに付与された視点番号情報又は映像データにおける各２次元映像領域ごとの視点番号情報を受信側で演算により取得するための情報と一つ以上の２次元映像を選択する情報としての視点番号情報と前記複数の２次元映像が連続性を有する映像であるかどうかを示す情報とを付属情報として当該２次元映像のデータと共に提供することを特徴とする。

これらの立体視用映像提供方法において、前記選択するための情報により選択された２次元映像のデータを本来の立体視用以外の補助的画像としてどのような態様で表示すべきかを示す表示態様情報を付属情報として当該２次元映像のデータと共に提供するようにしてもよい。また、前記選択するための情報により選択された２次元映像のデータをどのような目的で使用すべきかを示す使用目的情報を付属情報として当該２次元映像のデータと共に提供するようにしてもよい。この場合、ビットの並びと使用目的の内容とを対応させると共に、各ビットの「０」「１」が各使用目的の有効／無効を意味するようにしてもよい。

また、これらの立体視用映像提供方法において、情報の記述形式としてどの記述形式が採用されているかを示す情報を付属情報として２次元映像のデータと共に提供するようにしてもよい。情報の提供を、放送、通信、記録媒体への記録のいずれかにより行なうようにしてもよい。

また、この発明の立体映像表示装置は、視点が異なる複数の２次元映像データに基づいて立体視用映像を生成する立体映像表示装置において、前記２次元映像データに付属する付属情報から各２次元映像の視点番号情報と２次元映像を選択する情報としての視点番号情報とを取得する手段と、本来の立体視用の映像処理以外で一つ又は複数の２次元映像データを選択することが必要とされる処理を実行する場合に、前記選択する情報としての視点番号情報によって指定される２次元映像データを選択する手段と、を備えたことを特徴とする。

また、この発明の立体映像表示装置は、視点が異なる複数の２次元映像データに基づいて立体視用映像を生成する立体映像表示装置において、前記２次元映像データに付属する付属情報から各２次元映像の視点番号情報と二つ以上の２次元映像を選択する情報としての視点番号情報とを取得する手段と、本来の立体視用の映像処理以外で所定数の２次元映像データを選択することが必要とされる処理を実行する場合に、当該所定数の２次元映像データを前記選択する情報としての視点番号情報の並び順に従って選択する手段と、を備えたことを特徴とする。

また、この発明の立体映像表示装置は、視点が異なる複数の２次元映像データに基づいて立体視用映像を生成する立体映像表示装置において、前記２次元映像データに付属する付属情報から各２次元映像の視点番号情報と二つ以上の２次元映像を選択する情報としての視点番号情報とそれらの優先順位を示す優先順位情報とを取得する手段と、本来の立体視用の映像処理以外で所定数の２次元映像データを選択することが必要とされる処理を実行する場合に、当該所定数の２次元映像データを前記選択する情報としての視点番号情報及び優先順位情報によって選択する手段とを備えたことを特徴とする。

また、この発明の立体映像表示装置は、視点が異なる複数の２次元映像データに基づいて立体視用映像を生成する立体映像表示装置において、前記２次元映像データに付属する付属情報から各２次元映像の視点番号情報と２次元映像を選択する情報としての視点番号情報と前記選択するための情報により選択された２次元映像のデータを本来の立体視用以外の補助的画像としてどのような態様で表示すべきかを示す表示態様情報とを取得する手段と、本来の立体視用の映像処理以外で一つ又は複数の２次元映像データを選択することが必要とされる処理を実行する場合に、前記選択する情報としての視点番号情報によって指定される２次元映像データを選択する手段と、前記選択した２次元映像データと前記表示態様情報とに基づいて当該表示態様による映像表示を行う手段と、を備えたことを特徴とする。

これらの立体映像表示装置において、前記本来の立体視用の映像処理以外の処理は、視点が異なる複数の２次元映像データの内容を示すために一つ又は複数の２次元映像データを縮小処理して画面に表示する処理としてもよい。また、視点が異なる複数の２次元映像データのなかからプリントアウト用及び／又は画像配信用に一つ又は複数の２次元映像データを選択する処理としてもよい。

また、この発明の立体映像表示装置は、視点が異なる複数の２次元映像データに基づいて立体視用映像を生成する立体映像表示装置において、前記２次元映像データに付属する付属情報から各２次元映像の視点番号情報と２次元映像を選択する情報としての視点番号情報と前記選択するための情報により選択された２次元映像のデータをどのような目的で使用すべきかを示す使用目的情報とを取得する手段と、前記使用目的に対応する処理を実行する場合に前記選択する情報としての視点番号情報によって指定される２次元映像データを選択する手段と、を備えたことを特徴とする。

また、この発明の立体映像表示装置は、視点が異なる複数の２次元映像データに基づいて立体視用映像を生成する立体映像表示装置において、前記２次元映像データに付属する付属情報から各２次元映像の視点番号情報と二つ以上の２次元映像を選択する情報としての視点番号情報とを取得する手段と、本来の立体視用の映像処理で前記複数の２次元映像データの数よりも少ない所定数の２次元映像データを選択する場合に、当該所定数の２次元映像データを前記選択する情報としての視点番号情報に基づいて選択する手段と、を備えたことを特徴とする。かかる構成において、前記選択された所定数の２次元映像のなかで前記視点番号情報に一致する視点番号情報を持つ２次元映像が中央側となるように立体視用の映像処理を行うようにしてもよい。また、前記付属情報から前記複数の２次元映像が連続映像であるのかどうかを示す情報を取得する手段を備え、前記複数の２次元映像が連続映像であることを示す情報を得たときには、前記所定数の選択された２次元映像に前記複数の２次元映像における第１番目の２次元映像と最終番目の２次元映像とが存在することを許容するように構成されていてもよい。また、前記付属情報から前記複数の２次元映像が連続映像であるのかどうかを示す情報を取得する手段を備え、前記複数の２次元映像が連続映像でないことを示す情報を得たときには、前記所定数の選択された２次元映像に前記複数の２次元映像における第１番目の２次元映像と最終番目の２次元映像とが存在する場合に、第１番目の２次元映像又は最終番目の２次元映像が排除されるように選択映像のシフトを行って新たに一つ以上の２次元映像を選択するようにしてもよい。

また、これらの構成において、付属情報から情報の記述形式としてどの記述形式が採用されているかを示す情報を取得する手段を備え、前記情報を取得できた場合には当該情報にて示される記述形式に基づいて付属情報の内容を判断するように構成されていてもよい。

以上説明したように、この発明によれば、立体視用映像の作成者側（提供側）で意図する処理を受け手側の装置（立体映像表示装置）において行わせることができるという効果を奏する。

以下、この発明の立体視用映像提供方法及び立体映像表示装置を図１乃至図５に基づいて説明していく。

図１に基づいて立体視用映像として用いられる視点が異なる複数の２次元映像をデータとして送信することについて説明していく。なお、この図においては、放送局やインターネット上のサーバなどとして構成される送信側装置１と、放送受信装置やネット接続環境を備えたパーソナルコンピュータや携帯電話などの受信側装置２とからなるシステムを示している。

視点が異なる複数の２次元映像データは、例えば互いに眼間距離離して設けた複数のカメラにて被写体を撮像することにより得ることができる。また、ポリゴン画像による３次元映像に対して複数の視線方向を設定して各々平面投影することでも視点が異なる複数の２次元映像データを得ることができる。図示しない編集装置を用い、各２次元映像データに視点番号情報を与える。視点番号情報は、水平方向視点数をＭ（この実施形態では、Ｍは１以上の正数とする）、垂直方向視点数をＮ（この実施形態では、Ｎは１以上の正数とする）とすると、（ｍ，ｎ）として表すことができる（ｍは０〜Ｍ−１の範囲、ｎは０〜Ｎ−１の範囲）。ただし、Ｍ＝１で且つＮ＝１は一つの２次元映像データとなるので当該場合は無いことになる。ここで、Ｍ＝８でＮ＝１とされる水平８眼視の場合、（０，０）（１，０）（２，０）（３，０）（４，０）（５，０）（６，０）（７，０）のごとく視点番号情報が与えられる。

２次元映像データは例えばＪＰＥＧデータとすることができる。各ＪＰＥＧデータは、ＪＰＥＧヘッダと圧縮画像データとエンド・オブ・イメージとから成る。ＪＰＥＧヘッダには、スタート・オブ・イメージや色管理情報などの付属情報が存在する。各２次元映像データにおける前記視点番号情報は、例えば、各々のＪＰＥＧヘッダに存在させることもできる。視点が異なる複数の２次元映像データを一纏まりとするために、全体に対するヘッダ（以下、このヘッダをファイルヘッダという）を付加することとしてもよく、この場合、視点が異なる複数の２次元映像データは、ファイルヘッダとそれに続く複数のＪＰＥＧデータとその全体の終りを示すファイルエンド情報とすることができる。全体に対するヘッダを存在させない場合（結合画像の場合）には、視点番号等の情報が、ＪＰＥＧのヘッダ内（アプリケーションマーカー／ＩＦＤ）に格納される。

ファイルヘッダには、下記に示すごとく、識別番号ｉ、グループサイズｓ、個数ｋ、水平視点番号ｍ、垂直視点番号ｎなどが設定される。

識別番号ｉは情報の種類を表す記述であり、当該番号以降の記述が画像指定に係わる記述であることを示している。水平視点番号ｍ及び垂直視点番号ｎはそれぞれ１バイトで記述され、一個の画像を特定する情報（１グループ）として２バイトが必要とされることから、この例では、グループサイズｓは２バイトとなる。また、上記の例では、グループ数は一つであるから、個数ｋは一個を表すことになる。このような記述により、個数ｋが可変である場合などでもフィールド全体のサイズを算出することがでる。上記の例ではフィールド全体のサイズは４＋ｓｋ＝６と算出される。４はｉ、ｓ、ｋのサイズ１、１、２を合計したものであり、ｓｋが（ｍ，ｎ）群のサイズを示すものとなる。なお、個数ｋが０のときは、例えば「指定画像なし」と定義される。

上記の例では、図２に示しているように、ファイルヘッダ内の付属情報として、一つの２次元映像を選択する情報としての視点番号情報が設定されたものとなる。図２に示す例では、Ｍ＝８でＮ＝１とされる水平８眼視の場合を示しており、各２次元映像のデータには（０，０）（１，０）（２，０）（３，０）（４，０）（５，０）（６，０）（７，０）のごとく視点番号情報が付与されており、且つ、２次元映像データを選択する情報としての視点番号情報は（３，０）とされている。

このようにすることで、立体視用映像として用いられる視点が異なる複数の２次元映像をデータとして送信する際に、各２次元映像のデータごとに付与された視点番号情報と一つの２次元映像を選択する情報としての視点番号情報とが付属情報として当該２次元映像のデータと共に送信されることになる。一纏まりの視点が異なる複数の２次元映像データは、それが送信等されるときには、１次元ビット列とされ、所定のディジタル変調処理が施されて送信側装置１から出力される。なお、送信に限らず、放送でもよく、また、図示しない記録媒体に記録することにおいても、図２に示したフォーマットで複数の２次元映像のデータを記録することもできる。以下に示す場合においても、同様である。

２次元映像を選択する情報としての視点番号情報を複数持たせる場合は、以下の通りである。更に、以下の例では、上から（ｍ０，ｎ０）、（ｍ１，ｎ１）・・・（ｍｋ- １，ｎｋ- １）の順に優先順位が高い画像と定義する。フィールド全体のサイズは４＋ｓｋ＝４＋２ｋである。

上記の例では、図３に示しているように、ファイルヘッダ内の付属情報として、二つ以上の２次元映像を選択する情報としての視点番号情報を優先順に並べてなる情報が設定されることになる。そして、図３に示す例では、２次元映像を選択する情報としての視点番号情報が（３，０）及び（４，０）とされており、（３，０）が先に記述され、その後に（４，０）が記述されているので、優先順位は（３，０）が第１位で（４，０）が第２位である。このようにすることで、立体視用映像として用いられる視点が異なる複数の２次元映像をデータとして提供する際に、各２次元映像のデータごとに付与された視点番号情報と二つ以上の２次元映像を選択する情報としての視点番号情報を優先順に並べてなる情報とが付属情報として当該２次元映像のデータと共に提供されることになる。

また、図３に示す例では、付属情報として表示方法ａを設定している。表示方法は、この実施形態では、本来の立体視用以外の表示（例えば、サムネイル表示やアイコン表示や壁紙映像表示などを示す。この表示を補助的画像表示という。）としている。表示方法ａが取り得る値は、下記の表３にも示しているように、この実施形態では０，１，２，３としている。また、情報の種類を示すものである識別番号ｉには、「以下にはファイルの中身を示す画像の表示方法が記述される」ことを示す番号が記述され、フィールドには表示方法が記述される。

「０」は表示方法が平面画像表示であることを示し、「１」は補助的画像表示が交差法配置表示（簡易な立体視法の一つである）であることを示し、「２」は補助的画像表示が平行法配置表示（簡易な立体視法の一つである）であることを示し、「３」は補助的画像表示がディスプレイフォーマットに変換した表示であることを示している。「平面画像表示」では、一つの２次元映像のデータを選択し（図３に示す例では、第１優先の（３，０）の画像が選択される）、画像表示を行うことを受信側装置２に示すことになる。「平行法配置表示」では、（３，０）の画像と（４，０）の画像の縮小画像処理を行い、（３，０）の画像を左側に配置し、（４，０）の画像を右側に配置することを受信側装置２に示すことになる。「交差法配置表示」では、（３，０）の画像と（４，０）の画像の縮小画像処理を行い、（４，０）の画像を左側に配置し、（３，０）の画像を右側に配置することを受信側装置２に示すことになる。「ディスプレイフォーマットに変換した表示」では、例えば、受信側装置２が縦ストライプ状のパララックスバリアを採用している場合に、それぞれ縮小された（３，０）画像と（４，０）画像を水平方向に１画素ずつ交互に配置することを受信側装置２に示すことになる。

なお、上述した優先順位設定では、視点番号情報の並び順が優先順を示すものとしたが、並びとは無関係に各視点番号情報に優先番号を付与するようにしてもよい。例えば、２（３，０）、１（４，０）のごとくである。

また、このような付属情報は、受信側装置２において、受信した映像数が受信側装置２のディスプレイ（受信側装置２の構成等については後で説明する）の視点数と一致しない場合、例えば水平８（０〜７）×垂直１（０）視点の画像から４視点の画像を選択して４眼式立体ディスプレイで立体表示する際に、どの視点が基準となっているかを知る情報となる。

ファイルヘッダにおいて、水平視点番号ｍが「３」であって垂直視点番号ｎが「０」の画像、すなわち、視点番号（３，０）の画像が指定されていれば、受信側装置２では、水平視点番号が（２，０）（３，０）（４，０）（５，０）の画像を選択するとよい。ここで、指定された視点画像は４つの視点の中央に近い位置に配置されることが好ましい。すなわち、受信側装置２では、ディスプレイの視点数がＬである場合に、Ｌ／２番目に指定画像が配置されるように選択するとよい。視点数が奇数の場合は、Ｌ／２の小数点以下の処理を切り捨て、切り上げなどに取り決めておけばよい。なお、切り捨てと切り上げのどちらを選択するかを示す情報をファイルヘッダに持たせてもよい。

また、上記のごとく、指定された視点画像が中央に近い位置に配置されることに限るものではなく、以下の指定方法も考えられる。

例１．全指定
２視点方式ディスプレイの場合であれば二つの視点番号（例えば（２，０）と（５，０））を送り手側で指定しておく方式
３視点方式ディスプレイの場合であれば三つの視点番号（例えば（１，０）と（３，０）と（５，０））を送り手側で指定しておく方式
４視点方式ディスプレイの場合であれば四つの視点番号（例えば（０，０）と（２，０）と（４，０）と（６，０））を送り手側で指定しておく方式
例２．条件指定１（必ず含める視点を条件別に指定）
ディスプレイの眼数が偶数の場合は、視点番号（２，０）と（３，０）を必ず含める視点として指定する方式（それ以外は任意の視点を選択）
ディスプレイの眼数が奇数の場合は、視点番号（３，０）を必ず含める視点として指定する方式（それ以外は任意の視点を選択）
例３．指定条件２（必ず含める視点と共に、次のような選択条件を指定）
ディスプレイの視点数が或る数未満の場合は、２つおきに画像を選択
ディスプレイの視点数が或る数以上の場合は、１つおきに画像を選択
水平視点番号ｍが「０」であって垂直視点番号ｎが「０」の画像、すなわち、視点番号（０，０）の画像が指定されていれば、（７，０）（０，０）（１，０）（２，０）の画像を選択することが可能であるが、視点７と視点０が連続しない可能性がある場合には、（１，０）（２，０）（３，０）（４，０）の画像を選択するとよい。つまりＬ／２の結果からは（−，０）（０，０）（１，０）（２，０）となり画像が存在しない視点が生じるので、左にシフトして（１，０）（２，０）（３，０）（４，０）の画像を選択する。一般に全周画像では最後の視点と最初の視点が連続する可能性がある。

飛び飛びの画像を表示する場合にも同様である。例えば、水平視点番号ｍが「３」であって垂直視点番号ｎが「０」の画像、すなわち、視点番号（３，０）の画像が指定されていれば、（１，０）（３，０）（５，０）（７，０）の画像を選択する。しかしながら、画像の視点数が７（０〜６）×１（０）で、ディスプレイが４眼式の場合において視点番号（３，０）の画像が指定されていれば、（１，０）（３，０）（５，０）（−，０）となり、４番目の画像が存在しない。この場合は、（０，２，４，６）という選択しか存在しないため、受信側装置２では上記の画像選択のための情報を無視すればよい。

複数の画像が指定されている場合には、その優先順位に従って表示を決めることもできる。例えば視点番号（３，０）と視点番号（２，０）の画像が指定されていれば、これら２枚が中央に配置されるように、（１，０）（２，０）（３，０）（４，０）の画像を選択し、表示してもよい。

送信側装置１は、上記のごとく、複数の２次元映像から幾つかの２次元映像を選択するための基準番号を示す情報としての視点番号情報を付属情報として当該２次元映像のデータと共に提供する場合において、前記複数の２次元映像が連続性を有する映像かどうかを示す情報を付属情報として当該２次元映像のデータと共に提供するようにしてもよい。

連続性を示す情報（全周画像であるか否か、つまり両端の画像の視点が連続しているか否かを表す情報）が提供されると、これを受けた受信側装置２では、上述の（７，０）（０，０）（１，０）（２，０）の画像を選択することが許されるかどうかの判定を行うことができる。下記の例では、情報の種類を示すものである識別番号ｉには、「以下には両端画像の連続性の有無が記述される」ことを示す番号が記述されることになり、連続性の状態を示すフィールドｒには連続か否かが記述される。

視点（０，０）と視点（７，０）が連続する場合（ｒ＝１）であれば、受信側装置２では（７，０）（０，０）（１，０）（２，０）の画像を選択し、連続していない視点（ｒ＝０）であれば上記選択は行わず、前述したごとく、左にシフトする処理を行って、（１，０）（２，０）（３，０）（４，０）の画像を選択する。なお、垂直方向の視点数が２より大きい場合にも、垂直方向の視点番号をｊとすれば視点（０，ｊ）と視点（７，ｊ）が連続するか否かを示す情報とすることができる。

以上説明した例では、送信側装置１は、前記選択するための情報により選択された２次元映像のデータをどのような目的で使用すべきかを示す使用目的情報を送信することはしなかったが、送信側装置１は、前記選択するための情報により選択された２次元映像のデータをどのような目的で使用すべきかを示す使用目的情報を付属情報として当該２次元映像のデータと共に提供するようになっていてもよい。この場合、ビットの並びと使用目的の内容とを対応させておき、各ビットの「０」「１」が各使用目的の有効／無効を意味するようにしておいてもよい。

以下の表５に具体例を示す。目的指定ｂは、各ビット（ｂｉｔ０，ｂｉｔ１，…，ｂｉｔ７）に用途が対応付けられており、各々が使用目的であるか否かを示すことになる。

下記の表６に具体例を示す。なお、画像選択の記述がなされることを示す識別番号を仮に２Ｅ（００１０１１１０）とする。下記の例では「多視点画像から一部を選択する画像」と「ファイルの中身を表す画像」は同じ画像となる。また、第１優先が（３，０）で、第２優先が（２，０）である。そして「輻輳調整時の固定画像の画像」は（２，０）として別途指定している。ところで、通常は、この例のように同じ情報を表すフィールドが複数回現れることはないので、表６に示す例では、「画像選択」の場合は特例として、識別番号と目的指定を合わせて情報の種類を示すこととしている。

次の表７に示す例では、目的指定を全ての選択映像に共通して利用することとしている。グループサイズ以下は省略している。なお、表７に示す「目的指定」ではビットｂｂｉｔ７も１であるので、例えば、全く用途に関係なく画像選択するという指定として定義できる。

表６の内容を別の記述形式で実現することもできる。下記の表８に示す例では目的指定と視点番号をグループとし、使用目的の使い分けを行っている。表６と同じ指定は表９のように行うことができる。

表９の例では、第１グループ及び第２グループの記述により、「多視点から一部を選択する画像」および「ファイルの中身を表す画像」という目的が特定されることになり、且つ、第１グループの記述により、第１優先画像が（３，０）、第２グループの記述により、第２優先画像が（２，０）であることが特定されることになる。ここで、第３グループの記述である「輻輳調整時の固定画像の画像」で特定される画像が「多視点から一部を選択する画像」および「ファイルの中身を表す画像」の第２優先画像と同じ（２，０）であるので、次の表１０に示すように記述してもよい。

このように目的指定を付加することで、情報を付加するライタ側が何を意図して画像を選択したかを受信側装置２側で知ることができる。

表６と表９と表１０に示した記述のどれを採用してもよいわけであるが、その選択の自由度を持たせるために、どの記述（表６形式の記述か表９形式記述か表１０形式の記述か）であるかを示す記述ｃをファイルヘッダに持たせるフォーマットとするようにしてもよい。

以上に説明した例では垂直視点数を１としたが、２より大きい値の場合は垂直方向も含めて画像が選択される。その手法は水平方向と同様である。

なお、選択画像の決め方は、（１）正面に近い画像、（２）２Ｄ／３Ｄ変換で生成した画像については基準となった画像、（３）複数のカメラで撮影した場合に基準となる画像（特にカメラの視点間に性能差がある場合に有効）などが考えられる。

［受信側装置］
受信側装置２は、送信側装置１から送信された一纏まりの視点が異なる複数の２次元映像データ（１次元ビット列情報）を受信部２１（モデム、チューナ等）にて受信する。かかるデータがディジタル変調処理されているのであれば、図示しない復調回路にて復調信号を生成する。また、かかる情報が他の情報と多重されて送信されてくるときには、デマルチプレクス（ＤＥＭＵＸ）処理を行なう。受信した２次元映像データ（例えば、前述したファイルヘッダ、各ＪＰＥＧデータ、エンド・オブ・イメージ）は、ＣＰＵ２２の制御によってメモリ２４に格納される。映像再生時には、ＣＰＵ２２の処理によってメモリ２４から読み出されたデータがデコーダ２３に与えられる。デコーダ２３によってデコードされた映像データは映像生成部２５に与えられる。

立体視処理時には、ＣＰＵ２２から制御情報として立体視を示す制御情報が映像生成部２５に与えられる。映像生成部２５は、複数の映像（図では、右眼映像と左眼映像としている）をデコード部２３から受け取り、立体視用映像の生成処理を行う。例えば、パララックスバリアを用いる水平立体視とするときには、映像生成部２５は、右眼映像（Ｒ）の画素と左眼映像（Ｌ）の画素とを水平方向に交互に並べる処理を各行で行っていき、Ｒ画素列とＬ画素列が水平方向に交互に並んだ画像を例えばＮＴＳＣ信号に変換にしてモニタ２６に与える。モニタ２６は受けとったＮＴＳＣ信号に基づいて映像表示を行う。そして、例えばモニタ２６の表示面上に液晶バリアを備えることにより、平面視映像の表示及び立体視映像の表示の両方が行なえることになる。立体視映像が、上記のごとく右眼映像と左眼映像とを交互に縦ストライプ状に配置したものであれば、ＣＰＵ２２の制御により、上記液晶バリアにおいて、縦ストライプ状の遮光領域が形成される。なお、右眼映像と左眼映像とを交互に縦ストライプ状に配置した立体視映像に限らず、例えば、右眼映像と左眼映像とを斜め配置配置した立体視映像としてもよく（特許第３０９６６１３号公報参照）、この場合には、液晶バリアにおいて斜めバリアを形成する。勿論、このような眼鏡無し立体方式の他、眼鏡有りの立体方式などの立体映像表示も採用できる。

受信側装置２のＣＰＵ２２は、前述した付属情報に基づいた映像生成処理を映像生成部２５に実行させる。以下、この映像生成処理について説明する。

（１）ＣＰＵ２２は、２次元映像データに付属する付属情報から各２次元映像のデータごとに付与された視点番号情報と２次元映像を選択する情報としての視点番号情報とを取得する。例えば、２次元映像データとしてのＪＰＥＧデータのＪＰＥＧヘッダから各データ毎に視点番号情報（ｍ，ｎ）を取得する。また、ファイルヘッダから２次元映像を選択する情報としての視点番号情報（ｍ，ｎ）を取得する。そして、ＣＰＵ２２は、本来の立体視用の映像処理以外で一つ又は複数の２次元映像データを選択することが必要とされる処理が要求された際に、前記選択する情報としての視点番号情報によって指定される２次元映像データを選択する。すなわち、ＣＰＵ２２は、選択する情報としての視点番号情報によって指定される２次元映像データを読み出すべく、メモリ２４に読出アドレスを与えて当該選択された２次元映像データを取得してデコード部２３に与えると共に、前記の要求された処理に対応した制御情報を映像生成部２５に与える。

前記の要求された処理としては、一纏まりの視点が異なる複数の２次元映像データ（ファイル）を示すサムネイル表示やアイコン表示などがある。前述した使用目的を送信する例で示した目的の内容も、受信側装置２での独自の要求された処理の内容となるものである。また、要求された処理としては、一纏まりの視点が異なる複数の２次元映像データのうちの一つの２次元映像データを壁紙映像とする処理や、プリントアウトする映像とする処理や、送信（例えば、メール送信等）する映像とする処理などがある。ＣＰＵ２２は、各処理を示す制御情報を映像生成部２５に与える。映像生成部２５は、壁紙映像とする処理の場合、モニタ２６の画面サイズに対応した大きさとなるように、デコード部２３から与えられた映像データを処理（画素補間、画素間引き等）してモニタ２６に与える。映像生成部２５は、プリントアウトする処理の場合、出力映像サイズに対応した大きさとなるように、デコード部２３から与えられた映像データを処理してプリンター（図示せず）に与える。プリンターと受信側映像表示装置は所定のインターフェイス（例えば、ＵＳＢインターフェイスやＩＥＥＥ１３９４等）で接続しておけばよい。また、映像生成部２５は、画像送信処理の場合、出力映像サイズに対応した大きさとなるように、デコード部２３から与えられた映像データを処理して画像送信処理部（図示せず）に与える。

（２）ＣＰＵ２２は、ファイルヘッダの内容が例えば表２に示した記述であるとき、グループの並びの順に基づき各グループにおいて特定される画像の優先順位を判断する。また、並び順とは別に優先順位を示す順位情報が各画像に付与されている記述の場合には、当該順位情報に基づいて画像の優先順位を判断する。

（３）ＣＰＵ２２は、ファイルヘッダ内の付属情報として表示方法ａを取得する。表３に示した例に対応する処理例を以下に説明する。ＣＰＵ２２は、ファイルヘッダ内の記述における表示方法ａが「平面画像表示」を示している場合、ファイルヘッダ内の記述に従って第１優先の（３，０）の画像を選択する。すなわち、当該データをメモリ２４から読み出し、デコード部２３に与えると共に、映像生成部２５には「平面画像表示」であることを示す制御情報を与える。映像生成部２５はデコード部２３から受け取った画像を例えばＶＲＡＭ上に展開する。モニタ２６の所定画面位置には画像（壁紙等）が表示されることになる。ＣＰＵ２２は、ファイルヘッダ内の記述における表示方法ａが「平行法配置表示」を示している場合、（３，０）画像と（４，０）画像を選択する。すなわち、当該データをメモリ２４から読み出し、デコード部２３に与えると共に、映像生成部２５には「平行法配置表示」であることを示す制御情報を与える。映像生成部２５はデコード部２３から受け取った画像に対して間引き処理を行い、例えばＶＲＡＭの所定位置上に（３，０）画像の縮小画像を展開し、その右側位置に（４，０）画像の縮小画像を展開する。モニタ２６の所定画面位置には前記二つの縮小画像が左右に並んで表示されることになる。ＣＰＵ２２は、ファイルヘッダ内の記述における表示方法ａが「交差法配置表示」を示している場合、（３，０）画像と（４，０）画像を選択する。すなわち、当該データをメモリ２４から読み出し、デコード部２３に与えると共に、映像生成部２５には「交差法配置表示」であることを示す制御情報を与える。映像生成部２５はデコード部２３から受け取った画像に対して間引き処理を行い、例えばＶＲＡＭの所定位置上に（４，０）画像の縮小画像を展開し、その右側位置に（３，０）画像の縮小画像を展開する。モニタ２６の所定画面位置には前記二つの縮小画像が左右に並んで表示されることになる。ＣＰＵ２２は、ファイルヘッダ内の記述における表示方法ａが「ディスプレイフォーマットに変換した表示」を示している場合、（３，０）画像と（４，０）画像を選択する。すなわち、当該データをメモリ２４から読み出してデコード部２３に与えると共に、映像生成部２５には「ディスプレイフォーマットに変換した表示」であることを示す制御情報を与え、モニタ上の液晶バリアをＯＮする。映像生成部２５はデコード部２３から受け取った画像に対して間引き処理を行い、それぞれ縮小された（３，０）画像と（４，０）画像を水平方向に１画素ずつ交互に配置した画像をＶＲＡＭの所定位置上に展開する。

（４）受信側装置２は、例えば、８つの画像に基づく８眼視映像の表示処理を行うことができるが、ユーザ指定に基づき、４つの画像を選択して４眼視映像の表示処理を行うことができる。或いは、受信側装置２が最大４眼式であるのに、受信した再生用画像が８眼視映像である場合が起こり得る。ＣＰＵ２２は、例えば、８視点の画像から４視点の画像を選択して４眼式で立体表示する際に、ファイルヘッダの記述に基づき、どの視点が基準となっているかを判断する。また、ＣＰＵ２２は、視点数がＬである場合に、Ｌ／２の演算処理を行う。視点数が４であれば２という結果を得る。水平視点番号ｍが「３」であって垂直視点番号ｎが「０」の画像、すなわち、視点番号（３，０）の画像が指定されていれば、ＣＰＵ２２は、視点番号（３，０）の画像を２番目に（できるだけ中央に）位置させるべく、水平視点番号が（２，０）（３，０）（４，０）（５，０）の画像を選択する。ここで、４眼式立体表示が行われるとき、適視距離上に、４つの視点画像の視認範囲が水平方向に例えば眼間距離ピッチで存在することになる。そして、観察者がモニタ中央上に位置しているとき、左眼に（３，０）画像が導かれ、右眼に（４，０）画像が導かれることになる。視点数が奇数の場合は、ＣＰＵ２２は、Ｌ／２の小数点以下の処理を切り捨て、又は切り上げなどの決められた処理を行う。

（５）ＣＰＵ２２は、水平視点番号ｍが「０」であって垂直視点番号ｎが「０」の画像、すなわち、視点番号（０，０）の画像が指定されていれば、（７，０）（０，０）（１，０）（２，０）の画像を選択する。或いは、ＣＰＵ２２は視点番号を左にシフトする処理を行い、（１，０）（２，０）（３，０）（４，０）の画像を選択する。つまりＬ／２の演算結果からは（−，０）（０，０）（１，０）（２，０）となり画像が存在しない視点が生じるので、左にシフトして（１，０）（２，０）（３，０）（４，０）の画像を選択する。飛び飛びの画像を表示する場合にも同様である。例えば、水平視点番号ｍが「３」であって垂直視点番号ｎが「０」の画像、すなわち、視点番号（３，０）の画像が指定されていれば、ＣＰＵ２２は、（１，０）（３，０）（５，０）（７，０）の画像を選択する。しかしながら、画像の視点数が７（０〜６）×１（０）で、ディスプレイが４眼式の場合において視点番号（３，０）の画像が指定されていれば、前記Ｌ／２の演算結果で（１，０）（３，０）（５，０）（−，０）となり、４番目の画像が存在しない。この場合は、（０，０）（２，０）（４，０）（６，０）という選択しか存在しないため、ＣＰＵ２２は当該選択を実行し、上記の画像選択のための情報を無視する処理を行う。また、ＣＰＵ２２は、複数の画像が指定されている場合には、その優先順位に従って表示を決めることもできる。例えば視点番号（３，０）と視点番号（２，０）の画像が指定されていれば、これら２枚が中央に配置されるように、（１，０）（２，０）（３，０）（４，０）の画像を選択する処理を行うようになっていてもよい。

（６）ＣＰＵ２２は、ファイルヘッダ内に連続性を示す記述が存在するときには、以下のように処理する。ＣＰＵ２２は、連続性を示す情報が検出できた場合、上述の（７，０）（０，０）（１，０）（２，０）の画像を選択する。すなわち、視点（０，０）と視点（７，０）が連続する場合（ｒ＝１）であれば、ＣＰＵ２２は（７，０）（０，０）（１，０）（２，０）の画像を選択し、連続していない視点（ｒ＝０）であれば上記選択は行わず、前述したごとく、左にシフトする処理を行って、（１，０）（２，０）（３，０）（４，０）の画像を選択する。

（７）ＣＰＵ２２は、ファイルヘッダ内に使用目的を示す記述が存在するときには、以下のように処理する。以下に示す例では、ファイルヘッダ内の記述が表６に示すようであるとする。ＣＰＵ２２は、８視点映像から４視点映像を選択する処理（多視点から一部選択）を行うとき、ファイルヘッダ内の目的指定ｂのｂｉｔｂ０が「１」（有効）かどうかを検出する。有効であるときには、目的指定ｂに対応して記述されている視点番号の画像を選択する。有効でないときには、例えば受信側装置２で予めデフォルトで決められている画像を選択する。ＣＰＵ２２は、ファイルの中身を表す処理（サムネイル等の表示処理）を行うとき、ファイルヘッダ内の目的指定ｂのｂｉｔｂ１が「１」（有効）かどうかを検出する。有効であるときには、目的指定ｂに対応して記述されている視点番号の画像を選択する。有効でないときには、例えば受信側装置２で予めデフォルトで決められている画像を選択する。ＣＰＵ２２は、平面画像表示（壁紙映像表示等）の処理を行うとき、ファイルヘッダ内の目的指定ｂのｂｉｔｂ２が「１」（有効）かどうかを検出する。有効であるときには、目的指定ｂに対応して記述されている視点番号の画像を選択する。有効でないときには、例えば受信側装置２で予めデフォルトで決められている画像を選択する。ＣＰＵ２２は、輻輳調整時の画像ずらし処理を行うとき、ファイルヘッダ内の目的指定ｂのｂｉｔｂ３が「１」（有効）かどうかを検出する。有効であるときには、目的指定ｂに対応して記述されている視点番号の画像を選択する。有効でないときには、例えば受信側装置２で予めデフォルトで決められている画像を選択する。なお、輻輳調整時の画像ずらし処理における指定画像は、立体表示において画像を左右に互いにずらして表示する際に、固定する側の画像とする。各々の画像を左右に互いにずらすと、カメラの輻輳距離を変更する補正が可能であり、画像全体が前後移動する。このような処理において、位置をずらさずに固定する画像を決めておくと処理が容易である。ＣＰＵ２２は、前記固定画像として前記指定画像を採用する処理を行う。

（８）ＣＰＵ２２は、ファイルヘッダ内にどの記述（表６形式の記述か表９形式記述か表１０形式の記述か）であるかを示す記述ｃが存在するときには、当該記述ｃに従って以降の記述がどの記述（表６形式の記述か表９形式記述か表１０形式の記述か）であるかを解釈する処理を行う。

（９）受信側装置２に図示しない記録媒体再生部（例えば、ＣＤ−ＲＯＭドライブ、ＤＶＤプレーヤー等）が内蔵或いは所定のインターフェイスにて接続されるように構成してもよい。そして、記録媒体から再生されたファイルが上述した複数の２次元映像データを含むファイルであるとき、上述したのと同様の処理にて画像再生を行うようになっていてもよい。

ファイルに含まれる複数の画像はファイル内で分離している場合のみを対象にしているわけではない。複数の画像は１枚に結合している場合も含む。すなわち、複数の２次元画像データは、決められた規則に従って結合し、１つの２次元画像になっていてもよい。この場合は、受信側で画像のサイズと視点数の情報から各々の視点の２次元画像が特定できるので、各々の画像に視点番号が実際的に付与されていなくても受信側で視点番号を取得することができる。以下に具体例を述べる。

図４では、横長の１枚の画像に８枚分の画像が存在する場合を示している。すなわち、８枚の画像を結合させて横長の１枚の画像としている。この横長の１枚の画像におけるヘッダ内には、水平画素数、垂直画素数、水平視点数、垂直視点数、画像並びといった付属情報が付加されている。受信側装置２は送信側から直接的に各画像の視点番号を受け取るのではなく、以下のごとく、上記付属情報に基づいて各画像を切り出すと共にこの切り出した画像と視点番号との対応関係を判定する。
水平画素数 8192／8 ＝1024
垂直画素数 768 ／1 ＝768
開始Ｘ座標 1024×ｑ
開始Ｙ座標 768 ×ｒ
終了Ｘ座標 1024×（ｑ＋１）−1
終了Ｙ座標 768 ×（ｒ＋１）−1

受信側装置２は、上記付属情報に基づいて各画像の大きさが水平画素数１０２４で垂直画素数７６８であると判断する。また、図４に示す例では、「画像並び」の値が「０」である。「０」は正順であることを示している。従って、受信側装置２は、例えば、視点番号（３，０）の画像については、ｑ＝３，ｒ＝０として、開始Ｘ座標を３０７２とし、開始Ｙ座標を０とし、終了Ｘ座標を４０９５とし、終了Ｙ座標を７６７として切り出すことで得ることができる。なお、「画像並び」の値が「１」のときは、図５（ａ）に示すように、逆順としており、この場合、３枚目に切り出される画像の視点番号は（５，０）であると判断することになる。また、「画像並び」の値が「２」のときは、図５（ｂ）に示すように、上下並びであることを示し、「３」のときには、図５（ｃ）に示すように、（４，０）（７，０）（６，０）（５，０）（３，０）（２，０）（１，０）（０，０）の並びであることを示し且つ先頭画像が指定画像であることを示しており、受信側装置２は「画像並び」の値と画像切り出しの情報とに基づいて各切り出し画像の視点番号情報を取得することになる。

この発明の実施形態の立体視用映像提供方法及び立体映像表示装置を示した説明図である。 複数映像用フォーマット例を示した説明図である。 複数映像用フォーマット例を示した説明図である。 複数映像用フォーマット例を示した説明図である。 同図（ａ）（ｂ）（ｃ）は画像の並びの値と画像並びとの関係を示した説明図である。

符号の説明

１ 送信側装置
２ 受信側装置
２２ ＣＰＵ
２３ デコード部
２４ メモリ
２５ 映像生成部
２６ モニタ

Claims (21)

1. 立体視用映像として用いられる視点が異なる複数の２次元映像をデータとして提供する際に、各２次元映像のデータごとに付与された視点番号情報又は映像データにおける各２次元映像領域ごとの視点番号情報を受信側で演算により取得するための情報と二つ以上の２次元映像を選択する情報としての視点番号情報とそれらの優先順位を示す優先順位情報とを付属情報として当該２次元映像のデータと共に提供することを特徴とする立体視用映像提供方法。
2. 立体視用映像として用いられる視点が異なる複数の２次元映像をデータとして提供する際に、各２次元映像のデータごとに付与された視点番号情報又は映像データにおける各２次元映像領域ごとの視点番号情報を受信側で演算により取得するための情報と二つ以上の２次元映像を選択する情報としての視点番号情報を優先順に並べてなる情報とを付属情報として当該２次元映像のデータと共に提供することを特徴とする立体視用映像提供方法。
3. 立体視用映像として用いられる視点が異なる複数の２次元映像をデータとして提供する際に、各２次元映像のデータごとに付与された視点番号情報又は映像データにおける各２次元映像領域ごとの視点番号情報を受信側で演算により取得するための情報と一つ以上の２次元映像を選択する情報としての視点番号情報と前記複数の２次元映像が連続性を有する映像であるかどうかを示す情報とを付属情報として当該２次元映像のデータと共に提供することを特徴とする立体視用映像提供方法。
4. 請求項１乃至請求項３のいずれかに記載の立体視用映像提供方法において、前記選択するための情報により選択された２次元映像のデータを本来の立体視用以外の補助的画像としてどのような態様で表示すべきかを示す表示態様情報を付属情報として当該２次元映像のデータと共に提供することを特徴とする立体視用映像提供方法。
5. 請求項１乃至請求項４のいずれかに記載の立体視用映像提供方法において、前記選択するための情報により選択された２次元映像のデータをどのような目的で使用すべきかを示す使用目的情報を付属情報として当該２次元映像のデータと共に提供することを特徴とする立体視用映像提供方法。
6. 立体視用映像として用いられる視点が異なる複数の２次元映像をデータとして提供する際に、各２次元映像のデータごとに付与された視点番号情報又は映像データにおける各２次元映像領域ごとの視点番号情報を受信側で演算により取得するための情報と一つ以上の２次元映像を選択する情報としての視点番号情報と前記選択するための情報により選択された２次元映像のデータをどのような目的で使用すべきかを示す使用目的情報とを付属情報として当該２次元映像のデータと共に提供することを特徴とする立体視用映像提供方法。
7. 請求項５又は請求項６に記載の立体視用映像提供方法において、ビットの並びと使用目的の内容とを対応させると共に、各ビットの「０」「１」が各使用目的の有効／無効を意味することを特徴とする立体視用映像提供方法。
8. 請求項１乃至請求項７のいずれかに記載の立体視用映像提供方法において、情報の記述形式としてどの記述形式が採用されているかを示す情報を付属情報として２次元映像のデータと共に提供することを特徴とする立体視用映像提供方法。
9. 請求項１乃至請求項８のいずれかに記載の立体視用映像提供方法において、情報の提供を、放送、通信、記録媒体への記録のいずれかにより行なうことを特徴とする立体視用映像提供方法。
10. 視点が異なる複数の２次元映像データに基づいて立体視用映像を生成する立体映像表示装置において、前記２次元映像データに付属する付属情報から各２次元映像の視点番号情報と２次元映像を選択する情報としての視点番号情報とを取得する手段と、本来の立体視用の映像処理以外で一つ又は複数の２次元映像データを選択することが必要とされる処理を実行する場合に、前記選択する情報としての視点番号情報によって指定される２次元映像データを選択する手段と、を備えたことを特徴とする立体映像表示装置。
11. 視点が異なる複数の２次元映像データに基づいて立体視用映像を生成する立体映像表示装置において、前記２次元映像データに付属する付属情報から各２次元映像の視点番号情報と二つ以上の２次元映像を選択する情報としての視点番号情報とを取得する手段と、本来の立体視用の映像処理以外で所定数の２次元映像データを選択することが必要とされる処理を実行する場合に、当該所定数の２次元映像データを前記選択する情報としての視点番号情報の並び順に従って選択する手段と、を備えたことを特徴とする立体映像表示装置。
12. 視点が異なる複数の２次元映像データに基づいて立体視用映像を生成する立体映像表示装置において、前記２次元映像データに付属する付属情報から各２次元映像の視点番号情報と二つ以上の２次元映像を選択する情報としての視点番号情報とそれらの優先順位を示す優先順位情報とを取得する手段と、本来の立体視用の映像処理以外で所定数の２次元映像データを選択することが必要とされる処理を実行する場合に、当該所定数の２次元映像データを前記選択する情報としての視点番号情報及び優先順位情報によって選択する手段と、を備えたことを特徴とする立体映像表示装置。
13. 視点が異なる複数の２次元映像データに基づいて立体視用映像を生成する立体映像表示装置において、前記２次元映像データに付属する付属情報から各２次元映像の視点番号情報と２次元映像を選択する情報としての視点番号情報と前記選択するための情報により選択された２次元映像のデータを本来の立体視用以外の補助的画像としてどのような態様で表示すべきかを示す表示態様情報とを取得する手段と、本来の立体視用の映像処理以外で一つ又は複数の２次元映像データを選択することが必要とされる処理を実行する場合に、前記選択する情報としての視点番号情報によって指定される２次元映像データを選択する手段と、前記選択した２次元映像データと前記表示態様情報とに基づいて当該表示態様による映像表示を行う手段と、を備えたことを特徴とする立体映像表示装置。
14. 請求項１０乃至請求項１３のいずれかに記載の立体映像表示装置において、前記本来の立体視用の映像処理以外の処理は、視点が異なる複数の２次元映像データの内容を示すために一つ又は複数の２次元映像データを縮小処理して画面に表示する処理であることを特徴とする立体映像表示装置。
15. 請求項１０乃至請求項１３のいずれかに記載の立体映像表示装置において、前記本来の立体視用の映像処理以外の処理は、視点が異なる複数の２次元映像データのなかからプリントアウト用及び／又は画像配信用に一つ又は複数の２次元映像データを選択する処理であることを特徴とする立体映像表示装置。
16. 視点が異なる複数の２次元映像データに基づいて立体視用映像を生成する立体映像表示装置において、前記２次元映像データに付属する付属情報から各２次元映像の視点番号情報と２次元映像を選択する情報としての視点番号情報と前記選択するための情報により選択された２次元映像のデータをどのような目的で使用すべきかを示す使用目的情報とを取得する手段と、前記使用目的に対応する処理を実行する場合に前記選択する情報としての視点番号情報によって指定される２次元映像データを選択する手段と、を備えたことを特徴とする立体映像表示装置。
17. 視点が異なる複数の２次元映像データに基づいて立体視用映像を生成する立体映像表示装置において、前記２次元映像データに付属する付属情報から各２次元映像の視点番号情報と二つ以上の２次元映像を選択する情報としての視点番号情報とを取得する手段と、本来の立体視用の映像処理で前記複数の２次元映像データの数よりも少ない所定数の２次元映像データを選択する場合に、当該所定数の２次元映像データを前記選択する情報としての視点番号情報に基づいて選択する手段と、を備えたことを特徴とする立体映像表示装置。
18. 請求項１７に記載の立体映像表示装置において、前記選択された所定数の２次元映像のなかで前記選択する情報としての視点番号情報に一致する視点番号情報を持つ２次元映像が中央側となるように立体視用の映像処理を行うことを特徴とする立体映像表示装置。
19. 請求項１７又は請求項１８に記載の立体映像表示装置において、前記付属情報から前記複数の２次元映像が連続映像であるのかどうかを示す情報を取得する手段を備え、前記複数の２次元映像が連続映像であることを示す情報を得たときには、前記所定数の選択された２次元映像に前記複数の２次元映像における第１番目の２次元映像と最終番目の２次元映像とが存在することを許容するように構成されたことを特徴とする立体映像表示装置。
20. 請求項１７又は請求項１８に記載の立体映像表示装置において、前記付属情報から前記複数の２次元映像が連続映像であるのかどうかを示す情報を取得する手段を備え、前記複数の２次元映像が連続映像でないことを示す情報を得たときには、前記所定数の選択された２次元映像に前記複数の２次元映像における第１番目の２次元映像と最終番目の２次元映像とが存在する場合に、第１番目の２次元映像又は最終番目の２次元映像が排除されるように選択映像のシフトを行って新たに一つ以上の２次元映像を選択することを特徴とする立体映像表示装置。
21. 請求項１０乃至請求項２０のいずれかに記載の立体映像表示装置において、付属情報から情報の記述形式としてどの記述形式が採用されているかを示す情報を取得する手段を備え、前記情報を取得できた場合には当該情報にて示される記述形式に基づいて付属情報の内容を判断するように構成されたことを特徴とする立体映像表示装置。

Images