JP5991596B2 - 映像処理装置、送信装置、映像処理システム、映像処理方法、送信方法、コンピュータプログラム及び集積回路 - Google Patents

Description

本発明は、トランスポートストリームのデータを処理する技術に関し、特に３Ｄ映像とともに表示すべき表示データについての処理技術に関するものである。

現行の２Ｄ放送（立体視を行なわない放送）において、字幕を映像とは別のＥＳ（ＥｌｅｍｅｎｔａｒｙＳｔｒｅａｍ）にて送出することにより、受信装置側で表示すべき字幕の言語の選択すること、及び字幕の表示、非表示を切り替えることが可能であり、字幕を表示する際には、２Ｄ放送から送出された２Ｄ映像とともに選択された言語の字幕が表示される。

視聴者が立体的な映像として見ることができる３Ｄ映像においても、２Ｄ映像の場合と同様に、言語の選択、及び字幕の表示、非表示の切り替えを行い、字幕の表示が指定された場合に３Ｄ映像とともに選択された言語の字幕を表示する必要がある。

特開２０１０−２６８４３２号公報 特開２０１０−２６３６１６号公報

しかしながら、３Ｄ放送においても、２Ｄ放送と同様に言語の選択、及び字幕の表示、非表示の切り替えを行おうとする場合、３Ｄ表示すべき字幕を３Ｄ映像とは別のＥＳにて送出する必要がある。

字幕について３Ｄ表示を実現するためには、平面的な字幕を１つのＥＳにて配信し、受信側にて平面的な字幕から左目用の字幕、右目用の字幕を生成する方法、及び左目用の字幕と右目用の字幕とをそれぞれ個別のＥＳで配信し、受信側でそれぞれのＥＳから左目用の字幕と右目用の字幕とを生成する方法などがある。

３Ｄ放送の配信側では、配信する３Ｄ番組ごとに、当該３Ｄ番組についての配信すべきデータ量等を考慮して、字幕を配信する場合には平面的な字幕を１つのＥＳにて配信するか、平面的な字幕と、左目用の字幕及び右目用の字幕とをそれぞれ配信するかといった配信形態を決定している。そのため、受信側である映像を処理する装置（映像処理装置）では、字幕のＥＳのデコードにより、字幕のＥＳの配信形態を特定することはできるが、デコードで配信形態を特定し、その後配信形態に応じた字幕表示を行うと、配信形態の特定までにデコードした字幕は表示されないため、字幕表示の遅延が生じる。このような遅延は、放送による３Ｄ映像の配信においては問題である。

そこで、本発明は、上記問題に鑑み、字幕などの表示データのストリームの配信形態を迅速に特定し、特定した配信形態に応じた処理方法により表示データを生成する映像処理装置、送信装置、映像処理システム、映像処理方法、送信方法、コンピュータプログラム及び集積回路を提供することを目的とする。

上記目的を達成するために、本発明は、３Ｄ映像の映像ストリームを受信しつつ、再生する映像処理装置であって、３Ｄ映像とともに表示される表示データのデータストリームを含み、且つ表示データについて左目用表示データと右目用表示データがそれぞれ個別にストリーム化された左目用のデータストリーム及び右目用のデータストリーム双方が存在するか否かを示す付加情報を含むトランスポートストリームを受信する受信手段と、前記付加情報に基づいて、前記トランスポートストリームに左目用のデータストリーム及び右目用のデータストリーム双方が存在するか否かを判別する判別手段と、存在すると判別された場合には左目用のデータストリームから左目用表示データを、右目用のデータストリームから右目用表示データをそれぞれ生成し、存在しないと判別された場合には前記データストリームから左目用表示データ及び右目用表示データを生成する表示データ生成手段とを備えることを特徴とする。

上記構成によると、映像処理装置は、トランスポートストリームに含まれる付加情報を用いて、左目用データストリーム及び右目用データストリームの存在の有無を判断するので、表示データのストリームの配信形態を迅速に特定し、特定した配信形態に応じた表示データの３Ｄ表示を迅速に行うことができる。

１ｐｌａｎｅ＋ｏｆｆｓｅｔの仕組みの一例を示す図である。 ２ｐｌａｎｅ＋ｏｆｆｓｅｔの仕組みの一例を示す図である。 映像処理システム１００の構成を示す図である。 映像配信装置２００の構成を示す図である。 ＥＳ属性情報一覧Ｔ１００のデータ構造の一例を示す図である。 ＰＭＴのデータ構造の一例を示す図である。 ３Ｄ字幕ペア記述子Ｄ２００の一例を示す図である。 ３Ｄ字幕ペア記述子Ｄ２００を記載した場合のＰＭＴの一部を模式的に示す図である。 ＴＳ（トランスポートストリーム）４００の構造を模式的に示した図である。 映像処理装置３００の構成を示す図である。 映像配信装置２００の配信に係る処理を示す流れ図である。 デコーダ割当部３５１の動作を示す流れ図である。 字幕表示を実現するために配信される画像のイメージ図である。 映像処理装置の処理能力に応じた配信がされた場合のデコーダ割当部３５１の動作を示す流れ図である。 映像処理システム１００ａの構成を示す図である。 映像配信装置２００ａの構成を示す図である。 ３Ｄ字幕記述子Ｄ５００の一例を示す図である。 ３Ｄ字幕記述子Ｄ５００を記載した場合のＰＭＴの一部を模式的に示す図である。 映像処理装置３００ａの構成を示す図である。 デコーダ割当部３５１ａの動作を示す流れ図である。図２１へ続く。 デコーダ割当部３５１ａの動作を示す流れ図である。図２０から続く。 映像配信装置２００の機能を実現するＬＳＩの構成を示す図である。 映像処理装置３００の機能を実現するＬＳＩの構成を示す図である。

１．本発明の基礎となった知見
特許文献１では、ディスク上に左目用の字幕データと、右目用の字幕データが個別に準備されており、映像を再生する装置側では、ディスクからこれら字幕データを個別に読み込んで、左目用の字幕と右目用の字幕とを生成して出力する技術が開示されている。

特許文献２では、映像について左目用映像のストリームと右目用映像のストリームを個別に準備し、映像を再生する装置側では、これらストリームから左目用映像と右目用映像とを個別に生成する技術が開示されている。このとき、字幕は、１つのストリーム（ＥＳ）で準備されており、この字幕のＥＳから左目用映像と右目用映像とが生成される。

特許文献１、２ともディスク上に記録された映像及び字幕を再生することが前提となっている。そのため、再生対象である映像に対応して、平面的な字幕と、左目用の字幕及び右目用の字幕とがそれぞれストリーム化されて記録されていても、再生する装置側でこれらストリームの内容を解析して、字幕を表示する際の処理としてどの方法を用いるかを決定しても何ら問題はない。なぜなら、ディスク上に１つの番組が既に記録されているので、字幕のストリームを解析して、その後再生を始めても、表示遅延が生じることはないからである。

しかしながら、放送により配信される番組では、番組の映像及び字幕を受信しつつ、表示を行うため、映像等について迅速な解析が要求される。

そこで、本発明者らは、字幕等の表示データのストリームを処理する前に参照される付加情報に着目し、当該付加情報により字幕のＥＳの配信形態を迅速に特定し、特定した配信形態に応じた処理方法で字幕を生成する映像処理装置を想到するに至った。

本発明の一態様である、３Ｄ映像の映像ストリームを受信しつつ、再生する映像処理装置は、３Ｄ映像とともに表示される表示データのデータストリームを含み、且つ表示データについて左目用表示データと右目用表示データがそれぞれ個別にストリーム化された左目用のデータストリーム及び右目用のデータストリーム双方が存在するか否かを示す付加情報を含むトランスポートストリームを受信する受信手段と、前記付加情報に基づいて、前記トランスポートストリームに左目用のデータストリーム及び右目用のデータストリーム双方が存在するか否かを判別する判別手段と、存在すると判別された場合には左目用のデータストリームから左目用表示データを、右目用のデータストリームから右目用表示データをそれぞれ生成し、存在しないと判別された場合には前記データストリームから左目用表示データ及び右目用表示データを生成する表示データ生成手段とを備えることを特徴とする。

２．第１の実施の形態
以下、図面を参照しながら、本実施の形態について詳細に説明する。

２．１ 字幕文の立体視について
先ず、本実施の形態を説明する上で基礎となる技術である字幕文の３Ｄ表示の手法について説明する。

字幕を３Ｄ表示するための手法として、２つの再生モードがある。１つは、１ｐｌａｎｅ＋ｏｆｆｓｅｔという再生モードであり、もう一つは、２ｐｌａｎｅ＋ｏｆｆｓｅｔという再生モードである。

図１は、１ｐｌａｎｅ＋ｏｆｆｓｅｔの仕組みの一例を示す図である。このモードでは、一般的に字幕は１つのＥＳ（Ｅｌｅｍｅｎｔａｒｙ Ｓｔｒｅａｍ）で配信され、デジタルテレビなどの映像処理装置は字幕データをデコードして字幕プレーンの画像Ｇ１０を作成する。そして、作成した字幕プレーンの画像Ｇ１０をオフセットの値だけ右にシフトした画像（左目字幕画像）Ｇ１１が生成され、左目映像と重畳される。また、そして、作成した字幕プレーンの画像Ｇ１０をオフセットの値だけ左にシフトした画像（右目字幕画像）Ｇ１２が生成され、右目映像と重畳される。字幕画像が重畳された左目映像、右目映像を順に表示することで、字幕画像は表示画面よりも手前に見え、３Ｄ表示が可能となる。ここで、オフセットの値は、３Ｄ映像に対して適切に字幕を重畳するためのもので、画素数で表される。映像と同期させる必要があるので、３Ｄ映像のＥＳに含めて送信される。例えば、オフセットの値は、３Ｄ映像データがＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）形式で符号化されている場合はＧＯＰ（Ｇｒｏｕｐ ｏｆ Ｐｉｃｔｕｒｅｓ）や各画像フレームのｕｓｅｒ ｄａｔａとして埋め込まれる。

なお、オフセットの値がマイナスだった場合は、字幕プレーンの画像を左にシフトしたものを左目字幕画像とし、右にシフトしたものを右目字幕画像とすることで、字幕画像は表示画面よりも奥に見える。

このように、シフトするオフセットの値を設定することにより字幕プレーンＧ１３の奥行きを設定することができる。

１ｐｌａｎｅ＋ｏｆｆｓｅｔによる再生モードでは、字幕プレーンメモリが１つで良いため、３Ｄ字幕を作成するための映像処理装置の負担は少ないが、平面的な画像が手前に出てきたり、奥に引込んだりするという表示にすぎず、字幕や文字スーパーのテキスト文書やビットマップ等のオブジェクト自体が立体的に見えることはない。

図２は、２ｐｌａｎｅ＋ｏｆｆｓｅｔの仕組みの一例を示す図である。このモードでは、左目用の字幕データと右目用の字幕データを１つのＥＳで配信することも可能であるが、一般的には左目用の字幕データと右目用の字幕データは別々のＥＳとして２つのＥＳで配信される。受信側では、左目用の字幕データは左目用の字幕デコーダでデコードして左字幕プレーンの画像Ｇ２０を作成し、右目用の字幕データは右目用の字幕デコーダでデコードして右字幕プレーンの画像Ｇ２１を作成する。そして、作成した左字幕プレーンの画像Ｇ２０をオフセットの値だけ右にシフトした画像（左目字幕画像）Ｇ２２が生成され、左目映像と重畳される。また、そして、作成した右字幕プレーンの画像Ｇ２１をオフセットの値だけ左にシフトした画像（右目字幕画像）Ｇ２３が生成され、右目映像と重畳される。字幕画像が重畳された左目映像、右目映像を順に表示することで、字幕画像は表示画面よりも手前に見え、３Ｄ表示が可能となる。

なお、オフセットの値がマイナスだった場合は、左字幕プレーンの画像を左にシフトしたものを左目字幕画像とし、右字幕プレーンの画像を右にシフトしたものを右目字幕画像とし、字幕画像は表示画面よりも奥に見える。

このように、シフトするオフセットの値を設定することにより字幕プレーンＧ２４の奥行きを設定することができる。

２ｐｌａｎｅ＋ｏｆｆｓｅｔによる再生モードでは、左目用字幕画像と右目用字幕画像で別々の字幕プレーンの画像を用いることで、字幕や文字スーパーのテキスト文書やビットマップ等のオブジェクト自体が立体的に見えるが、字幕デコーダや字幕プレーンメモリが２つずつ必要となり、映像処理装置の処理負担が大きい。

以上が、３Ｄ字幕を立体視するための２つのモードの概要である。

２．２ 映像処理システム１００
ここでは、本実施の形態における映像処理システム１００の概要について説明する。

映像処理システム１００は、図３に示すように、映像配信装置２００及び映像処理装置３００、３０１、３０２から構成されている。

映像配信装置２００は、番組の映像、音声及び当該番組に対する字幕が符号化され、１つのトランスポートストリームとして番組の映像、音声及び当該番組に対する字幕をデジタル放送として配信するものである。配信事業者は、映像配信装置２００を利用して、番組の映像、音声及び当該番組に対する字幕を配信することができる。

映像処理装置３００、３０１、３０２は、映像配信装置２００から配信されたトランスポートストリームを受信し、受信したトランスポートストリームから番組の映像、音声及び字幕を生成し、表示するものである。

映像配信装置２００は、３Ｄ非対応の２Ｄ映像処理装置や、１つのＥＳで字幕を配信する方法にのみ対応した３Ｄ映像処理装置や、１つのＥＳでの配信及び２つのＥＳでの字幕の配信に対応した３Ｄ映像処理装置など、様々な処理能力の装置に対応するため、１つの番組に対して、２Ｄ用の字幕セット、３Ｄ用の字幕を１つのＥＳで配信する字幕セット、３Ｄ用の２つのＥＳで配信する字幕セットのなどの字幕セットのうち２つ以上の字幕セットを生成し、配信する。生成される字幕セットは、平面的に見えたり、立体的に見えたりとユーザが感じる視覚効果は異なるが、同等の内容を伝えるための字幕データである。ここで、１ＥＳとは、平面的な字幕の映像がストリーム化されたものであり、字幕を２Ｄ表示、及び１ｐｌａｎｅ＋ｏｆｆｓｅｔを用いた３Ｄ表示する場合に用いられる。つまり、１ＥＳで、２Ｄ用の字幕セット及び１ｐｌａｎｅ＋ｏｆｆｓｅｔによる３Ｄ表示用の字幕セットの双方を実現できる。２ＥＳとは、左目用字幕のＥＳと右目用字幕のＥＳとからなるものであり、２ｐｌａｎｅ＋ｏｆｆｓｅｔを用いた３Ｄ表示する場合に用いられる。また、以降において、字幕セットを単に字幕と表記する場合がある。

映像処理装置３００、３０１、３０２は、複数ある字幕セットのうち、自身の処理能力に応じた１つの字幕セットのみ表示する。

なお、映像処理装置３００は、１ＥＳ及び２ＥＳでの字幕の配信に対応した装置であり、映像処理装置３０１は、１ＥＳで字幕を配信する方法にのみ対応した装置であり、映像処理装置３０２は、３Ｄ非対応の装置（つまり２Ｄ映像を表示する装置）である。

また、本実施の形態では、ＭＰＥＧ２−ＴＳ（Ｔｒａｎｓｐｏｒｔ Ｓｔｒｅａｍ）規格に規定されているＳＩ／ＰＳＩ（ＳｅｒｖｉｃｅＩｎｆｏｒｍａｔｉｏｎ／Ｐｒｏｇｒａｍ Ｓｐｅｃｉｆｉｃ Ｉｎｆｏｒｍａｔｉｏｎ）情報を利用する。

ＳＩとは番組に関する情報を映像処理装置が解釈可能な形式で符号化した各種テーブルの総称である。これは、ＡＲＩＢ（Ｔｈｅ Ａｓｓｏｃｉａｔｉｏｎ ｏｆ Ｒａｄｉｏ Ｉｎｄｕｓｔｒｉｅｓ ａｎｄ Ｂｕｓｉｎｅｓｓｅｓ）によって規定されており、例えば、ＮＩＴ（Ｎｅｔｗｏｒｋ Ｉｎｆｏｒｍａｔｉｏｎ Ｔａｂｌｅ）、ＥＩＴ（Ｅｖｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ Ｔａｂｌｅ）のテーブルがこれに含まれる。

ＰＳＩとはＴＳに含まれる各ＥＳがどの番組に属しているかを記載した情報を映像処理装置が解釈可能な形式で符号化した各種テーブルの総称である。ＩＳＯ／ＩＥＣ１３８１８−１（Ｉｎｔｅｒｎａｔｉｏｎａｌ Ｏｒｇａｎｉｚａｔｉｏｎ ｆｏｒ Ｓｔａｎｄａｒｄｉｚａｔｉｏｎ／Ｉｎｔｅｒｎａｔｉｏｎａｌ Ｅｌｅｃｔｒｏｔｅｃｈｎｉｃａｌ Ｃｏｍｍｉｓｓｉｏｎ １３８１８−１）及びＡＲＩＢが策定した規格に規定されており、例えば、ＰＡＴ（Ｐｒｏｇｒａｍ Ａｓｓｏｃｉａｔｉｏｎ Ｔａｂｌｅ）やＰＭＴ（Ｐｒｏｇｒａｍ Ｍａｐ Ｔａｂｌｅ）のテーブルがこれに含まれる。

２．３ 映像配信装置２００
映像配信装置２００は、図４に示すように、ＥＳ属性情報記憶部２０１、番組配列情報生成部２０２、ＡＶエンコーダ２０３、字幕符号化部２０４、音声符号化部２０５、多重化部２０６及び配信部２０７から構成されている。

（１）ＥＳ属性情報記憶部２０１
ＥＳ属性情報記憶部２０１は、後述する番組配列情報生成部２０２がＳＩ／ＰＳＩ情報を生成するためのＥＳ属性情報を記憶するものである。

具体的には、ＥＳ属性情報記憶部２０１は、図５に示すＥＳ属性情報一覧Ｔ１００を記憶している。

ＥＳ属性情報一覧Ｔ１００は、ＥＳ名、ｓｔｒｅａｍ＿ｔｙｐｅ、ｖｉｅｗ、ＰＩＤ及びｃｏｍｐｏｎｅｎｔ＿ｔａｇからなる組を複数記憶するための領域を有している。ＥＳ名、ｓｔｒｅａｍ＿ｔｙｐｅ、ｖｉｅｗ、ＰＩＤ及びｃｏｍｐｏｎｅｎｔ＿ｔａｇからなる組が１つのＥＳ属性情報となる。

「ＥＳ名」欄には、各ＥＳを識別するためにつけられた名称が格納される。なお、各ＥＳを識別できればよいため、名称ではなく、番号などを付与して識別してもよい。

「ｓｔｒｅａｍ＿ｔｙｐｅ」欄には、当該ＥＳのストリームの種別（映像、字幕、音声等）を識別する情報が格納される。例えば、デジタル放送では映像のストリームは「０ｘ１０」、字幕のストリームは「０ｘ０６」とＡＲＩＢの運用規定で定められている。そこで、左目用映像及び右目用映像それぞれのストリームに対しては「０ｘ１０」が、左目用字幕及び右目用字幕それぞれのストリームに対しては「０ｘ０６」が、それぞれ格納される。

「ｖｉｅｗ」欄には、当該ＥＳが左目用か右目用かを示すための識別情報が格納される。なお、ここでは、説明の便宜上、左目用の映像及び字幕については識別情報として“ｌｅｆｔ”と記載し、右目用の映像及び字幕については“ｒｉｇｈｔ”と記載する。また、２Ｄ用のＥＳもしくは１ＥＳで字幕を配信するＥＳについては、左目用、右目用の区別がないため、識別情報には、対応するＥＳは左目及び右目の区別がされない旨の情報が格納される。ここでは、説明の便宜上「−」と記載する。

「ＰＩＤ」欄には、対応するＥＳに割り当てられ、当該ＥＳのＴＳ（Ｔｒａｎｓｐｏｒｔ Ｓｔｒｅａｍ）パケットに付与すべきＰＩＤの値が格納される。

「ｃｏｍｐｏｎｅｎｔ＿ｔａｇ」欄には、当該ＥＳに付与すべきｃｏｍｐｏｎｅｎｔ＿ｔａｇの値が格納される。

例えば、図５に示すＥＳ属性情報Ｔ１０１は、「ＥＳ名」が左目映像、「ｓｔｒｅａｍ＿ｔｙｐｅ」が０ｘ１０、「ｖｉｅｗ」が「ｌｅｆｔ」、「ＰＩＤ」が「０ｘ０１１０」であるので、ＰＩＤが「０ｘ０１１０」であるＥＳは、左目映像のストリームであることが分かる。

また、図５に示すＥＳ属性情報Ｔ１０２は、「ＥＳ名」が１ＥＳ字幕、「ｓｔｒｅａｍ＿ｔｙｐｅ」が「０ｘ０６」、「ｖｉｅｗ」が「−」、「ＰＩＤ」が「０ｘ０１１２」であるので、ＰＩＤが「０ｘ０１１２」であるＥＳは、２Ｄ用の字幕もしくは３Ｄ用の字幕映像を１つのＥＳで配信しているストリームであることが分かる。

さらには、ＥＳ属性情報Ｔ１０３は、「ＥＳ名」が左目用字幕、「ｓｔｒｅａｍ＿ｔｙｐｅ」が０ｘ０６、「ｖｉｅｗ」が「ｌｅｆｔ」、「ＰＩＤ」が「０ｘ０１１３」であるので、ＰＩＤが「０ｘ０１１３」であるＥＳは、左目用字幕のストリームであることが分かる。

なお、図５において図示していないが、ＥＳ属性情報一覧Ｔ１００には、音声のＥＳに関するＥＳ属性情報も格納されている。また、ＥＳ属性情報記憶部２０１は、その他ＳＩ／ＰＳＩ情報を作成するために番組に関する情報など様々な情報をも格納している。

（２）番組配列情報生成部２０２
番組配列情報生成部２０２は、ＥＳ属性情報記憶部２０１で格納されている情報を基に、ＳＩ／ＰＳＩ情報を作成し、生成したＳＩ／ＰＳＩ情報を多重化部２０６へ出力する。

ここで、ＳＩ／ＰＳＩ情報として生成される各種テーブルとしては、例えば、ＮＩＴ、ＥＩＴ、ＰＡＴ及びＰＭＴなどである。

なお、１つの番組を構成するＥＳの構成によって、ＳＩ／ＰＳＩ情報の各種テーブルに挿入する記述子や、パラメータの値が異なる。そのため、番組配列情報生成部２０２は、あらゆるＥＳ構成に対応した複数のＳＩ／ＰＳＩ情報を映像の配信前に予め作成しておいても良いし、配信時にＥＳの構成を考慮してＳＩ／ＰＳＩ情報を作成してもよい。

番組配列情報生成部２０２は、ＳＩ／ＰＳＩ情報の１つである、ＰＭＴを生成する。

以下、番組配列情報生成部２０２で生成されるＰＭＴについて説明する。ＰＭＴは、配信する番組の情報や、番組のＥＳ構成及び、それぞれのＥＳに関する情報を格納している。

図６は、ＰＭＴのデータ構造を示す図である。個々のパラメータの意味については、ＩＳＯ／ＩＥＣ１３８１８−１（ＭＰＥＧ−２）にて規定されているため説明を省略し、本発明に関連する部分のみ説明を行なう。ＰＭＴには記述子を配置可能な箇所が２箇所ある。

１つ目はファーストループＤ１００と呼ぶ部分である。ファーストループＤ１００の「ｄｅｓｃｒｉｐｔｏｒ（）」には記述子の配置が可能である。「ｄｅｓｃｒｉｐｔｏｒ（）」部分はｆｏｒ文で囲まれており、複数の記述子を挿入可能であることが分かる。ここには、番組全体に関わる記述子を配置する。

２つ目は、ＥＳ情報記載箇所Ｄ１０１に含まれるセカンドループＤ１０２と呼ぶ部分である。ＥＳ情報記載箇所Ｄ１０１は、ファーストループＤ１００の直後からｆｏｒ文が始まっており、このｆｏｒ文は番組に含まれるＥＳの数だけ繰り返される。このｆｏｒ文内のパラメータ、例えば、ｓｔｒｅａｍ＿ｔｙｐｅやｅｌｅｍｅｎｔａｒｙ＿ＰＩＤなどは、当該ＥＳに関するパラメータである。セカンドループＤ１０２は、このＥＳ情報記載箇所Ｄ１０１に含まれている。セカンドループＤ１０２の「ｄｅｓｃｒｉｐｔｏｒ（）」には記述子の配置が可能である。「ｄｅｓｃｒｉｐｔｏｒ（）」部分はｆｏｒ文で囲まれており、複数の記述子を挿入可能であることが分かる。ここには、当該ＥＳに関わる記述子を配置する。

ＥＳ情報記載箇所Ｄ１０１のｅｌｅｍｅｎｔａｒｙ＿ＰＩＤはＴＳの１つ１つのパケットであるトランスポートパケットを識別するための情報である。同一の映像ＥＳ、同一の字幕ＥＳ、同一のＳＩ／ＰＳＩのテーブルのトランスポートパケットに対しては、それぞれ同じｅｌｅｍｅｎｔａｒｙ＿ＰＩＤが付与されている。ｅｌｅｍｅｎｔａｒｙ＿ＰＩＤは単にＰＩＤとも呼ばれる。

例えば、左目用映像のＥＳ、右目用映像のＥＳ、１ＥＳ字幕のＥＳ、左目用字幕のＥＳ、右目用字幕のＥＳの合計５つのＥＳから１つの番組が構成されている場合、ＥＳ情報記載箇所Ｄ１０１には、ＥＳ情報を記載する部分が５回出現する。そして、ＥＳ属性情報に基づいてｓｔｒｅａｍ＿ｔｙｐｅやｅｌｅｍｅｎｔａｒｙ＿ＰＩＤなどに左目用字幕のＥＳに関する情報をパラメータとして設定している場合には、セカンドループＤ１０２には、左目用字幕のＥＳに関する記述子が配置される。

図７は、ＩＳＯ／ＩＥＣ１３８１８−１（ＭＰＥＧ−２）及びＡＲＩＢ規格を拡張することにより、ＰＭＴのセカンドループＤ１０２に配置する３Ｄ字幕ペア記述子（ｓｔｅｒｅｏｓｃｏｐｉｃ＿ｓｕｂｔｉｔｌｅ＿ｐａｉｒ＿ｄｅｓｃｒｉｐｔｏｒ）Ｄ２００の一例を模式的に示す図である。３Ｄ字幕ペア記述子Ｄ２００は、ＥＳ情報にてｓｔｒｅａｍ＿ｔｙｐｅやｅｌｅｍｅｎｔａｒｙ＿ＰＩＤなどに、左目用字幕のＥＳに関する情報をパラメータとして設定している場合及び右目用字幕のＥＳに関する情報をパラメータとして設定している場合に配置される。

３Ｄ字幕ペア記述子Ｄ２００は、“ｄｅｓｃｒｉｐｔｏｒ＿ｔａｇ”、“ｄｅｓｃｒｉｐｔｏｒ＿ｌｅｎｇｔｈ”、“ｓｕｂｔｉｔｌｅ＿ｖｉｅｗ、ｒｅｓｅｒｖｅｄ”、“ｐａｉｒ＿ＰＩＤ”というパラメータから構成されている。

“ｄｅｓｃｒｉｐｔｏｒ＿ｔａｇ”は、本記述子が３Ｄ字幕ペア記述子であることを３Ｄ映像表示装置にて識別するための情報であり、固定値が設定される。例えばここでは、「０ｘ８０」が設定される。

“ｄｅｓｃｒｉｐｔｏｒ＿ｌｅｎｇｔｈ”は、このフィールドの直後に続く記述子のデータ部分の全バイト長を示す情報である。本記述子は固定長であり、後続のバイト長は２であるため、固定値「２」が設定される。

“ｓｕｂｔｉｔｌｅ＿ｖｉｅｗ”は、当該ＥＳが左右どちらの字幕のＥＳであるかを示す情報である。左目用字幕のＥＳであれば「０」、右目用字幕のＥＳであれば「１」が設定される。

“ｒｅｓｅｒｖｅｄ”は、将来拡張等のため、パラメータ設定には使用しない領域である。この２ビットにはすべて「１」を設定する。

“ｐａｉｒ＿ＰＩＤ”は当該ＥＳとペアとなる字幕ＥＳのＰＩＤを示す情報である。当該ＥＳが左目用字幕のＥＳであれば右目用字幕のＥＳのＰＩＤ、右目用字幕のＥＳであれば左目用字幕のＥＳのＰＩＤの値が設定される。

図８は、番組配列情報生成部２０２で生成され、映像処理装置に配信するＰＭＴの一部を模式的に示す図である。図６のＰＭＴのデータ構造で示したＥＳ情報記載箇所Ｄ１０１に実際に番組に含まれる全てのＥＳに関するＥＳの情報が記載されているのが、ＥＳ情報記載箇所Ｄ３００である。なお、図６に示すとおり、本来はｅｌｅｍｅｎｔａｒｙ＿ＰＩＤの前後にｒｅｓｅｒｖｅｄ領域およびＥＳ＿ｉｎｆｏ＿ｌｅｎｇｔｈの記載があるが、図８に記載した各ＥＳ情報Ｄ３０１、Ｄ３０４、Ｄ３０５、Ｄ３０６、Ｄ３０７では、これらの記載を省略している。このうち、左目用字幕のＥＳ情報が記載されているのが、左目用字幕のＥＳ情報Ｄ３０１である。この中で、図６で示す３Ｄ字幕ペア記述子Ｄ２００に実際に左目用字幕ＥＳの情報が記載されているのが、左目用字幕ＥＳのデータ構造Ｄ３０２である。また、従来のｓｔｒｅａｍ＿ｉｄｅｎｔｉｆｉｅｒ＿ｄｅｓｃｒｉｐｔｏｒに、実際に左目用字幕ＥＳの情報が記載されているのが、ｓｔｒｅａｍ＿ｉｄｅｎｔｉｆｉｅｒ＿ｄｅｓｃｒｉｐｔｏｒ Ｄ３０３である。ｓｔｒｅａｍ＿ｉｄｅｎｔｉｆｉｅｒ＿ｄｅｓｃｒｉｐｔｏｒ Ｄ３０３の各パラメータの意味については、ＩＳＯ／ＩＥＣ１３８１８−１及びＡＲＩＢが策定した規格に規定されているため、説明を省略する。

左目用字幕のＥＳ情報Ｄ３０１のうちｓｔｒｅａｍ＿ｔｙｐｅには、図５のＥＳ属性情報Ｔ１０３の「ｓｔｒｅａｍ＿ｔｙｐｅ」で示さる値「０ｘ０６」が代入されている。Ｅｌｅｍｅｎｔａｒｙ＿ＰＩＤには、図５のＥＳ属性情報Ｔ１０３の「ＰＩＤ」で示される値「０ｘ０１１３」が代入されている。ｄｅｓｃｒｉｐｔｏｒ＿ｔａｇは、記述子のＩＤである「０ｘ８０」が代入されている。ｄｅｓｃｒｉｐｔｏｒ＿ｌｅｎｇｔｈには、後続のバイト数である「０ｘ２」が代入されている。また、図５のＥＳ属性情報Ｔ１０３の「ｖｉｅｗ」では「ｌｅｆｔ」が設定されているので、ｓｕｂｔｉｔｌｅ＿ｖｉｅｗには、値「０ｘ０」が代入されている。ｒｅｓｅｒｖｅｄには、固定値である「０ｘ２」が代入されている。ｐａｉｒ＿ＰＩＤには、このＥＳが左目用字幕のＥＳであるため、右目用字幕のＥＳのＥｌｅｍｅｎｔａｒｙ＿ＰＩＤの値である「０ｘ０１１４」が代入されている。右目用字幕のＥＳのＥｌｅｍｅｎｔａｒｙ＿ＰＩＤの値は、右目用字幕のＥＳ属性情報Ｔ１０４から取得可能である。ｓｔｒｅａｍ＿ｉｄｅｎｔｉｆｉｅｒ＿ｄｅｓｃｒｉｐｔｏｒの内容については既存であるため説明を省略する。

なお、本実施の形態では、３Ｄ字幕ペア記述子は、字幕ＥＳに対するＥＳ情報に記載するとしているが、これに限定されない。３Ｄ字幕ペア記述子は、文字スーパー用のテキスト文字列やビットマップのＥＳに対するＥＳ情報に記載してもよい。なぜなら、ＡＲＩＢ規格では、字幕プレーンに字幕及び文字スーパーを表示することができるよう定められている。そのため、字幕と文字スーパーとは同様の方式にて立体視を実現できるからである。そこで、文字スーパーを３Ｄ表示する際には、２ＥＳによる文字スーパーのＥＳ、及び文字スーパーに対するＥＳ情報に３Ｄ字幕ペア記述子と同様の内容の記述子が記載されたＰＭＴを配信することで、受信側の装置では、２ＥＳによる文字スーパーについて２ｐｌａｎｅ＋ｏｆｆｓｅｔ方式による３Ｄ表示が可能となる。

（３）ＡＶエンコーダ２０３
ＡＶエンコーダ２０３は、ＭＰＥＧ−２、ＭＰＥＧ−４などの方式を用いて、ビデオカメラ等で撮影した映像から左目用映像のＥＳと右目用映像のＥＳを作成し、生成した左目用映像のＥＳと右目用映像のＥＳを多重化部２０６へ出力する。

なお、各左目映像のＥＳに含まれるピクチャ毎に、字幕に対するオフセット値が付与されている。

（４）字幕符号化部２０４
字幕符号化部２０４は、字幕に対してＭＰＥＧ−１、ＭＰＥＧ−２などの方式を使ってエンコードして、１ＥＳで配信する字幕のＥＳ、左目用字幕のＥＳ及び右目用字幕のＥＳなどを生成し、生成した各字幕のＥＳを多重化部２０６へ出力する。

（５）音声符号化部２０５
音声符号化部２０５は、音声データを、リニアＰＣＭなどの方式で圧縮・符号化して、音声のＥＳを生成し、生成した音声のＥＳを多重化部２０６へ出力する。

（６）多重化部２０６
多重化部２０６は、ＳＩ／ＰＳＩ情報、左目用映像のＥＳ、右目用映像のＥＳ、１ＥＳで配信する字幕のＥＳ、左目用字幕のＥＳ、右目用字幕のＥＳに対して、必要に応じてパケット化した後、多重化して、ＭＰＥＧ２−ＴＳ形式の１つ以上のＴＳ（Ｔｒａｎｓｐｏｒｔ Ｓｔｒｅａｍ）を生成し、生成したＴＳを配信部２０７へ出力する。ＴＳの生成の際、各パケットに付与するＰＩＤは、ＳＩ／ＰＳＩ情報の記載に従う。

（７）配信部２０７
配信部２０７は、放送波やＣＤＮ網やオープンインターネット網を介して、１つ以上の映像表示装置に、多重化部２０６で生成した１つ以上のＴＳを、デジタル放送として配信する。

ここで、 図９は、多重化部２０６で生成され、配信部２０７で配信されるＴＳ４００の構造を模式的に示した図である。ＴＳ４００は、トランスポートパケットと呼ばれる１８８バイトのパケットの連続して構成されている。各トランスポートパケットには、ＰＩＤが含まれている。ＰＩＤは、当該トランスポートパケットを識別するための情報であり、同一の映像ＥＳ、同一の字幕ＥＳ、同一のＳＩ／ＰＳＩのテーブルのトランスポートパケットに対して、それぞれ同じＰＩＤが付与されている。このため、ＴＳ４００を受信した装置は、ＴＳ４００を、各ＥＳに分離したり、ＳＩ／ＰＳＩのテーブルを取り出したりすることが可能である。ＴＳ４００には、ＰＩＤの値が「０ｘ０００」、「０ｘ１０１」、「０ｘ１１０」、「０ｘ１１１」、「０ｘ１１２」、「０ｘ１１３」、「０ｘ１１４」のＥＳが多重化されていることが分かる。

２．４ 映像処理装置３００の構成
映像処理装置３００は、映像配信装置２００からのデジタル放送を受信して、映像とともに字幕を表示してユーザに立体視させるデジタルテレビであり、図１０に示すように、入力受付部３１１、分離処理部３１２、左ビデオデコーダ３１３、右ビデオデコーダ３１４、オフセット取得部３１５、左目映像出力部３１６、右目映像出力部３１７、字幕生成部３１８、音声デコーダ３１９、重畳部３２０、３２１及び表示処理部３２２から構成されている。

また、字幕生成部３１８は、図１０に示すように、メイン字幕デコーダ３６０、サブ字幕デコーダ３６１、左目用字幕プレーン３６２、右目用字幕プレーン３６３、左目字幕出力部３６４及び右目字幕出力部３６５を有している。

（１）入力受付部３１１
入力受付部３１１は、チャンネル切り替え、２Ｄ／３Ｄ切り替え、字幕のＯＮ／ＯＦＦ切り替えなどのユーザ入力を受け付け、ユーザ入力の内容に応じて、分離処理部３１２に取得すべきパケットを指示する。

（２）分離処理部３１２
分離処理部３１２は、映像配信装置２００から配信されたトランスポートストリームを受信し、左目用の映像パケット、右目用の映像パケット、音声パケット、字幕パケット等に分離し、対応するデコーダへ出力するものである。

分離処理部３１２は、図１０に示すように、分離部３５０及びデコーダ割当部３５１を有している。

（２−１）分離部３５０
分離部３５０は、映像配信装置２００から配信されたトランスポートストリーム（ＴＳ）４００を受信する。

分離部３５０は、入力受付部３１１で受け付けたユーザの指示に基づいて、受信したＴＳ４００からユーザが選択した番組のＳＩ／ＰＳＩの各種テーブル、映像、音声、字幕のパケットのみを取得する。

分離部３５０は、各種パケットの出力先をデコーダ割当部３５１に特定させるために、取得したＰＡＴ、ＰＭＴ等のＳＩ／ＰＳＩ情報をデコーダ割当部３５１へ出力する。

分離部３５０は、デコーダ割当部３５１からの指示により、各種パケットを適切なデコーダへ出力する。具体的には、分離部３５０は、取得した映像パケットが左目用の映像である場合には左ビデオデコーダ３１３へ、右目用の映像である場合には右ビデオデコーダ３１４へ出力する。分離部３５０は、取得した音声パケットを音声デコーダ３１９へ出力する。分離部３５０は、取得した字幕パケットを、デコーダ割当部３５１に指示に応じてメイン字幕デコーダ３６０及びサブ字幕デコーダ３６１の何れかに出力する。

（２−２）デコーダ割当部３５１
デコーダ割当部３５１は、ＰＡＴ、ＰＭＴ等のＳＩ／ＰＳＩ情報を解析して、各種パケットの出力先を特定するものである。

映像パケット、音声パケットについては、既存技術であるため、詳細な説明は省略する。

ここでは、字幕パケットについての出力先の特定について説明する。

デコーダ割当部３５１は、ユーザが選択している番組に関するＳＩ／ＰＳＩ情報の各種テーブル情報、例えばＰＭＴを参照し、複数ある字幕ＥＳのパケットの出力先の特定、つまり、複数ある字幕ＥＳのパケットをメイン字幕デコーダとサブ字幕デコーダに適切に割り当てる。なお、割り当て不要と判定された字幕ＥＳは、メイン字幕デコーダ及びサブ字幕デコーダのいずれにも割当てないことで、分離部３５０によるデコーダへの受け渡しを抑制する。例えば、２ＥＳで配信された字幕の左目用字幕のＥＳのパケットの出力先をメイン字幕デコーダ３６０に、右目用字幕のＥＳのパケットの出力先をサブ字幕デコーダ３６１に割り当てる。

デコーダ割当部３５１は、ＳＩ／ＰＳＩ情報の解析結果として、字幕が１ＥＳで配信されているか、２ＥＳで配信されているかを、字幕生成部３１８に通知する。

（３）左ビデオデコーダ３１３、右ビデオデコーダ３１４
左ビデオデコーダ３１３は、左目映像用の映像パケットを復号し、復号結果である左目用映像を左目映像出力部３１６に出力する。

右ビデオデコーダ３１４は、右目映像用のパケットを復号し、復号結果である右目用映像を右目映像出力部３１７に出力する。

なお、ビデオデコーダによるパケットの復号の動作が既存技術であるため、詳細な説明は省略する。

（４）オフセット取得部３１５
オフセット取得部３１５は、映像パケットから字幕の奥行きを設定するためのオフセット値を取得し、取得したオフセット値を左目字幕出力部３６４、右目字幕出力部３６５へ出力する。

（５）左目映像出力部３１６、右目映像出力部３１７
左目映像出力部３１６は、左ビデオデコーダ３１３から取得した左目用映像（レフトビュー）を一定間隔で重畳部３２０へ出力する。

右目映像出力部３１７は、右ビデオデコーダ３１４から取得した右目用映像（ライトビュー）を一定間隔で重畳部３２１へ出力する。

（６）字幕生成部３１８
字幕生成部３１８は、デコーダ割当部３５１による解析結果に応じて、１ＥＳから３Ｄ表示用の字幕の生成、もしくは２ＥＳから３Ｄ表示用の字幕（左目用字幕及び右目用字幕）の生成を行う。以下において、字幕生成部３１８の構成要素であるメイン字幕デコーダ３６０、サブ字幕デコーダ３６１、左目用字幕プレーン３６２、右目用字幕プレーン３６３、左目字幕出力部３６４及び右目字幕出力部３６５について説明する。

（６−１）メイン字幕デコーダ３６０、サブ字幕デコーダ３６１
メイン字幕デコーダ３６０及びサブ字幕デコーダ３６１は、分離部３５０から受け取った字幕パケットを復号し、復号結果である字幕を対応するプレーンに書き込む。

具体的には、メイン字幕デコーダ３６０は、デコーダ割当部３５１から字幕が２ＥＳで配信されている旨の通知を受け取っている場合には、２ＥＳで配信された字幕の左目用字幕のパケットを復号し、復号結果である左目用時字幕を左目用字幕プレーン３６２に格納する。

また、メイン字幕デコーダ３６０は、デコーダ割当部３５１から字幕が１ＥＳで配信されている旨の通知を受け取っている場合には、１ＥＳで配信された字幕のパケットを復号して、復号結果である字幕の画像を左目用字幕プレーン３６２及び右目用字幕プレーン３６３に格納する。

サブ字幕デコーダ３６１は、２ＥＳで配信された字幕の右目用字幕パケットを復号して、復号結果である右目用字幕の画像を右目用字幕プレーン３６３に格納する。

（６−２）左目用字幕プレーン３６２、右目用字幕プレーン３６３
左目用字幕プレーン３６２は、メイン字幕デコーダ３６０で生成された一画面分の字幕文の映像の画素データをライン単位で格納し、水平同期信号、垂直同期信号に沿ってこれらの画素データを出力するためのメモリである。

右目用字幕プレーン３６３は、メイン字幕デコーダ３６０もしくはサブ字幕デコーダ３６１で生成された一画面分の字幕文の映像の画素データをライン単位で格納し、水平同期信号、垂直同期信号に沿ってこれらの画素データを出力するためのメモリである。

（６−３）左目字幕出力部３６４、右目字幕出力部３６５
左目字幕出力部３６４は、左目用字幕プレーン３６２に格納された字幕の画像から左目用字幕画像を生成し、一定間隔で重畳部３２０へ出力する。ここで一定間隔とは、例えば左目映像出力部３１６が左目映像を出力するタイミングである。

右目字幕出力部３６５は、デコーダ割当部３５１から字幕が１ＥＳで配信されている旨の通知がされている場合には、左目用字幕プレーン３６２に格納された字幕の画像から右目用字幕画像を生成し、一定間隔で重畳部３２１へ出力する。デコーダ割当部３５１から字幕が２ＥＳで配信されている旨の通知がされている場合には、右目用字幕プレーン３６３に格納された字幕の画像から右目用字幕画像を生成し、一定間隔で重畳部３２１へ出力する。ここで一定間隔とは、例えば右目映像出力部３１７が右目映像を出力するタイミングである。

具体的には、左目字幕出力部３６４は、左目用字幕プレーン３６２に対して水平座標に、オフセット取得部３１５から受け取ったオフセット値を加算して左目用字幕画像を生成する。

また、右目字幕出力部３６５は、字幕が１ＥＳで配信されている場合には左目用字幕プレーン３６２に対して水平座標に、オフセット取得部３１５から受け取ったオフセット値を減算して右目用字幕文の映像を生成し、字幕が２ＥＳで配信されている場合には右目用字幕プレーン３６３に対して水平座標に、オフセット取得部３１５から受け取ったオフセット値を減算して右目用字幕画像を生成する。

（７）音声デコーダ３１９
音声デコーダ３１９は、分離部３５０から受け取った音声のパケットを復号して、音声データを生成する。そして、音声デコーダ３１９は、生成した音声データを音声として出力する。

（８）重畳部３２０、３２１
重畳部３２０は、左目映像に、左目用字幕の画像を重畳し、出力するものである。

重畳部３２１は、右目映像に、右目用字幕の画像を重畳し、出力するものである。

（９）表示処理部３２２
表示処理部３２２は、重畳部３２０で生成された左目用字幕の画像が重畳された左目映像をディスプレイ（図示せず）に表示する動作と、重畳部３２１で生成された右目用字幕の画像が重畳された右目映像を当該ディスプレイに表示する動作とを交互に繰り返す。

２．５ 動作
（１）映像配信装置２００の動作
ここでは、映像配信装置２００の動作について図１１に示す流れ図を用いて説明する。

番組配列情報生成部２０２は、ＥＳ属性情報記憶部２０１で格納されている情報を基に、ＳＩ／ＰＳＩ情報を作成する（ステップＳ５）。

ＡＶエンコーダ２０３は、左目映像及び右目映像のそれぞれを符号化して、左目映像のＥＳ及び右目映像のＥＳを生成する（ステップＳ１０）。

字幕符号化部２０４は、字幕に対して複数の字幕ＥＳ、具体的には１ＥＳで配信する字幕のＥＳ、左目用字幕のＥＳ及び右目用字幕のＥＳを生成する（ステップＳ１５）。

音声符号化部２０５は、音声データを圧縮・符号化して、音声ＥＳを生成する（ステップＳ２０）。

多重化部２０６は、ＳＩ／ＰＳＩ情報、左目映像のＥＳ及び右目映像のＥＳ、複数の字幕のＥＳ、及び音声のＥＳなどを多重化して、ＭＰＥＧ２−ＴＳ形式のトランスポートストリームを生成し、配信部２０７を介して外部へ配信する（ステップＳ２５）。

（２）映像処理装置３００の動作
ここでは、映像処理装置３００の動作、特にデコーダ割当部３５１における字幕ＥＳについてのデコーダ割当の動作について、図１２に示す流れ図を用いて説明する。

デコーダ割当部３５１は、ユーザが選択している番組に関するＳＩ／ＰＳＩ情報に含まれるＰＭＴを読み込む（ステップＳ１００）。

デコーダ割当部３５１は、読み込んだＰＭＴに字幕のＥＳ情報が存在するか否かを判断する（ステップＳ１０５）。具体的には、デコーダ割当部３５１は、ｓｔｒｅａｍ＿ｔｙｐｅやｃｏｍｐｏｎｅｎｔ＿ｔａｇの値によって字幕のＥＳの存在の有無を判定する。例えば、デジタル放送では、字幕及び文字スーパーのｓｔｒｅａｍ＿ｔｙｐｅは「０ｘ０６」、字幕のｃｏｍｐｏｎｅｎｔ＿ｔａｇは「０ｘ３０〜０ｘ３７」、文字スーパーのｃｏｍｐｏｎｅｎｔ＿ｔａｇは「０ｘ３９〜０ｘ３Ｆ」とするようＡＲＩＢ規格の「ＢＳ／広帯域ＣＳデジタル放送運用規定」にて定められている。

ＥＳ情報が存在すると判断する場合（ステップＳ１０５における「Ｙｅｓ」）、デコーダ割当部３５１は、存在するＥＳ情報に３Ｄ字幕ペア記述子（ｓｔｅｒｅｏｓｃｏｐｉｃ＿ｓｕｂｔｉｔｌｅ＿ｐａｉｒ＿ｄｅｓｃｒｉｐｔｏｒ）が存在するか否かを判断する（ステップＳ１１０）。

３Ｄ字幕ペア記述子が存在すると判断する場合（ステップＳ１１０における「Ｙｅｓ」）、デコーダ割当部３５１は、ＥＳ情報に存在する３Ｄ字幕ペア記述子を１つ取得する（ステップＳ１１５）。

デコーダ割当部３５１は、取得した３Ｄ字幕ペア記述子は左目用であるか否かを判断する（ステップＳ１２０）。具体的には、デコーダ割当部３５１は、取得した３Ｄ字幕ペア記述子に含まれる“ｓｕｂｔｉｔｌｅ＿ｖｉｅｗ”で示される値が“０ｘ０”であるか否かを判断する。

取得した３Ｄ字幕ペア記述子は左目用であると判断する場合（ステップＳ１２０における「Ｙｅｓ」）、デコーダ割当部３５１は、ＥＳ情報に含まれる“ｅｌｅｍｅｎｔａｒｙ＿ＰＩＤ”で示されるＰＩＤの字幕ＥＳのパケットの出力先としてメイン字幕デコーダ３６０を、３Ｄ字幕ペア記述子に含まれる“ｐａｉｒ＿ＰＩＤ”で示されるＰＩＤの字幕ＥＳのパケットの出力先としてサブ字幕デコーダ３６１を、それぞれ割り当てる（ステップＳ１２５）。

取得した３Ｄ字幕ペア記述子は左目用でない、つまり右目用であると判断する場合（ステップＳ１２０における「Ｎｏ」）、デコーダ割当部３５１は、３Ｄ字幕ペア記述子に含まれる “ｐａｉｒ＿ＰＩＤ”で示されるＰＩＤの字幕ＥＳのパケットの出力先としてサブ字幕デコーダ３６１を、ＥＳ情報に含まれる“ｅｌｅｍｅｎｔａｒｙ＿ＰＩＤ”で示されるＰＩＤの字幕ＥＳのパケットの出力先としてメイン字幕デコーダ３６０を、それぞれ割り当てる（ステップＳ１３０）。

３Ｄ字幕ペア記述子が存在しないと判断する場合（ステップＳ１１０における「Ｎｏ」）、デコーダ割当部３５１は、ＥＳ情報に存在する字幕ＥＳのパケットのＥＳ情報を取得する（ステップＳ１３５）。デコーダ割当部３５１は、取得したＥＳ情報に含まれる“ｅｌｅｍｅｎｔａｒｙ＿ＰＩＤ”で示されるＰＩＤの字幕ＥＳのパケットの出力先としてメイン字幕デコーダ３６０を割り当てる（ステップＳ１４０）。このとき、サブ字幕デコーダ３６１は、デコード処理を行う必要がない。

ＥＳ情報が存在しないと判断する場合（ステップＳ１０５における「Ｙｅｓ」）、デコーダ割当部３５１は、当該処理、つまり字幕ＥＳの割り当ての処理を終了する。

これにより、２ＥＳによる字幕の配信、つまり左目用の字幕ＥＳと右目用字幕ＥＳとがそれぞれ独立して配信される場合は、デコーダ割当部３５１は、左目用字幕ＥＳをメイン字幕デコーダ３６０に、右目用字幕ＥＳをサブ字幕デコーダ３６１にそれぞれ割り当てるので、映像処理装置３００は、２ＥＳによる字幕の配信がされている場合には、２ｐｌａｎｅ＋ｏｆｆｓｅｔによる字幕画像、つまり高品質の画像で字幕を表示することができる。

２．６ 具体例
ここでは、字幕表示について具体例を用いて補足説明する。

図１３は、字幕表示を実現するために配信される画像のイメージ図である。図１３（ａ）で示す字幕の画像Ｇ１００は、平面的な画像であり、１ＥＳ用の字幕データとして配信される。

図１３（ｂ）で示す字幕の画像Ｇ１０１は、物体を左側から見たときの画像であり、左目用の字幕データとして配信される。また図１３（ｂ）で示す字幕の画像Ｇ１０２は、同じ物体を右側から見たときの画像であり、右目用の字幕データとして配信される。

ここでは、画像Ｇ１００が１ＥＳの字幕として、画像Ｇ１０１と画像Ｇ１０２が２ＥＳの字幕として、それぞれ映像配信装置２００から配信され、映像処理装置３００で字幕表示されるまでの動作について説明する。

字幕符号化部２０４は、画像Ｇ１００から１つのＥＳを、画像Ｇ１０１から左目用字幕のＥＳを、画像Ｇ１０２から右目用字幕のＥＳをそれぞれ生成する。字幕のデータ構造については既存であるため、説明を省略する。

ＡＶエンコーダ２０３は左目用映像のＥＳと右目用映像のＥＳを生成する。また、音声符号化部２０５では、音声のＥＳを生成する。

番組配列情報生成部２０２は、ＳＩ／ＰＳＩ情報を生成する。ここで作成されるＰＭＴでは、図６に示すＥＳ情報記載箇所Ｄ１０１の部分において、左目用字幕ＥＳのＥＳ情報はＥＳ情報Ｄ３０１に記載され、右目用字幕ＥＳのＥＳ情報はＥＳ情報Ｄ３０４に記載され、左目用映像ＥＳのＥＳ情報はＥＳ情報Ｄ３０５に記載され、右目用映像ＥＳのＥＳ情報はＥＳ情報Ｄ３０６に記載されており、１ＥＳのＥＳ情報はＥＳ情報Ｄ３０７に記載されている。

そして、多重化部２０６によって、ＳＩ／ＰＳＩ情報、左目用映像ＥＳ、右目用映像ＥＳ、１ＥＳ３Ｄ字幕のＥＳ、左目用字幕のＥＳ、右目用字幕のＥＳは多重化されて、図９に示すＴＳ４００が生成され、配信部２０７により、映像処理装置３００に配信される。

映像処理装置３００では、入力受付部３１１からユーザの番組指定を受け付ける。そして、分離処理部３１２のデコーダ割当部３５１は、ユーザが指定した番組についてのＰＭＴを取得し、取得したＰＭＴを用いてユーザが指定した番組に対する左目用映像、右目用映像及び音声それぞれのＰＩＤを取得する。さらに、デコーダ割当部３５１は、ＴＳ４００に左目用字幕ＥＳ、及び右目用字幕ＥＳのそれぞれが独立して存在するか否かを判断する。この場合、Ｓ４００に左目用字幕ＥＳ、及び右目用字幕ＥＳのそれぞれが独立して存在するので、デコーダ割当部３５１は、左目用字幕ＥＳのパケットをメイン字幕デコーダ３６０に、右目用字幕ＥＳのパケットをサブ字幕デコーダ３６１に、それぞれ割り当てる。

分離部３５０は、受信したＴＳ４００からユーザが指定した番組のＥＳのうち、左目用映像のＥＳのパケットを左ビデオデコーダ３１３、右目用映像のＥＳのパケットを右ビデオデコーダ３１４に、音声ＥＳのパケットを音声デコーダ３１９に、それぞれ出力する。

さらに、分離部３５０は、指定した番組のＥＳのうち左目用字幕のＥＳのパケットをメイン字幕デコーダ３６０に、右目用字幕のＥＳのパケットをサブ字幕デコーダ３６１に、それぞれ出力する。

左ビデオデコーダ３１３は、左目用映像のＥＳのパケットをデコードして、左目用映像を生成し、左目映像出力部３１６へ出力する。右ビデオデコーダ３１４は、右目用映像のＥＳのパケットをデコードして、右目用映像を生成し、右目映像出力部３１７へ出力する。オフセット取得部３１５は、左目用映像のＥＳのパケットからオフセット情報を取得し、左目字幕出力部３６４及び右目字幕出力部３６５へ出力する。

音声デコーダ３１９は、音声のＥＳのパケットをデコードして、音声データを生成し、音声として出力する。

メイン字幕デコーダ３６０は、左目用字幕のパケット（ＰＩＤが「０ｘ０１１３」であるＴＳパケット）をデコードし、左目用字幕の画像Ｇ１０１を生成して左目用字幕プレーン３６２に格納する。サブ字幕デコーダ３６１は、右目用字幕のパケット（ＰＩＤが「０ｘ０１１４」であるＴＳパケット）をデコードし、右目用字幕の画像Ｇ１０２を生成して、右目用字幕プレーン３６３に格納する。

左目字幕出力部３６４は、左目用字幕プレーン３６２に格納されている左目用字幕の画像Ｇ１０１に対して水平座標に、オフセット取得部３１５から取得したオフセットの値を加算した画像を、図２に示す左目字幕画像Ｇ２２として一定間隔で出力する。

右目字幕出力部３６５は、右目用字幕プレーン３６３に格納されている右目用字幕の画像Ｇ１０２に対して水平座標に、オフセット取得部３１５から取得したオフセットの値を減算した画像を、図２に示す左目字幕画像Ｇ２３として一定間隔で出力する。

表示処理部３２２では、重畳部３２０で生成された左目用字幕の画像が重畳された左目映像を出画する動作と、重畳部３２１で生成された右目用字幕の画像が重畳された右目映像を出画する動作とを交互に繰り返す。これにより、図２に示す字幕プレーンＧ２４が出画されることとなる。

このように、３Ｄ字幕ペア記述子（ｓｔｅｒｅｏｓｃｏｐｉｃ＿ｓｕｂｔｉｔｌｅ＿ｐａｉｒ＿ｄｅｓｃｒｉｐｔｏｒ）という新規記述子を定義して、２ＥＳで字幕を配信する字幕のＥＳ情報としてＰＭＴに配置して映像配信装置２００から配信し、映像処理装置３００は、デコーダ割当部３５１によって、ＰＭＴを解析して左目用字幕のＥＳのパケットはメイン字幕デコーダ３６０、右目用字幕のＥＳのパケットはサブ字幕デコーダ３６１にそれぞれ割り当てることにより、配信事業者の意図したとおりの映像（左目用映像／右目用映像）と重畳して表示することができる。

２．７ 映像処理装置３０１及び映像処理装置３０２
ここでは、映像処理装置３０１及び映像処理装置３０２の字幕の表示について、簡単に説明する。

映像処理装置３０１は、２ＥＳによる字幕セットを用いた字幕の３Ｄ表示はできない。そこで、１ＥＳによる字幕セットを用いて１ｐｌａｎｅ＋ｏｆｆｓｅｔ方式による字幕の３Ｄ表示を行う。

映像処理装置３０２は、字幕の３Ｄ表示そのものができない。そこで、１ＥＳによる字幕セットを用いて字幕の２Ｄ表示、つまりデコードにより得られた平面的な字幕の画像そのものを、映像と重畳させて表示する。または、２ＥＳで配信した字幕の左目用字幕及び右目用字幕のいずれかの字幕を２Ｄ用の字幕として表示するとしてもよい。

さらに、映像処理装置３０２は、映像の表示も２Ｄのみであるので、例えば、左目用映像と右目用映像とが配信された場合、左目用映像及び右目用映像のいずれかの映像のみを用いて２Ｄ用の映像として表示してもよい。

２．８ 変形例
上記実施の形態では、映像配信装置２００は、トランスポートストリームに、１ＥＳの字幕セット及び２ＥＳの字幕セットの双方を常に含む構成としたが、これに限定されない。

映像配信装置２００は、配信先となる映像表示装置の処理能力に応じて、配信する字幕セットを変更してもよい。

このとき、映像処理システム１００において、映像処理装置３００、３０１、３０２は、自身の処理能力を送信する。例えば、映像処理装置３００は２ｐｌａｎｅ＋ｏｆｆｓｅｔによる字幕表示が可能である旨を、映像処理装置３０１は１ｐｌａｎｅ＋ｏｆｆｓｅｔによる字幕表示が可能である旨を、映像処理装置３０２は２Ｄ表示による字幕表示が可能である旨を、配信の要求とともに送信する。

映像配信装置２００では、配信の要求とともに受け取った配信先の映像処理装置の処理能力に応じた字幕セットを、映像とともに配信する。このとき、受信側である映像処理装置の処理能力に応じた字幕セットがトランスポートストリームに含まれていることとなるので、例えば映像処理装置３００のデコーダ割当部３５１は、２ＥＳの字幕セットがトランスポートストリームに存在することを前提として、処理を行うこととなる。

ここでは、本変形例における映像処理装置３００のデコーダ割当部３５１の処理について、図１４に示す流れ図を用いて説明する。

デコーダ割当部３５１は、ユーザが選択している番組に関するＳＩ／ＰＳＩ情報に含まれるＰＭＴを読み込む（ステップＳ２００）。

デコーダ割当部３５１は、変数「Ｎ」に０を代入する（ステップＳ２０５）。

次に、デコーダ割当部３５１は、変数「Ｎ」の値を１つインクリメントする（ステップＳ２１０）。

デコーダ割当部３５１は、ＥＳ情報記載箇所Ｄ１０１にＮ番目のＥＳ情報が存在するか否かを判断する（ステップＳ２１５）。

Ｎ番目のＥＳ情報が存在すると判断する場合（ステップＳ２１５における「Ｙｅｓ」）、デコーダ割当部３５１は、Ｎ番目のＥＳ情報を取得する（ステップＳ２２０）。

デコーダ割当部３５１は、取得したＥＳ情報に３Ｄ字幕ペア記述子（ｓｔｅｒｅｏｓｃｏｐｉｃ＿ｓｕｂｔｉｔｌｅ＿ｐａｉｒ＿ｄｅｓｃｒｉｐｔｏｒ）が存在するか否かを判断する（ステップＳ２２５）。

３Ｄ字幕ペア記述子が存在すると判断する場合（ステップＳ２２５における「Ｙｅｓ」）、デコーダ割当部３５１は、当該ＥＳ情報に存在する３Ｄ字幕ペア記述子を取得する（ステップＳ２３０）。

デコーダ割当部３５１は、取得した３Ｄ字幕ペア記述子は左目用であるか否かを判断する（ステップＳ２３５）。具体的には、デコーダ割当部３５１は、取得した３Ｄ字幕ペア記述子に含まれる“ｓｕｂｔｉｔｌｅ＿ｖｉｅｗ”で示される値が“０ｘ０”であるか否かを判断する。

取得した３Ｄ字幕ペア記述子は左目用であると判断する場合（ステップＳ２３５における「Ｙｅｓ」）、デコーダ割当部３５１は、ＥＳ情報に含まれる“ｅｌｅｍｅｎｔａｒｙ＿ＰＩＤ”で示されるＰＩＤの字幕ＥＳのパケットの出力先としてメイン字幕デコーダ３６０を、３Ｄ字幕ペア記述子に含まれる“ｐａｉｒ＿ＰＩＤ”で示されるＰＩＤの字幕ＥＳのパケットの出力先としてサブ字幕デコーダ３６１を、それぞれ割り当てる（ステップＳ２４０）。これにより、パケットのＰＩＤがＥｌｅｍｅｎｔａｒｙ＿ＰＩＤと同一であるパケットのみがメイン字幕デコーダ３６０に出力され、パケットのＰＩＤがｐａｉｒ＿ＰＩＤと同一であるパケットのみがサブ字幕デコーダ３６１に出力される。

取得した３Ｄ字幕ペア記述子は左目用でない、つまり右目用であると判断する場合（ステップＳ２３５における「Ｎｏ」）、デコーダ割当部３５１は、３Ｄ字幕ペア記述子に含まれる “ｐａｉｒ＿ＰＩＤ”で示されるＰＩＤの字幕ＥＳのパケットの出力先としてサブ字幕デコーダ３６１を、ＥＳ情報に含まれる“ｅｌｅｍｅｎｔａｒｙ＿ＰＩＤ”で示されるＰＩＤの字幕ＥＳのパケットの出力先としてメイン字幕デコーダ３６０を、それぞれ割り当てる（ステップＳ２４５）。

３Ｄ字幕ペア記述子が存在しないと判断する場合（ステップＳ２２５における「Ｎｏ」）、処理はステップＳ２１０へ戻る。

Ｎ番目のＥＳ情報が存在しない場合（ステップＳ２１５における「Ｎｏ」）、処理は終了する。

なお、本変形例では、字幕のペアに対するデコーダの割り当てを迅速に行うことを目的として、左目用字幕のＥＳのＥＳ情報、及び右目用字幕のＥＳのＥＳ情報の何れかを読み込んだ後、以降の読み込みは行わないよう処理を制御している。そのため、映像及び音声のＰＩＤを特定するためには、別途処理を行う必要がある。そこで、字幕のペアに対するデコーダの割り当てと並行して、映像及び音声のＰＩＤを特定を行うために、左目用字幕のＥＳのＥＳ情報、及び右目用字幕のＥＳのＥＳ情報の何れかを読み込んだ後であっても、映像及び音声双方のＰＩＤが特定されていなければ、これらのＰＩＤが特定されるまで以降のＥＳ情報の読み込みを行ってもよい。

また、本変形例では、映像処理装置３００について、左目用字幕のＥＳのＥＳ情報、及び右目用字幕のＥＳのＥＳ情報が存在しない場合の処理については言及していないが、これらＥＳ情報が存在しない場合であって、１ＥＳの字幕セットが存在する場合には、当該字幕セットを用いて、左目用字幕及び右目用字幕を生成する。

なお、１ＥＳの字幕セットが存在する場合でも、字幕のペアに対するデコーダの割り当てを迅速に行うことを目的として、左目用字幕のＥＳのＥＳ情報、及び右目用字幕のＥＳのＥＳ情報の何れかを読み込んだ後、以降の読み込みは行わないよう処理を制御してもよい。その場合、左目用字幕のＥＳのＥＳ情報、及び右目用字幕のＥＳのＥＳ情報の何れかを読み込む前に１ＥＳの字幕のＥＳのＥＳ情報を読み込んだ場合には、Ｅｌｅｍｅｎｔａｒｙ＿ＰＩＤの値を保持しておき、以降に左目用字幕のＥＳのＥＳ情報、及び右目用字幕のＥＳのＥＳ情報の何れかを読み込んだ場合には１ＥＳの字幕のＥｌｅｍｅｎｔａｒｙ＿ＰＩＤの値を破棄して左目用字幕のＥＳのＥＳ情報、及び右目用字幕のＥＳのＥＳ情報の何れかのＥＳ情報からメイン字幕デコーダとサブ字幕デコーダの割り当てを行い、ＰＭＴ内の全てのＥＳ情報の読み込みが終了しても左目用字幕のＥＳのＥＳ情報、及び右目用字幕のＥＳのＥＳ情報の何れのＥＳ情報も存在しない場合には１ＥＳの字幕のＥｌｅｍｅｎｔａｒｙ＿ＰＩＤで示される字幕ＥＳをメイン字幕デコーダに割り当てればよい。

２．９ その他の変形例
また、上記実施の形態などに限らず、例えば、以下のような変形例が考えられる。

（１）上記実施の形態において、２ＥＳにより字幕が配信される場合、３Ｄ字幕ペア記述子において“ｐａｉｒ＿ＰＩＤ”を記載し、当該に対応するＰＩＤとペアとなる字幕のＥＳを特定したが、これに限定されない。

ペアとなる字幕ＥＳが特定できる方法であれば、どのような方法であってもよい。例えば、ｃｏｍｐｏｎｅｎｔ＿ｔａｇなどのＰＩＤ以外のパラメータによってペアとなる字幕ＥＳを特定してもよい。

または、左目用字幕のＰＩＤやｃｏｍｐｏｎｅｎｔ＿ｔａｇに固定値を足した値もしくは引いた値を右目用字幕のＰＩＤやｃｏｍｐｏｎｅｎｔ＿ｔａｇの値とするよう配信側と受信側でルールを決めておくことで、片方のＥＳのＰＩＤやｃｏｍｐｏｎｅｎｔ＿ｔａｇ取得した時点でペアとなるＥＳのＰＩＤやｃｏｍｐｏｎｅｎｔ＿ｔａｇを特定できるようにしてもよい。

または、ＰＩＤやｃｏｍｐｏｎｅｎｔ＿ｔａｇ等のパラメータにおいて、２ＥＳで配信する字幕の左目用字幕にのみ割当てる値の範囲や右目用字幕にのみ割当てる値の範囲を配信側と受信側でルールを決めておくことで、ＰＩＤやｃｏｍｐｏｎｅｎｔ＿ｔａｇ等のパラメータを取得した時点で、２ＥＳで配信する字幕の左目用字幕であることや右目用字幕であることを特定できるようにしてもよい。この場合、２ＥＳで配信する字幕の左目用字幕のｃｏｍｐｏｎｅｎｔ＿ｔａｇは「０ｘ３１」、右目用字幕のｃｏｍｐｏｎｅｎｔ＿ｔａｇは「０ｘ３２」というように配信側と受信側でルールを決めておけばよい。

また、ＰＩＤやｃｏｍｐｏｎｅｎｔ＿ｔａｇなどによってペアとなる字幕ＥＳを特定するのではなく、重畳する映像の字幕を指定することで、メイン字幕デコーダとサブ字幕デコーダに割当てる字幕ＥＳを判定してもよい。この場合、左目用字幕のＥＳのＥＳ情報には対応する左目用映像を特定するためのＰＩＤやｃｏｍｐｏｎｅｎｔ＿ｔａｇを指定する。

（２）上記実施の形態では、３Ｄ字幕ペア記述子（ｓｔｅｒｅｏｓｃｏｐｉｃ＿ｓｕｂｔｉｔｌｅ＿ｐａｉｒ＿ｄｅｓｃｒｉｐｔｏｒ）をＰＭＴに配置したが、これに限定されない。

３Ｄ字幕ペア記述子は、他のＳＩ／ＰＳＩのテーブルに配置されてもよい。例えば、ＳＩのＥＩＴのループに配置してもよい。または、ＳＩとＰＳＩ両方に３Ｄ字幕ペア記述子を配置してもよい。

ＥＩＴなどのＳＩは番組開始以前に取得可能な情報であるため、番組開始前にデコーダ割当部３５１によって、左目用字幕ＥＳのＰＩＤと右目用字幕ＥＳのＰＩＤを特定しておくことも可能である。なお、ＳＩは番組開始以前から配信されている情報であり、番組直前にＰＩＤが変更される可能性もあるため、番組開始時にＳＩとＰＳＩに記載された３Ｄ字幕ペア記述子の内容を比較し、記載内容が異なる場合には、ＰＳＩに記載された情報を優先してもよい。

（３）上記実施の形態では、２ＥＳによる字幕セットが配信されていることを、３Ｄ字幕ペア記述子によって判別されるとしたが、これに限定されない。

例えば、ＳＩ／ＰＳＩのテーブルのｒｅｓｅｒｖｅｄ領域やｒｅｓｅｒｖｅｄ＿ｆｕｔｕｒｅ＿ｕｓｅ領域など、現在使用されていない領域を拡張して、３Ｄ字幕ペア記述子に記載した情報と同等の情報を、これら拡張した領域に分割して入れてもよい。

（４）上記実施の形態において、左目用字幕のＥＳ情報、及び右目用字幕のＥＳ情報それぞれに、３Ｄ字幕ペア記述子を配置し、各３Ｄ字幕ペア記述子にｖｉｅｗ情報やｐａｉｒ＿ＰＩＤの情報を記載するとしたが、これに限定されない。

どちらかの字幕ＥＳのＥＳ情報に３Ｄ字幕ペア記述子を配置したり、両方の字幕ＥＳのＥＳ情報として、ｖｉｅｗ情報のみを記載したりしてもよい。

例えば、左目用字幕のＥＳ情報、及び右目用字幕のＥＳ情報のうち一方のＥＳ情報の３Ｄ字幕ペア記述子を配置する場合には、ＥＳ情報記載箇所Ｄ１０１で記述される左目用字幕のＥＳ情報、及び右目用字幕のＥＳ情報のうち、先行して記載されるＥＳ情報に３Ｄ字幕ペア記述子を記載する。これにより、左目用字幕のＥＳ情報、及び右目用字幕のＥＳ情報のうち片方のＥＳ情報、つまりＥＳ情報記載箇所Ｄ１０１に先行して記載されたＥＳ情報を読んだ時点で、左目用字幕ＥＳと右目用字幕ＥＳを特定でき、表示までの時間を短縮することができる。

（５）上記実施の形態において、図１２に示すステップＳ１１５では、３Ｄ字幕ペア記述子を有する１つのＥＳ情報を取得したが、３Ｄ字幕ペア記述子を有するＥＳ情報が複数個ある場合には、複数個のＥＳ情報を取得してもよい。

なお、この場合、ステップＳ１２０、Ｓ１２５、Ｓ１３０の処理をＥＳ情報の数だけ繰り返してもよい。

また、３Ｄ字幕ペアが存在しない場合であって、字幕ＥＳのＥＳ情報が複数個ある場合には、複数個のＥＳ情報を取得してもよい。

なお、この場合、ステップＳ１４０の処理をＥＳの数だけ繰り返し、複数のＰＩＤをメイン字幕デコーダ３６０に割り当ててもよい。

（６）上記実施の形態では、映像処理装置３０１は、２ＥＳで配信される字幕セットがある場合は、２ＥＳで配信される字幕セットを表示し、２ＥＳで配信される字幕セットがない場合は１ＥＳで配信される字幕セットを表示するよう、２ＥＳで配信される字幕セットの表示を優先したが、これに限定されない。

１ＥＳで配信される字幕セットの表示を優先させてもよい。具体的には、１ＥＳで配信される字幕セットがある場合は、１ＥＳで配信される字幕セットを表示画面に表示し、１ＥＳで配信される字幕セットがない場合は２ＥＳで配信される字幕セットを表示画面に表示するようにデコーダ割当部３５１が動作してもよい。

または、ユーザが１ＥＳで配信される字幕セットと２ＥＳで配信される字幕セットとのどちらを優先するかを予め、もしくは番組視聴時に選択し、ユーザが選択した字幕セットを優先的に表示するよう、デコーダ割当部３５１が動作してもよい。

または、映像配信装置２００が優先して表示したい字幕セットがどちらであるかという情報をＳＩ／ＰＳＩに格納して配信し、映像処理装置３０１にて当該情報を参照して、優先的に表示する字幕セットを決定してもよい。

（７）上記実施の形態及び上記変形例をそれぞれ組み合わせるとしてもよい。

２．１０ まとめ
以上説明したように、配信事業者は、３Ｄ非対応の２Ｄ映像表示装置や、１ＥＳで字幕を配信する方法にのみ対応した３Ｄ映像表示装置や、１ＥＳ及び２ＥＳでの字幕の配信に対応した３Ｄ映像表示装置など、様々なニーズに対応するため、１つの番組に対して、２Ｄ用の字幕セット、３Ｄ用の１ＥＳで配信する字幕セット、３Ｄ用の２ＥＳで配信する字幕セットのなどの字幕セットのうち２つ以上の字幕セットを作成する可能性がある。作成される字幕セットは、平面的に見えたり、立体的に見えたりとユーザが感じる視覚効果は異なるが、同等の内容を伝えるための字幕データである。そのため、映像処理装置では、複数ある字幕セットのうち、１つの字幕セットのみ表示すればよい。

そこで、本実施の形態のように映像と複数の字幕セットを配信して映像処理装置側で最適な字幕セットを選択して表示したり、上記変形例のように配信側で、映像処理装置の処理能力に応じた映像と字幕セットのみを配信を配信したりする。

そのため、例えば、ＣＤＮ網やインターネット網を使って番組を配信する場合には、番組配信前に３Ｄ映像配信装置が３Ｄ映像表示装置の処理能力を取得し、３Ｄ映像表示装置が、表示可能な字幕セット（２Ｄ字幕、１ＥＳで配信する字幕、２ＥＳで配信する字幕）を返すことで、３Ｄ映像配信装置は最適な字幕セットのみを番組に含め、それ以外は配信しないことにより、配信するデータ量や使用するネットワーク帯域の削減が可能である。なお、３Ｄ映像配信装置が処理能力を取得して最適な文字セットを判断するのではなく、３Ｄ映像表示装置自身が自身の処理能力やユーザの嗜好及び選択動作により、最適な字幕セットを要求してもよい。

３．第２の実施の形態
上記第１の実施の形態において、図５に示す３Ｄ字幕ペア記述子（ｓｔｅｒｅｏｓｃｏｐｉｃ＿ｓｕｂｔｉｔｌｅ＿ｐａｉｒ＿ｄｅｓｃｒｉｐｔｏｒ）を使用した場合、当該記述子の有無により、字幕ＥＳが２ＥＳで配信される字幕セットのＥＳであるか否かを判別することは可能である。

しかしながら、１ＥＳで配信される字幕セットには、２Ｄ用字幕、１ＥＳで配信される３Ｄ字幕がある。さらには、１ＥＳで配信される３Ｄの字幕セットは、１ｐｌａｎｅ＋ｏｆｆｓｅｔの再生モードで表示するための３Ｄ字幕である場合と、左目用字幕画像と右目用字幕画像とが１つのＥＳで配信され、且つ２ｐｌａｎｅ＋ｏｆｆｓｅｔの再生モードで再生する３Ｄ字幕である場合とがある。

そのため、２ＥＳで配信される字幕には対応していないが、１ＥＳで配信され、１ｐｌａｎｅ＋ｏｆｆｓｅｔの再生モードで表示する３Ｄ字幕には対応している映像処理装置が適切な字幕ＥＳを表示するためには、１ＥＳで配信される字幕ＥＳが２Ｄ用字幕であるか３Ｄ用字幕であるか、再生モードが１ｐｌａｎｅ＋ｏｆｆｓｅｔであるか２ｐｌａｎｅ＋ｏｆｆｓｅｔであるか、字幕セットのＥＳ構成が１ＥＳであるか２ＥＳであるかを、それぞれ識別することが必要となる。

そこで、本実施の形態では、これらを識別することのできる映像処理システム１００ａについて説明する。

映像処理システム１００ａは、図１５に示すように、映像配信装置２００ａ、映像処理装置３００ａ、３０１ａ、３０２ａから構成されている。ここで、映像処理装置３００ａは、１ＥＳ及び２ＥＳでの字幕の配信に対応した装置であり、映像処理装置３０１ａは、１ＥＳで字幕を配信する方法にのみ対応した装置であり、映像処理装置３０２ａは、３Ｄ非対応の装置（つまり２Ｄ映像を表示する装置）である。

各装置の概要は、第１の実施の形態と同様であるので、ここでの各装置の概要の説明は省略する。

以降では、各装置の構成要素について第１の実施の形態と異なる点を中心に説明する。

３．１ 映像配信装置２００ａ
映像配信装置２００ａは、図１６に示すように、ＥＳ属性情報記憶部２０１、番組配列情報生成部２０２ａ、ＡＶエンコーダ２０３、字幕符号化部２０４ａ、音声符号化部２０５、多重化部２０６及び配信部２０７から構成されている。

ＥＳ属性情報記憶部２０１、ＡＶエンコーダ２０３、音声符号化部２０５、多重化部２０６及び配信部２０７については、第１の実施の形態で説明しているので、ここでの説明は省略する。

（１）番組配列情報生成部２０２ａ
番組配列情報生成部２０２ａは、ＥＳ属性情報記憶部２０１で格納されている情報を基に、ＳＩ／ＰＳＩ情報を作成し、生成したＳＩ／ＰＳＩ情報を多重化部２０６へ出力する。

ここで、第１の実施の形態との変更点は、ＰＭＴに記載される情報が、３Ｄ字幕ペア記述子ではなく、３Ｄ字幕記述子（ｓｔｅｒｅｏｓｃｏｐｉｃ＿ｓｕｂｔｉｔｌｅ＿ｄｅｓｃｒｉｐｔｏｒ）Ｄ５００である。

以下、３Ｄ字幕記述子Ｄ５００について説明する。

図１７は、ＩＳＯ／ＩＥＣ１３８１８−１（ＭＰＥＧ−２）及びＡＲＩＢ規格を拡張することにより得られる、ＰＭＴのセカンドループに配置する３Ｄ字幕記述子（ｓｔｅｒｅｏｓｃｏｐｉｃ＿ｓｕｂｔｉｔｌｅ＿ｄｅｓｃｒｉｐｔｏｒ）Ｄ５００の一例を模式的に示す図である。

３Ｄ字幕記述子Ｄ５００は、ＥＳ情報記載箇所Ｄ１０１にて、３Ｄ用の字幕セットの字幕ＥＳに関するＥＳ情報に配置される。

３Ｄ字幕記述子Ｄ５００は、ｄｅｓｃｒｉｐｔｏｒ＿ｔａｇ、ｄｅｓｃｒｉｐｔｏｒ＿ｌｅｎｇｔｈ、ｓｕｂｔｉｔｌｅ＿ｍｏｄｅ、ｓｕｂｔｉｔｌｅ＿ｃｏｍｐｏｎｅｎｔ、ｓｕｂｔｉｔｌｅ＿ｖｉｅｗ、ｐａｉｒ＿ＰＩＤ、ｒｅｓｅｒｖｅｄというパラメータから構成されている。

ｄｅｓｃｒｉｐｔｏｒ＿ｔａｇは、本記述子が３Ｄ字幕記述子であることを３Ｄ表示が可能な映像処理装置にて識別するための情報であり、固定値が設定される。例えば、「０ｘ８０〜０ｘＢＦ」が、事業者定義記述子のタグ値として設定可能な範囲とされているため、ここでは、「０ｘ８１」が設定される。

ｄｅｓｃｒｉｐｔｏｒ＿ｌｅｎｇｔｈは、このフィールドの直後に続く記述子のデータ部分の全バイト長を示す情報である。本記述子は固定長であり、後続のバイト長は２であるため、固定値「２」が設定される。

ｓｕｂｔｉｔｌｅ＿ｍｏｄｅは、当該ＥＳが１ｐｌａｎｅ＋ｏｆｆｓｅｔで再生されるべき字幕ＥＳか２ｐｌａｎｅ＋ｏｆｆｓｅｔで再生されるべき字幕ＥＳかを示す情報である。１ｐｌａｎｅ＋ｏｆｆｓｅｔであれば「０」、２ｐｌａｎｅ＋ｏｆｆｓｅｔであれば「１」を設定する。

ｓｕｂｔｉｔｌｅ＿ｃｏｍｐｏｎｅｎｔは、当該ＥＳが１ＥＳで構成された字幕か２ＥＳで構成された字幕の一部かを示す情報である。１ＥＳで構成されていれば「０」、２ＥＳで構成されていれば「１」を設定する。

ｓｕｂｔｉｔｌｅ＿ｖｉｅｗは、当該ＥＳが左右どちらの字幕のＥＳであるかを示す情報である。左目用字幕のＥＳであれば「０」、右目用字幕のＥＳであれば「１」を設定する。

ｐａｉｒ＿ＰＩＤは、３Ｄ表示用の字幕が２ＥＳで配信されている場合であって、当該ＥＳとペアとなる字幕ＥＳのＰＩＤを示す情報である。当該ＥＳが左目用字幕のＥＳであれば右目用字幕のＥＳのＰＩＤ、右目用字幕のＥＳであれば左目用字幕のＥＳのＰＩＤの値を設定する。

ｒｅｓｅｒｖｅｄにはすべて「１」を設定する。

例えば、１ＥＳで配信される３Ｄ字幕のＥＳ（以下、「１ＥＳ３Ｄ字幕のＥＳ」という。）において、１ｐｌａｎｅ＋ｏｆｆｓｅｔで再生したい場合、ｓｕｂｔｉｔｌｅ＿ｍｏｄｅには「０」、ｓｕｂｔｉｔｌｅ＿ｃｏｍｐｏｎｅｎｔには「０」が入る。また、１ＥＳ３Ｄ字幕のＥＳにおいて、２ｐｌａｎｅ＋ｏｆｆｓｅｔで再生したい場合、ｓｕｂｔｉｔｌｅ＿ｍｏｄｅには「１」、ｓｕｂｔｉｔｌｅ＿ｃｏｍｐｏｎｅｎｔには「０」が入る。２ＥＳで配信される左目用字幕のＥＳにおいて、ｓｕｂｔｉｔｌｅ＿ｍｏｄｅには「１」、ｓｕｂｔｉｔｌｅ＿ｃｏｍｐｏｎｅｎｔには「１」、ｓｕｂｔｉｔｌｅ＿ｖｉｅｗには「０」、ｐａｉｒ＿ＰＩＤには右目用字幕のＥＳのＥｌｅｍｅｎｔａｒｙ＿ＰＩＤが入る。

図１８は、各映像処理装置に配信するＰＭＴの一部を模式的に示す図であり、図６のＰＭＴのデータ構造で示したＥＳ情報記載箇所Ｄ１０１に実際に１ｐｌａｎｅ＋ｏｆｆｓｅｔで再生する１ＥＳ３Ｄ字幕のＥＳの情報、及び左目用字幕のＥＳの情報などが記載されている。

例えば、ＥＳ情報Ｄ６０１は、１ｐｌａｎｅ＋ｏｆｆｓｅｔで再生する１ＥＳ３Ｄ字幕のＥＳのＥＳ情報を示すものである。ＥＳ情報Ｄ６０１に含まれる記述子Ｄ６０２に、図１７の３Ｄ字幕記述子に実際に１ｐｌａｎｅ＋ｏｆｆｓｅｔで再生する１ＥＳ３Ｄ字幕のＥＳ情報が記載されている。なお、図６に示すとおり、本来はｅｌｅｍｅｎｔａｒｙ＿ＰＩＤの前後にｒｅｓｅｒｖｅｄ領域およびＥＳ＿ｉｎｆｏ＿ｌｅｎｇｔｈの記載があるが、図１８に記載したＥＳ情報Ｄ６０１、Ｄ６０３では、これらの記載を省略している。

ＥＳ情報Ｄ６０１におけるｓｔｒｅａｍ＿ｔｙｐｅには、図５のＥＳ属性情報一覧Ｔ１００の「ｓｔｒｅａｍ＿ｔｙｐｅ」欄の値である「０ｘ０６」が、Ｅｌｅｍｅｎｔａｒｙ＿ＰＩＤには、ＥＳ属性情報一覧Ｔ１００の「ＰＩＤ」欄の「０ｘ０１１２」が、それぞれ代入されている。

ＥＳ情報Ｄ６０１におけるｄｅｓｃｒｉｐｔｏｒ＿ｔａｇは、記述子のＩＤである「０ｘ８１」が代入されており、本記述子Ｄ６０２が３Ｄ字幕記述子であることを示している。ｄｅｓｃｒｉｐｔｏｒ＿ｌｅｎｇｔｈには、後続のバイト数である「０ｘ２」が代入されている。そして、ｓｕｂｔｉｔｌｅ＿ｍｏｄｅには、当該ＥＳが１ｐｌａｎｅ＋ｏｆｆｓｅｔモードで再生されることを示す値「０ｘ０」が代入されている。ｓｕｂｔｉｔｌｅ＿ｃｏｍｐｏｎｅｎｔには、当該ＥＳが１ＥＳで配信される字幕であることを示す値「０ｘ０」が代入されている。ｒｅｓｅｒｖｅｄの１４ビットには固定値「１」であるため、２進数の「０ｘ１１１１１１１１１１１１１１」を１６進数で示した「０ｘ３ＦＦＦ」が代入されている。

また、ＥＳ情報Ｄ６０３は、左目用字幕のＥＳ情報を示すものである。ＥＳ情報Ｄ６０３に含まれる記述子Ｄ６０４に、図１７の３Ｄ字幕記述子Ｄ５００に実際に左目用字幕ＥＳの情報が記載されている。

ＥＳ情報Ｄ６０３におけるｓｔｒｅａｍ＿ｔｙｐｅには、ＥＳ属性情報一覧Ｔ１００の「ｓｔｒｅａｍ＿ｔｙｐｅ」欄の値である「０ｘ０６」が、Ｅｌｅｍｅｎｔａｒｙ＿ＰＩＤには、ＥＳ属性情報一覧Ｔ１００の「ＰＩＤ」欄の「０ｘ０１１３」が、それぞれ代入されている。

ＥＳ情報Ｄ６０３におけるｄｅｓｃｒｉｐｔｏｒ＿ｔａｇは、記述子のＩＤである「０ｘ８１」が代入されており、本記述子Ｄ６０２が３Ｄ字幕記述子であることを示している。ｄｅｓｃｒｉｐｔｏｒ＿ｌｅｎｇｔｈには、後続のバイト数である「０ｘ２」が代入されている。ｓｕｂｔｉｔｌｅ＿ｍｏｄｅには、当該ＥＳが２ｐｌａｎｅ＋ｏｆｆｓｅｔモードで再生するため「０ｘ１」が代入されている。ｓｕｂｔｉｔｌｅ＿ｃｏｍｐｏｎｅｎｔには、当該ＥＳ字幕が２ＥＳで配信される字幕の一部であるため「０ｘ１」が代入されている。ｓｕｂｔｉｔｌｅ＿ｖｉｅｗには、このＥＳが左目用字幕のＥＳであるため、「０ｘ０」が代入されている。ｐａｉｒ＿ＰＩＤには、右目用字幕のＥＳのＥｌｅｍｅｎｔａｒｙ＿ＰＩＤの値である「０ｘ０１１４」が代入されている。なお、右目用字幕のＥＳのＥｌｅｍｅｎｔａｒｙ＿ＰＩＤの値は、ＥＳ属性情報一覧Ｔ１００から取得可能である。

なお、本実施の形態では、３Ｄ字幕記述子は、字幕ＥＳに対するＥＳ情報に記載するとしているが、これに限定されない。３Ｄ字幕記述子は、文字スーパー用のテキスト文字列やビットマップのＥＳに対するＥＳ情報に記載してもよい。なぜなら、ＡＲＩＢ規格では、字幕プレーンに字幕及び文字スーパーを表示することができるよう定められている。そのため、字幕と文字スーパーとは同様の方式にて立体視を実現できるからである。

（２）字幕符号化部２０４ａ
字幕符号化部２０４ａは、字幕に対してＭＰＥＧ−１、ＭＰＥＧ−２などの方式を使ってエンコードして、３Ｄ字幕記述子Ｄ５００の記述内容に基づいて、２Ｄ表示用の字幕のＥＳ、１ｐｌａｎｅ＋ｏｆｆｓｅｔに対応する１ＥＳ３Ｄ字幕のＥＳ、２ｐｌａｎｅ＋ｏｆｆｓｅｔに対応する１ＥＳ３Ｄ字幕のＥＳ、及び２ＥＳによる字幕のＥＳ（つまり、左目用字幕のＥＳ及び右目用字幕のＥＳ）などを生成し、生成した各字幕のＥＳを多重化部２０６へ出力する。

３．２ 映像処理装置３００ａ
映像処理装置３００ａは、映像配信装置２００ａからのデジタル放送を受信して、映像とともに字幕を表示してユーザに立体視させるデジタルテレビであり、図１９に示すように、入力受付部３１１、分離処理部３１２ａ、左ビデオデコーダ３１３、右ビデオデコーダ３１４、オフセット取得部３１５、左目映像出力部３１６、右目映像出力部３１７、字幕生成部３１８、音声デコーダ３１９、重畳部３２０、３２１及び表示処理部３２２から構成されている。

また、分離処理部３１２ａは、分離部３５０とデコーダ割当部３５１ａとを有している。

ここでは、第１の実施の形態の映像処理装置３００とは異なる構成要素である、分離処理部３１２ａ、特にデコーダ割当部３５１ａについて説明する。

（１）デコーダ割当部３５１ａ
デコーダ割当部３５１ａは、ＰＡＴ、ＰＭＴ等のＳＩ／ＰＳＩ情報を解析して、各種パケットの出力先を特定するものである。

映像パケット、音声パケットについては、既存技術であるため、詳細な説明は省略する。

ここでは、字幕パケットについての出力先の特定について説明する。

デコーダ割当部３５１ａは、ユーザが選択している番組に関するＳＩ／ＰＳＩ情報の各種テーブル情報、例えばＰＭＴを参照し、３Ｄ字幕記述子の存在の有無を判断する。

デコーダ割当部３５１ａは、３Ｄ字幕記述子が存在すると判断する場合には、当該３Ｄ字幕記述子の記述内容に基づいて、３Ｄ表示に用いられる字幕の再生方法、及び配信の方法を特定する。具体的には、デコーダ割当部３５１ａは、字幕の再生方法が２ｐｌａｎｅ＋ｏｆｆｓｅｔ方式であるか１ｐｌａｎｅ＋ｏｆｆｓｅｔ方式であるかの特定、及び配信の方法が１ＥＳで配信されているか２ＥＳで配信されているかの特定を行う。

デコーダ割当部３５１ａは、特定した結果に応じて、字幕のＥＳのパケットをメイン字幕デコーダとサブ字幕デコーダに適切に割り当てる。具体的には、デコーダ割当部３５１ａは、字幕の再生方法が２ｐｌａｎｅ＋ｏｆｆｓｅｔ方式であり、且つ字幕が２ＥＳで配信されている場合には、左目用字幕のＥＳのパケットをメイン字幕デコーダ３６０に、右目用字幕のＥＳのパケットをサブ字幕デコーダ３６１に割り当てる。字幕の再生方法が２ｐｌａｎｅ＋ｏｆｆｓｅｔ方式であり、且つ字幕が１ＥＳで配信されている場合には、デコーダ割当部３５１ａは、字幕のＥＳのパケットをメイン字幕デコーダ３６０及びサブ字幕デコーダ３６１の双方に割り当てる。また、字幕の再生方法が１ｐｌａｎｅ＋ｏｆｆｓｅｔ方式であり、且つ字幕が１ＥＳで配信されている場合には、デコーダ割当部３５１ａは、字幕のＥＳのパケットをメイン字幕デコーダ３６０のみに割り当てる。

デコーダ割当部３５１ａは、ＳＩ／ＰＳＩ情報の解析結果として、３Ｄ字幕記述子の存在の有無、及び３Ｄ字幕記述子が存在する場合には３Ｄ表示に用いられる字幕の再生方法と配信の方法とを、字幕生成部３１８に通知する。

このとき、分離部３５０では、デコーダ割当部３５１ａの割り当て結果に応じて、各種パケットを適切なデコーダへ出力することとなる。また、字幕生成部３１８では、３Ｄ字幕記述子の存在しない旨の通知をデコーダ割当部３５１ａから受け取った場合には、分離部３５０から受け取った字幕パケットについて２Ｄ表示として処理する。３Ｄ字幕記述子の存在する旨の通知をデコーダ割当部３５１ａから受け取った場合には、デコーダ割当部３５１ａで特定された再生方法及び配信方法に基づいて、左目用字幕及び右目用字幕を生成する。

３．３ 動作
（１）映像配信装置２００ａの動作
ここでは、映像配信装置２００ａの動作について、図１１に示す流れ図を用いて、変更点のみ説明する。

ステップＳ５において、生成されるＳＩ／ＰＳＩ情報の内容、特にＰＭＴの内容が第１の実施の形態と異なる。具体的には、字幕の３Ｄ表示を行う場合には、映像配信装置２００ａの番組配列情報生成部２０２ａは、ＰＭＴのＥＳ情報記載箇所Ｄ１０１において３Ｄ字幕記述子を記載する。

また、ステップＳ１５において、本実施の形態では、ステップＳ５で生成したＰＭＴの記載内容、具体的には３Ｄ字幕記述子の記載内容に応じて、少なくとも１つ以上の字幕ＥＳが生成される点が、第１の実施の形態と異なる。なお、３Ｄ字幕記述子の有無に関係なく２Ｄ表示用の字幕のＥＳは常に生成される。

（２）映像処理装置３００ａの動作
ここでは、映像処理装置３００ａの動作、特にデコーダ割当部３５１ａにおける字幕ＥＳについてのデコーダ割当の動作について、図２０及び図２１に示す流れ図を用いて説明する。

デコーダ割当部３５１ａは、ユーザが選択している番組に関するＳＩ／ＰＳＩ情報に含まれるＰＭＴを読み込む（ステップＳ１００）。

デコーダ割当部３５１ａは、読み込んだＰＭＴに、３Ｄ字幕記述子（ｓｔｅｒｅｏｓｃｏｐｉｃ＿ｓｕｂｔｉｔｌｅ＿ｄｅｓｃｒｉｐｔｏｒ）が存在し、ｓｕｂｔｉｔｌｅ＿ｍｏｄｅ＝１かつｓｕｂｔｉｔｌｅ＿ｃｏｍｐｏｎｅｎｔ＝１であるＥＳ情報が存在するか否かを判断する（ステップＳ３０５）。

ＥＳ情報が存在すると判断する場合（ステップＳ３０５における「Ｙｅｓ」）、デコーダ割当部３５１ａは、ｓｕｂｔｉｔｌｅ＿ｍｏｄｅ＝１かつｓｕｂｔｉｔｌｅ＿ｃｏｍｐｏｎｅｎｔ＝１であるＥＳ情報を取得する（ステップＳ３１０）。

デコーダ割当部３５１ａは、取得したＥＳ情報は、左目用であるか否かを判断する（ステップＳ３１５）。具体的には、デコーダ割当部３５１ａは、取得したＥＳ情報に含まれるｓｕｂｔｉｔｌｅ＿ｖｉｅｗの値が０であるか否かを判断する。

取得したＥＳ情報は左目用であると判断する場合（ステップＳ３１５における「Ｙｅｓ」）、デコーダ割当部３５１ａは、ＥＳ情報に含まれる“ｅｌｅｍｅｎｔａｒｙ＿ＰＩＤ”で示されるＰＩＤの字幕ＥＳのパケットの出力先としてメイン字幕デコーダ３６０を、３Ｄ字幕記述子に含まれる“ｐａｉｒ＿ＰＩＤ”で示されるＰＩＤの字幕ＥＳのパケットの出力先としてサブ字幕デコーダ３６１を、それぞれ割り当てる（ステップＳ３２０）。これにより、パケットのＰＩＤがＥｌｅｍｅｎｔａｒｙ＿ＰＩＤと同一であるパケットのみがメイン字幕デコーダ３６０に出力され、パケットのＰＩＤがｐａｉｒ＿ＰＩＤと同一であるパケットのみがサブ字幕デコーダ３６１に出力される。また、このとき、メイン字幕デコーダ３６０では、分離部３５０から受け取ったパケットから左目用字幕を生成し、サブ字幕デコーダ３６１では、分離部３５０から受け取ったパケットから右目用字幕を生成する。

取得したＥＳ情報は左目用でない、つまり右目用であると判断する場合（ステップＳ３１５における「Ｎｏ」）、デコーダ割当部３５１ａは、３Ｄ字幕記述子に含まれる “ｐａｉｒ＿ＰＩＤ”で示されるＰＩＤの字幕ＥＳのパケットの出力先としてサブ字幕デコーダ３６１を、ＥＳ情報に含まれる“ｅｌｅｍｅｎｔａｒｙ＿ＰＩＤ”で示されるＰＩＤの字幕ＥＳのパケットの出力先としてメイン字幕デコーダ３６０を、それぞれ割り当てる（ステップＳ３２５）。

ＥＳ情報が存在しないと判断する場合（ステップＳ３０５における「Ｎｏ」）、デコーダ割当部３５１ａは、読み込んだＰＭＴに、３Ｄ字幕記述子（ｓｔｅｒｅｏｓｃｏｐｉｃ＿ｓｕｂｔｉｔｌｅ＿ｄｅｓｃｒｉｐｔｏｒ）が存在し、ｓｕｂｔｉｔｌｅ＿ｍｏｄｅ＝１かつｓｕｂｔｉｔｌｅ＿ｃｏｍｐｏｎｅｎｔ＝０であるＥＳ情報が存在するか否かを判断する（ステップＳ３４０）。

ＥＳ情報が存在すると判断する場合（ステップＳ３４０における「Ｙｅｓ」）、デコーダ割当部３５１ａは、ｓｕｂｔｉｔｌｅ＿ｍｏｄｅ＝１かつｓｕｂｔｉｔｌｅ＿ｃｏｍｐｏｎｅｎｔ＝０であるＥＳ情報を取得する（ステップＳ３４５）。

デコーダ割当部３５１ａは、ＥＳ情報に含まれる“ｅｌｅｍｅｎｔａｒｙ＿ＰＩＤ”で示されるＰＩＤの字幕ＥＳのパケットの出力先としてメイン字幕デコーダ３６０及びサブ字幕デコーダ３６１の双方を割り当てる（ステップＳ３５０）。これにより、パケットのＰＩＤがＥｌｅｍｅｎｔａｒｙ＿ＰＩＤと同一であるパケットのみがメイン字幕デコーダ３６０及びサブ字幕デコーダ３６１に出力される。また、このとき、メイン字幕デコーダ３６０では、１ＥＳで配信された左目用字幕についてのパケットから左目用字幕を生成し、サブ字幕デコーダ３６１では、１ＥＳで配信された右目用字幕についてのパケットから左目用字幕を生成する。

ＥＳ情報が存在しないと判断する場合（ステップＳ３４０における「Ｎｏ」）、デコーダ割当部３５１ａは、読み込んだＰＭＴに、３Ｄ字幕記述子（ｓｔｅｒｅｏｓｃｏｐｉｃ＿ｓｕｂｔｉｔｌｅ＿ｄｅｓｃｒｉｐｔｏｒ）が存在し、ｓｕｂｔｉｔｌｅ＿ｍｏｄｅ＝０かつｓｕｂｔｉｔｌｅ＿ｃｏｍｐｏｎｅｎｔ＝０であるＥＳ情報が存在するか否かを判断する（ステップＳ３５５）。

ＥＳ情報が存在すると判断する場合（ステップＳ３５５における「Ｙｅｓ」）、デコーダ割当部３５１ａは、ｓｕｂｔｉｔｌｅ＿ｍｏｄｅ＝０かつｓｕｂｔｉｔｌｅ＿ｃｏｍｐｏｎｅｎｔ＝０であるＥＳ情報を取得する（ステップＳ３６０）。

デコーダ割当部３５１ａは、ＥＳ情報に含まれる“ｅｌｅｍｅｎｔａｒｙ＿ＰＩＤ”で示されるＰＩＤの字幕ＥＳのパケットの出力先としてメイン字幕デコーダ３６０に割り当てる（ステップＳ３５０）。これにより、パケットのＰＩＤがＥｌｅｍｅｎｔａｒｙ＿ＰＩＤと同一であるパケットのみがメイン字幕デコーダ３６０に出力される。このとき、サブ字幕デコーダ３６１は、デコード処理を行う必要がない。また、このとき、メイン字幕デコーダ３６０を含む字幕生成部３１８では、１ｐｌａｎｅ＋ｏｆｆｓｅｔ方式により左目用字幕、及び右目用字幕を生成する。

ＥＳ情報が存在しないと判断する場合（ステップＳ３５５における「Ｎｏ」）、デコーダ割当部３５１ａは、字幕ＥＳのＥＳ情報が存在するか否かを判断する（ステップＳ３７０）。これは、ｓｔｒｅａｍ＿ｔｙｐｅやｃｏｍｐｏｎｅｎｔ＿ｔａｇの値によって判定が可能である。例えば、デジタル放送では、字幕及び文字スーパーのｓｔｒｅａｍ＿ｔｙｐｅは「０ｘ０６」、字幕のｃｏｍｐｏｎｅｎｔ＿ｔａｇは「０ｘ３０〜０ｘ３７」、文字スーパーのｃｏｍｐｏｎｅｎｔ＿ｔａｇは「０ｘ３９〜０ｘ３Ｆ」とするようＡＲＩＢ規格の「ＢＳ／広帯域ＣＳデジタル放送運用規定」にて定められている。

ＥＳ情報は存在すると判断する場合（ステップＳ３７０における「Ｙｅｓ」）、デコーダ割当部３５１ａは、字幕ＥＳのＥＳ情報を取得する（ステップＳ３７５）。

デコーダ割当部３５１ａは、ＥＳ情報に含まれる“ｅｌｅｍｅｎｔａｒｙ＿ＰＩＤ”で示されるＰＩＤの字幕ＥＳのパケットの出力先としてメイン字幕デコーダ３６０に割り当てる（ステップＳ３８０）。これにより、パケットのＰＩＤがＥｌｅｍｅｎｔａｒｙ＿ＰＩＤと同一であるパケットのみがメイン字幕デコーダ３６０に出力される。このとき、サブ字幕デコーダ３６１はデコード処理を行う必要がない。また、このとき、配信された映像が３Ｄ表示される場合には、メイン字幕デコーダ３６０を含む字幕生成部３１８では、メイン字幕デコーダ３６０に割り当てられた字幕ＥＳから左目用字幕、及び右目用字幕を生成する。この場合の各字幕の生成は、１ｐｌａｎｅ＋ｏｆｆｓｅｔ方式により実現できる。

ＥＳ情報は存在しないと判断する場合（ステップＳ３７０における「Ｎｏ」）、処理は終了する。この場合、配信されたＴＳ内に字幕ＥＳが含まれていないため、メイン字幕デコーダ３６０及びサブ字幕デコーダ３６１に対して字幕ＥＳの割当はなされていない。

３．４ 映像処理装置３０１ａ及び映像処理装置３０２ａ
ここでは、映像処理装置３０１ａ及び映像処理装置３０２ａの字幕の表示について、簡単に説明する。

映像処理装置３０１ａは、１ｐａｌｎｅ＋ｏｆｆｓｅｔ方式による字幕表示を行う装置であるため、２ＥＳによる字幕セットを用いた字幕の３Ｄ表示はできないし、１ＥＳによる２ｐｌａｎｅ＋ｏｆｆｓｅｔ方式を用いた字幕の３Ｄ表示はできない。そこで、ＥＳ情報に３Ｄ字幕記述子が存在する場合には、ｓｕｂｔｉｔｌｅ＿ｍｏｄｅ＝０かつｓｕｂｔｉｔｌｅ＿ｃｏｍｐｏｎｅｎｔ＝０であるときのみ当該ＥＳ情報で示される字幕ＥＳを用いて１ｐａｌｎｅ＋ｏｆｆｓｅｔ方式による字幕表示を行う。ＥＳ情報に３Ｄ字幕記述子が存在するが、ｓｕｂｔｉｔｌｅ＿ｍｏｄｅ＝０かつｓｕｂｔｉｔｌｅ＿ｃｏｍｐｏｎｅｎｔ＝０でない場合、及び３Ｄ字幕記述子が存在しない場合には、映像処理装置３０１ａは、２Ｄ用のＥＳ情報が存在するときには、当該ＥＳ情報で示される字幕ＥＳを用いて１ｐａｌｎｅ＋ｏｆｆｓｅｔ方式による字幕表示を行う。

また、映像処理装置３０２ａは、字幕の３Ｄ表示そのものができない。そこで、３Ｄ字幕記述子が存在しないＥＳ情報、つまり２Ｄ用のＥＳ情報が存在する場合には、当該ＥＳ情報で示される字幕ＥＳを用いて２Ｄの字幕表示を行う。

３．５ 変形例
また、上記実施の形態に限らず、例えば、以下のような変形例が考えられる。

（１）上記第２の実施の形態において、字幕の配信方法が２ＥＳである場合、３Ｄ字幕記述子において、“ｐａｉｒ＿ＰＩＤ”を記載し、ペアとなる字幕ＥＳを特定したが、これに限定されない。

ペアとなる字幕ＥＳを特定できる方法であれば、どのような方法であってもよい。例えば、ｃｏｍｐｏｎｅｎｔ＿ｔａｇなどのＰＩＤ以外のパラメータによってペアとなる字幕ＥＳを特定してもよい。

または、左目用字幕のＰＩＤやｃｏｍｐｏｎｅｎｔ＿ｔａｇに固定値を足した値もしくは引いた値を右目用字幕のＰＩＤやｃｏｍｐｏｎｅｎｔ＿ｔａｇの値とするよう配信側と受信側でルールを決めておくことで、片方のＥＳのＰＩＤやｃｏｍｐｏｎｅｎｔ＿ｔａｇ取得した時点でペアとなるＥＳのＰＩＤやｃｏｍｐｏｎｅｎｔ＿ｔａｇを特定できるようにしてもよい。

または、ＰＩＤやｃｏｍｐｏｎｅｎｔ＿ｔａｇ等のパラメータにおいて、２ＥＳで配信する字幕の左目用字幕にのみ割当てる値の範囲や、２ＥＳで配信する字幕の右目用字幕にのみ割当てる値の範囲や、再生モードが１ｐｌａｎｅ＋ｏｆｆｓｅｔであり、１ＥＳで配信する字幕にのみ割当てる値の範囲や、再生モードが２ｐｌａｎｅ＋ｏｆｆｓｅｔであり、１ＥＳで配信する字幕にのみ割当てる値の範囲を配信側と受信側でルールを決めておくことで、ＰＩＤやｃｏｍｐｏｎｅｎｔ＿ｔａｇ等のパラメータを取得した時点で、字幕ＥＳの再生モードが１ｐｌａｎｅ＋ｏｆｆｓｅｔであり、１ＥＳで配信する字幕のＥＳか、再生モードが２ｐｌａｎｅ＋ｏｆｆｓｅｔであり、１ＥＳで配信する字幕のＥＳか、左目用字幕のＥＳか右目用字幕のＥＳであることを特定できるようにしてもよい。例えば、２ＥＳで配信する字幕の左目用字幕のｃｏｍｐｏｎｅｎｔ＿ｔａｇは「０ｘ３１」、右目用字幕のｃｏｍｐｏｎｅｎｔ＿ｔａｇは「０ｘ３２」というように配信側と受信側でルールを決めておけばよい。

また、ＰＩＤやｃｏｍｐｏｎｅｎｔ＿ｔａｇなどによってペアとなる字幕ＥＳを特定するのではなく、重畳する映像の字幕を指定することで、メイン字幕デコーダ３６０とサブ字幕デコーダ３６１とに割当てる字幕ＥＳを判定してもよい。例えば、左目用字幕のＥＳのＥＳ情報には対応する左目用映像を特定するためのＰＩＤやｃｏｍｐｏｎｅｎｔ＿ｔａｇを指定する。

（２）上記第２の実施の形態では、３Ｄ字幕記述子（ｓｔｅｒｅｏｓｃｏｐｉｃ＿ｓｕｂｔｉｔｌｅ＿ｄｅｓｃｒｉｐｔｏｒ）をＰＭＴに配置したが、これに限定されない。

３Ｄ字幕記述子は、他のＳＩ／ＰＳＩのテーブルに配置してもよい。例えば、ＳＩのＥＩＴのループに配置しても良い。また、ＳＩとＰＳＩ両方に３Ｄ字幕記述子（ｓｔｅｒｅｏｓｃｏｐｉｃ＿ｓｕｂｔｉｔｌｅ＿ｄｅｓｃｒｉｐｔｏｒ）を配置してもよい。

ＥＩＴなどのＳＩは番組開始以前に取得可能な情報であるため、番組開始前にデコーダ割当部３５１ａによって、左目用字幕ＥＳのＰＩＤと右目用字幕ＥＳのＰＩＤを特定しておくことも可能である。なお、ＳＩは番組開始以前から配信されている情報であり、番組直前にＰＩＤが変更される可能性もあるため、番組開始時にＳＩとＰＳＩに記載されたｓｔｅｒｅｏｓｃｏｐｉｃ＿ｓｕｂｔｉｔｌｅ＿ｄｅｓｃｒｉｐｔｏｒ記述子の内容を比較し、記載内容が異なる場合には、ＰＳＩに記載された情報を優先してもよい。

（３）上記第２の実施の形態において、配信される字幕セットに対する配信方法及び再生方法を、３Ｄ字幕記述子によって判別したが、これに限定されない。

例えば、ＳＩ／ＰＳＩのテーブルのｒｅｓｅｒｖｅｄ領域やｒｅｓｅｒｖｅｄ＿ｆｕｔｕｒｅ＿ｕｓｅ領域など、現在使用されていない領域を拡張して、３Ｄ字幕記述子に記載しているのと同等の情報を、これら拡張した領域に分割して入れても良い。

（４）上記第２の実施の形態では、左目用字幕のＥＳ情報及び右目用字幕のＥＳ情報それぞれに３Ｄ字幕記述子（ｓｔｅｒｅｏｓｃｏｐｉｃ＿ｓｕｂｔｉｔｌｅ＿ｄｅｓｃｒｉｐｔｏｒ）を配置し、自身が左目用字幕か右目用字幕かというｖｉｅｗ情報とペアとなる字幕ＥＳを特定するためのｐａｉｒ＿ＰＩＤの情報とを記載するとしたが、これに限定されない。

どちらかの字幕ＥＳのＥＳ情報に３Ｄ字幕ペア記述子を配置したり、両方の字幕ＥＳのＥＳ情報として、ｖｉｅｗ情報のみを記載して、ｐａｉｒ＿ＰＩＤパラメータを省略したりしてもよい。

例えば、左目用字幕のＥＳ情報、及び右目用字幕のＥＳ情報のうち一方のＥＳ情報の３Ｄ字幕記述子を配置する場合には、ＥＳ情報記載箇所Ｄ１０１で記述される左目用字幕のＥＳ情報、及び右目用字幕のＥＳ情報のうち、先行して記載されるＥＳ情報に３Ｄ字幕記述子を記載する。これにより、左目用字幕のＥＳ情報、及び右目用字幕のＥＳ情報のうち片方のＥＳ情報、つまりＥＳ情報記載箇所Ｄ１０１で先行して記述されたＥＳ情報を読んだ時点で、左目用字幕ＥＳと右目用字幕ＥＳを特定でき、表示までの時間を短縮することができる。

（５）上記第２の実施の形態で、２Ｄ用の字幕は３Ｄ用字幕とは個別に生成されるものとしたが、これに限定されない。

２Ｄ用字幕については、３Ｄ用字幕のいずれかの字幕ＥＳと共用してもよい。これにより、２Ｄ用字幕を別途作成したり配信したりする手間を省くことができる。この場合、３Ｄ字幕記述子に、２Ｄ用字幕として使用するか否かのパラメータをさらに追加してもよい。

（６）上記第２の実施の形態において、図２０、２１に示すステップＳ３１０、Ｓ３４５において、条件（直前の判定ステップにおける条件）を満たすＥＳ情報が複数個ある場合には、複数個のＥＳ情報を取得してもよい。なお、この場合、複数のＰＩＤをメイン字幕デコーダ３６０及びサブ字幕デコーダ３６１に割当ててもよい。

また、ステップＳ３６０、Ｓ３７５において、条件（直前の判定ステップにおける条件）を満たすＥＳ情報が複数個ある場合には、複数個のＥＳ情報を取得してもよい。なお、この場合、複数のＰＩＤをメイン字幕デコーダ３６０に割当ててもよい。

（７）上記第２の実施の形態では、２ＥＳで配信される字幕セットがある場合は、２ＥＳで配信される字幕セットを表示し、２ＥＳで配信される字幕セットがない場合は再生モードが２ｐｌａｎｅ＋ｏｆｆｓｅｔであり、１ＥＳで配信される字幕セットを表示し、２ｐｌａｎｅ＋ｏｆｆｓｅｔであり、１ＥＳで配信される字幕セットがない場合には、再生モードが１ｐｌａｎｅ＋ｏｆｆｓｅｔであり、１ＥＳで配信される字幕セットを表示し、いずれもない場合には、２Ｄ用の字幕セットを表示するようになっている。すなわち、２ＥＳで配信される字幕セット、再生モードが２ｐｌａｎｅ＋ｏｆｆｓｅｔであり、１ＥＳで配信される字幕、再生モードが１ｐｌａｎｅ＋ｏｆｆｓｅｔであり、１ＥＳで配信される字幕、２Ｄ字幕の順で表示を優先させているが、これに限定されない。

当該優先順位は一例であり、映像処理装置の処理能力やユーザの嗜好によって、優先順位を変えたり、特性の文字セットの使用を抑制したりしてもよい。

例えば、映像処理装置３０２ａのように、再生モードが１ｐｌａｎｅ＋ｏｆｆｓｅｔであり、１ＥＳで配信される字幕セットにのみ対応している場合には、２ＥＳで配信される字幕セットや２ｐｌａｎｅ＋ｏｆｆｓｅｔであり、１ＥＳで配信される字幕セットがあってもメイン字幕デコーダ３６０及びサブ字幕デコーダ３６１への割り当ては行なわず、再生モードが１ｐｌａｎｅ＋ｏｆｆｓｅｔであり、１ＥＳで配信される字幕セットが存在する場合のみ字幕を表示してもよい。

（８）上記実施の形態及び上記変形例をそれぞれ組み合わせるとしてもよい。

３．６ まとめ
以上、説明したように、３Ｄ字幕記述子（ｓｔｅｒｅｏｓｃｏｐｉｃ＿ｓｕｂｔｉｔｌｅ＿ｄｅｓｃｒｉｐｔｏｒ）の有無によって字幕ＥＳが２Ｄ用字幕か３Ｄ用字幕かを判定可能となり、ｓｕｂｔｉｔｌｅ＿ｍｏｄｅの値によって再生モードが１ｐｌａｎｅ＋ｏｆｆｓｅｔであるか２ｐｌａｎｅ＋ｏｆｆｓｅｔであるかの判定が可能となり、ｓｕｂｔｉｔｌｅ＿ｃｏｍｐｏｎｅｎｔの値によって字幕セットのＥＳ構成が１ＥＳであるか２ＥＳであるかの判定が可能となる。

このように、３Ｄ字幕記述子（ｓｔｅｒｅｏｓｃｏｐｉｃ＿ｓｕｂｔｉｔｌｅ＿ｄｅｓｃｒｉｐｔｏｒ）という新規記述子を、３Ｄ表示される字幕のＥＳ情報として配置して映像配信装置２００ａから配信し、映像処理装置３００ａは、デコーダ割当部３５１ａによって、ＰＭＴを解析して、解析結果に応じて字幕のパケットを適切な字幕デコーダに出力することにより、配信事業者の意図したとおりの映像（左目用映像／右目用映像）と重畳して表示することが出来る。

４．変形例
また、上記各実施の形態などに限らず、例えば、以下のような変形例が考えられる。

（１）上記各実施の形態では、トランスポートストリームをデジタル放送として配信したが、これに限定されない。

ＩＰＴＶ及びＶＯＤ（Ｖｉｄｅｏ Ｏｎ Ｄｅｍａｎｄ）としてトランスポートストリームを配信してもよい。

このとき、ＩＰＴＶとしてトランスポートストリームを配信する場合には、３Ｄ字幕ペア記述子又は３Ｄ字幕記述子をＰＭＴに記載するのではなく再生制御情報、例えばＥＲＩ（Ｅｎｔｒｙ Ｒｅｓｏｕｒｃｅ Ｉｎｆｏｒｍａｔｉｏｎ）に記載する。または、ＩＰネットワークによる通信によってトランスポートストリームを配信する場合には、ＨＴＴＰ又はＨＴＴＰＳ（Ｈｙｐｅｒｔｅｘｔ Ｔｒａｎｓｆｅｒ Ｐｒｏｔｏｃｏｌ ｏｖｅｒ Ｓｅｃｕｒｅ Ｓｏｃｋｅｔ Ｌａｙｅｒ）のヘッダに３Ｄ字幕ペア記述子又は３Ｄ字幕記述子を記載する。

または、ＶＯＤとしてトランスポートストリームを配信する場合には、ＥＣＧ（Ｅｌｅｃｔｒｏｎｉｃ Ｃｏｎｔｅｎｔ Ｇｕｉｄｅ）メタデータに、３Ｄ字幕ペア記述子又は３Ｄ字幕記述子を記載する。

また、ＩＰ放送、ＶＯＤなど、配信する形態によって運用規定が異なるため、デコーダ割当部３５１によるＰＭＴに字幕のＥＳ情報が存在するか否かを判断（ステップＳ１０５参照）については、自身が受信する形態（ＩＰ放送、ＶＯＤ、デジタル放送）によって、判断に使用するパラメータ及びパラメータ値を変更することで実現できる。

（２）上記各実施の形態において、オフセットは左目用映像のパケットに格納するとしたが、これに限定されない。

オフセットは、右目用映像のパケットに格納されてもよい。この場合、オフセット取得部３１５は、右ビデオデコーダ３１４からオフセットを取得することとなる。

または、オフセット取得部３１５は、左目用映像と右目用映像の差分から、映像の奥行き情報を算出し、これを利用してオフセット情報を生成するとしてもよい。

（３）上記各実施の形態では、映像処理装置の一例としてデジタルテレビであるとしたが、これに限定されない。映像処理装置を、ＤＶＤレコーダ、ＢＤ（Ｂｌｕ−ｒａｙ Ｄｉｓｃ）レコーダやセットトップボックスに適用してもよい。

（４）上記の各装置は、具体的には、マイクロプロセッサ、ＲＯＭ、ＲＡＭ、ハードディスクユニット、ディスプレイユニット、キーボード、マウスなどから構成されるコンピュータシステムである。前記ＲＡＭまたはハードディスクユニットには、コンピュータプログラムが記憶されている。前記マイクロプロセッサが、前記コンピュータプログラムにしたがって動作することにより、各装置は、その機能を達成する。ここでコンピュータプログラムは、所定の機能を達成するために、コンピュータに対する指令を示す命令コードが複数個組み合わされて構成されたものである。

（５）上記の各装置を構成する構成要素の一部または全部は、１個の集積回路から構成されているとしてもよい。

例えば、第１の実施の形態で示す映像配信装置２００は、図２２に示すように、ＥＳ属性情報記憶部２０１、番組配列情報生成部２０２、ＡＶエンコーダ２０３、字幕符号化部２０４、音声符号化部２０５、多重化部２０６及び配信部２０７の各機能ブロックは典型的には集積回路であるＬＳＩとして実現してもよい。これらは個別に１チップ化されてもよいし、１以上の構成要素、又は各構成要素の一部を含むように１チップ化されてもよい。

また、第１の実施の形態で示す映像処理装置３００は、図２３に示すように、入力受付部３１１、分離処理部３１２、左ビデオデコーダ３１３、右ビデオデコーダ３１４、オフセット取得部３１５、左目映像出力部３１６、右目映像出力部３１７、字幕生成部３１８、音声デコーダ３１９、重畳部３２０、３２１及び表示処理部３２２の各機能ブロックは典型的には集積回路であるＬＳＩとして実現される。これらは個別に１チップ化されても良いし、１以上の構成要素、又は各構成要素の一部を含むように１チップ化されてもよい。

（６）上記の各装置を構成する構成要素の一部または全部は、各装置に脱着可能なＩＣカードまたは単体のモジュールから構成されているとしてもよい。前記ＩＣカードまたは前記モジュールは、マイクロプロセッサ、ＲＯＭ、ＲＡＭなどから構成されるコンピュータシステムである。前記ＩＣカードまたは前記モジュールは、上記の超多機能ＬＳＩを含むとしてもよい。マイクロプロセッサが、コンピュータプログラムにしたがって動作することにより、前記ＩＣカードまたは前記モジュールは、その機能を達成する。

（７）上記の実施の形態及び変形例で説明した手法の手順を記述したプログラムをメモリに記憶しておき、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）などがメモリからプログラムを読み出して、読み出したプログラムを実行することによって、上記の手法が実現されるようにしてもよい。

また、当該手法の手順を記述したプログラムを記録媒体に格納して、頒布するようにしてもよい。なお、上記プログラムを記憶する媒体としては、例えば、ＩＣカード、ハードディスク、光ディスク、フレキシブルディスク、ＲＯＭ、フラッシュメモリ等がある。

（８）上記実施の形態及び上記変形例をそれぞれ組み合わせるとしてもよい。

６．補足
（１）本発明の一態様である、３Ｄ映像の映像ストリームを受信しつつ、再生する映像処理装置は、３Ｄ映像とともに表示される表示データのデータストリームを含み、且つ表示データについて左目用表示データと右目用表示データがそれぞれ個別にストリーム化された左目用のデータストリーム及び右目用のデータストリーム双方が存在するか否かを示す付加情報を含むトランスポートストリームを受信する受信手段と、前記付加情報に基づいて、前記トランスポートストリームに左目用のデータストリーム及び右目用のデータストリーム双方が存在するか否かを判別する判別手段と、存在すると判別された場合には左目用のデータストリームから左目用表示データを、右目用のデータストリームから右目用表示データをそれぞれ生成し、存在しないと判別された場合には前記データストリームから左目用表示データ及び右目用表示データを生成する表示データ生成手段とを備えることを特徴とする。

この構成によると、映像処理装置は、トランスポートストリームに含まれる付加情報を用いて、左目用データストリーム及び右目用データストリームの存在の有無を判断するので、表示データのストリームの配信形態を迅速に特定し、特定した配信形態に応じた表示データの３Ｄ表示を迅速に行うことができる。

（２）ここで、前記映像ストリームから得られる複数の映像により一の３Ｄ番組が構成され、前記付加情報は、前記一の３Ｄ番組に関するＰＭＴ（Ｐｒｏｇｒａｍ Ｍａｐ Ｔａｂｌｅ）であり、前記判別手段は、前記ＰＭＴに左目用のデータストリーム及び右目用のデータストリーム双方の存在を示す記述が存在するか否かにより、前記判別を行うとしてもよい。

この構成によると、映像処理装置は、ＰＭＴを用いた前記判別を行うので、表示データを含むストリームの内容を解析する前に、左目用データストリーム及び右目用データストリームの存在の有無を特定することができる。そのため、映像処理装置は、表示データのストリームの配信形態を迅速に特定することができる。

（３）ここで、前記トランスポートストリームに左目用のデータストリーム及び右目用のデータストリームが含まれる場合には、前記ＰＭＴに、左目用のデータストリーム及び右目用のデータストリームのうち少なくとも何れか一方の存在を示す記述子が含まれ、当該記述子には、他方を特定する識別子が記載されており、前記判別手段は、前記ＰＭＴに前記記述子が存在するか否による前記判別を行い、存在すると判別する場合には、さらに、当該記述子から他方を特定する識別子を取得するとしてもよい。

この構成によると、映像処理装置は、左目用データストリーム及び右目用データストリームのうち少なくとも何れか一方の存在を示す記述子の有無を判別し、記述子が存在する場合には当該記述子から他方を特定することができるので、ＰＭＴの解析の時間を短縮することができる。

（４）ここで、前記判別手段は、前記ＰＭＴに左目用のデータストリームの存在を示す第１記述子、及び右目用のデータストリームの存在を示す第２記述子が存在するか否により、前記判別を行うとしてもよい。

この構成によると、映像処理装置は、第１記述子及び第２記述子の双方の存在を判別することで、左目用データストリーム及び右目用データストリームの存在の有無を特定することができ、さらに当該判別により左目用データストリームと右目用データストリームとの相互の対応をも特定することができる。

（５）ここで、前記付加情報は、左目用のデータストリーム及び右目用のデータストリーム双方が存在するか否かを示す第１判別情報と、１つのプレーンを用いて前記表示データ生成手段による前記処理が行われる第１生成手法及び２つのプレーンを用いて前記処理が行われる第２生成手法の何れを用いるかを示す第２判別情報とを含んでおり、前記データストリームは、前記第１生成手法が用いられる第１種データストリームであり、前記トランスポートストリームにおいて、表示データについて左目用表示データと右目用表示データとが同一のストリームとなるようストリーム化された第２種データストリームが含まれる場合には、前記第２判別情報には前記第２生成手法が用いられることが示されており、前記判別手段は、前記第１判別情報を用いて、前記判別を行い、前記判別により左目用のデータストリーム及び右目用のデータストリーム双方が存在しないと判別した場合には、さらに、前記第２判別情報が前記第１生成手法及び前記第２生成手法のうち何れを示しているか判別し、前記表示データ生成手段は、前記判別手段で左目用のデータストリーム及び右目用のデータストリーム双方が存在すると判別された場合には、前記第２生成手法により前記処理を行い、前記判別手段で左目用データストリーム及び右目用データストリーム双方が存在しないと判別され、且つ前記第２判別情報が前記第２生成手法を用いることを示していると判別された場合には、前記第２生成手法を用いて前記第２種データストリームから左目用表示データ及び右目用表示データを生成し、前記判別手段で左目用データストリームと右目用データストリームとが存在しないと判別され、且つ前記第２判別情報が前記第１生成手法を用いることを示していると判別された場合には、前記第１生成手法を用いて前記第１種データストリームから左目用表示データ及び右目用表示データを生成するとしてもよい。

この構成によると、映像処理装置は、左目用表示データ及び右目用表示データの生成の優先順位を、左目用データストリームと右目用データストリームとから生成、第２種データストリームから生成、第１種データストリームから生成としている。一般的に、１つデータから左目用及び右目用のデータを生成する場合に比べて、個別のデータから左目用及び右目用のデータそれぞれを生成する方が画質はよい。また、個別のデータを１つのストリームでストリーム化するよりも、個別にストリーム化する方が画質はよい。よって、映像処理装置は、上記の優先順位に従って、画質がよい表示データを優先的に表示することができる。

（６）また、本発明の一態様である、映像処理装置に３Ｄ映像の映像ストリームを受信させつつ、再生させるために前記映像ストリームを送信する送信装置は、３Ｄ映像とともに表示される表示データについて左目用表示データと右目用表示データがそれぞれ個別にストリーム化された左目用のデータストリームと右目用のデータストリーム双方が存在するか否かを示す付加情報を生成する付加情報生成手段と、表示データのデータストリームの生成、及び前記付加情報が示す内容に応じて前記左目用のデータストリームと前記右目用のデータストリームとの生成を行うストリーム生成手段と、前記付加情報、前記映像ストリーム、及び前記ストリーム生成手段で生成された全てのストリームを多重化して送信する送信手段とを備えることを特徴とする。

この構成によると、送信装置は、トランスポートストリームに付加情報を含めて映像処理装置に送信し、映像処理装置に、当該付加情報を用いて左目用データストリーム及び右目用データストリームの存在の有無を判断させることで、表示データのストリームの配信形態を迅速に特定させ、特定した配信形態に応じた表示データの３Ｄ表示を迅速に行わせることができる。

（７）ここで、前記映像ストリームから得られる複数の映像により一の３Ｄ番組が構成され、前記付加情報は、前記一の３Ｄ番組に関するＰＭＴ（Ｐｒｏｇｒａｍ Ｍａｐ Ｔａｂｌｅ）であり、前記付加情報生成手段は、前記トランスポートストリームに、前記左目用のデータストリームと前記右目用のデータストリームとを含める場合には、前記ＰＭＴに前記左目用のデータストリーム及び前記右目用のデータストリーム双方の存在を示す記述を記載するとしてもよい。

この構成によると、送信装置は、映像処理装置にＰＭＴを用いた前記判別を行わせるので、表示データを含むストリームの内容を解析する前に、左目用データストリーム及び右目用データストリームの存在の有無を特定させることができる。

（８）ここで、前記付加情報生成手段は、前記ＰＭＴに左目用のデータストリーム及び右目用のデータストリームのうち何れか一方の存在を示す記述子を含め、さらに、当該記述子に他方を特定する識別子を記載するとしてもよい。

この構成によると、送信装置は、左目用データストリーム及び右目用データストリームのうち少なくとも何れか一方の存在を示す記述子をＰＭＴに含め、当該記述子には他方を特定する識別子を記載するので、映像処理装置に、当該記述子の有無を判別させ、記述子が存在する場合には当該記述子から他方を特定させることができるので、ＰＭＴの解析の時間を短縮させることができる。

（９）ここで、前記付加情報生成手段は、前記ＰＭＴに左目用のデータストリームの存在を示す第１記述子、及び右目用のデータストリームの存在を示す第２記述子を含めるとしてもよい。

この構成によると、送信装置は、第１記述子及び第２記述子をＰＭＴに含めるので、映像処理装置にこれら記述子の双方の存在を判別させることで、左目用データストリーム及び右目用データストリームの存在の有無を特定させることができ、さらに当該判別により左目用データストリームと右目用データストリームとの相互の対応をも特定させることができる。

（１０）ここで、前記付加情報生成手段は、左目用のデータストリーム及び右目用のデータストリーム双方が存在するか否かを示す第１判別情報と、１つのプレーンを用いて前記表示データ生成手段による前記処理が行われる第１生成手法及び２つのプレーンを用いて前記処理が行われる第２生成手法の何れを用いるかを示す第２判別情報とを含む前記付加情報を生成し、前記データストリームは、前記第１生成手法が用いられる第１種データストリームであり、前記ストリーム生成手段は、前記第１判別情報が左目用のデータストリーム及び右目用のデータストリーム双方が存在しないことを示し、且つ前記第２判別情報が前記第２生成手法を用いることを示す場合には、さらに、表示データについて左目用表示データと右目用表示データとが同一のストリームとなるようストリーム化された第２種データストリームを生成するとしてもよい。

この構成によると、送信装置は、第１判別情報及び第２判別情報により、左目用データストリーム及び右目用データストリームの存在の有無、及び各表示データの生成方法を、映像処理装置に容易に特定させることができる。また、送信装置は、左目用データストリーム及び右目用データストリームが存在しない場合であっても、第２種データストリームを送信することで、映像処理装置に第２生成手法を行わせるので、左目用データストリーム及び右目用データストリームそれぞれから生成された各表示データの画質と同等の画質を映像処理装置に提供することができる。

（１１）また、本発明の一態様である、３Ｄ映像のストリームを送信する送信装置と、当該映像ストリームを受信しつつ、再生する映像処理装置とからなる映像処理システムは、前記送信装置は、３Ｄ映像とともに表示される表示データについて左目用表示データと右目用表示データがそれぞれ個別にストリーム化された左目用のデータストリームと右目用のデータストリーム双方が存在するか否かを示す付加情報を生成する付加情報生成手段と、表示データのデータストリームの生成、及び前記付加情報が示す内容に応じて前記左目用のデータストリームと前記右目用のデータストリームとの生成を行うストリーム生成手段と、前記付加情報、前記映像ストリーム、及び前記ストリーム生成手段で生成された全てのストリームが多重化されたトランスポートストリームを送信する送信手段とを備え、前記映像処理装置は、前記トランスポートストリームを受信する受信手段と、前記付加情報に基づいて、前記トランスポートストリームに左目用のデータストリーム及び右目用のデータストリーム双方が存在するか否かを判別する判別手段と、存在すると判別された場合には左目用のデータストリームから左目用表示データを、右目用のデータストリームから右目用表示データをそれぞれ生成し、存在しないと判別された場合には前記データストリームから左目用表示データ及び右目用表示データを生成する表示データ生成手段とを備えることを特徴とする。

この構成によると、映像処理システムの送信装置は、トランスポートストリームに付加情報を含めて映像処理装置に送信し、映像処理装置は、トランスポートストリームに含まれる付加情報を用いて、左目用データストリーム及び右目用データストリームの存在の有無を判断する。これにより、映像処理システムでは、表示データの配信形態を迅速に特定し、特定した配信形態に応じた表示データの３Ｄ表示を迅速に行うことができる。

本発明にかかる映像処理システム及び映像処理装置それぞれは、３Ｄ映像とともに字幕を配信するシステム及びこれらを受信し、表示する装置において有用である。

１００、１００ａ 映像処理システム
２００、２００ａ 映像配信装置
２０１ ＥＳ属性情報記憶部
２０２、２０２ａ 番組配列情報生成部
２０３ ＡＶエンコーダ
２０４、２０４ａ 字幕符号化部
２０５ 音声符号化部
２０６ 多重化部
２０７ 配信部
３００、３０１、３０２、３００ａ、３０１ａ、３０２ａ 映像処理装置
３１１ 入力受付部
３１２、３１２ａ 分離処理部
３１３ 左ビデオデコーダ
３１４ 右ビデオデコーダ
３１５ オフセット取得部
３１６ 左目映像出力部
３１７ 右目映像出力部
３１８ 字幕生成部
３１９ 音声デコーダ
３２０、３２１ 重畳部
３２２ 表示処理部
３５０ 分離部
３５１、３５１ａ デコーダ割当部
３６０ メイン字幕デコーダ
３６１ サブ字幕デコーダ
３６２ 左目用字幕プレーン
３６３ 右目用字幕プレーン
３６４ 左目字幕出力部
３６５ 右目字幕出力部

Claims (17)

1. ３Ｄ映像の映像ストリームを受信しつつ、再生する映像処理装置であって、
   ３Ｄ映像とともに表示される表示データのデータストリームを含み、且つ表示データについて左目用表示データと右目用表示データがそれぞれ個別にストリーム化された左目用のデータストリーム及び右目用のデータストリーム双方が存在するか否かを示す付加情報を含むトランスポートストリームを受信する受信手段と、
   前記付加情報に基づいて、前記トランスポートストリームに左目用のデータストリーム及び右目用のデータストリーム双方が存在するか否かを判別する判別手段と、
   存在すると判別された場合には左目用のデータストリームから左目用表示データを、右目用のデータストリームから右目用表示データをそれぞれ生成し、存在しないと判別された場合には前記データストリームから左目用表示データ及び右目用表示データを生成する表示データ生成手段とを備える
   ことを特徴とする映像処理装置。
2. 前記映像ストリームから得られる複数の映像により一の３Ｄ番組が構成され、
   前記付加情報は、前記一の３Ｄ番組に関するＰＭＴ（Ｐｒｏｇｒａｍ Ｍａｐ Ｔａｂｌｅ）であり、
   前記判別手段は、前記ＰＭＴに左目用のデータストリーム及び右目用のデータストリーム双方の存在を示す記述が存在するか否かにより、前記判別を行う
   ことを特徴とする請求項１に記載の映像処理装置。
3. 前記トランスポートストリームに左目用のデータストリーム及び右目用のデータストリームが含まれる場合には、前記ＰＭＴに、左目用のデータストリーム及び右目用のデータストリームのうち少なくとも何れか一方の存在を示す記述子が含まれ、
   当該記述子には、他方を特定する識別子が記載されており、
   前記判別手段は、前記ＰＭＴに前記記述子が存在するか否による前記判別を行い、存在すると判別する場合には、さらに、当該記述子から他方を特定する識別子を取得する
   ことを特徴とする請求項２に記載の映像処理装置。
4. 前記判別手段は、前記ＰＭＴに左目用のデータストリームの存在を示す第１記述子、及び右目用のデータストリームの存在を示す第２記述子が存在するか否により、前記判別を行う
   ことを特徴とする請求項２に記載の映像処理装置。
5. 前記付加情報は、左目用のデータストリーム及び右目用のデータストリーム双方が存在するか否かを示す第１判別情報と、１つのプレーンを用いて前記表示データ生成手段による処理が行われる第１生成手法及び２つのプレーンを用いて前記処理が行われる第２生成手法の何れを用いるかを示す第２判別情報とを含んでおり、
   前記データストリームは、前記第１生成手法が用いられる第１種データストリームであり、
   前記トランスポートストリームにおいて、表示データについて左目用表示データと右目用表示データとが同一のストリームとなるようストリーム化された第２種データストリームが含まれる場合には、前記第２判別情報には前記第２生成手法が用いられることが示されており、
   前記判別手段は、前記第１判別情報を用いて、前記判別を行い、前記判別により左目用のデータストリーム及び右目用のデータストリーム双方が存在しないと判別した場合には、さらに、前記第２判別情報が前記第１生成手法及び前記第２生成手法のうち何れを示しているか判別し、
   前記表示データ生成手段は、前記判別手段で左目用のデータストリーム及び右目用のデータストリーム双方が存在すると判別された場合には、前記第２生成手法により前記処理を行い、
   前記判別手段で左目用データストリーム及び右目用データストリーム双方が存在しないと判別され、且つ前記第２判別情報が前記第２生成手法を用いることを示していると判別された場合には、前記第２生成手法を用いて前記第２種データストリームから左目用表示データ及び右目用表示データを生成し、
   前記判別手段で左目用データストリームと右目用データストリームとが存在しないと判別され、且つ前記第２判別情報が前記第１生成手法を用いることを示していると判別された場合には、前記第１生成手法を用いて前記第１種データストリームから左目用表示データ及び右目用表示データを生成する
   ことを特徴とする請求項１に記載の映像処理装置。
6. 映像処理装置に３Ｄ映像の映像ストリームを受信させつつ、再生させるために前記映像ストリームを送信する送信装置であって、
   ３Ｄ映像とともに表示される表示データについて左目用表示データと右目用表示データがそれぞれ個別にストリーム化された左目用のデータストリームと右目用のデータストリーム双方が存在するか否かを示す付加情報を生成する付加情報生成手段と、
   表示データのデータストリームの生成、及び前記付加情報が示す内容に応じて前記左目用のデータストリームと前記右目用のデータストリームとの生成を行うストリーム生成手段と、
   前記付加情報、前記映像ストリーム、及び前記ストリーム生成手段で生成された全てのストリームを多重化したトランスポートストリームを送信する送信手段とを備える
   ことを特徴とする送信装置。
7. 前記映像ストリームから得られる複数の映像により一の３Ｄ番組が構成され、
   前記付加情報は、前記一の３Ｄ番組に関するＰＭＴ（Ｐｒｏｇｒａｍ Ｍａｐ Ｔａｂｌｅ）であり、
   前記付加情報生成手段は、前記トランスポートストリームに、前記左目用のデータストリームと前記右目用のデータストリームとを含める場合には、前記ＰＭＴに前記左目用のデータストリーム及び前記右目用のデータストリーム双方の存在を示す記述を記載する
   ことを特徴とする請求項６に記載の送信装置。
8. 前記付加情報生成手段は、前記ＰＭＴに左目用のデータストリーム及び右目用のデータストリームのうち何れか一方の存在を示す記述子を含め、さらに、当該記述子に他方を特定する識別子を記載する
   ことを特徴とする請求項７に記載の送信装置。
9. 前記付加情報生成手段は、前記ＰＭＴに左目用のデータストリームの存在を示す第１記述子、及び右目用のデータストリームの存在を示す第２記述子を含める
   ことを特徴とする請求項７に記載の送信装置。
10. 前記付加情報生成手段は、左目用のデータストリーム及び右目用のデータストリーム双方が存在するか否かを示す第１判別情報と、前記トランスポートストリームを受信した映像処理装置が受信したトランスポートストリームから左目用表示データ及び右目用表示データを生成する処理を１つのプレーンを用いて行う第１生成手法及び前記処理を２つのプレーンを用いて行う第２生成手法の何れを用いるかを示す第２判別情報とを含む前記付加情報を生成し、
    前記データストリームは、前記第１生成手法が用いられる第１種データストリームであり、
    前記ストリーム生成手段は、前記第１判別情報が左目用のデータストリーム及び右目用のデータストリーム双方が存在しないことを示し、且つ前記第２判別情報が前記第２生成手法を用いることを示す場合には、さらに、表示データについて左目用表示データと右目用表示データとが同一のストリームとなるようストリーム化された第２種データストリームを生成する
    ことを特徴とする請求項７に記載の送信装置。
11. ３Ｄ映像の映像ストリームを送信する送信装置と、当該映像ストリームを受信しつつ、再生する映像処理装置とからなる映像処理システムであって、
    前記送信装置は、３Ｄ映像とともに表示される表示データについて左目用表示データ
    と右目用表示データがそれぞれ個別にストリーム化された左目用のデータストリームと右目用のデータストリーム双方が存在するか否かを示す付加情報を生成する付加情報生成手段と、
    表示データのデータストリームの生成、及び前記付加情報が示す内容に応じて前記左目用のデータストリームと前記右目用のデータストリームとの生成を行うストリーム生成手段と、
    前記付加情報、前記映像ストリーム、及び前記ストリーム生成手段で生成された全てのストリームが多重化されたトランスポートストリームを送信する送信手段とを備え、
    前記映像処理装置は、
    前記トランスポートストリームを受信する受信手段と、
    前記付加情報に基づいて、前記トランスポートストリームに左目用のデータストリーム及び右目用のデータストリーム双方が存在するか否かを判別する判別手段と、
    存在すると判別された場合には左目用のデータストリームから左目用表示データを、右目用のデータストリームから右目用表示データをそれぞれ生成し、存在しないと判別された場合には前記データストリームから左目用表示データ及び右目用表示データを生成する表示データ生成手段とを備える
    ことを特徴とする映像処理システム。
12. 受信手段、判別手段、表示データ生成手段を備え、３Ｄ映像の映像ストリームを受信しつつ、再生する映像処理装置に用いられる映像処理方法であって、
    前記受信手段が、３Ｄ映像とともに表示される表示データのデータストリームを含み、且つ表示データについて左目用表示データと右目用表示データがそれぞれ個別にストリーム化された左目用のデータストリーム及び右目用のデータストリーム双方が存在するか否かを示す付加情報を含むトランスポートストリームを受信する受信ステップと、
    前記判別手段が、前記付加情報に基づいて、前記トランスポートストリームに左目用のデータストリーム及び右目用のデータストリーム双方が存在するか否かを判別する判別ステップと、
    前記表示データ生成手段が、前記判別ステップで前記左目用のデータストリーム及び前記右目用のデータストリーム双方が存在すると判別された場合には左目用のデータストリームから左目用表示データを、右目用のデータストリームから右目用表示データをそれぞれ生成し、前記判別ステップで前記左目用のデータストリーム及び前記右目用
    のデータストリーム双方が存在しないと判別された場合には前記データストリームから左目用表示データ及び右目用表示データを生成する表示データ生成ステップとを含む
    ことを特徴とする映像処理方法。
13. 付加情報生成手段、ストリーム生成手段及び送信手段を備え、映像処理装置に３Ｄ映像の映像ストリームを受信させつつ、再生させるために前記映像ストリームを送信する送信装置で用いられる送信方法であって、
    前記付加情報生成手段が、３Ｄ映像とともに表示される表示データについて左目用表示データと右目用表示データがそれぞれ個別にストリーム化された左目用のデータストリームと右目用のデータストリーム双方が存在するか否かを示す付加情報を生成する付加情報生成ステップと、
    前記ストリーム生成手段が、表示データのデータストリームの生成、及び前記付加情報が示す内容に応じて前記左目用のデータストリームと前記右目用のデータストリームとの生成を行うストリーム生成ステップと、
    前記送信手段が、前記付加情報、前記映像ストリーム、及び前記ストリーム生成手段で生成された全てのストリームを多重化して送信する送信ステップとを含む
    ことを特徴とする送信方法。
14. ３Ｄ映像の映像ストリームを受信しつつ、再生する映像処理装置に実行させるコンピュータプログラムであって、
    ３Ｄ映像とともに表示される表示データのデータストリームを含み、且つ表示データについて左目用表示データと右目用表示データがそれぞれ個別にストリーム化された左目用のデータストリーム及び右目用のデータストリーム双方が存在するか否かを示す付加情報を含むトランスポートストリームを受信する受信ステップと、
    前記付加情報に基づいて、前記トランスポートストリームに左目用のデータストリーム及び右目用のデータストリーム双方が存在するか否かを判別する判別ステップと、
    前記判別ステップで前記左目用のデータストリーム及び前記右目用のデータストリーム双方が存在すると判別された場合には左目用のデータストリームから左目用表示データを、右目用のデータストリームから右目用表示データをそれぞれ生成し、前記判別ステップで前記左目用のデータストリーム及び前記右目用のデータストリーム双方が存在しないと判別された場合には前記データストリームから左目用表示データ及び右目用表示データを生成する表示データ生成ステップとを含む
    ことを特徴とするコンピュータプログラム。
15. 映像処理装置に３Ｄ映像の映像ストリームを受信させつつ、再生させるために前記映像ストリームを送信する送信装置に実行させるコンピュータプログラムであって、
    ３Ｄ映像とともに表示される表示データについて左目用表示データと右目用表示データがそれぞれ個別にストリーム化された左目用のデータストリームと右目用のデータストリーム双方が存在するか否かを示す付加情報を生成する付加情報生成ステップと、
    表示データのデータストリームの生成、及び前記付加情報が示す内容に応じて前記左目用のデータストリームと前記右目用のデータストリームとの生成を行うストリーム生成ステップと、
    前記付加情報、前記映像ストリーム、及び前記ストリーム生成ステップで生成された全てのストリームを多重化して送信する送信ステップとを含む
    ことを特徴とするコンピュータプログラム。
16. ３Ｄ映像の映像ストリームを受信しつつ、再生する映像処理装置に用いられる集積回路であって、
    ３Ｄ映像とともに表示される表示データのデータストリームを含み、且つ表示データについて左目用表示データと右目用表示データがそれぞれ個別にストリーム化された左目用のデータストリーム及び右目用のデータストリーム双方が存在するか否かを示す付加情報を含むトランスポートストリームを受信する受信手段と、
    前記付加情報に基づいて、前記トランスポートストリームに左目用のデータストリーム及び右目用のデータストリーム双方が存在するか否かを判別する判別手段と、
    存在すると判別された場合には左目用のデータストリームから左目用表示データを、右目用のデータストリームから右目用表示データをそれぞれ生成し、存在しないと判別された場合には前記データストリームから左目用表示データ及び右目用表示データを生成する表示データ生成手段とを備える
    ことを特徴とする集積回路。
17. 映像処理装置に３Ｄ映像の映像ストリームを受信させつつ、再生させるために前記映像ストリームを送信する送信装置に用いられる集積回路であって、
    ３Ｄ映像とともに表示される表示データについて左目用表示データと右目用表示データがそれぞれ個別にストリーム化された左目用のデータストリームと右目用のデータストリーム双方が存在するか否かを示す付加情報を生成する付加情報生成手段と、
    表示データのデータストリームの生成、及び前記付加情報が示す内容に応じて前記左目用のデータストリームと前記右目用のデータストリームとの生成を行うストリーム生成手段と、
    前記付加情報、前記映像ストリーム、及び前記ストリーム生成手段で生成された全てのストリームを多重化して送信する送信手段とを備える
    ことを特徴とする集積回路。

Images