JP4828535B2 - ３次元立体ビデオ付加データを用いた３次元立体デジタル放送の送／受信装置及びその方法 - Google Patents

Description

本発明は、３次元立体ビデオ付加データを用いた３次元立体デジタル放送の送／受信装置及びその方法に関し、より詳しくは、別の視点のビデオを用いて３次元立体デジタル放送システムのみを支援する従来の方法とは異なり、別の視点のビデオ、視差情報（Ｄｉｓｐａｒｉｔｙ Ｉｎｆｏｒｍａｔｉｏｎ）、及び奥行き情報（Ｄｅｐｔｈ Ｉｎｆｏｒｍａｔｉｏｎ）などのような３次元立体ビデオ付加データを２次元ビデオストリーム（Ｔｒａｎｓｐｏｒｔ Ｓｔｒｅａｍ）に同期付けた付加ストリームとして定義して処理することにより、２次元デジタル放送システムとの互換性を有することができるようにした、３次元立体ビデオ付加データを用いた３次元立体デジタル放送の送／受信装置及びその方法に関する。

ＭＰＥＧ（Ｍｏｔｉｏｎ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）（以下、「ＭＰＥＧ」という）技術を用いたデジタル放送は、従来のアナログ放送と同じ帯域幅に高画質の番組を送信することができ、複数の標準画質の番組を１つのチャネルに送信することもできる。それだけでなく、デジタル放送は、データ放送や対話型放送などのように、様々なアプリケーションサービスを提供することができる。このように、１つの送信チャネルに複数の番組や様々なアプリケーションサービスを提供するためには、それぞれのサービス提供者から発生したＭＰＥＧ−２トランスポートストリーム（ＴＳ：Ｔｒａｎｓｐｏｒｔ Ｓｔｒｅａｍ）を１つのチャネルに多重化できるようにしなければならない。

従来のアナログ放送では、立体ビデオを送受信する際、ビデオを送信する順番が交番的に秩序正しい形態を帯びるため、問題がなかったが、デジタル放送では、トランスポートフォーマット（Ｔｒａｎｓｐｏｒｔ Ｆｏｒｍａｔ）にビデオ情報、オーディオ情報、番組案内などのための付加情報が互いに複雑に多重化しており、ビデオが無秩序に並んでいるため、これを再分離して出力するには問題があった。

このような問題を解決するため、ビデオ信号、オーディオ信号、及び付加情報の各パケットを識別することができるパケット識別子（ＰＩＤ：Ｐａｃｋｅｔ Ｉｄｅｎｔｉｆｉｅｒ）と、立体ビデオのために左右ビデオの情報を区別するパケット識別子（ＰＩＤ）とを設ける方法が提案された。

ところが、このような従来の３次元立体ビデオコンテンツをサービスするために提案された技術は、左右ビデオに対してパケット識別子（ＰＩＤ）値をそれぞれ定義することで、２つのビデオストリームが存在するようになり、従来の２次元システムでは、これを区分することができないため、互換性に欠けるという問題が発生する。

一方、３次元立体ビデオを生成することができる情報には、２視点のビデオ、又は１視点のビデオと視差情報、又は１視点のビデオと奥行き情報があるが、前記提案された方法では、２視点のビデオについてのみ言及している。

本発明は、上記の問題を解決するためになされたものであり、その目的は、別の視点のビデオを用いて３次元立体デジタル放送システムのみを支援する従来の方法とは異なり、別の視点のビデオ、視差情報、及び／又は奥行き情報などのような３次元立体ビデオ付加データを２次元ビデオトランスポートストリーム（ＴＳ）に同期付けた付加ストリームとして定義して処理することにより、２次元デジタル放送システムとの互換性を有することができるようにした、３次元立体ビデオ付加データを用いた３次元立体デジタル放送の送／受信装置及びその方法を提供することにある。

上記の目的を達成するための本発明の送信装置は、３次元立体ビデオ付加データを用いた３次元立体デジタル放送の送信装置において、オリジナルビデオと３次元立体ビデオ付加データとを取得するビデオ取得手段と、オーディオデータを取得するオーディオデータ取得手段と、前記ビデオ取得手段から送信されたオリジナルビデオと３次元立体ビデオ付加データと、前記オーディオデータ取得手段から送信されたオーディオデータとをエンコードするエンコード手段と、それぞれの情報を区分するプログラム仕様情報（ＰＳＩ：Ｐｒｏｇｒａｍ Ｓｐｅｃｉｆｉｃ Ｉｎｆｏｒｍａｔｉｏｎ）を生成するプログラム仕様情報生成手段と、前記エンコード手段でエンコードしたそれぞれのエレメンタリストリーム（ＥＳ：Ｅｌｅｍｅｎｔａｒｙ Ｓｔｒｅａｍ）を受信してパケット化し、それぞれエレメンタリストリームパケット（ＰＥＳ：Ｐａｃｋｅｔｉｚｅｒ Ｅｌｅｍｅｎｔａｒｙ Ｓｔｒｅａｍ）を生成するパケット化手段と、該パケット化手段からそれぞれのエレメンタリストリームパケット（ＰＥＳ）を受信し、前記プログラム仕様情報生成手段からプログラム仕様情報（ＰＳＩ）を受信し、それぞれのトランスポートストリーム（ＴＳ）を生成するトランスポートストリーム生成手段と、該トランスポートストリーム生成手段から送信されたそれぞれのトランスポートストリーム（ＴＳ）を１つのトランスポートストリーム（ＴＳ）に多重化する多重化手段と、該多重化したトランスポートストリーム（ＴＳ）を変調する変調手段とを備えることを特徴とする。

また、本発明の受信装置は、３次元立体ビデオ付加データを用いた３次元立体デジタル放送の受信装置において、変調されたトランスポートストリーム（ＴＳ）を受信して変調信号を復調する復調手段と、該復調手段で復調したトランスポートストリームを受信し、プログラム仕様情報分析手段からプログラム仕様情報（ＰＳＩ）を受信し、トランスポートストリーム（ＴＳ）を逆多重化してそれぞれのトランスポートストリーム（ＴＳ）を生成する逆多重化手段と、該逆多重化手段からプログラム仕様情報に対するトランスポートストリーム（ＴＳ＿ＰＳＩ）を受信し、プログラム仕様情報（ＰＳＩ）を分析して、該分析されたプログラム仕様情報（ＰＳＩ）を前記逆多重化手段に伝達する前記プログラム仕様情報分析手段と、前記逆多重化手段で逆多重化したそれぞれのトランスポートストリームを受信し、各トランスポートストリームを分析してエレメンタリストリームパケット（ＰＥＳ）を生成するトランスポートストリーム分析手段と、該トランスポートストリーム分析手段からそれぞれのエレメンタリストリームパケット（ＰＥＳ）を受信してデパケット化し、それぞれのエレメンタリストリーム（ＥＳ）を生成するデパケット化手段と、該デパケット化手段からそれぞれのエレメンタリストリーム（ＥＳ）を受信してデコードするデコード手段と、該デコード手段でデコードしたオリジナルビデオと３次元立体ビデオ付加データとを合成し、３次元立体ビデオを生成するビデオ合成手段と、該ビデオ合成手段から受信した２次元ビデオ又は３次元立体ビデオと、前記デコード手段から受信したオーディオデータとを出力する出力手段とを備えることを特徴とする。

一方、本発明の送信方法は、３次元立体ビデオ付加データを用いた３次元立体デジタル放送の送信方法において、ａ）オリジナルビデオと３次元立体ビデオ付加データ、及びオーディオデータを取得する取得ステップと、ｂ）該オリジナルビデオと３次元立体ビデオ付加データ、及びオーディオデータをデジタル送信に適合した形態でそれぞれエンコードして各エレメンタリストリーム（ＥＳ）を生成するエンコードステップと、ｃ）該それぞれのエレメンタリストリーム（ＥＳ）をパケット化してエレメンタリストリームパケット（ＰＥＳ）を生成するステップと、ｄ）オリジナルビデオ、３次元立体ビデオ付加データ、オーディオデータなどのように、それぞれの情報を区分するプログラム仕様情報（ＰＳＩ）を生成するプログラム仕様情報生成ステップと、ｅ）該プログラム仕様情報（ＰＳＩ）と前記生成したそれぞれのエレメンタリストリームパケット（ＰＥＳ）をそれぞれのトランスポートストリーム（ＴＳ）としてトランスポートストリームを生成するステップと、ｆ）該それぞれのトランスポートストリーム（ＴＳ）を１つのトランスポートストリーム（ＴＳ）に多重化する多重化ステップと、ｇ）該トランスポートストリーム（ＴＳ）を変調して送信する変調ステップとを含むことを特徴とする。

また、本発明の受信方法は、３次元立体ビデオ付加データを用いた３次元立体デジタル放送の受信方法において、ａ）変調されたトランスポートストリーム（ＴＳ）を受信して変調信号を復調する復調ステップと、ｂ）パケット識別子に応じてプログラム仕様情報（ＰＳＩ）に対するトランスポートストリーム（ＴＳ＿ＰＳＩ）を逆多重化する逆多重化ステップと、ｃ）該プログラム仕様情報に対するトランスポートストリーム（ＴＳ＿ＰＳＩ）を用いてプログラム仕様情報を分析するプログラム仕様情報分析ステップと、ｄ）該分析したプログラム仕様情報を用いてトランスポートストリーム（ＴＳ）を区分してそれぞれのトランスポートストリーム（ＴＳ）に逆多重化する逆多重化ステップと、ｅ）該逆多重化したそれぞれのトランスポートストリームを分析してエレメンタリストリームパケット（ＰＥＳ）を生成するエレメンタリストリームパケット生成ステップと、ｆ）該生成したそれぞれのエレメンタリストリームパケット（ＰＥＳ）をデパケット化して各エレメンタリストリーム（ＥＳ）を生成するエレメンタリストリーム生成ステップと、ｇ）該デパケット化したそれぞれのエレメンタリストリーム（ＥＳ）をデコードするデコードステップと、ｈ）該デコードしたオリジナルビデオと３次元立体ビデオ付加データとを合成して３次元立体ビデオを生成する３次元立体ビデオ生成ステップと、ｉ）ユーザの選択に応じて、２次元ビデオ又は３次元立体ビデオ、及びオーディオデータを出力する出力ステップとを含むことを特徴とする。

上述の目的、特徴及び長所は、添付された図面と関連した以下の詳細な説明を通じてより明確になる。以下、添付された図面を参照して本発明に係る好ましい実施形態をさらに詳細に説明する。

図１は、本発明に係る３次元立体ビデオ付加データを用いた３次元立体デジタル放送の送信装置の一実施形態を示す構成図である。

同図に示すように、本発明に係る３次元立体ビデオ付加データを用いた３次元立体デジタル放送の送信装置は、ビデオ取得部１１０、オーディオ取得部１２０、エンコード部１３０、プログラム仕様情報生成部１４０、パケット化部１５０、トランスポートストリーム（ＴＳ）生成部１６０、多重化部１７０、及び変調部１８０を備える。

前記ビデオ取得部１１０は、オリジナルビデオと３次元立体ビデオ付加データとを取得する。前記オーディオ取得部１２０は、オーディオデータを取得する。前記エンコード部１３０は、前記ビデオ取得部１１０で取得したオリジナルビデオと３次元立体ビデオ付加データとを受信し、前記オーディオ取得部１２０で取得したオーディオデータを受信し、デジタル送信に適合した形態にエンコードする。

前記プログラム仕様情報生成部１４０は、それぞれの情報を区分するプログラム仕様情報（ＰＳＩ）を生成する。前記パケット化部１５０は、前記エンコード部１３０でエンコードしたそれぞれのエレメンタリストリーム（ＥＳ）を受信してパケット化し、それぞれのエレメンタリストリームパケット（ＰＥＳ）を生成する。前記トランスポートストリーム（ＴＳ）生成部１６０は、前記パケット化部１５０からそれぞれのエレメンタリストリームパケット（ＰＥＳ）を受信し、前記プログラム仕様情報生成部１４０からプログラム仕様情報（ＰＳＩ）を受信し、それぞれのトランスポートストリーム（ＴＳ）を生成する。前記多重化部１７０は、前記トランスポートストリーム生成部１６０からそれぞれのトランスポートストリーム（ＴＳ）を受信し、１つのトランスポートストリーム（ＴＳ）に多重化する。前記変調部１８０は、前記多重化部１７０で多重化したトランスポートストリーム（ＴＳ）を変調する。

前記ビデオ取得部１１０は、オリジナルビデオを生成する１視点のビデオと３次元立体ビデオ付加データを生成する別の視点のビデオ、視差情報、及び奥行き情報のいずれか１つ以上を取得する。

ここで、前記ビデオ取得部１１０を介して取得されるオリジナルビデオを生成する１視点のビデオは、別の視点のビデオと比較可能な１つの基準となるビデオであり、前記ビデオ取得部１１０を介して取得される３次元立体ビデオ付加データを生成する別の視点のビデオは、オリジナルビデオとは視点の異なる１つの別の視点のビデオ、又は別の複数の視点を有する多視点のビデオである。

前記３次元立体ビデオ付加データを生成する視差情報は、多視点のビデオ又は１視点のビデオとは異なる視点から得た２つのビデオを１つに投影したとき、異なる視点で取得するものの、対象の同じ位置を表す二地点間の距離情報であり、奥行き情報は、１視点のビデオと所定の距離で同じ対象に対する異なる視点のビデオを取得して把握することができる遠近情報である。

前記エンコード部１３０は、第１ＭＰＥＧ−２エンコーダ１３１、任意のエンコーダ１３２、及び第２ＭＰＥＧ−２エンコーダ１３３を備える。前記第１ＭＰＥＧ−２エンコーダ１３１は、前記ビデオ取得部１１０から基準視点のオリジナルビデオを受信し、現在の放送規格であるＭＰＥＧ−２にエンコードする。前記任意のエンコーダ１３２は、前記ビデオ取得部１１０から３次元立体ビデオ付加データを受信し、効率的にエンコードする。前記第２ＭＰＥＧ−２エンコーダ１３３は、前記オーディオ取得部１２０からオーディオデータを受信し、現在の放送規格であるＭＰＥＧ−２にエンコードする。

そして、前記プログラム仕様情報生成部１４０は、オリジナルビデオ、３次元立体ビデオ付加データ、オーディオデータなどのように、それぞれの情報を互いに区分するプログラム仕様情報（ＰＳＩ）を生成する。このとき、前記プログラム仕様情報生成部１４０は、２次元デジタル放送システムと３次元立体デジタル放送システムとの互換性のため、それぞれのトランスポートストリーム（ＴＳ）に区分するプログラムマップテーブル（ＰＭＴ）のパケット識別子（ＰＩＤ）情報において、従来のデジタル放送のビデオとオーディオに定義されているストリームタイプ（ｓｔｒｅａｍ＿ｔｙｐｅ）はそのまま使用し、３次元立体ビデオ付加データに対するストリームタイプ（ｓｔｒｅａｍ＿ｔｙｐｅ）を「予約済み」、又は「ユーザ個人」に定義されている値として新たに定義する機能を行う。

前記パケット化部１５０は、第１パケタイザ１５１、第２パケタイザ１５２、及び第３パケタイザ１５３を備える。前記第１パケタイザ１５１は、前記エンコード部１３０からオリジナルビデオに対するエレメンタリストリーム（ＥＳ＿Ｏｒｉ）を受信してパケット化し、オリジナルビデオに対するエレメンタリストリームパケット（ＰＥＳ＿Ｏｒｉ）を生成する。前記第２パケタイザ１５２は、前記エンコード部１３０から３次元立体ビデオ付加データに対するエレメンタリストリーム（ＥＳ＿３Ｄ）を受信してパケット化し、３次元立体ビデオ付加データに対するエレメンタリストリームパケット（ＰＥＳ＿３Ｄ）を生成する。前記第３パケタイザ１５３は、前記エンコード部１３０からオーディオデータに対するエレメンタリストリームを受信してパケット化し、オーディオデータに対するエレメンタリストリームパケット（ＰＥＳ＿Ａｕ）を生成する。

このとき、前記パケット化部１５０は、３次元立体ビデオ付加データに関連して新たに入力した入力フィールドがある場合には、３次元立体ビデオ付加データに対するエレメンタリストリームパケット（ＰＥＳ＿３Ｄ）のヘッダ部に、別の視点のビデオ、視差情報、又は奥行き情報などを区分するため、３次元立体ビデオ付加データタイプに対する入力フィールドをさらに定義する機能を行う。

前記トランスポートストリーム生成部１６０は、第１トランスポートストリーム生成器１６１、第２トランスポートストリーム生成器１６２、第３トランスポートストリーム生成器１６３、第４トランスポートストリーム生成器１６４を備える。前記第１トランスポートストリーム生成器１６１は、前記パケット化部１５０からオリジナルビデオに対するエレメンタリストリームパケット（ＰＥＳ＿Ｏｒｉ）を受信し、オリジナルビデオに対するトランスポートストリーム（ＴＳ＿Ｏｒｉ）を生成する。

前記第２トランスポートストリーム生成器１６２は、前記パケット化部１５０から３次元立体ビデオ付加データに対するエレメンタリストリームパケット（ＰＥＳ＿３Ｄ）を受信し、３次元立体ビデオ付加データに対するＴＳパケット（ＴＳ＿３Ｄ）を生成する。前記第３トランスポートストリーム生成器１６３は、前記パケット化部１５０からオーディオデータに対するエレメンタリストリームパケット（ＰＥＳ＿Ａｕ）を受信し、オーディオデータに対するＴＳパケット（ＴＳ＿Ａｕ）を生成する。前記第４トランスポートストリーム生成器１６４は、前記プログラム仕様情報生成部１４０からプログラム仕様情報（ＰＳＩ）を受信し、プログラム仕様情報に対するＴＳパケット（ＴＳ＿ＰＳＩ）を生成する。

前記多重化部１７０は、多重化の最後の過程において、システム時間の検出に用いるため、オリジナルビデオに対するトランスポートストリーム（ＴＳ＿Ｏｒｉ）にプログラムクロックレファレンス（ＰＣＲ：Ｐｒｏｇｒａｍ Ｃｌｏｃｋ Ｒｅｆｅｒｅｎｃｅ）を挿入する機能を行う。

図２は、エレメンタリストリームパケット（ＰＥＳ）の構成図に関する一実施形態を示す構造図である。

同図に示すように、前記図１のパケット化部１５０で生成されるエレメンタリストリームパケット（ＰＥＳ）は、ＭＰＥＧ−２システム標準規格（ＩＳＯ／ＩＥＣ １３８１８−１）の構成に従い、３次元立体ビデオ付加データに関連して新たに入力した入力フィールドがある場合に、エレメンタリストリームパケット（ＰＥＳ）のヘッダ部で定義を行う。

例えば、別の視点のビデオ、視差情報、及び奥行き情報などの３次元立体ビデオ付加データを区分するため、３次元立体ビデオ付加データタイプ（３Ｄ＿Ｖｉｄｅｏ＿Ｔｙｐｅ）に対する入力フィールドをさらに定義することができる。

図３は、本発明に係るエレメンタリストリームパケット（ＰＥＳ）のヘッダ部に３次元立体ビデオの情報を区分するための構成を追加した一実施形態を示す構造図である。

同図は、図１のパケット化部１５０でそれぞれのエレメンタリストリームパケット（ＰＥＳ）を生成するとき、図２に示す従来のエレメンタリストリームパケット（ＰＥＳ）ヘッダ部にあるエレメンタリストリームパケット（ＰＥＳ）拡張フィールドデータの空間を活用して３次元立体ビデオ付加データの種類を区分することができる情報タイプを追加した一実施形態を示すものである。図３に示すように、エレメンタリストリームパケット（ＰＥＳ）拡張フィールドデータを用いて２ビットの３次元立体ビデオ付加データタイプ（３Ｄ＿Ｖｉｄｅｏ＿ｔｙｐｅ）をさらに定義することができる。

下記の［表１］は、３次元立体ビデオ付加データのタイプを示す。

図３の３次元立体ビデオ付加データタイプ（３Ｄ＿Ｖｉｄｅｏ＿ｔｙｐｅ）をさらに定義するとき、前記［表１］のように、エレメンタリストリームパケット（ＰＥＳ）拡張フィールドデータに３次元立体ビデオ付加データタイプ（３Ｄ＿Ｖｉｄｅｏ＿ｔｙｐｅ）を表す値が予め定義されていなければならない。「００」の値は視差情報、「０１」の値は奥行き情報、「１０」の値は別の視点のビデオ、「１１」の値は「予約済み」を意味する。

一方、プログラム仕様情報生成部１４０は、プログラム関連付けテーブル（ＰＡＴ）、プログラムマップテーブル（ＰＭＴ）、ネットワーク情報テーブル（ＮＩＴ：Ｎｅｔｗｏｒｋ Ｉｎｆｏｒｍａｔｉｏｎ Ｔａｂｌｅ）、限定アクセステーブル（ＣＡＴ：Ｃｏｎｄｉｔｉｏｎａｌ Ａｃｃｅｓｓ Ｔａｂｌｅ）の４つのテーブルで構成されるプログラム仕様情報（ＰＳＩ）を生成する。ここで、プログラム仕様情報（ＰＳＩ）は、ＴＳパケットのペイロード部分に挿入されるが、受信機における初期化などのために一定の時間間隔で繰り返し送信される。前記テーブルは、それぞれ異なるパケット識別子（ＰＩＤ）値によって区分され、１つのＴＳパケットには、１種類のテーブルのみが送信される。

下記の［表２］は、プログラム仕様情報（ＰＳＩ）のパケット識別子（ＰＩＤ）値に対する定義を表す。

プログラム仕様情報（ＰＳＩ）を含むトランスポートストリーム（ＴＳ）を識別するため、前記［表２］に定義したように、「０ｘ０００１０〜０ｘ１ＦＦＥ」区間のパケット識別子（ＰＩＤ）値を任意に設定して活用することができ、設定されたパケット識別子（ＰＩＤ）値と意味は、プログラムマップテーブル（ＰＭＴ）内に予め定義されていなければならない。したがって、プログラムマップテーブル（ＰＭＴ）に従来のデジタル放送で用いられているトランスポートストリームＴＳのパケット識別子（ＰＩＤ）の設定及び記述のみならず、３次元立体ビデオ付加データに対するトランスポートストリーム（ＴＳ）のパケット識別子（ＰＩＤ）の設定及び記述をさらに定義する。

ここで、パケット識別子ＰＩＤの「０ｘ００００」はプログラム関連付けテーブル（ＰＡＴ）、「０ｘ０００１」は限定アクセステーブル（ＣＡＴ）、「０ｘ０００２」はトランスポートストリーム記述テーブル、「０ｘ０００３〜０ｘ０００Ｆ」区間は「予約済み」、「０ｘ０００１０〜０ｘ１ＦＦＥ」区間は任意に設定することができる任意のパケット識別子（ＰＩＤ）、「０ｘ１ＦＦＦ」はヌルパケットを意味する。

図４は、本発明に係るプログラム関連付けテーブル（ＰＡＴ）情報を有するトランスポートストリーム（ＴＳ）の構成図に関する一実施形態を示す構造図である。

同図に示すように、プログラム関連付けテーブル（ＰＡＴ）情報を有するトランスポートストリーム（ＴＳ）は、ＭＰＥＧ−２システム標準規格（ＩＳＯ／ＩＥＣ １３８１８−１）の構成に従い、プログラム関連付けテーブル（ＰＡＴ）にはトランスポートストリーム（ＴＳ）がどのようなプログラムで構成されているかを表すプログラム番号とパケット識別子（ＰＩＤ）などのプログラムに関する情報を定義する。すなわち、各プログラム番号（Ｐｒｏｇｒａｍ＿ｎｕｍｂｅｒ０，１，２，...，ｉ）に対するネットワーク識別子（ｎｅｔｗｏｒｋ＿ＰＩＤ）、プログラムマップテーブルに対するパケット識別子（ｐｒｏｇｒａｍ＿ｍａｐ＿ＰＩＤ）などを含む。

例えば、３次元立体ビデオ付加データが１つのプログラム番号を有し、必ず１つのプログラムマップテーブルに対するパケット識別子（ｐｒｏｇｒａｍ＿ｍａｐ＿ＰＩＤ）を有する。

図５は、本発明に係るプログラムマップテーブル（ＰＭＴ）情報を有するトランスポートストリーム（ＴＳ）の構成図に関する一実施形態を示す構造図である。

同図に示すように、プログラムマップテーブル（ＰＭＴ）情報を有するトランスポートストリーム（ＴＳ）は、ＭＰＥＧ−２システム標準規格（ＩＳＯ／ＩＥＣ １３８１８−１）の構成に従い、プログラム構造テーブル（ＰＭＴ）は、１つのプログラムに含まれているエレメンタリストリーム（ＥＳ）に対する内容及びパケット識別子（ＰＩＤ）を含む。すなわち、プログラムに対する各情報のストリームタイプ（ｓｔｒｅａｍ＿ｔｙｐｅ）、構成要素に対するトランスポートストリームのパケット識別子（ｅｌｅｍｅｎｔａｒｙ＿ＰＩＤ）、エレメンタリストリーム情報長（ＥＳ＿ｉｎｆｏ＿ｌｅｎｇｈ）、記述子（ｄｉｓｃｒｉｐｔｏｒ）などの情報を含む。

例えば、３次元コンテンツが存在するとき、オリジナルビデオ、３次元立体ビデオ付加データ、オーディオデータが必要となるため、各情報を区分するため、構成要素に対するパケット識別子（ｅｌｅｍｅｎｔａｒｙ＿ＰＩＤ）や、それぞれの情報に対するストリームタイプ（ｓｔｒｅａｍ＿ｔｙｐｅ）などの情報を含む。

構成要素に対するパケット識別子（ｅｌｅｍｅｎｔａｒｙ＿ＰＩＤ）は、プログラム構成要素を含むＴＳパケットのパケット識別子（ＰＩＤ）値を表し、ストリームタイプ（ｓｔｒｅａｍ＿ｔｙｐｅ）は、構成要素に対するパケット識別子（ｅｌｅｍｅｎｔａｒｙ＿ＰＩＤ）のパケット識別子（ＰＩＤ）値を有するパケットに入っているプログラム構成要素の種類を表す。

下記の［表３］は、現在標準化したストリームタイプ（ｓｔｒｅａｍ＿ｔｙｐｅ）に対する割当表である。

ストリームタイプ（ｓｔｒｅａｍ＿ｔｙｐｅ）を区分するため、前記［表３］に定義したように、ＭＰＥＧ−２ビデオは「０ｘ０２」、ＭＰＥＧ−２オーディオは「０ｘ０４」に定義されている。しかし、３次元立体ビデオ付加データに対するストリームタイプ（ｓｔｒｅａｍ＿ｔｙｐｅ）は定義されていないため、３次元立体ビデオ付加データを２次元ビデオのように「０ｘ０２」に定義すると、１つのプログラムに２つのビデオストリームが存在するようになり、これにより、従来の２次元デジタル受信装置ではエラーが発生する。

したがって、現在の標準規格で予約済みやユーザ個人に定義されている値の１つに３次元立体ビデオ付加データストリームを新たに定義する。

図６は、本発明に係るＴＳパケットの構成図に関する一実施形態を示す構造図である。

同図に示すように、それぞれのエレメンタリストリームパケット（ＰＥＳ）は、ＭＰＥＧ−２システム標準規格（ＩＳＯ／ＩＥＣ １３８１８−１）の構成に従い、１８８バイトの固定長のＴＳパケットとして生成され、大別してＴＳパケットヘッダとＴＳパケットペイロードの２つの部分に分けられる。前記ＴＳパケットヘッダは、ＴＳパケットを区分できるようにする同期化バイト及びＴＳパケットのパケット識別子（ＰＩＤ）を含んでおり、前記ＴＳパケットペイロードは、各ビデオに対するエレメンタリストリームパケット（ＰＥＳ＿Ｏｒｉ、ＰＥＳ＿３Ｄ）、オーディオデータに対するエレメンタリストリームパケット（ＰＥＳ＿Ａｕ）、及びプログラム仕様情報（ＰＳＩ）などのデータを含む。

それぞれのエレメンタリストリームパケット（ＰＥＳ＿Ｏｒｉ、ＰＥＳ＿３Ｄ、ＰＥＳ＿Ａｕ）は、同図に示すＭＰＥＧ−２システム標準規格（ＩＳＯ／ＩＥＣ １３８１８−１）のトランスポートストリーム（ＴＳ）の構成に従い、ＴＳパケットとして生成される。したがって、図１のトランスポートストリーム生成部１６０は、プログラムマップテーブル（ＰＭＴ）に定義されているパケット識別子（ＰＩＤ）値を参照してオリジナルビデオに対するエレメンタリストリームパケット（ＰＥＳ＿Ｏｒｉ）、３次元立体ビデオ付加データに対するエレメンタリストリームパケット（ＰＥＳ＿３Ｄ）、及びオーディオデータに対するエレメンタリストリームパケット（ＰＥＳ＿Ａｕ）を受信し、それぞれのＴＳパケットを生成する。

それぞれのＴＳパケットは、上記図１の多重化部１７０で１つのトランスポートストリーム（ＴＳ）に多重化され、送信できるように変調部１８０によって変調されて送信される。

このとき、前記多重化部１７０の最後の過程において、原デジタルビデオのトランスポートストリーム（ＴＳ＿Ｏｒｉ）にプログラムクロックレファレンス（ＰＣＲ）を挿入して同期化するためのシステムクロックの検出に用いる。プログラムクロックレファレンス（ＰＣＲ）の挿入周期は、ＭＰＥＧ−２システム規格に従う。

図７は、本発明に係る３次元立体ビデオ付加データを用いた３次元立体デジタル放送の受信装置の一実施形態を示す構成図である。

同図に示すように、本発明に係る３次元立体ビデオ付加データを用いた３次元立体デジタル放送の受信装置は、復調部７１０、逆多重化部７２０、プログラム仕様情報分析部７３０、トランスポートストリーム分析部７４０、デパケット化部７５０、デコード部７６０、ビデオ合成部７７０、及び出力部７８０を備える。

前記復調部７１０は、変調されたトランスポートストリーム（ＴＳ）を受信して変調された信号を復調する。前記逆多重化部７２０は、前記復調部７１０から復調されたトランスポートストリームを受信し、プログラム仕様情報分析部７３０からプログラム仕様情報（ＰＳＩ）を受信し、１つの多重化されたトランスポートストリームＴＳを逆多重化してそれぞれのトランスポートストリーム（ＴＳ）に区分する。前記プログラム仕様情報分析部７３０は、前記逆多重化部７２０からプログラム仕様情報に対するトランスポートストリーム（ＴＳ＿ＰＳＩ）を受信し、プログラム仕様情報を分析して前記逆多重化部７２０に伝達する。

前記トランスポートストリーム分析部７４０は、前記逆多重化部７２０で逆多重化したそれぞれのトランスポートストリームを受信し、各トランスポートストリームを分析してエレメンタリストリームパケット（ＰＥＳ）を生成する。前記デパケット化部７５０は、前記トランスポートストリーム分析部７４０からそれぞれのエレメンタリストリームパケット（ＰＥＳ）を受信してデパケット化し、それぞれのエレメンタリストリーム（ＥＳ）を生成する。前記デコード部７６０は、前記デパケット化部７５０からそれぞれのエレメンタリストリーム（ＥＳ）を受信してデコードする。前記ビデオ合成部７７０は、前記デコード部７６０でデコードしたオリジナルビデオと３次元立体ビデオ付加データとを受信して合成し、３次元立体ビデオを生成する。前記出力部７８０は、前記ビデオ合成部７７０から２次元ビデオ又は３次元立体ビデオを受信し、ユーザが選択した表示タイプに応じて出力し、前記デコード部７６０からオーディオデータを受信して出力する。

前記逆多重化部７２０は、前記復調部７１０から復調されたトランスポートストリームを受信し、プログラム仕様情報に対するトランスポートストリーム（ＴＳ＿ＰＳＩ）を先に分離してプログラム仕様情報分析部７３０に伝達し、プログラム仕様情報分析部７３０からそれぞれの情報を区分することができるプログラム仕様情報（パケット識別子情報）を受信し、オリジナルビデオに対するトランスポートストリーム（ＴＳ＿Ｏｒｉ）、３次元立体ビデオ付加データに対するトランスポートストリーム（ＴＳ＿３Ｄ）、オーディオデータに対するトランスポートストリーム（ＴＳ＿Ａｕ）に逆多重化する。

すなわち、前記逆多重化部７２０は、多重化されたトランスポートストリーム（ＴＳ）を受信し、トランスポートストリーム（ＴＳ）ヘッダにあるパケット識別子（ＰＩＤ）値が「０ｘ００００」のプログラム関連付けテーブル（ＰＡＴ）情報を有するＴＳパケットを探し出してプログラム仕様情報（ＰＳＩ）分析部７３０に伝達する。この後、プログラム仕様情報分析部７３０からプログラム番号と、プログラム仕様情報分析部７３０からのプログラムマップテーブルに対するパケット識別子（Ｐｒｏｇｒａｍ＿ｍａｐ＿ＰＩＤ）とを受け取り、トランスポートストリーム（ＴＳ）からプログラムマップテーブル（ＰＭＴ）情報を有するＴＳパケットを探し出してプログラム仕様情報分析部７３０に伝達する。この後、プログラム仕様情報分析部７３０から各エレメンタリストリームタイプ（ｓｔｒｅａｍ＿ｔｙｐｅ）とプログラム仕様情報分析部７３０からのエレメンタリパケット識別子（ｅｌｅｍｅｎｔａｒｙ＿ＰＩＤ）とを受け取り、それぞれの情報に対するトランスポートストリーム（ＴＳ＿Ｏｒｉ、ＴＳ＿３Ｄ、ＴＳ＿Ａｕ）に逆多重化する。

このとき、３次元立体ビデオ付加データに対するストリームタイプ（ｓｔｒｅａｍ＿ｔｙｐｅ）を「予約済み」、又は「ユーザ個人」に定義されている値として新たに定義したため、受信装置が２次元デジタル放送システムの場合には、３次元立体ビデオ付加データを「予約済み」、又は「ユーザ個人」として認識し、ビデオとオーディオに対するストリームのみを処理する。したがって、従来の２次元デジタル放送システムとの互換性を保障し、３次元立体デジタル放送システムの場合には、新たに定義したストリームタイプ（ｓｔｒｅａｍ＿ｔｙｐｅ）を認識し、ビデオ、オーディオ、及び３次元立体ビデオ付加データを処理する。

また、前記逆多重化部７２０は、図１の送信装置及び図７の受信装置のクロックの同期化のため、オリジナルビデオに対するトランスポートストリーム（ＴＳ＿Ｏｒｉ）のプログラムクロックレファレンス（ＰＣＲ）に基づいてシステムクロックを復元する。

前記プログラム仕様情報分析部７３０は、前記逆多重化部７３０からプログラム仕様情報に対するトランスポートストリーム（ＴＳ＿ＰＳＩ）を受信し、プログラム関連付けテーブル（ＰＡＴ）の情報やプログラムマップテーブル（ＰＭＴ）のパケット識別子（ＰＩＤ）情報を分析し、前記逆多重化部７２０からそれぞれのトランスポートストリーム（ＴＳ）を区分することができるプログラム仕様情報（ＰＳＩ）を前記逆多重化部７２０に出力する。

すなわち、前記プログラム仕様情報分析部（ＰＳＩ）は、前記逆多重化部７２０からプログラム関連付けテーブル（ＰＡＴ）情報を有するＴＳパケットを受け取り、ＴＳパケットのペイロード情報を分析して前記逆多重化部７２０に伝達し、再び前記逆多重化部７２０からプログラムマップテーブル（ＰＭＴ）情報を有するＴＳパケットを受け取り、ＴＳパケットのペイロード情報を分析して前記逆多重化部７２０に伝達する。

前記トランスポートストリーム分析部７４０は、第１トランスポートストリーム分析器７４１、第２トランスポートストリーム分析器７４２、及び第３トランスポートストリーム分析器７４３を備える。前記第１トランスポートストリーム分析器７４１は、前記逆多重化部７２０からオリジナルビデオに対するトランスポートストリーム（ＴＳ＿Ｏｒｉ）を受信して分析し、オリジナルビデオに対するエレメンタリストリームパケット（ＰＥＳ＿Ｏｒｉ）を生成する。前記第２トランスポートストリーム分析器７４２は、前記逆多重化部７２０から３次元立体ビデオ付加データに対するトランスポートストリーム（ＴＳ＿３Ｄ）を受信して分析し、３次元立体ビデオ付加データに対するエレメンタリストリームパケット（ＰＥＳ＿３Ｄ）を生成する。前記第３トランスポートストリーム分析器７４３は、前記逆多重化部７２０からオーディオデータに対するトランスポートストリーム（ＴＳ＿Ａｕ）を受信して分析し、オーディオデータに対するエレメンタリストリームパケット（ＰＥＳ＿Ａｕ）を生成する。

前記デパケット化部７５０は、第１デパケタイザ７５１、第２デパケタイザ７５２、及び第３デパケタイザ７５３を備える。前記第１デパケタイザ７５１は、前記トランスポートストリーム分析部７４０からオリジナルビデオに対するエレメンタリストリームパケット（ＰＥＳ＿Ｏｒｉ）を受信してデパケット化し、オリジナルビデオに対するエレメンタリストリーム（ＥＳ＿Ｏｒｉ）を生成する。前記第２デパケタイザ７５２は、前記トランスポートストリーム分析部７４０から３次元立体ビデオ付加データに対するエレメンタリストリームパケット（ＰＥＳ＿３Ｄ）を受信してデパケット化し、３次元立体ビデオ付加データに対するエレメンタリストリーム（ＥＳ＿Ｏｒｉ）を生成する。前記第３デパケタイザ７５３は、前記トランスポートストリーム分析部７４０からオーディオデータに対するエレメンタリストリームパケット（ＰＥＳ＿Ａｕ）を受信してデパケット化し、オーディオデータに対するエレメンタリストリーム（ＥＳ＿Ａｕ）を生成する。

このとき、上記［表１］のように、３次元立体ビデオ付加データに関連して新たに入力した入力フィールドがある場合、前記デパケット化部７５０の第２デパケタイザ７５２は、３次元立体ビデオ付加データに対するエレメンタリストリームパケット（ＰＥＳ＿３Ｄ）のヘッダ部で、別の視点のビデオ、視差情報、及び奥行き情報などの３次元立体ビデオ付加データタイプに関する情報を分析して各情報を区分する機能をさらに行う。

前記デコード部７６０は、第１ＭＰＥＧ−２デコーダ７６１、任意のデコーダ７６２、及び第２ＭＰＥＧ−２デコーダ７６３を備える。前記第１ＭＰＥＧ−２デコーダ７６１は、前記デパケット化部７５０からオリジナルビデオに対するエレメンタリストリーム（ＥＳ＿Ｏｒｉ）を受信し、現在の放送規格であるＭＰＥＧ−２にデコードする。前記任意のデコーダ７６２は、前記デパケット化部７５０から３次元立体ビデオ付加データに対するエレメンタリストリーム（ＥＳ＿３Ｄ）を受信し、効率的にデコードする。前記第２ＭＰＥＧ−２デコーダ７６３は、前記デパケット化部７５０からオーディオデータに対するエレメンタリストリーム（ＥＳ＿Ａｕ）を受信し、現在の放送規格であるＭＰＥＧ−２にデコードする。

このとき、前記デコード部７６０は、前記デパケット化部７５０から入力されたオリジナルビデオに対するエレメンタリストリーム（ＥＳ＿Ｏｒｉ）、３次元立体ビデオ付加データに対するエレメンタリストリーム（ＥＳ＿３Ｄ）、及びオーディオデータに対するエレメンタリストリーム（ＥＳ＿Ａｕ）を、プログラムクロックレファレンス（ＰＣＲ）を用いて同期化する。

前記ビデオ合成部７７０は、前記デコード部７６０でデコードしたオリジナルビデオと３次元立体ビデオ付加データとを受信して同期化し、３次元立体ビデオを生成した後、２次元表示のためのオリジナルビデオの２次元ビデオ（２Ｄ）と３次元表示のための３次元立体ビデオ（３Ｄ）とをビデオ表示部７８１に出力する。

このとき、３次元立体ビデオを生成するオリジナルビデオと３次元立体ビデオ付加データは、システムクロックのプログラムクロックレファレンス（ＰＣＲ）とエレメンタリストリームパケット（ＰＥＳ）内に存在する再生時間情報（ＰＴＳ：Ｐｒｅｓｅｎｔａｔｉｏｎ Ｔｉｍｅ Ｓｔａｍｐ）を用いて同期化する。

ここで、２次元ビデオのオリジナルビデオは、別の視点のビデオと比較可能な、基準となる１視点のビデオであり、３次元立体ビデオの３次元立体ビデオ付加データは、オリジナルビデオとは視点の異なる１つの別の視点のビデオ、及び／又は別の複数の視点を有する多視点のビデオ、視差情報、又は奥行き情報を含む。

また、前記ビデオ合成部７７０は、別の視点のビデオ、視差情報、及び／又は奥行き情報などの３次元立体ビデオ付加データの種類に応じて、それぞれ適合した３次元立体ビデオ生成アルゴリズムを適用して３次元立体ビデオを生成する。

前記出力部７８０は、前記ビデオ合成部７７０から入力された２次元ビデオ又は３次元立体ビデオを表示するビデオ表示部７８１、及び前記デコード部７６０から入力されたオーディオデータを出力するオーディオデータ出力部７８２を備える。

このとき、前記出力部７８０は、ユーザが選択した表示タイプに応じて出力情報が異なる。ユーザが２次元表示タイプを選択した場合には、２次元ビデオをビデオ表示部７８１を介して出力する。ユーザが３次元表示タイプを選択した場合には、３次元立体ビデオをビデオ表示部７８１を介して出力する。

図８は、本発明に係る３次元立体ビデオ付加データを用いた３次元立体デジタル放送の送信方法に関する一実施形態を示すフローチャートである。

まず、ステップＳ８１０では、ビデオ取得部１１０がオリジナルビデオと３次元立体ビデオ付加データとを取得し、ステップＳ８２０では、オーディオ取得部１２０がオーディオデータを取得する。

この後、ステップＳ８４０では、エンコード部１３０が前記ビデオ取得部１１０で取得したオリジナルビデオと３次元立体ビデオ付加データ、及び前記オーディオ取得部１２０で取得したオーディオデータをデジタル送信に適合した形態にそれぞれエンコードし、各エレメンタリストリームＥＳを生成する。

ステップＳ８３０では、取得したオリジナルビデオと３次元立体ビデオ付加データとを区分する。ステップＳ８４１では、オリジナルビデオが現在の放送規格であるＭＰＥＧ−２エンコーダにエンコードし、ステップＳ８４２では、３次元立体ビデオ付加データが効率的にエンコードするために任意のエンコーダにエンコードし、それぞれのエレメンタリストリーム（ＴＳ）を生成する。また、ステップＳ８４３では、前記オーディオ取得部１２０で取得したオーディオデータが現在の放送規格であるＭＰＥＧ−２エンコーダにエンコードし、オーディオデータに対するエレメンタリストリームを生成する。

この後、ステップＳ８５０では、プログラム仕様情報生成部１４０がオリジナルビデオ、３次元立体ビデオ付加データ、オーディオデータなどのように、それぞれの情報を互いに区分するプログラム仕様情報（ＰＳＩ）を生成する。

そして、ステップＳ８６０では、パケット化部１５０が前記エンコードして生成したそれぞれのエレメンタリストリーム（ＥＳ）をパケット化し、エレメンタリストリームパケット（ＰＥＳ）を生成する。

この後、ステップＳ８７０では、トランスポートストリーム生成部１６０が前記生成したプログラム仕様情報（ＰＳＩ）と前記生成したそれぞれのエレメンタリストリームパケット（ＰＥＳ）をそれぞれのトランスポートストリーム（ＴＳ）として生成する。

この後、ステップＳ８８０では、多重化部１７０が前記生成したそれぞれのトランスポートストリーム（ＴＳ）を１つのトランスポートストリームに多重化する。

この後、変調部１８０が前記多重化したトランスポートストリーム（ＴＳ）を変調して送信する。

図９は、本発明に係る３次元立体ビデオ付加データを用いた３次元立体デジタル放送の受信方法に関する一実施形態を示すフローチャートである。

まず、ステップＳ９１０では、復調部７１０が変調されたトランスポートストリーム（ＴＳ）を受信して変調された信号を復調する。

この後、ステップＳ９２０では、逆多重化部７２０がパケット識別子に応じてプログラム仕様情報（ＰＳＩ）に対するトランスポートストリーム（ＴＳ＿ＰＳＩ）を先に分離する。

ステップＳ９３０では、プログラム仕様情報分析部７３０がプログラム仕様情報に対するトランスポートストリーム（ＴＳ＿ＰＳＩ）を用いてプログラム仕様情報を分析する。

この後、ステップＳ９４０では、逆多重化部７２０が前記分析したプログラム仕様情報を用いてトランスポートストリーム（ＴＳ）を区分してそれぞれのトランスポートストリーム（ＴＳ）に逆多重化する。

この後、ステップＳ９５０では、トランスポートストリーム分析部７４０が前記逆多重化したそれぞれのトランスポートストリームを分析してエレメンタリストリームパケット（ＰＥＳ）を生成する。

この後、ステップＳ９６０では、デパケット化部７５０が前記生成したそれぞれのエレメンタリストリームパケット（ＰＥＳ）をデパケット化して各エレメンタリストリーム（ＥＳ）を生成する。

この後、ステップＳ９７０では、デコード部７６０が前記デパケット化したそれぞれのエレメンタリストリーム（ＥＳ）をデコードする。

ステップＳ９７１では、第１ＭＰＥＧ−２デコーダ７６１がオリジナルビデオに対するエレメンタリストリーム（ＥＳ＿Ｏｒｉ）を現在の放送規格であるＭＰＥＧ−２にデコードし、ステップＳ９７２では、任意のデコーダ７６２が３次元立体ビデオ付加データに対するエレメンタリストリーム（ＥＳ＿３Ｄ）を効率的にデコードする。ステップＳ９７３では、第２ＭＰＥＧ−２デコーダ７６３がオーディオデータに対するエレメンタリストリーム（ＥＳ＿Ａｕ）を現在の放送規格であるＭＰＥＧ−２にデコードする。

この後、ステップＳ９８０では、ビデオ表示モードをユーザから入力され、３次元が選択されると、ビデオ合成部７７０が前記デコードしたオリジナルビデオと３次元立体ビデオ付加データとを合成して３次元立体ビデオを生成する。逆に、２次元が選択されると、オリジナルビデオを通過させる。

この後、ステップＳ９９０では、出力部７８０がユーザの選択に応じて２次元ビデオ又は３次元立体ビデオとオーディオデータとを共に出力する。

このような本発明の詳細な動作過程は、上記図１及び上記図７における説明と同じであるため、ここでは詳細な説明を省略する。

上述した本発明の方法は、プログラムによって実現され、コンピュータで読み出すことのできる形態で記録媒体（ＣＤ−ＲＯＭ、ＲＡＭ、ＲＯＭ、フロッピーディスク、ハードディスク、光磁気ディスクなど）に格納することができる。このような過程は、本発明の属する技術分野における通常の知識を有する者が容易に実施できるため、これ以上の詳細な説明を省略する。

以上で説明した本発明は、上述の実施形態及び添付された図面によって限定されるものではなく、本発明の技術的思想を逸脱しない範囲内で様々な置換、変形及び変更が可能であることが、本発明の属する技術分野における通常の知識を有する者にとって自明である。

本発明は、別の視点のビデオを用いて３次元デジタル放送システムのみを支援する従来の方法とは異なり、別の視点のビデオ、視差情報、又は奥行き情報などの３次元立体ビデオ付加データを２次元ビデオストリーム（Ｔｒａｎｓｐｏｒｔ Ｓｔｒｅａｍ）に同期付けた付加ストリームとして定義して処理することにより、２次元デジタル放送システムとの完全な互換性を保障することができるという効果がある。

したがって、本発明は、３次元立体ビデオ基盤の放送コンテンツを受信しても、従来のデジタル放送の受信装置を有するユーザなら、２次元ビデオの放送を楽しむことができ、３次元立体デジタル放送の受信装置を有するユーザなら、２次元ビデオや３次元立体ビデオの放送を楽しむことができるという効果がある。

さらに、本発明は、３次元立体ビデオ放送装置を簡単に実現することができるという効果がある。

本発明に係る３次元立体ビデオ付加データを用いた３次元立体デジタル放送の送信装置の一実施形態を示す構成図である。 エレメンタリストリームパケット（ＰＥＳ）の構成図に関する一実施形態を示す構造図である。 本発明に係る３次元立体ビデオ付加データを区分するために追加した３次元立体ビデオタイプ（３Ｄ＿Ｖｉｄｅｏ＿ｔｙｐｅ）を説明するための図である。 本発明に係るプログラム関連付けテーブル（ＰＡＴ：Ｐｒｏｇｒａｍ Ａｓｓｏｃｉａｔｉｏｎ Ｔａｂｌｅ）情報を有するトランスポートストリーム（ＴＳ）の構成図に関する一実施形態を示す構造図である。 本発明に係るプログラムマップテーブル（ＰＭＴ：Ｐｒｏｇｒａｍ Ｍａｐ Ｔａｂｌｅ）情報を有するトランスポートストリーム（ＴＳ）の構成図に関する一実施形態を示す構造図である。 本発明に係るＴＳパケット（Ｔｒａｎｓｐｏｒｔ Ｓｔｒｅａｍ Ｐａｃｋｅｔ）の構成図に関する一実施形態を示す構造図である。 本発明に係る３次元立体ビデオ付加データを用いた３次元立体デジタル放送の受信装置の一実施形態を示す構成図である。 本発明に係る３次元立体ビデオ付加データを用いた３次元立体デジタル放送の送信方法に関する一実施形態を示すフローチャートである。 本発明に係る３次元立体ビデオ付加データを用いた３次元立体デジタル放送の受信方法に関する一実施形態を示すフローチャートである。

Claims (23)

1. ３次元立体ビデオ（ｖｉｄｅｏ）付加データ（ｄａｔａ）を用いた３次元立体デジタル（ｄｉｇｉｔａｌ）放送送信装置において、
   オリジナル（ｏｒｉｇｉｎａｌ）ビデオ、３次元立体ビデオ付加データ、およびオーディオ（ａｕｄｉｏ）データを受信して、前記オリジナルビデオ、前記３次元立体ビデオ付加データ、および前記オーディオデータをそれぞれのエレメンタリストリーム（ＥＳ：Ｅｌｅｍｅｎｔ Ｓｔｒｅａｍ）にエンコード（ｅｎｃｏｄｉｎｇ）するエンコード手段と、
   前記エンコード手段でエンコードしたそれぞれのエレメンタリストリーム（ＥＳ）を各々パケット（ｐａｃｋｅｔ）化して、それぞれのエレメンタリストリームパケット（ＰＥＳ：Ｐａｃｋｅｔｉｚｅｄ Ｅｌｅｍｅｎｔ Ｓｔｒｅａｍ）を生成するパケット化手段と、
   前記パケット化手段で生成したそれぞれのエレメンタリストリームパケットをそれぞれのトランスポートストリーム（ＴＳ：Ｔｒａｎｓｐｏｒｔ Ｓｔｒｅａｍ）に生成するトランスポートストリーム生成手段と、
   前記トランスポートストリーム生成手段で生成したそれぞれのトランスポートストリームを１つのトランスポートストリームに多重化する多重化手段と、
   前記多重化手段で多重化した１つのトランスポートストリームを変調する変調手段とを備え、
   前記３次元立体ビデオ付加データが、
   前記オリジナルビデオの視点とは別の視点ビデオ、または前記オリジナルビデオに対する視差情報（Ｄｉｓｐａｒｉｔｙ Ｉｎｆｏｒｍａｔｉｏｎ）または奥行き情報（Ｄｅｐｔｈ Ｉｎｆｏｒｍａｔｉｏｎ）のうち、１つ以上を含むことを特徴とする３次元立体ビデオ付加データを用いた３次元立体デジタル放送送信装置。
2. 前記多重化手段が、
   前記それぞれのエレメンタリストリームで、前記オリジナルビデオに対するエレメンタリストリーム（ＥＳ＿Ｏｒｉ）、前記３次元立体ビデオ付加データに対するエレメンタリストリーム（ＥＳ＿３Ｄ）、および前記オーディオデータに対するエレメンタリストリーム（ＥＳ＿ＡＵ）間の同期化のため、
   前記１つのトランスポートストリームで前記オリジナルビデオに対するトランスポートストリームにプログラムクロックレファランス（ＰＣＲ：Ｐｒｏｇｒａｍ Ｃｌｏｃｋ Ｒｅｆｅｒｅｎｃｅ）を挿入することを特徴とする請求項１に記載の３次元立体ビデオ付加データを用いた３次元立体デジタル放送送信装置。
3. 前記オリジナルビデオ、前記３次元立体ビデオ付加データ、および前記オーディオデータを互いに区分するためのプログラム仕様情報（ＰＳＩ：Ｐｒｏｇｒａｍ Ｓｐｅｃｉｆｉｃ Ｉｎｆｏｒｍａｔｉｏｎ）を生成するプログラム仕様情報生成手段を備えることを特徴とする請求項１に記載の３次元立体ビデオ付加データを用いた３次元立体デジタル放送送信装置。
4. 前記プログラム仕様情報生成手段が、
   ２次元デジタル放送システムと３次元立体デジタル放送システムとの互換性のため、
   前記それぞれのトランスポートストリームを区分するためのプログラムマップテーブル（ＰＭＴ：Ｐｒｏｇｒａｍ Ｍａｐ Ｔａｂｌｅ）のパケット識別子（ＰＩＤ：Ｐａｃｋｅｔ Ｉｄｅｎｔｉｆｉｅｒ）情報において、前記２次元デジタル放送システムのビデオとオーディオに対して定義されたストリームタイプ（ｓｔｒｅａｍ＿ｔｙｐｅ）を使用し、
   前記使用するストリームタイプで「予約済み」（ｒｅｓｅｒｖｅｄ）または「ユーザ個人」（ｕｓｅｒ ｐｒｉｖａｔｅ）に定義された値に、前記３次元立体ビデオ付加データに対するストリームタイプを新しく定義することを特徴とする請求項３に記載の３次元立体ビデオ付加データを用いた３次元立体デジタル放送送信装置。
5. 前記パケット化手段が、
   前記３次元立体ビデオ付加データと関連して新たに必要な入力フィールドがある場合、前記異なる視点のビデオ、前記視差情報（Ｄｉｓｐａｒｉｔｙ Ｉｎｆｏｒｍａｔｉｏｎ）、および前記奥行き情報（Ｄｅｐｔｈ Ｉｎｆｏｒｍａｔｉｏｎ）を区分するため、
   前記３次元立体ビデオ付加データに対するエレメンタリストリームパケット（ＰＥＳ＿３Ｄ）のヘッダ部に、前記３次元立体ビデオ付加データタイプに対する入力フィールドを追加定義する機能を行うことを特徴とする請求項１に記載の３次元立体ビデオ付加データを用いた３次元立体デジタル放送送信装置。
6. ３次元立体ビデオ付加データを用いた３次元立体デジタル放送受信装置において、
   変調されたトランスポートストリーム（ＴＳ：Ｔｒａｎｓｐｏｒｔ Ｓｔｒｅａｍ）を受信して前記変調したトランスポートストリームを復調する復調手段と、
   前記復調手段で復調したトランスポートストリームを逆多重化して、それぞれのトランスポートストリームを生成する逆多重化手段と、
   前記逆多重化手段で生成したそれぞれのトランスポートストリームを分析して、それぞれのエレメンタリストリームパケット（ＰＥＳ：Ｐａｃｋｅｔｉｚｅｄ Ｅｌｅｍｅｎｔ Ｓｔｒｅａｍ）を生成するトランスポートストリーム分析手段と、
   前記トランスポートストリーム分析手段で生成したそれぞれのエレメンタリストリームパケットを逆パケット化して、それぞれのエレメンタリストリーム（ＥＳ：Ｅｌｅｍｅｎｔ Ｓｔｒｅａｍ）を生成する逆パケット化手段と、
   前記逆パケット化手段で生成したそれぞれのエレメンタリストリームをオリジナル（ｏｒｉｇｉｎａｌ）ビデオ、３次元立体ビデオ付加データ、およびオーディオ（ａｕｄｉｏ）データでデコード（ｄｅｃｏｄｉｎｇ）するデコード手段と、
   前記デコード手段でデコードしたオリジナルビデオと３次元立体ビデオ付加データを合成して３次元立体ビデオを生成するビデオ合成手段と、
   前記デコード手段でデコードしたオーディオデータを出力して前記３次元立体ビデオまたは２次元ビデオを出力する出力手段とを備え、
   前記３次元立体ビデオ付加データが、
   前記オリジナルビデオの視点とは別の視点ビデオ、または前記オリジナルビデオに対する視差情報（Ｄｉｓｐａｒｉｔｙ Ｉｎｆｏｒｍａｔｉｏｎ）または奥行き情報（Ｄｅｐｔｈ Ｉｎｆｏｒｍａｔｉｏｎ）のうち、１つ以上を含むことを特徴とする３次元立体ビデオ付加データを用いた３次元立体デジタル放送受信装置。
7. 前記逆多重化手段が、
   前記復調したトランスポートストリームを、プログラム仕様情報（ＰＳＩ：Ｐｒｏｇｒａｍ Ｓｐｅｃｉｆｉｃ Ｉｎｆｏｒｍａｔｉｏｎ）に対するトランスポートストリーム（ＴＳ＿ＰＳＩ）、前記オリジナルビデオに対するトランスポートストリーム（ＴＳ＿Ｏｒｉ）、前記３次元立体ビデオ付加データに対するトランスポートストリーム（ＴＳ＿３Ｄ）、および前記オーディオデータに対するトランスポートストリーム（ＴＳ＿ＡＵ）に各々逆多重化することを特徴とする請求項６に記載の３次元立体ビデオ付加データを用いた３次元立体デジタル放送受信装置。
8. 前記逆多重化手段から前記プログラム仕様情報に対するトランスポートストリームを受信して、前記プログラム仕様情報に対するトランスポートストリームで前記プログラム仕様情報を分析し、前記プログラム仕様情報を前記逆多重化手段に伝達するプログラム仕様情報分析手段を備えることを特徴とする請求項７に記載の３次元立体ビデオ付加データを用いた３次元立体デジタル放送受信装置。
9. 前記逆多重化手段が、
   前記復調したトランスポートストリームのヘッダにあるパケット識別子（ＰＩＤ：Ｐａｃｋｅｔ Ｉｄｅｎｔｉｆｉｅｒ）値を確認してプログラム関連付けテーブル（ＰＡＴ：Ｐｒｏｇｒａｍ Ａｓｓｏｃｉａｔｉｏｎ Ｔａｂｌｅ）情報を有するトランスポートストリームパケットを探し出して前記プログラム関連付けテーブル情報を有するトランスポートストリームパケットを前記プログラム仕様情報分析手段に伝達し、前記プログラム仕様情報分析手段からプログラム番号（Ｐｒｏｇｒａｍ ｎｕｍｂｅｒ）とプログラムマップテーブル（ＰＭＴ：Ｐｒｏｇｒａｍ Ｍａｐ Ｔａｂｌｅ）に対するパケット識別子（Ｐｒｏｇｒａｍ＿ｍａｐ＿ＰＩＤ）を受信し、
   前記復調したトランスポートストリームからプログラムマップテーブル情報を有するトランスポートストリームパケットを探し出して前記プログラムマップテーブル情報を有するトランスポートストリームパケットを前記プログラム仕様情報分析手段に伝達し、前記プログラム仕様情報分析手段からストリームタイプ（ｓｔｒｅａｍ＿ｔｙｐｅ）とエレメントパケット識別子（ｅｌｅｍｅｎｔａｒｙ＿ＰＩＤ）を受信し、
   前記オリジナルビデオに対するトランスポートストリーム（ＴＳ＿Ｏｒｉ）、前記３次元立体ビデオ付加データに対するトランスポートストリーム（ＴＳ＿３Ｄ）、および前記オーディオデータに対するトランスポートストリーム（ＴＳ＿ＡＵ）に逆多重化することを特徴とする請求項８に記載の３次元立体ビデオ付加データを用いた３次元立体デジタル放送受信装置。
10. 前記逆多重化手段が、
    送／受信装置間のクロック同期化のため、前記オリジナルビデオに対するトランスポートストリーム（ＴＳ＿Ｏｒｉ）のプログラムクロックレファランス（ＰＣＲ：Ｐｒｏｇｒａｍ Ｃｌｏｃｋ Ｒｅｆｅｒｅｎｃｅ）に基づいてシステムクロックを復元することを特徴とする請求項８に記載の３次元立体ビデオ付加データを用いた３次元立体デジタル放送受信装置。
11. 前記プログラム仕様情報分析手段が、
    前記逆多重化手段から前記プログラム仕様情報に対するトランスポートストリーム（ＴＳ＿ＰＳＩ）を受信し、前記プログラム仕様情報に対するトランスポートストリームでプログラム関連付けテーブル（ＰＡＴ：Ｐｒｏｇｒａｍ Ａｓｓｏｃｉａｔｉｏｎ Ｔａｂｌｅ）の情報またはプログラムマップテーブル（ＰＭＴ：Ｐｒｏｇｒａｍ Ｍａｐ Ｔａｂｌｅ）のパケット識別子（ＰＩＤ）情報を分析し、
    前記それぞれのトランスポートストリームを互いに区分する前記プログラム仕様情報を前記逆多重化手段に伝達することを特徴とする請求項８に記載の３次元立体ビデオ付加データを用いた３次元立体デジタル放送受信装置。
12. 前記プログラム仕様情報分析手段が、
    前記逆多重化手段から前記プログラム関連付けテーブル情報を有するトランスポートストリームパケットを受信し、前記プログラム関連付けテーブル情報を有するトランスポートストリームパケットのペイロード（ｐａｙｌｏａｄ）情報を分析して前記ペイロード情報を前記逆多重化手段に伝達し、
    前記逆多重化手段から前記プログラムマップテーブル情報を有するトランスポートストリームパケットを受信し、前記プログラムマップテーブル情報を有するトランスポートストリームパケットのペイロード（ｐａｙｌｏａｄ）情報を分析して前記ペイロード情報を前記逆多重化手段に伝達することを特徴とする請求項９に記載の３次元立体ビデオ付加データを用いた３次元立体デジタル放送受信装置。
13. 前記逆パケット化手段が、
    前記３次元立体ビデオ付加データと関連して新たに入力した入力フィールドがある場合、
    前記３次元立体ビデオ付加データに対するエレメンタリストリームパケット（ＰＥＳ＿３Ｄ）のヘッダ部に定義された、前記別の視点のビデオ、前記視差情報（Ｄｉｓｐａｒｉｔｙ Ｉｎｆｏｒｍａｔｉｏｎ）、および前記奥行き情報（Ｄｅｐｔｈ Ｉｎｆｏｒｍａｔｉｏｎ）の３次元立体ビデオ付加データタイプに対する情報を分析し、
    前記別の視点のビデオ、前記視差情報（Ｄｉｓｐａｒｉｔｙ Ｉｎｆｏｒｍａｔｉｏｎ）、および前記奥行き情報（Ｄｅｐｔｈ Ｉｎｆｏｒｍａｔｉｏｎ）を区分する機能をさらに行うことを特徴とする請求項６に記載の３次元立体ビデオ付加データを用いた３次元立体デジタル放送受信装置。
14. 前記デコード手段が、
    前記それぞれのエレメンタリストリームで、前記オリジナルビデオに対するエレメンタリストリーム（ＥＳ＿Ｏｒｉ）、前記３次元立体ビデオ付加データに対するエレメンタリストリーム（ＥＳ＿３Ｄ）、および前記オーディオデータに対するエレメンタリストリーム（ＥＳ＿ＡＵ）を、プログラムクロックレファランス（ＰＣＲ：Ｐｒｏｇｒａｍ Ｃｌｏｃｋ Ｒｅｆｅｒｅｎｃｅ）を用いて同期化することを特徴とする請求項６に記載の３次元立体ビデオ付加データを用いた３次元立体デジタル放送受信装置。
15. 前記ビデオ合成手段が、
    前記別の視点のビデオ、前記視差情報（Ｄｉｓｐａｒｉｔｙ Ｉｎｆｏｒｍａｔｉｏｎ）、または前記奥行き情報（Ｄｅｐｔｈ Ｉｎｆｏｒｍａｔｉｏｎ）を含む前記３次元立体ビデオ付加データの種類に応じて、それぞれの３次元立体ビデオ生成アルゴリズムを適用して前記３次元立体ビデオを生成することを特徴とする請求項６に記載の３次元立体ビデオ付加データを用いた３次元立体デジタル放送受信装置。
16. 前記ビデオ合成手段が、
    前記オリジナルビデオと前記３次元立体ビデオ付加データを、プログラムクロックレファランス（ＰＣＲ：Ｐｒｏｇｒａｍ Ｃｌｏｃｋ Ｒｅｆｅｒｅｎｃｅ）と前記それぞれのエレメンタリストリームパケット（ＰＥＳ）の再生時間情報（ＰＴＳ：Ｐｒｅｓｅｎｔａｔｉｏｎ Ｔｉｍｅ Ｓｔａｍｐ）を用いて同期化させることを特徴とする請求項６に記載の３次元立体ビデオ付加データを用いた３次元立体デジタル放送受信装置。
17. 前記出力手段が、
    ユーザ選択信号の表示タイプが２次元である場合、前記２次元ビデオをビデオ表示部を介して出力し、
    前記ユーザ選択信号の表示タイプが３次元である場合、前記３次元立体ビデオを前記ビデオ表示部を介して出力することを特徴とする請求項６に記載の３次元立体ビデオ付加データを用いた３次元立体デジタル放送受信装置。
18. ３次元立体ビデオ付加データを用いた３次元立体デジタル放送送信方法において、
    オリジナル（ｏｒｉｇｉｎａｌ）ビデオ、３次元立体ビデオ付加データ、およびオーディオ（ａｕｄｉｏ）データを受信するステップと、
    前記オリジナルビデオ、前記３次元立体ビデオ付加データ、および前記オーディオデータをそれぞれのエレメンタリストリーム（ＥＳ：Ｅｌｅｍｅｎｔ Ｓｔｒｅａｍ）にエンコード（ｅｎｃｏｄｉｎｇ）するステップと、
    前記それぞれのエレメンタリストリーム（ＥＳ）をそれぞれパケット（ｐａｃｋｅｔ）化して、それぞれのエレメンタリストリームパケット（ＰＥＳ：Ｐａｃｋｅｔｉｚｅｄ Ｅｌｅｍｅｎｔ Ｓｔｒｅａｍ）を生成するステップと、
    前記それぞれのエレメンタリストリームパケットをそれぞれのトランスポートストリーム（ＴＳ：Ｔｒａｎｓｐｏｒｔ Ｓｔｒｅａｍ）に生成するステップと、
    前記それぞれのトランスポートストリームを１つのトランスポートストリームに多重化するステップと、
    前記１つのトランスポートストリームを変調して送信するステップとを含み、
    前記３次元立体ビデオ付加データが、
    前記オリジナルビデオの視点とは別の視点ビデオ、または前記オリジナルビデオに対する視差情報（Ｄｉｓｐａｒｉｔｙ Ｉｎｆｏｒｍａｔｉｏｎ）または奥行き情報（Ｄｅｐｔｈ Ｉｎｆｏｒｍａｔｉｏｎ）のうち、１つ以上を含むことを特徴とする３次元立体ビデオ付加データを用いた３次元立体デジタル放送送信方法。
19. 前記オリジナルビデオ、前記３次元立体ビデオ付加データ、および前記オーディオデータを互いに区分するためのプログラム仕様情報（ＰＳＩ：Ｐｒｏｇｒａｍ Ｓｐｅｃｉｆｉｃ Ｉｎｆｏｒｍａｔｉｏｎ）を生成するステップを含むことを特徴とする請求項１８に記載の３次元立体ビデオ付加データを用いた３次元立体デジタル放送送信方法。
20. 前記プログラム仕様情報を生成するステップが、
    ２次元デジタル放送システムと３次元立体デジタル放送システムとの互換性のため、
    前記それぞれのトランスポートストリームを区分するためのプログラムマップテーブル（ＰＭＴ：Ｐｒｏｇｒａｍ Ｍａｐ Ｔａｂｌｅ）のパケット識別子（ＰＩＤ：Ｐａｃｋｅｔ Ｉｄｅｎｔｉｆｉｅｒ）情報において、前記２次元デジタル放送システムのビデオとオーディオに対して定義されたストリームタイプ（ｓｔｒｅａｍ＿ｔｙｐｅ）を使用し、
    前記使用するストリームタイプで「予約済み」（ｒｅｓｅｒｖｅｄ）または「ユーザ個人」（ｕｓｅｒ ｐｒｉｖａｔｅ）に定義された値に、前記３次元立体ビデオ付加データに対するストリームタイプを新しく定義することを特徴とする請求項１８に記載の３次元立体ビデオ付加データを用いた３次元立体デジタル放送送信方法。
21. ３次元立体ビデオ付加データを用いた３次元立体デジタル放送受信方法において、
    変調したトランスポートストリーム（ＴＳ：Ｔｒａｎｓｐｏｒｔ Ｓｔｒｅａｍ）を受信するステップと、
    前記変調したトランスポートストリームを復調するステップと、
    前記復調したトランスポートストリームを逆多重化してそれぞれのトランスポートストリームを生成するステップと、
    前記それぞれのトランスポートストリームを分析してそれぞれのエレメンタリストリームパケット（ＰＥＳ：Ｐａｃｋｅｔｉｚｅｄ Ｅｌｅｍｅｎｔ Ｓｔｒｅａｍ）を生成するステップと、
    前記それぞれのエレメンタリストリームパケットを逆パケット化してそれぞれのエレメンタリストリーム（ＥＳ：Ｅｌｅｍｅｎｔ Ｓｔｒｅａｍ）を生成するステップと、
    前記それぞれのエレメンタリストリームをオリジナル（ｏｒｉｇｉｎａｌ）ビデオ、３次元立体ビデオ付加データ、およびオーディオ（ａｕｄｉｏ）データにデコード（ｄｅｃｏｄｉｎｇ）するステップと、
    前記オリジナルビデオと前記３次元立体ビデオ付加データを合成して３次元立体ビデオを生成するステップと、
    前記オーディオデータを出力してユーザ選択に応じて前記３次元立体ビデオまたは２次元ビデオを出力するステップを含み、
    前記３次元立体ビデオ付加データが、
    前記オリジナルビデオの視点とは別の視点のビデオ、または前記オリジナルビデオに対する視差情報（Ｄｉｓｐａｒｉｔｙ Ｉｎｆｏｒｍａｔｉｏｎ）または奥行き情報（Ｄｅｐｔｈ Ｉｎｆｏｒｍａｔｉｏｎ）のうち、１つ以上を含むことを特徴とする３次元立体ビデオ付加データを用いた３次元立体デジタル放送受信方法。
22. 前記それぞれのトランスポートストリームを生成するステップが、
    前記復調したトランスポートストリームを、プログラム仕様情報（ＰＳＩ：Ｐｒｏｇｒａｍ Ｓｐｅｃｉｆｉｃ Ｉｎｆｏｒｍａｔｉｏｎ）に対するトランスポートストリーム（ＴＳ＿ＰＳＩ）、前記オリジナルビデオに対するトランスポートストリーム（ＴＳ＿Ｏｒｉ）、前記３次元立体ビデオ付加データに対するトランスポートストリーム（ＴＳ＿３Ｄ）、および前記オーディオデータに対するトランスポートストリーム（ＴＳ＿ＡＵ）にそれぞれ逆多重化することを特徴とする請求項２１に記載の３次元立体ビデオ付加データを用いた３次元立体デジタル放送受信方法。
23. 前記プログラム仕様情報（ＰＳＩ：Ｐｒｏｇｒａｍ Ｓｐｅｃｉｆｉｃ Ｉｎｆｏｒｍａｔｉｏｎ）に対するトランスポートストリーム（ＴＳ＿ＰＳＩ）で前記プログラム仕様情報を分析するステップを含み、
    前記プログラム仕様情報を分析するステップが、
    前記プログラム仕様情報に対するトランスポートストリームでプログラム関連付けテーブル（ＰＡＴ：Ｐｒｏｇｒａｍ Ａｓｓｏｃｉａｔｉｏｎ Ｔａｂｌｅ）の情報またはプログラムマップテーブル（ＰＭＴ：Ｐｒｏｇｒａｍ Ｍａｐ Ｔａｂｌｅ）のパケット識別子（ＰＩＤ）情報を分析し、前記それぞれのトランスポートストリームを互いに区分する前記プログラム仕様情報を生成することを特徴とする請求項２２に記載の３次元立体ビデオ付加データを用いた３次元立体デジタル放送受信方法。

Images