JP5543504B2

JP5543504B2 - デジタル放送基盤の三次元静止映像サービス方法及び装置

Info

Publication number: JP5543504B2
Application number: JP2012029903A
Authority: JP
Inventors: クグ−ジンユン; クァン−スンイー; ナムホハー; ジン−ウンキム; スー−インイー
Original assignee: Electronics and Telecommunications Research Institute ETRI
Current assignee: Electronics and Telecommunications Research Institute ETRI
Priority date: 2006-09-29
Filing date: 2012-02-14
Publication date: 2014-07-09
Anticipated expiration: 2027-09-21
Also published as: KR20080030360A; EP2073560B1; EP2073560A4; US20100110162A1; KR100864826B1; JP2010505327A; US8767041B2; WO2008038961A1; EP2073560A1; JP2012095362A

Description

本発明は、デジタル放送でＡＶサービス中に、ユーザに三次元静止映像サービスを提供するための方法及びその装置に係り、広告及び特定イベントに対して三次元静止映像を再生することによって、視聴及び広告効果を高めることを目的とする。

本発明は、MIC/IITAのIT R&Dプログラムの支援によってなされた［2005-S-403-02，Development of Supper-intelligent Multimedia Anytime-anywhere Realistic TV（Smart TV） Technology]。

一般的に、三次元ステレオ映像は、基準映像（reference image）と、多様な形態の三次元付加映像（3D supplement image）とによって構成され、２つの映像がそれぞれ左右の映像に変換される。これらの２つの映像が三次元ディスプレイに再生されることによって、立体感を感じ取ることが可能である。ここで、三次元付加映像は、垂直（水平）１／２右側映像（half of vertical(horizontal) right image）、全右側映像（full right image）、さらに垂直（水平）１／２の右側映像（すなわち１／４の映像（quarter image））、深さ（depth）／ディスパリティ（disparity）映像などになりうる。一例として、三次元付加映像が垂直（水平）１／２右側映像である場合には、基準映像及び三次元付加映像は、それぞれ奇数（偶数）ライン映像データのみを有する映像と、偶数（奇数）ライン映像データのみを有する映像に変換される。その後、場面内の同じ位置に左右フィールド映像を同時に三次元ディスプレイに再生する。

典型的な二次元デジタル放送と互換性があるように開発された三次元デジタル放送では、基準映像及び三次元付加映像を別途のエンコーダでエンコーディングして伝送する。受信側でも、２つの映像のための別途のデコーダが必要となる。従って、この種の三次元デジタル放送システムのためには、従来のデジタル放送標準への補完が必要となり、多少複雑なシステム開発が必要になる。

本発明は、上記問題点を解決するために提案されたものであり、信号ビデオチャンネル及び信号データチャンネルを利用して三次元静止映像を提供すること、または１つのビデオチャンネルを利用して三次元静止映像を提供することによって、単一ビデオコーデック（codec）を使用する既存のデジタル放送と互換性を維持しつつ、特定の時間区間で三次元静止映像サービスを提供できる装置及びその方法を提案する。

前述の技術的課題を達成するための本発明の望ましい一実施形態にかかる、デジタル放送基盤の三次元静止映像の提供方法をここに提供する。本方法は、三次元静止映像を構成する基準映像及び三次元付加映像をデータチャンネルまたはビデオチャンネルを介して二次元映像と共に受信する段階、上記受信された基準映像及び上記三次元付加映像を上記三次元静止映像に復元（restore）する段階、及び上記二次元映像を利用したデジタルＡＶ（audio-visual）放送中に、既受信の再生時点及び再生モードを含んだディスプレイ情報によって、上記三次元静止映像を特定区間にディスプレイする段階を含み、三次元静止映像を構成する基準映像及び三次元付加映像をデータチャンネルまたはビデオチャンネルを介して二次元映像と共に受信する段階において、前記三次元静止映像を前記二次元映像と同期させて再生する再生時点を指定するデータ同期化のための情報と、再生モードを示す三次元静止映像についての情報とを受信することをさらに含み、二次元映像を利用したデジタルＡＶ（audio-visual）放送中に、既受信の再生時点及び再生モードを含んだディスプレイ情報によって、上記三次元静止映像を特定区間にディスプレイする段階は、前記再生モードが三次元で再生すべきことを示すとき、前記再生時点によって指定される前記三次元静止映像の再生を開始するトリガ時間と前記三次元静止映像の再生を終了する再生満了時間とから、前記二次元映像を用いたデジタルＡＶ放送中に前記三次元静止映像を挿入すべき特定の時間区間を識別して、前記二次元映像を用いたデジタルＡＶ放送中の特定の時間区間に前記三次元静止映像をディスプレイし、三次元静止映像を構成する基準映像及び三次元付加映像をデータチャンネルまたはビデオチャンネルを介して二次元映像と共に受信する段階は、前記データ同期化のための情報及び前記三次元静止映像についての情報が含まれたトリガメッセージを、二次元映像を利用したデジタルＡＶ（audio-visual）放送中に、既受信の再生時点及び再生モードを含んだディスプレイ情報によって、上記三次元静止映像を特定区間にディスプレイする段階において前記三次元静止映像をディスプレイする直前に受信することを含み、復元されて保存された前記三次元静止映像を、前記トリガメッセージに応じて反復して使用することを含んで構成される。

前述の技術的課題を解決するための本発明の望ましい一実施形態にかかる、デジタル放送基盤の三次元静止映像の提供装置をここに提供する。本装置は、三次元静止映像を構成する基準映像及び三次元付加映像をデータチャンネルまたはビデオチャンネルを介して二次元映像と共に受信する受信部、上記受信された基準映像及び上記三次元付加映像を上記三次元静止映像に復元する復元部、及び上記二次元映像を利用したデジタルＡＶ放送中に、既受信の再生時点及び再生モードを含んだディスプレイ情報によって、上記三次元静止映像を特定区間にディスプレイするディスプレイ部を備え、前記受信部は、前記三次元静止映像を前記二次元映像と同期させて再生する再生時点を指定するデータ同期化のための情報と、再生モードを示す三次元静止映像についての情報とをさらに受信し、前記ディスプレイ部は、前記再生モードが三次元で再生すべきことを示すとき、前記再生時点によって指定される前記三次元静止映像の再生を開始するトリガ時間と前記三次元静止映像の再生を終了する再生満了時間とから、前記前記二次元映像を用いたデジタルＡＶ放送中に前記三次元静止映像を挿入すべき特定の時間区間を識別して、前記二次元映像を用いたデジタルＡＶ放送中の特定の時間区間に前記三次元静止映像をディスプレイし、前記受信部は、前記データ同期化のための情報及び前記三次元静止映像についての情報が含まれたトリガメッセージを、前記ディスプレイ部が前記三次元静止映像をディスプレイする直前に受信し、復元されて保存された前記三次元静止映像を前記トリガメッセージによって反復して使用することを含む。

本発明は、デジタル放送でＡＶサービス中に、三次元静止映像サービス提供方法及びその装置を使用し、デジタル放送の動映像ＡＶサービス中に、広告のような特定イベント場面に、三次元静止映像の再生を可能にすることによって、デジタル放送における視聴上昇効果及び広告効果を高めることができる。また、本発明の三次元静止映像サービス方法及び装置は、地上波ＤＴＶ、デジタルケーブルＴＶ（ＤＣＡＴＶ）、地上波ＤＭＢ、インターネット放送（ＩＰＴＶ）など、多様な放送媒体で、三次元広告、三次元教育資料、および三次元インスタントメッセージサービスなどを提供するのに容易に活用できる。

本発明の一実施形態による、デジタル放送における三次元静止映像サービスのための同期化されたデータストリームを示す図である。本発明の一実施形態による、伝送ストリームに基づいて三次元静止映像サービスを提供するための装置を示す図である。本発明の一実施形態による、図２の復元部の構成を示す図である。本発明の一実施形態による、三次元静止映像サービスを提供する方法に係るフローチャートである。本発明の一実施形態による、二次元ＡＶ放送中に、三次元静止映像をディスプレイする方法に係る図面である。本発明の一実施形態による、地上波デジタルマルチメディア放送（ＤＭＢ）でのデータカルーセルの構造に係る図である。本発明の一実施形態による、デジタル放送で三次元静止映像を１つのビデオチャンネルで伝送するストリームに係る図である。本発明の一実施形態による、デジタル放送でサービスされるコンテンツのフォーマットを認識するためのＣｏｎｔｅｎｔｓ＿ｔｙｐｅ＿ｄｅｓｃｒｉｐｔｏｒに係る図面である。本発明の一実施形態による、ＭＰＥＧ−２システム標準規格のＰＥＳパケットヘッダ構成を示す図である。本発明の一実施形態による、ＰＥＳ拡張フィールドデータ（PES extension field data）で、左右映像を区別するためのフィールド値を示す図である。本発明の一実施形態による、１つのビデオチャンネルを介して三次元静止映像サービスを提供するための構成に係る図である。

前述の技術的課題を達成するための本発明の望ましい一実施形態にかかる、デジタル放送基盤の三次元静止映像の提供方法をここに提供する。本方法は、三次元静止映像を構成する基準映像及び三次元付加映像をデータチャンネルまたはビデオチャンネルを介して二次元映像と共に受信する段階、上記受信された基準映像及び上記三次元付加映像を上記三次元静止映像に復元（restore）する段階、及び上記二次元映像を利用したデジタルＡＶ（audio-visual）放送中に、既受信の再生時点及び再生モードを含んだディスプレイ情報によって、上記三次元静止映像を特定区間にディスプレイする段階を含んで構成される。

前述の技術的課題を解決するための本発明の望ましい一実施形態にかかる、デジタル放送基盤の三次元静止映像の提供装置をここに提供する。本装置は、三次元静止映像を構成する基準映像及び三次元付加映像をデータチャンネルまたはビデオチャンネルを介して二次元映像と共に受信する受信部、上記受信された基準映像及び上記三次元付加映像を上記三次元静止映像に復元する復元部、及び上記二次元映像を利用したデジタルＡＶ放送中に、既受信の再生時点及び再生モードを含んだディスプレイ情報によって、上記三次元静止映像を特定区間にディスプレイするディスプレイ部を備えて構成される。

以下、添付された図面を参照しつつ、本発明に係る望ましい実施形態について詳細に説明する。

デジタル放送で、三次元静止映像サービス方法は、その形態によって二種に大別される。第一は、１つのビデオチャンネル及び１つのデータチャンネルを利用し、デジタル放送で三次元静止映像をサービスする方法である。これは、同期化されたデータストリームを使用する方法である。

図１は、本発明の一実施形態による、デジタル放送で、三次元静止映像（静止画）サービスのための同期化されたデータストリームを図示する。

本発明の本実施形態では、デジタル放送の動映像（動画）ＡＶ（Audio-Visual）サービス１０１中に、三次元静止映像サービス１０２を提供するために、三次元ステレオ映像の基準になる基準映像を特定の時間区間に挿入する。該基準映像は、放送中に広告のような特定のイベント場面でのみ三次元効果を出すためのものである。該基準映像は、複数の静止映像の１つ、あるいはあらかじめ生成された動映像の一部分を代替している静止映像である。

一方、三次元ステレオ映像のための他の付加映像は、静止映像としてあらかじめ受信側でデータファイル形態に準備した後、同期化されたデータサービスを介して伝送される。該三次元静止映像のためのデータファイルは、基準映像と三次元付加映像とによって構成される。端末でデータファイルとしてのみ三次元静止映像を構成する場合には、基準映像と付加映像とが同時に使われる。前述のＡＶサービス１０１として伝送される基準映像を基準に三次元静止映像を構成する場合には、データファイルのうち付加映像だけ使われる。結果的に、データファイルの基準映像は、ＡＶサービス１０１の特定の時間区間に挿入される基準静止映像と同一に制作されなければならない。

ここで、静止映像サービスとは、スライドショー（slide show）サービスのような一連の静止映像シーケンス（sequence）の提供も含む。すなわち、三次元静止映像シーケンスをＡＶサービスとデータサービスとで同期化して一定の時間間隔で伝送することによって、三次元スライドショー効果も得ることができる。

三次元静止映像のためのデータファイルは、端末にダウンロードされるために、多様なデジタルデータ放送規格で定義されるデータカルーセル（carousel）形式で伝送される。ここでデータカルーセルは、データヘッダとデータ本体とに分割され、該データヘッダとデータ本体がそれぞれ特定ブロック単位に分割され、その後、データストリームにエンコーディングされる。一方、同期化されたデータサービスと三次元静止映像とについての情報を提供するために、データヘッダには、多様な情報が生成されて挿入される。それと関連して、図１を参照すると、データファイル（すなわち、ファイルオブジェクト）は、端末で再生される時間を意味するトリガ時間（trigger time）、データファイルの再生満了時間（expiration time）、データファイルの形態を知らせるためのファイルタイプ、ファイル名、基準静止映像の形態と三次元付加静止映像の形態を知らせるための三次元映像情報などによって構成される。

ここで、トリガ時間及び満了時間は、世界標準時（ＵＴＣ：Universal Coordinated Time）、あるいはＡＶストリームの再生時間である、プレゼンテーション・タイムスタンプ（ＰＴＳ：Presentation Time Stamp）及びコンポジション・タイムスタンプ（ＣＴＳ：Composition Time Stamp）などを使用して、同期化されたデータサービス１０２を提供する。

一方、同期化されたデータサービス１０２に関して提案する他の方法では、データヘッダ情報を、別途生成されるトリガメッセージで伝送することも可能である。これは、データファイルをあらかじめ端末にダウンロードして保存した後、三次元静止映像サービスが必要な時点の直前にトリガメッセージを伝送することによって、三次元静止映像サービスを提供する方法である。

ここでトリガメッセージは、メッセージを区分するためのメッセージ識別子、データファイルの経路を指定するためのデータファイル指示子（indicator）、三次元映像情報、データファイルのトリガ時間、満了時間、及びその他の付加情報を含んでいる。該方法の長所は、一度保存されたデータファイルをＡＶサービス中に反復して使用することができ、トリガメッセージを短時間で送ることによって、さらに精密な同期化サービスが可能になることである。

多様なデジタル放送規格で特定されるＡＶエンコーダとデータエンコーダによって、それぞれエンコーディングされたＡＶストリームとデータストリームは、伝送ストリームに多重化された後、チャンネルエンコーディング及び変調の過程を経て放送される。

図２は、本発明の一実施形態による、伝送ストリームに基づいて三次元静止映像サービスを提供する装置を図示する。

三次元静止映像サービスを提供するための本装置は、多重化された伝送ストリーム２０１として伝送されるＡＶストリームとデータストリームとを受信する受信部２０２と、該受信したＡＶストリームとデータストリームとを、二次元ＡＶデータと三次元静止映像とに復元する復元部２０３と、該復元された二次元ＡＶデータの放送中に該復元された三次元静止映像を特定の区間にディスプレイするディスプレイ部２０４とから構成される。以下で、本装置の構成要素について図面に関連して詳細に説明する。

図３は、本発明の一実施形態による、図２に図示された復元部２０３を図示する。ＡＶ及びデータストリームは、放送網を介して受信される信号を、チャンネルデコーディングし復調することによって、多重化された伝送ストリーム２０１に復元される。該伝送ストリーム２０１は、逆多重化過程によってＡＶストリームおよびデータストリームに分離される。その後、ＡＶストリームは、ＡＶデコーダ３０１によってデコーディングされた後でディスプレイされる。また、逆多重化されたデータストリームは、データデコーダ３０２によって、三次元静止映像サービスのための静止映像ファイル形態に生成され、三次元フォーマット変換部３０３に送られて保存される。

また、三次元映像が再生される時点と再生モードとに係る多様な情報を含んでいるデータヘッダあるいはトリガメッセージは、データデコーダ３０２でデコーディングされた後、抽出されて三次元フォーマット制御部３０４に伝送れる。三次元フォーマット制御部３０４では、受信したトリガ時間及び三次元映像情報を利用し、三次元映像の再生時間と再生モードとを決定し、ユーザインターフェースによって立体感を調節する。

図４は、本発明の一実施形態による三次元静止映像サービスを提供する方法についてのフローチャートである。まず、動作４０１で、三次元静止映像を構成する基準映像及び三次元付加映像を、データチャンネルまたはビデオチャンネルを介して二次元映像と共に受信する。動作４０２で、このように受信された基準映像及び三次元付加映像は、三次元静止映像に復元される。動作４０３で、上記二次元映像を利用したデジタルＡＶ放送中に、再生時点及び再生モードを含んだディスプレイ情報によって、上記三次元静止映像を特定の区間にディスプレイすることによって、三次元静止映像サービスを提供する。

図５は、本発明の一実施形態による、二次元ＡＶ放送中に、三次元静止映像をディスプレイする方法を図示する。

三次元フォーマット変換部で生成される三次元静止映像は、三次元ディスプレイの特性によって、異なるフォーマットを有する必要がある。二次元動映像がデジタル放送のＡＶサービス中に再生されている間に、三次元フォーマット制御部が、再生モードが三次元であると示すと、保存された三次元静止映像が、トリガ時間に合うようにディスプレイされる。

もちろん、二次元ディスプレイのみを有する端末では、再生モードに関係なくＡＶサービスを介して伝送された二次元映像のみが再生される。また、ユーザインターフェースにおける立体感の調節によって、三次元動映像を任意に調節することができる。ここで、ディスプレイされる三次元映像を、再生モード及びユーザインターフェースに応じて三種の形態に分けることができる。

第一の形態５０１では、動映像ＡＶサービスの特定の時間区間に伝送された二次元静止映像を基準映像（すなわち、左フィールド映像）とし、同期化されたデータサービスを介して伝送されたデータファイルのうち、三次元付加映像のみを右フィールド映像として使用することによって、全画面にわたって三次元静止映像を提供する。

第二の形態５０２では、ＡＶサービスを介して伝送された二次元動映像が、バックグラウンド映像として再生され、データサービスを介して伝送された三次元静止映像が、画面の一部分で再生される。この場合には、データファイルの基準映像と三次元付加静止映像は、同時に三次元静止映像のために使われる。

第三の形態５０３では、ＡＶサービスの二次元静止映像を、第二の形態５０２の基準映像として利用する。この場合、ＡＶサービスの動映像の一部分は、あらかじめデータファイルの基準映像としての静止映像とされ、伝送される。

図６は、本発明の一実施形態による地上波デジタルマルチメディア放送（ＤＭＢ）でのデータカルーセルの構造を図示する。地上波ＤＭＢでは、データファイルのダウンロードサービスのために、マルチメディアオブジェクトトランスファー（ＭＯＴ：Multimedia Object Transfer）を伝送プロトコルとして使用している。これにより、地上波ＤＭＢに使用されるデータカルーセルにおいて、データヘッダは、ＭＯＴヘッダコア（header core）６０１とヘッダ拡張（extension）６０２とによって構成され、データ本体は、実際のデータファイルの伝送に使われるＭＯＴ本体によって構成される。

本発明の本実施形態におけるデータサービスのために、ＭＯＴヘッダコア６０１では、コンテンツタイプ（ContentType）を静止映像に設定し、コンテンツサブタイプ（ContentSubType）では、三次元映像のためのタイプをさらに定義することが必要である。

ヘッダ拡張６０２では、データファイルの再生時間を示すトリガ時間と満了時間とをＵＴＣフォーマットに設定できる。精密な同期化データサービスのためには、ＡＶサービスでの再生時間であるＰＴＳあるいはＣＴＳを、トリガ時間及び満了時間として使用することもできる。また、トリガメッセージは、ＤＭＢのデータチャンネル中の１つであるＴＤＣ（TransparentDataChannel）パケットなどで伝送可能である。

１つのビデオチャンネル及び１つのデータチャンネルを利用して、デジタル放送で三次元静止映像をサービスする前述の方法以外に、１つのビデオチャンネルを利用して三次元静止映像サービスを提供する方法が存在する。これについて、図７で説明する。

図７は、本発明の一実施形態による、デジタル放送で三次元静止映像を１つのビデオチャンネルで伝送するストリームを図示する。より詳細には、図７は、従来のデジタル放送で、動映像サービスの最中に一定時間（Ｔ〜Ｔ＋Ｎ）の間、三次元静止映像を提供するビデオストリームを示す。三次元静止映像は、左右の映像によって構成され、受信機で復元された左右映像を介してユーザに三次元立体効果を提供する。このとき、ビデオストリーム内の三次元静止映像は、一定時間の間、第１の左（右）映像、第２の左（右）映像、．．．、第１の右（左）映像、第２の右（左）映像によって構成され、イントラフレームコーディング方式を適用してエンコーディングされる。したがって、本発明の本実施形態による方法では、従来のデジタル放送と互換性を維持しつつ、ユーザに三次元立体効果を提供することができる。

典型的にユーザは、プログラム・システム情報プロトコル（ＰＳＩＰ：Program System Information Protocol）を介して、従来の放送コンテンツ及び三次元静止映像コンテンツについての情報を認識することができる。しかしながら、三次元受信機は、実際に伝送されるコンテンツがいかなる形態であるか分からない。このために本発明の一実施形態では、１つのビデオチャンネルで従来の放送コンテンツと三次元静止映像コンテンツを区別するために、プログラムマップテーブル（ＰＭＴ：Program Map Table）内の「ｖｅｒｓｉｏｎ＿ｎｕｍｂｅｒ」及び以下で記述する「Ｃｏｎｔｅｎｔｓ＿ｔｙｐｅ＿ｄｅｓｃｒｉｐｔｏｒ」を利用する。

図８は、本発明の一実施形態による、デジタル放送でサービスされるコンテンツのフォーマットを認識するためのＣｏｎｔｅｎｔｓ＿ｔｙｐｅ＿ｄｅｓｃｒｉｐｔｏｒを示す。例えば、サービスされるコンテンツが従来の放送コンテンツである場合は、「ｖｅｒｓｉｏｎ＿ｎｕｍｂｅｒ＝０」、Ｃｏｎｔｅｎｔｓ＿Ｔｙｐｅ＿Ｄｅｓｃｒｉｐｔｏｒ内の「Ｃｏｎｔｅｓｔｓ＿Ｆｏｒｍａｔ＝１０」という設定がなされる。一定時間が過ぎた後に、サービスされるコンテンツが三次元静止映像コンテンツである場合、設定は、「ｖｅｒｓｉｏｎ＿ｎｕｍｂｅｒ＝１」、Ｃｏｎｔｅｎｔｓ＿Ｔｙｐｅ＿Ｄｅｓｃｒｉｐｔｏｒ内の「Ｃｏｎｔｅｎｔｓ＿Ｆｏｒｍａｔ＝２０」に変更される。したがって、三次元受信機は、受信されたコンテンツが従来の放送コンテンツであるか、三次元静止映像コンテンツであるかが分かるのである。

このとき、Ｃｏｎｔｅｎｔｓ＿Ｆｏｒｍａｔは、従来の放送コンテンツ及び多様な三次元コンテンツを区別するために拡張可能である。また、三次元静止映像放送の開始をあらかじめ三次元受信機に知らせるために、ＰＭＴ内の「Ｃｕｒｒｅｎｔ＿ｎｅｘｔ＿ｉｎｄｉｃａｔｏｒ」を利用する。すなわち、三次元静止映像放送の開始をあらかじめ知らせる場合、「ｖｅｒｓｉｏｎ＿ｎｕｍｂｅｒ＝１」、Ｃｏｎｔｅｎｔｓ＿Ｔｙｐｅ＿Ｄｅｓｃｒｉｐｔｏｒ内の「Ｃｏｎｔｅｎｔｓ＿Ｆｏｒｍａｔ＝２０」、「Ｃｕｒｒｅｎｔ＿ｎｅｘｔ＿ｉｎｄｉｃａｔｏｒ＝０」と設定される。実際の三次元静止映像放送が始まれば、設定は、「Ｃｕｒｒｅｎｔ＿ｎｅｘｔ＿ｉｎｄｉｃａｔｏｒ＝１」に変更される。上記Ｃｏｎｔｅｎｔｓ＿ｔｙｐｅ＿ｄｅｓｃｒｉｐｔｏｒ内のタグ値をユーザプライベート（user private）に設定することによって、従来のデジタル放送セットトップと互換性を維持することができる。該タグ値は、ＰＭＴ内の「Ｐｒｏｇｒａｍ＿ｉｎｆｏ＿ｌｅｎｇｔｈ」直後に位置することになる。また、ビデオストリームをタイプを変更せずに使用することによって、上述の部分追加以外の他の部分は、従来のＰＭＴ情報をそのまま使用する。

上述のように三次元受信機は、ＰＭＴを介して３Ｄ静止映像放送を認識する。加えて、三次元立体効果を提供するために、ビデオストリーム内に含まれる左（右）映像のフレームと右（左）映像のフレームを区別する必要がある。

図９は、本発明の一実施形態による、ＭＰＥＧ（Motion Picture Experts Group）−２システム標準規格のＰＥＳ（Packetized Elementary Stream）パケットヘッダの構成を示す。

ＰＥＳヘッダ内の選択的フィールド（ｏｐｔｉｏｎａｌｆｉｅｌｄ）上に、「ＰＥＳｅｘｔｅｎｓｉｏｎ」が存在し、この「ＰＥＳｅｘｔｅｎｓｉｏｎ」下の選択的フィールド内に、「ＰＥＳｅｘｔｅｎｓｉｏｎｆｉｅｌｄｄａｔａ（ＰＥＳ拡張フィールドデータ）」が存在する。本発明の一実施形態では、三次元静止映像について符号化ストリームの左右映像を区別するために、前述のＰＥＳパケットヘッダ部分の「ＰＥＳｅｘｔｅｎｓｉｏｎｆｉｅｌｄｄａｔａ」部分を活用する。詳細には、「ＰＥＳｅｘｔｅｎｓｉｏｎｆｉｅｌｄｄａｔａ」内で左右映像を区別するためのフィールド値を定義する。このフィールド値に基づいて、三次元静止映像に係る左右映像を区別する。

図１０は、本発明の一実施形態による、ＰＥＳｅｘｔｅｎｓｉｏｎｆｉｅｌｄｄａｔａで、左右映像を区別するために定義されたフィールド値を示す図である。フィールド値によって、左（left）および右（right）のフレームが決定される。したがって、三次元静止映像について、左右映像がフィールド値によって区別される。区別された左右映像は、三次元立体映像を生成するために、デコーディングされて三次元フォーマット変換部に伝送される。

図１１は、本発明の一実施形態による、１つのビデオチャンネルを介して三次元静止映像サービスを提供するための構成を図示する。

放送網を介して伝送された信号を受信し、次いで、復調及びチャンネルデコーディングが行なわれる。この過程を経ると、ＡＶストリームは、多重化された伝送ストリームに復元される。該伝送ストリームは、逆多重化過程によって異なるストリームに分離され、それぞれビデオデコーダ１１１０とオーディオデコーダ１１２０とによってデコーディングされる。このとき、一定時間の間、三次元静止映像をビデオに対して提供する場合、三次元受信機のＰＥＳパケットヘッダをパージングして左右映像を認識し、デコーディングされた左右映像を三次元フォーマット変換部１１３０に伝送する。

図７に図示されるように、三次元静止映像の構成によって、三次元フォーマット変換部１１３０は、デコーディングされた左映像を左映像バッファ１１３２に保存する。デコーディングされた右映像が受信される場合、三次元フォーマット変換部１１３０は、デコーディングされた右映像を右映像バッファ１１３１に保存する。三次元映像生成部１１３３ｈ、左右映像を両方使用して三次元立体映像を生成する。三次元フォーマット変換部１１３０は、三次元静止映像内のデコーディングされた左右映像を使用して、ユーザインタラクションを介して、立体感と二次元ディスプレイと三次元ディスプレイの転換を調節する。

Claims

（ａ）三次元静止映像を構成するための基準映像及び三次元付加映像を二次元映像と共に受信する段階であって、前記基準映像を、データチャンネルまたはビデオチャンネルを介して受信し、前記三次元付加映像を、前記データチャンネルを介して受信し、前記二次元映像を、前記ビデオチャンネルを介して受信する段階と、
（ｂ）前記受信した基準映像及び前記三次元付加映像を前記三次元静止映像に復元する段階と、
（ｃ）前記二次元映像を利用したデジタルＡＶ放送中の特定の時間区間に、前記三次元静止映像をディスプレイする段階と
を含み、
前記段階（ａ）において、前記三次元静止映像を前記二次元映像と同期させて再生する再生時点を指定するデータ同期化のための情報と、再生モードを示す三次元静止映像についての情報とを受信することをさらに含み、前記段階（ｃ）は、前記再生モードが三次元で再生すべきことを示すとき、前記再生時点によって指定される前記三次元静止映像の再生を開始するトリガ時間と前記三次元静止映像の再生を終了する再生満了時間とから、前記前記二次元映像を用いたデジタルＡＶ放送中に前記三次元静止映像を挿入すべき特定の時間区間を識別して、前記二次元映像を用いたデジタルＡＶ放送中の特定の時間区間に前記三次元静止映像をディスプレイし、
前記段階（ａ）は、前記データ同期化のための情報及び前記三次元静止映像についての情報が含まれたトリガメッセージを、前記段階（ｃ）において前記三次元静止映像をディスプレイする直前に受信することを含み、復元されて保存された前記三次元静止映像を、前記トリガメッセージに応じて反復して使用することを含むことを特徴とするデジタル放送基盤の三次元静止映像の提供方法。
前記段階（ａ）で、少なくとも２つの三次元静止映像を構成するための前記基準映像及び三次元付加映像を一定の時間間隔で受信したとき、前記段階（ｃ）で、前記少なくとも２つの三次元静止映像を一連の三次元映像シーケンスの形式で前記特定の時間区間にディスプレイすることを特徴とする請求項１に記載のデジタル放送基盤の三次元静止映像の提供方法。
前記基準映像及び三次元付加映像を、前記データチャンネルを介して受信した場合は、前記基準映像及び三次元付加映像は、デジタルデータ放送標準規格にしたがってデータヘッダとデータ本体とを含むデータカルーセルの形式を使用して構成され、前記データヘッダは、前記データ同期化のための情報と、前記三次元静止映像についての情報とを含むことを特徴とする請求項１に記載のデジタル放送基盤の三次元静止映像の提供方法。
地上波デジタルマルチメディア放送（ＤＭＢ）のマルチメディアオブジェクトトランスファー（ＭＯＴ：ＭｕｌｔｉｍｅｄｉａＯｂｊｅｃｔＴｒａｎｓｆｅｒ）プロトコルを使用する前記データカルーセル内の前記データヘッダのＭＯＴヘッダコア内のコンテンツタイプを、静止映像に設定し、該ＭＯＴヘッダコア内のコンテンツのサブタイプで前記三次元静止映像についての情報のタイプを定義することを特徴とする請求項３に記載のデジタル放送基盤の三次元静止映像の提供方法。
前記データカルーセル内の前記データヘッダのＭＯＴヘッダ拡張に含まれる前記トリガ時間及び前記再生満了時間は、前記デジタルＡＶ放送を行うＡＶサービスの再生時間であるプレゼンテーション・タイムスタンプ（ＰＴＳ：ＰｒｅｓｅｎｔａｔｉｏｎＴｉｍｅＳｔａｍｐ）またはコンポジション・タイムスタンプ（ＣＴＳ：ＣｏｍｐｏｓｉｔｉｏｎＴｉｍｅＳｔａｍｐ）であることを特徴とする請求項４に記載のデジタル放送基盤の三次元静止映像の提供方法。
前記段階（ｂ）において、前記データチャンネルを介して受信された前記データカルーセルは、データデコーダによって、前記三次元静止映像、前記データ同期化のための情報、及び前記三次元静止映像についての情報に復元されることを特徴とする請求項３に記載のデジタル放送基盤の三次元静止映像の提供方法。
前記段階（ｃ）は、前記ビデオチャンネルを介して伝送された二次元映像を前記基準映像として左側映像に設定し、前記データチャンネルを介して同期化されて伝送された前記三次元付加映像を右側映像に設定して前記三次元静止映像とし、該三次元静止映像を全画面にわたってディスプレイすることを特徴とする請求項６に記載のデジタル放送基盤の三次元静止映像の提供方法。
前記段階（ｃ）は、前記ビデオチャンネルを介して伝送された二次元映像をバックグラウンド映像として再生し、前記データチャンネルを介して伝送された前記基準映像と前記三次元付加映像とを前記三次元静止映像として、画面一部分にディスプレイすることを特徴とする請求項６に記載のデジタル放送基盤の三次元静止映像の提供方法。
前記段階（ｃ）は、前記ビデオチャンネルを介して伝送された二次元映像をバックグラウンド映像として再生し、前記ビデオチャンネルを介して伝送された前記基準映像と前記データチャンネルを介して伝送された前記三次元付加映像とを前記三次元静止映像としてディスプレイすることを特徴とする請求項６に記載のデジタル放送基盤の三次元静止映像の提供方法。
前記トリガメッセージは、さらに、メッセージ識別子、データファイルの経路を指定するためのデータファイル指示子、及びデータファイルの形態情報の少なくとも１つを含むことを特徴とする請求項１に記載のデジタル放送基盤の三次元静止映像の提供方法。
三次元静止映像を構成する基準映像及び三次元付加映像を二次元映像と共に受信する受信部であって、前記基準映像を、データチャンネルとビデオチャンネルの少なくとも一方を介して受信し、前記三次元付加映像を、前記データチャンネルを介して受信し、前記二次元映像を、前記ビデオチャンネルを介して受信する受信部と、
前記受信した基準映像及び前記三次元付加映像を、前記三次元静止映像に復元する復元部と、
前記二次元映像を利用したデジタルＡＶ放送中の特定の時間区間に、前記三次元静止映像をディスプレイするディスプレイ部と
を備え、
前記受信部は、前記三次元静止映像を前記二次元映像と同期させて再生する再生時点を指定するデータ同期化のための情報と、再生モードを示す三次元静止映像についての情報とをさらに受信し、前記ディスプレイ部は、前記再生モードが三次元で再生すべきことを示すとき、前記再生時点によって指定される前記三次元静止映像の再生を開始するトリガ時間と前記三次元静止映像の再生を終了する再生満了時間とから、前記二次元映像を用いたデジタルＡＶ放送中に前記三次元静止映像を挿入すべき特定の時間区間を識別して、前記二次元映像を用いたデジタルＡＶ放送中の特定の時間区間に前記三次元静止映像をディスプレイし、
前記受信部は、前記データ同期化のための情報及び前記三次元静止映像についての情報が含まれたトリガメッセージを、前記ディスプレイ部が前記三次元静止映像をディスプレイする直前に受信し、復元されて保存された前記三次元静止映像を前記トリガメッセージによって反復して使用することを特徴とするデジタル放送基盤の三次元静止映像の提供装置。
前記受信部が、少なくとも２つの三次元静止映像を構成するための前記基準映像及び三次元付加映像を一定の時間間隔で受信したとき、前記ディスプレイ部は、前記少なくとも２つの三次元静止映像を一連の三次元映像シーケンスの形式で前記特定の時間区間にディスプレイすることを特徴とする請求項１１に記載のデジタル放送基盤の三次元静止映像の提供装置。
前記受信部が、前記基準映像及び三次元付加映像を、前記データチャンネルを介して受信した場合、前記基準映像及び三次元付加映像は、デジタルデータ放送標準規格にしたがってデータヘッダとデータ本体とを含むデータカルーセルの形式を使用して構成され、前記データ同期化のための情報と、前記三次元静止映像についての情報とを含むことを特徴とする請求項１１に記載のデジタル放送基盤の三次元静止映像の提供装置。
地上波デジタルマルチメディア放送（ＤＭＢ）のマルチメディアオブジェクトトランスファー（ＭＯＴ：ＭｕｌｔｉｍｅｄｉａＯｂｊｅｃｔＴｒａｎｓｆｅｒ）プロトコルを使用する前記データカルーセル内の前記データヘッダのＭＯＴヘッダコア内のコンテンツタイプを、静止映像に設定し、該ＭＯＴヘッダコア内のコンテンツのサブタイプで前記三次元静止映像についての情報のタイプを定義することを特徴とする請求項１３に記載のデジタル放送基盤の三次元静止映像の提供装置。