JP2011086283A - 動的レンダリング用３次元ビデオキャプチャ・ワークフロー用のシステム及び方法 - Google Patents

Abstract

【課題】特定最終用途に合わせることに伴う制約を回避する３次元ビデオキャプチャ・ワークフローを提供する。
【解決手段】３次元ビデオデータを生成する方法は、複数のオブジェクトを有するシーンから２次元ビデオデータを取得するステップと、シーン中のオブジェクトを識別するステップと、複数のオブジェクトの相対位置を取得するステップと、２次元ビデオデータを符号化して符号化２次元ビデオデータを生成するステップと、複数のオブジェクトの相対位置に基づいて相対位置メタデータを生成するステップと、相対位置メタデータに対する演算用に、３次元奥行き係数メタデータを提供するステップとを含む。このようにして、既存の２次元ワークフローを費用効果的な方法で利用することができ、エンドユーザは、３次元奥行き係数メタデータを調整して、特定のレンダリング環境又は個人的な視聴の好みに合わせることができる。
【選択図】図１

Description

本発明は一般に、ビデオキャプチャ及び表示（プレゼンテーション）に関するものである。特に、本発明は、３次元ビデオ用のビデオキャプチャ及び表示に関するものである。

３次元ビデオ提示は、映画産業、ビデオゲーム産業及び一般消費者の関心の復活に直面しつつある。ますます、映画館及びテレビ放送局は、３次元表示を提供して、消費者の熱中を増大させている。同時に、業界は３次元キャプチャ、処理及び表示の規格を未だ決着させておらず、各々が特定用途に合わせた複数の互換性のないソリューション（解決法）を生じさせている。これに加えて、３次元ビデオ素材は一般に、映画館、演示ステージ、又はテレビのような特定対象向けのレンダリング環境で最適化され、符号化されている。その結果、３次元表示用のビデオ素材を制作することは、特定用途向け及び特定の基になるソリューション向けの３次元後編集（ポストプロダクション）ワークフローに対応するための、大きな追加費用及びスケジューリングを含むことが多い。更に、３次元効果のカスタマイズには限界があり、既存のシステムでの再生は不可能である。これら複合的要因は、小売発売スケジュールを遅延させ、消費者の３次元ビデオの採用を減速させ、その結果、消費者が、自分好みのペース及び視聴の好みで３次元表示技術を採用することを妨げている。最後に、消費者がますます自分の装置及び自分の体験を管理するようになるデジタルの世界では、消費者が３次元効果を自分の好みに合わせて変化させる３次元ソリューションは現在存在しない。

従って、特定の最終用途に合わせることにつきものの制約を回避する３次元ビデオキャプチャ・ワークフローを提供することによって、現在技術の欠点及び欠陥を克服する必要性が存在する。

実質的に、図面の少なくとも１つに関連して図示及び／又は説明し、特許請求の範囲により完全に記載する、動的レンダリング用３次元ビデオキャプチャ・ワークフロー用のシステム及び方法を提供する。

本発明の特徴及び利点は、以下の詳細な説明及び図面を検討した後に、通常の当業者にとって、よりすぐに明らかになる。

本発明の一実施例による、動的レンダリング用３次元ビデオキャプチャ・ワークフロー用のシステムを示す図である。 本発明の一実施例によるステップを記述するフローチャートであり、これらのステップによって、動的レンダリング用の３次元ビデオデータを生成することができる。

本願は、動的レンダリング用３次元ビデオキャプチャ・ワークフロー用のシステム及び方法に指向したものである。以下の説明は、本発明の実現に関連する特定情報を含む。本発明は、本願で具体的に説明するのとは異なる方法で実施することができることは、当業者の認める所である。さらに、本発明の具体的詳細の一部は、本発明を不明瞭にしないために説明しない。本願に記載しない具体的詳細は、通常の当業者の知識の範囲内である。本願中の図面及びそれに伴う詳細な説明は、本発明の好適な実施例に指向したものに過ぎない。簡潔さを保つために、本発明の原理を用いる本発明の他の実施例は、本願では具体的に説明せず、本願の図面では具体的に図示しない。

図１に、本発明の一実施例による、動的レンダリング用３次元ビデオキャプチャ・ワークフロー用のシステムを示す。図１の略図１００は、シーン１１０、ビデオキャプチャシステム１２０、後処理システム１３０、メディアコンテナ１５０、レンダリングシステム１６０、及びディスプレイ１７０を含む。シーン１１０は、オブジェクト１１５ａ及び１１５ｂを含む。ビデオキャプチャシステム１２０は、２次元ビデオデータ１２５及び３次元オブジェクトデータ１２６を含む。後処理システム１３０は、プロセッサ１３５及びメモリ１４０を含む。メモリ１４０は、符号化２次元ビデオデータ１４５、オブジェクト相対位置メタデータ１４６、及び３次元奥行き係数メタデータ１４７を含む。レンダリングシステム１６０は、３次元モデル化アルゴリズム１６５を含む。

シーン１１０は、映画撮影セット又はコンピュータ生成の３次元世界のような、ビデオキャプチャシステム１２０が捕捉（キャプチャ）する実環境又は仮想環境から成る。シーン１１０は複数のオブジェクトを含み、図１ではオブジェクト１１５ａ及び１１５ｂとして示し、これらのオブジェクトは、３次元処理用のビデオキャプチャシステム１２０によって識別される。例えば、オブジェクト１１５ａ及び１１５ｂは、現実又は仮想の俳優、キャラクター、建物、背景、投射物、風景、及び３次元効果を有する可能な操作用の他の物で構成することができる。２次元ビデオデータ１２５に加えて、ビデオキャプチャシステム１２０は、オブジェクト１１５ａ及び１１５ｂの位置を３次元オブジェクトデータ１２６として取得することもできる。例えば、ビデオキャプチャシステム１２０は、複数のカメラをシーン１１０の異なる視点で用いて、３次元オブジェクトデータ１２６を決定するための追加的な２次元ビデオデータを捕捉することができる。ビデオキャプチャシステム１２０は、その代わりに、無線ＩＣ（ＲＦＩＤ）タグのような位置追跡システム、テープ測定を用いて手動入力した値、あるいは、幾つかの分離した識別可能なペイン上にオブジェクトが表示されるようにシーンを設定するようなシーン中のペイン参照を用いることができる。シーン１１０の全体がコンピュータ生成である場合は、３次元オブジェクトデータ１２６は、シーン１１０を作成するために使用したレンダリングデータから直接取り出すことができる。従って、使用する特定方法、及び手動か自動かに関わらず、ビデオキャプチャシステム１２０は、シーン１１０内のオブジェクト１１５ａ及び１１５ｂを識別して、３次元オブジェクトデータ１２６を生成することができる。

次に、後処理システム１３０が、２次元ビデオデータ１２５及び３次元オブジェクトデータ１２６をビデオキャプチャシステム１２０から受信する。次に、図１に示すように、後処理システム１３０のプロセッサ１３５は、メモリ１４０中に、符号化２次元ビデオデータ１４５、オブジェクト相対位置メタデータ１４６、及び３次元奥行き係数メタデータ１４７を生成する。符号化２次元ビデオデータ１４５は、２次元ビデオデータ１２５を用いて、例えばビデオ圧縮コーデックを適用することによって生成することができる。２次元ビデオデータ１２５は、符号化する前に後処理して、例えばビデオ・アーティファクト（歪像）を除去するか、ビデオストリームを符号化又は３次元演算により適したものにすることもできる。オブジェクト相対位置メタデータ１４６は、３次元オブジェクトデータ１２６から導出することができ、３次元オブジェクトデータ１２６によって識別されるオブジェクトの相対位置を指定する。これらの相対位置は、２次元ビデオデータ１２５内に表示されるＸ−Ｙ平面からのＺ変位、あるいはディスプレイ１７０によって表示される幾何学的なＸ−Ｙ平面のような、シーン１１０中の基準点に対して指定することができる。これらの相対位置は、固定座標からのベクトルのようなグローバルな（全体の）基準点に対するもの、さらには、シーン１１０中の他のオブジェクトに対するものとすることもできる。さらに、オブジェクト相対位置メタデータ１４６は、最初に捕捉した現実世界のオブジェクト位置に必ずしも対応する必要はない、というのは、オブジェクト相対位置メタデータ１４６は、記録されたシーンとは異なり得る芸術的効果又は外観を達成するために、編集及び後編集の一部として調整することもできるからである。例えば、特定オブジェクトの奥行きを変更または誇張して、より劇的な外観を提供することができる。

これに加えて、３次元奥行き係数メタデータ１４７は、プロセッサ１３５によって提供することもでき、このことは、３次元効果のカスタマイズ及びスケーリング（拡大縮小）を、特定の対象環境に適合させることを可能にする。例えば、３次元奥行き係数メタデータ１４７は、オブジェクト相対位置メタデータ１４６中の相対位置値毎のスケーリング乗数を、全体（グローバル）又は個別ベースで与えることができ、３次元の奥行き効果を特定レンダリング環境に適するようにスケーリングすることを可能にする。例えば、大型の公衆劇場用途向けには、３次元奥行き係数メタデータ１４７は、全体の２．０倍スケーリング効果を指定して、より劇的な３次元効果を提供することができるのに対し、ホームシアター用途向けには、３次元奥行き係数メタデータ１４７は、全体の０．５倍スケーリング効果を指定して、より小さいホームシアターの鑑賞質により適した効果を提供することができ、そしてブルーレイ用途向けには、３次元奥行き係数メタデータ１４７は、デフォルトの全体の１．０倍スケーリング効果を指定して、消費者、組織ユーザ、及び他のブルーレイのユーザが、ユーザの好みに基づいて、３次元効果を全体又は個別オブジェクトのベースで調整することを可能にする。３次元奥行き係数メタデータ１４７は、負のスケーリング効果を指定することもでき、このことは特定用途にとって望ましいことがある。３次元奥行き係数メタデータ１４７は、シーン１１０からのオブジェクトの部分集合の相対位置を変更するために用いることもできる。実例として、シーン１１０がカーチェイスを表現する場合に、シーン中の特定の車には倍率（スケーリングファクタ）２．０を適用するが、シーン中の他の車については倍率１．０を維持することができる。

一旦、プロセッサ１３５がメモリ１４０中に示す構成要素を生成すると、プロセッサ１３５は、これらの構成要素をメディアコンテナ１５０の一部として頒布用にパッケージ化することができる。メディアコンテナ１５０は、例えば、ＭＰＥＧ−４又はＭＰＥＧ−２１マルチメディア・フレームワークによるパッケージ、あるいはメタデータを符号化２次元ビデオデータ１４５と共に組み込むことを可能にする他のフレキシブルなパッケージング・フォーマットで構成することができる。図１に示すように、このメタデータは、オブジェクト相対位置メタデータ１４６、及び３次元奥行き係数メタデータ１４７を含むことができる。メディアコンテナ１５０中には、３次元奥行き係数メタデータ１４７の複数の「プロファイル」が存在することもでき、これらのプロファイルによって、ダウンストリーム・レンダリングシステムの性質に応じて異なるメタデータ値を用いることができる。上記の例を続ければ、３次元奥行き係数メタデータ１４７は、意図するダウンストリーム・レンダリング装置毎に１つずつの、車用の複数の倍率を含むことができる。このようにして、単一のメディアコンテナ１５０を複数の流通経路で用いることができ、その上で、３次元効果が、レンダリング時に使用中のレンダリングシステムに対して最適に選択されることを保証することができる。

なお、全ての３次元情報がメタデータ中に分離されているので、単にメタデータを無視することによって、メディアコンテナ１５０を、標準的な２次元ビデオコンテナと全く同様に取り扱うことができる。このようにして、メディアコンテナ１５０は、既存の２次元ワークフロー及びインフラストラクチャに容易に統合することができ、例えば、特化した独自のワークフロープロセス及び装置を必要とする、左右の２次元画像を生成する既存の３次元ワークフローとは対照的である。そして、メディアコンテナ１５０は、３次元対応のテレビ放送局、３次元対応の映画館、３次元可能なブルーレイディスク、及びデジタルダウンロードのような種々の流通経路を通して頒布することができる。説明したように、メディアコンテナ１５０は、３次元情報が標準的な２次元ビデオデータから分離されるように構造化されているので、メディアコンテナ１５０は、既存の２次元流通経路にも容易に統合することができる。

一旦、メディアコンテナ１５０がレンダリングシステム１６０に到着すると、メディアコンテナ１５０を解釈して、ディスプレイ１７０にレンダリングすることができ、レンダリングシステム１６０は、例えば、３次元対応映写システム、３次元対応放送局、又は３次元可能なブルーレイプレーヤーを含むことができる。例えば、レンダリングシステム１６０が２次元可能でしかない場合は、符号化２次元ビデオデータ１４５は、単に直接復号化して、通常のようにフレームの連続ストリームとしてディスプレイ１７０に対して出力することができ、消費者の左右両目に対して同一である。レンダリングシステム１６０が３次元可能である場合は、３次元奥行き係数メタデータ１４７は更に、スケーリング及び／又は他の３次元効果のために、オブジェクト相対位置メタデータ１４６の一時的な作業用コピーに適用することができ、これに続いて、符号化２次元ビデオデータ１４５をディスプレイ１７０用に復号化した後に、３次元オブジェクトを実際に、オブジェクト相対位置メタデータ１４６によって記述されるようにレンダリングすることができる。オブジェクト相対位置メタデータ１４６によって記述される３次元オブジェクトをレンダリングするために、幾つかの異なる３次元レンダリング技術を利用して、ディスプレイ１７０上で奥行きの知覚を与えることができる。これらの３次元レンダリング技術、あるいは図１の３次元モデル化アルゴリズム１６５は、現在技術において周知であり、本質的に、消費者の左目用及び右目用に２つの異なる画像を生成して表示することを含む。例えば、１２０ヘルツのような高いリフレッシュレート（速度）をサポートするディスプレイ１７０を用いることによって、左右の画像が交互するストリームを速い連続で表示することができ、シャッター付きメガネのような種々のブロッキング（遮断）メカニズムを用いて、消費者の左目又は右目に対応する適正な左又は右の画像が表示されることを保証することができる。あるいはまた、ディスプレイ１７０は、例えば２台のプロジェクタ及び直交又は円偏光フィルタを用いる３次元投射（プロジェクション）システムのように、左及び右の２つの画像を同時に同一スクリーン上に、但し異なる偏光で投射することができ、対応する偏光ガラスで偏光した画像にフィルタをかけて、消費者の左目及び右目用の適正な画像にする。これらは、今日利用されている３次元レンダリング技術の少数の例に過ぎず、他の３次元レンダリング技術も同様に用いることができる。

こうして、３次元モデル化アルゴリズム１６５を、符号化２次元ビデオデータ１４５、オブジェクト相対位置メタデータ１４６、及び３次元奥行き係数メタデータ１４７に適用して、以上で説明した左右画像レンダリング技術を用いて、３次元ビデオをレンダリングすることができる。３次元モデル化アルゴリズム１６５を、オブジェクト相対位置メタデータ１４６、及び３次元奥行き係数メタデータ１４７に適用して、シーン１１０から識別されたオブジェクトの１つ以上をレンダリングすることもできる。前述したように、３次元奥行き係数メタデータ１４７は、エンドユーザが視聴の好みに応じて調整して、特定オブジェクト、あるいは全体的に全てのオブジェクトの３次元の奥行き効果を強めるか弱めることができる。

例えば、レンダリングシステム１６０がブルーレイプレーヤーを備えている場合は、メディアコンテナ１５０を含むブルーレイディスク上で提供される設定及び構成メニューは、３次元奥行き係数メタデータ１４７の、異なる視聴装置及び好みに合った調整を可能にする。一部の消費者は、例えば、３次元効果を、方向感覚を失わせるか目眩を誘発すると感じることがあり、そして３次元奥行き係数メタデータ１４７を０に設定することを選んで、実質的に３次元ビデオ効果を標準的な２次元ビデオに効果的に変換することがある（なお、この場合は、ビデオデータ１４５がレンダリングされる）。他の消費者は、３次元効果は楽しむが、特別な間取りまたは視聴の好みに応じて、その効果を強調又は低減したいことがある。この場合は、３次元奥行き係数メタデータ１４７の負のスケールから正のスケールまでの連続調整を可能にする仮想的な「３次元効果ノブ」を設けることができる。例えば、消費者がこの「３次元効果ノブ」を、リモコン装置、コンピュータマウス、又は他の装置のような、レンダリングシステム１６０に接続された入力装置を用いて制御して、レンダリングシステム１６０によって提供されるディスプレイ１７０上の設定スクリーン、例えばブルーレイプレーヤーの設定スクリーン、あるいはメディアコンテナ１５０によって提供されるディスプレイ１７０上の設定スクリーン、例えばユーザが調整可能な３次元奥行き係数を与えるＤＶＤまたはブルーレイディスクのフォーマット設定メニューを操作することができる。

メディアコンテナ１５０の再生中に、３次元モデル化アルゴリズム１６５をこのようにリアルタイムでメディアコンテナ１５０に適用して、メタデータ内、あるいはオブジェクト相対位置メタデータ１４６及び３次元奥行き係数メタデータ１４７内に提示されるビデオの３次元部分をレンダリングする。プロセッサ速度の安定した増加、及びこれに対応して低下するコストにより、リアルタイム３次元モデル化アルゴリズムは、レンダリングシステム１６０にとって利用可能な未使用のコンピュータサイクルを用いることによって、特化した３次元レンダリング加速ハードウェアを用いることによって、あるいは既存の２次元ビデオ復号化ハードウェア内に３次元機能を統合することによって、容易にサポートすることができる。このようにして、特定オブジェクトの奥行きスケーリング、対応するオブジェクトの陰影、水平又は垂直視差に関連する要素、及び他の要素を含む３次元表示要素を、自動的かつ動的に、オン・ザ・フライで、ディスプレイ１７０用に生成することができる。こうしたものとして、３次元奥行き係数メタデータ１４７を、費用効果的かつフレキシブルな方法で調整して、種々の環境用途及びユーザの好みに適合させることができ、以前のソリューションにおけるように、特定の所望用途毎に別個の３次元ワークフローを必要とするのとは異なる。

図２に、本発明の一実施例によるステップを記述するフローチャートを示し、これらのステップによって、３次元ビデオデータを動的なレンダリング用に生成することができる。通常の当業者にとって明らかである特定の詳細及び特徴は、フローチャート２００から除外している。例えば、あるステップは、１つ以上のサブステップを含み得るし、あるいは、現在技術において既知である特化した装置又は材料を含み得る。フローチャート２００に示すステップ２１０〜２６０が、本発明の一実施例を記述するのに十分であるが、本発明の他の実施例は、フローチャート２００に示すのとは異なるステップを利用し得る。

図２のフローチャート２００のステップ２１０、及び図１の略図１００を参照すれば、フローチャート２００のステップ２１０は、プロセッサ１３５が、オブジェクト１１５ａ及び１１５ｂを有するシーン１１０から２次元ビデオデータ１２５を取得することから成る。例えば、ビデオキャプチャシステム１２０は、シーン１１０から２次元ビデオデータ１２５を捕捉することのできる従来のカメラを含むことができる。次に、後処理システム１３０のプロセッサ１３５が、直接的なデータ接続を用いて、あるいは中継のデータ転送ネットワーク（図１では省略）によって、２次元ビデオデータ１２５を取り出す。

図２のフローチャート２００のステップ２２０、及び図１の略図１００を参照すれば、フローチャート２００のステップ２２０は、プロセッサ１３５が、シーン１１０中のオブジェクト１１５ａ及び１１５ｂを識別することから成る。前に説明したように、ステップ２２０を達成するために、ビデオキャプチャシステム１２０は、例えば、視点を変えた複数のカメラ、位置トラッキングシステム、手動データ入力、ペイン参照、あるいはコンピュータで自動生成したオブジェクト識別を用いることができる。ステップ２２０の結果は、３次元オブジェクトデータ１２６として記憶することができる。

図２のフローチャート２００のステップ２３０、及び図１の略図１００を参照すれば、フローチャート２００のステップ２３０は、プロセッサ１３５が３次元オブジェクトデータ１２６を取得することから成る。ステップ２３０は、ステップ２１０と同様のプロセスを用いて、直接的なデータ接続又はネットワークによって達成することができる。

図２のフローチャート２００のステップ２４０、及び図１の線図１００を参照すれば、フローチャート２００のステップ２４０は、プロセッサ１３５が２次元ビデオデータ１２５を符号化して、符号化２次元ビデオデータ１４５を生成することから成る。前に説明したように、ステップ２４０の前に、２次元ビデオデータ１２５に後処理を適用して、符号化又は３次元処理への適合性を増強することができる。ステップ２４０は、例えば、圧縮コーデックを適用して、２次元ビデオデータ１２５のデータサイズを低減することを含むことができる。

図２のフローチャート２００のステップ２５０、及び図１の略図１００を参照すれば、フローチャート２００のステップ２５０は、プロセッサ１３５が、３次元オブジェクトデータ１２６の相対位置に基づいてオブジェクト相対位置メタデータ１４６を生成することから成る。前に説明したように、オブジェクト相対位置メタデータ１４６は、２次元ビデオデータ１２５又はディスプレイ１７０によって表現される２次元平面のような幾つかの基準点に対して、３次元オブジェクトデータ１２６から導出することができる。

図２のフローチャート２００のステップ２６０、及び図１の略図１００を参照すれば、フローチャート２００のステップ２６０は、プロセッサ１３５が、オブジェクト相対位置メタデータ１４６に対する演算用に、３次元奥行き係数メタデータ１４７を提供することから成る。前に説明したように、３次元奥行き係数メタデータ１４７を用いて、公衆劇場、テレビ放送、ブルーレイディスク、あるいはホームシアターのような種々のレンダリング環境用の特定の３次元奥行きスケーリング係数を指定することができる。更に、ユーザ指定の３次元奥行き係数を用いて、特定環境やユーザの好みに合わせることもできる。図１に示すように、３次元の構成要素は、２次元ビデオの構成要素から分離されているので、メディアコンテナ１５０は、既存の２次元後処理ワークフロー及びインフラストラクチャ内で用いることができる。３次元モデル化アルゴリズム１６５を用いてメディアコンテナ１５０をリアルタイムで解釈して、３次元ビデオをディスプレイ１７０上でレンダリングするために、流通網の最終端、あるいはレンダリングシステム１６０しか必要としない。他の全ての中間的なワークフロープロセスは、メディアコンテナ１５０からの追加的な３次元メタデータを単に無視し、符号化２次元ビデオデータ１４５を、従来の２次元ビデオコンテンツのように処理することができる。このようにして、３次元ビデオコンテンツは、費用効果的かつフレキシブルな方法で生産することができ、消費者は、単に３次元奥行き係数メタデータ１４７を調整することによって、３次元表示を自分自身のペース及び好みに合わせて採用できるようになる。

以上の本発明の説明より、本発明の範囲を逸脱することなしに、種々の技術を用いて本発明の概念を実現することができることは明らかである。更に、本発明は、特定実施例を具体的に参照して説明してきたが、本発明の範囲を逸脱することなしに、形態及び細部に変更を加えることができることは、当業者の認める所である。こうしたものとして、説明した実施例は、あらゆる点で、例示的なものであり限定的なものではないものと考えるべきである。本発明は、本明細書で説明した特定実施例に限定されず、本発明の範囲から逸脱することなしに、多数の再構成、変更及び代替ができることも明らかである。

Claims (22)

1. ３次元ビデオデータを生成する方法において、
   複数のオブジェクトを有するシーンから２次元ビデオデータを取得するステップと；
   前記シーン中の前記複数のオブジェクトを識別するステップと；
   前記複数のオブジェクトの相対位置を取得するステップと；
   前記２次元ビデオデータを符号化して、符号化２次元ビデオデータを生成するステップと；
   前記複数のオブジェクトの前記相対位置に基づいて、相対位置メタデータを生成するステップと；
   前記相対位置メタデータに対する演算用に、３次元奥行き係数メタデータを提供するステップと；
   を含む方法。
2. 前記複数のオブジェクトの相対位置を取得するステップの前に、前記シーンの異なる視点に対応する追加的な２次元ビデオデータを取得するステップを更に含むことを特徴とする請求項１に記載の方法。
3. 前記２次元ビデオデータを符号化するステップの前に、前記２次元ビデオデータを後処理して、後処理した２次元ビデオデータを生成するステップを更に含み、前記符号化するステップは、前記後処理した２次元ビデオデータを用いて、前記符号化２次元ビデオデータを生成することを特徴とする請求項１に記載の方法。
4. 前記識別ステップが、無線ＩＣ（ＲＦＩＤ）タグ、手動のテープ測定値、前記シーン中の識別可能なペイン参照、又はコンピュータレンダリングから自動生成した値の１つを用いることを特徴とする請求項１に記載の方法。
5. ３次元モデル化アルゴリズムを、前記符号化２次元ビデオデータ、前記相対位置メタデータ、及び前記３次元奥行き係数メタデータに適用して、前記３次元ビデオデータをレンダリングするステップを更に含むことを特徴とする請求項１に記載の方法。
6. 前記３次元モデル化アルゴリズムを適用するステップにおいて、前記３次元ビデオデータのレンダリング用の左画像及び右画像を計算することを特徴とする請求項５に記載の方法。
7. 前記相対位置メタデータ及び前記３次元奥行き係数メタデータに３次元モデル化アルゴリズムを適用して、前記複数のオブジェクトの１つ以上をレンダリングするステップを更に含むことを特徴とする請求項１に記載の方法。
8. 前記３次元奥行き係数メタデータは、前記識別した複数のオブジェクトの１つ以上の前記相対位置を、基準点に対して変化させることを特徴とする請求項１に記載の方法。
9. 前記３次元奥行き係数メタデータは、前記基準点に対して負から正の範囲内であることを特徴とする請求項８に記載の方法。
10. 前記基準点が、レンダリング用のディスプレイの幾何学的な平面であることを特徴とする請求項９に記載の方法。
11. 前記相対位置メタデータが、前記シーン中に含まれる基準点を用いることを特徴とする請求項１に記載の方法。
12. 前記相対位置メタデータが、レンダリング用のディスプレイの幾何学的な平面に対応する基準点を用いることを特徴とする請求項１に記載の方法。
13. 前記相対位置メタデータが、グローバルな基準点を用いることを特徴とする請求項１に記載の方法。
14. 前記相対位置メタデータが、複数の基準点を用い、これら複数の基準点の各々が、前記複数のオブジェクトの１つ以上に対応することを特徴とする請求項１に記載の方法。
15. 前記３次元奥行き係数メタデータを、１つ以上のレンダリング環境に対して提供することを特徴とする請求項１に記載の方法。
16. 前記１つ以上のレンダリング環境が、ホームシアター環境を含むことを特徴とする請求項１５に記載の方法。
17. 前記１つ以上のレンダリング環境が、公衆劇場でのレンダリングを含むことを特徴とする請求項１５に記載の方法。
18. 前記１つ以上のレンダリング環境が、ブルーレイ・レンダリングシステムを含むことを特徴とする請求項１５に記載の方法。
19. ３次元ビデオデータを生成するシステムにおいて、
    このシステムがプロセッサを備え、このプロセッサは、
    複数のオブジェクトを有するシーンから２次元ビデオデータを取得し；
    前記シーン中の前記複数のオブジェクトを識別し；
    前記複数のオブジェクトの相対位置を取得し；
    前記２次元ビデオデータを符号化して、符号化２次元ビデオデータを生成し；
    前記複数のオブジェクトの前記相対位置に基づいて、相対位置メタデータを生成し；
    前記相対位置メタデータに対する演算用に、３次元奥行き係数メタデータを提供する
    よう構成されていることを特徴とするシステム。
20. 前記プロセッサが更に、前記複数のオブジェクトの相対位置を取得する前に、前記シーンの異なる視点に対応する追加的な２次元ビデオデータを取得するように構成されていることを特徴とする請求項１９に記載のシステム。
21. 前記プロセッサが更に、前記２次元ビデオデータを符号化する前に、前記２次元ビデオデータを後処理して、後処理した２次元ビデオデータを生成し、前記後処理した２次元ビデオデータを符号化して、前記符号化２次元ビデオデータを生成するように構成されていることを特徴とする請求項１９に記載のシステム。
22. 前記プロセッサが更に、３次元モデル化アルゴリズムを、前記符号化２次元ビデオデータ、前記相対位置メタデータ、及び前記３次元奥行き係数メタデータに適用して、前記３次元ビデオデータをレンダリングするように構成されていることを特徴とする請求項１９に記載のシステム。

Images