JP5567578B2 - 入力された三次元ビデオ信号を処理するための方法及びシステム - Google Patents

Description

本発明は、入力された三次元ビデオ信号を処理するための方法及びシステム、並びに、本発明による方法を実行するためのコンピュータプログラム製品に関する。

三次元画像を表示するために適したディスプレイ装置は、研究における関心をますます集めている。加えて、満足できる高い質の観察経験をエンドユーザに提供する方法を確立するために、相当な研究が行われている。

三次元（3D）ディスプレイは、観察されているシーンの異なるビューを観察者の両方の目に提供することによって、観察経験に第３の次元を追加する。これは、表示される２つのビューを分離するための眼鏡をユーザに着用させることによって達成されることができる。しかしながら、眼鏡はユーザにとって不便であると考えられるので、多くのシナリオにおいて、ビューを分離し、それらがユーザの目に個別に到達する異なる方向にそれらを送る手段（例えば、レンチキュラレンズ又はバリア）をディスプレイのところで用いる自動立体視ディスプレイを用いることが好ましい。ステレオ・ディスプレイでは２つのビューが必要とされ、一方、自動立体視ディスプレイは一般的に、より多くのビュー（例えば９つのビュー）を必要とする。

さまざまな異なるアプローチが、そのような立体視及び自動立体視装置にコンテンツを提供するために存在する。普及しているフォーマットは、ディスプレイ装置によって表示されることができるそれぞれのビューのための複数の画像を事実上有するステレオ・コンテンツ又はマルチビュー・コンテンツの供給である。そうする利点は、一般に、そのようなディスプレイ装置における及びコンテンツ作成における処理要求が最低限に維持されることができることである。

表示のための実際の符号化されたビューを含むステレオ又はマルチビュー・コンテンツの供給に関連する問題は、これらの画像が潜在的に２つ以上のそれぞれのビュー間の視差関係を事実上固定することである。

オーバレイを適用するときに三次元ディスプレイのためのステレオ又はマルチビュー・コンテンツにおける視差関係を符号化しておくことの短所を軽減することが本発明の目的である。

この目的は、本発明による入力された三次元ビデオ信号を処理する方法によって達成され、当該方法は、入力された三次元ビデオ信号の最大の視差値を示す遠視差推定値及び入力された三次元ビデオ信号中の空間領域の最小の視差値を示す近視差推定値を決定し、遠視差推定値に基づく視差シフトにより、入力された三次元ビデオ信号を後方にシフトすることによって三次元ビデオ信号を適応させ、近視差推定値及び前記視差シフトに基づいて、シフトされた三次元ビデオ信号の空間領域中にオーバレイを生成する。いくつかの視差情報（遠い値及び近い値）を（マルチ・ビュー画像データ中の暗黙の情報とは対照的に）明示的にすることによって、シフトの量の決定のような明示的な処理が可能とされる。

本発明の発明者らは、上で示されるような遠視差推定値及び近視差推定値を確立することによって、ビデオ信号において表現されるシーンの前におけるオーバレイの安全な位置決めを可能にするために、オーバレイのための利用可能なヘッドルーム（headroom）が確立されることができることを認識した。遠視差推定値及び近視差推定値は、例えば、入力された三次元ビデオ信号の粗粒度視差分析を用いることにより、あるいは、入力された三次元ビデオ信号中に提供されるメタデータを用いることにより、決定されることができる。

一旦、三次元入力ビデオ信号が適応されることができるか、そしてどれだけ適応されることができるかが明らかになると、その視差範囲は、遠視差推定値に基づく視差シフトによって、後方にシフトされることができる。視差シフトは、コンテンツの再レンダリングを必要とせず、ビューを切り取って拡張することによって、一般的に比較的費用効果が優れている仕方で実行されることができる。

結果として、オーバレイを生成するために利用可能な視差範囲は拡張されることができ、ディスプレイのゼロ視差面の近くにオーバレイを配置することを可能にして、より鮮明なオーバレイを得る。後者は入力された三次元ビデオ信号中に利用可能なヘッドルームを必要とすることが、当業者にとって明らかとなるだろう。

実施の形態において、遠視差推定値及び近視差推定値は、入力された三次元ビデオ信号の視差推定値に基づく。特に、マージンが視差範囲の適応において維持されるとき、粗い視差推定が実行されることができる。まばらな視差推定値が十分に正確でないならば、マージンは、そのような誤差を依然として補正することができる。

別の実施の形態において、遠視差推定値及び近視差推定値は、入力された三次元ビデオ信号の中のメタデータとして提供される情報から導き出される。結果として、本発明は、大いに費用効率が高い仕方で実行されることができる。

本発明による好ましい実施の形態において、本方法はさらに、生成されたオーバレイによってシフトされた三次元ビデオ信号を覆い、それによって、例えば字幕、クローズド・キャプション情報、ユーザ・インタフェース情報及び/又は画像シーケンスのようなオーバレイを有する、マルチ・ビュー・ディスプレイ上での使用のための画像の生成を可能にする。これらのオーバレイ自体は、近視差推定値及び適用された視差シフトに基づく適切な視差値を用いて続いて符号化される二次元若しくは三次元画像データの静止画像又はアニメーションのシーケンスであることもできる。

三次元オーバレイの場合において、利用可能な視差範囲内に設定されることができるように、オーバレイの視差範囲をシフトすることが必要である場合がある。オーバレイがコンピュータ・グラフィックを用いて生成される場合、グラフィックスの配置を完全に制御することができ、シフトされた三次元ビデオ信号中のオーバレイに対して利用可能な利用可能な視差範囲全体が利用されることができる。

好ましい実施の形態において、視差値推定値は、ショットごとに決定される。ショット・カットとしても知られるショット境界を決定するために、従来のショット・カット検出技術が、入力された三次元ビデオ信号中のビューの１つ以上のビューに適用されることができる。そのような技術の例は、"Rapid Scene Analysis on Compressed Videos", by B. L. Yeo and B. Liu, published in IEEE Trans. Circuits and Systems for Video Technology, Vol. 5, pp. 533- 544, Dec. 1995中に示される。ショット境界がリアルタイムで決定されることができるが、一般に、本発明で使用する決定は、相当な先読みを必要とする。結果として、ショット・カット検出は好ましくはオフラインで実行される。

オーバレイがいくつかの連続するショット中に存在すべき場合には（例えばピクチャ・イン・ピクチャ(Picture In Picture)シナリオ）、遠視差推定値及び近視差推定値は、好ましくは、これらの連続するショットのコンテンツに基づいて決定され、オーバレイの適切な重なりを可能にする。

有利な実施の形態において、視差シフトは、複数のビューの隣り合うビュー間の予め定められた最大の視差値に基づく。この出願を通して、正の視差は、ゼロ視差面の後ろに位置されるように知覚されるオブジェクトを示すために用いられる。結果として、予め定められた最大値がここで考慮される。

目距離より大きい正の視差は、物理的に解釈可能でない発散性の目線に対応する。結果として、目距離より大きい正の視差は、観察不快感を引き起こす可能性がある。これを回避するために、最大視差を平均の目距離に、又は平均の距離未満の値に設定することが可能である。好ましくは、全ての観察者に対して快適性を維持するように安全マージンが考慮されるように、最大視差が選択される。あるいは、最大視差は、オプションとして平均目距離によって上限を定められた、ユーザ定義の値であることができる。後者は、例えば大人と子供との間の目距離の違いの補償を可能にするので、特に有利である。

オーバレイ情報は、光学ディスク上に符号化されるような及び/又はデジタル・トランスポート・ストリームにおいて利用可能な字幕からクローズド・キャプション情報まで及ぶ。オーバレイ情報は、さらに、入力された三次元ビデオ信号上に重畳されるグラフィカル・ユーザインタフェース・データ（GUI）に関することができる。あるいは、オーバレイは、ピクチャ・イン・ピクチャ・システム（PiP）か、又は、GUI中のアニメーションのサムネイル若しくはアニメーションのTV局ロゴのようなアニメーションのコンテンツを有する他の副画像であることができる。

実施の形態において、入力された三次元ビデオ信号を適応させることは、ビューの第１サイドで入力された三次元ビデオ信号の１つ以上のビューを切り取ることを含む。続いて、切り取られたビューは、ビューの第１サイドに対して反対のサイドでピクセルをパディング又は補間することによって、完全なサイズのビューを取得するように拡張されることができ、切り取られたビューのための変更された視差範囲を取得する。あるいは、残りを再び完全な幅にスケーリングするために、ズームが用いられることができる。このシナリオにおいて、ズーム係数は他のビューにも適用されなければならない。

ステレオ入力ビデオ信号の場合、本方法は１つの画像を切り取ることを含むことができるが、好ましくは、両方の画像が切り取られて、切り取られた画像を拡張する結果として生じる可能性があるアーチファクトを分散する。切り取られた画像を拡張することは、単純なピクセルの反復から、静止/動画像修復の分野において知られている更に複雑な修復スキームに及ぶ、様々なアルゴリズムを必要とする場合があることは、当業者にとって明らかである。

実施の形態において、本方法はさらに、シフトされた三次元ビデオ信号中にメタデータを埋め込むことを含み、このデータは、シフトされた三次元ビデオ信号の遠視差及び近視差を示す。あるいは、本方法がさらに、シフトされた三次元ビデオ信号を覆うことを含むとき、本方法は、オーバレイを有するシフトされた三次元ビデオ信号中にメタデータを埋め込むことを含み、このデータは、オーバレイを有するシフトされた三次元ビデオ信号の遠視差及び近視差を示す。結果として、メタデータは、さらに下流の処理ステップのために用いられることができる。

本発明はさらに、本発明の方法を実行するためのプログラム命令を有するコンピュータプログラム製品に関する。

本発明はさらに、複数のビューを有する入力された三次元ビデオ信号を処理するシステムに関し、当該システムは、入力された三次元ビデオ信号の最大の視差値を示す遠視差推定値及び入力された三次元ビデオ信号中の空間領域の最小の視差値を示す近視差推定値を決定する視差決定装置、遠視差推定値に基づく視差シフトにより三次元ビデオ信号を後方にシフトすることによって三次元ビデオ信号を適応させるように配置される視差シフト装置、近視差推定値及び視差シフトに基づいて、シフトされた三次元ビデオ信号のオーバレイ安全領域の中でオーバレイを生成するように配置されるオーバレイ生成器を有する。

好ましくはさらに、シフトされた三次元ビデオ信号上をオーバレイで覆うためにビデオ・ミキサーが提供される。

本発明のこれらの及び他の態様、特徴及び利点は、以下に記載される実施の形態から明らかであり、それらを参照して説明される。

本発明の実施の形態は、単に一例として、図面を参照して説明される。同様の符号は同様の機能を備える要素を指す。

視差を定義するいくつかの一般的な概念及びパラメータを示す図。 三次元入力信号の視差ヒストグラムを示す図。 三次元入力信号及び三次元オーバレイの更なる視差ヒストグラムを示す図。 本発明によるステレオ入力対の右のビュー画像の適応を示す図。 本発明による方法を示す図。 本発明によるシステムを示す図。 本発明による更なるシステムを示す図。

図1は、視差を定義するいくつかの一般的な概念及びパラメータを示す。図1は、二重矢印Eの端に位置づけられ、目距離Eだけ離れて配置される２つの視点を示す。観察距離Zのところに、三次元情報を表示するために用いられる、点線よって表されるスクリーンSが位置づけられる。実際には、そのようなスクリーンは例えば、あるいは、適切なアイウェアを着用している観察者の目にそれぞれの視点のための適切な画像情報を提供する時間又はスペクトラム・シーケンシャル・ディスプレイであることができる。ここでスクリーンSは、ゼロ視差のところに配置され、Wはスクリーンの幅を示す。N（near）は、スクリーンSの前の最大の知覚される深さを表す。同様に、F（far）は、スクリーンSの後ろの最大の知覚される深さを表す。

ラインd_Nは、スクリーンSの前のNのところに位置づけられるオブジェクトの知覚される視差を表し、ここで視差値d_Nは負であり、交差視差とも呼ばれて、
d_N = N E/ (Z-N) [1]
して表されることができる。

ラインd_Fは、スクリーンSの後ろのFのところに位置づけられるオブジェクトの知覚される視差を表し、ここで視差値d_Fは正であり、非交差視差とも呼ばれて、
d_F = F E / (Z+F) [2]
として表されることができる。

実際には、最大視差は、快適な観察を可能にするために、目距離E未満であるべきである。実際には、最大視差は、人々の間の目距離の変動を許容するために、平均の目距離E未満の値に好ましくは設定される。

なお、最大の正の視差に対応するピクセルの数である最大の正のスクリーン視差は、スクリーン幅W及びスクリーンSの解像度によって決まる。

図2Aは、三次元入力信号の視差ヒストグラム205を示す。ヒストグラム205は、入力された三次元信号に基づいて（すなわち、三次元入力信号の空間領域全体に基づいて）決定される。あるいは、視差ヒストグラムは、三次元入力信号の空間領域全体のうちの代表サンプルに対して編集されることができる。

図2Aにおいて、d軸に沿った最も近い視差値はポイントCであり、負の視差を持つ。最も遠い視差値は、正の視差を持つd軸に沿ったポイントBである。ヒストグラム205に基づいて、本発明による方法に用いられる遠視差推定値は、ポイントBに対応する。

ヒストグラム205は、観察者から離れて三次元入力の視差範囲をシフトしてヒストグラムを右へ移動させるために視差範囲内で利用可能であるヘッドルーム215が存在することを示す。

オーバレイがそれぞれのビュー中の特定の空間領域内に配置されることを必要とする状況を考える。図2Aはさらに、重要な空間領域における入力された三次元信号の視差ヒストグラムを示す。この空間領域のための三次元入力信号のヒストグラムは、太い破線205'によって示される。ヒストグラム205'に基づいて、この空間領域の最も小さい視差値を示す近視差推定値は、ポイントAに対応する。なお、この特定の空間領域がより小さい（すなわち、より負の）視差値を含まないので、この空間領域中にオーバレイの配置のための相当なヘッドルーム210がすでに存在する。

なお、オーバレイの配置のための空間領域は、一般的に、輪郭によって定義されるブロック又はセグメントであり、このように、上述のように全体としてビューの視差推定値を決定するために用いられるサンプル・ポイントと明確に異なる。

オーバレイの配置のために空間領域にはすでに相当なヘッドルームが存在するが、視差シフトDS(DS < E-B)によって観察者から離れるように入力された三次元ビデオ信号の視差範囲をシフトすることにより、さらに多くのヘッドルームを生成することが可能である。厳密に必要ではないが、さまざまなユーザ間の異なる目距離に適応するために、マージン215によって図2Bに示されるようにマージン(E-B)-DSを維持することが望ましい。結果として、本発明は、オーバレイの配置のための視差範囲における追加的な利得を提供する。

ヒストグラム220は、オーバレイの視差ヒストグラムを示し、オーバレイが完全にこの空間領域中に配置されるので、このヒストグラムは、画像全体にわたるオーバレイのヒストグラムでもある。視差シフトの結果として、ゼロ視差面のところに又はその近くにオーバレイ情報（例えば字幕）を配置することが可能であり、オーバレイ観察の快適性を改善する。

上で示されるように、遠視差推定値及び近視差推定値は、入力された三次元ビデオ信号によって提供される視差ヒストグラム情報に基づいて決定されることができる。あるいは、遠視差推定値及び近視差推定値は、当業者に知られているアルゴリズムを用いて、入力された三次元ビデオ信号から導き出されることができる。そのようなアルゴリズムの例は、"Dense disparity estimation from feature correspondences" by Konrad, et al, IS&T/SPIE Symposium on Electronic Imaging Stereoscopic Displays and Virtual Reality Syst., Jan. 23-28, 2000, San Jose, CA, USAに示される。

図3は、本発明によって提案されるように視差をシフトする処理を示す。ステレオ入力ビデオ信号からの画像ペアLV1及びRV1が左側に示される。画像は、画像LV1及びRV1それぞれにおいて、ゼロ視差のところに配置されるグレーのブロック310及び310'並びに負の視差のところでブロックの前に配置される白いディスク305及び305'を示す。

グレーのブロック310及び310'の端の細かい垂直の破線から分かるように、長方形は、左及び右の画像において同じ位置に配置されるので、ゼロ視差を持つ。

ディスク305及び305'は負のスクリーン視差を持ち、すなわち、右の画像RV1において、ディスク305'は、左画像LV1中のディスク305の位置の左にある。結果として、それはディスプレイの前に視覚化される。

シーンを後方にシフトするために、RV1を右にシフトしてRV1'を得る。RV1'をLV1と比較すると、ディスク305'はゼロ視差を持ち、長方形は正の視差を持つことが分かる。

シフトされた画像をステレオ・ディスプレイに適合させるために、シフトされた画像RV1'は、右側で切り取られ、左側で等しい量によって拡張されて、RV1'に達する。次に、LV1及びRV1''は一緒に、元のLV1-RV1ペアと比べてシーンが後方にシフトされた新たなステレオ・ペアとして視覚化されることができる。結果として、ペアLV1-RV1''は、ペアLV1-RV1よりオーバレイの配置のための多くのヘッドルームを持つ。

上記の例ではビューのうちの一方のみがシフトされたが、左画像LV1及び右画像RV1の両方を、合計量がRV1'のシフトに対応する反対方向の等しい量によってシフトすることも可能であることが留意されるべきである。結果として、両方のシフトされた画像が拡張されなければならないが、拡張領域は、図3において切り取られて拡張されたサイズの半分のサイズである。結果として、拡張から生じるアーチファクトは、より均等に分散されることができる。

マルチ・ビュー・コンテンツ（例えば３つのビュー）をシフトする場合には、中央画像を維持して、左及び右の画像をそれぞれシフトして拡張することが可能である。視差範囲をシフトする上記の仕方はその後、更なるマルチ・ビュー画像及びそれらの間のシフトの同じ相対的な量をもたらす画像の任意の適切な量のシフトに拡張されることができることが、当業者にとって明らかである。

入力された三次元ビデオ信号を適応させるときに、いくつかのオプションが利用可能であり、例えば、第１オプションは、切り取りだけを用いることである。ステレオ・ビデオ信号を考慮すると、この場合、ビデオ中の左及び右画像の両方を等しい量によって切り取ることが可能である。画像アスペクト比が問題でない場合には、切り取られたビューは拡張を必要とせず、そのまま用いられることができる。そのようにする利点は、拡張が必要とされないので、拡張アーチファクトが導入されないことである。第２オプションは、上に記載されているように、切り取り及び拡張を用いることである。ステレオ・ビデオ信号を考慮すると、この場合、図3に示されているように、ビデオ信号中の左及び右画像の両方を等しい量によって切り取り、続いてそれぞれのビューを拡張することが可能である。拡張を利用する利点は、入力された三次元ビデオ信号のアスペクト比が維持されることができることである。なお、オプションの上記リストは網羅的でない。

図4は、複数のビューを含む入力された三次元ビデオ信号を処理するための本発明による方法400のフローチャートを示す。この方法は、入力された三次元ビデオ信号の最大の視差値を示す遠視差推定値及び入力された三次元ビデオ信号中の空間領域の最小の視差値を示す近視差推定値を決定するステップ405を有する。上で示されるように、それぞれの視差推定値は、メタデータに基づくことができ、あるいは、入力された三次元ビデオ信号の画像コンテンツに基づいて決定されることができる。

本方法はさらに、遠視差推定値に基づく視差シフトにより、入力された三次元ビデオ信号を後方にシフトすることによって三次元ビデオ信号を適応させて(410)、近視差推定値及び視差シフトに基づいて、シフトされた三次元ビデオ信号の空間領域中にオーバレイを生成する(415)ステップを含む。

好ましくは、本方法はさらに、シフトされた三次元ビデオ信号上をオーバレイで覆うステップ420を含む。

上に示されるように、入力された三次元ビデオ信号を適応させるステップは、変更された視差範囲を得るために、それぞれのビューを切り取って（425）、ピクセルをパディングすることによって拡張する（430）ステップを有する。

ステレオ信号の場合、一方又は好ましくは両方のビューが切り取られ、続いて拡張される。Nビュー・マルチビュー画像では（Nは偶数）、N-1又は好ましくはNビューが上に記載されているように切り取られて拡張される。

図5Aは、複数のビューを含む入力された三次元ビデオ信号を処理するための本発明によるシステム500を示す。システム500は、入力された三次元ビデオ信号の最大の視差値を示す遠視差推定値及び入力された三次元ビデオ信号中の空間領域の最小の視差値を示す近視差推定値を決定する視差決定器505を有する。上に示されるように、視差決定器505は、視差推定器として実施されることができる。このシステムはさらに、遠視差推定値に基づく視差シフトにより三次元ビデオ信号を後方にシフトすることによって三次元ビデオ信号を適応させるように配置された視差シフト装置510を有する。本システム500はさらに、近視差推定値及び視差シフトに基づいて、シフトされた三次元ビデオ信号のオーバレイ安全領域の中でオーバレイを生成するように配置されるオーバレイ生成器515を有する。

好ましくは、システム500はさらに、シフトされた三次元ビデオ信号上をオーバレイで覆うために配置されるビデオ・ミキサー520を有する。図5Aに示されるシステム500は、コンテンツのオフライン処理のためにパーソナル・コンピュータ又は他の計算プラットフォーム上で実施されることができる。あるいはそれは、ブルーレイ・ディスク再生可能装置、セットトップボックス又は3D TVにおいて実施されることができる。

図5Bは、本発明による更なるシステム500であり、このシステムは分析装置502及び合成装置503に分割され、組み合わせられた両方の装置は、図5Aに示されるシステム500に見いだされる機能を実施する。

いうまでもなく、明確性のための前記説明は、異なる機能ユニット及びプロセッサを参照して本発明の実施の形態を記載した。しかしながら、異なる機能ユニット又はプロセッサ間での機能の任意の適切な分配が、本発明を損なわずに用いられることができることは明らかである。例えば、別々のユニット、プロセッサ又はコントローラによって実行されるように示される機能は、同じプロセッサ又はコントローラによって実行されることができる。したがって、特定の機能ユニットの参照は、厳密な論理的又は物理的構造若しくは機構を示すのではなく、記載された機能を提供するための適切な手段を参照するものとして考えられるべきである。

本発明は、ハードウェア、ソフトウェア、ファームウェア又はこれらの任意の組み合わせを含む任意の適切な形式で実施されることができる。本発明はオプションとして、少なくとも部分的に、１つ以上のデータプロセッサ及び/又はデジタルシグナルプロセッサ上で動作しているコンピュータ・ソフトウェアとして実施されることができる。本発明の実施の形態の素子及びコンポーネントは、物理的、機能的及び論理的に任意の適切な態様で実施されることができる。実際、機能は、１つのユニット、複数のユニット又は他の機能ユニットの一部として実施されることができる。このように、本発明は、１つのユニットにおいて実施されることができ、又は、異なるユニット及びプロセッサ間で物理的及び機能的に分散されることができる。

本発明がいくつかの実施の形態に関連して説明されたが、それは本明細書において述べられる特定の形式に制限されることを意図しない。むしろ、本発明の範囲は、添付の請求の範囲によってのみ制限される。加えて、ある特徴が特定の実施の形態に関連して説明されると思われるかもしれないが、当業者は、説明された実施の形態のさまざまな特徴が本発明に従って組み合わせられることができることを認識する。請求の範囲において、「有する」「含む」などの用語は、他の要素又はステップの存在を除外しない。

さらに、個別に記載されるが、複数の手段、要素又は方法ステップは、例えば単一のユニット又はプロセッサによって実施されることができる。加えて、個々の特徴が異なる請求項中に含まれる場合があるが、これらは有利に組み合わせられることができ、異なる請求項中に含まれることは、特徴の組み合わせが可能ではない及び/又は有利ではないことを意味しない。さらに、ある特徴が請求項の１つのカテゴリ中に含まれることは、このカテゴリへの制限を意味せず、この特徴が適切に他の請求項のカテゴリに等しく適用可能であることを意味する。さらに、請求項中の特徴の順序は、その特徴が動作する必要がある特定の順序を意味せず、特に、方法の請求項中の個々のステップの順序は、ステップがこの順序で実行されなければならないことを意味しない。むしろ、これらのステップは、任意の適切な順序で実行されることができる。加えて、単数形の参照は複数を除外しない。"a"、"an"との冠詞、「第１」「第２」などは複数を除外しない。請求の範囲中の参照符号は、単に明確のための例であって、いかなる態様においても、請求の範囲を制限するものとして解釈されてはならない。

Claims (16)

1. 複数のビューを含む入力された三次元ビデオ信号を処理する方法であって、当該方法は、
   前記入力された三次元ビデオ信号の空間領域全体に基づいて決定される前記入力された三次元ビデオ信号の最大の視差値を示す遠視差推定値、及び前記入力された三次元ビデオ信号中のオーバレイが配置されるべきオーバレイ空間領域の最小の視差値を示す近視差推定値を決定し、
   前記遠視差推定値に基づく視差シフトにより前記入力された三次元ビデオ信号を後方にシフトさせることによって、前記入力された三次元ビデオ信号を適応させ、
   前記近視差推定値及び前記視差シフトに基づいて、シフトされた前記三次元ビデオ信号の前記オーバレイ空間領域中にオーバレイを生成する、方法。
2. シフトされた前記三次元ビデオ信号上を前記オーバレイで覆う、請求項１に記載の方法。
3. 前記遠視差推定値及び前記近視差推定値は共に、ショット毎及びショットのグループ毎の一方に基づいて決定される、請求項１に記載の方法。
4. 前記視差シフトが、前記複数のビューのうちの隣接するビュー間の予め定められた視差値の上限に基づく、請求項１に記載の方法。
5. 前記予め定められた視差値の上限が、
   選択された目距離値及び安全マージン、並びに
   ユーザが定義した最大の視差値、
   のうちの一方に基づく、請求項４に記載の方法。
6. 前記オーバレイが、
   字幕、
   クローズド・キャプション情報、
   ユーザ・インタフェース情報、及び
   更なる入力された三次元入力信号、
   のうちの少なくとも１つを含む、請求項１から請求項５のいずれか一項に記載の方法。
7. 前記入力された三次元ビデオ信号を適応させることが、
   少なくとも１つのビューを片側で切り取り、切り取られた前記ビューが前記ビューのうちの他の１つのビューと組み合わされたときに変更された視差範囲を得ること、
   少なくとも１つのビューを片側で切り取り、前記片側と反対側で前記少なくとも１つの切り取られたビューを拡張して、前記切り取られて拡張されたビューが前記ビューのうちの他の１つのビューと組み合わされたときに変更された視差範囲を得ること、及び
   少なくとも１つのビューを切り取り、それをスケーリングして完全な幅へと戻し、前記切り取られてスケーリングされて拡張されたビューが他の１つの切り取られてスケーリングされたビューと組み合わされたときに変更された視差範囲を得ること、
   のうちの１つを含む、請求項１から請求項５のいずれか一項に記載の方法。
8. シフトされた前記三次元ビデオ信号に、シフトされた当該三次元ビデオ信号の遠視差及び近視差を示すメタデータを埋め込む、請求項１に記載の方法。
9. 前記オーバレイを含むシフトされた前記三次元ビデオ信号に、前記オーバレイを含むシフトされた前記三次元ビデオ信号の遠視差及び近視差を示すメタデータを埋め込む、請求項２に記載の方法。
10. 請求項１，２，３，４，５，８及び９のいずれか一項に記載の方法を実行するためのコンピュータプログラム命令を含むコンピュータプログラム。
11. 複数のビューを含む入力された三次元ビデオ信号を処理するためのシステムであって、
    前記入力された三次元ビデオ信号の空間領域全体に基づいて決定される前記入力された三次元ビデオ信号の最大の視差値を示す遠視差推定値、及び前記入力された三次元ビデオ信号中のオーバレイが配置されるべきオーバレイ空間領域の最小の視差値を示す近視差推定値を決定するための視差決定装置、
    前記遠視差推定値に基づく視差シフトにより前記入力された三次元ビデオ信号を後方にシフトさせることによって、前記入力された三次元ビデオ信号を適応させる視差シフト装置、
    前記近視差推定値及び前記視差シフトに基づいて、シフトされた前記三次元ビデオ信号の前記オーバレイ空間領域中にオーバレイを生成するオーバレイ生成装置、
    を有するシステム。
12. シフトされた前記三次元ビデオ信号上を前記オーバレイで覆うビデオ・ミキサーをさらに有する、請求項１１に記載のシステム。
13. 視差推定装置が、ショット毎及びショットのグループ毎の一方に基づいて、遠視差推定値及び近視差推定値を決定する、請求項１１又は請求項１２に記載のシステム。
14. 前記視差シフトが、前記複数のビューのうちの隣接するビュー間の予め定められた視差値の上限に基づく、請求項１１又は請求項１２に記載のシステム。
15. 前記遠視差推定値は、前記入力された三次元ビデオ信号の前記空間領域全体の代表サンプルに基づいて決定される、請求項１に記載の方法。
16. 前記視差決定装置が、前記入力された三次元ビデオ信号の前記空間領域全体の代表サンプルに基づいて前記遠視差推定値を決定する、請求項１１に記載のシステム。

Images