JP3392627B2 - ２次元映像を３次元映像に変換する方法 - Google Patents

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】この発明は、ＶＴＲ、ビデオカメ
ラ等から出力されたり、ＣＡＴＶ放送、ＴＶ放送等によ
って伝送されてきたりする２次元映像を３次元映像に変
換する方法に関する。

【０００２】

【従来の技術】最近話題になっている３次元映像表示シ
ステムに使用される３次元映像ソフトは、その大半が３
次元映像表示システム用に特別に作成されたものであ
る。このような３次元映像ソフトは、一般には２台のカ
メラを用いて左目用映像と右目用映像とを撮像して記録
されたものである。３次元映像ソフトに記録された左右
の映像は、ほぼ同時に表示装置に重ね合わされて表示さ
れる。そして、重ね合わされて表示される左目用映像と
右目用映像とを、観察者の左右の目にそれぞれ別々に入
射させることによって、観察者に３次元映像が認識され
る。

【０００３】ところで、現在、２次元映像ソフトが多数
存在している。したがって、これらの２次元映像ソフト
から３次元映像を生成することができれば、既存の２次
元映像ソフトと同じ内容の３次元映像ソフトを最初から
作り直すといった手間が省ける。

【０００４】このようなことから、２次元映像を３次元
映像に変換する方法が既に提案されている。２次元映像
を３次元映像に変換する従来方法として、次のようなも
のが挙げられる。すなわち、左から右方向に移動する物
体が映っている２次元映像の場合、この元の２次元映像
を左目用映像とし、この左目用映像に対して数フレーム
前の映像を右目用映像とする方法である。このようにす
ると、左目用映像と右目用映像との間に視差が生じるの
で、この両映像をほぼ同時に画面上に表示することによ
り、移動する物体が背景に対して前方に浮き出される。

【０００５】なお、左目用映像に対して数フレーム前の
映像は、元の２次元映像をフイールドメモリに記憶さ
せ、所定フィールド数分、遅延して読み出すことにより
得られる。以上のような、従来方法をフィールド遅延方
式ということにする。

【０００６】

【発明が解決しようとする課題】上記従来方法において
は、左目用映像および右目用映像の一方に対する他方の
遅延量を一定にした場合には、移動物体の水平方向の動
きが速くなるほど視差が大きくなるため、立体感が変化
し３次元映像がみにくくなる。

【０００７】そこで、本出願人は、安定した立体感を得
るために、移動物体の水平方向の動きが速くなるほど、
左目用映像および右目用映像の一方に対する他方の遅延
量を小さくすることを考案した。このようにすると、水
平方向の動きの速い映像に対しては比較的新しいフィー
ルドが遅延画像として提示され、水平方向の動きの遅い
映像に対しては比較的古いフィールドが遅延画像として
提示される。

【０００８】上記のような遅延量の決定方法では、映像
の水平方向の動きの速度のみに基づいて遅延量が決定さ
れる。したがって、垂直方向に動きの大きい物体が存在
している場合であっても、映像の水平方向の動きが小さ
い場合には、遅延量は大きくなる。このような場合に
は、左目用映像と右目用映像との間において、垂直方向
に動きが大きい物体の垂直方向の距離が大きくなり、垂
直方向に動きが大きい物体の左目用映像と右目用映像と
が融合しなくなる。

【０００９】この発明は、垂直方向に移動する物体の左
目用映像と右目用映像とが融合しなくなるといったこと
を回避できる２次元映像を３次元映像に変換する方法を
提供することを目的とする。

【００１０】

【課題を解決するための手段】この発明による２次元映
像を３次元映像に変換する方法では、２次元映像信号か
ら、主映像信号と、主映像信号に対して遅延された副映
像信号とを生成することにより、２次元映像が３次元映
像に変換される。主映像信号に対する副映像信号の遅延
量は、主映像の水平方向の動きの速度に応じて変化せし
められる。主映像から検出された動きベクトルの垂直成
分に基づいて、遅延量の上限値が決定される。そして、
決定された上限値以下となるように、遅延量が決定され
る。

【００１１】遅延量の上限値は、たとえば次のようにし
て決定される。つまり、主映像の映像エリア内に設定さ
れた複数の動きベクトル検出領域それぞれから検出され
る動きベクトルの全てまたは一部の垂直成分の絶対値の
平均値を各フィールドごとに算出して記憶する。そし
て、各フィールドにおいて、現フィールドから過去へ向
かっての、上記平均値の累積値が、所定値未満となる範
囲内で、遅延量の上限値を決定する。

【００１２】遅延量の上限値を算出するためのより具体
的な方法には、たとえば、次のような方法がある。

【００１３】（１）第１方法 主映像の映像エリア内に設定された複数の動きベクトル
検出領域それぞれから検出される動きベクトルの全てま
たは一部の垂直成分の絶対値の平均値を各フィールドご
とに算出しかつ記憶手段に記憶する（第１ステップ）。

【００１４】記憶手段に記憶されている過去所定フィー
ルド数分の平均値のうち、最新のものから何フィールド
前までのものを累積するかを示す累積フィールド数を、
予め定められた遅延量最大値に設定する（第２ステッ
プ）。

【００１５】記憶手段に記憶されている過去所定フィー
ルド数分の平均値の中から、設定された累積フィールド
数分の平均値を、新しいものから順に読み出して、それ
らの累積値を算出する（第３ステップ）。

【００１６】算出された累積値が予め定められた基準値
未満である場合には、現在設定されている累積フィール
ド数を遅延量上限値と決定し、算出された累積値が予め
定められた基準値以上である場合には、現在設定されて
いる累積フィールド数を１だけデクリメントする（４ス
テップ）。

【００１７】第４ステップで、累積フィールド数が更新
されたときには、更新された累積フィールド数を用い
て、上記ステップ３および４の処理を繰り返し実行する
（第５ステップ）。

【００１８】（２）第２方法 主映像の映像エリア内に設定された複数の動きベクトル
検出領域のうち、被写体が存在すると判定された領域か
らそれぞれ検出される動きベクトルの全てまたは一部の
垂直成分の絶対値の平均値を各フィールドごとに算出し
かつ算出された平均値を第１平均値として記憶手段に記
憶する（第１ステップ）。

【００１９】複数の動きベクトル検出領域のうち、背景
が存在すると判定された領域からそれぞれ検出される動
きベクトルの全てまたは一部の垂直成分の絶対値の平均
値を各フィールドごとに算出しかつ算出された平均値を
第２平均値として記憶手段に記憶する（第２ステッ
プ）。

【００２０】記憶手段に記憶されている過去所定フィー
ルド数分の第１平均値および第２平均値のうち、最新の
ものから何フィールド前までのものを累積するかを示す
累積フィールド数を、予め定められた遅延量最大値に設
定する（第３ステップ）。

【００２１】記憶手段に記憶されている過去所定フィー
ルド数分の第１平均値の中から、設定された累積フィー
ルド数分の第１平均値を、新しいものから順に読み出し
て、それらの累積値である第１累積値を算出する（第４
ステップ）。

【００２２】記憶手段に記憶されている過去所定フィー
ルド数分の第２平均値の中から、設定された累積フィー
ルド数分の第２平均値を、新しいものから順に読み出し
て、それらの累積値である第２累積値を算出する（第５
ステップ）。

【００２３】算出された第１累積値および第２累積値の
両方が予め定められた基準値未満である場合には、現在
設定されている累積フィールド数を遅延量上限値と決定
し、算出された第１累積値および第２累積値の少なくと
も一方が予め定められた基準値以上である場合には、現
在設定されている累積フィールド数を１だけデクリメン
トする（第６ステップ）。

【００２４】第６ステップで、累積フィールド数が更新
されたときには、更新された累積フィールド数を用い
て、上記ステップ４、５および６の処理を繰り返し行う
（第７ステップ）。

【００２５】（３）第３方法 主映像の映像エリア内に設定された複数の動きベクトル
検出領域の全てまたは一部からそれぞれ検出される動き
ベクトルの垂直成分の絶対値を各フィールドごとに算出
し、算出された絶対値が所定値より大きいか否かを判定
する（第１ステップ）。

【００２６】算出された絶対値が所定値より大きい場合
には、主映像中に垂直方向に動きの大きい対象物が存在
しているか否かを判定するための条件を満たしていると
判定して、その判定結果を上記絶対値の算出源である動
きベクトルが検出された動きベクトル検出領域に関連し
て記憶手段に記憶する（第２ステップ）。

【００２７】記憶手段に記憶されている過去所定フィー
ルド数分の判定結果に基づいて、各動きベクトル検出領
域のうち、過去所定数のフィールド中、所定の規定フィ
ールド数以上、上記条件を満たしている動きベクトル検
出領域が存在するか否かを判定する（第３ステップ）。

【００２８】各動きベクトル検出領域のうち、過去所定
数のフィールド中、所定の規定フィールド数以上、上記
条件を満たしている動きベクトル検出領域が存在する場
合には、遅延量上限値を０と決定する（第４ステッ
プ）。

【００２９】

【実施例】以下、図面を参照して、この発明の実施例に
ついて説明する。

【００３０】図１は、２次元映像を３次元映像に変換す
るための２Ｄ／３Ｄ変換装置の構成を示している。

【００３１】この２Ｄ／３Ｄ変換装置は、フィールド遅
延方式によって左目用映像と右目用映像とを生成するこ
とにより視差を発生させ、生成された左目用映像と右目
用映像の両方または一方に位相ずらしを施すことによ
り、被写体と基準スクリーン面との位置関係を変化させ
る。

【００３２】入力端子１には、２次元映像信号ａが入力
される。この２次元映像信号ａは、動きベクトル検出回
路１６、複数のフィールドメモリ１１および映像切換回
路１３にそれぞれ送られる。

【００３３】動きベクトル検出回路１６は、よく知られ
ているように、代表点マッチング法に基づいて、動きベ
クトルを検出するためのデータを生成するものである。
動きベクトル検出回路１６によって生成されたデータ
は、ＣＰＵ２０に送られる。

【００３４】代表点マッチング法について、簡単に説明
する。図８に示すように、各フィールドの映像エリア１
００内に、複数の動きベクトル検出領域Ｅ₁ 〜Ｅ₁₂が設
定されている。各動きベクトル検出領域Ｅ₁ 〜Ｅ₁₂の大
きさは同じである。また、各動きベクトル検出領域Ｅ₁
〜Ｅ₁₂は、図９に示すように、さらに複数の小領域ｅ
（ｅ₀ 〜ｅ_m ）に分割されている。そして、図１０に示
すように、各小領域ｅそれぞれに、複数のサンプリング
点Ｓと１つの代表点Ｒとが設定されている。

【００３５】現フィールドにおける小領域ｅ内の各サン
プリング点Ｓの映像信号レベルと、前フィールドにおけ
る対応する小領域ｅの代表点Ｒの映像信号レベルとの差
（各サンプリング点における相関値）が、各動きベクト
ル検出領域Ｅ₁ 〜Ｅ₁₂ごとに求められる。そして、各動
きベクトル検出領域Ｅ₁ 〜Ｅ₁₂ごとに、動きベクトル検
出領域内の全ての小領域間において、代表点Ｒに対する
偏位が同じサンプリング点どうしの相関値が累積加算さ
れる。したがって、各動きベクトル検出領域Ｅ ₁ 〜Ｅ₁₂
ごとに、１つの小領域ｅ内のサンプリング点の数に応じ
た数の相関累積値が求められる。

【００３６】各動きベクトル検出領域Ｅ₁ 〜Ｅ₁₂内にお
いて、相関累積値が最小となる点の偏位、すなわち相関
性が最も高い点の偏位が、当該動きベクトル検出領域Ｅ
₁ 〜Ｅ₁₂の動きベクトル（被写体の動き）として抽出さ
れる。

【００３７】フィールドメモリ１１は、２次元映像信号
ａをフイールド単位で遅延させて出力させるために設け
られており、複数個設けられている。各フィールドメモ
リ１１の書込みおよび読出しは、メモリ制御回路２４に
よって制御される。

【００３８】フィールドメモリ１１の出力ｂ（遅延され
た２次元映像信号）は、映像切換回路１３および補間回
路１２にそれぞれ送られる。補間回路１２は、入力信号
ｂに対して、垂直方向の補間信号を生成するものであ
る。補間回路１２の出力ｃ（遅延された２次元映像信号
の垂直方向補間信号）は、映像切換回路１３に送られ
る。

【００３９】したがって、映像切換回路１３には、入力
された２次元映像信号ａ、遅延された２次元映像信号ｂ
および遅延された２次元映像信号ｂの垂直方向補間信号
ｃが入力される。映像切換回路１３は、左画像用位相制
御回路１４と右画像用位相制御回路１５とに対し、信号
ｂおよび信号ｃのうちの一方の信号（副映像信号）と、
信号ａ（主映像信号）とを、被写体の動き方向に応じて
切り換えて出力する。ただし、遅延量が０の場合には、
左画像用位相制御回路１４と右画像用位相制御回路１５
との両方に、信号ａが送られる。

【００４０】信号ｂおよび信号ｃのうちから１方の選択
は、２次元映像信号ａが奇数フィールドか偶数フィール
ドかに基づいて行なわれる。すなわち、信号ｂおよび信
号ｃのうち、２次元映像信号ａのフィールド種類（奇数
フィールドか偶数フィールド）に対応するものが選択さ
れる。映像切換回路１３による映像の切り換えは、ＣＰ
Ｕ２０によって制御される。

【００４１】各位相制御回路１４、１５は、入力される
映像信号の位相をずらすことにより、入力される映像の
表示位置を水平方向に移動させるために設けられてい
る。位相のずらし量およびずらし方向は、メモリ制御回
路２４によって制御される。左画像用位相制御回路１４
の出力は、左画像出力端子２に送られる。また、右画像
用位相制御回路１５の出力は、右画像出力端子３に送ら
れる。

【００４２】ＣＰＵ２０は、メモリ制御回路２４および
映像切換回路１３を制御する。ＣＰＵ２０は、そのプロ
グラム等を記憶するＲＯＭ２１および必要なデータを記
憶するＲＡＭ２２を備えている。ＣＰＵ２０には、動き
ベクトル検出回路１６から動きベクトル検出に必要なデ
ータが送られてくる。また、ＣＰＵ２０には、各種入力
手段および表示器を備えた操作・表示部２３が接続され
ている。

【００４３】ＣＰＵ２０は、動きベクトルに基づいて、
フィールドメモリ１１による遅延フィールド数（遅延
量）を算出する。つまり、原則的には、動きベクトルが
大きい場合には、遅延量が小さくなるように、動きベク
トルが小さい場合には、遅延量が大きくなるように、遅
延量を決定する。

【００４４】また、ＣＰＵ２０は、動きベクトルの方向
に基づいて、映像切換回路１３を制御する。つまり、動
きベクトルの方向が左から右の場合には、入力された２
次元映像信号ａを左目用位相制御回路１４に、遅延され
た２次元映像信号ｂまたはｃを右目用位相制御回路１５
に送る。動きベクトルの方向が右から左の場合には、入
力された２次元映像信号ａを右目用位相制御回路１４
に、遅延された２次元映像信号ｂまたはｃを左目用位相
制御回路１５に送る。

【００４５】この２Ｄ／３Ｄ変換装置では、フィールド
遅延方式によって左目用画像と右目用画像とを生成する
ことにより視差を発生させ、生成された左目用画像と右
目用画像の両方または一方に位相ずらしを施すことによ
り、被写体と基準スクリーン面との位置関係を変化させ
ている。

【００４６】図２は、ＣＰＵによる２Ｄ／３Ｄ変換処理
手順を示している。

【００４７】ＣＰＵによる２Ｄ／３Ｄ変換処理は、入力
映像信号ａのフィールドの切り換えタイミングがくるご
とに行なわれる。

【００４８】（１）ステップ１では、複数のフィールド
メモリ１１のうち、今回のフィールドに対する２次元映
像信号を書き込むべきメモリ（書込みメモリ）および既
に記憶されている２次元映像信号を読み出すべきメモリ
（読み出しメモリ）をそれぞれ示すデータがメモリ制御
回路２４に出力される。また、各位相制御回路１４、１
５による位相ずれ量および向きを示すデータがメモリ制
御回路２４に出力される。さらに、映像切換回路１３に
映像切り換え制御信号が出力される。

【００４９】読み出しメモリは、前回の２Ｄ／３Ｄ変換
処理において決定された遅延量に基づいて決定される。
また、各位相制御回路１４、１５による位相ずれ量およ
び向きは、２Ｄ／３Ｄ変換処理のステップ２で既に取り
込まれて記憶されているデータに基づいて決定される。

【００５０】また、遅延された２次元映像信号ｂおよび
ｃのうちの一方の選択は、フィールドメモリ１１から読
み出されるべき２次元映像信号ｂのフィールド種類と、
２次元映像信号ａのフィールド種類とに基づいて決定さ
れる。さらに、選択された信号ｂまたはｃと、信号ａと
の切り換えは、前回の２Ｄ／３Ｄ変換処理で求められた
水平方向の動きベクトルの方向に基づいて決定される。
選択された信号ｂまたはｃと、信号ａとの切り換え方向
は、遅延量の極性によって表される。

【００５１】（２）ステップ２では、操作・表示部２３
からの各種入力信号が取り込まれて記憶される。各種入
力信号には、位相ずれ量および向きを設定する信号、遅
延量を自動で算出するか（自動モード）、手動で設定す
るか（手動モード）を示す自動・手動モード設定信号、
自動モードが設定されるときに行なわれる遅延量倍率設
定信号、手動モードが設定されるときに行なわれる遅延
量設定信号等がある。

【００５２】（３）ステップ３では、前回の２Ｄ／３Ｄ
変換処理のステップ１０で求められた各動きベクトル検
出領域ごとの動きベクトルに対する信頼性結果に基づい
て、信頼性のある動きベクトルのみが抽出される。

【００５３】（４）ステップ４では、ステップ３で抽出
された信頼性のある動きベクトルの垂直方向成分に基づ
いて、遅延量上限値算出処理が行われる。遅延量上限値
算出処理は、左目用映像と右目用映像との間において、
垂直方向に移動する物体の垂直方向の距離が大きくなり
すぎるのを回避するために、遅延量の上限値を算出する
処理である。遅延量上限値算出処理の詳細については、
後述する。

【００５４】（５）ステップ５では、ステップ３で抽出
された信頼性のある動きベクトルのうち、垂直方向成分
が所定値より小さいもののみが抽出される。

【００５５】（６）ステップ６では、ステップ５で抽出
された信頼性のある動きベクトルの水平方向成分（有効
水平方向動きベクトル）の平均値が算出される。

【００５６】（７）ステップ７では、ステップ６で算出
された有効水平方向動きベクトルの平均値に基づく、遅
延量算出処理が行なわれる。この遅延量算出処理の詳細
については、後述する。

【００５７】（８）ステップ８では、ステップ２で取り
込まれて記憶されているデータに基づいて、自動モード
か手動モードかが判別される。

【００５８】（９）ステップ８で手動モードが設定され
ていると判別された場合には、遅延量が、ステップ２で
取り込まれた設定値に固定される（ステップ９）。

【００５９】（１０）ステップ８で自動モードが設定さ
れていると判別された場合には、ステップ７の遅延量算
出処理で用いられる履歴データが更新される（ステップ
１０）。

【００６０】（１１）ステップ１１では、動きベクトル
検出回路１６から動きベクトル検出に必要なデータが取
り込まれ、各動きベクトル検出領域に対する動きベクト
ルが算出される。また、各動きベクトル検出領域ごとの
相関累積値の平均値、最小値等に基づいて、各動きベク
トル検出領域ごとに動きベクトルの信頼性が判別され
る。そして、算出された動きベクトルおよび信頼性判別
結果がＲＡＭ２２に記憶される。

【００６１】図１１は、図２のステップ４の遅延量上限
値算出処理の詳細な手順を示している。ここでは、フィ
ールドメモリが６個設けられており、最大遅延フィール
ド数は６であるとする。

【００６２】まず、図２のステップ３で抽出された信頼
性のある動きベクトルの垂直方向成分（垂直方向ベクト
ル）の絶対値の平均値が算出されてＲＡＭ２２に記憶さ
れる（ステップ４１）。今回算出された垂直方向ベクト
ルの絶対値の平均値をｙ₀ とし、既にＲＡＭ２２に記憶
されている過去５回の垂直方向ベクトルの絶対値の平均
値をｙ₁ 、ｙ₂ 、ｙ₃ 、ｙ₄ 、ｙ₅ とする。

【００６３】以下、ＲＡＭ２２に記憶されている最新の
平均値ｙ₀ を含む過去６フィールド分の平均値をｙ
_n （ｎ＝０、１、２、３、４、５）で表す。また、過去
６フィールド分の平均値ｙ_n （ｎ＝０、１、２、３、
４、５）のうち、最新のものから何フィールド前のもの
までを累積するかを示す変数ｉを累積フィールド数ｉと
いうことにする。

【００６４】次に、累積フィールド数ｉが、最大遅延フ
ィールド数（遅延量最大値）である６に設定される（ス
テップ４２）。

【００６５】次に、過去６フィールド分の平均値ｙ
_n （ｎ＝０、１、２、３、４、５）のうち、最新のもの
からｉフィールド前のものまでが累積される（ステップ
４３）。つまり、ＲＡＭ２２に記憶されている過去６フ
ィールド分の平均値ｙ_n の中から、現在設定されている
累積フィールド数分の平均値が、新しいものから順に読
み出され、それらの累積値が算出される。すなわち、次
の数式１に基づいて、垂直方向ベクトルの絶対値の平均
値のｉフィールド前までの累積値Ｚが求められる。

【００６６】

【数１】

【００６７】ステップ４２からステップ４３に移行した
ときには、ｉ＝６なので、累積値Ｚは次式２のようにな
る。

【００６８】

【数２】

【００６９】次に、ステップ４３で算出された累積値Ｚ
が、予め定められた基準値Ｚｏより小さいか否かが判定
される（ステップ４４）。基準値Ｚｏとしては、たとえ
ば２が設定される。

【００７０】ステップ４３で算出された累積値Ｚが、予
め定められた基準値Ｚｏより小さいときには（ステップ
４４でＴＥＳ）、過去ｉフィールド分の期間において、
映像の垂直方向の動きが小さいと判断され、遅延量上限
値Ｄ_max が現在設定されている累積フィールド数ｉに設
定される（ステップ４７）。たとえば、ｉ＝６であれ
ば、遅延量上限値Ｄ_max は６に設定される。

【００７１】ステップ４３で算出された累積値Ｚが、予
め定められた基準値Ｚｏ以上のときには（ステップ４４
でＮＯ）、過去ｉフィールド分の期間において、映像の
垂直方向の動きが大きいと判断される。言い換えれば、
遅延フィールド数をｉとした場合には、左目用映像と右
目用映像との間において、垂直方向に移動する物体の垂
直方向の距離が大きくなり、垂直方向に移動する物体の
左目用映像と右目用映像とが融合しなくなると判断され
る。

【００７２】この場合には、ｉが１だけデクリメント
（ｉ←ｉ−１）される（ステップ４５）。そして、更新
されたｉの値が０でなければ（ステップ４６でＮＯ）、
ステップ４３に戻って、ステップ４３以降の処理が再度
実行される。

【００７３】たとえば、更新前のｉが６であり、更新後
のｉが５である場合には、垂直方向ベクトルの絶対値の
平均値の５フィールド前までの累積値Ｚ（＝ｙ₀ ＋ｙ₁
＋ｙ ₂ ＋ｙ₃ ＋ｙ₄ ）が算出される（ステップ４３）。
そして、算出された累積値Ｚが基準値Ｚｏより小さいと
きには（ステップ４４でＹＥＳ）、遅延量上限値Ｄ_{ma x}
が５に設定される（ステップ４７）。算出された累積値
Ｚが基準値Ｚｏ以上のときには、ｉが１だけデクリメン
ト（ｉ←ｉ−１）された後（ステップ４５）、ステップ
４３に戻って、ステップ４３以降の処理が再度実行され
る。

【００７４】このようにして、遅延量上限値Ｄ_max が決
定される。なお、ステップ４５において更新されたｉが
０であるときには（ステップ４６でＹＥＳ）、遅延量上
限値Ｄ_max は０に設定される。

【００７５】図１２は、遅延量上限値算出処理の他の例
を示している。ここでは、フィールドメモリが６個設け
られており、最大遅延フィールド数は６であるとする。
また、図２のステップ１１においては、各動きベクトル
検出領域のうち、被写体の領域と背景との領域とが判別
されているものとする。

【００７６】まず、図２のステップ３で抽出された信頼
性のある動きベクトルのうち、被写体の領域の動きベク
トルの垂直方向成分の絶対値の平均値（以下、第１平均
値という）が算出されてＲＡＭ２２に記憶される（ステ
ップ５１）。今回算出された第１平均値をｙａ₀ とし、
既にＲＡＭ２２に記憶されている過去５回の第１平均値
をｙａ₁ 、ｙａ₂ 、ｙａ₃ 、ｙａ₄ 、ｙａ₅ とする。

【００７７】以下、ＲＡＭ２２に記憶されている最新の
第１平均値ｙａ₀ を含む過去６フィールド分の第１平均
値をｙａ_n （ｎ＝０、１、２、３、４、５）で表す。ま
た、過去６フィールド分の第１平均値ｙａ_n （ｎ＝０、
１、２、３、４、５）のうち、最新のものから何フィー
ルド前のものまでを累積するかを示す変数ｉを累積フィ
ールド数ｉということにする。

【００７８】また、図２のステップ３で抽出された信頼
性のある動きベクトルのうち、背景の領域の動きベクト
ルの垂直方向成分の絶対値の平均値（以下、第２平均値
という）が算出されてＲＡＭ２２に記憶される（ステッ
プ５２）。今回算出された第２平均値をｙｂ₀ とし、既
にＲＡＭ２２に記憶されている過去５回の第２平均値を
ｙｂ₁ 、ｙｂ₂ 、ｙｂ₃ 、ｙｂ₄ 、ｙｂ₅ とする。

【００７９】以下、ＲＡＭ２２に記憶されている最新の
第２平均値ｙｂ₀ を含む過去６フィールド分の第２平均
値をｙｂ_n （ｎ＝０、１、２、３、４、５）で表す。ま
た、過去６フィールド分の第２平均値ｙｂ_n （ｎ＝０、
１、２、３、４、５）のうち、最新のものから何フィー
ルド前のものまでを累積するかを示す変数ｉを累積フィ
ールド数ｉということにする。

【００８０】次に、累積フィールド数ｉが、最大遅延フ
ィールド数である６に設定される（ステップ５３）。

【００８１】次に、過去６フィールド分の第１平均値ｙ
ａ_n （ｎ＝０、１、２、３、４、５）のうち、最新もの
からｉフィールド前までのものが累積される。（ステッ
プ５４）。つまり、次の数式３に基づいて、第１平均値
ｙａ_n のｉフィールド前までの累積値Ｚａ（以下、第１
累積値Ｚａという）が求められる。

【００８２】

【数３】

【００８３】ステップ５３からステップ５４に移行した
ときには、ｉ＝６なので、第１累積値Ｚａは次式４のよ
うになる。

【００８４】

【数４】

【００８５】また、過去６フィールド分の第２平均値ｙ
ｂ_n （ｎ＝０、１、２、３、４、５）のうち、最新もの
からｉフィールド前までのものが累積される。（ステッ
プ５５）。つまり、次の数式５に基づいて、第２平均値
ｙｂ_n のｉフィールド前までの累積値Ｚｂ（以下、第２
累積値Ｚｂという）が求められる。

【００８６】

【数５】

【００８７】ステップ５３からステップ５４、ステップ
５５に移行したときには、ｉ＝６なので、第２累積値Ｚ
ｂは次式６のようになる。

【００８８】

【数６】

【００８９】次に、ステップ５４で算出された第１累積
値Ｚａが、予め定められた基準値Ｚｏより小さいか否か
が判定される（ステップ５６）。基準値Ｚｏとしては、
たとえば２が設定される。

【００９０】ステップ５４で算出された第１累積値Ｚａ
が予め定められた基準値Ｚｏより小さいときには（ステ
ップ５６でＹＥＳ）、ステップ５５で算出された第２累
積値Ｚｂが、予め定められた基準値Ｚｏより小さいか否
かが判定される（ステップ５７）。基準値Ｚｏとして
は、たとえば２が設定されている。

【００９１】ステップ５５で算出された第２累積値Ｚｂ
が予め定められた基準値Ｚｏより小さいときには（ステ
ップ５７でＹＥＳ）、過去ｉフィールド分の期間におい
て、被写体および背景の両方の垂直方向の動きが小さい
と判断され、遅延量上限値Ｄ _max がｉに設定される（ス
テップ６０）。たとえば、ｉ＝６であれば、遅延量上限
値Ｄ_max は６に設定される。

【００９２】上記ステップ５６または５７のいずれか一
方でＮＯとなったときには、すなわち、第１累積値Ｚａ
が基準値Ｚｏ以上であるかまたは第２累積値Ｚｂが基準
値Ｚｏ以上である場合には、過去ｉフィールド分の期間
において、被写体および背景のうちの少なくとも一方の
垂直方向の動きが大きいと判断される。この場合には、
ｉが１だけデクリメント（ｉ←ｉ−１）される（ステッ
プ５８）。そして、更新されたｉの値が０でなければ
（ステップ５９でＮＯ）、ステップ５４に戻って、ステ
ップ５４以降の処理が再度実行される。

【００９３】たとえば、更新前のｉが６であり、更新後
のｉが５である場合には、第１平均値ｙａ_n の５フィー
ルド前までの第１累積値Ｚａ（＝ｙａ₀ ＋ｙａ₁ ＋ｙａ
₂ ＋ｙａ₃ ＋ｙａ₄ ）が算出される（ステップ５４）。
また、第２平均値ｙｂ_n の５フィールド前までの第２累
積値Ｚｂ（＝ｙｂ₀ ＋ｙｂ₁ ＋ｙｂ₂ ＋ｙｂ₃ ＋ｙ
ｂ ₄ ）が算出される（ステップ５５）。そして、算出さ
れた第１および第２累積値Ｚａ、Ｚｂが共に基準値Ｚｏ
より小さいときには（ステップ５６、５７でＹＥＳ）、
遅延量上限値Ｄ_max が５に設定される（ステップ６
０）。算出された第１および第２累積値Ｚａ、Ｚｂの少
なくとも一方が基準値Ｚｏ以上であれば、ｉが１だけデ
クリメント（ｉ←ｉ−１）された後、ステップ５４に戻
って、ステップ５４以降の処理が再度実行される。

【００９４】このようにして、遅延量上限値Ｄ_max が決
定される。なお、ステップ５８において更新されたｉが
０であるときには（ステップ５９でＹＥＳ）、遅延量上
限値Ｄ_max は０に設定される。

【００９５】図１３は、遅延量上限値算出処理の他の例
を示している。ここでは、フィールドメモリが６個設け
られており、最大遅延フィールド数は６であるとする。

【００９６】全動きベクトル検出領域ｅ₀ 〜ｅｍのう
ち、図２のステップ３で信頼性のある動きベクトルが抽
出された動きベクトル検出領域を信頼性のある動きベク
トル検出領域ということにする。信頼性のある動きベク
トル検出領域において抽出された動きベクトルの垂直方
向成分（以下、垂直ベクトルの絶対値という）の絶対値
｜ｙ_k ｜（ただし、ｋは０〜ｍの数字であり、動きベク
トル検出領域を示す）がそれぞれ算出されてＲＡＭ２２
に記憶される（ステップ６１）。ＲＡＭ２２には、少な
くとも現在から過去５フィールドにわたって算出された
垂直ベクトルの絶対値｜ｙ_k ｜が保持される。

【００９７】次に、信頼性のある動きベクトル検出領域
ごとに、垂直方向に高速に動く対象物が存在するか否か
を判定するための条件（以下、高速動き判定用条件とい
う）を満たすか否かが検査され、その検査結果がＲＡＭ
２２に記憶される（ステップ６２）。つまり、信頼性の
ある動きベクトル検出領域ごとに算出された垂直方向ベ
クトルの絶対値｜ｙ_k ｜が、所定値、たとえば”５”
（画素数）より大きいか否かがそれぞれ判定される。算
出された垂直方向ベクトルの絶対値｜ｙ_k ｜が、所定値
より大きい場合には、当該動きベクトル検出領域ｋは、
高速動き判定用条件を満たすと判定される。

【００９８】信頼性のある動きベクトル検出領域ｋごと
に得られた検査結果は、垂直方向に高速に動く対象物が
存在するか否かを判定するためのデータ（以下、判定用
データという）として、動きベクトル検出領域ｋに関連
してＲＡＭ２２に記憶される。

【００９９】今回算出された動きベクトル検出領域ｋご
との判定用データをＷ_k0（ただし、ｋは０〜ｍの数字で
あり、動きベクトル検出領域を示す）とし、既にＲＡＭ
２２に記憶されている過去４回の判定用データをＷ_k1、
Ｗ_k2、Ｗ_k3、Ｗ_k4とする。以下、ＲＡＭ２２に記憶され
ている最新の判定用データをＷ_k0を含む過去５フィール
ド分の判定用データをＷ_kn（ｎ＝０、１、２、３、４）
で表す。

【０１００】次に、過去５フィールド分の判定用データ
Ｗ_knに基づいて、過去５フィールド内の映像に、垂直方
向に高速に動く対象物が存在しているか否かが判定され
る。つまり、各動きベクトル検出領域ｋそれぞれについ
て、過去５フィールド中、所定フィールド数以上、高速
動き判定用条件を満たしているか否かが判定される（ス
テップ６３）。所定フィールド数としては、たとえば２
が設定される。

【０１０１】過去５フィールド中、所定フィールド数以
上、高速動き判定用条件を満たしている動きベクトル検
出領域ｋが存在していれば、その領域において垂直方向
に高速に動く対象物が存在している可能性が高いと判定
される。そこで、各動きベクトル検出領域ｋのうち、過
去５フィールド中の所定フィールド数以上、高速動き判
定用条件を満たす動きベクトル検出領域が、１つでも存
在している場合には（ステップ６４でＹＥＳ）、過去５
フィールド内の映像に、垂直方向に高速に動く対象物が
存在していると判定される。

【０１０２】過去５フィールド中、２フィールド以上、
高速動き判定用条件を満たす動きベクトル検出領域が、
全く存在していない場合には（ステップ６４でＮＯ）、
過去５フィールド内の映像に、垂直方向に高速に動く対
象物が存在していないと判定される。

【０１０３】過去５フィールド内の映像に、垂直方向に
高速に動く対象物が存在していると判定された場合には
（ステップ６４でＹＥＳ）、遅延量上限値Ｄ_max が０に
設定される（ステップ６５）。そして、今回の処理は終
了する。

【０１０４】過去５フィールド内の映像に、垂直方向に
高速に動く対象物が存在していないと判定された場合に
は（ステップ６４でＮＯ）、遅延量上限値Ｄ_max を設定
することなく、今回の処理は終了する。

【０１０５】図３は、図２のステップ７の遅延量算出処
理の詳細な手順を示している。

【０１０６】まず、上記ステップ２で設定されて記憶さ
れている遅延量倍率設定値および上記ステップ６で求め
られた有効水平方向動きベクトルの平均値ｖ（以下、動
きベクトル平均値という）に基づいて、第１遅延量ｄ１
が求められる（ステップ２１）。

【０１０７】図４は、動きベクトル平均値と、遅延量と
の関係を示している。図４に示すような関係が遅延量テ
ーブルとしてＲＯＭ２１に記憶されている。そして、ま
ず、動きベクトル平均値に対応する遅延量が、遅延量テ
ーブルから求められる。

【０１０８】ところで、同じ３次元映像信号であって
も、立体表示装置（モニタ）の条件、すなわち、モニタ
の種類およびモニタを見る条件によって、視差が異な
る。そこで、モニタの条件にかかわらず、同じような立
体感を得るために、あるいは観察者の好みに合うよう
に、上記ステップ２で設定されて記憶されている遅延量
倍率設定値を、遅延量テーブルから求められた遅延量に
積算することにより、第１遅延量ｄ１が求められる。

【０１０９】モニタの条件にかかわらず、同じような立
体感を得るために、複数種類の遅延量テーブルを格納し
ておき、操作・表示部２３から、モニタの条件または観
察者の好みに応じた遅延量テーブルを選択するための命
令を入力するようにしてもよい。

【０１１０】また、遅延量テーブルではなく、予め定め
られた関係式に基づいて、第１遅延量を求めるようにし
てもよい。この場合の関係式の求め方について図５を参
照して説明する。

【０１１１】モニタ面Ｓと、観察者の目３１、３２との
好適な間隔を適視距離Ａ〔ｍｍ〕とする。また、モニタ
面Ｓ上での注視物体の右画像Ｒと左画像Ｌとの間隔を視
差Ｂ〔ｍｍ〕とする。また、眼間距離をＣ〔ｍｍ〕とす
る。適視距離Ａは、モニタの条件によって決定される。
注視物体の視差Ｂは、３次元映像信号が同じであって
も、モニタの条件によって異なる。

【０１１２】適視距離Ａと、視差Ｂと、眼間距離Ｃとに
より、注視物体の立体像位置Ｐは決まる。つまり、注視
物体のモニタ面Ｓからの飛び出し量Ｄ〔ｍｍ〕は、適視
距離Ａと視差Ｂと眼間距離Ｃとによって決まる。

【０１１３】モニタの条件にかかわらず、注視物体のモ
ニタ面Ｓからの飛び出し量を一定量Ｄにするための視差
Ｂは、次の数式７で表される。

【０１１４】

【数７】

【０１１５】モニタの水平長をＨ〔ｍｍ〕、モニタの水
平方向画素数をｈ〔画素〕とし、動きベクトル平均値を
ｖ〔画素／フィールド〕、第１遅延量をｄ１〔フィール
ド〕とすると、次の関係が成り立つ。

【０１１６】

【数８】

【０１１７】ここで、視差Ｂの画素換算量（ ＝（ｈ／
Ｈ）・Ｂ）を操作・表示部２３によって設定される調整
量Ｘ（モニタの条件に関するデータまたは観察者の好み
に応じたデータ）とすると、第１遅延量ｄ１は、次の関
係式で求められる。

【０１１８】

【数９】

【０１１９】ステップ２１で、第１遅延量ｄ１が求めら
れると、遅延量履歴データに基づいて、今回から過去９
回までの１０フィールド分の遅延量の平均値、前回から
その過去９回までの１０フィールド分の遅延量の平均
値、前前回からその過去９回までの１０フィールド分の
遅延量の平均値がそれぞれ算出される（ステップ２
２）。

【０１２０】ステップ２２で用いられた遅延量履歴デー
タは、過去において、ステップ２１で得られた第１遅延
量ｄ１である。

【０１２１】次に、３組の平均値のうち、２つ以上が同
じ値であれば、その値（多数値）が第２遅延量ｄ２とし
て選択され、すべてが異なる値であればその中間値が第
２遅延量ｄ２として選択される（ステップ２３）。

【０１２２】次に、ステップ２３で選択された第２遅延
量ｄ２と、１２〜１８フィールド前のうちの１つの第２
遅延量ｄ２（たとえば、１５フィールド前の第２遅延量
ｄ２）と、３０フィールド前の第２遅延量ｄ２とが比較
される（ステップ２４）。ステップ２４で用いられた遅
延量履歴データは、過去において、ステップ２３で得ら
れた第２遅延量ｄ２である。

【０１２３】全ての第２遅延量ｄ２が一致する場合には
（ステップ２５でＹＥＳ）、目標遅延量Ｐｄがステップ
２３で選択された第２遅延量に変更された後（Ｐｄ＝ｄ
２）（ステップ２６）、ステップ３０に進む。したがっ
て、図６に示すように、３つの第２遅延量ｄ２（過去の
ものから順にｄ２−１、ｄ２−２、ｄ２−３で表す）が
変化し、全ての第２遅延量ｄ２が一致すると、目標遅延
量Ｐｄが第２遅延量（ｄ２−３）に変更される。

【０１２４】全ての第２遅延量ｄ２が一致しない場合に
は（ステップ２５でＮＯ）、全ての第２遅延量ｄ２が現
在の目標遅延量Ｐｄより大きいか、全ての第２遅延量ｄ
２が現在の目標遅延量Ｐｄより小さいか、またはそれら
の条件に該当しないかが判別される（ステップ２７）。

【０１２５】全ての第２遅延量ｄ２が現在の目標遅延量
Ｐｄより大きいときには、目標遅延量Ｐｄが＋１された
後（Ｐｄ＝Ｐｄ＋１）（ステップ２８）、ステップ３０
に進む。たとえば、図７に示すように、３つの第２遅延
量ｄ２（過去のものから順にｄ２−１、ｄ２−２、ｄ２
−３で表す）が変化し、全ての第２遅延量ｄ２が現在の
目標遅延量Ｐｄより大きいときには、目標遅延量Ｐｄが
＋１される。

【０１２６】全ての第２遅延量ｄ２が現在の目標遅延量
Ｐｄより小さいときには、目標遅延量Ｐｄが−１された
後（Ｐｄ＝Ｐｄ−１）（ステップ２９）、ステップ３０
に進む。全ての第２遅延量ｄ２が現在の目標遅延量Ｐｄ
より大きくなくかつ全ての第２遅延量ｄ２が現在の目標
遅延量ｄより小さくないときには、ステップ３０に進
む。

【０１２７】ステップ３０では、ステップ２６、２８ま
たは２９で算出された目標遅延量Ｐｄの絶対値｜Ｐｄ｜
が、遅延量上限値算出処理（図２のステップ４）で求め
られた遅延量上限値Ｄ_max 以下であるか否かが判定され
る。目標遅延量Ｐｄの絶対値｜Ｐｄ｜が遅延量上限値Ｄ
_max 以下であるときには（｜Ｐｄ｜≦Ｄ_max ）、ステッ
プ３２に進む。

【０１２８】目標遅延量Ｐｄの絶対値｜Ｐｄ｜が遅延量
上限値Ｄ_max より大きいときには（｜Ｐｄ｜＞
Ｄ_max ）、目標遅延量Ｐｄの絶対値｜Ｐｄ｜が、Ｄ_max
に置き換えられた後、ステップ３２に進む。これによ
り、垂直方向に移動する物体の左目用映像と右目用映像
とが融合しなくなるといったことを回避できる。

【０１２９】ステップ３２では、目標遅延量Ｐｄと現在
実際に設定されている遅延量（設定遅延量ｄ３）とが一
致するか否かが判別される。目標遅延量Ｐｄと設定遅延
量ｄ３とが一致していない場合には、現在の設定遅延量
ｄ３が既に４フィールド継続しているか否かが判別され
る（ステップ３３）。現在の設定遅延量ｄ３が既に４フ
ィールド継続している場合には、設定遅延量ｄ３が目標
遅延量Ｐｄに近づく方向に１だけ変更される（ｄ３＝ｄ
３±１）（ステップ３４）。そして、図２のステップ８
に移行する。

【０１３０】上記ステップ３２で、目標遅延量と現在の
設定遅延量とが一致している場合または、上記ステップ
３３で現在の設定遅延量が既に４フィールド継続してい
ない場合には、遅延量を変更することなく、図２のステ
ップ８に移行する。

【０１３１】つまり、この例では、設定遅延量ｄ３は４
フィールド周期単位でかつ１フィールド分ずつ目標遅延
量Ｐｄに近づくように制御される。

【０１３２】なお、電源投入後において、ステップ２１
において、初めて第１遅延量ｄ１が算出されたときに
は、第２遅延量ｄ２、目標遅延量Ｐｄおよび設定遅延量
ｄ３はｄ１と等しくなる。

【０１３３】図３の処理において、ステップ２２で、今
回から過去９回までの１０フィールド分の遅延量の平均
値のみを算出し、これを目標遅延量とし、ステップ２
３、２４、２５、２６、２７、２８、２９の処理を省略
してもよい。

【０１３４】また、ステップ２２において、今回から過
去９回の１０フィールド分の遅延量の平均値のみを算出
し、これを第２遅延量とし、ステップ２３の処理を省略
してもよい。

【０１３５】また、ステップ２３で求められた第２遅延
量を目標遅延量とし、ステップ２４、２５、２６、２
７、２８、２９の処理を省略してもよい。

【０１３６】また、ステップ２２および２３の処理を省
略してもよい。この場合には、ステップ２４で用いられ
る第２遅延量として、ステップ２１で求められた第１遅
延量ｄ１が用いられる。

【０１３７】

【発明の効果】この発明によれば、垂直方向に移動する
物体の左目用映像と右目用映像とが融合しなくなるとい
ったことを回避することができる。

【図面の簡単な説明】

【図１】２Ｄ／３Ｄ変換装置の構成を示すブロック図で
ある。

【図２】ＣＰＵによる２Ｄ／３Ｄ変換処理の全体的な手
順を示すフローチャートである。

【図３】図２のステップ７の遅延量算出処理の詳細な手
順を示すフローチャートである。

【図４】動きベクトル平均値と、第１遅延量との関係を
示すグラフである。

【図５】動きベクトル平均値から第１遅延量を求める関
係式の導き方を説明するための模式図である。

【図６】３つの第２遅延量が全て一致した場合に、目標
遅延量が変更される様子を示すタイムチャートである。

【図７】３つの第２遅延量の全てが現在の目標遅延量よ
り大きくなったときに、目標遅延量が変更される様子を
示すタイムチャートである。

【図８】各フィールドの映像エリア内に設定される複数
の動きベクトル検出領域Ｅ₁ 〜Ｅ₁₂を示す模式図であ
る。

【図９】動きベクトル検出領域内の複数の小領域ｅを示
す模式図である。

【図１０】小領域ｅ内に設定される複数のサンプリング
点Ｓと、１つの代表点Ｒとを示す模式図である。

【図１１】図２のステップ４における遅延量上限値算出
処理手順を示すフローチャートである。

【図１２】遅延量上限値算出処理の他の例を示すフロー
チャートである。

【図１３】遅延量上限値算出処理のさらに他の例を示す
フローチャートである。

【符号の説明】

１１ フィールドメモリ １２ 補間回路 １３ 映像切換回路 １４、１５ 位相制御回路 ２０ ＣＰＵ ２１ ＲＯＭ ２２ ＲＡＭ ２３ 操作・表示部 ２４ メモリ制御回路

───────────────────────────────────────────────────── フロントページの続き (72)発明者 飯沼 俊哉 大阪府守口市京阪本通２丁目５番５号 三洋電機株式会社内 (72)発明者 森 幸夫 大阪府守口市京阪本通２丁目５番５号 三洋電機株式会社内 (72)発明者 前中 章弘 大阪府守口市京阪本通２丁目５番５号 三洋電機株式会社内 (72)発明者 岡田 誠司 大阪府守口市京阪本通２丁目５番５号 三洋電機株式会社内 (72)発明者 内田 秀和 大阪府守口市京阪本通２丁目５番５号 三洋電機ソフトウエア株式会社内 (72)発明者 井原 幹二 大阪府守口市京阪本通２丁目５番５号 三洋電機ソフトウエア株式会社内 (56)参考文献 特開 平７−264631（ＪＰ，Ａ) (58)調査した分野(Int.Cl.⁷，ＤＢ名) H04N 13/02 G02B 27/22

Claims (5)

(57)【特許請求の範囲】
1. 【請求項１】 ２次元映像信号から、主映像信号と、主
   映像信号に対して遅延された副映像信号とを生成するこ
   とにより、２次元映像を３次元映像に変換する方法であ
   って、主映像信号に対する副映像信号の遅延量が主映像
   の水平方向の動きの速度に応じて変化せしめられる２次
   元映像を３次元映像に変換する方法において、 主映像から検出された動きベクトルの垂直成分に基づい
   て、遅延量の上限値を決定し、決定した上限値以下とな
   るように、遅延量を決定することを特徴とする２次元映
   像を３次元映像に変換する方法。
2. 【請求項２】 主映像の映像エリア内に設定された複数
   の動きベクトル検出領域それぞれから検出される動きベ
   クトルの全てまたは一部の垂直成分の絶対値の平均値を
   各フィールドごとに算出して記憶し、各フィールドにお
   いて、現フィールドから過去へ向かっての、上記平均値
   の累積値が、所定値未満となる範囲内で、遅延量の上限
   値を決定することを特徴とする請求項１に記載の２次元
   映像を３次元映像に変換する方法。
3. 【請求項３】 主映像の映像エリア内に設定された複数
   の動きベクトル検出領域それぞれから検出される動きベ
   クトルの全てまたは一部の垂直成分の絶対値の平均値を
   各フィールドごとに算出しかつ記憶手段に記憶する第１
   ステップ、 記憶手段に記憶されている過去所定フィールド数分の平
   均値のうち、最新のものから何フィールド前までのもの
   を累積するかを示す累積フィールド数を、予め定められ
   た遅延量最大値に設定する第２ステップ、 記憶手段に記憶されている過去所定フィールド数分の平
   均値の中から、設定された累積フィールド数分の平均値
   を、新しいものから順に読み出して、それらの累積値を
   算出する第３ステップ、 算出された累積値が予め定められた基準値未満である場
   合には、現在設定されている累積フィールド数を遅延量
   上限値と決定し、算出された累積値が予め定められた基
   準値以上である場合には、現在設定されている累積フィ
   ールド数を１だけデクリメントする第４ステップ、なら
   びに第４ステップで、累積フィールド数が更新されたと
   きには、更新された累積フィールド数を用いて、上記ス
   テップ３および４の処理を繰り返し実行する第５ステッ
   プ、 を備えていることを特徴とする請求項１に記載の２次元
   映像を３次元映像に変換する方法。
4. 【請求項４】 主映像の映像エリア内に設定された複数
   の動きベクトル検出領域のうち、被写体が存在すると判
   定された領域からそれぞれ検出される動きベクトルの全
   てまたは一部の垂直成分の絶対値の平均値を各フィール
   ドごとに算出しかつ算出された平均値を第１平均値とし
   て記憶手段に記憶する第１ステップ、 複数の動きベクトル検出領域のうち、背景が存在すると
   判定された領域からそれぞれ検出される動きベクトルの
   全てまたは一部の垂直成分の絶対値の平均値を各フィー
   ルドごとに算出しかつ算出された平均値を第２平均値と
   して記憶手段に記憶する第２ステップ、 記憶手段に記憶されている過去所定フィールド数分の第
   １平均値および第２平均値のうち、最新のものから何フ
   ィールド前までのものを累積するかを示す累積フィール
   ド数を、予め定められた遅延量最大値に設定する第３ス
   テップ、 記憶手段に記憶されている過去所定フィールド数分の第
   １平均値の中から、設定された累積フィールド数分の第
   １平均値を、新しいものから順に読み出して、それらの
   累積値である第１累積値を算出する第４ステップ、 記憶手段に記憶されている過去所定フィールド数分の第
   ２平均値の中から、設定された累積フィールド数分の第
   ２平均値を、新しいものから順に読み出して、それらの
   累積値である第２累積値を算出する第５ステップ、 算出された第１累積値および第２累積値の両方が予め定
   められた基準値未満である場合には、現在設定されてい
   る累積フィールド数を遅延量上限値と決定し、算出され
   た第１累積値および第２累積値の少なくとも一方が予め
   定められた基準値以上である場合には、現在設定されて
   いる累積フィールド数を１だけデクリメントする第６ス
   テップ、ならびに第６ステップで、累積フィールド数が
   更新されたときには、更新された累積フィールド数を用
   いて、上記ステップ４、５および６の処理を繰り返し行
   う第７ステップ、 を備えていることを特徴とする請求項１に記載の２次元
   映像を３次元映像に変換する方法。
5. 【請求項５】 主映像の映像エリア内に設定された複数
   の動きベクトル検出領域の全てまたは一部からそれぞれ
   検出される動きベクトルの垂直成分の絶対値を各フィー
   ルドごとに算出し、算出された絶対値が所定値より大き
   いか否かを判定する第１ステップ、 算出された絶対値が所定値より大きい場合には、主映像
   中に垂直方向に動きの大きい対象物が存在しているか否
   かを判定するための条件を満たしていると判定して、そ
   の判定結果を上記絶対値の算出源である動きベクトルが
   検出された動きベクトル検出領域に関連して記憶手段に
   記憶する第２ステップ、 記憶手段に記憶されている過去所定フィールド数分の判
   定結果に基づいて、各動きベクトル検出領域のうち、過
   去所定数のフィールド中、所定の規定フィールド数以
   上、上記条件を満たしている動きベクトル検出領域が存
   在するか否かを判定する第３ステップ、ならびに各動き
   ベクトル検出領域のうち、過去所定数のフィールド中、
   所定の規定フィールド数以上、上記条件を満たしている
   動きベクトル検出領域が存在する場合には、遅延量上限
   値を０と決定する第４ステップ、 を備えていることを特徴とする請求項１に記載の２次元
   映像を３次元映像に変換する方法。