JP2015039083A - 映像処理装置、映像処理方法、送信装置および記憶媒体 - Google Patents
映像処理装置、映像処理方法、送信装置および記憶媒体 Download PDFInfo
- Publication number
- JP2015039083A JP2015039083A JP2011268112A JP2011268112A JP2015039083A JP 2015039083 A JP2015039083 A JP 2015039083A JP 2011268112 A JP2011268112 A JP 2011268112A JP 2011268112 A JP2011268112 A JP 2011268112A JP 2015039083 A JP2015039083 A JP 2015039083A
- Authority
- JP
- Japan
- Prior art keywords
- video signal
- video
- stereoscopic
- eye
- frame interpolation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
【課題】高品位な立体映像信号を生成可能な映像処理装置および映像処理方法と、高品位な立体映像信号を生成するための送信装置および記憶媒体を提供する。
【解決手段】実施形態によれば、映像処理装置は、受信手段と、フレーム補間手段と、立体映像生成手段とを備える。前記受信手段は、互いに異なる視点から被写体を撮影した第1の映像信号および第2の映像信号を受信する。前記フレーム補間手段は、前記第1の映像信号の撮影タイミングと前記第2の映像信号の撮影タイミングとの時間差を示す時間差パラメータに基づいて、前記第1の映像信号に対してフレーム補間を行い、前記第2の映像信号と撮影タイミングが同期した第3の映像信号を生成する。前記立体映像生成手段は、前記第2の映像信号および前記第3の映像信号に基づいて立体映像信号を生成する。
【選択図】図1
【解決手段】実施形態によれば、映像処理装置は、受信手段と、フレーム補間手段と、立体映像生成手段とを備える。前記受信手段は、互いに異なる視点から被写体を撮影した第1の映像信号および第2の映像信号を受信する。前記フレーム補間手段は、前記第1の映像信号の撮影タイミングと前記第2の映像信号の撮影タイミングとの時間差を示す時間差パラメータに基づいて、前記第1の映像信号に対してフレーム補間を行い、前記第2の映像信号と撮影タイミングが同期した第3の映像信号を生成する。前記立体映像生成手段は、前記第2の映像信号および前記第3の映像信号に基づいて立体映像信号を生成する。
【選択図】図1
Description
本発明の実施形態は、映像処理装置、映像処理方法、送信装置および記憶媒体に関する。
近年、映像を立体表示する表示装置が普及しつつある。一般に、右目用の映像と左目用の映像とをディスプレイに表示することにより、視聴者は映像を立体視できる。ところが、右目用および左目用の映像は必ずしも表示に適したタイミングで撮影されたものであるとは限らない。任意のタイミングで撮影された右目用および左目用の映像をそのまま表示しても、高品位な立体映像を表示するのは困難である。
高品位な立体映像信号を生成可能な映像処理装置および映像処理方法と、高品位な立体映像信号を生成するための送信装置および記憶媒体を提供する。
実施形態によれば、映像処理装置は、受信手段と、フレーム補間手段と、立体映像生成手段とを備える。前記受信手段は、互いに異なる視点から被写体を撮影した第1の映像信号および第2の映像信号を受信する。前記フレーム補間手段は、前記第1の映像信号の撮影タイミングと前記第2の映像信号の撮影タイミングとの時間差を示す時間差パラメータに基づいて、前記第1の映像信号に対してフレーム補間を行い、前記第2の映像信号と撮影タイミングが同期した第3の映像信号を生成する。前記立体映像生成手段は、前記第2の映像信号および前記第3の映像信号に基づいて立体映像信号を生成する。
以下、実施形態について、図面を参照しながら具体的に説明する。
(第1の実施形態)
図1は、第1の実施形態に係る立体映像表示システムの概略ブロック図である。立体映像表示システムは、立体映像撮影装置1と、映像処理装置2と、表示モジュール3とを備えている。この立体映像表示システムは、いわゆる偏光グラス方式で立体表示するものである。また、図2は、立体映像撮影装置1が撮影する被写体4の一例を示す図である。
図1は、第1の実施形態に係る立体映像表示システムの概略ブロック図である。立体映像表示システムは、立体映像撮影装置1と、映像処理装置2と、表示モジュール3とを備えている。この立体映像表示システムは、いわゆる偏光グラス方式で立体表示するものである。また、図2は、立体映像撮影装置1が撮影する被写体4の一例を示す図である。
立体映像撮影装置1は、右目用カメラ11Rと、左目用カメラ11Lとを有する。右目用カメラ11Rは、相対的に右側に位置する視点から被写体4を撮影し、右目用映像信号(第1の映像信号)を生成する。左目用カメラ11Lは、相対的に左側に位置する視点から被写体4を撮影し、左目用映像信号(第2の映像信号)を生成する。右目用および左目用映像信号は、例えばHDMI(High Definition Multimedia Interface)ケーブルを介して、映像処理装置2に送信される。なお、右目用カメラ11Rと左目用カメラ11Lは、一定のフレームレート(例えば60fps(frame per second))で撮影を行うが、必ずしも互いに同じタイミングで撮影を行っているわけではない。
映像処理装置2は、受信モジュール21と、映像処理モジュール22と、映像信号分離モジュール23と、フレーム補間モジュール24と、立体映像生成モジュール25とを有する。映像処理装置2は、1または複数の半導体チップとして実装されてもよいし、その少なくとも一部がソフトウェアで実装されてもよい。
受信モジュール21は立体映像撮影装置1から右目用および左目用映像信号を受信し、必要に応じて一時的に記憶する。さらに、受信モジュール21は、右目用カメラ11Rの撮影タイミングと左目用カメラ11Lの撮影タイミングとの時間差を示す時間差パラメータを取得する。右目用および左目用映像信号は映像処理モジュール22に供給され、時間差パラメータはフレーム補間モジュール24に供給される。
時間差パラメータは、例えばHDMIケーブルを介して、立体映像撮影装置1から受信モジュール21に送信される。また、立体映像撮影装置1のメーカや型式ごとの時間差パラメータを予めデータベースとして受信モジュール21内に記憶しておいてもよい。この場合、受信モジュール21は立体映像撮影装置1のメーカや型式をHDMIケーブルを介して認識し、データベースから時間差パラメータを取得する。
映像処理モジュール22は、右目用および左目用映像信号に対して、種々の映像信号処理を行う。ここでの処理は、例えば、復号処理、ノイズ除去等の高画質化処理であり、具体的な内容は問わない。処理後の右目用および左目用映像信号は映像信号分離モジュール23に供給される。映像処理モジュール22を1つのSoC(System on Chip)として実装してもよい。
映像信号分離モジュール23は、処理後の右目用および左目用映像信号を分離し、右目用映像信号を立体映像生成モジュール25に、左目用映像信号をフレーム補間モジュール24に、それぞれ供給する。
フレーム補間モジュール24は、時間差パラメータに応じて、左目用映像信号における少なくとも2つのフレームを用いてフレーム補間を行い、補間フレームを生成する。そして、フレーム補間モジュール24は、補間フレームから構成される、右目用映像信号と撮影タイミングが同期したフレーム補間後の左目用映像信号(第3の映像信号)を生成する。本実施形態では偏光グラス方式を念頭に置いているため、フレーム補間モジュール24は、右目用映像信号と撮影タイミングが揃うよう、左目用映像信号をフレーム補間して、フレーム補間後の左目用映像信号を生成する。フレーム補間後の左目用映像信号は立体映像生成モジュール25に供給される。
立体映像生成モジュール25は、右目用映像信号とフレーム補間後の左目用映像信号に基づいて、偏光グラス方式で立体表示するための立体映像信号を生成する。より具体的には、立体映像信号の奇数ラインには右目用映像信号の奇数ラインが割り当てられ、偶数ラインにはフレーム補間後の左目用映像信号の偶数ラインが割り当てられる。なお、偶数ラインと奇数ラインの割り当ては逆でもよい。立体映像信号は表示モジュール3に供給される。
表示モジュール3は、マトリクス状に配置された、例えば1920*1080画素を有する液晶パネルを有する。もちろん、表示モジュール3の画素数に制限はないし、プラズマディスプレイパネルやEL(ElectroLluminescence)パネルであってもよい。表示モジュール3の奇数ラインには右目用映像信号に応じた右目用映像が表示され、偶数ラインにはフレーム補間後の左目用映像信号に応じた左目用映像が表示される。表示パネルには不図示の偏光フィルタ(例えば、パターン化位相差フィルム)が設けられ、偶数ラインと奇数ラインとで、異なる偏光特性の光が出力される。
視聴者は、偏光フィルタが貼り付けられた特殊な眼鏡を用いて、表示モジュール3に表示された映像を見える。偏光フィルタにより、右目には右目用映像のみが見え、左目には左目用映像のみが見える。これにより、視聴者は、右目と左目とで異なる映像を見ることになり、映像を立体視できる。
図3は、映像処理装置2の処理動作の一例を示すフローチャートである。図4は、各映像信号のタイミング図を概略的に示す図である。図5は、各映像の一例を模式的に示す図である。図3〜図5を用いて、映像処理装置2の処理動作を説明する。
まず、受信モジュール21は、立体映像撮像装置1から、右目用映像信号、左目用映像信号および時間差パラメータを取得する(ステップS1)。図4の例では、時刻t1,t3,t5で左目用カメラ11Lが被写体4を撮影し、図5の左目用映像信号L0,L1,L2をそれぞれ生成する。そして、時刻t1,t3,t5から時間dtだけそれぞれ遅れた時刻t2,t4,t6で右目用カメラ11Rが被写体4を撮影し、図5の右目用映像信号R0,R1,R2をそれぞれ生成する。このとき、時間差パラメータは時間差dt=t2−t1を示す。なおdtの値は、例えば半フレームに相当する時間未満の値を示すが、dtの値はこれに限らず半フレーム相当時間以上の値であってもよい。
次に、映像処理モジュール22は、右目用および左目用映像信号に対して映像処理を行う(ステップS2)。
次いで、映像信号分離モジュール23は、処理後の右目用および左目用映像信号を分離し、処理後の右目用映像信号を立体映像生成モジュール25に、左目用映像信号をフレーム補間モジュール24に、それぞれ供給する(ステップS3)。
フレーム補間モジュール24は、時間差パラメータdtに応じて、左目用映像信号に対してフレーム補間を行い、右目用映像信号と撮影タイミングが揃った、フレーム補間後の左目用映像信号を生成する(ステップS4)。
図6は、左目用映像信号L0〜L2と、フレーム補間後の左目用映像信号L0’〜L2’と、右目用映像信号R0〜R2との関係を示す図である。例えば、フレーム補間モジュール24は、時刻t2に撮影されたのと等価なフレームL0’を生成するために、時刻t2の前後の時刻t1,t3における各左目用映像信号のフレームL0,L1を用いてフレーム補間を行う。
フレーム補間モジュール24は、例えば動きベクトルを用いて、フレーム補間を行うことができる。被写体4である振り子の球は、時刻t1では位置p1にあったが、時刻t2では位置p2へ動いている。よって、フレーム補間モジュール24は、振り子の球を位置p1とp2との間の位置に移動させる。また、図4の例では、時刻t2は時刻t1に近いため、振り子の球を位置p1とp2との間であって、位置p1に近い位置に移動させるのが望ましい。
このようにして、フレーム補間モジュール24は、図4および図6に示すように、時刻t2,t4,t6に撮影されたのと等価なフレーム補間後の左目用映像信号のフレームL0’,L1’,L2’等をそれぞれ生成する。
なお、フレーム補間の手法は任意であり、フレーム補間モジュール24は、例えば3以上のフレームを用いてフレーム補間を行ってもよい。
続いて、立体映像生成モジュール25は、フレーム補間モジュール24から供給されるフレーム補間後の左目用映像信号と、映像信号分離モジュール23から供給される右目用映像信号と、を用いて、偏光グラス方式で立体表示するための立体映像信号を生成する(ステップS5)。より具体的には、図4に示すように、立体映像生成モジュール25は、右目用映像信号R0の奇数ラインと、フレーム補間後の左目用映像信号L0’の偶数ラインとを組み合わせて、時刻t2における立体映像信号のフレームを生成する。すなわち、立体映像信号は右目用映像信号の奇数ラインおよびフレーム補間後の左目用映像信号の偶数ラインから構成される。
フレーム補間を行って、撮影タイミングが揃った右目用映像信号および左目用映像信号を用いるため、違和感のない高品位な立体映像信号を生成できる。
この立体映像信号は表示モジュール3に供給され、立体映像が表示される。
なお、フレーム補間モジュール24が左目用映像信号にのみフレーム補間を行う例を示したが、右目用映像信号にのみフレーム補間を行ってもよいし、左目用および右目用映像信号の両方にフレーム補間を行ってもよい。例えば、右目用カメラ11Rおよび左目用カメラ11Lが60fpsで撮影するのに対し、表示モジュール3が120fpsで映像を表示する場合、フレーム補間モジュール24は、右目用映像信号にフレーム補間を行って120fpsのフレーム補間後の右目用映像信号を生成するとともに、左目用映像信号にフレーム補間を行って、フレーム補間後の右目用映像信号と撮影タイミングが揃い、かつ、120fpsのフレーム補間後の左目用映像信号を生成してもよい。
このように、第1の実施形態では、撮影タイミングが揃った左目用および右目用映像信号を生成し、これらを用いて偏光方式用の立体映像信号を生成するため、高品位な立体映像信号を生成できる。
(第2の実施形態)
上述した第1の実施形態は偏光グラス方式で立体表示するものであったが、以下に説明する第2の実施形態は、時分割方式で立体表示するものである。
上述した第1の実施形態は偏光グラス方式で立体表示するものであったが、以下に説明する第2の実施形態は、時分割方式で立体表示するものである。
立体映像表示システムの概略ブロック図および映像処理装置2の処理動作は第1の実施形態と類似している。第1の実施形態に対して、フレーム補間モジュール24による処理(図3のステップS4)および立体映像生成モジュール25による処理(ステップS5)が異なっている。
なお、以下の説明では、カメラ11R,11Lが60fpsで撮影を行い、表示モジュール3が120fpsで映像を表示する例を示す。
時分割方式では、右目用および左目用映像は同時には表示されず、右目用および左目用映像が交互に表示される。表示モジュール3が120fpsで映像を表示する場合、右目用映像が60fpsで表示され、カメラ11R,11Lのフレームレートの半フレーム分、言い換えると、表示モジュール3のフレームレートの1フレーム分に相当するに相当する1/120秒ずれて左目用映像が60fpsで表示される。このことを考慮して、フレーム補間モジュール24はフレーム補間を行う。
そして、視聴者は、表示モジュール3に表示される映像に同期して左目および右目の液晶シャッタが60Hzで開閉する眼鏡を用いて、映像を見る。よって、右目には右目用映像のみが見え、左目には左目用映像のみが見える。これにより、視聴者は、右目と左目とで異なる映像を見ることになり、映像を立体視できる。
図7は、各映像信号のタイミングを概略的に示す図である。図8は、映像信号L0〜L2と、L0’ ’〜L2 ’’と、R0〜R2との関係を示す図である。図7および図8を用いて、本実施形態におけるフレーム補間モジュール24および立体映像生成モジュール25の処理動作を説明する。
上述のように、右目用および左目用映像は1フレームずつ交互に表示される。よって、フレーム補間モジュール24は、左目用映像信号に対してフレーム補間を行い、右目用映像信号に同期した信号として、右目用映像信号と撮影タイミングが半フレームずれた、フレーム補間後の左目用映像信号を生成する。
例えば、フレーム補間モジュール24は、右目用映像信号の撮影タイミングである時刻t2,t4の中間である時刻t11に撮影されたのと等価なフレームL0’’を生成するために、時刻t11の前後の時刻t1,t3における各左目用映像信号のフレームL0,L1を用いてフレーム補間を行う。同様に、時刻t4,t6の中間である時刻t12に撮影されたのと等価なフレーム補間後の左目用映像信号のフレームL1’’等を生成する。
続いて、立体映像生成モジュール25は、右目用映像信号と、フレーム補間後の左目用映像信号とを用いて、時分割方式で立体表示するための立体映像信号を生成する。より具体的には、立体映像生成モジュール25は、右目用映像信号のフレームと、左目用映像信号のフレームとを交互に並べた立体映像信号を生成する。すなわち、立体映像信号は1フレームずつ交互に並べられた右目用映像信号およびフレーム補間後の左目用映像信号から構成される。
この立体映像信号は表示モジュール3に供給され、立体映像が表示される。
この立体映像信号は表示モジュール3に供給され、立体映像が表示される。
なお、上述した例では、表示モジュール3のフレームレート(表示レート)がカメラ11R,11Lのフレームレート(撮影レート)の2倍であり、右目用映像信号に対してフレーム補間を行わなくてもよい。そうでない場合、必要に応じて右目用および左目用映像信号の両方をフレーム補間してもよい。例えば、まず右目用映像信号のフレームレートが表示モジュール3のフレームレートの1/2になるように右目用映像信号に対してフレーム補間を行う。続いて、左目用映像信号に対してフレーム補間を行って、撮影タイミングがフレーム補間後の右目用映像信号と表示モジュール3の1フレーム分ずれた、フレーム補間後の左目用映像信号を生成する。また、表示モジュール3のフレームレートとカメラ11R,11Lのフレームレートとが等しいような場合には、フレーム補間モジュール24は適宜右目用および左目用映像信号のフレームを間引いてもよい。
このように、第2の実施形態では、撮影タイミングが表示モジュール3の1フレーム分ずれた左目用および右目用映像信号を生成し、これらを用いて時分割方式用の立体映像信号を生成するため、高品位な立体映像信号を生成できる。
(第3の実施形態)
上述した第1および第2の実施形態は、いずれも眼鏡を用いて立体表示するものであったが、以下に説明する第3の実施形態は、複数の視差画像を同時に表示して裸眼方式で立体表示するものである。
上述した第1および第2の実施形態は、いずれも眼鏡を用いて立体表示するものであったが、以下に説明する第3の実施形態は、複数の視差画像を同時に表示して裸眼方式で立体表示するものである。
図9は、第3の実施形態に係る立体映像表示システムの概略ブロック図である。図9では、図1と共通する構成部分には同一の符号を付しており、以下では相違点を中心に説明する。
立体映像表示システムは、さらに、デプスデータ生成モジュール26を備えている。デプスデータ生成モジュール26は、右目用映像信号およびフレーム補間後の左目用映像信号に基づいて、各画素のデプス値を生成する。デプス値は、どの程度、画素に表示される映像が表示モジュール3の手前または奥に見えるよう表示するか、を示すパラメータである。デプスデータ生成モジュール26は、例えば右目用映像信号におけるある画素が、フレーム補間後の左目用映像信号におけるどの画素と対応しているか、等を考慮して、デプス値を生成する。
立体映像生成モジュール25は、右目用映像信号およびフレーム補間後の左目用映像信号と、デプス値とに基づいて、例えばそれぞれ1280*720画素を有する第1〜第9視差画像信号を生成する。第1〜第9視差画像信号に対応する第1〜第9視差画像は、水平方向に沿って左から右へ並ぶ9つの視点からそれぞれ被写体4を見た画像である。
表示モジュール3は、液晶パネルと、レンチキュラレンズとを有する。本実施形態の液晶パネルは水平方向に11520(=1280*9)*720画素を有する。レンチキュラレンズは液晶パネルの水平方向に沿って配置される複数の凸部を有し、その数は液晶パネルの水平方向画素数の1/9である。そして、水平方向に配置される9個の画素につき1つの凸部が対応するように、レンチキュラレンズが液晶パネルの表面に貼り付けられている。
各凸部に対応する9個の画素にそれぞれ第1〜第9視差画像の各画素が表示される。各画素に表示された画像は凸部の頂点付近から指向性を持って特定の方向へ出力される。視聴者は、レンチキュラレンズを介して、左目で第1〜第9視差画像のうちの1つの視差画像を、右目で他の1つの視差画像をそれぞれ見ることにより、映像を立体視できる。
なお、レンチキュラレンズに代えて、パララックスバリア等、出力される光の方向を制御可能な部材を用いてもよい。パララックスバリアを透過型液晶表示装置などで電子的に発生させてもよい。
図10は、映像処理装置2の処理動作の一例を示すフローチャートである。図11は、各映像信号のタイミングを概略的に示す図である。
第1の実施形態と同様のステップS1〜S4の後、デプスデータ生成モジュール26は、右目用映像信号およびフレーム補間後の左目用映像信号に基づいて、各画素のデプス値を生成する(ステップS11)。より具体的には、デプスデータ生成モジュール26は、時刻t2における右目用映像信号R0、フレーム補間後の左目用映像信号L0’に基づいて、時刻t2におけるデプス値DEP0を生成する。同様にして、デプスデータ生成モジュール26は、時刻t2,t4におけるデプス値DEP1,DEP2等を生成する。このように、右目用映像信号およびフレーム補間後の左目用映像信号の撮影タイミングが揃っているため、デプスデータ生成モジュール26は精度よくデプス値を生成できる。
その後、立体映像生成モジュール25は、右目用映像信号と、フレーム補間後の左目用映像信号と、デプス値とを用いて、立体映像信号を生成する(ステップS5)。より具体的には、図11に示すように、立体映像生成モジュール25は、時刻t2における右目用映像信号R0、フレーム補間後の左目用映像信号L0’、および、デプス値DEP0を用いて、第1〜第9視差画像を含む時刻t2における立体映像信号V0を生成する。
この立体映像信号は表示モジュール3aに供給されて、立体映像が表示される。
このように、第3の実施形態では、撮影タイミングが揃った左目用および右目用映像信号を用いてデプス値を生成し、このデプス値を用いて立体映像信号を生成するため、高品位な立体映像信号を生成できる。
なお、視差画像の数は9つに限定されない。例えば、単に右目用および左目用の2つの視差画像を表示する場合、デプスデータ生成モジュール26を省略して、撮影タイミングが揃った右目用映像信号およびフレーム補間後の左目用映像信号を、それぞれ、右目用視差画像および左目用視差画像として表示してもよい。また、本実施形態でも、右目用映像信号にフレーム補間を行ってもよい。
上述した各実施形態では、カメラを有する立体映像撮影装置1から映像処理装置2の受信モジュール21に映像信号が入力される例を示したが、映像信号の入力元に特に制限はない。
図12は、映像信号の入力元の例を示す図である。図12(a)に示すように、放送局5から右目用および左目用映像と時間差パラメータとを含む放送波を受信してもよい。この場合、受信モジュール21は、放送波をチューニングおよび復号して、右目用および左目用映像信号と時間差パラメータとを生成する。また、図12(b)に示すように、DVD,HD DVD,BD等の光ディスクやHDD等の記憶装置に記憶された右目用および左目用映像信号と時間差パラメータとを、光ディスク再生装置やパーソナルコンピュータ等の再生装置6により読み出して再生し、これを受信モジュール21に送信してもよい。
これらの右目用および左目用映像信号は、例えばフレームパッキング(FP)、サイドバイサイド(SBS)あるいはトップアンドボトム(TAB)方式等の信号である。
また、放送局5や再生装置6から時間差パラメータを受信してもよいし、他から受信してもよい。あるいは、右目用および左目用映像信号の時間差パラメータが規格等により予め定められている場合は、受信モジュール21が時間差パラメータを受信せず、フレーム補間モジュール24が予め時間差パラメータを記憶しておいてもよい。
さらに、映像処理装置2と表示モジュール3とを一体にして映像処理装置としてもよいし、映像処理装置2を例えばSTB(Set Top box)等の放送受信装置や記録媒体の再生装置等に搭載して、映像処理装置を構成してもよい。
上述した実施形態で説明した映像処理装置の少なくとも一部は、ハードウェアで構成してもよいし、ソフトウェアで構成してもよい。ソフトウェアで構成する場合には、映像処理装置の少なくとも一部の機能を実現するプログラムをフレキシブルディスクやCD−ROM等の記録媒体に収納し、コンピュータに読み込ませて実行させてもよい。記録媒体は、磁気ディスクや光ディスク等の着脱可能なものに限定されず、ハードディスク装置やメモリなどの固定型の記録媒体でもよい。
また、映像処理装置の少なくとも一部の機能を実現するプログラムを、インターネット等の通信回線(無線通信も含む)を介して頒布してもよい。さらに、同プログラムを暗号化したり、変調をかけたり、圧縮した状態で、インターネット等の有線回線や無線回線を介して、あるいは記録媒体に収納して頒布してもよい。
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。
1 立体映像撮影装置
11R,11L カメラ
2,2a 映像処理モジュール
21 受信モジュール
22 映像処理モジュール
23 映像信号分離モジュール
24 フレーム補間モジュール
25 立体映像生成モジュール
26 デプスデータ生成モジュール
3,3a 表示モジュール
4 被写体
5 放送局
6 再生装置
11R,11L カメラ
2,2a 映像処理モジュール
21 受信モジュール
22 映像処理モジュール
23 映像信号分離モジュール
24 フレーム補間モジュール
25 立体映像生成モジュール
26 デプスデータ生成モジュール
3,3a 表示モジュール
4 被写体
5 放送局
6 再生装置
Claims (16)
- 互いに異なる視点から被写体を撮影した第1の映像信号および第2の映像信号を受信する受信手段と、
前記第1の映像信号の撮影タイミングと前記第2の映像信号の撮影タイミングとの時間差を示す時間差パラメータに基づいて、前記第1の映像信号に対してフレーム補間を行い、前記第2の映像信号と撮影タイミングが同期した第3の映像信号を生成するフレーム補間手段と、
前記第2の映像信号および前記第3の映像信号に基づいて立体映像信号を生成する立体映像生成手段と、を備える映像処理装置。 - 前記フレーム補間手段は、前記時間差パラメータに基づいて、前記第1の映像信号に対してフレーム補間を行い、前記第2の映像信号と撮影タイミングが揃ったフレームを生成することにより、前記第3の映像信号を生成する、請求項1に記載の映像処理装置。
- 前記立体映像信号生成手段は、偶数ラインに前記第2の映像信号および前記第3の映像信号の一方の偶数ラインが割り当てられ、奇数ラインに他方の奇数ラインが割り当てられた前記立体映像信号を生成する、請求項2に記載の映像処理装置。
- 前記立体映像信号生成手段は、前記第2の映像信号および前記第3の映像信号に基づいて、複数の視差画像を含む前記立体映像信号を生成する、請求項2に記載の映像処理装置。
- 前記第2の映像信号および前記第3の映像信号に基づいて、各画素の奥行きを示すデプス値を生成するデプスデータ生成手段を備え、
前記立体映像信号生成手段は、前記デプス値に基づいて、前記複数の視差画像を含む前記立体映像信号を生成する、請求項4に記載の映像処理装置。 - 前記フレーム補間手段は、前記時間差パラメータに基づいて、前記第1の映像信号に対してフレーム補間を行い、前記第2の映像信号と撮影タイミングが予め定めた時間だけずれたフレームを生成することにより、前記第3の映像信号を生成する、請求項1に記載の映像処理装置。
- 前記予め定めた時間は、前記立体映像信号が表示される表示手段の1フレーム分に対応する時間である、請求項6に記載の映像処理装置。
- 前記立体映像信号生成手段は、前記第2の映像信号と前記第3の映像信号とをフレーム単位で交互に表示するための前記立体映像信号を生成する、請求項6に記載の映像処理装置。
- 前記フレーム補間手段は、前記時間差パラメータに基づいて、前記第1の映像信号に対してフレーム補間を行って前記第3の映像信号を生成するとともに、前記第2の映像信号に対してフレーム補間を行って第4の映像信号を生成し、前記第3の映像信号および前記第4の映像信号は撮影タイミングが互いに同期しており、
前記立体映像信号生成手段は、前記第3の映像信号および前記第4の映像信号に基づいて前記立体映像信号を生成する、請求項1に記載の映像処理装置。 - 第1の視点から撮影して前記第1の映像信号を生成する第1のカメラと、前記第1の視点とは異なる第2の視点から撮影して前記第2の映像信号を生成する第2のカメラと、を有する撮影装置から、前記受信手段は前記第1の映像信号および前記第2の映像信号ならびに前記時間差パラメータを受信する、請求項1に記載の映像処理装置。
- 前記受信手段は、
放送局から送信される放送波を受信し、これをチューニングおよび復調して前記第1の映像信号および前記第2の映像信号を生成するか、
記憶媒体から読みだされた前記第1の映像信号および前記第2の映像信号を受信する、請求項1に記載の映像処理装置。 - 前記立体映像信号に応じた立体映像を表示する表示手段を備える、請求項1に記載の映像処理装置。
- 前記第1の映像信号および前記第2の映像信号の一方は右目用の映像信号であり、他方は左目用の映像信号である、請求項1に記載の映像処理装置。
- 互いに異なる視点から被写体を撮影した第1の映像信号および第2の映像信号を受信するステップと、
前記第1の映像信号の撮影タイミングと前記第2の映像信号の撮影タイミングとの時間差を示す時間差パラメータに基づいて、前記第1の映像信号に対してフレーム補間を行い、前記第2の映像信号と撮影タイミングが同期した第3の映像信号を生成するステップと、
前記第2の映像信号および前記第3の映像信号に基づいて立体映像信号を生成するステップと、を備える映像処理方法。 - 互いに異なる視点から被写体を撮影した第1の映像信号および第2の映像信号と、前記第1の映像信号の撮影タイミングと前記第2の映像信号の撮影タイミングとの時間差を示す時間差パラメータと、を送信する送信部を備える送信装置。
- 互いに異なる視点から被写体を撮影した第1の映像信号および第2の映像信号と、前記第1の映像信号の撮影タイミングと前記第2の映像信号の撮影タイミングとの時間差を示す時間差パラメータと、を記憶した記憶媒体。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011268112A JP2015039083A (ja) | 2011-12-07 | 2011-12-07 | 映像処理装置、映像処理方法、送信装置および記憶媒体 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011268112A JP2015039083A (ja) | 2011-12-07 | 2011-12-07 | 映像処理装置、映像処理方法、送信装置および記憶媒体 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2015039083A true JP2015039083A (ja) | 2015-02-26 |
Family
ID=52631932
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011268112A Pending JP2015039083A (ja) | 2011-12-07 | 2011-12-07 | 映像処理装置、映像処理方法、送信装置および記憶媒体 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2015039083A (ja) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH01316092A (ja) * | 1988-06-16 | 1989-12-20 | Matsushita Electric Ind Co Ltd | 立体表示装置 |
JP2006115151A (ja) * | 2004-10-14 | 2006-04-27 | Canon Inc | 立体表示装置 |
WO2007072870A1 (ja) * | 2005-12-22 | 2007-06-28 | Matsushita Electric Industrial Co., Ltd. | 映像コンテンツ記録装置、映像コンテンツ記録方法、映像コンテンツ記録プログラム、映像コンテンツ再生装置、映像コンテンツ再生方法、映像コンテンツ再生プログラム、映像コンテンツ編集装置及び情報記録メディア |
JP2008252731A (ja) * | 2007-03-30 | 2008-10-16 | Sanyo Electric Co Ltd | 画像表示装置 |
JP2010032677A (ja) * | 2008-07-28 | 2010-02-12 | Sony Corp | 立体画像表示装置およびその製造方法 |
-
2011
- 2011-12-07 JP JP2011268112A patent/JP2015039083A/ja active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH01316092A (ja) * | 1988-06-16 | 1989-12-20 | Matsushita Electric Ind Co Ltd | 立体表示装置 |
JP2006115151A (ja) * | 2004-10-14 | 2006-04-27 | Canon Inc | 立体表示装置 |
WO2007072870A1 (ja) * | 2005-12-22 | 2007-06-28 | Matsushita Electric Industrial Co., Ltd. | 映像コンテンツ記録装置、映像コンテンツ記録方法、映像コンテンツ記録プログラム、映像コンテンツ再生装置、映像コンテンツ再生方法、映像コンテンツ再生プログラム、映像コンテンツ編集装置及び情報記録メディア |
JP2008252731A (ja) * | 2007-03-30 | 2008-10-16 | Sanyo Electric Co Ltd | 画像表示装置 |
JP2010032677A (ja) * | 2008-07-28 | 2010-02-12 | Sony Corp | 立体画像表示装置およびその製造方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8884952B2 (en) | 3D display apparatus and method for processing image using the same | |
WO2010122711A1 (ja) | 立体画像表示装置、立体画像再生装置および立体画像目視システム | |
CN102197655B (zh) | 暂停模式中的立体图像再现方法及使用该方法的立体图像再现装置 | |
US20100238274A1 (en) | Method of displaying three-dimensional image data and an apparatus of processing three-dimensional image data | |
US8994787B2 (en) | Video signal processing device and video signal processing method | |
US20120069015A1 (en) | 3d image reproduction device and method capable of selecting 3d mode for 3d image | |
WO2010092823A1 (ja) | 表示制御装置 | |
JP4748251B2 (ja) | 映像変換方法および映像変換装置 | |
JP2012029220A (ja) | 立体映像出力装置およびバックライト制御方法 | |
US8941718B2 (en) | 3D video processing apparatus and 3D video processing method | |
JP2013051618A (ja) | 映像処理装置および映像処理方法 | |
JP5127967B1 (ja) | 映像処理装置および映像処理方法 | |
US8957950B2 (en) | Electronic apparatus and image output method | |
KR101825063B1 (ko) | 평판 패널에서의 입체 영상 입력을 위한 하드웨어 시스템 | |
JP4908624B1 (ja) | 立体映像信号処理装置及び方法 | |
US20130169608A1 (en) | Display apparatus and controlling method thereof | |
WO2012147454A1 (ja) | 画像処理装置及び画像処理方法、表示システム、映像生成装置、並びに再生装置 | |
US20120163700A1 (en) | Image processing device and image processing method | |
US20150130897A1 (en) | Method for generating, transporting and reconstructing a stereoscopic video stream | |
JP2012244625A (ja) | 適応型タイミングコントローラ及びその駆動方法 | |
US20130050411A1 (en) | Video processing device and video processing method | |
JP2012134885A (ja) | 画像処理装置及び画像処理方法 | |
JP2014022947A (ja) | 立体視映像伝送装置、立体視映像伝送方法及び立体視映像処理装置 | |
JP2015039083A (ja) | 映像処理装置、映像処理方法、送信装置および記憶媒体 | |
US8902286B2 (en) | Method and apparatus for detecting motion vector, and method and apparatus for processing image signal |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20130315 |