JP2011019084A5 - - Google Patents

Description

本発明はこのような状況に鑑みてなされたものであり、立体視画像を表示するための動画を適切に生成することを目的とする。

本発明によれば、立体視画像を表示するための動画を適切に生成することができるという優れた効果を奏し得る。

続いて、記録制御部１６０が、生成された各ストリームデータをファイルシステム管理情報とＩＦＯ（InFOrmation）ファイルデータとともに、ＧＯＰ（Group Of Picture）単位で格納されたビデオオブジェクト単位を生成する。ここで言及するＩＦＯファイルとは、本発明の実施の形態のＡＶＣＨＤのアプリケーションフォーマットに準拠して映像音声ストリームコンテンツのアクセス記録再生編集を管理するストリーム管理データベースの管理情報ファイルの略称である。そして、記録制御部１６０は、ビデオオブジェクト単位が１個乃至複数個集合された記録データユニット４１０をストリームバッファに蓄積する。そして、記録制御部１６０が、所定分の記録データユニット４１０が蓄積されると、蓄積された記録データユニット４１０をまとめて、記憶部２００に記録する制御を繰り返し行う。なお、ビデオオブジェクト単位（ＶＯＢＵ（Video Object Unit））は、１つまたは２つのＧＯＰからなる集合であり、ディスクのＳＤ（Standard Definition）映像フォーマットでのメディアへの基本アクセス単位である。ディスクのＨＤ（High Definition）映像フォーマットにおいては、これに代わり、エントリポイント単位（ＥＰ（Entry Point））で１つ乃至数個のＧＯＰからなる集合である。本発明の実施の形態のＨＤ映像フォーマットの立体視画像記録再生では、例えば、立体視画像ストリームの同時刻１ＧＯＰ単位セットを１エントリポイント単位として扱うものとする。

続いて、動画記録の終了操作が行われたか否かが判断される（ステップＳ９１２）。例えば、立体視画像撮像モードにおいて動画記録が行われている状態で、録画ボタンを押下する押下操作（録画ボタンの再押下操作）が受け付けられたか否かが判断される。動画記録の終了操作が行われていない場合には（ステップＳ９１２）、ステップＳ９０３に戻る。一方、動画記録の終了操作が行われた場合には（ステップＳ９１２）、動画管理ファイル記録処理が行われる（ステップＳ９１３）。例えば、記録制御部１６０が、立体視画像識別情報および奥行マップ存否情報をインデックスファイル、ムービープレイリストファイルおよびクリップインフォメーションファイルに記録する。そして、記録制御部１６０が、立体視画像識別情報および奥行マップ存否情報が記録された各ファイルを記憶部２００に記録させる。動画管理ファイル記録処理が終了すると、動画記録処理の動作を終了する。

Claims (18)

1. 撮像画像に含まれる被写体のうち特定の被写体と当該被写体の周辺領域とを含む対象領域の画像を、前記撮像画像に関する奥行情報に基づいて抽出して、当該抽出された画像に基づいて立体視画像を表示するための差分画像を生成する画像処理部と、
   前記撮像画像に対応するデータと前記差分画像に対応するデータとを関連付けてデータストリームを生成するデータストリーム生成部と
   を具備する画像処理装置。
2. 前記画像処理部は、前記奥行情報に基づいて前記撮像画像の撮像位置から所定範囲内に存在する被写体を前記特定の被写体として決定し、前記特定の被写体に係る前記奥行情報に基づいて当該特定の被写体の前記撮像画像の水平方向における前記周辺領域を決定して前記対象領域の画像を前記撮像画像から抽出する請求項１記載の画像処理装置。
3. 前記画像処理部は、前記立体視画像を表示するための第２の撮像画像に含まれる被写体のうち前記特定の被写体と当該被写体の周辺領域とを含む対象領域の画像を、前記第２の撮像画像に関する第２奥行情報に基づいて抽出して当該抽出された画像に基づいて前記差分画像を生成し、
   前記データストリーム生成部は、前記立体視画像を表示するための第１の撮像画像に対応するデータと前記差分画像に対応するデータとを関連付けて前記データストリームを生成する
   請求項１記載の画像処理装置。
4. 前記データストリーム生成部は、前記差分画像に対応するデータを含む旨を示す立体視画像識別情報を含めた前記データストリームを生成する請求項１記載の画像処理装置。
5. 前記データストリーム生成部は、ＡＶＣＨＤ規格におけるモディファイドデジタルビデオパックに前記立体視画像識別情報を含めた前記データストリームをＡＶＣＨＤ規格に従って生成する請求項４記載の画像処理装置。
6. 前記データストリーム生成部は、前記差分画像に対応するデータを含む旨を示す立体視画像識別情報を、動画管理ファイルに含めるように処理する請求項１記載の画像処理装置。
7. 前記データストリーム生成部は、ＡＶＣＨＤ規格におけるインデックスファイル、クリップインフォメーションファイルおよびムービープレイリストファイルのうちの少なくとも１つに前記立体視画像識別情報を含めるように処理する請求項６記載の画像処理装置。
8. 前記データストリーム生成部は、前記撮像画像に対応するデータと前記差分画像に対応するデータと前記奥行情報に対応するデータとを関連付けて前記データストリームを生成する請求項１記載の画像処理装置。
9. 前記データストリーム生成部は、前記奥行情報に対応するデータを含む旨を示す奥行情報存否情報を含めた前記データストリームを生成する請求項８記載の画像処理装置。
10. 前記データストリーム生成部は、ＡＶＣＨＤ規格におけるモディファイドデジタルビデオパックに前記奥行情報存否情報を含めた前記データストリームをＡＶＣＨＤ規格に従って生成する請求項９記載の画像処理装置。
11. 前記データストリーム生成部は、前記奥行情報に対応するデータを含む旨を示す奥行情報存否情報を、動画管理ファイルに含めるように処理する請求項８記載の画像処理装置。
12. 前記データストリーム生成部は、ＡＶＣＨＤ規格におけるインデックスファイル、クリップインフォメーションファイルおよびムービープレイリストファイルのうちの少なくとも１つに前記奥行情報存否情報を含めるように処理する請求項１１記載の画像処理装置。
13. 前記データストリーム生成部は、ＡＶＣＨＤ規格におけるムービープレイリストファイルにおける拡張データ領域に前記奥行情報のプレイアイテムの登録領域を定義して当該登録領域に前記奥行情報のプレイアイテムを含めるように処理する請求項８記載の画像処理装置。
14. 前記立体視画像を構成する第１の画像を復元する画像復元部と、
    前記復元された第１の画像と前記撮像画像とに基づいて前記立体視画像を生成する立体視画像生成部と
    をさらに具備する請求項１記載の画像処理装置。
15. 前記データストリーム生成部は、前記生成されたデータストリームを表す代表画像を立体視画像として表示させるための第１の撮像画像に対応する第１のサムネイル画像と第２の撮像画像に対応する第２のサムネイル画像とを関連付ける請求項１記載の画像処理装置。
16. 前記第１のサムネイル画像および前記第２のサムネイル画像に基づいて前記生成されたデータストリームを表す代表画像を立体視画像として一覧表示させる表示制御部をさらに具備する請求項１５記載の画像処理装置。
17. 撮像画像に含まれる被写体のうち特定の被写体と当該被写体の周辺領域とを含む対象領域の画像を、前記撮像画像に関する奥行情報に基づいて抽出して、当該抽出された画像に基づいて立体視画像を表示するための差分画像を生成する画像処理手順と、
    前記撮像画像に対応するデータと前記差分画像に対応するデータとを関連付けてデータストリームを生成するデータストリーム生成手順と
    を具備する画像処理方法。
18. 撮像画像に含まれる被写体のうち特定の被写体と当該被写体の周辺領域とを含む対象領域の画像を、前記撮像画像に関する奥行情報に基づいて抽出して、当該抽出された画像に基づいて立体視画像を表示するための差分画像を生成する画像処理手順と、
    前記撮像画像に対応するデータと前記差分画像に対応するデータとを関連付けてデータストリームを生成するデータストリーム生成手順と
    をコンピュータに実行させるプログラム。