JP2004127208A

JP2004127208A - 立体映像処理装置

Info

Publication number: JP2004127208A
Application number: JP2002321512A
Authority: JP
Inventors: Norio Ito; 伊藤　典男; Hiroyuki Katada; 堅田　裕之; Toshio Nomura; 野村　敏男; Ryuji Kitaura; 北浦　竜二; Hiroaki Yabe; 矢部　博明; Graham Jones; グレアム　ジョーンズ; Willis Morgan; モーガン　ウィリス; Hill Lyndon; リンドン　ヒル
Original assignee: Sharp Corp
Current assignee: Sharp Corp
Priority date: 2002-07-31
Filing date: 2002-11-05
Publication date: 2004-04-22

Abstract

【課題】撮影された立体画像の補正を容易にできる立体映像処理装置を提供する。
【解決手段】入力された複数のファイルからなる立体画像を補正処理し、撮影された立体映像を見易くするための立体映像処理装置１００において、入力された立体映像に所定の情報が含まれる場合に、その旨を告知するファイル入力部１０１と、撮影された立体映像を補正して得られた補正画像を符号化して所定より小さなサイズの符号化データを生成する３Ｄ補正画像生成部１０２と、立体映像の著作権制御情報を生成する著作権制御情報生成部１０５と、前記生成された著作権制御情報と前記符号化データとを結合し、立体映像符号化データを出力する著作権制御情報結合部１０４とを備えるものとする。
【選択図】　　　図１

Description

【０００１】
【発明の属する技術分野】
本発明は、立体映像処理装置に関し、特に、立体画像の補正処理を行うようにした立体映像処理装置に関するものである。
【０００２】
【従来の技術】
従来、物体を人の目に立体的に認知させる立体画像を複数のカメラを用いて生成し、この立体画像を蓄積あるいは伝送して立体画像を表示する立体画像処理装置がある。
例えば、左右の画像を必要とする立体画像処理装置の場合、２台のカメラを用いて左右の画像を別ファイルに保存する場合と、１台のカメラのレンズにアダプタを取り付けて１枚の画像に左右の画像を撮影するか、時間的に右左を切り替えて撮影し１つのファイルに保存する場合とがある。
【０００３】
また、１枚の画像に左右の画像が撮影できるアダプタの例が提案されている。この構成は、立体写真型の立体映像を撮影する映像機器において、映像機器の撮影時の映像を確認するためのモニタ画面表示部に設け、左右それぞれの映像の中心位置を表示するための案内標を備えることで、左右の２つの映像の高さ方向のずれが生じること無く、極めて簡単に且つ正確に立体映像の撮影を可能としたものである（例えば、特許文献１参照。）。
【０００４】
【特許文献１】
特開平１０−３２２７２５号公報（第３−７頁、図２）
【０００５】
【発明が解決しようとする課題】
しかしながら、従来方式では次のような問題がある。
すなわち、撮影された対象の左右の画像における対応点の高さが厳密に同一にならない場合は、図４（ａ）に示すように、立体表示ディスプレイで見ると立体感が得にくくなるという問題点があった。
このため、図４（ｂ）に示すように、左右の画像を読み込んで対応点の高さを調節する等の補正を行い、これを出力する装置が必要であった。
【０００６】
本発明は、上記従来の問題点に鑑みてなされたものであって、撮影された立体画像の補正を容易にできる立体映像処理装置を提供することを目的とする。
【０００７】
【課題を解決するための手段】
本発明は、立体映像処理装置に関し、特に、入力された複数あるいは１つのファイルからなる立体画像を補正処理し、撮影された立体映像を見易くするための立体映像処理装置において、入力された立体映像に所定の情報が含まれる場合に、その旨告知するファイル入力部と、撮影された立体映像に補正処理を行い、得られた補正画像を符号化して符号化データを生成する３Ｄ補正画像生成部と、立体映像の著作権制御情報を生成する著作権制御情報生成部と、前記生成された著作権制御情報と前記符号化データとを結合し、立体映像符号化データを出力する著作権制御情報結合部とを備えることを特徴とするものである。
【０００８】
また、本発明は、前記３Ｄ補正画像生成部の構成として、撮影された立体映像を補正する立体映像補正処理部、いわゆる３Ｄ補正処理部と、補正された立体映像を符号化して所定より小さなサイズの符号化データを生成する符号化部とを有することが好ましい。
【０００９】
また、本発明は、前記立体映像補正処理部の構成として、補正処理を途中で中断することが可能であり、前記中断された状態から補正処理が継続可能となるよう、必要な情報を保存可能とすることが好ましい。
また、本発明は、前記著作権制御情報には、３Ｄコンテンツの複製もしくは編集の可否を示す再配布禁止の情報が含まれることが好ましい。
また、本発明は、前記著作権制御情報生成部を、前記再配布禁止の情報が示す３Ｄコンテンツの複製もしくは編集の可否をユーザの操作により選択可能に構成することが好ましい。
【００１０】
また、本発明は、前記所定の情報として、再配布禁止の情報もしくは立体映像識別情報を有することが好ましい。
また、本発明は、入力された複数あるいは１つのファイルからなる立体画像を補正処理し、撮影された立体映像を見易くするための立体映像処理装置において、ファイル入力部と、撮影された立体映像に補正処理を行う立体映像補正処理部と、前記補正処理により得られた補正画像を符号化して符号化データを生成する符号化部とを有し、前記符号化部は、生成する符号化データのサイズが所定よりも小さくなるように符号化のパラメータを制御することが好ましい。
【００１１】
また、本発明は、前記符号化部において、生成する符号化データサイズの上限である所定のサイズは、立体映像装置に対応して一意に決定されることが好ましい。
また、本発明は、前記符号化部において、生成する符号化データが所定のサイズより小さくなるように符号化のパラメータ制御する機能の入切をユーザが指定できることが好ましい。
【００１２】
また、本発明は、前記３Ｄ補正画像生成部において、符号化データが所定のサイズ以下となるパラメータの範囲で、ユーザが画質を指定可能となることが好ましい。
また、本発明は、入力される立体画像が左右を並列に並べて１つのファイルとすることが好ましい。
【００１３】
また、本発明は、入力される立体映像が左右の別々のファイルからなり、前記ファイル入力部において、前記左右のファイルが同時に入力された場合に、ファイル名に所定パターンを有するものを例えば左側の画像とし、それ以外のものを右側の画像とすることが好ましい。また、左右の画像が逆に位置するものであってもよい。
【００１４】
また、本発明は、前記所定パターンとして、“Ｌｅｆｔ”または“Ｒｉｇｈｔ”という文字情報あるいはこれに類する文字情報を含むことが好ましい。
また、本発明は、前記ファイル入力部において、前記左右のファイル名に所定パターンが見つからない場合、ファイル名から得られる情報により所定の順番に並べ、先側を左画像、後側を右画像とすることが好ましい。
【００１５】
また、本発明は、入力された複数のファイルの中から左右対象の一対のファイルを検出するファイル選択部を備えることが好ましい。
また、本発明は、立体画像の処理を、一つの立体画像が入力された場合は対話モードで行い、複数の立体画像が入力された場合は連続的に処理する連続処理モードで行うようにすることが好ましい。
【００１６】
また、本発明は、立体映像の処理として、複数の立体映像が入力された場合にも対話モードで行われ、一つの立体画像の処理が終了する度に、次の処理を行うか否かをユーザが指示することが好ましい。
【００１７】
また、本発明は、立体画像の処理を、入力データにパラメータファイルが含まれている場合には連続処理モードで行い、パラメータファイルが含まれない場合には対話処理モードで行うことが好ましい。
また、本発明は、立体映像の処理として、入力されたファイル名のリストもしくは現在の処理状況もしくはその両者を処理中に表示することが好ましい。
【００１８】
【発明の実施の形態】
以下、本発明の実施の形態について図面を参照して詳細に説明する。
［実施形態１］
図１〜図６は本発明の実施形態１に係る立体映像処理装置であって、図１は本発明の実施形態１に係る立体映像処理装置の構成を示すブロック図、図２は前記立体映像処理装置のファイル入力部に著作権保護されたコンテンツが入力された場合の説明図、図３は前記立体映像処理装置の３Ｄ補正画像生成部の構成を示すブロック図、図４は前記３Ｄ補正処理部の動作を示す説明図、図５は前記立体映像処理装置の著作権制御情報生成部の動作を示す説明図、図６は前記立体映像処理装置の著作権制御情報付加部で生成する３Ｄコンテンツの構成を示す説明図である。
【００１９】
実施形態１の立体映像処理装置１００は、図１に示すように、ファイル入力部１０１、３Ｄ補正画像生成部１０２、パラメータ１０３、著作権制御情報結合部１０４、著作権制御情報生成部１０５を有して構成されている。
【００２０】
前記ファイル入力部１０１は、入力された立体画像である右画像及び左画像のファイルを読み込み、これに著作権制御情報、３Ｄ識別情報あるいはその両方が含まれているかどうかを判定するものである。
【００２１】
前記著作権制御情報には、そのファイルに含まれる右画像及び左画像をコピーしたり編集したりすることが不可であることを示す情報が含まれる。また、その他の情報として、前記右画像および左画像の閲覧可能な期間や、コピー可能であってもコピーの回数を制限するための回数情報、著作権保持者の情報などを含んだものであっても良い。
【００２２】
前記３Ｄ識別情報は、そのファイルに立体映像を構成する右画像および左画像が含まれることを示す情報である。尚、この立体映像処理装置１００においては、出力する符号化データに該３Ｄ識別情報を付加するため、既に補正処理が施されていることを示す情報でもある。
【００２３】
入力される情報に前述した著作権制御情報や３Ｄ識別情報が含まれている場合には、図２に示すように、図ユーザに編集不可である旨を警告表示１１０により警告して何も出力せず、以降の動作は行われない。そうでない場合は、入力された右画像及び左画像を３Ｄ補正画像生成部１０２へ出力する。
含まれる情報が３Ｄ識別情報のみの場合は、以後の補正動作を行っても良い。これにより、既に補正処理した画像の確認が可能となる。
【００２４】
前記３Ｄ補正画像生成部１０２は、図３に示すように、撮影された立体映像を補正する立体映像補正処理部、いわゆる３Ｄ補正処理部１０２ａと、補正された立体映像を符号化して符号化データを生成する符号化部１０２ｂとを備えている。
【００２５】
前記３Ｄ補正画像生成部１０２では、図４（ａ）に示すように入力された右画像と左画像の水平位置が一致していない場合には、図４（ｂ）に示すように右画像と左画像の水平位置を上下方向に補正して、立体表示システムで立体感を得易くなるようにされている。
【００２６】
前述した補正処理を行うためには、撮影に使用したカメラの焦点距離や、３Ｄ表示の基準になるＺＤＰ（Ｚｅｒｏ　Ｄｅｐｔｈ　Ｐｌａｎｅ）などの情報がユーザから入力される。
【００２７】
前記３Ｄ補正処理部１０２ａにおいて、ユーザが入力した補正に必要なパラメータ１０３を用いて前述した補正処理が行われる。ユーザ入力されたパラメータ１０３は外部に保存され、次回処理時にデフォルト値として読み出される。また、パラメータ１０３をユーザ毎に別々に用意すれば、ユーザ語とに異なるデフォルト値を設定できる。パラメータ１０３の例として、ファイルやＷｉｎｄｏｗｓ（登録商標）のレジストリなどが考えられる。
【００２８】
こうして補正処理された画像は、入力画像のファイルサイズを削減するため、符号化部１０２ｂにて冗長度圧縮される。圧縮の程度はユーザにより指定された画質尺度に基づき決定される。
【００２９】
圧縮の方式として、ＩＳＯ／ＩＥＣ　ＪＰＥＧやＭＰＥＧなどの国際標準方式が考えられる。こうした方式を使用する場合、前記画質尺度とは、量子化の粗さで決定できる。尚、圧縮方式はこれらに限定されるものではない。また、圧縮処理を行わずにそのまま出力しても良い。
【００３０】
前記著作権制御情報生成部１０５は、ユーザ指示に基づき、既に説明した著作権制御情報を生成するものである。
【００３１】
ユーザ指示の方法として、例えば、図５（ａ）に示すように、入力画面１２０に画質を調整するためのスライドバー１２１と著作権制御情報を生成するか否かをチェックするためのチェックボックス１２２を設け、該チェックボックスにマークをしてＯＮ／ＯＦＦするようにした方法が考えられる。
図中の符号１２３は、画像ファイルの保存処理を行うためのスイッチである。
【００３２】
尚、著作権制御情報によりコピーや編集が不可となる場合は、図５（ｂ）に示すように、保存すると以後の編集が不可となる旨を知らせる警告表示１３０を表示しても良い。
また、前記警告表示１３０による警告は、前述のチェックボックス１２２へのマーク時でなく、著作権制御情報有の状態で保存しようとした時点で行うようにするものであっても良い。
【００３３】
前記著作権制御情報結合部１０４は、図６に示すように、生成された著作権制御情報および３Ｄ識別情報をコンテンツに付加し、フォーマットで著作権保護されたコンテンツを生成する。
生成されたコンテンツは、ファイルに保存される。出力ファイル名はユーザにより指定するか、もしくは以下に示すのように入力ファイル名から自動的に決定される。
自動生成の場合、例えば、入力が「ＸＸＸＸ．ｊｐｇ」ならば、出力を「ＸＸＸＸ３Ｄ．ｊｐｇ」などとする。また、３Ｄコンテンツであること表す所定の拡張子に変更し、例えば「ＸＸＸＸ．ｓｔｊ」としても良い。
【００３４】
以上のように構成したので、実施形態１の立体映像処理装置１００によれば、立体画像に著作権制御情報を組み込むことが可能となる。また、既に補正処理された立体画像を再度補正処理することは無くなる。
【００３５】
次に、本発明の実施形態２について図面を参照して詳細に説明する。
［実施形態２］
図７は本発明の実施形態２に係る立体映像処理装置の３Ｄ補正画像生成部の構成を示すブロック図である。尚、図中の前述した実施形態の部品と相当する部分は、同じ符号を付するとともに説明を省略する。
【００３６】
実施形態２の立体映像処理装置２００は、前述した実施形態１の立体映像処理装置１００のうち、３Ｄ補正画像生成部２０２の動作のみ異なるように構成したものである。
【００３７】
前記補正画像生成部２０２は、図７に示すように、実施形態１の３Ｄ補正処理部１０２ａと符号化部１０２ｂに相当する３Ｄ補正処理部２０２ａ、符号化部２０２ｂと、画質制御部２０３、サイズ判定部２０４、スイッチ２０５および上限値設定部２０６を有して構成されている。
【００３８】
前記３Ｄ補正処理部２０２ａは、第１の実施形態で説明した補正処理を行うものである。
前記符号化部２０２ｂは、所定の画質制御パラメータを用いて入力画像を圧縮するものである。
【００３９】
前記サイズ判定部２０４は、符号化されたデータのサイズが所定のサイズを超えた場合、スイッチ２０５をＯＦＦし、画質制御部２０３にデータサイズが所定値を超えたことを通知するものである。所定サイズ以下ならば、スイッチをＯＮとし、符号化したデータが出力される。
【００４０】
前記所定のサイズは、前記上限値設定部２０６で設定される。設定される上限値は出力される立体映像アプリケーション毎に決められ、通常、立体映像を表示する立体ディスプレイが選択されると一意に決められる。
【００４１】
ユーザによる上限値設定方法として、例えば図１７に示すように、表示装置選択領域をマウスで選択し、プルダウンメニューから表示に用いる立体ディスプレイを選択することで設定できる。
【００４２】
前記画質制御部２０３は、図７に示すように、ユーザから入力される画質パラメータに基づき、３Ｄ補正処理部２０２ａにて量子化幅などの画質制御パラメータを生成して符号化部２０２ｂに入力する。そして、サイズ判定部２０４から符号化した結果が所定サイズを超えたことが通知された場合、画質制御部２０３にて画質制御パラメータを符号化データのサイズが小さくなるように修正される。また、図５（ａ）チェックボックス１２４によりユーザが本機能のＯＮ／ＯＦＦができても良い。切の場合、前記スイッチ２０５が常にＯＮとなる。
【００４３】
画質パラメータは、図５（ａ）に示すように、スライドバー１２１にて入力しても良い。
【００４４】
画像パラメータの入力の具体例を以下に示す。
図１８は、スライドバー１２１を右端に動かした場合に所定サイズ以下の最高画質となる例であり、図１８の（ａ）は、符号化データのサイズ制限を行わない状態で、設定値が所定サイズより大きい状態でユーザが符号化データのサイズを制限した場合のスライドバーの動きを示す説明図、（ｂ）は、符号化データのサイズ制限を行わない状態で、設定値が所定サイズより小さい場合に、ユーザが符号化データのサイズを制限した場合のスライドバーの動きを示す説明図である。
【００４５】
図１９は、符号化データサイズの制限中において、所定サイズに相当する位置より右に動かせなくする場合の例であり、図１９の（ａ）は設定値が所定サイズより大きい状態でユーザが符号化データのサイズを制限した場合のスライドバーの動きを示す説明図、（ｂ）は設定値が所定サイズより小さい場合に、ユーザが符号化データのサイズを制限した場合のスライドバーの動きを示す説明図である。
【００４６】
図２０は、所定サイズに相当する位置より右に動かせなくなるよう、スライドバー自体の大きさが変更される場合の例であり、図２０の（ａ）は設定値が所定サイズより大きい状態でユーザが符号化データのサイズを制限した場合のスライドバーの動きを示す説明図、（ｂ）は設定値が所定サイズより小さい場合に、ユーザが符号化データのサイズを制限した場合のスライドバーの動きを示す説明図である。
【００４７】
尚、本実施形態では、スライドバー１２１により画像パラメータを決定するようにしているが、本発明はこれに限定されるものではなく、例えば、ボリュームやボタンスイッチなどにより段階的に調整可能にするものであっても良い。
【００４８】
以上のように構成したので、実施形態２の立体映像処理装置２００によれば、３Ｄ補正画像生成部２０２における３Ｄ補正処理により生成される画像データのサイズが所定値以下となるようにすることが可能となる。
【００４９】
次に、本発明の実施形態３について図面を参照して詳細に説明する。
［実施形態３］
図８の（ａ）は本発明の実施形態３に係る立体映像処理装置の構成を示すブロック図、（ｂ）は前記立体映像処理装置のファイル入力部の動作を示す説明図、図９は前記立体映像処理装置によるファイル操作を示す説明図である。
尚、図中の前述した実施形態の部品と相当する部分は、同じ符号を付するとともに説明を省略する。
【００５０】
実施形態３の立体映像処理装置３００は、図８（ａ）に示すように、前述した実施形態１の立体映像処理装置１００のうち、ファイル入力部３０１の動作のみ異なるように構成したものである。
【００５１】
実施形態１では、入力される立体映像は左画像および右画像を１つの画像にまとめていたが、実施形態２では、これを左画像および右画像の２枚の画像に分けた形式にしたものである。
【００５２】
ファイル入力部３０１は、図８（ｂ）に示すように、別ファイルの右画像、左画像を入力し、ファイル並べ替え部３０１ａを介して３Ｄ補正画像生成部３０２へ出力する。ここで、ファイルの入力をドラック＆ドロップなどで行う場合、ファイル名に「Ｌ」や「Ｌｅｆｔ」など所定の文字情報が含まれている方を左画像として、もう一方を右画像とする。
【００５３】
即ち、図９に示すように、入力画像３１０および入力画像３２０を補正処理プログラムにドラック＆ドロップすると、入力画像３１０のファイル名に「Ｌｅｆｔ」という文字が含まれているため、こちらを左画像と認識することができる。
こうすることで、左右の画像を確認しての入力処理が不要となる。
【００５４】
尚、ファイル名に所定の文字を含める代わりに指定フォルダに保存される画像を左画像、別の指定フォルダに保存されている画像を右画像としても良い。
【００５５】
以上のように構成したので、実施形態３の立体映像処理装置３００によれば、左右の画像が別ファイルからなる立体画像の左右の画像を指定する必要が無くなり、かつ人間のケアレスミスによる左右の取り違いを無くすことができる。
また、同一の補正パラメータで補正処理する場合に、複数のファイルをドラック＆ドロップにより一度に入力し、左右を自動認識しての連続処理させることも可能となる。
【００５６】
次に、本発明の実施形態４について図面を参照して詳細の説明する。
［実施形態４］
図１０は本発明の実施形態４に係る立体映像処理装置の構成を示すブロック図である。尚、図中の前述した実施形態の部品と相当する部分は、同じ符号を付するとともに説明を省略する。
【００５７】
実施形態４の立体映像処理装置４００は、図１０に示すように、前述した実施形態３の立体映像処理装置３００に、ファイル選択部４０６を付加して構成したものである。
【００５８】
ファイル選択部４０６は、入力された複数ファイルのうち、左右のペアがあるもののみ、ファイル入力部に出力するようにされている。
即ち、図１１に示すように、３つの入力画像４１０、４２０、４３０を補正処理プログラムにドラック＆ドロップする場合、入力画像４２０、４３０は夫々「Ｌｅｆｔ」と「Ｒｉｇｈｔ」の文字情報が対応してペアとなり、入力画像４１０のみ対応する画像が無いため、処理されない。
【００５９】
以上のように構成したので、実施形態４の立体映像処理装置４００によれば、左右画像のペアのファイル名を正しく入力しなくとも、立体補正処理を連続して実施することができる。
ここで言う“正しく入力しない”とは、例えば、Ｗｉｎｄｏｗｓ（登録商標）などのオペレーティングシステム上で、入力画像のアイコンを複数選択して補正ソフトにドラック＆ドロップした場合に、間違ったファイルが含まれて選択された場合を指す。
【００６０】
前記立体映像処理装置４００では、間違って左右画像のペアのファイル名を指定できなくとも、処理を中断せずにペアが取れた画像のみ処理をすることができる。また、対応するペアの画像ファイルが選択されない場合、対応するファイルを検索するようにしたものであっても良い。
【００６１】
次に、本発明の実施形態５について図面を参照して詳細の説明する。
［実施形態５］
図８は、実施形態３とともに実施形態５に係る立体映像処理装置の構成を示すブロック図である。尚、図中の前述した実施形態の部品と相当する部分は、同じ符号を付するとともに説明を省略する。
【００６２】
実施形態５に係る立体映像処理装置５００は、ファイル入力部５０１を除き、実施の形態３と同様の構成を有している。従って、図８（ａ）を参照して説明するとともに、図中の前述した実施形態の部品と相当する部分は、同じ符号を付するとともに説明を省略する。
【００６３】
実施形態５に係る立体映像処理装置５００のファイル入力部５０１は、入力された右画像・左画像の入力ファイル名に、左右を区別するための識別情報が含まれていない場合には、一方を強制的に右画像にする。
【００６４】
両方のファイルが同時に入力される場合は、ファイル名の先頭文字からのアルファベット順で決めても良い。このようにした場合、図１２（ａ）に示すように、指定した左右が間違っている可能性があるため、画面に表示される左右入替えボタン５１０を押すことで、図１２（ｂ）に示すように、左右の画像を交換できるようにしたものである。
【００６５】
以上のように構成したので、実施形態５の立体映像処理装置５００によれば、左右画像の自動識別に失敗しても簡単に左右の入替えが可能となる。
【００６６】
次に、本発明の実施形態６について図面を参照して詳細の説明する。
［実施形態６］
図１３は本発明の実施形態６に係る立体映像処理装置の構成を示すブロック図、図１４は実施形態６の立体映像処理装置によるファイル操作を示す説明図である。
尚、図中の前述した実施形態の部品と相当する部分は、同じ符号を付するとともに説明を省略する。
【００６７】
実施形態６の立体映像処理装置６００は、ファイル入力部６０１がモード選択情報を３Ｄ補正画像生成部６０２に入力する点を除き、実施の形態３と同様に構成されている。
【００６８】
入力するファイルは、左右の画像が別々の形式のものでも、左右を結合して１つになった形式のものでも良い。以下の説明では、左右が別ファイルの場合について説明する。
【００６９】
ファイル入力部６０１は、入力された立体画像が左右別ファイルから構成される場合は左右の組数が、１枚の画像に左右画像が含まれる場合にはファイルの数によりモード選択情報を切り替えるようにされている。
【００７０】
この画像処理モードは対話処理モードと連続処理モードより選択される。
対話処理モードでは、図２１に示すように、補正処理がユーザからのパラメータ入力を対話的に段階を経て行われる。例えば、立体画像が入力されると、まず処理Ａに必要なパラメータを入力するための処理Ａ画面６０１Ａが表示され、引き続き処理Ｂ画面６０１Ｂ、処理Ｃ画面６０１Ｃが入力される。
【００７１】
一方、連続処理モードでは、前記各画面を表示することなく自動的に必要なパラメータが入力され、処理が行われる。自動入力されるパラメータとして、所定の値もしくはパラメータファイルに格納された値を用いても良い。また、前回入力された値を用いても良い。
【００７２】
尚、対話処理モードの場合、図２１のように途中の画面でデータを保存できるようにしても良い。このように構成することで、次回処理時、前記途中で保存されたデータを読み込むと、保存時点の作業を再開できる。
また、対話処理モードに自動保存機能を備えても良い。このように構成することで、アプリケーションに不具合が生じて自動終了した場合であっても、最小の時間ロスで作業を再開できる。
【００７３】
また、保存ファイルには、作業継続に必要な情報が保存されるが、その一部の情報をファイル名や拡張子に含めても良い。例えば、処理Ａ画面で途中保存した場合、拡張子に“Ａ”を含んだ「ＸＸＸＸ．ＯｐＡ」などのファイル名となる。
【００７４】
入力される左右映像が１組の場合には対話処理モードを選択し、複数組入力される場合には連続処理モードを選択し、３Ｄ補正画像生成部６０２に入力される。
即ち、図９に示すように左右１組の入力画像３１０、３２０をドラック＆ドロップすると対話処理モードとなり、ユーザ入力画面が表示される。
【００７５】
一方、図１４に示すように、左右２組の入力画像６１０と６２０、６３０と６４０をドラック＆ドロップすると連続処理モードとなり、まず、入力画像６１０および６２０が補正処理され、次いで入力画像６３０および６４０が処理される。この間、特にユーザ入力画面は表示されない。
【００７６】
逆に連続処理モードは、単にファイル入力の手間を省く目的で対話処理を行うものであっても良い。この場合、補正処理が終了した時点で、次のファイルを処理するかどうかをユーザが指示することで処理が継続される。
【００７７】
また、３Ｄ補正画像生成部６０２はユーザ指定のモードで動作可能とされている。補正処理のパラメータ１０３は、処理の度に外部パラメータファイルから読み出されるため、連続モードが選択された場合には既に保存されているパラメータが用いられる。
【００７８】
また、連続処理中に図２２に示すような、経過表示を行うものであっても良い。この場合に表示する情報としては、入力されたファイルの一覧に加え、処理状況、処理済か否かなどの情報が考えられる。
図中の符号２００１は処理状況を示す表示部、２００２は進捗状況を示す表示部、２００３は処理されるファイル名を示す表示部である。
【００７９】
以上のように構成したので、実施形態６の立体映像処理装置６００によれば、簡単に対話モードまたは連続処理モードに切り替えることができ、処理の効率を著しく向上することができる。また、現在進行中の処理の状況を表示することで、状況の把握が容易となるとともに、誤ったファイルが入力された場合でも途中で中断することが可能となる。
【００８０】
次に、本発明の実施形態７について図面を参照して詳細の説明する。
［実施形態７］
図１５は本発明の実施形態７に係る立体映像処理装置の構成を示すブロック図、図１６は実施形態７の立体映像処理装置によるファイル操作を示す説明図である。尚、図中の前述した実施形態の部品と相当する部分は、同じ符号を付するとともに説明を省略する。
【００８１】
実施形態７の立体映像処理装置７００は、図１５に示すように、実施の形態５に示した構成のうち、３Ｄ補正処理部が処理に用いる補正処理パラメータをファイル入力部７０１の入力に含める点が異なる。
【００８２】
入力するファイルは左右の画像が別々の形式でも、左右を結合して１つになった形式でも良いが、以下の説明では左右が別ファイルの場合を説明する。
ファイル入力部７０１は、入力の一部に３Ｄ補正処理のパラメータが含まれるとモード選択情報をして連続処理モードとなり、そうでなければ対話処理モードとなる。
【００８３】
即ち、図１６に示すように、ドラック＆ドロップする入力ファイルうち、３Ｄ補正処理パラメータファイル７１０が含まれると連続処理モードが選択される。
入力に３Ｄ補正処理パラメータが含まれるか否かの判別は、パラメータを保持するファイルの拡張子が特定のもの、例えば、「．ｃｆｇ」であれば、拡張子を見ることで判定できる。あるいは、ファイルの内容を解析して判定しても良い。入力される補正パラメータは、パラメータ７０３と同一形式で無くとも良い。この場合、３Ｄ補正処理に不足するパラメータはパラメータ７０３に示される値が用いられる。
【００８４】
入力された３Ｄ補正処理パラメータはそのままスルーされて、３Ｄ補正画像生成部７０２に入力される。
前記３Ｄ補正画像生成部７０２は、入力されるモード選択情報に基づいて処理が行われ、連続処理モードの場合には、前記３Ｄ補正処理パラメータを用いて補正処理が行われる。
【００８５】
以上のように構成したので、実施形態７の立体映像処理装置７００によれば、３Ｄ補正処理で複数回同じパラメータ入力が必要な場合に、パラメータ入力を省くことができ、処理効率の向上を図ることができる。
【００８６】
【発明の効果】
以上説明したように、本発明の立体映像処理装置によれば、撮影された立体画像の補正を容易に行うことができるという優れた効果を奏し得る。
詳しくは、本発明によれば、入力された立体画像を補正処理し、撮影された立体映像を見易くするための立体映像処理装置において、入力された立体映像に所定の情報が含まれる場合に、その旨を告知するファイル入力部を備えることで、既に補正処理した画像の確認が可能となり、補正処理された立体画像を再度補正処理することは無くなる。
また、撮影された立体映像を補正後に符号化して符号化データを生成することで、出力画像のファイルサイズを削減することができる。
さらに、立体映像の著作権制御情報を生成する著作権制御情報生成部と、前記生成された著作権制御情報と前記符号化データとを結合し、立体映像符号化データを出力する著作権制御情報結合部とを備えることで、立体画像に著作権制御情報を組み込むことができる。
【００８７】
また、本発明によれば、前記３Ｄ補正画像生成部は、撮影された立体映像を補正する立体映像補正処理部と、補正された立体映像を符号化して所定より小さなサイズの符号化データを生成する符号化部とを有することで入力画像のファイルサイズを削減することができる。
【００８８】
また、本発明によれば、対話モードで補正処理を行う場合、途中の画面でデータを保存できる機能を備えることで、次回処理時、前記途中で保存されたデータを読み込むと保存時点の作業を再開できる。また、自動保存機能を備えることで、アプリケーションが不具合で終了しても最小の時間ロスで作業を再開できる。
【００８９】
また、本発明によれば、前記著作権制御情報に、３Ｄコンテンツの複製もしくは編集の可否を示す再配布禁止の情報が含まれる場合に、複写や編集を禁止することができる。
【００９０】
また、本発明によれば、前記著作権制御情報生成部は、前記再配布禁止の情報が示す３Ｄコンテンツの複製もしくは編集の可否をユーザの操作により選択可能とすることで、ユーザの要求に応じて３Ｄコンテンツの複写や編集を可能にすることができる。
【００９１】
また、本発明によれば、前記所定の情報は、再配布禁止の情報もしくは立体映像識別情報を有することで、立体画像に著作権制御情報や立体映像識別情報を組み込むことができる。
【００９２】
また、本発明によれば、入力された複数あるいは１つのファイルからなる立体画像を補正処理し、撮影された立体映像を見易くするための立体映像処理装置において、ファイル入力部と、撮影された立体映像に補正処理を行う立体映像補正処理部と、前記補正処理により得られた補正画像を符号化して符号化データを生成する符号化部とを有し、前記符号化部は、生成する符号化データのサイズが所定よりも小さくなるように符号化のパラメータを制御することで、３Ｄ補正画像生成部における３Ｄ補正処理により生成される画像データのサイズが、所定値以下になるようにすることができる。
【００９３】
また、本発明によれば、前記３Ｄ補正画像生成部において、立体映像表示装置と生成する符号化データサイズの上限である所定のサイズを対応付けることで、立体映像装置毎に最適な所定サイズを設定できる。
【００９４】
また、本発明によれば、前記３Ｄ補正画像生成部は、生成する符号化データが所定のサイズより小さくなるように符号化のパラメータ制御する機能の入切をユーザが指定できるので、より高画質な立体映像符号化データを生成できる。
【００９５】
また、本発明によれば、３Ｄ補正画像生成部は、符号化データが所定のサイズ以下となるパラメータの範囲で、ユーザが画質を指定可能とすることができる。
また、本発明によれば、入力される立体画像は、左右を並列に並べた１つのファイルとすることで、左右の対応付けが不要になり、ファイルの管理が容易となる。
【００９６】
また、本発明によれば、入力される立体映像は、左右の別々のファイルからなり、前記ファイル入力部は、前記左右のファイルが同時に入力された場合に、ファイル名に所定パターンを有するものを左右何れか一方側の画像とし、それ以外のものを他方側の画像とすることで、左右の画像を確認した入力処理が不要となる。
【００９７】
また、本発明によれば、前記所定パターンは、“Ｌｅｆｔ”または“Ｒｉｇｈｔ”という文字情報あるいはこれに類する文字情報を含むことで、左右の画像を指定すること無く入力処理することができる。
【００９８】
また、本発明によれば、前記ファイル入力部は、前記左右のファイル名に所定パターンが見つからない場合、ファイル名から得られる情報により所定の順番に並べ、先側を左画像、後側を右画像とすることで、左右を自動認識しての連続処理させることも可能となる。
【００９９】
また、本発明によれば、入力された複数のファイルの中から左右対象の一対のファイルを検出するファイル選択部を備えることで、左右画像のペアのファイル名を正しく入力しなくとも、立体補正処理を連続して実施することができる。
【０１００】
また、本発明によれば、立体画像の処理は、一つの立体画像が入力された場合は対話モードで行なわれ、複数の立体画像が入力された場合は連続的に処理する連続処理モードで行なわれることで、簡単に対話モードまたは連続処理モードに切り替えることができ、処理の効率を著しく向上することができる。
【０１０１】
また、本発明によれば、立体映像の処理は、複数の立体映像が入力された場合にも対話モードで行われ、一つの立体画像の処理が終了する度に、次の処理を行うか否かをユーザが指示することで、処理の効率を著しく向上することができる。
【０１０２】
また、本発明によれば、立体画像の処理は、入力データにパラメータファイルが含まれている場合には連続処理モードで行なわれ、パラメータファイルが含まれない場合には対話処理モードで行なわれることで、３Ｄ補正処理で複数回同じパラメータ入力が必要な場合に、パラメータ入力を省くことができ、処理効率の向上を図ることができる。
【０１０３】
また、本発明によれば、立体映像の処理は、入力されたファイル名のリストもしくは現在の処理状況もしくはその両者を処理中に表示することで、状況の把握が容易となる上、誤ったファイルが入力された場合にも途中で中断することも可能となる。
以上のように著しい効果を奏することができる。
【図面の簡単な説明】
【図１】本発明の実施形態１に係る立体映像処理装置の構成を示すブロック図である。
【図２】前記立体映像処理装置のファイル入力部に著作権保護されたコンテンツが入力された場合の説明図である。
【図３】前記立体映像処理装置の３Ｄ補正画像生成部の構成を示すブロック図である。
【図４】前記３Ｄ補正処理部の動作を示す説明図である。
【図５】（ａ）は前記立体映像処理装置の著作権制御情報生成部の入力画面を示す説明図、（ｂ）は警告画面を示す説明図である。
【図６】前記立体映像処理装置の著作権制御情報付加部で生成する３Ｄコンテンツの構成を示す説明図である。
【図７】本発明の実施形態２に係る立体映像処理装置の３Ｄ補正画像生成部の構成を示すブロック図である。
【図８】（ａ）は本発明の実施形態３に係る立体映像処理装置の構成を示すブロック図、（ｂ）は前記立体映像処理装置のファイル入力部の動作を示す説明図である。
【図９】実施形態３の立体映像処理装置によるファイル操作を示す説明図である。
【図１０】本発明の実施形態４に係る立体映像処理装置の構成を示すブロック図である。
【図１１】実施形態４の立体映像処理装置によるファイル操作を示す説明図である。
【図１２】（ａ）は本発明の実施形態５において指定したファイルの左右が間違って入力された状態を示す説明図、（ｂ）は前記左右のファイルを入替え操作した状態を示す説明図である。
【図１３】本発明の実施形態６の立体映像処理装置の構成を示すブロック図である。
【図１４】本発明の実施形態６の立体映像処理装置によるファイル操作を示す説明図である。
【図１５】本発明の実施形態７の立体映像処理装置によるファイル操作を示す説明図である。
【図１６】本発明の実施形態７の立体映像処理装置によるファイル操作を示す説明図である。
【図１７】本発明の実施形態２に係る立体映像処理装置の上限値設定方法を示す説明図である。
【図１８】本発明の実施形態２に係る立体映像処理装置のスライドバーによる画質調整を示す説明図である。
【図１９】前記スライドバーによる画質調整においてスライドバーを所定サイズの位置より右側（図中）に移動不可とした場合の説明図である。
【図２０】前記スライドバーによる画質調整においてスライドバーの大きさを変化させた場合の説明図である。
【図２１】本発明の実施形態６に係る立体映像処理装置の途中経過を保存する機能について説明した図である。
【図２２】本発明の実施形態６の立体映像処理装置の状態表示の説明図である。
【符号の説明】
１００、２００、３００、４００、５００、６００、７００　立体映像処理装置１０１、３０１、５０１、６０１、７０１　ファイル入力部
１０２、２０２、３０２、６０２、７０２　補正画像生成部
１０２ａ、２０２ａ　補正処理部
１０２ｂ、２０２ｂ　符号化部
１０３　パラメータ
１０４　著作権制御情報結合部
１０５　著作権制御情報生成部
１１０、１３０　警告表示
１２０　入力画面
２０３　画質制御部
２０４　サイズ判定部
２０５　スイッチ
２０６　上限値設定部
３０１ａ　ファイル並べ替え部
３１０、３２０、４１０、４２０、６１０、６２０、６３０、６４０　入力画像４０６　ファイル選択部
７０３　補正処理パラメータ
７１０　補正処理パラメータファイル

Claims

入力された複数あるいは１つのファイルからなる立体画像を補正処理し、撮影された立体映像を見易くするための立体映像処理装置において、
入力された立体映像に所定の情報が含まれる場合に、その旨を告知するファイル入力部と、
撮影された立体映像に補正処理を行い、得られた補正画像を符号化して符号化データを生成する３Ｄ補正画像生成部と、
立体映像の著作権制御情報を生成する著作権制御情報生成部と、
前記生成された著作権制御情報と前記符号化データとを結合し、立体映像符号化データを出力する著作権制御情報結合部とを備えることを特徴とする立体映像処理装置。
前記３Ｄ補正画像生成部は、撮影された立体映像を補正する立体映像補正処理部と、補正された立体映像を符号化して所定より小さなサイズの符号化データを生成する符号化部とを有することを特徴とする請求項１に記載の立体映像処理装置。
前記立体映像補正処理部は、補正処理を途中で中断することが可能であり、前記中断された状態から補正処理が継続可能となるよう、必要な情報を保存可能であることを特徴とする請求項２に記載の立体映像処理装置。
前記著作権制御情報には、３Ｄコンテンツの複製もしくは編集の可否を示す再配布禁止の情報が含まれることを特徴とする請求項１乃至３のうちの何れか一項に記載の立体映像処理装置。
前記著作権制御情報生成部は、前記再配布禁止の情報が示す３Ｄコンテンツの複製もしくは編集の可否をユーザの操作により選択可能とすることを特徴とする請求項４に記載の立体映像処理装置。
前記所定の情報は、再配布禁止の情報もしくは立体映像識別情報を有することを特徴とする請求項１乃至５のうちの何れか一項に記載の立体映像処理装置。
入力された複数あるいは１つのファイルからなる立体画像を補正処理し、撮影された立体映像を見易くするための立体映像処理装置において、
ファイル入力部と、
撮影された立体映像に補正処理を行う立体映像補正処理部と、
前記補正処理により得られた補正画像を符号化して符号化データを生成する符号化部とを有し、
前記符号化部は、生成する符号化データのサイズが所定よりも小さくなるように符号化のパラメータを制御することを特徴する立体映像処理装置。
前記符号化部において、生成する符号化データサイズの上限である所定のサイズは、立体映像装置に対応して一意に決定されることを特徴とする請求項７に記載の立体映像処理装置。
前記符号化部は、生成する符号化データが所定のサイズより小さくなるように符号化のパラメータ制御する機能の入切をユーザが指定できることを特徴とする請求項７乃至８のうちの何れか一項に記載の立体映像処理装置。
前記符号化部は、符号化データが所定のサイズ以下となるパラメータの範囲で、ユーザが画質を指定可能となることを特徴とする請求項２、７、８、及び９のうちの何れか一項に記載の立体映像処理装置。
入力される立体画像は、左右を並列に並べて１つのファイルであることを特徴とする請求項１乃至１０のうちの何れか一項に記載の立体映像処理装置。
入力される立体映像は、左右の別々のファイルからなり、前記ファイル入力部は、前記左右のファイルが同時に入力された場合に、ファイル名に所定パターンを有するものを左右何れか一方側の画像とし、それ以外のものを他方側の画像とすることを特徴とする請求項１乃至１０のうちの何れか一項に記載の立体映像処理装置。
前記所定パターンは、“Ｌｅｆｔ”または“Ｒｉｇｈｔ”という文字情報あるいはこれに類する文字情報を含むことを特徴とする請求項１２に記載の立体映像処理装置。
前記ファイル入力部は、前記左右のファイル名に所定パターンが見つからない場合、ファイル名から得られる情報により所定の順番に並べ、先側を左画像、後側を右画像とすることを特徴とする請求項１２または１３に記載の立体映像処理装置。
入力された複数のファイルの中から左右対象の一対のファイルを検出するファイル選択部を備えることを特徴とする請求項１２乃至１４のうちの何れか一項に記載の立体映像処理装置。
立体画像の処理は、一つの立体画像が入力された場合は対話モードで行なわれ、複数の立体画像が入力された場合は連続的に処理する連続処理モードで行なわれることを特徴とする請求項１乃至１５のうちの何れか一項に記載の立体映像処理装置。
立体映像の処理は、複数の立体映像が入力された場合にも対話モードで行われ、一つの立体画像の処理が終了する度に、次の処理を行うか否かをユーザが指示する事を特徴とする請求項１乃至１６のうちの何れか一項に記載の立体映像処理装置。
立体画像の処理は、入力データにパラメータファイルが含まれている場合には連続処理モードで行なわれ、パラメータファイルが含まれない場合には対話処理モードで行なわれることを特徴とする請求項１乃至１６のうちの何れか一項に記載の立体映像処理装置。
立体映像の処理は、入力されたファイル名のリストもしくは現在の処理状況もしくはその両者を処理中に表示する事を特徴とする請求項１乃至１８のうちの何れか一項に記載の立体映像処理装置。