JPH10234057A - 立体映像装置及びこれを含むコンピュータシステム - Google Patents

Abstract

(57)【要約】 【課題】 観察者自ら観察物を回り込んで観る場合に応
じて立体ディスプレイに仮想的に同様な立体感を表示で
きることを課題とする。 【解決手段】 複数の視差画像を用いて立体表示する立
体映像装置において、観察者の視点位置を検知する手段
と、観察者の視点位置をもとに立体ディスプレイを回転
制御する手段を設けたことを特徴とする。また、複数の
視差画像を撮影する立体カメラを具備し、この立体カメ
ラを観察者の視点位置或いは立体ディスプレイの回転角
度に応じて、被観察物の外周を移動制御する手段を設け
たことを特徴とする。複数の視差画像を用いて立体表示
する立体ディスプレイと、ポインティングデバイスを用
いたユーザインターフェースを実装したコンピュータ
と、機械的な制御手段により撮影方向を制御可能な撮影
環境が接続されたコンピュータシステムに於いて、前記
撮影方向を前記ポインティングデバイスを用いることに
より操作することを特徴とする。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明はテレビ、ビデオ、コ
ンピュータモニタ、ゲームマシンなどにおいて立体表示
を行う立体映像装置と、左右の視差画像を撮影する立体
カメラと、立体ディスプレイとコンピュータを接続した
コンピュータシステムに関する。

【０００２】

【従来の技術】立体表示の表示部分に液晶やＣＲＴやプ
ロジェクタといった従来の２次元表示の技術を用いて表
示する装置には、眼鏡を用いて左右像をそれぞれ分離し
て立体視するものや、左右像をストライプ画像合成して
レンチキュラやパララックス・バリヤを通して立体像を
観察するものが代表的である。以下、これら従来例の説
明をする。また、立体ディスプレイはコンピュータと接
続されて使用されることが多いので、コンピュータの使
用環境についても説明を加える。

【０００３】（１）従来のめがね方式立体ディスプレイ
の説明：従来、立体ディスプレイの方式として、右眼用
と左眼用画像に対して偏光状態を異ならせ、偏光めがね
を用いて左右の画像を分離するものがある。その偏光状
態を異ならせるためにディスプレイ側に液晶シャッター
を設け、ディスプレイの表示画像のフィールド信号に同
期させて、偏光状態を切り替え、偏光めがねをかけた観
察者は時分割で片目づつ左右画像を分離して立体視を可
能にする方式が実用化されている。さらに、めがね側に
液晶シャッタを設け、モニタの表示画像に同期させるこ
とで、左右画像の視差画像を生成して観察者に立体視さ
せる等の幾つかの方式も提案・実用化されている。しか
し、これらの方式では観察者は常に立体視用のめがねを
かけねばならないという欠点があった。

【０００４】（２）レンチキュラーレンズ方式の説明：
それに対して、偏光めがねを用いない立体ディスプレイ
として、ディスプレイの前面にレンチキュラーレンズを
設け、空間的に左右の眼に入る画像を分離する方式があ
る。図１８はレンチキュラーレンズを用いた方式の従来
例の説明図である。１５１は液晶ディスプレイで、液晶
の表示画素部１５３はガラス基板１５２，１５４の間に
形成されている。液晶ディスプレイ１５１の表面には、
断面が図示のように半円状で各々紙面に直角方向に延び
るシリンドリカルレンズからなるレンチキュラーレンズ
１５５が設けられており、その焦点面に液晶の表示画素
部１５３が位置するようになっている。

【０００５】表示画素部１５３には図示のようにレンチ
キュラーレンズの一つのピッチに対応して右眼用画像
（黒塗りの部分）、左眼用画像（白抜きの部分）がスト
ライプ状に対となるよう交互に配置されており、レンチ
キュラーレンズ１５５により観察者の右眼Ｅ_R 、左眼Ｅ
_L に光学的に分離して結像され、立体視が可能となる。
図中にはディスプレイの両端と中央部分の右眼用、左眼
用画像の各々を観察できる空間的領域を示してあり、画
面全面にわたって観察者の目（両眼中心距離はｅ）に左
右分離して見える共通領域が、図中の太線部分の立体視
領域１５６である。さらに、この立体視領域１５６に隣
接した領域（不図示）においても、左右分離して立体視
できる領域が存在する。この方式は観察者が特殊な眼鏡
を使用する必要がない上に、不特定多数の観察者がいる
場合の手軽な立体ディスプレイとして使用できる。

【０００６】（３）パララックス・バリヤ方式の説明：
めがね無し立体表示手段としては、前述のレンチキュラ
ーレンズ方式の他に、パララックス・バリヤ方式が代表
的である。以下、このパララックス・バリヤ方式につい
て説明する。

【０００７】パララックス・バリヤ方式については、S.
H.Kaplan,“Theory of Parallax Barriers",J.SMPTE,Vo
l.59,No.7,pp.11-21(1952)に開示されており、複数視点
からの複数の視差画像から左右画像が少なくとも交互に
配列されたストライプ画像を、この画像から所定の距離
だけ離れた位置に設けられた所定の開口部を有するスリ
ット（パララックス・バリヤと呼ばれる）を介して、そ
れぞれの眼でそれぞれの眼に対応した視差画像を観察す
ることにより立体視を行うことができる。

【０００８】更に、２次元画像（一視点画像）表示装置
との両立性を向上させるために、パララックス・バリヤ
を透過型液晶表示素子などにより、電子的に発生させバ
リヤ・ストライプの形状や位置などを電子的に可変制御
するようにした立体表示装置が、特開平３−１１９８８
９号公報、特開平５−１２２７３３号公報に開示されて
いる。

【０００９】図１９は特開平３−１１９８８９号公報に
開示されている立体画像表示装置の基本構成図であり、
画像表示を行う透過型液晶表示装置１０１に、厚さｄの
スペーサー１０２を介して透過型液晶表示素子から成る
電子パララックス・バリヤ１０３を配置している。透過
型液晶表示素子１０１には２方向または多方向から撮像
した視差画像の縦ストライプ画像として表示し、電子式
パララックス・バリヤ１０３には、ＸＹアドレスをマイ
クロコンピュータ１０４等の制御手段で指定することに
より、バリヤ面上の任意の位置にパララックス・バリヤ
パターンを形成し、前記パララックス・バリヤ方式の原
理に従って立体視できる装置である。

【００１０】（４）立体視領域の拡大方法の説明：上述
で説明したレンチキュラ方式やパララックス・バリヤ方
式のように、ストライプ画像を構成し立体視する装置で
は、その立体視できる領域の幅は狭く、観察者が立体視
できる範囲は最大でも両眼中心距離約６５ｍｍの幅の半
分しかない。そのため、観察者は頭の位置を固定するよ
うにして観察する必要があり、非常に見にくいという欠
点があった。それに対して、特開平２−４４９９５号公
報では、この立体視の領域を広くするために、観察者の
両眼の位置を検出して、レンチキュラーレンズを水平方
向に可動に支持して、表示素子との左右方向の相対位置
を移動制御することで、立体視領域を広げる方式が提案
されている。また、パララックス・バリヤ方式でも機械
的或いは電子的に、バリヤを左右に移動させて立体視領
域を追従させることも可能である。

【００１１】更に、特開平２−５０１４５号公報には、
観察者の両眼位置を検出し、その検出した信号により、
レンチキュラに対応する右眼用画像と左眼用画像の表示
画素部の左右の位置を入れ替えて、立体視領域を広くす
る方式が提案されている。

【００１２】（５）コンピュータの環境の説明：コンピ
ュータの発達は目覚ましい。近年のグラフィカル・ユー
ザ・インターフェース（ＧＵＩ）は、コンピュータの操
作性を向上させ、直感的な操作を行うことができるた
め、コンピュータの普及に貢献してきた。

【００１３】また、コンピュータの高速化・データの大
容量化、多機能化等の進歩に伴い、コンピュータ上で３
次元画像データを用いることが日常的となってきた。今
まで説明してきた立体ディスプレイもコンピュータ環境
で用いることが多くなってきた。特に、３次元のコンピ
ュータグラフィックでは仮想的なカメラの位置を任意に
変えることができるため、両眼視差の画像の生成に応用
されることも多い。

【００１４】

【発明が解決しようとする課題】上記従来例の立体表示
手段を用いた立体表示においては立体カメラやコンピュ
ータグラフィックスの立体映像を表示するだけで、観察
者は常に１方向からの像しか得られず、観察者自ら観察
物を回り込んで観ることもできず、十分な臨場感が得ら
れなかった。

【００１５】また、従来の立体視領域の拡大方法を用い
ると以下のような課題があった。

【００１６】（１）観察者の立体視領域は立体ディスプ
レイ自身が固定されるために限定される。

【００１７】（２）観察者の移動量が大きくなると立体
ディスプレイを斜めから観るため観察しにくくなる。

【００１８】（３）また観察者が立体ディスプレイに表
示される被写体を別の角度からの映像を見たいと欲した
場合には、立体撮像装置又は、被写体を設置した台座等
を回転させる必要があり、思い通りの角度からの立体映
像を得ることが困難になる。

【００１９】

【課題を解決するための手段】本発明は、上記課題を解
決するためになされたもので、複数の視差画像を用いて
立体表示する立体映像装置において、観察者の視点位置
を検知する手段と、観察者の視点位置をもとに立体ディ
スプレイを回転制御する手段を設けたことを特徴とす
る。

【００２０】また、上記立体映像装置において、複数の
視差画像を撮影する立体カメラを具備し、この立体カメ
ラを観察者の視点位置或いは立体ディスプレイの回転角
度に応じて回転制御する手段を設けたことを特徴とす
る。更に、上記立体映像装置において、複数の視差画像
を撮影する立体カメラを具備し、この立体カメラの撮影
範囲に観察者の視点位置或いは立体ディスプレイの回転
角度に応じて回転制御可能な回転台を設けたことを特徴
とする。

【００２１】また、上記立体映像装置において、複数の
視差画像を撮影する立体カメラを具備し、この立体カメ
ラを観察者の視点位置或いは立体ディスプレイの回転角
度に応じて、被観察物の外周を移動制御する手段を設け
たことを特徴とする。また、立体映像装置において、立
体ディスプレイとコンピュータを接続したシステムを組
み、観察者の視点位置或いは立体ディスプレイの回転角
度に応じコンピュータグラフィックスによって生成する
視差画像の視点方向を制御することを特徴とする。ま
た、立体ディスプレイとコンピュータを接続したシステ
ムで、観察者の視点位置或いは立体ディスプレイの回転
角度に応じ、予め用意した視差画像を選択的に表示する
ことを特徴とする。

【００２２】また、複数の視差画像を用いて立体表示す
る立体ディスプレイと、ポインティングデバイスを用い
たユーザインターフェースを実装したコンピュータと、
機械的な制御手段により撮影方向を制御可能な撮影環境
が接続されたコンピュータシステムにおいて、前記撮影
方向を前記ポインティングデバイスを用いることにより
操作することを特徴とする。また、該コンピュータシス
テムにおいて、その撮影手段が回転制御手段を備えた複
数の視差画像を撮影する立体カメラからなり、前記ポイ
ンティングデバイスにより前記回転手段が回転制御され
ることを特徴とする。また、該コンピュータシステムに
おいて、その撮影手段が複数の視差画像を撮影する立体
カメラと、この立体カメラの撮影範囲に設けられた回転
制御可能な回転台とからなり、前記ポインティングデバ
イスにより、前記回転が回転制御されることを特徴とす
る。さらに、上記コンピュータシステムにおいて、その
撮影手段が複数の視差画像を撮影する立体カメラと前記
立体カメラを移動制御する手段からなり、前記ポインテ
ィングデバイスにより前記移動手段が移動制御されるこ
とを特徴とする。

【００２３】また、コンピュータシステムにおいて、複
数の視差画像を用いて立体表示する立体表示手段と、観
察者の視点位置を検知する手段と、この観察者の視点位
置に応じて立体表示領域を追従する手段を備えた立体デ
ィスプレイと、ポインティングデバイスを用いたユーザ
インターフェースを実装したコンピュータを接続したス
テムにおいて、前記ポインティングデバイスと観察者の
移動により前記視差画像の視点方向を制御・表示するこ
とを特徴とする。また、該コンピュータシステムにおい
て、ポインティングデバイスによる観察方向の制御・表
示量を観察者の移動による観察方向の制御・表示量より
も大きくしたことを特徴とする。

【００２４】さらに、上記コンピュータシステムにおい
て、複数の視差画像を撮影する立体カメラを具備し、こ
の立体カメラをポインティングデバイスを用いて回転制
御する手段を設けたことを特徴とする。また、上記コン
ピュータシステムにおいて、複数の視差画像を撮影する
立体カメラを具備し、この立体カメラの撮影範囲に前記
ポインティングデバイスにより回転制御される回転台を
設けたことを特徴とする。

【００２５】また、上記コンピュータシステムにおい
て、複数の視差画像を撮影する立体カメラと、前記立体
カメラを移動制御する手段を具備し、前記ポインティン
グデバイスにより前記移動制御が制御されることを特徴
とする。

【００２６】さらに、レンチキュラレンズを画像表示部
の前面に用いた立体ディスプレイ装置を使用する立体映
像装置において、前記立体ディスプレイ装置をレンチキ
ュラレンズのシリンドリカルレンズの長手方向を回転軸
とするように支持する回転支持機構と、前記立体ディス
プレイ装置を前記回転軸を中心として回動させる駆動手
段と、観察者の頭部又は両眼位置を検出する手段と、検
出した頭部又は両眼位置に基づき前記立体ディスプレイ
の角度を制御する制御手段と、被写体を撮像する左右の
撮像装置と、前記撮像装置を回動させる駆動手段とを備
え、前記撮像装置からの撮像情報を表示することを特徴
とする。

【００２７】また、上記立体映像装置において、検出さ
れた観察者の頭部又は両眼位置に基づき前記撮像装置の
角度を制御する制御手段を備えたことを特徴とする。ま
た、該立体映像装置において、前記立体ディスプレイ装
置の角度に基づき前記撮像装置の角度を制御する制御手
段を備えたことを特徴とする。

【００２８】また更に、該立体映像装置に具備された台
座において、検出された観察者の頭部又は両眼位置に基
づいてその角度を制御される制御手段を備えたことを特
徴とする。また、上記立体映像装置に具備された台座に
おいて、前記立体ディスプレイ装置の角度に基づいてそ
の角度を制御される制御手段を備えたことを特徴とす
る。また、上記立体映像装置の台座において、前記撮像
装置または被写体を回動できることを特徴とする。

【００２９】さらに、上記立体映像装置の台座の制御手
段において、角度を前記立体ディスプレイを設置した場
合と前記被写体を設置した場合とで異なる方向にするこ
とを特徴とする。

【００３０】また、表示面方式の立体ディスプレイ装置
を使用する立体映像装置において、前記立体ディスプレ
イ装置を回転するように支持する回転支持機構と、前記
立体ディスプレイ装置を回転する回転軸を中心として回
動させる駆動手段と、観察者の頭部又は両眼位置を検出
する位置検出手段と、被写体を撮像する左右の撮像装置
と、前記撮像装置を回動させる駆動手段と、前記検出し
た頭部又は両眼位置に基づき前記立体ディスプレイの角
度及び前記撮像装置の角度を制御する制御手段とを備え
たことを特徴とする。

【００３１】

【発明の実施の形態】以下、本発明における各実施形態
を、図面を用いて詳細に説明する。

【００３２】［第１の実施形態］図１と図２は本発明の
第１の実施形態を示すものである。図１において、１０
０は本実施形態を施した立体ディスプレイ装置本体で、
１は例えばレンチキュラー方式やパララックス・バリヤ
方式等によって立体表示される立体表示部、２は画像処
理等の手段によって観察者の視点位置を検知する視点検
出部、３は本立体ディスプレイを回転制御させるための
回転台である。また、２００は本立体ディスプレイを観
察している観察者である。さらに、３００は立体画像を
撮影するための立体カメラ本体で、３１と３２は視差画
像を撮影するために設けられたレンズ、３３は立体カメ
ラの回転台制御部である。また、４００は立体カメラ３
００の映像信号を立体ディスプレイに送る、或いは立体
ディスプレイ１００からの回転角度情報等の制御信号を
立体カメラ３００へと送る等の双方向の通信を行うケー
ブルである。

【００３３】図２は、立体ディスプレイ１００、及び立
体カメラ３００の内部の構成を示すブロック図である。

【００３４】図２を参照しつつ、立体カメラ本体３００
について説明する。３０は立体画像を撮像するための左
右２つの撮像系からなる撮像部、３６は撮像部３０より
出力された左右の画像情報に相当する映像信号に対して
それぞれ所定の信号処理を施して立体ディスプレイ１０
０へと供給可能な信号形態に変換する映像信号処理回
路、３３は撮像部３０を回転するための回転台座を駆動
するモータを含む回転台制御部、３４は映像信号処理回
路３６より出力された映像信号を立体ディスプレイ１０
０側に送信可能な形態に変換するとともに、ディスプレ
イ１００側より送信されてきた制御信号に基づいて回転
台制御部３７を制御し、立体ディスプレイに送信するた
めの撮像部３０の姿勢を初めとするオートフォーカス等
の各種制御情報を生成するコントローラで、マイクロコ
ンピュータによって構成される。また、３５は立体ディ
スプレイ１００側との間で、映像信号及び各種制御情報
を所定のフォーマットで通信するカメラ側通信部であ
る。

【００３５】次に、立体ディスプレイ１００について説
明する。図２において、１は立体画像を表示するＣＲＴ
や液晶等の立体ディスプレイ、２は観察者の視点を検出
する視線検出部で、観察者に赤外線等を照射してその反
射光から眼球位置を知る方法、観察者の頭部の映像から
画像処理によって眼球像を検出する方法、あるいは頭部
自体の画像認識を行う方法等、必要に応じて選択するこ
とができる。

【００３６】また、３は立体ディスプレイ１００を回転
するための回転台座を駆動するモータを含む回転台制御
部、４は立体カメラ３００から送信されてきた画像信号
とカメラの姿勢、その他の関連する制御情報を受信し、
あるいは立体カメラ３００側へとカメラ制御情報等を送
信するディスプレイ側通信部である。

【００３７】また、５は後述のコントローラ７の指令に
したがって、立体カメラ３００側より送られてきた画像
情報を左右の画像情報に分離し、所定の信号処理を施し
て映像ドライブ回路６へと供給し、立体ディスプレイ表
示部１に表示させる映像信号処理回路である。

【００３８】また、７は、立体ディスプレイ１００を統
括して制御するとともに、通信部４を介して立体カメラ
３００を制御するマイクロコンピュータによって構成さ
れたコントローラで、立体カメラ３００から通信部４を
介して受信した映像信号を映像信号処理回路５へと供給
させてディスプレイ１に立体画像を表示させるととも
に、視点検出部２によって検出された観察者の視線位置
情報に基づいて、回転台制御部３を制御して立体ディス
プレイ１００の回転位置を制御するものである。またデ
ィスプレイ側から立体カメラ３００を制御するための制
御信号を立体カメラ３００側へと出力する。

【００３９】また、立体ディスプレイ１００と立体カメ
ラ３００との間における情報の通信路となるケーブル４
００は、このようなケーブル接続の形態をとることな
く、電話回線でも無線、赤外線でも、その手段は特に限
定されるものではなく、いかなる形態をとってもよい。

【００４０】次に上記のシステムの動作について、順を
追って説明する。

【００４１】立体カメラ３００によって立体画像が撮像
され、その立体画像に相当する左右の映像信号は、各通
信部４，３５及びケーブル４００からなる通信手段を介
して立体ディスプレイ１００の画面へと表示される。

【００４２】撮像された左右の映像信号が、立体ディス
プレイ１００の画面上に水平方向に形成されたレンチキ
ュラーレンズ（シリンドリカルレンズ）によって、観察
者の左右の眼に対して左右の異なる映像が映るようにな
っており、立体カメラ３００の左右の映像信号出力を観
察者の左右の眼に別々に伝達するように構成されてい
る。

【００４３】この状態において、観察者が立体ディスプ
レイ１００を観察している際に、観察者が立体ディスプ
レイ装置に対して位置を移動すると、視点位置検出部３
によって視点位置の移動として検出され（頭部位置を検
出するセンサであれば、その頭部位置の画像から頭部位
置の移動として検出される）、立体ディスプレイ１００
と観察者との間の相対的な位置の変位としてコントロー
ラ７へと供給される。

【００４４】コントローラ７は、この視点位置移動情報
に基づいて、回転台制御部３を制御し、立体ディスプレ
イ１００を回転させて観察者に正対する位置へと移動す
る。

【００４５】またこの視点位置移動情報は、通信部４、
通信ケーブル４００（あるいはワイヤレス通信）によっ
て、立体カメラ３００側にも伝達され、コントローラ３
４を介して回転台制御部３３が駆動制御され、カメラの
位置も、観察者の視点が移動した方向に回転する。

【００４６】すなわち、観察者がディスプレイ１００の
周囲を移動すると、カメラもその移動方向に移動するた
めディスプレイ１に写し出される映像が、被写体の正面
から側面へと移動し、ディスプレイ１も観察者の移動し
た方向に向きを変えるので、観察者は、ディスプレイ１
の周囲を移動することにより、あたかも被写体の周囲を
移動しているかのような映像を見ることができる。

【００４７】尚、視点位置を移動して立体ディスプレイ
１００を回動させたとき、立体カメラ３００側に、視点
位置情報でなく、立体ディスプレイ１００の回転角の情
報を送信し、この情報に基づいて回転制御部３３を制御
するようにしてもよい。

【００４８】また立体カメラ３００の回転量は、観察者
の視点位置の移動量や立体ディスプレイ１００の回転角
に対して、１対１に対応している必要はなく、所定の比
例又は非線形な関数で規定してもよい。

【００４９】これによって、観察者は、立体ディスプレ
イ装置を見る位置を変えるだけで、立体カメラ３００も
追従して表示されている立体画像が変化するので、その
都度手動で立体カメラ３００の向き等を調整する必要が
なく、観察者の意志に基づいた好みの方向の映像を観察
することができる。観察者が移動することにより、視差
画像が変化する運動視差の効果もでるため、より現実的
な立体感を感受し、その認識を増すことができる。

【００５０】［第２の実施形態］図３と図４は本発明の
第２の実施形態の説明図である。第１の実施形態との差
異について特に説明する。

【００５１】図３において、１００は本発明の第１の実
施形態と同様に、視点検知手段と立体表示手段と回転制
御手段を具備した立体ディスプレイ装置である。また、
３００′は第１の実施形態の立体カメラ３００と同様に
視差画像を撮影するための立体カメラ３００’である
が、第１の実施形態と異なり立体カメラ３００’が回転
台制御部３３を具備していない。６００は本実施形態の
特徴を示すもので、固定部６０１と被写体２５０を載置
する回転部６０２から成る回転台である。４１０は立体
ディスプレイ１００と立体カメラ３００’間の通信を行
うためのケーブル、４２０は立体ディスプレイ１００と
回転台６００間の通信を行うためのケーブルである。

【００５２】図４は第２の実施形態の信号の流れを説明
するブロック図である。図中、６１，６２，６３以外は
上記第１実施形態の説明で既に述べたので、これらの説
明は省略する。６１は回転台６００を制御するためのマ
イクロコンピュータによるコントローラ、６２は立体デ
ィスプレイ１００と通信をして、主に回転台６００の回
転角度の情報を得るための通信部、６３はモータ等の機
構部を有して回転台６００の回転角度を制御するための
回転台制御部である。

【００５３】そして、その動作について説明すると、本
発明の第２の実施形態の特徴である観察者に対しての立
体ディスプレイ１００と立体カメラ３００’と回転台６
００の関係について説明する。立体ディスプレイ１００
の動作としては通信部５が立体カメラ３００’と回転台
６００の両方に通信を行っている以外は、第１の実施形
態と同様である。第２の実施形態の立体カメラ３００’
は第１の実施形態と異なり、回転台制御部３３を具備し
ておらず、通信部３５は立体映像や音声信号を司ること
になる。

【００５４】回転台６００は立体ディスプレイ１００の
視点検出部２で得た観察者の視点情報をケーブル４２０
で通信部６２を介してコントローラ６１に送られる。コ
ントローラ６１はこの信号をもとに回転台制御部６３を
制御し、観察者の視点移動と共に回転させる。

【００５５】以上説明したように、観察者が立体画像を
観察中、その立体画像の側面を見ようとして、観察者自
身の眼の位置をサイドにずらせた場合、それを視点検出
部２の視点位置センサあるいは頭部位置センサによって
検出し、観察物を載せた回転台６００をそのズレに相当
する分、回転するので、立体ディスプレイ１００の前を
回転移動することで、観察物も追従するので観察者の意
志に基づいた方向の観察ができ、観察者が移動すること
により視差画像が変化する運動視差の効果や、回り込み
画像が得られることで、より立体感を増すことができ
る。

【００５６】［第３の実施形態］図５と図６は本発明に
おける第３の実施形態を示す説明図である。上述の実施
形態との差異について説明する。

【００５７】図５において、１００は第１の実施形態と
同様に、視点検知手段と立体表示手段と回転制御手段を
具備した立体ディスプレイ装置である。３００”は第１
の実施形態の立体カメラ３００と同様に視差画像を撮影
するための立体カメラであるが、上述と異なり立体カメ
ラ３００の回転台制御部３３の替わりに、円周状に構成
されたレール７００上を移動する移動手段、例えばリニ
アモータやステップモータを用いた移動体を具備し、被
観察物２５０の回りから撮影できる。

【００５８】図６は本実施形態の信号の流れを説明する
ブロック図である。上述以外で、４３０は立体ディスプ
レイ１００と立体カメラ３００”間の通信を行うための
ケーブル、７１はレール７００を移動するためにモータ
等を備えたレール移動手段である。

【００５９】本実施形態の特徴である観察者に対しての
立体ディスプレイ１００と立体カメラ３００”の移動制
御について説明する。立体ディスプレイ１００の動作と
しては第１の実施形態と同様である。第３の実施形態の
立体カメラ３００”は第１の実施形態と異なり、回転台
制御部３３の替わりにレール７００上を移動する。立体
カメラ３００”は立体ディスプレイ１００の視点検出部
２で得た情報をケーブル４３０で通信部３５を介してコ
ントローラ３４に送られる。コントローラ３４はこの信
号をもとに自走的に移動制御し、観察者の視点又は頭部
の移動と共に移動させる。

【００６０】被写体２５０の廻りに全周にわたってレー
ルを配すれば、被写体を３６０°どの位置からも撮影す
ることができ、観察者の視点に応じて画像をその動きに
応じて表示することができる。

【００６１】以上説明したように、観察者が立体ディス
プレイ１００の前を回転移動することで、立体カメラ３
００”も追従するので観察者の意志に基づいた方向の観
察ができ、観察者が移動することにより視差画像が変化
する運動視差の効果や回り込み画像がディスプレイ上で
観察されることで、より立体感を増すことができる。

【００６２】［第４の実施形態］第４の実施形態では上
述の実施形態の立体ディスプレイ１００とコンピュータ
を接続したものについて述べる。図７は本実施形態のコ
ンピュータ（不図示）の処理を説明する流れ図である。
ｓ１は立体ディスプレイ１００の視点検知部２より所定
の手段で観察者の視点位置をコンピュータに取り込むた
めの視点位置取得部、ｓ２は先述の視点位置情報に応じ
て視差画像をコンピュータグラフィックス（ＣＧ）で生
成するための視差画像生成部である。ｓ３は上述以外の
コンピュータの一般的な処理を行うその他の処理部であ
る。また、視差画像生成部ｓ２では、コンピュータグラ
フィックスを用いたが、替わりに予め用意した視差画像
を選択的に表示しても良い。

【００６３】この様に、立体カメラ３００と接続しなく
ても、コンピュータグラフィックス機能を活用して、運
動視差や回り込みの効果をコンピュータを接続したシス
テムで実現できる。

【００６４】［第５の実施形態］図８、図９、図１０は
本発明の第５の実施形態による概略外観図と構成ブロッ
ク図とディスプレイ上に表現した概略表示画像である。

【００６５】図８において、１００’は本実施形態で用
いられる立体ディスプレイ装置本体で、上記実施形態と
異なり、回転台制御部３を備えずに立体視領域の追従は
従来の方法によってなされる。また、８２は前記立体デ
ィスプレイ１００’と接続されたホストコンピュータで
あり、ポインティングデバイスであるマウス８３やキー
ボード８４によって入力操作される。図９は第５の実施
形態のブロック図であり、追従制御手段８１を有するこ
とが上述の実施形態と異なる。尚、マウス８３の替わり
にトラックボールやジョイスティク等の他のポインティ
ングデバイスを用いても良い。

【００６６】図１０は本実施形態の操作環境を示すもの
で、立体ディスプレイ１００’の画面の図面で、８５は
画面の最も外側の外枠、８６は画面のタイトルバー、８
７はプルダウンメニューで使用されるメニューバー、８
８ａと８８ｂと８８ｃと８８ｄはディスプレイファイル
や入力デバイスを仮想的に表示するためのアイコン、８
９はマウス８３によって操作されるポインタ、９０は立
体表示するためのウィウンドウであって、９０ａはウィ
ンドウのタイトルやウィンドウアクティブか否かを示す
ウィンドウバー、９０ｂは立体画像を表示する表示部、
９０ｃはウィンドウの表示部を制御するコントロールバ
ーで、９０Ｌと９０Ｒは前記コントロールバーの中にあ
り、９０Ｌをマウスでクリックすると立体表示されてい
るオブジェクトが左回転する左回転ボタン、９０Ｒは同
様に右回転ボタンである。また、この立体表示環境は３
次元表示と２次元表示を混在表示するものであるが、２
次元と３次元の切り替える手段を設けたもので良い。

【００６７】次に本実施形態の特徴である視点方向の移
動手段について説明する。図１１は立体視領域の拡大方
法での観察者の位置検知の範囲を示すもので上面より見
た概略平面図で、αは観察者の位置検知範囲を示す。こ
の位置検知の検出法として、例えば、１／２インチ固体
撮像子（撮像画角は幅６．４ｍｍ、縦４．８ｍｍ）と焦
点距離８ｍｍのレンズを用いた結像光学系を採用した場
合では、検知範囲αは、幾何学的に、α＝２Ａｔａｎ
（３.２／８）＝４３.６°になる。よって、このような
検知方法で、観察者を追従し、視点位置に応じて画像を
変える方法では、この検知範囲よりも広い範囲の視点画
像の変更はできにくい。本実施形態では、ポインティン
グデバイスにより、（３６０−α）°以上の表示オブジ
ェクトの視点移動とα以内の観察者の移動による視点移
動を協調的に行うことで使い勝手のよい視点移動を可能
としている。

【００６８】観察者は図１０の左回転ボタン９０Ｌと右
回転ボタン９０Ｒを用いオブジェクトを（３６０−α）
°以上に回転させ観察可能であると同時に、視点検出部
２からの検知手段からの信号をもとに視点方向も変えら
れる。また、右回転ボタン９０Ｒや左回転ボタン９０Ｌ
の替わりに表示オブジェクトをマウスでクリック及びド
ラッグし、視点方向を変えることも可能である。

【００６９】以上の第５の実施形態の視点方向の移動手
段で用いられる視差画像は、第４の実施形態で説明した
ように、コンピュータ内部の処理によって生成される
が、以下のような方法でも可能である。 （回転制御部を備えた立体カメラを用いる方法）図１２
と図１３は視差画像の生成手段として視差のある画像を
撮影するための立体カメラ３００を備えたシステムの説
明図で、図１２はシステムの構成概略図、図１３はシス
テムのブロック図であり、図中の記号に関しては既に説
明しているので省略する。また、立体カメラ部３００の
ブロック図の一部の図示を省略する。本構成では視差画
像を生成するために回転制御可能な立体カメラ３００を
ホストコンピュータを用いて、前述したポインティング
デバイス或いは観察者の移動により、立体カメラ３００
を回転制御することが特徴である。 （立体カメラと回転台を用いる方法）図１４と図１５は
視差画像の生成手段として視差のある画像を撮影するた
めの立体カメラ３００’と回転制御可能な回転台６００
を備えたシステムの説明図で、図１４はシステムの構成
概略図、図１５はシステムのブロック図で、図中の記号
に関しては既に説明しているので省略する。本構成では
視差画像を生成するために立体カメラ３００’と回転制
御可能な回転台６００を備え、ホストコンピュータ８２
を用いて、前述したポインティングデバイス或いは観察
者の移動により、回転台の回転制御することが特徴であ
る。 （移動制御部を備えた立体カメラを用いる方法）図１６
と図１７は視差画像の生成手段として視差のある画像を
撮影するための移動制御可能な立体カメラ３００”を備
えたシステムの説明図で、図１６はシステムの構成概略
図、図１７はシステムのブロック図で、図中の記号に関
しては既に説明しているので省略する。本構成では視差
画像を生成するために移動制御可能な立体カメラ３０
０”を、ホストコンピュータ８２を用いて、前述したポ
インティングデバイス或いは観察者の移動に従って、立
体カメラ３００を移動制御することが特徴である。

【００７０】上記実施形態では、立体視のためにレンチ
キュラーレンズを用いた例を示したが、これに限るもの
ではなく、微小レンズを上下左右に配列し、角レンズ毎
に視差のある映像を後部に提示するフライズ・アイ・レ
ンズ板方式であっても、短冊状の左右眼用映像（Ｌ，
Ｒ）を縦格子（アパーチャ・グリル）を通して観察する
パララックス・バリヤ方式であっても、微小三面鏡素子
を配列し、投射方向に反射光を戻すオートコリメート・
スクリーンを形成し、２眼用プロジェクタからの映像を
両眼分離提示するコーナ・キューブ板方式であっても、
本発明を適用できる。

【００７１】また、上記実施形態では、左右方向に撮影
対象やオブジェクトの視点方向を変える実施形態につい
て述べてきたが、これらは上下方向や斜め方向の視点方
向の制御でも転用可能であり、また、立体表示方法とし
て主に左右の２像を用いる手段を述べたが、２像以上の
複数枚の視差画像を用いても良い。

【００７２】

【発明の効果】以上述べたように本発明によれば、立体
ディスプレイに表示される映像を立体ディスプレイを観
る位置と連動させることで、より立体的な臨場感のある
映像を観察者の提供できる。

【００７３】また観察者が立体ディスプレイを観る位置
をより広くすることができ、任意の角度からの立体像が
観察できる。

【００７４】またポインティングデバイスと観察者の移
動による協調的な視点方向変更手段により、使い勝手の
よい操作環境が得られる。

【００７５】レンチキュラーレンズを画像表示部の前面
に用いた立体ディスプレイ装置を使用する立体映像装置
において、立体ディスプレイをレンチキュラーレンズの
シリンドリカルレンズの長手方向を回転軸とするように
支持する回転支持機構と、上記立体ディスプレイを上記
回転軸を中心として回動させる駆動手段と、観察者の頭
部又は両眼位置を検出する手段と、検出した頭部又は両
眼位置に基づき上記立体ディスプレイの角度を制御する
制御手段と、被写体を撮像する左右の撮像装置と、上記
撮像装置を回動させる駆動手段と、上記撮像装置からの
撮像情報を表示するような立体映像装置を構成すること
により、以下のような効果が得られる。 （ａ）立体ディスプレイに表示される映像を、立体ディ
スプレイを見る位置と同期させて変化させることによ
り、平面上ではあるがより立体的な映像をあたえられ
る。 （ｂ）観察者が立体ディスプレイを見る角度を変えるこ
とにより被写体の映像の角度を変化させるので、非常に
簡単で自然な方法で、別の角度から見た立体画像を得る
ことを可能にしている。

【図面の簡単な説明】

【図１】本発明による第１の実施形態の概略図である。

【図２】本発明による第１の実施形態のブロック図であ
る。

【図３】本発明による第２の実施形態の概略図である。

【図４】本発明による第２の実施形態ののブロック図で
ある。

【図５】本発明による第３の実施形態の概略図である。

【図６】本発明による第３の実施形態のブロック図であ
る。

【図７】本発明による第４の実施形態の動作流れ図的説
明図である。

【図８】本発明による第５の実施形態の概略図である。

【図９】本発明による第５の実施形態のブロック図であ
る。

【図１０】本発明による第５の実施形態の画面図であ
る。

【図１１】視点検知範囲の説明図である。

【図１２】本発明による第５の実施形態の他の方式の概
略図である。

【図１３】本発明による第５の実施形態の他の方式のブ
ロック図である。

【図１４】本発明による第５の実施形態の他の方式の概
略図である。

【図１５】本発明による第５の実施形態の他の方式のブ
ロック図である。

【図１６】本発明による第５の実施形態の他の方式の概
略図である。

【図１７】本発明による第５の実施形態の他の方式のブ
ロック図である。

【図１８】従来のレンチキュラーレンズ方式の説明図で
ある。

【図１９】従来のパララックス・バリヤ方式の説明図で
ある。

【符号の説明】

１ 立体表示部 ２ 視点検出部 ３ 回転台 ４ コントローラ ５ 通信部 ３１，３２ レンズ ３３ 回転台制御部 ３４ コントローラ ３５ 通信部 ６１ コントローラ ６２ 通信部 ６３ 回転台制御部 ７１ レール移動手段 ８１ 追従制御部 ８２ ホストコンピュータ ８３ マウス ８４ キーボード ８５ 外枠 ８６ タイトルバー ８７ メニューバー ８８ａ，８８ｂ，８８ｃ，８８ｄ アイコン ８９ ポインタ ９０ ウィンドウ ９０ａ ウィウンドウバー ９０ｂ 表示部 ９０ｃ コントロールバー ９０Ｌ 左回転ボタン ９０Ｒ 右回転ボタン １００ 立体ディスプレイ装置本体 １０１ 透過型液晶表示装置 １０２ スペーサー １０３ 電子パララックス・バリヤ １０４ マイクロコンピュータ １１５，１２５ 液晶層 １１１，１１８，１２１，１２８ 偏光板 １５１ 液晶ディスプレイ １５２，１５４ ガラス基板 １５３ 表示画素部 １５５ レンチキュラレンズ １５６ 立体視領域 ２００ 観察者 ３００ 立体カメラ本体 ４００，４１０，４２０，４３０ ケーブル ６００ 回転台 ６０１ 固定部 ６０２ 回転部 ７００ レール ｓ１ 視点位置取得部 ｓ２ 視差画像生成部 ｓ３ 上その他の処理部

───────────────────────────────────────────────────── フロントページの続き (72)発明者 能瀬 博康 東京都大田区下丸子３丁目30番２号 キヤ ノン株式会社内 (72)発明者 正木 克己 東京都大田区下丸子３丁目30番２号 キヤ ノン株式会社内

Claims (23)

【特許請求の範囲】
1. 【請求項１】 複数の視差画像を用いて立体表示する立
   体映像装置において、 観察者の視点位置を検知する手段と、観察者の視点位置
   をもとに立体ディスプレイを回転制御する手段を設けた
   ことを特徴とする立体映像装置。
2. 【請求項２】 複数の視差画像を撮影する立体カメラを
   具備し、この立体カメラを観察者の視点位置或いは立体
   ディスプレイの回転角度に応じて回転制御する手段を設
   けたことを特徴とする請求項１の立体映像装置。
3. 【請求項３】 複数の視差画像を撮影する立体カメラを
   具備し、この立体カメラの撮影範囲に観察者の視点位置
   或いは立体ディスプレイの回転角度に応じて回転制御可
   能な回転台を設けたことを特徴とする請求項１の立体映
   像装置。
4. 【請求項４】 請求項１の立体ディスプレイとコンピュ
   ータを接続したシステムで、観察者の視点位置或いは立
   体ディスプレイの回転角度に応じコンピュータグラフィ
   ックスによって生成する視差画像の視点方向を制御する
   ことを特徴とする立体映像装置。
5. 【請求項５】 請求項１の立体ディスプレイとコンピュ
   ータを接続したシステムで、観察者の視点位置或いは立
   体ディスプレイの回転角度に応じ、予め用意した視差画
   像を選択的に表示する立体映像装置。
6. 【請求項６】 複数の視差画像を撮影する立体カメラを
   具備し、この立体カメラを観察者の視点位置或いは立体
   ディスプレイの回転角度に応じて、被観察物の外周を移
   動制御する手段を設けたことを特徴とする立体映像装
   置。
7. 【請求項７】 複数の視差画像を用いて立体表示する立
   体ディスプレイと、ポインティングデバイスを用いたユ
   ーザインターフェースを実装したコンピュータと、機械
   的な制御手段により撮影方向を制御可能な撮影環境が接
   続されたコンピュータシステムに於いて、 前記撮影方向を前記ポインティングデバイスを用いるこ
   とにより操作することを特徴とするコンピュータシステ
   ム。
8. 【請求項８】 請求項７に記載のコンピュータシステム
   に於いて、 その撮影手段が回転制御手段を備えた複数の視差画像を
   撮影する立体カメラからなり、前記ポインティングデバ
   イスにより前記回転手段が回転制御されることを特徴と
   するコンピュータシステム。
9. 【請求項９】 請求項７に記載のコンピュータシステム
   に於いて、 その撮影手段が複数の視差画像を撮影する立体カメラ
   と、この立体カメラの撮影範囲に設けられた回転制御可
   能な回転台とからなり、前記ポインティングデバイスに
   より、前記回転が回転制御されることを特徴とするコン
   ピュータシステム。
10. 【請求項１０】 請求項７に記載のコンピュータシステ
    ムに於いて、 その撮影手段が複数の視差画像を撮影する立体カメラと
    前記立体カメラを移動制御する手段からなり、前記ポイ
    ンティングデバイスにより前記移動手段が移動制御され
    ることを特徴とするコンピュータシステム。
11. 【請求項１１】 複数の視差画像を用いて立体表示する
    立体表示手段と、観察者の視点位置を検知する手段と、
    この観察者の視点位置に応じて立体表示領域を追従する
    手段を備えた立体ディスプレイと、ポインティングデバ
    イスを用いたユーザインターフェースを実装したコンピ
    ュータを接続したステムに於いて、 前記ポインティングデバイスと観察者の移動により前記
    視差画像の視点方向を制御・表示することを特徴とする
    コンピュータシステム。
12. 【請求項１２】 請求項１１に記載のコンピュータシス
    テムに於いて、 ポインティングデバイスによる観察方向の制御・表示量
    を観察者の移動による観察方向の制御・表示量よりも大
    きくしたことを特徴とするコンピュータシステム。
13. 【請求項１３】 複数の視差画像を撮影する立体カメラ
    を具備し、この立体カメラをポインティングデバイスを
    用いて回転制御する手段を設けたことを特徴とする請求
    項１１に記載のコンピュータシステム。
14. 【請求項１４】 複数の視差画像を撮影する立体カメラ
    を具備し、この立体カメラの撮影範囲に前記ポインティ
    ングデバイスにより回転制御される回転台を設けたこと
    を特徴とする請求項１１に記載のコンピュータシステ
    ム。
15. 【請求項１５】 複数の視差画像を撮影する立体カメラ
    と、前記立体カメラを移動制御する手段を具備し、前記
    ポインティングデバイスにより前記移動制御が制御され
    ることを特徴とする請求項１１に記載のコンピュータシ
    ステム。
16. 【請求項１６】 レンチキュラレンズを画像表示部の前
    面に用いた立体ディスプレイ装置を使用する立体映像装
    置において、 前記立体ディスプレイ装置をレンチキュラレンズのシリ
    ンドリカルレンズの長手方向を回転軸とするように支持
    する回転支持機構と、前記立体ディスプレイ装置を前記
    回転軸を中心として回動させる駆動手段と、観察者の頭
    部又は両眼位置を検出する手段と、検出した頭部又は両
    眼位置に基づき前記立体ディスプレイの角度を制御する
    制御手段と、被写体を撮像する左右の撮像装置と、前記
    撮像装置を回動させる駆動手段とを備え、前記撮像装置
    からの撮像情報を表示することを特徴とする立体映像装
    置。
17. 【請求項１７】 請求項１６に記載の立体映像装置にお
    いて、検出された観察者の頭部又は両眼位置に基づき前
    記撮像装置の角度を制御する制御手段を備えたことを特
    徴とする立体映像装置。
18. 【請求項１８】 請求項１６に記載の立体映像装置にお
    いて、前記立体ディスプレイ装置の角度に基づき前記撮
    像装置の角度を制御する制御手段を備えたことを特徴と
    する立体映像装置。
19. 【請求項１９】 請求項１に記載の立体映像装置に具備
    された台座において、検出された観察者の頭部又は両眼
    位置に基づいてその角度を制御される制御手段を備えた
    ことを特徴とする立体映像装置の台座。
20. 【請求項２０】 請求項１に記載の立体映像装置に具備
    された台座において、前記立体ディスプレイ装置の角度
    に基づいてその角度を制御される制御手段を備えたこと
    を特徴とする立体映像装置の台座。
21. 【請求項２１】 請求項１に記載の立体映像装置に具備
    された台座において、前記撮像装置または被写体を回動
    できることを特徴とする立体映像装置の台座。
22. 【請求項２２】 請求項１に記載の立体映像装置に具備
    された台座の制御手段において、角度を前記立体ディス
    プレイを設置した場合と前記被写体を設置した場合とで
    異なる方向にすることを特徴とする台座の制御手段。
23. 【請求項２３】 表示面方式の立体ディスプレイ装置を
    使用する立体映像装置において、 前記立体ディスプレイ装置を回転するように支持する回
    転支持機構と、前記立体ディスプレイ装置を回転する回
    転軸を中心として回動させる駆動手段と、観察者の頭部
    又は両眼位置を検出する位置検出手段と、被写体を撮像
    する左右の撮像装置と、前記撮像装置を回動させる駆動
    手段と、前記検出した頭部又は両眼位置に基づき前記立
    体ディスプレイの角度及び前記撮像装置の角度を制御す
    る制御手段とを備えたことを特徴とする立体映像装置。