JPH05344422A - 複眼撮像装置 - Google Patents
複眼撮像装置Info
- Publication number
- JPH05344422A JPH05344422A JP4152214A JP15221492A JPH05344422A JP H05344422 A JPH05344422 A JP H05344422A JP 4152214 A JP4152214 A JP 4152214A JP 15221492 A JP15221492 A JP 15221492A JP H05344422 A JPH05344422 A JP H05344422A
- Authority
- JP
- Japan
- Prior art keywords
- image pickup
- image
- point
- position information
- object plane
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Image Input (AREA)
- Studio Circuits (AREA)
Abstract
(57)【要約】
【目的】 複眼撮影系により得られた合成画像の高精細
化を図る。 【構成】 共通の被写体に対し複数の撮影系を用いて撮
像し、撮影条件と画像信号から被写体の位置情報を検出
し、撮影条件と被写***置情報を用いて被写体の位置情
報を演算により求め、これを基に各々の画像を変換する
ことで合成画像を得る。
化を図る。 【構成】 共通の被写体に対し複数の撮影系を用いて撮
像し、撮影条件と画像信号から被写体の位置情報を検出
し、撮影条件と被写***置情報を用いて被写体の位置情
報を演算により求め、これを基に各々の画像を変換する
ことで合成画像を得る。
Description
【０００１】
【産業上の利用分野】本発明は撮像装置に関し、少なく
とも２組の撮像光学系を用いて得られた少なくとも２つ
の画像を電気的に補正及び合成処理することにより高精
細な１つの画像を提供する装置に関する。
とも２組の撮像光学系を用いて得られた少なくとも２つ
の画像を電気的に補正及び合成処理することにより高精
細な１つの画像を提供する装置に関する。
【０００２】
【従来の技術】従来より２組の撮像光学系を用いて得ら
れた２つの画像を合成することにより１つの高精細な画
像を得る原理方式として、例えば画像電子学会予稿９０
−０３−０４（ｐ２３〜２８）等に開示される様な方式
が知られている。
れた２つの画像を合成することにより１つの高精細な画
像を得る原理方式として、例えば画像電子学会予稿９０
−０３−０４（ｐ２３〜２８）等に開示される様な方式
が知られている。
【０００３】これは２組の撮像光学系に用いたイメージ
センサのサンプリング点を仮想的に共通の被写体に対し
て投影した際に、空間的に位相が異なることを利用し
て、各々の画像信号を合成処理することにより１つの高
精細な画像を得ようとするものである。図９にこの原理
の概念図を示す。図９に於て８１１及び８２１は撮像光
学系であり、８１２及び８２２は各々の撮像光学系によ
り出力された画像である。８０１に於て各々の画像信号
を合成処理し、高精細な画像８０２を得るものである。
センサのサンプリング点を仮想的に共通の被写体に対し
て投影した際に、空間的に位相が異なることを利用し
て、各々の画像信号を合成処理することにより１つの高
精細な画像を得ようとするものである。図９にこの原理
の概念図を示す。図９に於て８１１及び８２１は撮像光
学系であり、８１２及び８２２は各々の撮像光学系によ
り出力された画像である。８０１に於て各々の画像信号
を合成処理し、高精細な画像８０２を得るものである。
【０００４】しかしながら、従来例では原理的に輻輳角
を有する光学配置の為、撮像光学系より得られる画像に
於てレジストレーションずれが発生することが考えられ
る。図１０（Ａ）は複眼撮像系に於けるレジストレーシ
ョンずれの概要を示したもので９１０及び９２０は撮像
光学系（レンズ）であり、９１１及び９２１はイメージ
センサである。また各々の撮像光学系９１０、９２０の
光軸を９１２及び９２２とする。ここで、中心軸Ｏ−
Ｏ′に対して各々の光軸９１２及び９２２をｘｚ平面内
でθ傾斜させて被写体を撮像するとき、被写体面上の任
意の物点をＰとする。このときＰに対する各々のイメー
ジセンサ９１１及び９２１に於ける像点を各々Ｒ′及び
Ｌ′とすると、Ｒ′≠Ｌ′であるためにレジストレーシ
ョンずれが発生し、図１０（Ｂ）に示す様に単純加算し
た合成画像９３０では物点Ｐに対する像が二重となり、
その結果高精度な画像が提供できなくなることになっ
た。
を有する光学配置の為、撮像光学系より得られる画像に
於てレジストレーションずれが発生することが考えられ
る。図１０（Ａ）は複眼撮像系に於けるレジストレーシ
ョンずれの概要を示したもので９１０及び９２０は撮像
光学系（レンズ）であり、９１１及び９２１はイメージ
センサである。また各々の撮像光学系９１０、９２０の
光軸を９１２及び９２２とする。ここで、中心軸Ｏ−
Ｏ′に対して各々の光軸９１２及び９２２をｘｚ平面内
でθ傾斜させて被写体を撮像するとき、被写体面上の任
意の物点をＰとする。このときＰに対する各々のイメー
ジセンサ９１１及び９２１に於ける像点を各々Ｒ′及び
Ｌ′とすると、Ｒ′≠Ｌ′であるためにレジストレーシ
ョンずれが発生し、図１０（Ｂ）に示す様に単純加算し
た合成画像９３０では物点Ｐに対する像が二重となり、
その結果高精度な画像が提供できなくなることになっ
た。
【０００５】
【発明が解決しようとする課題】本発明は複数の元画像
から合成処理した画像を高精細化することを課題とす
る。
から合成処理した画像を高精細化することを課題とす
る。
【０００６】
【課題を解決するための手段】本発明は、複数の撮像系
を用いて共通の被写体を撮像する装置に於いて、撮像系
の撮像条件を検出する手段と、各撮像系から出力される
画像信号から被写体の位置情報を検出する手段と、各撮
像系からの出力に依る画像を前記撮像条件と前記位置情
報を基に合成する手段を具える。
を用いて共通の被写体を撮像する装置に於いて、撮像系
の撮像条件を検出する手段と、各撮像系から出力される
画像信号から被写体の位置情報を検出する手段と、各撮
像系からの出力に依る画像を前記撮像条件と前記位置情
報を基に合成する手段を具える。
【０００７】
【実施例】図１に本発明に係る複眼撮影系の基本配置を
示す。図中１は共通の被写体平面、１０２及び２０２は
等価な仕様を有する第１及び第２の撮像光学系であり、
一般的には後述の様にズームレンズが用いられる。１０
３及び２０３は同様に等価な仕様を有するイメージセン
サであり、サチコン等の撮像管またはＣＣＤ等の固体撮
像素子が用いられる。ここでは簡単のために単板式（ま
たは単管式）を模式的に示したが、色分解光学系を介し
た２板式（２管式）あるいは３板式（３管式）であって
も一般性を失わない。
示す。図中１は共通の被写体平面、１０２及び２０２は
等価な仕様を有する第１及び第２の撮像光学系であり、
一般的には後述の様にズームレンズが用いられる。１０
３及び２０３は同様に等価な仕様を有するイメージセン
サであり、サチコン等の撮像管またはＣＣＤ等の固体撮
像素子が用いられる。ここでは簡単のために単板式（ま
たは単管式）を模式的に示したが、色分解光学系を介し
た２板式（２管式）あるいは３板式（３管式）であって
も一般性を失わない。
【０００８】これらの光軸１０１及び２０１が被写体面
１上の点Ｏで交差し、点Ｏを通り、被写体面１の法線Ｏ
−Ｏ′に対して対称にθ傾斜した状態に配置する。尚２
θを輻輳角と定義し、被写体距離Ｓの変化に応じてこの
輻輳角を変えて撮像する。
１上の点Ｏで交差し、点Ｏを通り、被写体面１の法線Ｏ
−Ｏ′に対して対称にθ傾斜した状態に配置する。尚２
θを輻輳角と定義し、被写体距離Ｓの変化に応じてこの
輻輳角を変えて撮像する。
【０００９】図２は撮像光学系１０２、２０２の具体的
な構成を示すもので、図３は撮像光学系を構成する各部
材の機能をブロック図として示している。１０２ａ、１
０２ｂ、１０２ｃ、１０２ｄ及び、２０２ａ、２０２
ｂ、２０２ｃ、２０２ｄは第１及び第２の撮像光学系１
０２及び２０２を構成するレンズ群を示し、特に１０２
ｂ、２０２ｂは変倍群、１０２ｄ、２０２ｄは合焦群を
示す。また１０６及び２０６は、変倍群１０２ｂ及び２
０２ｂを駆動するための駆動系（ズームモータ）、同時
に１０７及び２０７は合焦群１０２ｄ及び２０２ｄを駆
動するための駆動系（フォーカスモータ）を示す。更に
１０２及び１０３、２０２及び２０３は一体として、光
軸１０１及び２０１を含む平面内で回転する不図示の機
構系と、駆動系（輻輳角モータ）１０４及び２０４を設
ける。
な構成を示すもので、図３は撮像光学系を構成する各部
材の機能をブロック図として示している。１０２ａ、１
０２ｂ、１０２ｃ、１０２ｄ及び、２０２ａ、２０２
ｂ、２０２ｃ、２０２ｄは第１及び第２の撮像光学系１
０２及び２０２を構成するレンズ群を示し、特に１０２
ｂ、２０２ｂは変倍群、１０２ｄ、２０２ｄは合焦群を
示す。また１０６及び２０６は、変倍群１０２ｂ及び２
０２ｂを駆動するための駆動系（ズームモータ）、同時
に１０７及び２０７は合焦群１０２ｄ及び２０２ｄを駆
動するための駆動系（フォーカスモータ）を示す。更に
１０２及び１０３、２０２及び２０３は一体として、光
軸１０１及び２０１を含む平面内で回転する不図示の機
構系と、駆動系（輻輳角モータ）１０４及び２０４を設
ける。
【００１０】また１０５と２０５は角度エンコーダで、
撮像光学系１０２、２０２の回転角を測定する。１０８
と２０８はズームエンコーダで、変倍群１０２ｂ、２０
２ｂの移動を計測して変倍比を求める。１０９と２０９
はフォーカスエンコーダで、合焦群の位置を計測する。
また１１０と２１０は映像信号でイメージセンサ１０３
と２０３から出力され、画像メモリ１１１と２１１に記
憶される。
撮像光学系１０２、２０２の回転角を測定する。１０８
と２０８はズームエンコーダで、変倍群１０２ｂ、２０
２ｂの移動を計測して変倍比を求める。１０９と２０９
はフォーカスエンコーダで、合焦群の位置を計測する。
また１１０と２１０は映像信号でイメージセンサ１０３
と２０３から出力され、画像メモリ１１１と２１１に記
憶される。
【００１１】演算制御部１２、相関演算部１３、補正演
算部１４の作用は追って説明する。
算部１４の作用は追って説明する。
【００１２】次に図４に示す配置で撮像しているとき被
写体の位置情報の検出について示す。
写体の位置情報の検出について示す。
【００１３】図４に示すように被写体面上の前述の点Ｏ
を原点として、ｘ軸、ｙ軸、及びｚ軸を定義する。
を原点として、ｘ軸、ｙ軸、及びｚ軸を定義する。
【００１４】撮像光学系１０２及び２０２と各々の撮像
光学系の光軸１０１、２０１との交点を各々ＱR、ＱLと
し、撮像光学系（レンズ）１０２及び２０２の前側主点
から前述の点Ｏまでの距離をＳ0、また後側主点から各
々のイメージセンサ１０３及び２０３までの距離を
Ｓ0′とする。ここで、図５に示すｘｚ平面内に於ける
被写体面１上の座標Ｐ2（ｘ0，ｚ0）の導出について簡
単に示す。
光学系の光軸１０１、２０１との交点を各々ＱR、ＱLと
し、撮像光学系（レンズ）１０２及び２０２の前側主点
から前述の点Ｏまでの距離をＳ0、また後側主点から各
々のイメージセンサ１０３及び２０３までの距離を
Ｓ0′とする。ここで、図５に示すｘｚ平面内に於ける
被写体面１上の座標Ｐ2（ｘ0，ｚ0）の導出について簡
単に示す。
【００１５】撮像光学系１０２及び２０２と各々の撮像
光学系の光軸１０１、２０１との交点を各々ＱR（ｘ1，
−ｚ1）、ＱL（−ｘ1，−ｚ1）とすると、その座標
ｘ1、ｚ1については撮影条件Ｓ0と輻輳角θを用いて幾
何学的に ｘ1＝Ｓ0ｓｉｎθ − （１−ａ） ｚ1＝Ｓ0ｃｏｓθ − （１−ｂ） と表せられる。
光学系の光軸１０１、２０１との交点を各々ＱR（ｘ1，
−ｚ1）、ＱL（−ｘ1，−ｚ1）とすると、その座標
ｘ1、ｚ1については撮影条件Ｓ0と輻輳角θを用いて幾
何学的に ｘ1＝Ｓ0ｓｉｎθ − （１−ａ） ｚ1＝Ｓ0ｃｏｓθ − （１−ｂ） と表せられる。
【００１６】また、各々のイメージセンサ１０３及び２
０３と光軸１０１及び２０１との交点ＯR′（ｘ2，−ｚ
2）、ＯL′（−ｘ2，−ｚ2）についても同様に ｘ2＝（Ｓ0＋Ｓ0′）ｓｉｎθ − （２−
ａ） ｚ2＝（Ｓ0＋Ｓ0′）ｃｏｓθ − （２−ｂ） と表せられる。
０３と光軸１０１及び２０１との交点ＯR′（ｘ2，−ｚ
2）、ＯL′（−ｘ2，−ｚ2）についても同様に ｘ2＝（Ｓ0＋Ｓ0′）ｓｉｎθ − （２−
ａ） ｚ2＝（Ｓ0＋Ｓ0′）ｃｏｓθ − （２−ｂ） と表せられる。
【００１７】ここで、図５に示すように被写体上の物点
Ｐ2（ｘ0，ｚ0）に対する各々のイメージセンサ１０
３、２０３に於ける像点をＰR′（ｘR，−ｚR）及び
ＰL′（−ｘL，−ｚL）、またイメージセンサ１０３及
び２０３に於ける各々の像高をｘR′、ｘL′とすると、
幾何学的に ｘR＝（Ｓ0＋Ｓ0′）ｓｉｎθ−ｘR′ｃｏｓθ − （３−ａ） ｚR＝（Ｓ0＋Ｓ0′）ｃｏｓθ＋ｘR′ｓｉｎθ − （３−ｂ） ｘL＝（Ｓ0＋Ｓ0′）ｓｉｎθ＋ｘL′ｃｏｓθ − （３−ｃ） ｚL＝（Ｓ0＋Ｓ0′）ｃｏｓθ−ｘL′ｓｉｎθ − （３−ｄ） と表すことができる。
Ｐ2（ｘ0，ｚ0）に対する各々のイメージセンサ１０
３、２０３に於ける像点をＰR′（ｘR，−ｚR）及び
ＰL′（−ｘL，−ｚL）、またイメージセンサ１０３及
び２０３に於ける各々の像高をｘR′、ｘL′とすると、
幾何学的に ｘR＝（Ｓ0＋Ｓ0′）ｓｉｎθ−ｘR′ｃｏｓθ − （３−ａ） ｚR＝（Ｓ0＋Ｓ0′）ｃｏｓθ＋ｘR′ｓｉｎθ − （３−ｂ） ｘL＝（Ｓ0＋Ｓ0′）ｓｉｎθ＋ｘL′ｃｏｓθ − （３−ｃ） ｚL＝（Ｓ0＋Ｓ0′）ｃｏｓθ−ｘL′ｓｉｎθ − （３−ｄ） と表すことができる。
【００１８】このとき点ＰR′と点ＱRを通る直線をｆR
（Ｓ0，Ｓ0′，θ，ｘR′）とし、点ＰL′と点ＱLを通
る直線をｆL（Ｓ0，Ｓ0′，θ，ｘL′）と表すと、被写
体面上の点Ｐ2（ｘ0，ｚ0）は定義によりこの２直線の
交点の座標となる。
（Ｓ0，Ｓ0′，θ，ｘR′）とし、点ＰL′と点ＱLを通
る直線をｆL（Ｓ0，Ｓ0′，θ，ｘL′）と表すと、被写
体面上の点Ｐ2（ｘ0，ｚ0）は定義によりこの２直線の
交点の座標となる。
【００１９】また図４に示すようにｙ0についても撮像
光学系１０２に関して ｙ0＝ｙR′ＳR′／ＳR − （４） として求めることができる。ここで、ＳRは図５に於け
る物点Ｐ2（ｘ0，ｚ0）から撮像光学系１０２の前側主
点までの距離であり、ＳR′は撮像光学系１０２の後側
主点からイメージセンサ１０３に於ける像点ＰR′まで
の距離を表す。
光学系１０２に関して ｙ0＝ｙR′ＳR′／ＳR − （４） として求めることができる。ここで、ＳRは図５に於け
る物点Ｐ2（ｘ0，ｚ0）から撮像光学系１０２の前側主
点までの距離であり、ＳR′は撮像光学系１０２の後側
主点からイメージセンサ１０３に於ける像点ＰR′まで
の距離を表す。
【００２０】このとき図４の点Ｐ（ｘ0，ｙ0，ｚ0）
は、 Ｐ＝ｆ（Ｓ0，Ｓ0′，θ，ｘR′，ｘL′，ｙR(L)′） （５） により表すことができ、撮影条件（Ｓ0，Ｓ0′，θ，）
と各々のイメージセンサの出力画像（ｘR′，ｘL′，ｙ
R(L)）の関数となり、各パラメータを検出することによ
り被写体面の位置情報を求めることができる。
は、 Ｐ＝ｆ（Ｓ0，Ｓ0′，θ，ｘR′，ｘL′，ｙR(L)′） （５） により表すことができ、撮影条件（Ｓ0，Ｓ0′，θ，）
と各々のイメージセンサの出力画像（ｘR′，ｘL′，ｙ
R(L)）の関数となり、各パラメータを検出することによ
り被写体面の位置情報を求めることができる。
【００２１】以上の過程の求め方を図２，図３を使って
説明する。まず輻輳角２θを回転型エンコーダの様な回
転角情報検出手段１０５及び２０５により検出する。撮
像光学系の変倍群１０２ｂ及び２０２ｂに設けた各々の
レンズ群の光軸方向の位置情報を得るためのエンコーダ
（ズームエンコーダ）１０８、２０８を使用し、この信
号により撮像光学系１０２及び２０２の焦点距離ｆを求
める。同様に１０９、２０９は撮像光学系の合焦群１０
２ｄ及び２０２ｂｄに設けた各々のレンズ群の光軸方向
の位置情報を得るためのエンコーダ（フォーカスエンコ
ーダ）であるがこれらは例えばポテンショメータのよう
な外付けの部材でも良いし、例えばパルスモータのよう
な駆動系自身で駆動方法によりレンズの光軸方向の位置
情報を知る系でも良い。そして演算制御部１２にてフォ
ーカスエンコーダ１０９、及び２０９からの信号により
撮像光学系１０２及び２０２に対する被写体距離Ｓ0が
求められ、更に上述の撮像光学系１０２及び２０２の焦
点距離ｆと合わせて、撮像光学系１０２及び２０２のレ
ンズバックＳ0′が求まる。尚、エンコーダ１０８、１
０９、２０８、２０９からの信号により駆動系１０６、
１０７、２０６、２０７を別途制御することによって、
２組の撮像光学系１０２及び２０２の焦点距離ｆとレン
ズバックＳ0′は、常に一致させるようにしているもの
とする。
説明する。まず輻輳角２θを回転型エンコーダの様な回
転角情報検出手段１０５及び２０５により検出する。撮
像光学系の変倍群１０２ｂ及び２０２ｂに設けた各々の
レンズ群の光軸方向の位置情報を得るためのエンコーダ
（ズームエンコーダ）１０８、２０８を使用し、この信
号により撮像光学系１０２及び２０２の焦点距離ｆを求
める。同様に１０９、２０９は撮像光学系の合焦群１０
２ｄ及び２０２ｂｄに設けた各々のレンズ群の光軸方向
の位置情報を得るためのエンコーダ（フォーカスエンコ
ーダ）であるがこれらは例えばポテンショメータのよう
な外付けの部材でも良いし、例えばパルスモータのよう
な駆動系自身で駆動方法によりレンズの光軸方向の位置
情報を知る系でも良い。そして演算制御部１２にてフォ
ーカスエンコーダ１０９、及び２０９からの信号により
撮像光学系１０２及び２０２に対する被写体距離Ｓ0が
求められ、更に上述の撮像光学系１０２及び２０２の焦
点距離ｆと合わせて、撮像光学系１０２及び２０２のレ
ンズバックＳ0′が求まる。尚、エンコーダ１０８、１
０９、２０８、２０９からの信号により駆動系１０６、
１０７、２０６、２０７を別途制御することによって、
２組の撮像光学系１０２及び２０２の焦点距離ｆとレン
ズバックＳ0′は、常に一致させるようにしているもの
とする。
【００２２】以上のように各機構系に設けたエンコーダ
１０５、１０８、１０９、２０５、２０８、２０９の信
号をもとに演算制御部１２に於てＳ0（撮像光学系（レ
ンズ）の前側主点から各々の光軸の交点までの距離）、
Ｓ0′（撮像光学系（レンズ）の後側主点から像面まで
の距離）及びθ（輻輳角）を求める。一方１１１及び２
１１は画像メモリであり、映像信号１１０及び２１０を
一時保存する。
１０５、１０８、１０９、２０５、２０８、２０９の信
号をもとに演算制御部１２に於てＳ0（撮像光学系（レ
ンズ）の前側主点から各々の光軸の交点までの距離）、
Ｓ0′（撮像光学系（レンズ）の後側主点から像面まで
の距離）及びθ（輻輳角）を求める。一方１１１及び２
１１は画像メモリであり、映像信号１１０及び２１０を
一時保存する。
【００２３】１３は相関演算処理部であり画像メモリ１
１１及び２１１の画像データについて相関演算を行うが
図６（Ａ）（Ｂ）に相関演算処理についての概念図を示
す。処理に際しては、図６（Ｂ）に示すようにまず画像
メモリ１１１に於ける点（ｘiR′，ｙjR′）の画素デー
タＲijを中心とした画素データ群１１２を１つのブロッ
クとし、これと画像メモリ２１１に於ける画像との間で
相関演算を行なう。図７は水平方向及び垂直方向につい
て相関演算に於ける相関値とｘ′（ｙ′）軸座標の関係
を模式的に表したものである。ここで、この相関ピーク
近傍の関係を関数近似すること等により相関値が最大と
なるｘL′（ｙL′）をイメージセンサのサンプリングピ
ッチ以下の精度で求める。画像メモリ１１１の各画素デ
ータＲijについてブロック１１２を設け、同様の演算処
理を行ない各画素データに対応するｘL′及びｙL′を求
める。
１１及び２１１の画像データについて相関演算を行うが
図６（Ａ）（Ｂ）に相関演算処理についての概念図を示
す。処理に際しては、図６（Ｂ）に示すようにまず画像
メモリ１１１に於ける点（ｘiR′，ｙjR′）の画素デー
タＲijを中心とした画素データ群１１２を１つのブロッ
クとし、これと画像メモリ２１１に於ける画像との間で
相関演算を行なう。図７は水平方向及び垂直方向につい
て相関演算に於ける相関値とｘ′（ｙ′）軸座標の関係
を模式的に表したものである。ここで、この相関ピーク
近傍の関係を関数近似すること等により相関値が最大と
なるｘL′（ｙL′）をイメージセンサのサンプリングピ
ッチ以下の精度で求める。画像メモリ１１１の各画素デ
ータＲijについてブロック１１２を設け、同様の演算処
理を行ない各画素データに対応するｘL′及びｙL′を求
める。
【００２４】この一連の処理により求めた画像情報（ｘ
iR′、ｘL′、ｙjR′）と前記撮影条件（Ｓ0、Ｓ0′、
θ）を用いて、前述の（５）式に示した関係よりイメー
ジセンサ１０３の各画素データＲijに対応する被写体面
の座標ＰR（ｘ0，ｙ0，ｚ0）を求めることができる。
iR′、ｘL′、ｙjR′）と前記撮影条件（Ｓ0、Ｓ0′、
θ）を用いて、前述の（５）式に示した関係よりイメー
ジセンサ１０３の各画素データＲijに対応する被写体面
の座標ＰR（ｘ0，ｙ0，ｚ0）を求めることができる。
【００２５】イメージセンサ２０３の各画素データＬij
（ｘiL′，ｙjL′）についても同様の演算処理を施し、
各画素に対応するｘR′及びｙR′を求め、イメージセン
サ２０３の各画素データＬijに対応する被写体面の座標
ＰL（ｘ0，ｙ0，ｚ0）を求める。尚、被写体面の座標Ｐ
RとＰLは必ずしも一致しない。
（ｘiL′，ｙjL′）についても同様の演算処理を施し、
各画素に対応するｘR′及びｙR′を求め、イメージセン
サ２０３の各画素データＬijに対応する被写体面の座標
ＰL（ｘ0，ｙ0，ｚ0）を求める。尚、被写体面の座標Ｐ
RとＰLは必ずしも一致しない。
【００２６】以上の処理により求めた座標ＰR及びＰLを
基に補正処理部１４に於て処理を行なう。補正処理部１
４に於ては、まず所望の視点位置を入力する。このとき
視点位置を例えば図８に示すように入力すると、前述の
撮影条件Ｓ0、Ｓ0′と被写体面の座標ＰR(L)（ｘ,，
ｙ0，ｚ0）を用い、各座標値に対する像点（ｘ′、
ｙ′）を以下のように求めることができる ｘ′＝ｘ0Ｓ0′／（Ｓ0＋ｚ0） − （６−ａ） ｙ′＝ｙ0Ｓ0′／（Ｓ0＋ｚ0） − （６−ｂ） 前記（６−ａ、ｂ）式を基に演算処理により各々の画像
メモリの各座標（ｘiR(L)′，ｙjR(L)′）を座標変換し
画像メモリ１５に書き込む。画像メモリ１５に於ける画
像はレジストレーションずれが補正されており、また画
像データは各々のイメージセンサ１０３及び２０３より
出力される画像データに対して理想的には２倍となり、
その結果、出力画像は高精細化されたものとなるわけで
ある。
基に補正処理部１４に於て処理を行なう。補正処理部１
４に於ては、まず所望の視点位置を入力する。このとき
視点位置を例えば図８に示すように入力すると、前述の
撮影条件Ｓ0、Ｓ0′と被写体面の座標ＰR(L)（ｘ,，
ｙ0，ｚ0）を用い、各座標値に対する像点（ｘ′、
ｙ′）を以下のように求めることができる ｘ′＝ｘ0Ｓ0′／（Ｓ0＋ｚ0） − （６−ａ） ｙ′＝ｙ0Ｓ0′／（Ｓ0＋ｚ0） − （６−ｂ） 前記（６−ａ、ｂ）式を基に演算処理により各々の画像
メモリの各座標（ｘiR(L)′，ｙjR(L)′）を座標変換し
画像メモリ１５に書き込む。画像メモリ１５に於ける画
像はレジストレーションずれが補正されており、また画
像データは各々のイメージセンサ１０３及び２０３より
出力される画像データに対して理想的には２倍となり、
その結果、出力画像は高精細化されたものとなるわけで
ある。
【００２７】
【発明の効果】以上、述べた様に本発明によれば高精細
な画像を得ることができるから、これから益々求められ
る高精細情報を提供することができる効果がある。
な画像を得ることができるから、これから益々求められ
る高精細情報を提供することができる効果がある。
【図１】本発明実施例の基本配置を示す図。
【図２】実施例の具体的構成を示す斜視図。
【図３】実施例の機能の関連を示すブロック図。
【図４】被写体の３次元位置情報導出に関する説明図。
【図５】被写体の２次元位置情報導出に関する説明図。
【図６】相関演算処理の模式図。
【図７】相関値を示す特性図。
【図８】画像補正処理の説明図。
【図９】高精細化の原理を説明するための模式図。
【図１０】従来例で発生するレジストレーションずれの
説明図。
説明図。
１ 被写体面 １０２、２０２ 撮像光学系 １０２ａ、１０２ｂ、１０２ｃ、１０２ｄ 撮像光学系
１０２のレンズ群 ２０２ａ、２０２ｂ、２０２ｃ、２０２ｄ 撮像光学系
２０２のレンズ群 １０１、２０１ 撮像光学系１０２、２０１の光軸 １０３、２０３ イメージセンサ １０４、２０４ 輻輳角モータ １０５、２０５ 角度エンコーダ １０６、２０６ ズームモータ １０７、２０７ フォーカスモータ １０８、２０８ ズームエンコーダ １０９、２０９ フォーカスエンコーダ １１０、２１０ 画像信号 １１１、２１１、１５ 画像メモリ １２、１３、１４ 演算制御部
１０２のレンズ群 ２０２ａ、２０２ｂ、２０２ｃ、２０２ｄ 撮像光学系
２０２のレンズ群 １０１、２０１ 撮像光学系１０２、２０１の光軸 １０３、２０３ イメージセンサ １０４、２０４ 輻輳角モータ １０５、２０５ 角度エンコーダ １０６、２０６ ズームモータ １０７、２０７ フォーカスモータ １０８、２０８ ズームエンコーダ １０９、２０９ フォーカスエンコーダ １１０、２１０ 画像信号 １１１、２１１、１５ 画像メモリ １２、１３、１４ 演算制御部
Claims (2)
- 【請求項１】 複数の撮像系を用いて共通の被写体を撮
像する装置に於いて、撮像系の撮像条件を検出する手段
と、各撮像系から出力される画像信号から被写体の位置
情報を検出する手段と、各撮像系からの出力に依る画像
を前記撮像条件と前記位置情報を基に合成する手段を有
することを特徴とする複眼撮像装置。 - 【請求項２】 前記合成する手段は所定の視点位置を基
準にして合成画像を形成することを特徴とする請求項１
の複眼撮像装置。
Priority Applications (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP4152214A JP2974500B2 (ja) | 1992-06-11 | 1992-06-11 | 複眼撮像装置 |
| DE69313694T DE69313694T2 (de) | 1992-03-23 | 1993-03-22 | Bildaufnahmevorrichtung mit mehreren Linsen und Korrektur von Falschregistrierung |
| EP93104677A EP0563737B1 (en) | 1992-03-23 | 1993-03-22 | Multilens imaging apparatus with correction of misregistration |
| AT93104677T ATE158129T1 (de) | 1992-03-23 | 1993-03-22 | Bildaufnahmevorrichtung mit mehreren linsen und korrektur von falschregistrierung |
| US08/036,079 US5668595A (en) | 1992-03-23 | 1993-03-23 | Multi-lens imaging apparatus having a mechanism for combining a plurality of images without displacement of registration |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP4152214A JP2974500B2 (ja) | 1992-06-11 | 1992-06-11 | 複眼撮像装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH05344422A true JPH05344422A (ja) | 1993-12-24 |
| JP2974500B2 JP2974500B2 (ja) | 1999-11-10 |
Family
ID=15535570
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP4152214A Expired - Fee Related JP2974500B2 (ja) | 1992-03-23 | 1992-06-11 | 複眼撮像装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2974500B2 (ja) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5907434A (en) * | 1995-03-20 | 1999-05-25 | Canon Kabushiki Kaisha | Image pickup apparatus |
| JP2009239392A (ja) * | 2008-03-26 | 2009-10-15 | Fujifilm Corp | 複眼撮影装置およびその制御方法並びにプログラム |
| US7689117B2 (en) | 2006-01-11 | 2010-03-30 | Panasonic Corporation | Multi-module photography system |
| JP2012090288A (ja) * | 2011-11-18 | 2012-05-10 | Fujifilm Corp | 複眼撮影装置およびその制御方法並びにプログラム |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| AU2003231457A1 (en) * | 2003-04-23 | 2004-11-19 | Seijiro Tomita | Method and apparatus for measuring distance |
| JP4297111B2 (ja) | 2005-12-14 | 2009-07-15 | ソニー株式会社 | 撮像装置、画像処理方法及びそのプログラム |
-
1992
- 1992-06-11 JP JP4152214A patent/JP2974500B2/ja not_active Expired - Fee Related
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5907434A (en) * | 1995-03-20 | 1999-05-25 | Canon Kabushiki Kaisha | Image pickup apparatus |
| US7689117B2 (en) | 2006-01-11 | 2010-03-30 | Panasonic Corporation | Multi-module photography system |
| JP2009239392A (ja) * | 2008-03-26 | 2009-10-15 | Fujifilm Corp | 複眼撮影装置およびその制御方法並びにプログラム |
| JP2012090288A (ja) * | 2011-11-18 | 2012-05-10 | Fujifilm Corp | 複眼撮影装置およびその制御方法並びにプログラム |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2974500B2 (ja) | 1999-11-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US5668595A (en) | Multi-lens imaging apparatus having a mechanism for combining a plurality of images without displacement of registration | |
| US10863164B2 (en) | Stereo camera and method of controlling stereo camera | |
| US5646679A (en) | Image combining method and apparatus | |
| US5682198A (en) | Double eye image pickup apparatus | |
| JP2883265B2 (ja) | 画像処理装置 | |
| US6236748B1 (en) | Compound eye image pickup device utilizing plural image sensors and plural lenses | |
| US5699108A (en) | Multi-eye image pickup apparatus with multi-function finder screen and display | |
| US6304284B1 (en) | Method of and apparatus for creating panoramic or surround images using a motion sensor equipped camera | |
| US5798791A (en) | Multieye imaging apparatus | |
| US20030169918A1 (en) | Stereoscopic image characteristics examination system | |
| JP2017112602A (ja) | パノラマ魚眼カメラの画像較正、スティッチ、および深さ再構成方法、ならびにそのシステム | |
| US6839081B1 (en) | Virtual image sensing and generating method and apparatus | |
| CN111854636B (zh) | 一种多相机阵列三维检测***和方法 | |
| JP2002071309A (ja) | ３次元画像検出装置 | |
| Gehrig | Large-field-of-view stereo for automotive applications | |
| JP2974500B2 (ja) | 複眼撮像装置 | |
| KR20140121345A (ko) | 감시카메라 유닛 및 그 구동방법 | |
| JP2018134712A (ja) | ロボットシステム及びロボットシステムの制御方法 | |
| TWM594322U (zh) | 全向立體視覺的相機配置系統 | |
| JPH10170227A (ja) | 表示装置 | |
| JP2883264B2 (ja) | 複眼撮像装置 | |
| JP3093447B2 (ja) | 複眼撮像装置 | |
| JP3412945B2 (ja) | 画像合成装置及び撮影装置 | |
| JPH06195447A (ja) | 複眼撮像装置 | |
| TWI725620B (zh) | 全向立體視覺的相機配置系統及相機配置方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080903 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090903 Year of fee payment: 10 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090903 Year of fee payment: 10 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100903 Year of fee payment: 11 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100903 Year of fee payment: 11 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110903 Year of fee payment: 12 |
|
| LAPS | Cancellation because of no payment of annual fees |