JPH08181903A

JPH08181903A - 撮像装置

Info

Publication number: JPH08181903A
Application number: JP6321887A
Authority: JP
Inventors: Hitoshi Hashimoto; 仁史橋本; Takashi Shoji; 隆庄司; Hideaki Yoshida; 英明吉田; Akio Terane; 明夫寺根; Kazuya Kobayashi; 一也小林
Original assignee: Olympus Optical Co Ltd
Current assignee: Olympus Corp
Priority date: 1994-12-26
Filing date: 1994-12-26
Publication date: 1996-07-12

Abstract

(57)【要約】【目的】本発明は、画像を分割して撮影し、部分画像か
ら全体画像への復元時に貼合わせ処理の時間短縮，精度
向上を実現し、高画質に画像を撮像する撮像装置を提供
することを目的とする。【構成】本発明は、回動するミラー２により互いにオー
バーラップする領域を有して分割撮影された複数の部分
画像を撮像素子４で得る。前記部分画像で被貼合わせ画
像側のオーバーラップする領域内に基準ブロック（基準
点）を設定し、貼合わせ画像側のオーバーラップする領
域内で基準ブロックと合致する対応ブロック（基準点）
を探索し、基準ブロックと対応ブロック、若しくは基準
点と対応点を合致させ、貼合わせる貼合わせ処理部２５
と、前回以前に貼合わせた時の基準ブロックや対応ブロ
ックの各位置に基づく予測情報を持ち、次回の貼合わせ
の際に、予測情報により貼合わせ位置（探索範囲）を予
測して探索し貼合わせを行う撮像装置である。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、分割して撮影した複数
の分割画像を貼合わせて１画像に復元する撮像装置に関
する。

【０００２】

【従来の技術】一般に、紙面等に描画されて２次元に広
がる被写体を撮像する撮像装置としてフライングスポッ
トスキャナ、ファクシミリ、コピー機等が広く知られて
いる。これらの撮像装置は、撮影の際に被写体領域を純
電子的に走査するのではなく、純機械的に走査したり、
あるいは、ラインセンサを用いて、１次元を電子的に走
査し、他の１次元を機械的に走査させて２次元画像を得
るものである。

【０００３】また近年、「ＯＡカメラ」や「黒板カメ
ラ」等と称され、ホワイトボードや黒板の近傍に取り付
けて、書かれた文字や図形等の情報を一括撮影し、極め
て簡単に情報収集を行うカメラがある。このカメラは、
ＣＣＤのような単一撮像素子が組み込まれ、１被写体に
対して、１撮像画面を得るような通常のカメラの撮像形
式をもつ携帯型のカメラである。

【０００４】一般に、文字等の画像情報は細かく、従来
の２次元撮像素子を用いて純電子的走査により撮影しよ
うとすると、文字情報の判読が可能な程度の解像度を得
るには、必要とする素子の画素数が極めて多くなるた
め、構造が難しくなり、コスト高となる。また、前述し
たような純機械的走査やラインセンサと機械的走査の組
み合わせ方式では、装置の構成が複雑化し、大型化する
だけでなく、画像取り込み時間が長くなってしまうとい
う不具合もあった。

【０００５】そこで、前記１被写体に対して１撮像画面
を得る「ＯＡカメラ」等に対して、より高精細な画像を
得るものとして、製造が容易で比較的安価な実用的な画
素数を持つＣＣＤなどの単一撮像素子により撮像系を構
成するものであって、更に、撮像光学系中に走査用の可
動ミラーを配設する画面分割撮影式「ＯＡカメラ」が考
えられる。この画面分割撮影式「ＯＡカメラ」は、前記
可動ミラーが各走査回動位置にあるときに、該回動位置
に対応する分割された被写体部分の画像を撮像素子で撮
像し、その複数の撮像画面を貼合わせることによって、
１枚の撮影画像情報を得るものである。

【０００６】このカメラは、被写体領域を例えば２乃至
１０数個の複数領域に分割し、それぞれの被写体領域で
前記可動ミラーを回動させて走査し、順次撮影する。撮
影後、得られた複数の部分領域に対する画像情報を貼合
わせ処理を行い、１枚の被写体画像を得る。この結果、
携帯可能な大きさの装置により、比較的短時間で広い領
域について高精細な画像の取り込むことができる。この
ようなカメラとして、例えば、本出願人が提案している
特願平５−２４６３９０号に記載されるカメラがある。

【０００７】前記画面分割式「ＯＡカメラ」において
は、前述したように、撮影された部分領域の画像情報の
貼合わせ処理が行なわれる。この貼合わせ処理とは、各
別に得られた部分画像を単純に１つの大きな全体画像に
つなぎ合わせる処理を言うのみではなく、その際の各画
像間のずれや傾きを補正する処理を含んでなるものであ
る。

【０００８】このような処理について、銀塩フィルムを
用いた繋ぎパノラマ写真を例として説明する。従来、複
数の部分画像を繋ぎ合わせて、１つの大きな全体画像を
得る手法として、銀塩写真においては主に、地平，水平
に拡がる幅広い領域を撮影する風景撮影に用いられてお
り、繋ぎパノラマ写真と呼ばれている。

【０００９】この繋ぎパノラマ写真を撮影する場合に重
要なことは、カメラの撮影範囲が正確に水平方向にシフ
トされていくことであり、通常、カメラは三脚に固定さ
れて、雲台による水平回転が利用される。

【００１０】しかしながら、雲台の水平回転を利用して
も、ずれや傾きを完全に零にする事はきわめて難しい。
また撮影の際に三脚がない場合には、撮影者の手持ちに
よりこれを簡易的に実現する手法もあり、このときは当
然撮影範囲のずれや傾きは顕著に生じる。

【００１１】そこで最終的な１枚の全体画像に繋ぎ合わ
せる（プリントの切り貼り又は焼きつけ処理に於て行な
われる）際には、隣接する部分画像の接続部分の「像の
繋がり具合」すなわち境界における連続性や画像の相関
性を目視により判断しながら位置や傾きの補正が行なわ
れる。また、このため撮影時には、接続部分の近傍の領
域は隣接する部分画像に共通に含まれているように撮影
範囲を設定する。このとき共通に含まれる領域をオーバ
ーラップ（重なり又は重複）領域とかオーバーラップ部
と称する。

【００１２】さて、前記「ＯＡカメラ」による画面にお
いても、各部分画像は同時に得られず、順次、スキャン
ニングによって得られるので、撮影時の手振れ（カメラ
ブレ）や被写体の動きがあると、各部分画像にずれや傾
き等の貼合わせ誤差が生じる。また同様の誤差は、スキ
ャンニング機構によっても生じる。

【００１３】すなわち、ミラーをモータで回動させる機
械式スキャンニング機構を例にとれば、構成部品には所
定の許容範囲で製造誤差があることが多く、これらの部
品で組上げた場合には、回動・停止に伴ってミラーが振
動したり、ミラーの固定（停止）位置にばらつきが生じ
る。これらの振動やばらつきにより撮影される像にも誤
差を生じる。このとき前者は、毎回の撮影によって常に
同じ値で生ずる定常的誤差となるが、特に後者は固定位
置のばらつきにより、撮影の都度、値がばらつく偶発的
誤差となる。なお前述した手振れや被写体の動きによっ
て生ずる誤差は偶発的誤差である。

【００１４】これらの誤差を含む複数の部分画像を位置
や傾きの補正を行ないつつ、１つの大きな全体画像に繋
ぎ合わせる処理が、貼合わせ処理である。なお、この処
理は全て同時に行なわれるとは限らず、部分画像を全体
画像に繋ぎ合わせる手順（アルゴリズム）によっては各
隣接する部分画像の対又は組毎に順次に行なわれるが、
その時はその各次の処理においても、貼合わせ処理と呼
ぶ。

【００１５】このような貼合わせ処理は、オーバーラッ
プ部の画像の相関を演算する事により貼合わせ誤差を算
出して行なわれる。すなわち、「繋ぎ」は各部分画像の
データの座標を全体画像の座標に割当てる（置き換え
る）ことによって実現されるが、その際、前記算出され
た貼合わせ誤差に基づいて、座標補正を施せば良い。

【００１６】この様な相関演算に基いて貼合わせ処理を
行なう具体的技術は、例えば本出願人による特願平５−
２６０４６５号に詳細に述べられており、ここでの説明
は省略する。

【００１７】

【発明が解決しようとする課題】しかし、前述した貼合
わせ処理は、実際の「ＯＡカメラ」の中では、各画像情
報データをデジタルメモリに取り込み、そのデータ（ア
ドレス情報を含む）に対してデジタル演算等のデータ処
理を行なうことで実現される。

【００１８】一般に、そのデータ処理には数１０ｍｓ〜
数１００ｍｓ以上の時間を要している。ここで、生産コ
ストや形状（小型化）の面から考えると、処理に要する
デジタルメモリの容量は極力小さくする事が有利であ
る。

【００１９】このような考え方に立って装置を作成した
場合（第１のケース）、貼合わせ処理は、各部分画像が
撮影される度に順次実行する方が、全ての部分画像を一
旦バッファメモリに取り込んでから処理する方よりも優
れている。すなわち、後者では全画像分のバッファメモ
リが必要になるが、前者は部分画像数個分のバッファメ
モリがあれば実現できる。

【００２０】但し、貼合わせ処理に時間が長く掛かる
と、その処理が終了するまで次の部分画像の撮影を開始
できないため、撮影時間間隔が長くなり、被写体の状態
が変化してしまったりする場合があった。

【００２１】一方、貼合わせ処理は、前述したように画
像データの相関を利用するため、前記オーバーラップ部
分の中の相関演算に使用する領域に、ある一定のコント
ラストを持った被写体がなかったり、あるいはくり返し
パターンの様な演算に誤判断を生じるような被写体があ
った場合、貼合わせが不能になるという不具合があっ
た。

【００２２】また、前述したスキャンニング等に基いて
生じる定常的誤差については、常に同じ補正を行なえば
よいが、その補正量が未知であるため、結果的に演算の
効率が下がり、演算時間の長化や、誤判断のおそれが増
すといった不具合となった。

【００２３】さらに前記演算に要する時間は、毎回の状
況（貼合わせ誤差の大きさやオーバーラップ部の絵柄
等）によって一般に異なり、また他の要因により、毎回
の部分画像の撮影時間間隔（露出タイミング）は、偶発
的にばらつくことになる。このため毎回の演算毎に手振
れの影響や被写体の動きの影響がより大きく変動するこ
ととなり、やはり演算の効率低下が生じるという不具合
があった。

【００２４】以上、前記「第１のケース」について述べ
たが、一方ではコストや形状を常に優先的させて考える
のではなく、性能を最優先で考えたり、あるいは設計の
しやすさ等を考慮する場合もある。

【００２５】そのような場合を「第２のケース」とすれ
ば、該第２のケースでは前述したように限られた容量の
バッファメモリで構成したＯＡカメラでは、貼合わせ処
理に要する時間によって各部分画像の撮影（露出）タイ
ミングが制約されたり、貼合わせ処理に用いることがで
きる情報量が限られているため、演算の効率の低下が生
じるという不具合があった。

【００２６】また、貼合わせ処理用バッファメモリの容
量によって、コストや形状，性能等が左右されるという
事情に鑑みる時、従来のＯＡカメラでは、前記バッファ
メモリと、記録媒体としてのデジタルメモリが構成上全
く分離されており兼用化がはかられていないため、コス
トや形状と性能の確保等が両立できないという不具合が
あった。

【００２７】さらにまた、前記バッファメモリの容量と
は別に、各部分画像の撮影時の露出時間や露出レベルが
一定に保たれていないと、部分画像の広い意味での画質
ばらつきが大きくなり、目的とする全体画像の画質が悪
なったり、貼合わせ処理に不具合が生じるおそれがあっ
た。

【００２８】そこで本発明は、画像を分割して撮影し、
部分画像から全体画像への復元時に貼合わせ処理の時間
短縮，精度向上を実現し、高画質に画像を撮像する撮像
装置を提供することを目的とする。

【００２９】

【課題を解決するための手段】本発明は上記目的を達成
するために、少なくとも画面の一端側に他の画面とオー
バーラップする領域を持つように撮像対象領域を分割し
て撮影し、複数の部分画像を得る撮像手段と、前記部分
画像で被貼合わせ画像側のオーバーラップする領域内に
任意の基準点を含む基準ブロックを設定し、貼合わせ画
像側のオーバーラップする領域内で前記基準ブロックと
合致する対応ブロック、若しくは基準点と合致する対応
点を探索し、基準ブロックと対応ブロック、若しくは基
準点と対応点を合致させて、部分画像を貼合わせ処理す
る画像貼合わせ手段と、前記画像貼合わせ手段により、
少なくとも前回以前に貼合わせた時に合致した前記基準
ブロック若しくは基準点及び、対応ブロック若しくは対
応点の各位置に基づく情報を予測情報として保持し、次
回の部分画像の貼合わせの際に、前記予測情報により貼
合わせ位置を予測し、貼合わせ位置を前記画像貼合わせ
手段に指示する貼合わせ制御手段とで構成される撮像装
置を提供する。

【００３０】

【作用】以上のような構成の撮像装置は、画面の一部に
他の画面の画像とオーバーラップする領域を設けて１つ
の撮影対象領域を分割して撮影して、複数の部分画像を
生成し、そられの部分画像を繋げる際に、被貼合わせ画
像のオーバーラップ領域内に少なくとも２つの基準点や
基準ブロックを設定し、この箇所の画像データと合致す
る対応点若しくは、対応ブロックを貼合わせる画像のオ
ーバーラップ領域内で探索し、探索された対応点若しく
は、対応ブロックを基準点や基準ブロックに一致するよ
うに重ねて貼合わせ処理を行う。そして、貼合わせ処理
の際に得た基準点や基準ブロック及び対応点、対応ブロ
ックの位置情報を記憶しておき、次回からの貼合わせを
行う際の貼合わせ位置の決定に前記位置情報を予測情報
として利用して、対応点若しくは対応ブロックの探索を
行う概略的なサーチエリアが貼合わせる画像のオーバー
ラップ領域内に設定される。

【００３１】

【実施例】以下、図面を参照して本発明の実施例を詳細
に説明する。図１には、本発明による第１実施例として
の撮像装置の概略的な構成を示し説明する。

【００３２】この撮像装置においては、被写体像（被写
体）１を反射させるミラー２と、該ミラー２を所定方向
に回動させるミラー駆動部３と、前記ミラー２で反射さ
れた被写体像１を撮像素子４上に結像させるためのＡＦ
機能を有する撮影レンズ５及び絞り６と、前記撮影レン
ズ５及び絞り６を駆動する撮像系駆動部７と、結像され
た被写体像１を光電変換し映像信号を生成する撮像素子
４及び撮像回路８と、該撮像素子４を駆動する撮像素子
駆動部９と、前記撮像回路８からの映像信号をデジタル
変換するＡ／Ｄ変換部１０と、デジタル変換された画像
データを記憶するメモリ１１と、該メモリ１１を駆動す
るメモリ駆動部１２と、後述する撮像された部分画像の
貼合わせ部分のパターンマッチングを行うパターンマッ
チング部１３と、得られた全体画像を着脱自在な記録媒
体、例えばメモリカード１４に記録させるカード駆動部
１５と、該カード駆動部１５を介して、プリンタ１６か
ら画像をプリントアウトさせるプリンタ駆動部１７と、
これらの各駆動部の全体を駆動制御するシステム制御部
１８と、前記撮像回路８と撮像素子駆動部９とＡ／Ｄ変
換部１０とシステム制御部１８に所定の同期信号を送出
する同期信号発生部１９と、前記システム制御部１８に
着脱自在で部品誤差情報や学習情報を記憶するＥＥＰＲ
ＯＭ２０と、カメラ筐体の回転やシフト量を検出するた
めの手振れセンサ２１と、全体のシステムの状態表示を
行うための表示部２２と、撮影を開始するためのトリガ
スイッチや部分撮影回数の設定のための入力スイッチ２
３とで構成される。

【００３３】また、前記システム制御部１８は、システ
ム全体を制御するためのシーケンス処理部２４と、画像
の貼合わせ処理を行う貼合わせ処理部２５で構成され
る。このシステム制御部１８は、大きく分けて２つの制
御を行い、そのうち１つはシーケンス処理部２４によ
り、入力スイッチ２３の内のトリガスイッチが押される
ことでスタートし、前述したようにミラー２の駆動を行
い、撮像回路８及びメモリ１１を制御して、メモリカー
ド１４に記録し、プリンタ１６へ出力するという一連の
シーケンス制御を行い、また、もう１つは、貼合わせ処
理部２５により、画像貼合わせを行うためにメモリ１１
の駆動やパターンマッチング部１３によるパターンマッ
チングの制御を行う。

【００３４】このように構成された撮像装置による撮像
について説明する。まず、被写体像１が回動するミラー
２に反射され、撮影レンズ５に導かれる。このミラー２
は、システム制御部１８に制御されるミラー駆動部３に
より、被写体像を分割して撮像するために、例えば、数
回（実施例では４回）のスキャンを行うために回動され
る。

【００３５】前記撮影レンズ５により撮像素子４上に被
写体像１が結像され、光電変換される。その被写体像１
の映像信号は、撮像回路８で処理され、Ａ／Ｄ変換部１
０でデジタル信号に変換されて、メモリ１１に画像デー
タとして記憶される。この時に、前記撮像素子駆動部９
や撮像回路８、Ａ／Ｄ変換部１０は同期信号発生部１９
からの同期信号に同期して動作し、また同期信号は、シ
ステム制御部１８にも入力され、全体のシーケンスを同
期制御する。

【００３６】前記メモリ１１から読出された画像データ
は、パターンマッチング部１３に入力され、４回のスキ
ャン各々の貼合わせ部分のパターンマッチングを行い、
ズレ量を検出し、再び、システム制御部１８を介してメ
モリ駆動部１２を駆動させて、メモリ１１から読み出
し、１枚分の大きい全体画像を得る。得られた全体画像
は、システム制御部１８の制御により、カード駆動部１
５を通ってメモリカード１４に記録される、若しくは、
プリンタ駆動部１７を駆動してプリンタ１６で出力され
る。

【００３７】次に図２を参照して前述したメモリ１１に
ついて説明する。本実施例において、メモリ１１は順次
記録を行うメモリとして説明する。この順次記録は、１
枚の大きい全体画像を４分割して、４回のスキャンによ
り撮影して部分画像を貼合わせて復元する場合に、１回
の撮影毎にパターンマッチング処理を行った後に、メモ
リカードに記録するものである。

【００３８】従って、部分画像を一時的に記憶するだけ
であるため、メモリ容量が少なくて済むという特徴があ
る。図２（ａ）は、メモリ１１に記憶される部分画像の
うち、２回目に撮影された部分画像に貼合わせるための
領域を含む３回目に撮影された画像を示している。すな
わち、全体の画像を一点鎖線で示すと、メモリ１１に一
度に記憶されるデータ量は、画像全体の約１／４の部分
画像の容量で済み、２回目に撮影した画像の終端から内
側に入った貼合わせに必要となる貼合わせ部分の画像領
域を含んだ３回目の部分画像が記憶される。

【００３９】このような２回目に撮影した部分画像の終
端部に貼合わせるのに必要な部分と、３回目に撮影した
部分画像とのパターンマッチング及び、貼合わせ処理を
行って貼合わせられた画像がメモリカードに順次、撮影
（スキャン）毎に記録される。

【００４０】次に図２（ｂ）に示すような他のメモリの
構成例として、撮影４回分の部分画像を記憶できるメモ
リについて説明する。このメモリは、４回の撮影（全ス
キャン）を行い、メモリ１１に部分画像全部を記憶させ
た後、貼合わせ処理を行い全体画像を生成し、メモリカ
ード１４に一度で記録するものである。従って、メモリ
１１は最小限、４枚分の部分画像（１つの全体画像）を
記憶するメモリ容量を必要とする。このメモリは、メモ
リ容量が大きくなるが、後述する学習や結合位置予測を
行う場合に好適する。

【００４１】次に図３には本発明による第２実施例とし
ての撮像装置の構成例を示し説明する。ここで図３に示
す構成部材において、図１に示す構成部材と同等の部材
には同じ参照符号を付して、その説明を省略する。

【００４２】この撮像装置は、装置内に前述したメモリ
１１に相当するメモリ機構を持たないという特徴があ
る。第１実施例と同様に、撮影レンズ５で結像された被
写体像１が撮像素子４により光電変換され、撮像回路８
で処理された映像信号がＡ／Ｄ変換部１０でデジタル化
された画像データ（部分画像）が生成される。

【００４３】次にデジタル化された部分画像は、カード
駆動部１５を介して、メモリカード１４にそのまま記録
される。次にカード駆動部１５は、メモリカード１４か
ら画像データを取出し、パターンマッチング部１３と貼
合わせ処理部２５とで、パターンマッチング及び貼合わ
せ処理を行い、再び、カード駆動部１５を介して、メモ
リカード１４に記録される。

【００４４】よって、本実施例は、装置内にメモリ機構
を設けていないため、小形化、低コスト化が実現でき
る。図４を参照して、本実施例に用いられるメモリカー
ドについて説明する。

【００４５】まず、点線で示す部分画像を順次、撮影
し、メモリカード１４に貼合わせ処理を行わない部分画
像の全体を記録する。その後、貼合わせを行うのに必要
な境界部分の画像、すなわち貼合わせ部分を読み出し、
パターンマッチング部１３でパターンマッチングして、
貼合わせ処理部２５により貼合わせを行う。

【００４６】そして、貼合わせ処理を行った結果の画像
（実線で示す画像）をメモリカード１４に順次記録す
る。これは、メモリカードに記録される部分画像に画像
のずれによる座標変換を施し、実線で示す貼合わせ後の
画像が記録されることになる。

【００４７】また、この様な処理を実行するためには、
座標変換を行う際に補間処理や座標変換処理を行うため
の最大１回の撮影（スキャン）分の容量のバッファメモ
リが必要となるが、メモリカードの記憶容量の一部を使
用して、例えばワークエリアを使ってバッファメモリに
利用することができる。

【００４８】次に図５を参照して、本実施例における貼
合わせ処理について説明する。前述した貼合わせ処理に
用いているパターンマッチングについて説明する。ま
ず、図２に示すように、部分画像の端部に前回撮影した
部分画像の端部が重なるように撮影する。つまり、図５
（ａ）に示すように、画像Ａの後端部（境界）と画像Ｂ
の前端部（境界）にある幅で重なりを持つように撮影す
る。この重なり部をオーバーラップ領域（オーバーラッ
プ部）とする。このオーバーラップ領域を貼合せること
により、画像Ａと画像Ｂとが貼合わせられる。

【００４９】まず、画像Ａのオーバーラップ領域内の任
意の位置に所定の大きさのブロック（本実施例では８画
素×８画素のブロックとする）を基準ブロックＡ１，Ａ
２として設定し、それらのブロックの画像情報をパター
ンマッチング部１３に取り込む。ここでは、説明を簡単
にするために、基準ブロックＡ１，Ａ２は、ある程度コ
ントラストがあり、画像Ａのオーバーラップ領域内で固
定されているものとする。

【００５０】そして、前記基準ブロックＡ１，Ａ２の情
報を取り込んだ後、次に画像Ｂのオーバーラップ領域内
から前記基準ブロックＡ１に相当する画像のブロックを
探して対応ブロックＢ１と設定し、前記基準ブロックＡ
２に相当する画像のブロックを探して対応ブロックＢ２
と設定する。これは、画像Ｂのオーバーラップ領域で設
定することができる８画素×８画素単位のブロックを移
動しながら、基準ブロックと順次に比較する。その比較
の際に、各ブロック間の相関をとる。ここで相関とはブ
ロックを構成する各画素同士の引き算値の絶対値の総和
のこととする。

【００５１】そして相関が最大となる、つまり引き算値
の絶対値の総和が最小のものを、対応ブロックＢ１，Ｂ
２とする。次に基準ブロックＡ１に対応する対応ブロッ
クＢ１、基準ブロックＡ２に対応する対応ブロックＢ２
の設定の後、それぞれの座標をもとに移動量と回転量を
算出する。ここで、移動量とは、貼合わせを行う際に、
画像Ｂを平行移動させる距離を意味し、上部の基準ブロ
ックＡ１と対応ブロックＢ１のずれ具合をずれ量Ｓ１と
し、ずれ量Ｓ１と移動量は等しくなる。また、下部の基
準ブロックＡ２と対応ブロックＢ２のずれ具合をずれ量
Ｓ２とする。

【００５２】そして、ずれ量Ｓ１とずれ量Ｓ２より画像
Ａ，画像Ｂのなす角を回転量として求める。これらの移
動量と回転量に基づき、画像Ｂを移動させ、画像Ａと画
像Ｂを貼合わせて、図６に示すような１枚の画像に復元
することできる。

【００５３】このように移動量は、本来、手振れやメカ
的誤差がまったくない場合には、画像Ａの原点“０”と
画像Ｂの原点“０”を重ねると、図５（ｂ）に示すよう
に、基準ブロックＡ１と対応ブロックＢ１及び基準ブロ
ックＡ２と対応ブロックＢ２は、１つの点に重なる。し
かし実際には、手振れやメカ誤差が生じてしまうため、
同様に２枚の画像Ａ，Ｂの原点“０”どうしを重ね合わ
せると、図５（ｃ）に示すように、基準ブロックＡ１と
対応ブロックＢ１や基準ブロックＡ２と対応ブロックＢ
２の不一致が生じる。つまり、画像がずれて繋ぎ合わさ
れてしまう。

【００５４】なお、前述したように求めた移動量と回転
量により、画像Ｂを移動させて貼合わせているが、ずれ
量Ｓ１，Ｓ２を使って、貼合わせに必要な移動量もしく
は回転量に計算し直す手順は後述する。

【００５５】次に、前述した貼合わせ処理では、画像Ａ
の基準ブロックと同一な画像を画像Ｂの中から探しだ
し、対応ブロックＢ１として設定したが、この設定の際
のサーチについて、通常の場合と予測位置を利用する場
合を説明する。

【００５６】ここで、本実施例では図７（ａ）に示すよ
うな画像Ｂ中の対応ブロックＢ１の存在する範囲をサー
チエリアＣとし、例えば、６４画素×６４画素に設定す
る。このサーチエリアＣは、最大手振れ量や最大メカ誤
差等に基づき、画像の欠損なしに貼合わせることのでき
る範囲を考慮にいれて、決定する。

【００５７】通常行うサーチは、サーチエリアＣの端か
ら８×８のブロックを１画素ずつずらして探しており、
この手法では、５７×５７、つまり３２４９個のブロッ
クの相関を求めなければならず、探索に非常に時間がか
かってしまう。そこで、ある程度の予測によって、計算
回数を減らし、探索時間の短縮を図ることが考えられ
る。

【００５８】第１の予測位置を使った探索手法として、
図８（ａ）に示すように、予測位置の上下左右の１画素
ずらした範囲のみサーチする手法がある。この手法は、
左側の右上の１画素ずつずらしたものから順番に全部で
予測位置の周辺９回分の中で探索する。全部で９回分の
相関を求めた後、予測位置の相関値、予め設定した基準
値を越えた上で相関が最大であれば、その位置を対応ブ
ロックとする。

【００５９】また、第２の予測位置を使った探索手法と
して、図８（ｂ）に示すように、上下左右に２画素ずつ
（１画素乃至２画素）ずらして、合計２５通りの相関を
求めて、前述と同様に、予め設定した基準値を越えた上
で予測位置の相関が最大であれば、その位置を対応ブロ
ックの設定する位置とする手法がある。

【００６０】このような予測位置を使ったサーチを用い
ると、高々９回または、２５回の相関値を求める演算だ
けで探索でき、従来に比べて圧倒的な速さで、対応ブロ
ックを見つけることができる。

【００６１】さらに第３の予測位置を使った探索手法と
して、図１１（ａ）に示すように、６４画素×６４画素
のサーチエリアを分割し、予測位置の入っている分割エ
リアを、端から順番に相関を求める手法がある。ここ
で、本実施例では、６４画素×６４画素のエリアを４分
割して、３２画素×３２画素の範囲の相関を求める例に
ついて説明する。

【００６２】この手法によれば、全部で１０２４回の相
関を求めることになり、前述した６４画素×６４画素の
サーチエリア全体の相関を求めるよりも探索時間が短縮
される。

【００６３】次に、具体的に、対応ブロックＢ１を貼り
合わせる側の画像Ｂのオーバーラップ領域から予測位置
を使用してサーチ時間を短縮する手法について説明す
る。この予測位置の求め方について説明する。

【００６４】第１の予測位置の求め方として、複数の画
像を貼り合わせる場合に、２回目以降の貼合わせは、前
回の貼合わせの際に用いたずれ量から予測位置を求める
手法について説明する。ここで、１回で撮影された画像
を複数回貼り合わせる場合、近似したずれ方をするもの
と想定している。

【００６５】１回の貼合わせで得られたずれ量Ｓ１
（ｘ，ｙ）、Ｓ２（ｘ，ｙ）を相対値として予測位置を
次式で求める。 α１ｘ＝Ａ１ｘ＋（前回のＳ１ｘ） …Ｈ１ α１ｙ＝Ａ１ｙ＋（前回のＳ１ｙ） …Ｈ２ α２ｘ＝Ａ２ｘ＋（前回のＳ２ｘ） …Ｈ３ α２ｙ＝Ａ２ｙ＋（前回のＳ２ｙ） …Ｈ４ここで、予測位置の座標：α、対応ブロックＢ１の予測
位置：α１、対応ブロックＢ２の予測位置：α２、それ
ぞれｘ方向，ｙ方向の座標：ｘ，ｙ、基準ブロックＡ１
のｘ座標に前回のずれ量のＸ座標を足し合わせたもの：
α１ｘ、Ａ１のＹ座標に前回のずれ量のｙ座標を足し合
わせたもの：α１ｙ、基準ブロックＡ２のｘ座標に前回
のずれ量のＸ座標を足し合わせたもの：α２ｘ、Ａ２の
Ｙ座標に前回のずれ量のｙ座標を足し合わせたもの：α
２ｙとする。

【００６６】本実施例のようなＯＡカメラでは、手振れ
による影響が一番大きい。そこで、第２の予測位置の求
め方として、手振れセンサによって手振れ量を検出し、
算出された手振れ量から予測位置を求める手法について
説明する。図１に示すようにｘｙ方向の手振れ量を検出
できる手振れセンサ２１を設けている。この例では、手
振れ検出は、必ず部分撮影する際に行われるものとす
る。

【００６７】 α１ｘ＝Ａ１ｘ＋（毎回の計測時の手振れ１ｘ成分） …Ｈ５ α１ｙ＝Ａ１ｙ＋（毎回の計測時の手振れ１ｙ成分） …Ｈ６ α２ｘ＝Ａ２ｘ＋（毎回の計測時の手振れ２ｘ成分） …Ｈ７ α２ｙ＝Ａ２ｙ＋（毎回の計測時の手振れ２ｙ成分） …Ｈ８以上のように、予測位置のα１ｘは基準ブロックＡ１の
ｘ座標に、部分撮影時に求めた手振れ量（ｘ成分）を加
える。以下、α２も同様に予測位置が求められる。

【００６８】なお、手振れセンサ２１により、手振れ量
を検出する場合、毎回計測を行うため、足し合わせる手
振れ量は同じ値でなく、例えば、４回の撮影（スキャ
ン）を行うのであれば、４回とも異なった値の手振れ量
をＡの座標に足し合わせるという形になる。

【００６９】また、ずれ量を求める際に上側のＢ１側
と、下側のＢ２と２点を求めなければならないため、手
振れはカメラの上側と下側の２か所で検出する。そし
て、上側の手振れ量をｘｙ成分に分け、１ｘ，１ｙと
し、予測位置α１を求める時に用いる。また下側の手振
れ量も、ｘｙ成分に分け２ｘ，２ｙとし、下側の予測位
置のα２を求める時に用いる。

【００７０】次に第３の予測位置の求め方として、それ
ぞれのカメラ固有の撮影の際のミラー２を回動させた
（スキャン）時の誤差をＥＥＰＲＯＭ２０に記録してお
き、予測する際にＥＥＰＲＯＭ２０から情報を読み出
し、予測位置を求める手法である。ここで、ミラースキ
ャン時の誤差とは、ミラーが回動する時に発生するミラ
ーの位置ずれ等の機械的な誤差と、電気部品の特性等の
ばらつきに起因する電気的な制御系の誤差、またはレン
ズ等の光学部品に起因する光学的な誤差等からなる。

【００７１】なお、このＥＥＰＲＯＭ２０に記録される
誤差の情報には、各スキャン毎に発生する誤差を記録さ
せておき、各撮影ごとの誤差のばらつきが解消できるよ
うにする。

【００７２】 α１ｘ＝Ａ１ｘ＋（ＥＥＰＲＯＭに記憶した誤差１ｘ成分） …Ｈ９ α１ｙ＝Ａ１ｙ＋（ＥＥＰＲＯＭに記憶した誤差１ｙ成分） …Ｈ１０ α２ｘ＝Ａ２ｘ＋（ＥＥＰＲＯＭに記憶した誤差２ｘ成分） …Ｈ１１ α２ｙ＝Ａ２ｙ＋（ＥＥＰＲＯＭに記憶した誤差２ｙ成分） …Ｈ１２予測位置α１ｘは、Ａ１ｘの座標に記憶された機械的な
誤差、制御系の誤差や光学的誤差を足し合わせたｘ成分
を加える。以下、α２も同様に予測位置が求められる。

【００７３】次に、第４の予測位置の求め方として、例
えばニユーラルネットワークのような学習機能をもう
け、ユーザの手振れ等の癖やメカ誤差等を学習させ、予
測位置を決める手法がある。このような手法の一例とし
て、ここでは、前回までの撮影の際に生じたずれ量の平
均値を記憶しておき、その平均値をＡ１の座標に足し、
それを予測位置とする。

【００７４】 α１ｘ＝Ａ１ｘ＋（前回までの平均値１ｘ成分） …Ｈ１３ α１ｙ＝Ａ１ｙ＋（前回までの平均値１ｙ成分） …Ｈ１４ α２ｘ＝Ａ２ｘ＋（前回までの平均値２ｘ成分） …Ｈ１５ α２ｙ＝Ａ２ｙ＋（前回までの平均値２ｙ成分） …Ｈ１６以上、前述した予測位置は、それぞれ単独に使用でき、
また組み合わせて用いることができる。

【００７５】次に、図９に示すフローチャートを参照し
て、予測位置を利用した貼り合わせ処理について説明す
る。ここで、構成部材の参照符号は、図１に示した構成
部材の参照符号を示すものとする。

【００７６】まず、ユーザが撮影する所望の画像を何分
割するか設定する、すなわち、部分画像の撮影する回数
Ｎを設定する（ステップＳ１）。次に、撮影した回数Ｉ
の初期値“１”を設定し（ステップＳ２）、図示しない
スタートスイッチ（レリーズスイッチ）をオンさせ、１
枚目の部分撮影を開始する（ステップＳ３）。ミラー２
が回動して、次の被写体部分画像を撮像素子に結像させ
る（ステップＳ４）。ミラー２の回動終了後に、撮影回
数Ｉをインクリメントする（ステップＳ５）。再び、部
分撮影を行う（ステップＳ６）。

【００７７】そして、その撮影の後、予測位置を利用し
て移動量，回転量を算出する（ステップＳ７）。算出さ
れた移動量，回転量に基づき、画像の移動，回転を行
い、貼り合わせ処理する（ステップＳ８）。

【００７８】次に、撮影した回数Ｉがユーザが設定した
撮影する回数Ｎになるまで、前述した撮影及び貼り合わ
せ処理を行い終了する（ステップＳ９）。次に、図１０
のフローチャートを参照して、貼り合わせ処理における
移動量，回転量の算出について説明する。

【００７９】ここで、本実施例においては、移動量は、
Ｓ１ｘ，Ｓ１ｙ、つまり境界部分の上の点Ａ１，Ｂ１そ
のもののずれ量を移動量とし、また回転量は、Ａ１とＢ
１を重ね合わせた時に境界部分の下の点Ａ２，Ｂ２が一
致するまでの必要な回転する量を回転量とする。

【００８０】まず、基準ブロックＡ１の画像を取り込み
（ステップＳ１１）、続いて、基準ブロックＡ２（下
側）の画像を取り込む（ステップＳ１２）。次に、前述
した予測位置を求める方法のいずれかを用いて求めた、
対応ブロックＢ１の予測位置を入力する（ステップＳ１
３）。ここで、入力される予測位置はα１ｘ，α１ｙで
ある。しかし、もし予測が不可能で情報がない場合に
は、“情報なし”として入力しておく必要がある。

【００８１】次に、前記予測位置に基づき、対応ブロッ
クＢ１を探索する（ステップＳ１４）。この探索で得ら
れた対応ブロックＢ１を用いて、次式、Ｓ１ｘ＝Ｂ１ｘ−Ａ１ｘ …Ｈ１７Ｓ１ｙ＝Ｂ１ｙ−Ａ１ｙ …Ｈ１８を用いて、基準ブロックＡ１と対応ブロックＢ１とのず
れ量Ｓ１を算出する（ステップＳ１５）。

【００８２】前述したと同様に対応ブロックＢ２の予測
位置α２ｘ，α２ｙを入力する（ステップＳ１６）。そ
して、この予測位置α２ｘ，α２ｙに基づき、対応ブロ
ックＢ２を探索する（ステップＳ１７）。この探索で得
られた対応ブロックＢ２を用いて、上式Ｈ１７，Ｈ１８
で同様に基準ブロックＡ２と対応ブロックＢ２とのずれ
量Ｓ２を算出する（ステップＳ１８）。そして、求めら
れたずれ量Ｓ１ｘをＸ方向の移動量、ずれ量Ｓ１ｙをＹ
方向の移動量とする（ステップＳ１９）。そして回転量
を次式、

【００８３】

【数１】で算出し（ステップＳ２０）、リターンする。

【００８４】次に対応ブロックＢの探索処理について説
明する。本実施例では、８画素×８画素のブロックサイ
ズで対応ブロックＢ１について探索処理する例について
説明する。

【００８５】ここで図１１（ｂ）を参照して、探索のた
めに用いる相関の演算について説明する。図１１（ｂ）
において、画像Ａの基準ブロックの１番左上端の画素を
ＤＡ（０，０）とし、このＤＡ（０，０）と実際の相関
を求めるブロックの左上端の画素をＤｐ（０，０）とす
る。

【００８６】この画素ＤＡ（０，０）と画素Ｄｐ（０，
０）との差から右下端の画素ＤＡ（７，７）と画素Ｄｐ
（７，７）の差までを順番に求めて、その絶対値を足し
たものを相関値とする。これを式で表すと、

【００８７】

【数２】となる。ここで、ｑは相関誤差で、相関の度合いを示
し、相関はｑの値が小さいほど大きいものとし、ｑの値
が小さい程、相関性が良い。

【００８８】さらに図１２には、それぞれの基準ブロッ
クの相関を導くためのブロックの位置（座標）の表し方
について示す。画像Ａの基準ブロックの位置は、ブロッ
クの左上の画素の位置を基準とし、ブロックの座標とす
る。従って、基準ブロックの座標はＡ１ｘ，Ａ１ｙ、画
像Ｂの予測位置の対応ブロックの座標はα１ｘ，α１ｙ
とする。

【００８９】さらに、実際に相関を求めるブロックは、
最初のブロックの位置から周辺に２画素づつずらした範
囲で探すものとすれば、例えば１番左上にずれているブ
ロックの位置は、α１ｘ−２，α１ｙ−２で表され、周
辺ブロックで１番右下のブロックの位置は、α１ｘ＋
２，α１ｙ＋２で表される。

【００９０】次に、図１３に示すフローチャートを参照
して、探索処理について説明する。最初に、予測位置情
報があるか否かを判定する（ステップＳ３１）。予測位
置が設定されていない場合（ＮＯ）、通常のすべての画
素に対して探索［通常サーチ］を行う（ステップＳ３
２）。この通常サーチを行う場合、例えば、サーチエリ
アが６４画素×６４画素であれば、合計３２４９回のブ
ロック相関を演算することとなる。しかし、この判定で
予測位置情報があると判定された場合（ＹＥＳ）、前述
したように、次式に基づいて予測位置の相関を求める
（ステップＳ３３）。

【００９１】

【数３】ここで、ｑは前述した相関誤差である。Ｄα１は、上側
の予測位置ブロックの１画素のデータそのものの値を示
し、ＤＡ１は上側の基準ブロックを構成する１画素のデ
ータの値そのものを示す。ｎは許容量を表し、予測位置
の相関値ｑが予め設定した許容量よりも低い場合は、後
述するように予測位置による探索の信頼性が低いことを
意味し、通常サーチを行う。

【００９２】次に、求められた予測位置の相関値ｑと、
許容値ｎと比較する（ステップＳ３４）。この比較で予
測位置の相関値ｑが許容値ｎ以下であれば（ＮＯ）、つ
まり予測位置による探索の信頼性が低いと判断され、ス
テップＳ３２に移行し、通常サーチを行う。

【００９３】しかしステップＳ３４の比較で、予測位置
の相関値ｑが許容値ｎより大きいのであれば（ＹＥ
Ｓ）、予測される対応ブロックの周辺２画素の範囲でサ
ーチを行うことになる。この時、最初に予測位置と相関
を比較する位置の座標を、Ｉにα１ｘ−２，Ｊにα１ｙ
−２を代入し（ステップＳ３５）、次式により、相関値
γを求める（ステップＳ３６）。

【００９４】

【数４】ここで、ｑは前述した相関誤差であり、Ｄｐ１は予測位
置の周辺のブロック、つまり現在相関を計算しているブ
ロックを構成する画素のデータの値を示す。

【００９５】次に、求められた相関値γが、ステップＳ
３３で求めた相関値ｑよりも大きいか否かを判定する
（ステップＳ３７）。この判定で相関値γが相関値ｑ未
満であれば（ＮＯ）、すなわち相関値γの方が相関が高
いと判定された場合には、予測位置より対応点として正
確なものと想定されるため、Ｉをα１ｘ，Ｊをα１ｙに
予測位置として再設定する（ステップＳ３８）。

【００９６】さらに相関値γを新たな予測位置として相
関値ｑと入れ替え（ステップＳ３９）、ステップＳ３５
に戻り、再度、相関誤差を求める。しかし、前記ステッ
プＳ３７の判定で、相関値γが相関値ｑより大きければ
（ＹＥＳ）、ｑの方が相関が高い、つまり予測位置の方
が相関が良かったと判断された場合は、Ｉとα１ｘ＋２
を比較し（ステップＳ４０）、α１ｘ＋２に達するまで
Ｉをインクリメントさせて（ステップＳ４１）、ステッ
プＳ３６に戻り、同じ処理を繰り返す。

【００９７】同様に、Ｊがα１ｙ＋２に達するまで（ス
テップＳ４２）、Ｉを一時的にα１ｘ−２に戻し（ステ
ップＳ４３）、さらにＪをインクリメントさせて（ステ
ップＳ４４）、同じ処理を行う。このＩを一端α１ｘ−
２に戻すのは、サーチは横方向に５回、縦方向にも５
回、合計で２５回やらなければならないため、一旦、横
方向に行い、次いで、１度Ｊをインクリメントする時
に、また横方向をもとに戻すための操作である。

【００９８】このような処理を設定した回数分行った後
に、最終的に予測位置となるα１ｘを対応点として、Ｂ
１ｘ，α１ｙをＢ１ｙとして、処理を終了する（ステッ
プＳ４５）。

【００９９】なお、このフローチャートでは、対応ブロ
ック（対応点）Ｂ１の探索について述べているが、対応
ブロック（対応点）Ｂ２を求める処理も同様である。次
にオーバーラップ領域に文字や絵など記載がなく、コン
トラストデータのある基準ブロックが設定できない例に
ついて説明する。

【０１００】このような場合には、１つの手法として、
デフォルト位置で貼り合わせることが考えられる。この
デフォルト位置とは、例えば２つのオーバーラップ領域
の原点を重ね合わせた位置である。

【０１０１】図１４のフローチャートを参照して説明す
る。まず、移動量，回転量を求める際に、基準ブロック
のデータがあるか否かを判定する（ステップＳ５１）。
この判定で、基準ブロックにデータがある場合は（ＹＥ
Ｓ）、前述したように移動量，回転量を算出する（ステ
ップＳ５２）。しかし、基準ブロックにデータが無い場
合は（ＮＯ）、所定のデフォルト位置、例えば、原点を
重合わせるのであれば、“０”をそれぞれ移動量，回転
量に設定する（ステップＳ５３）。

【０１０２】そして、それらのデフォルト位置で貼り合
わせ、その旨をユーザに告知し処理を終了する（ステッ
プＳ５４）。このようにデフォルト位置での貼り合わせ
は、基準ブロックにデータが無くて貼り合わせ処理がで
きない場合以外にも、例えば、カメラの製造の時の調整
時で予想を使わずに貼り合わせを行いたい時や、撮影が
難しい場面を撮るような際、カメラの予測を越えたとこ
ろで貼り合わせを行わなければならない場合は、ユーザ
の切り換えにより予測を使用しないでデフォルト位置で
貼り合わせることが有効になる。

【０１０３】また、基準ブロックにデータがない場合の
他の手法として、図１５に示すフローチャートの手順に
よる予測位置で貼り合わせる手法がある。まず、移動
量，回転量を算出する際に、基準ブロックにデータがあ
るか否かを判定する（ステップＳ６１）。この判定で、
基準ブロックにデータがある場合は（ＹＥＳ）、前述し
たように移動量，回転量を算出する（ステップＳ６
２）。しかし、基準ブロックにデータが無い場合は（Ｎ
Ｏ）、予測位置α１，α２を入力する（ステップＳ６
３）。

【０１０４】そして、予測位置を対応ブロック（対応
点）Ｂ１の位置に用いるため、α１を対応点Ｂ１に設定
し、α２を対応点Ｂ２に設定する（ステップＳ６４）。
これらの設定により、対応点Ｂ１，Ｂ２を用いた移動
量，回転量を算出する（ステップＳ６５）。そして、予
測位置で貼り合わせ、その旨をユーザに告知し処理を終
了する（ステップＳ６６）。

【０１０５】但し、本実施例では、基準点を境界部内で
固定して説明したが、これに限定されるものではなく、
貼り合わせを行う毎に基準点の位置を変えてもよい。例
えば、白画素と黒画素の数が同数であるような特徴をも
ったブロックを基準ブロックととすると、さらに探索し
た結果の確度が向上する。

【０１０６】次に図１６を参照して前述した第１実施例
において、装置内のメモリ１１が、撮影する全部分画像
を記憶できる容量がある例について説明する。まず、撮
影する全部の部分画像（全エリア）について露出する
（ステップＳ７１）。次に、移動量，回転量を算出する
（ステップＳ７２）。この移動量，回転量の算出につい
ては、前述した図９のステップＳ７で説明した処理と同
処理を行う。

【０１０７】そして、算出された移動量，回転量を利用
して、それぞれの部分画像の貼合わせ処理を行う（ステ
ップＳ７３）。この貼合わせ処理は、前述した図９のス
テップＳ８と同等の処理を行うものとする。

【０１０８】次に、全部分画像に渡って画面の貼り合わ
せが終了したか否かを判断する（ステップＳ７４）。こ
の判断で、まだ全部分画像に渡って貼り合わせが終了し
ていない場合は（ＮＯ）、ステップＳ７２に戻り、同様
の処理を行う。しかし全部分画像に渡って画面の貼り合
わせが終了したら（ＹＥＳ）、終了する。

【０１０９】以上のように撮影される全エリアを連続露
出するために、１枚目の露出開始から最終画像の露出終
了までの時間が、毎回貼り合わせ処理を行う場合よりも
短くなり、手振れや被写体側の像ぶれ等を軽減すること
が可能となる。

【０１１０】次に、前述した図１６のステップＳ７２に
おいて、移動量，回転量のすべてが算出できる場合につ
いて説明したが、算出できない部分画像があった場合に
ついて説明する。図１７に示すフローチャートを参照し
て説明する。

【０１１１】まず、撮影する全部の部分画像（全エリ
ア）について露出する（ステップＳ８１）。次に、全エ
リアの部分画像間の相関関係を調べる（ステップＳ８
２）。そして、全エリアの相関がとれたか否かを判断す
る（ステップＳ８３）。この判断において、全部分画像
間の相関がすべてとれた場合には（ＹＥＳ）、移動量，
回転量を算出する（ステップＳ８４）。この算出は、前
述した図９のステップＳ７に示した手順に基づくものと
する。

【０１１２】そして算出された移動量，回転量に基づ
き、貼り合わせ処理を行い（ステップＳ８５）、リター
ンする。しかしステップＳ８３の判断で、いずれかの部
分画像間の相関がとれなかった場合には（ＮＯ）、全部
の部分画像間の相関がすべてとれなかったか否か判断す
る（ステップＳ８６）。この判断で、すべての部分画像
間で相関がとれなければ（ＹＥＳ）、エラー処理を行い
（ステップＳ８７）、リターンする。この場合、エラー
処理の一部として、その旨のエラー表示や前述したよう
なデフォルト値で貼り合わせを行ってもよく、適宜に処
理してもよい。

【０１１３】しかしステップＳ８６で、相関がすべてと
れない場合ではなく、少なくとも一部で相関がとれる場
合は（ＮＯ）、相関がとれない部分の移動量，回転量の
算出を行い（ステップＳ８８）、前記ステップＳ８５に
移行し、貼合わせ処理を行い、リターンする。

【０１１４】次に図１８に示すフローチャートを参照し
て、前述した図１７のステップＳ８８における移動量，
回転量の算出について詳細に説明する。ここで、部分画
像は４分割され、それぞれをエリアＡ，エリアＢ，エリ
アＣ，エリアＤの４枚組で１つの画像が構成されるもの
とする。また、エリアＡ，Ｂ間の移動量，回転量をそれ
ぞれ移動量１，回転量１、エリアＢ，Ｃ間を移動量２，
回転量２、エリアＣ，Ｄ間の移動量，回転量を移動量
３，回転量３とする。

【０１１５】まず、エリアＡ，Ｂ間及びエリアＢ，Ｃ間
のみ相関がとれないか否か判定する（ステップＳ９
１）。この判定で、相関がとれない場合は（ＹＥＳ）、
それらＡＢ間，ＢＣ間の移動量，回転量を算出し（ステ
ップＳ９２）、リターンする。ここで、ＡＢ間，ＢＣ間
の移動量，回転量の算出は、図１９（ａ）に示すフロー
チャートの手順により算出される。

【０１１６】これらのＡＢ間，ＢＣ間の移動量，回転量
の算出方法としては、最終的にはＣＤ間の移動量，回転
量が求められているため、それぞれのＡＢ間の移動量
１，回転量１に対しては求められているＣＤ間の移動量
３，回転量３の値を入力し計算する。同様に、ＢＣ間の
移動量２，回転量２に対してもそれぞれ移動量３，回転
量３の値を代入し計算する。

【０１１７】しかし、前記ステップＳ９１で相関がとれ
た場合は（ＮＯ）、次に、エリアＢ，Ｃ間及びエリア
Ｃ，Ｄ間のみ相関がとれないか否か判定する（ステップ
Ｓ９３）。この判定で、相関がとれない場合は（ＹＥ
Ｓ）、それらＢＣ間，ＣＤ間の移動量，回転量を算出し
（ステップＳ９４）、リターンする。ここで、ＢＣ間，
ＣＤ間の移動量，回転量の算出は、図１９（ｂ）に示す
フローチャートの手順により算出される。このＢＣ間，
ＣＤ間の算出においては、ＡＢ間が算出されていること
を前提条件とし、それぞれ算出されていないＢＣ間，Ｃ
Ｄ間の移動量２，移動量３、また回転量２，回転量３に
対してＡＢ間の移動量１，回転量１をそれぞれ入力し算
出する。

【０１１８】しかし、前記ステップＳ９３で相関がとれ
た場合は（ＮＯ）、次に、エリアＡ，Ｂ間及びエリア
Ｃ，Ｄ間のみ相関がとれないか否か判定する（ステップ
Ｓ９５）。この判定で、相関がとれない場合は（ＹＥ
Ｓ）、それらＡＢ間，ＣＤ間の移動量，回転量を算出し
（ステップＳ９６）、リターンする。ここで、ＡＢ間，
ＢＣ間の移動量，回転量の算出は、図１９（ｃ）に示す
フローチャートの手順により算出される。このＡＢ，Ｃ
Ｄ間の算出は、ＢＣ間が算出されているものとし、ＢＣ
間の移動量２，回転量２をそれぞれＡＢ間，ＣＤ間の移
動量１，回転量１，移動量３，回転量３にそれぞれ入力
し算出する。

【０１１９】しかし、前記ステップＳ９５で相関がとれ
た場合は（ＮＯ）、次に、エリアＡ，Ｂ間のみに相関が
とれないか否か判定する（ステップＳ９７）。この判定
で相関がとれない場合は（ＹＥＳ）、それらＡＢ間の移
動量，回転量を算出し（ステップＳ９８）、リターンす
る。ここで、ＡＢ間の移動量，回転量の算出は、図１９
（ｄ）に示すフローチャートの手順により算出される。
このＡＢ間の移動量１，回転量１の算出は、ＡＢ間，Ｂ
Ｃ間の移動量２，回転量２、また移動量３，回転量３が
算出されているものとし、これら２つを利用して、移動
量１は移動量２から移動量３を引いた値に、移動量２を
加算した値を入力し算出する。同様に、回転量は回転量
２から回転量３を引いた値に回転量２を加えたものを、
回転量１に入力し算出する。

【０１２０】しかし、前記ステップＳ９７で相関がとれ
た場合は（ＮＯ）、次に、エリアＢ，Ｃ間のみに相関が
とれないか否か判定する（ステップＳ９９）。この判定
で相関がとれない場合は（ＹＥＳ）、それらＢＣ間の移
動量，回転量を算出し（ステップＳ１００）、リターン
する。ここで、ＢＣ間の移動量，回転量の算出は、図１
９（ｅ）に示すフローチャートの手順により算出され
る。

【０１２１】このＢＣ間の算出は、移動量２，回転量２
を求める時に、ＡＢ間，ＣＤ間の移動量１，回転量１，
移動量３，回転量３を利用して求める。その求める方法
としては、移動量２に対して、移動量１と移動量３を加
えたものを２で割った値を利用する。同様に、回転量に
対しても、回転量１と回転量３を加算したものを２で割
ることによって求める。

【０１２２】しかし、前記ステップＳ９９で相関がとれ
た場合は（ＮＯ）、次に、エリアＣ，Ｄ間のみに相関が
とれないか否か判定する（ステップＳ１０１）。この判
定で相関がとれない場合は（ＹＥＳ）、それらＣＤ間の
移動量，回転量を算出し（ステップＳ１０２）、リター
ンする。ここで、ＣＤ間の移動量，回転量の算出は、図
１９（ｆ）に示すフローチャートの手順により算出され
る。

【０１２３】このＣＤ間の算出は、ＣＤ間の移動量３，
回転量３が算出されているので、ＡＢ間，ＢＣ間の移動
量２，回転量２，移動量１，回転量１を利用して求め
る。移動量３は、移動量２から移動量１を引いた値に、
移動量２を加算したものを入力し算出する。回転量３に
ついては、回転量２から回転量１を引いた値に、回転量
２を加算したものを入力する。

【０１２４】また、前記ステップＳ１０１で相関がとれ
た場合には（ＮＯ）、リターンして終了する。なお、本
実施例では、補間等を使って相関がとれなかったものに
ついて説明したが、その他、移動量，回転量については
機械的誤差等を吸収するためのデフォルト位置からの相
対量としてもよい。

【０１２５】次に、第３実施例としての撮像装置につい
て説明する。この実施例の撮像装置の構成は、前述した
第１実施例と同様であり、動作が異なっている。この撮
像装置では、露光間隔を一定にすることを特徴とする。
すなわち、第１実施例では、２回目以降の貼り合わせ処
理においては、前回のずれ量（Ｓ１_x ，Ｓ１_y ，Ｓ２
_x ，Ｓ２_y ）により予測位置を決定しているが、各分割
画像撮像する時の露光間隔については特に定義していな
かった。本実施例は露光間隔を一定にすることにより、
予測位置の算出を容易にするものである。

【０１２６】図２０は本実施例における取り込み画像を
示しており、ミラーを回動させることにより、Ａ，Ｂ，
Ｃ，Ｄに分割された部分画像を順次取り込む。図２１
は、露光タイミングを説明するためのタイムチャートで
ある。

【０１２７】基準時間として垂直同期信号ＶＤに同期し
て各処理が行われる。最初に分割画像Ａの露光が行わ
れ、その後にミラー駆動（Ｂを露光するためのミラー位
置への駆動）及び信号処理が行われる。信号処理では、
撮像素子からの読み出しと貼り合わせ処理が行われる
（但し、Ａの露光後は読み出しのみ行われる）。

【０１２８】以後、同様にＢ，Ｃ，Ｄの露光とミラー駆
動，信号処理が行われる。ここで、ｔｈ₁ 〜ｔｈ₄ は処
理時間を示すが、この時間は被写体の状態により大きく
変化する（予測位置での相関が小さい場合や、予測位置
情報がない場合、貼り合わせのサーチ処理時間が長くな
る）。

【０１２９】一般的には、信号処理が終了し次第、次の
分割画像の露光を開始するが、それでは露光間隔（図２
１のｔ_R1，ｔ_R2，ｔ_R3）が毎回変化してしまい、その結
果、手振れによる移動量も前回から変化してしまうこと
になる。

【０１３０】そこで、露光間隔を一定にする（ｔ_R1＝ｔ
_R2＝ｔ_R3とする）ことにより、手振れによる移動量は、
ほぼ前回と同じ値として考えられる。前回の移動量Ｓ１
_x ，Ｓ１_y ，Ｓ２_x ，Ｓ２_y をそのまま使うことができ
る。すなわち、前述した式Ｈ１〜Ｈ４が使用できる。

【０１３１】また、この時設定する露光間隔は、想定さ
れる最長時間に設定することにより、どのような被写体
でも露光間隔が不足することはなくなる。次に、第４実
施例としての撮像装置について説明する。この実施例の
撮像装置の構成は、前述した第１実施例と同様であり、
動作が異なっている。

【０１３２】通常、複数の画像を貼り合わせて一枚の画
像を生成する場合、被写体の部分によっては、各部分画
像の明るさが異なるため、それぞれの部分画像が適正な
露出となるように露光レベルを調節する場合もある。し
かし、貼り合わせ処理での正確な相関検出を行う若しく
は、画像の繋ぎ目を目立たなくするという点で、露光レ
ベルは一定にした方が良い。

【０１３３】そこで、本実施例では１枚目の画像（図２
０に示すＡ）を取り込む時点で露光レベルを決定して、
露光時間，絞り，撮像回路のゲイン等を一定にし、以降
（Ｂ，Ｃ，Ｄ）の画像を取り込む間、固定している。

【０１３４】ここで、露光レベルを一定にするために
は、露光時間，絞り，ゲイン等を変えてもトータルの露
光レベルを変えないようにできるが、そのための制御が
複雑になるため、それぞれを一定にしている。

【０１３５】また、露光時間と絞りを一定にすることに
は、それぞれに独自の効果もある。露光時間が変化した
場合、第３実施例において露光間隔を一定にする制御を
行う場合、露光間隔はそれぞれの露光期間の中間で規定
しなければならず、非常に複雑な制御が必要になる。露
光時間を一定にすることにより、図２１に示すように露
光間隔は露光開始時間で規定でき、露光間隔を一定にす
る制御が容易になる（露光終了時間で規定することも可
能である）。

【０１３６】また、絞りについては絞りが変化した場合
それぞれの分割画像の深度によるボケ具合も変化するた
め、画像のつなぎ目が不自然になってしまう。そこで絞
りについても一定の値にしている。

【０１３７】なお露光レベルの決定は、撮影前にミラー
のプリスキャンを行って全画面の情報により行うことも
できる。この方が時間はかかるが、より正確な露光レベ
ルの決定が可能である。

【０１３８】前述した露光間隔を一定にする第３実施例
は、毎回の貼り合わせ処理で前回の移動量をそのまま使
うことができるため、ハード，ソフトの規模が小さくな
るが、実際の信号処理時間が短くても撮影時間が長くな
ってしまうという欠点がある。

【０１３９】そこで、第５実施例として、露光間隔は一
定とせずに、信号処理が終了し次第、次の露光開始さ
せ、露光間隔の長短に応じて予測位置を変化させる撮像
装置について説明する。図２２には、第５実施例のタイ
ムチャートを示す。ここで、各記号の説明は、第３実施
例（図２１）と同様であるため、省略する。

【０１４０】各信号処理が終了したら、次のＶＤに同期
して次の分割画像の露光を開始させている。そのため露
光間隔はｔ_R1≠ｔ_R2≠ｔ_R3となっている。次に貼り合わ
せ時の予測位置の求め方について説明する。

【０１４１】露光間隔が前回から変化した場合、手振れ
による移動量はほぼ露光間隔に比例して増減すると考え
ることができるため、貼り合わせ時の予測位置は以下の
式で表わすことができる。

【０１４２】分割画像ＢとＣの貼り合わせ時、 α１ｘ＝Ａ１ｘ＋（前回のＳ１ｘ）×ｔ_R2／ｔ_R1 …Ｓ１ α１ｙ＝Ａ１ｙ＋（前回のＳ１ｙ）×ｔ_R2／ｔ_R1 …Ｓ２ α２ｘ＝Ａ２ｘ＋（前回のＳ２ｘ）×ｔ_R2／ｔ_R1 …Ｓ３ α２ｙ＝Ａ２ｙ＋（前回のＳ２ｙ）×ｔ_R2／ｔ_R1 …Ｓ４となる。分割画像ＣとＤの貼り合わせ時、 α１ｘ＝Ａ１ｘ＋（前回のＳ１ｘ）×ｔ_R3／ｔ_R2 …Ｓ５ α１ｙ＝Ａ１ｙ＋（前回のＳ１ｙ）×ｔ_R3／ｔ_R2 …Ｓ６ α２ｘ＝Ａ２ｘ＋（前回のＳ２ｘ）×ｔ_R3／ｔ_R2 …Ｓ７ α２ｙ＝Ａ２ｙ＋（前回のＳ２ｙ）×ｔ_R3／ｔ_R2 …Ｓ８となる。

【０１４３】この撮像装置により、予測動作をさせつ
つ、撮影時間を短くすることができる。以上の実施例に
基づいて説明したが、本明細書には、以下のような発明
も含まれる。（１）少なくとも画面の一端側に他の画面とオーバー
ラップする領域を持つように撮像対象領域を分割して撮
影し、複数の部分画像を得る撮像手段と、前記部分画像
で被貼合わせ画像側のオーバーラップする領域内に任意
の基準点を含む基準ブロックを設定し、貼合わせ画像側
のオーバーラップする領域内で前記基準ブロックと合致
する対応ブロック、若しくは基準点と合致する対応点を
探索し、基準ブロックと対応ブロック、若しくは基準点
と対応点を合致させて、部分画像を貼合わせ処理する画
像貼合わせ手段と、前記画像貼合わせ手段により、少な
くとも前回以前に貼合わせた時に合致した前記基準ブロ
ック若しくは基準点及び、対応ブロック若しくは対応点
の各位置に基づく情報を予測情報として保持し、次回の
部分画像の貼合わせの際に、前記予測情報により貼合わ
せ位置を予測し、貼合わせ位置を前記画像貼合わせ手段
に指示する貼合わせ制御手段と、を具備することを特徴
とする撮像装置。

【０１４４】従って、サーチエリアの範囲、位置が容易
に設定でき、そのエリア内の探索で貼合わせ位置が決定
できるため、貼合わせ処理の時間が短縮され、貼合わせ
処理の確度が上がる。（２）前記画像貼合わせ手段は、１画像を形成するた
めの全部分画像を貼り合わせた後、１画像として生成す
る手段を含むことを特徴とする前記（１）の撮像装置。

【０１４５】従って、貼合わせ処理による画像の移動量
は、以前におこなわれた処理の結果に近い値を示すと考
えられ、これに基づき予測することで高速かつ高い確度
の貼合わせ処理が実現する。（３）前記撮像装置は、さらに部分画像の撮像時の手
振れ量を検出する手振れ検出手段を具備し、前記情報に
前記手振れ量に基づく手振れ情報を含むことを特徴とす
る前記（１）の撮像装置。

【０１４６】従って、部分画像どうしのずれは、ほとん
ど手振れにより生じており、その手振れ量を検出し、予
測情報に役立てることにより、高速かつ高い確度の貼合
わせ処理を実現する。（４）前記撮像装置は、撮像装置を構成する部材が有
する固有の機械的及び／又は電気的誤差に基づく誤差情
報を記憶するための誤差情報記憶手段を具備し、前記情
報には、前記誤差情報を含むことを特徴とする前記
（１）の撮像装置。

【０１４７】従って、毎回同量生じる機械的な誤差を記
憶手段を使って記憶しておくことにより、貼合わせ処理
の高速と高い確度が実現できる。（５）前記撮像装置は、前記誤差情報記憶手段におけ
る誤差情報を使用形態に応じて変更する学習手段を有す
る前記（４）の撮像装置。

【０１４８】従って、機械的誤差やユーザのくせ等を学
習し、それを利用して貼合わせ処理の高速と高い確度を
実現する。（６）前記画像貼合わせ手段は、被貼合わせ画像のオ
ーバーラップする領域内に設けられた前記基準ブロック
に合致する対応ブロックを探索するために、前記予測情
報に基づいて、貼り合わせ画像重複領域内に所定の大き
さのサーチエリアを設定する手段を、さらに具備するこ
とを特徴とする（１）乃至（５）の撮像装置。

【０１４９】従って、予測情報を利用し、対応ブロック
の確実にある小範囲のサーチ・エリアを探すことによ
り、高速を実現する。（７）前記貼合わせ手段は、前記被貼合わせ画像のオ
ーバーラップする領域内に設けられる前記基準ブロック
が存在しないとき、前記予測情報に基づいて画像の貼合
わせを行う手段を、さらに具備する前記（１）乃至
（６）の撮像装置。

【０１５０】従って、オーバーラップする領域に画像が
ない場合でも、貼合わせることができる。（８）前記撮像装置は、少なくとも１つの前記部分画
像に対応する画像データと前記オーバーラップする領域
に対応する画像データを記憶可能な容量を有する部分画
像記憶手段を、さらに具備する前記（１）乃至（７）の
撮像装置。

【０１５１】従って、メモリ容量が少なくて済み、装置
の小型化、低コスト化ができる。（９）前記撮像装置は、前記撮像対象領域に対応する
画像データ全てを記憶可能な容量を有する全画像記憶手
段を、さらに具備する前記（１）乃至（７）の撮像装
置。

【０１５２】従って、部分画像の貼合わせの順番を自由
にすることができる。また、時間的に後に取り込んだ部
分画像の貼合わせ結果も予測情報として利用できる。（１０）前記撮像装置は、前記撮像対象領域に対応す
る画像データ全てを記憶可能な容量を有する全画像記憶
手段を有し、前記貼合わせ手段は、複数回の貼合わせ処
理を行なうことにより、高精細画像を生成する手段を含
み、さらに、被貼合わせ画像のオーバーラップする領域
内に前記基準ブロックが存在しない時には、当該貼合わ
せ処理とは別の貼合わせ処理の貼合わせ位置を予測情報
として用いる手段を含む前記（１）の撮像装置。

【０１５３】従って、重複領域内に画像がない場合でも
貼合わせが可能になる。（１１）前記貼合わせ処理手段は、前記被貼合わせ画
像のオーバーラップする領域内に設けられるべき前記基
準ブロックが存在せず、且つ、前記予測情報も使用せず
に貼合わせ処理を行う際に、当該貼合わせ画像と被貼合
わせ画像とを所定の位置で貼合わせ処理する手段を含む
（１）乃至（６）の撮像装置。

【０１５４】従って所定位置で貼合わせることにより、
必ず全体画像の出力が行われる。（１２）少なくとも画面の一端側に他の画面とオーバ
ーラップする領域を持つように撮像対象領域を分割して
撮影し、複数の部分画像を得る撮像手段と、前記部分画
像で被貼合わせ画像側のオーバーラップする領域内に任
意の基準点を含む基準ブロックを設定し、貼合わせ画像
側のオーバーラップする領域内で前記基準ブロックと合
致する対応ブロック、若しくは基準点と合致する対応点
を探索し、基準ブロックと対応ブロック、若しくは基準
点と対応点を合致させて、部分画像を貼合わせ処理する
画像貼合わせ手段と、前記画像貼合わせ手段により、貼
合わせを行うことが不可能または不適当な場合で、且
つ、前記予測情報も使用せずに貼合わせ処理を行う際
に、当該貼合わせ画像と被貼合わせ画像とを所定の位置
で貼合わせ処理する手段と、を具備することを特徴とす
る撮像装置。

【０１５５】従って、画像貼合わせ手段の貼合わせが不
可能な場合、あるいは使用が不適当な場合にも、適当な
全体画像出力が得られる。（１３）前記全画像記憶手段は、当該撮像装置に対し
て着脱可能に挿着された記憶媒体であることを特徴とす
る（９）乃至（１０）の撮像装置。

【０１５６】従って、画像保存用の主記憶媒体の一部を
利用することにより、撮像装置内にメモリを搭載しなく
ても済む。（１４）前記撮像装置は、操作手段を更に有し、前記
画像貼合わせ手段は、複数回の貼合わせ処理を行なうこ
とにより高精細画像を生成する手段を含み、前記操作手
段の操作に基いて前記複数回の貼合わせ処理の回数を、
その範囲内で設定可能な前記（１）の撮像装置。

【０１５７】従って、ユーザが所望する縦横比や解像度
で被写体が撮影できる。（１５）前記撮像装置は、前記画像貼合わせ手段とし
て複数回の貼合わせ処理を行なうことによって、高精細
画像を得る手段を含み、前記各部分画像毎の撮像におけ
る各露光間隔を略一定にするための露光間隔制御手段を
更に有する前記（１）の撮像装置。

【０１５８】従って、手振れ等は、時間的にリニアな成
分と考えることができる。その場合、露光間隔が一定で
あれば予測が容易となる。（１６）前記露光間隔は、前記各部分画像毎の撮像に
よる撮像信号の各信号処理期間のうちの最長期間に基づ
いて設定されることを特徴とする前記（１）の撮像装
置。

【０１５９】従って、露光間隔を最長時間に基づいて設
定すれば確実に信号処理期間が設定ができる。（１７）前記撮像装置は、前記各部分画像毎の撮像に
係る露出レベルを一定にするための露出レベル制御手段
を有する前記（１）の撮像装置。

【０１６０】従って、露光レベルを同じにして良好な貼
合わせ画像を得ることができる。（１８）前記撮像装置は、前記各部分画像毎の撮像に
係る露光時間を一定にするための露光制御手段を有する
前記（１）の撮像装置。

【０１６１】従って、露光間隔や露光レベルの制御が容
易に行なえる。（１９）前記撮像装置は、前記各部分画像毎の撮像に
係る絞り値を一定にするための露出制御手段を有する前
記（１）の撮像装置。

【０１６２】従って、露光レベルを同じにして良好な貼
合わせ画像を得ることができる。（２０）前記撮像装置は、前記部分画像の撮像に係る
露光開始タイミングを、当該撮像の直前に行なわれた別
の部分画像の撮像による撮像信号の処理終了タイミング
に基づいて、設定する露光開始タイミング設定手段を有
する前記（１）の撮像装置。従って、露光開始タイミン
グをできるだけ早くし、全撮影時間を短かくすることが
できる。

【０１６３】

【発明の効果】以上詳述したように本発明によれば、画
像を分割して撮影し、部分画像から全体画像への復元時
に貼合わせ処理の時間短縮，精度向上を実現し、高画質
に画像を撮像する撮像装置を提供することができる。

【図面の簡単な説明】

【図１】本発明による第１実施例としての撮像装置の概
略的な構成を示す図である。

【図２】第１実施例におけるメモリが記憶する部分画像
に分割される被写体像を示す図である。

【図３】本発明による第２実施例としての撮像装置の構
成例を示す図である。

【図４】第２実施例におけるメモリが記憶する部分画像
に分割される被写体像を示す図である。

【図５】貼合わせ処理について説明するための図であ
る。

【図６】部分画像の貼合わせ処理により復元される１の
被写体像を示す図である。

【図７】通常の探索を行うサーチエリアを示す図であ
る。

【図８】本実施例による予測情報による位置により探索
を行う例を示す図である。

【図９】本実施例の予測位置を利用した貼り合わせ処理
について説明するためのフローチャートである。

【図１０】本実施例の貼り合わせ処理における移動量，
回転量の算出について説明するためのフローチャートで
ある。

【図１１】本実施例による探索を行うサーチエリアを示
す図である。

【図１２】基準ブロックや相関を導くためのブロックの
位置（座標）に示す図である。

【図１３】本実施例による探索処理について説明するた
めのフローチャートである。

【図１４】本実施例による移動量，回転量について説明
するためのフローチャートである。

【図１５】本実施例による予測位置で貼り合わせる手法
を説明するためのフローチャートである。

【図１６】撮影する全部分画像を記憶できる容量がある
例について説明するためのフローチャートである。

【図１７】図１６において、移動量，回転量が算出でき
ない場合について説明するためのフローチャートであ
る。

【図１８】図１７において、移動量，回転量の算出につ
いて説明するためのフローチャートである。

【図１９】図１８において、移動量，回転量の算出につ
いて説明するためのフローチャートである。

【図２０】ミラーの回動により順次、取り込まれる画像
を示す図である。

【図２１】露光タイミングを説明するためのタイムチャ
ートである。

【図２２】第５実施例を説明するためのタイムチャート
である。

【符号の説明】

１…被写体像（被写体）、２…ミラー、３…ミラー駆動
部、４…撮像素子、５…撮影レンズ、６…絞り、７…撮
像系制御部、８…撮像回路、９…撮像素子駆動部、１０
…Ａ／Ｄ変換部、１１…メモリ、１２…メモリ駆動部、
１３…パターンマッチング部、１４…メモリカード、１
５…カード駆動部、１６…プリンタ、１７…プリンタ駆
動部、１８…システム制御部、１９…同期信号発生部、
２０…ＥＥＰＲＯＭ、２１…手振れセンサ、２２…表示
部、２３…入力スイッチ、２４…シーケンス処理部、２
５…貼合わせ処理部。

───────────────────────────────────────────────────── フロントページの続き (72)発明者寺根明夫東京都渋谷区幡ヶ谷２丁目43番２号オリンパス光学工業株式会社内 (72)発明者小林一也東京都渋谷区幡ヶ谷２丁目43番２号オリンパス光学工業株式会社内

Claims

【特許請求の範囲】

【請求項１】少なくとも画面の一端側に他の画面とオ
ーバーラップする領域を持つように撮像対象領域を分割
して撮影し、複数の部分画像を得る撮像手段と、前記部分画像で被貼合わせ画像側のオーバーラップする
領域内に任意の基準点を含む基準ブロックを設定し、貼
合わせ画像側のオーバーラップする領域内で前記基準ブ
ロックと合致する対応ブロック、若しくは基準点と合致
する対応点を探索し、基準ブロックと対応ブロック、若
しくは基準点と対応点を合致させて、部分画像を貼合わ
せ処理する画像貼合わせ手段と、前記画像貼合わせ手段により、少なくとも前回以前に貼
合わせた時に合致した前記基準ブロック若しくは基準点
及び、対応ブロック若しくは対応点の各位置に基づく情
報を予測情報として保持し、次回の部分画像の貼合わせ
の際に、前記予測情報により貼合わせ位置を予測し、貼
合わせ位置を前記画像貼合わせ手段に指示する貼合わせ
制御手段と、を具備することを特徴とする撮像装置。
【請求項２】前記画像貼合わせ手段は、１画像を形成
するための全部分画像を貼り合わせた後、１画像として
生成する手段を含むことを特徴とする請求項１記載の撮
像装置。
【請求項３】前記撮像装置は、さらに部分画像の撮像
時の手振れ量を検出する手振れ検出手段を具備し、前記情報に前記手振れ量に基づく手振れ情報を含むこと
を特徴とする請求項１記載の撮像装置。
【請求項４】前記撮像装置は、撮像装置を構成する部
材が有する固有の機械的及び／又は電気的誤差に基づく
誤差情報を記憶するための誤差情報記憶手段を具備し、前記情報には、前記誤差情報を含むことを特徴とする請
求項１記載の撮像装置。
【請求項５】前記撮像装置は、前記誤差情報記憶手段
における誤差情報を使用形態に応じて変更する学習手段
を有する請求項４記載の撮像装置。
【請求項６】前記画像貼合わせ手段は、被貼合わせ画像のオーバーラップする領域内に設けられ
た前記基準ブロックに合致する対応ブロックを探索する
ために、前記予測情報に基づいて、被貼り合わせ画像重
複領域内に所定の大きさのサーチエリアを設定する手段
を、さらに具備することを特徴とする請求項１乃至請求
項５記載の撮像装置。
【請求項７】前記貼合わせ手段は、前記被貼合わせ画
像のオーバーラップする領域内に設けられる前記基準ブ
ロックが存在しないとき、前記予測情報に基づいて画像
の貼合わせを行う手段を、さらに具備する請求項１乃至
請求項６記載の撮像装置。
【請求項８】前記撮像装置は、少なくとも１つの前記
部分画像に対応する画像データと前記オーバーラップす
る領域に対応する画像データを記憶可能な容量を有する
部分画像記憶手段を、さらに具備する請求項１乃至請求
項７記載の撮像装置。
【請求項９】前記撮像装置は、前記撮像対象領域に対
応する画像データ全てを記憶可能な容量を有する全画像
記憶手段を、さらに具備する請求項１乃至請求項７記載
の撮像装置。
【請求項１０】前記撮像装置は、前記撮像対象領域に
対応する画像データ全てを記憶可能な容量を有する全画
像記憶手段を有し、前記貼合わせ手段は、複数回の貼合わせ処理を行なうこ
とにより、高精細画像を生成する手段を含み、さらに、被貼合わせ画像のオーバーラップする領域内に
前記基準ブロックが存在しない時には、当該貼合わせ処
理とは別の貼合わせ処理の貼合わせ位置を予測情報とし
て用いる手段を含む請求項１記載の撮像装置。
【請求項１１】前記貼合わせ処理手段は、前記被貼合わせ画像のオーバーラップする領域内に設け
られるべき前記基準ブロックが存在せず、且つ、前記予
測情報も使用せずに貼合わせ処理を行う際に、当該貼合
わせ画像と被貼合わせ画像とを所定の位置で貼合わせ処
理する手段を含む請求項１乃至請求項６記載の撮像装
置。
【請求項１２】少なくとも画面の一端側に他の画面と
オーバーラップする領域を持つように撮像対象領域を分
割して撮影し、複数の部分画像を得る撮像手段と、前記部分画像で被貼合わせ画像側のオーバーラップする
領域内に任意の基準点を含む基準ブロックを設定し、貼
合わせ画像側のオーバーラップする領域内で前記基準ブ
ロックと合致する対応ブロック、若しくは基準点と合致
する対応点を探索し、基準ブロックと対応ブロック、若
しくは基準点と対応点を合致させて、部分画像を貼合わ
せ処理する画像貼合わせ手段を有し、前記画像貼合わせ手段により、貼合わせを行うことが不
可能または不適当な場合で、且つ、前記予測情報も使用
せずに貼合わせ処理を行う際に、当該貼合わせ画像と被
貼合わせ画像とを所定の位置で貼合わせ処理する手段を
含むことを特徴とする撮像装置。
【請求項１３】前記全画像記憶手段は、当該撮像装置に
対して着脱可能に挿着された記憶媒体であることを特徴
とする請求項９乃至請求項１０記載の撮像装置。
【請求項１４】前記撮像装置は、操作手段を更に有
し、前記画像貼合わせ手段は、複数回の貼合わせ処理を行な
うことにより高精細画像を生成する手段を含み、前記操作手段の操作に基いて前記複数回の貼合わせ処理
の回数を、その範囲内で設定可能なことを特徴とする請
求項１記載の撮像装置。
【請求項１５】前記撮像装置は、前記画像貼合わせ手
段として複数回の貼合わせ処理を行なうことによって、
高精細画像を得る手段を含み、前記各部分画像毎の撮像における各露光間隔を略一定に
するための露光間隔制御手段を更に有する請求項１記載
の撮像装置。
【請求項１６】前記部分画像毎の撮像における露光間
隔は、前記各部分画像毎の撮像による撮像信号の各信号
処理期間のうちの最長期間に基づいて設定されることを
特徴とする請求項１記載の撮像装置。
【請求項１７】前記撮像装置は、前記各部分画像毎の
撮像に係る露出レベルを一定にするための露出レベル制
御手段を有する請求項１記載の撮像装置。
【請求項１８】前記撮像装置は、前記各部分画像毎の
撮像に係る露光時間を一定にするための露光制御手段を
有する請求項１記載の撮像装置。
【請求項１９】前記撮像装置は、前記各部分画像毎の
撮像に係る絞り値を一定にするための露出制御手段を有
する請求項１記載の撮像装置。
【請求項２０】前記撮像装置は、前記部分画像の撮像
に係る露光開始タイミングを、当該撮像の直前に行なわ
れた別の部分画像の撮像による撮像信号の処理終了タイ
ミングに基づいて、設定する露光開始タイミング設定手
段を有する請求項１記載の撮像装置。