JP2007028123A - 撮像装置および撮像方法 - Google Patents

Abstract

【課題】シャッターチャンスを逃すことなく、ユーザーの意図する画像の撮影を自動的に行うことができるようにする。
【解決手段】カメラＤＳＰ２の比較部２４は、第２メモリ２３の最新に撮影した画像の画像データと第１メモリ２１の最新に取り込んだ画像データとを比較し、この結果を受けて制御部３が第１の閾値以上の変化が生じていることを検出した場合には、比較部２４が、第１メモリ２３の新旧２つの画像を比較し、この比較結果を受けて制御部３が画像変化が第２の閾値以下に収束したと判断した場合に、制御部３が各部を制御して新たな画像の撮影を自動的に行い、撮影した画像データを第２メモリ２３と記録媒体４に記録する。
【選択図】図１

Description

この発明は、被写体を撮像してこれを静止画像データとして記録媒体に記録するデジタルカメラに関する。

防犯用の監視カメラなどにおいては、とらえている画像に変化が生じたことを検出した場合に撮影を迅速に開始して、不審者の侵入などの事態が発生した場合に、その発生時点の画像を確実に記録できるように工夫されたものが提供されている。例えば、後に記す特許文献１には、とらえている画像に変化が生じた場合に、画像を記録できるようにする自動監視装置に関する技術が開示されている。

この特許文献１に記載された自動監視装置は、テレビカメラで撮影するなどして得られた対象物の映像信号からその画面（画像）の複数箇所の映像信号を抽出してデジタル信号に変換し、さらに新たに得られた映像信号についても同様に処理することにより、同じ対象物をとらえた画像であって、時間的に異なる画像の同じ部分のデジタル化された映像信号を得て、両者を比較することにより、とらえている画像に変化が発生したか否かを判断して、変化が発生していると判断した場合に、画像を記録する記録装置等を起動させるなどのことを可能にするものである。

この特許文献１に記載の技術を用いることにより、無駄に画像を記録媒体に記録するなどのことも無く、画像に変化が発生した場合に、その画像を迅速かつ確実に記録することができるので、信頼性の高い自動監視装置が実現される。また、赤外線センサや温度センサなどの種々のセンサを組み合わせることにより、検出すべき種々の状態を正確に検出し、その状態を録画することができるなどの技術も提供されている。

なお、上述した特許文献１は、以下に示す通りである。
特開昭５０−８１９１４号公報

ところで、近年のカメラ（デジタル、銀塩ともに）においては、種々の部品が電子化されて自動化が進み、自動露出（Auto Exposure）調整機能や自動焦点（Auto Fours）調整機能などの機能が一般的な機能として搭載され、誰でも露出やピントのあった写真が撮れるようになってきた。また、デジタルカメラで撮影した画像をパーソナルコンピュータに取り込んで、種々提供されるようになった写真加工ソフトで処理することによって、撮影時の露出不足などはある程度補正することもできるようになってきている。

しかしながら、動きのある被写体の画像を、目的とする構図で、目的とする状態になったときに自動的に撮影を行うようにすることはできない。目的とする構図になったことや被写体が目的とする状態になったことを自動的に検知することはできないためである。このように、構図やいわゆるシャッターチャンスについては自動化することはできないし、また、撮影後の画像をパーソナルコンピュータなどで修正しても、目的とする構図や目的とする状態の被写体をとらえた画像を得ることができない場合がほとんどである。

もちろん、上述した特許文献１に記載されている監視装置のカメラのように、定位置に固定され常に同じものを同じ構図で撮影することができるようにされているものについては、とらえている画像の変化を検知して、適正なタイミングで目的とする画像を撮影することが可能である。しかし、一般のユーザーが用いるデジタルカメラは、ユーザーが手にもって操作することが多く、被写体もユーザーの意図（意思）によって様々に変わるものであるため、監視装置のカメラのような手法を用いることはできない。

このように、一般のデジタルカメラを用いた静止画像の撮影における構図とシャッターチャンスについては、自動化もパーソナルコンピュータでの修正も行えず、この２点が写真の良し悪しについて残された重要なポイントである。そして、一般のデジタルカメラの場合には、監視カメラなどの場合と違い、ユーザーの意図にできるだけ合致したタイミング（ユーザーの意図に沿ったタイミング）で自動撮影できるようにすることが望まれている。

以上のことにかんがみ、この発明は、シャッターチャンスを逃すことなく、ユーザーの意図する画像の撮影を自動的に行うことができるようにすることを目的とする。

上記課題を解決するため、請求項１に記載の発明の撮像装置は、
撮像素子と、
前記撮像素子を通じて所定のタイミング毎に取り込まれる画像の画像データを複数画像分一時記憶する第１のメモリ部と、
最新に撮影した画像の画像データを一時記憶する第２のメモリ部と、
前記第１のメモリに記録された画像データと、前記第２のメモリに記憶されている画像データとを比較し、第１の閾値以上の画像変化が生じているか否かを検出する比較手段と、
前記比較手段により、第１の閾値以上の画像変化が生じていることが検出された場合に、前記第２のメモリ部に最新に記録された画像の画像データと、当該最新に記録された画像の画像データよりも前に前記第２のメモリ部に記録された画像の画像データとを比較し、画像変化が第２の閾値以下に収束したか否かを判断する判断手段と、
前記判断手段により、画像変化が前記第２の閾値以下に収束したと判断された場合に、前記撮像素子を通じて取り込まれる画像を自動的に撮影し、新たに撮影した画像の画像データを前記第２のメモリ部と所定の記録媒体とに記録するように制御する自動撮影制御手段と
を備えることを特徴とする。

この請求項１に記載の発明の撮像装置によれば、撮像素子を通じて所定のタイミング毎に取り込むようにしている画像データが順次に第１のメモリ部に格納される。この第１のメモリ部は複数の画像の画像データを記憶保持することができるものであり、順次に取り込まれる画像データによって更新され、例えば、少なくとも最新に取り込まれた画像の画像データと、その直前に取り込まれた画像の画像データというように、所定のタイミング毎に順次に取り込まれる新旧の画像の画像データが常に一時記憶される。また、最新に撮影した画像の画像データが第２のメモリ部に一次記憶される。

そして、比較手段により、撮影されて第２のメモリ部に記録されている画像の画像データと、第１のメモリ部に記録された画像の画像データとが比較され、第１の閾値以上の変化が生じているか否かが検出される。比較手段により、第１の閾値以上の変化が生じていることが検出された場合には、判断手段により、第１のメモリ部に記録された新旧２つの画像間において、画像変化が第２の閾値以下に収束したか否かが判断される。判断手段により、画像変化が第２の閾値以下に収束したと判断された場合には、自動撮影制御手段の制御により、新たな画像の撮影が自動的に行われ、撮影した画像の画像データが第２のメモリと記録媒体に記録される。

この後、新たに撮影されて第２のメモリ部に記録された画像の画像データと、所定のタイミング毎に順次に取り込まれて第１のメモリ部に記録される画像の画像データとの間で、順次に、比較、判断等の処理が繰り返し実行され、画像間の変化に応じて画像の自動撮影が行うようにされる。

これにより、多数の不必要な画像を撮影するなどの不都合を生じさせるなどのことなく、また、ユーザーがシャッターボタンスイッチを押下操作するなどして被写体の画像を撮影する操作を行っていなくても、目的とする被写体の画像を、目的とする構図、内容で撮影することが可能なタイミングであるいわゆるシャッターチャンスの到来を自動的に検出して、自動的に撮影を行うことができるようにされる。すなわち、ユーザーの意図に沿った自動撮影を行うことができるようにされる。

また、請求項７に記載の発明の撮像装置は、
撮影条件の変化量を連続的に検出する検出手段と、
前記検出手段により検出される前記変化量を監視し、前記変化量が第１の閾値より大きくなった後に、第２の閾値以下に収束したか否かを判断する判断手段と、
前記判断手段により、前記変化量が前記第１の閾値より大きくなった後に、前記第２の閾値以下に収束したと判断された場合に、撮像素子を通じて画像を自動的に撮影し、新たに撮影した画像の画像データを所定の記録媒体に記録するように制御する自動撮影制御手段と
を備えることを特徴とする。

この請求項７に記載の発明の撮像装置によれば、種々の撮影条件が、手動または自動で調整できるようにされており、撮影条件が調整された場合に、その変化量が検出手段により連続的に検出される。この検出手段からの検出出力である変化量は、判断手段によって監視され、当該変化量が第１の閾値より大きく変化した後に、第２の閾値以下に収束した場合には、被写体を含む撮影範囲が固まったり、画質の調整が完了したり、目的とする被写体に対して合焦状態となったりするなど、目的とする被写体を撮影する状況が整ったとみなして、自動撮影制御手段によって各部が制御され、自動的に撮影を行い、撮影した画像の画像データが記録媒体に記録される。

これにより、多数の不必要な画像を撮影するなどの不都合を生じさせるなどのことなく、また、ユーザーがシャッターボタンスイッチを押下操作するなどして被写体の画像を撮影する操作を行っていなくても、目的とする被写体の画像を、目的とする構図、内容で撮影することが可能なタイミングであるいわゆるシャッターチャンスの到来を自動的に検出して、自動的に撮影を行うことができるようにされる。すなわち、ユーザーの意図に沿った自動撮影を行うことができるようにされる。

この発明によれば、よい写真をとるための重要なポイントであって、露出や焦点のように自動調整することができない構図やシャッターチャンスの問題を克服し、写真を撮影することに不慣れなユーザーであっても、シャッターチャンスを逃すこと無く、目的とする被写体の画像を、目的とする構図、目的とする内容で撮影することができる。すなわち、ユーザーが納得するよい写真を自動的に撮影することができる。

以下、図を参照しながらこの発明の一実施の形態について説明する。以下に説明する実施の形態においては、目的とする被写体の画像を静止画像として撮影し、これをデジタルデータとして記録媒体に記録することができるデジタルスチルカメラやデジタルビデオカメラなどの撮像装置に適用した場合を例にして説明する。

[撮像装置の構成と基本動作について]
図１は、この実施の形態の撮像装置を説明するためのブロック図である。この実施の形態の撮像装置は、図１に示すように、大きく分けると、カメラ部１と、カメラＤＳＰ（Digital Signal Processor）２と、制御部３とを備えたものである。また、カメラＤＳＰ２には、例えば着脱可能とされた半導体メモリなどの記録媒体４と、ＬＣＤ（Liquid Crystal Display）５と、デジタル入出力端子６とが接続されている。また、制御部３には、操作部７と、ジャイロスコープ（以下、ジャイロと略称する。）８とが接続されている。

カメラ部１は、図１に示すように、光学ブロック１１、撮像素子であるＣＣＤ（Charge Coupled Device）１２、前処理回路１３、光学ブロック用ドライバ１４、ＣＣＤ用ドライバ１５、タイミング生成回路１６とを備えたものである。ここで、光学ブロック１１は、レンズ、フォーカス機構、シャッター機構、絞り（アイリス）機構などを備えたものであり、後述もするように自動調整モードとすることにより、制御部３の制御によって自動的に調整することもできるし、また、手動調整モードとすることにより、ユーザーが手動で調整することもできるようにしている。

なお、自動調整モードと手動調整モードとの切り換えなどは、制御部３に接続された操作部７を通じて行うことができるようにしている。また、この実施の形態の撮像装置においては、撮像素子としてＣＣＤを用いているが、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサなどを用いることもできる。

カメラＤＳＰ２は、画像データを一時記憶する第１メモリ２１、第２メモリ２３と、信号処理部２２と、画像データの比較処理を担当する比較部２４とを備えている。ここで、第１メモリ２１は、ＣＣＤ１２を通じて所定のタイミング毎に順次に取り込むようにされる画像データを一時記憶するもの（第１のメモリ部）である。

第１メモリ２１は、少なくとも２画像分（２画面分）の画像データを記録することが可能な記憶容量を備え、常時、最新に取り込んだ画像の画像データと、その直前に取り込んだ画像の画像データとの新旧２画像分の画像データを画像毎に一時記憶することができるようにしている。

すなわち、第１メモリ２１は、２つの画像の記憶領域を有し、一方に最新に取り込んだ画像の画像データが記録され、他方にその直前に取り込まれた画像の画像データが記録されている場合に、新たな画像の画像データが取り込まれると、古い画像の画像データが記録されている記憶領域に新たな画像の画像データが上書きするようにされ、上述したように、常に、新旧２画像分（２画面分）の画像データを記憶保持することができるようにしている。

第２メモリ２３は、後述もするように、最新に撮影して記録媒体４に記録した画像の画像データを記憶保持するもの（第２のメモリ部）である。そして、後述もするが、この第２メモリ２３に一時記憶している画像の画像データと、第１メモリ２１に一時記憶している画像の画像データとを比較することにより、前回撮影された画像から大きく変化した画像が取り込まれるようにされたかを判断することができるようにしている。

カメラＤＳＰ２の信号処理部２２は、詳しくは後述もするが、取り込んだ画像の画像データに対して、必要な信号処理を施して、記録媒体４、ＬＣＤ５、デジタル入出力端子６に対して出力するようにしたり、記録媒体４から読み出した画像データを処理してＬＣＤ５や外部入出力端子６に対して出力したり、また、デジタル入出力端子６を通じて受け付けた画像データを処理して、記録媒体４に記録したり、ＬＣＤ５に供給したりすることができるものである。また、信号処理部２２は、撮影して記録媒体４に記録した最新の画像データをメモリ２３に格納する機能をも有する。

さらに、信号処理部２２は、差分判別部の機能を有し、先に記録されている画像の１画面分の画像データに対する新たに撮影して記録しようとしている画像の１画面分の画像データについての差分が予め決められる所定値以下である場合には、当該先に記録されている画像の１画面分の画像データに対する新たに撮影して記録しようとしている画像の１画面分の画像データについての差分を、新たに撮影して記録しようとしている画像の画像データとして記録することができるようにしている。

そして、カメラＤＳＰ２の比較部２４は、詳しくは後述もするが、メモリ２３に記憶保持されている最新に撮影して記録媒体４に記録した画像の画像データと、メモリ２１に順次に格納される画像の画像データとを比較し、その差分を検出し、これを制御部３に通知することにより、撮影した画像と新たに取り込んだ画像との間に大きな画像変化が生じているか否かを判別することができるようにしている。

また、比較部２４は、メモリ２３に一時記憶されている撮影済みの画像と新たに取り込むようにした画像との間で大きな画像変化が生じた後において、メモリ２１に一時記憶されている新旧の画像の画像データを比較し、その差分を検出して、これを制御部３に通知することにより、画像間に生じた画像変化が予め決められた値以下に収束したか否かを判別することができるようにしている。

制御部３は、ＣＰＵ（Central Processing Unit）３１、ＲＯＭ（Read Only Memory）３２、ＲＡＭ（Random Access Memory）３３、フラッシュメモリ３４、時計回路３５が、ＣＰＵシステムバスを通じて接続されて構成されたマイクロコンピュータであり、この実施の形態の撮像装置の各部を制御するものである。

ここで、ＣＰＵ３１は、種々のプログラムを実行し、各部に供給する制御信号を形成して、これを目的とする回路分部に供給するようにするなど、この撮像装置の制御の主体となるものである。また、ＲＯＭ３２は、ＣＰＵ３１において実行する種々のプログラムや、処理に必要になるデータなどが記憶されたものである。

また、ＲＡＭ５２は、処理の途中結果を一時記憶するなど主に作業領域として用いられるものである。また、時計回路３５は、現在年月日、現在曜日、現在時刻を提供することができるとともに、カレンダー機能をも備えたものであり、撮影日時などを提供するなどのことができるものである。また、時計回路３５は、種々の期間を計測するいわゆる計測カウンタとしての機能をも有するものである。

そして、制御部３に接続された操作部７は、電源のオン／オフキー、シャッターボタン、ズーム操作キー、その他の各種のファンクションキーや操作つまみなどを備え、ユーザーからの入力操作を受け付けて、これに応じた電気信号を制御部３に供給することができるものである。

また、ジャイロ８は、この実施の形態の撮像装置の筐体内部に設けられ、上下方向と左右方向との２軸を有するものであり、この実施の形態の撮像装置自体を左右方向にパーン（camera Pan）させた場合や上下方向にパーンさせた場合に、その動きの方向（パーンの方向）と量（パーン時の移動角度）とを検出し、これを制御部３に通知することができるものである。

そして、この実施の形態の撮像装置の電源がオンにされた場合であって、上述もしたように、光学ブロック１１の各機構を自動制御する自動調整モードが選択されている場合には、光学ブロック用ドライバ１４は、制御部３からの制御に応じて、光学ブロック１１を動作させるようにする駆動信号を形成し、これを光学ブロック１１に供給して動作させる。光学ブロック１１は、ドライバ１４からの駆動信号に応じて、フォーカス機構、シャッター機構、絞り機構が制御され、被写体の画像を光の情報として取り込んで、これをＣＣＤ１２に対して供給し、ＣＣＤ１２に結像させるようにする。

ＣＣＤ１２は、光学ブロック１１からの画像を光電変換して出力するものであり、ＣＣＤドライバ１５からの駆動信号に応じて動作し、光学ブロック１１からの被写体の画像を取り込むとともに、制御部５によって制御されるタイミング生成回路１６からのタイミング信号に基づいて、取り込んだ被写体の画像（画像情報）を電気信号として前処理回路１３に供給する。

なお、上述のように、タイミング生成回路１６は、制御部３からの制御に応じて、所定のタイミングを提供するタイミング信号を形成するものである。また、ＣＣＤドライバ１５は、タイミング生成回路１６からのタイミング信号に基づいて、ＣＣＤ１２に供給する駆動信号を形成するものである。

前処理回路１３は、これに供給された電気信号の画像情報に対して、ＣＤＳ（Correlated Double Sampling）処理を行って、Ｓ／Ｎ比を良好に保つようにするとともに、ＡＧＣ（Automatic Gain Control）処理を行って、利得を制御し、そして、Ａ／Ｄ（Analog/Digital）変換を行って、デジタル信号である画像データを形成し、これをカメラＤＳＰ２に供給する。

カメラＤＳＰ２は、前処理回路１３からの画像データを第１メモリ２１に一時記憶し、この第１メモリ２１に一時記憶した画像データに対してＡＦ（Auto Focus）、ＡＥ（Auto Exposure）、ＡＷＢ（Auto White Balance）などのカメラ信号処理を施し、処理後の画像データをアナログ映像信号に変換してＬＣＤ５に供給し、現在、光学ブロック１１を通じて取り込んだ画像をＬＣＤ５に表示する。

なお、第１メモリ２１に画像データを記録する場合には、上述もしたように、古い画像の画像データが記録されている記憶領域に記録するようにされ、ＣＣＤ１２を通じて取り込んだ新旧２画像分（２画面分）の画像データがメモリ２１に記憶保持するようにされる。

そして、カメラ部１を通じて取り込んでいる画像について、カメラＤＳＰ２を介してＬＣＤ５に表示する処理を連続して行うことにより、現在の画像の取り込み状態をＬＣＤ５を通じてユーザーは知ることができる。すなわち、カメラ部１を通じてこの実施の形態の撮像装置に取り込んでいる画像をＬＣＤ５を通じて観視することができるようにされる。

そして、ユーザーによって、操作部７のシャッターボタンが押下操作され、画像の撮影が指示された場合には、制御部３はカメラＤＳＰ２を制御し、現在、カメラ部１を通じて取り込んでＬＣＤ５に表示している画像の画像データを、メモリ２３に一時記憶すると共に、これを記録媒体４に記録する。なお、画像データの記録媒体４の記録に際しては、当該画像データを所定のデータ圧縮方式でデータ圧縮して記録することもできるようにされる。

このように、ＬＣＤ５に表示される被写体の画像を確認しながら、ユーザーがシャッターチャンスの到来を判断し、シャッターボタンを押下操作したタイミングで制御部３が各部を制御し、目的とする被写体の画像を撮影して、その画像の画像データを第２の記録部としてのメモリ部２３に一時記憶すると共に、記録媒体４にも記録して保持することができるようにしている。

なお、光学ブロック１１の各機構をユーザーが手動で調整する手動調整モードが選択されている場合には、制御部３は、光学ブロック用ドライバ１４を制御することなく、光学ブロック１１の該当部分をユーザーが直接的に操作することによって、フォーカス機構、絞り機構を制御することができるようにされる。また、操作部７のシャッターボタンを押下操作することにより、光学ブロックのシャッター機構が機能するようにされる。

そして、手動調整モードの場合にも、ユーザーによってシャッターボタンが押下操作されたタイミングにおいて、カメラ部１を通じて取り込み、カメラＤＳＰ２によって処理された画像の画像データを記録媒体４に記録することができるようにされる。

また、記録媒体４に記録された画像データは、操作部７を通じて受け付けたユーザーからの操作入力に応じて、データ圧縮されて記録されている目的とする画像データが記録媒体４から読み出され、これが信号処理部２２において、圧縮伸長処理された後、アナログ映像信号に変換されてＬＣＤ５に供給されて画像の表示を行うことができるようにされる。このように、記録媒体４に記録された画像の利用もできるようにしている。

もちろん、デジタル入出力端子６を通じて受け付けた画像データを記録可能な形式のデータに変換して記録媒体４に記録したり、記録媒体４から読み出した画像データをデジタル入出力端子６を通じて、外部の例えばパーソナルコンピュータなどに対して提供したりすることもできるようにしている。

なお、デジタル入出力端子６は、例えば、ＩＥＥＥ（Institute of Electrical and Electronics Engineers）１３９４、ＵＳＢ（Universal Serial Bus）などのデジタルインターフェースに対応するものである。もちろんその他の種々のインターフェースに対応するように構成することも可能である。例えば、光や電波による無線インターフェースに対応する入出力端として設けるようにすることも可能である。

このように、この実施の形態の撮像装置は、被写体の画像を撮影して、当該撮像装置に装填された記録媒体４に記録することができるとともに、記録媒体に記録された画像データを読み出して、これを再生し利用することができるものである。なお、この実施の形態の撮像装置は、上述もしたように、主に静止画を撮影するものであるが、動画を撮影して記録媒体６に記録することもできる。

［自動撮影モードの利用について］
そして、この実施の形態の撮像装置においては、シャッターチャンスを逃すことが無いようにするため、ユーザーがシャッターボタンを押下操作しなくても、シャッターチャンスの到来を自動的に検出して、自動的に撮影を行う自動撮影モードを備えている。この自動撮影モード時においては、シャッターチャンスの到来を自動的に検出して、自動撮影を行うだけでなく、ユーザーによってシャッターボタンが押下された場合には、そのタイミングでも画像の撮影を行うこともできるようにしている。

一般に、シャッターチャンスを逃さないようにするためには、例えば、所定時間間隔毎に連続して撮影を行うようにすることも考えられるが、このようにした場合には、ほとんど同一の画像を大量に記録するという無駄が生じる可能性が高い。このため、この実施の形態の撮像装置においては、以下に説明する３つの事象の発生をトリガー（契機）として画像を撮影し記録するようにすることで、シャッターチャンスを逃すことなく、しかも近似する画像の大量記録を防止して、記録媒体を無駄に使用することも無いようにしている。

ここで、第１の事象は、画像自体の変化に着目するものであり、画像に、構図、被写体、画角などの大きな変化が生じた後、その変化が収束した場合である。これは、ユーザーがこの実施の形態の撮像装置の向きを変えたり、目的とする被写体が移動してしまったり、被写体が人間や動物であった場合にはその動作や姿勢が変わったりした後に、その変化がおさまった場合に相当する。

第２の事象は、撮影条件の変化に着目するものであり、ユーザーまたはカメラの自動機構によって、画像に大きな変化が生じるような撮影条件の変更（変化）が生じた後、その撮影条件の変化が収束した場合である。これは、絞り、ズームレンズの場合の焦点距離、ピントなどをユーザーが操作したかカメラの自動機構が変更し、その変更が終了したような場合に相当する。

第３の事象は、撮像装置自体の動きに着目するものであり、カメラが大きくパーンするようにされた後、そのパーンが収束した場合である。これは、撮像装置を右方向あるいは左方向に大きくパーンさせたり、上方向あるいは下方向に大きくパーンさせたりした後に、その動きがおさまった場合に相当する。

これら第１、第２、第３の事象が発生した場合に、ユーザーによってシャッターボタンが押下操作されなくても自動的に撮影を行う。そして、第１の事象の検出は、図１に示したこの実施の形態の撮像装置のカメラＤＳＰ２に設けられた比較部２４の機能により、第２メモリ２３に格納された最新に撮影された画像の画像データと、第１メモリ２１に順次に格納される最新の画像の画像データとの差分を求めて監視することにより、画像の変化の発生から収束までの一連の事象を検出するようにしている。

また、第２の事象の検出は、図１に示したこの実施の形態の撮像装置の制御部３により、光学ブロック用ドライバ１４に対する制御内容に応じて把握される変化量や、ユーザーが手動によって操作する光学ブロック１１からの操作内容を示す情報に応じて把握される変化量に基づいて検出するようにしている。また、第３の事象は、図１に示したこの実施の形態の撮像装置の制御部３に接続されたジャイロ８からの検出出力にも基づいて、検出することができるようにしている。

次に、第１の事象を用いて画像を自動撮影する場合の具体例について説明する。図２は、第１の事象を用いて自動撮影をする場合の具体例を説明するための図である。図２Ａは、被写体の配置とファインダー視野の状態を示している。この実施の形態の撮像装置においては、ファインダー視野内の画像だけがＣＣＤ１２によって画像情報としてとらえられる。そして、図２Ａに示すように、ここでは、被写体は２人の人物と１本の樹木であり、ファインダー視野内（撮影可能領域内）には、向かって左側の人物の一部が欠けてしまう状態となっている。

この実施の形態の撮像装置の場合には、電源がオンにされると、カメラ部１を通じて所定のタイミング毎に取り込まれる画像の画像データが、カメラＤＳＰ２の第１メモリ２１に順次に書き込まれ、信号処理部２２で処理されて、ＬＣＤ５の表示画面に表示される。そして、自動的に、あるいは、ユーザーによってシャッターボタンが押下操作された場合において、まず、最初の画像として、そのときカメラ部１を通じてとらえ、ＬＣＤ５に表示している画像、すなわち、この図２に示す例の場合には、図２Ａに示した状態の画像を撮影する。これにより、図２Ａに示した画像の画像データは、図２Ｂに示すように、この実施の形態の撮像装置の記録媒体４に記録されると共に、カメラＤＳＰ２の第２メモリ２３にも一時記憶される。

そして、ユーザーがカメラの向きを少し変え、ズームを調整することにより、図２Ｃに示すように、被写体である２人の人物ともファインダー視野内に収めるようにするとともに、樹木の一部分もファインダー視野内に収めるようにしたとする。この場合、カメラ部１を通じて新たに取り込まれ第１メモリ２１に一時記憶された画像の画像データは、図２Ｃに示した構図のものである。

この場合、カメラＤＳＰ２の比較部２４は、第２メモリ２３に一時記憶されている画像データであって、図２Ｂに示した画像を形成する画像データと、最新に第１のメモリに一時記憶された画像の画像データであって、図２Ｃに示した画像を形成する画像データとを比較する。

比較部２４における比較処理は、例えば、画像データの明るさ（輝度）成分の差分値を算出し、これを制御部３に供給する。制御部３は、比較部２４からの差分値が予め決められた第１の閾値以上であり、比較的に大きな画像変化が生じていると判断したときには、カメラＤＳＰ２の比較部２４を制御して、カメラ部１を通じて所定のタイミング毎に順次に取り込まれて、第１メモリ２１に一時記憶される新旧２つの画像の画像データ同士を順次に比較する。

上述もしたように、第１メモリ２１少なくとも２画像分（２画面分）の画像データを記録することができるものであり、所定のタイミング毎に順次に取り込まれる画像の画像データが、記録されたタイミングが古い画像の画像データが記録されている記録領域に上書きするようにされる。これにより、結果として、最新に取り込まれた画像の画像データと、その直前に取り込まれた画像（最新の画像が取り込まれた１つ前のタイミングで取り込まれた画像）の画像データとを常に第１メモリ２１に一時記憶することができる。

そこで、カメラＤＳＰ２の比較部２４は、新たに取り込まれ画像の画像データが第１メモリ２１に記録される毎に、新旧２つの画像の画像データを比較する。この場合の比較処理もまた、第１メモリ２１に一時記憶されている新旧２つの画像の画像データの明るさ（輝度）の差分値を算出するものであり、ここで算出された差分値は制御部３に供給される。

制御部３は、第１メモリ２１に一時記憶されている新旧２つの画像の画像データの差分値が予め決められた第２の閾値以下となった場合、すなわち、図２Ｃに示した画像の状態から大きく変化しなくなったために、比較対象の画像間の差分が小さくなった場合には、画像変化は収束したと判断し、カメラ部１、カメラＤＳＰ２等の各部を制御して、図２Ｃに示すように、現時点において、カメラ部１を通じて取り込んだ画像を撮影するようにし、図２Ｄに示すように、その撮影した画像の画像データを第２メモリ２３と記録媒体４とに記録する。

これにより、最新に撮影して第２メモリ２３と記録媒体４とに記録した画像の画像データと比較して、カメラ部１を通じて新たに取り込んだ画像が大きく変化した場合には、その画像変化が収束したことを検出したタイミングで、画像変化の収束後の画像を、ユーザーがシャッターボタンを押すなどの操作を介在させることなく撮影して記録媒体に記録することができる。

また、この場合、所定時間毎に自動撮影する場合と異なり、直前に撮影した画像に対して、新たに取り込んだ画像が大きく変化したことを最初の条件としているので、近似する画像を数多く撮影するなどのことが無く、記録媒体を無駄に使用したり、目的とする画像を探すのに時間がかかったりするなどの不都合を生じさせることもない。

このように、この実施の形態の撮像装置は、電源オンまたはユーザーによるシャッター操作によって図２Ｂに示した画像１が記録される。このままユーザーがカメラの向きを変えたりせず、被写体の人物も動かない間は、次の撮影は自動的には行われない。しかしながら、撮像素子にとらえられて、所定のタイミング毎に取得される画像は、第１メモリ２１に一時記憶され、図２Ｂに示す既に第２メモリ２３に記録済みの画像と常に比較するようにされる。

この後、図２Ｃに示したように、ユーザーがカメラを操作し、たとえば、人物を二人ともファインダー内にとらえようとカメラをやや左に向けかつズームアウトしたとする。すると、図２Ｃに示した撮像素子にとらえられた画像は、図２Ｂに示した記録済みの画像から大きく変化するので、その変化を感知し、画像変化が収束した時点で、カメラ部１を通じて新たに取り込んだ画像を撮影して、図２Ｄに示す画像を記録媒体４に記録することができる。

その後も、ユーザーがズーミングやカメラの向きの変更を行ったり、被写体の人物が入れ替わったりするなど、画像に大きな変化が発生し、その画像変化が収束するたびに、それを感知して自動的に撮影を行うことができる。これにより、シャッターチャンスを逃すことなく、ユーザーの意図に応じた画像を撮影することが可能となる。

なお、ここでは、画像の比較を行う場合に、比較対象の画像の平均的な明るさ（輝度）の差を用いるようにしたが、これに限るものではない。例えば、比較対象の画像の平均的な色調の差（色合いの差）を用いて、画像変化の大小を把握するようにしてももちろんよい。この場合には、例えば、青や赤などの明るい色調の画像から、灰色や黒などの暗い色調の画像に変化した場合を検出し、その画像変化（色調の変化）が収束したときに、画像を自動撮影することができるようにされる。

また、局所的な情報、例えば、各画素のＲＧＢ値（Ｒ（赤）、Ｇ（緑）、Ｂ（青）の各色信号の値）の記録済み画像との差を画面全体で積算して、その値が予め定めた閾値を越えた場合に、大きな画像変化が発生し、所定の値以下に収束した場合に、画像変化が収束したと判断するようにしてもよい。

また、なんらかの画像認識の手法を用いて被写体の画面内での位置や向き、あるいは被写体の有無を検出してそれがあらかじめ定めた閾値を越えることで判断してもよい。例えば、比較対象のそれぞれの画像について、例えば、被写体のエッジ検出などを行い、両画像間での被写体の有無や、共通する被写体の位置の違いや向きの違いを検出することによって、比較対象の画像間に大きな変化が生じているか、また、大きな変化が生じた場合には、その後に変化が収束したかを判別するようにしてもよい。

このようにすることにより、比較対象の画像間において、特徴のある被写体が存在しなくなったり、新たに登場したり、また、特徴のある被写体の位置や向きが変化していることを検出した場合には、比較対象の画像間において大きな変化が発生したと判断し、その後に、異なる被写体が存在しなくなり、また、被写体の位置や向きが大きく異なっていない場合には、画像の変化が収束したと判断することができる。

また、比較対象の画像間において、マッチング処理を行い、一致の度合いを求め、この一致の度合いが低ければ大きな画像変化が発生したと判断し、この後に、一致の度合いが高くなれば画像変化が収束したと判断することができる。また、逆に、不一致の度合いを求め、この不一致の度合いが高ければ大きな画像変化が発生したと判断し、この後に、不一致の度合いが低くなれば、画像変化が収束したと判断することができる。

このように、この実施の形態の撮像装置がとらえる画像は、ユーザーが目的する画像を撮影するために、ユーザーによって撮像装置の向きが変えられたり、フォーカスやズームなどの種々の調整が行われたりした場合に大きく変化し、目的とする画像を目的とする構図でとらえられるようになった場合には、撮像装置の向きを一定に保とうとし、また、種々の調整も微調整を行う程度になるのが普通である。

このため、撮像装置がとらえた画像が大きく変化した後、とらえる画像が変化しなくなるか、変化が小さくなってきた場合には、目的とする画像を目的とする構図でとらえることができたと判断することができ、このようなシャッターチャンスを逃すことなく、自動的に撮影を行って、目的とする被写体の目的とする構図の画像を目的とするタイミングで撮影することができるようにされる。

［撮影時の画像データの差分記録について］
そして、撮影した画像の画像データを記録媒体４に記録する場合に、この最新に撮影して得た画像データの全部を記録するのではなく、直近に１画面分の全データを記録した基本画像（たとえば、図２Ｂの画像）に対する最新に撮影して得た画像データについての差分を求め、これを撮影して得た画像の画像データとして記録媒体４に記録する。このようにすることによって、記録データ量を抑制し、記録媒体４の効率的な利用を促進することができる。

しかし、直近に１画面分の全データを記録した基本画像とはまったく異なる画像を撮影して記録する場合、これらの間の差分を求めても、データ量が低減できない場合もある。このため、この実施の形態の撮像装置においては、カメラＤＳＰ２の信号処理部２２に設けられる差分判別部において、まず、直近に１画面分の全データを記録した基本画像に対する最新に撮影して得た画像データについての差分を求め、この求めた差分のデータ量が閾値以下である場合には、その差分データを差分画像として記録媒体４に記録する。

このように、直近に１画面分の全データを記録した基本画像に対する最新に撮影して得た画像データについての差分データを順次に求め、差分データが所定の閾値以下であるときには、両画像は類似しているので、この差分データを差分画像１−ａ、１−ｂ、…というように基本画像に従属する画像として記録する。

このように、基本画像とこれに従属する差分画像については、後の処理のためにひとつのグループとしてまとめて記録しておくことが望ましい。このため、例えば、基本画像に対して、例えば、２つの差分画像が従属している場合には、各画像データに付するインデックスを、「基本画像：001234567_00」、「差分画像１：001234567_01」、「差分画像２：001234567_02」のように、所定の番号にいわゆる枝番（_00、_01、_02の部分）を付して管理するようにしたり、記録メディアの中にフォルダを作成して基本画像と差分画像のグループを同じフォルダに収納して管理したりするなどの方法が考えられる。

また、直近に１画面分の全データを記録した基本画像と、最新に撮影して得た画像との間の差分が大きい場合には、両画像間の類似度は低く、データ量の抑制ができないばかりか、画像の再現性をも低下させてしまう可能性があるので、新たに撮影して得た画像については基本画像とし、その画像データの全部を記録媒体４に記録する。このようにすることによって、撮影対象をまったく異なるものに向けた場合などにおいては、新たに撮影した画像については、その全データを記録媒体４に記録することによって、画像の再現性を低下させることもないようにすることができる。

なお、記録媒体４に記録された差分画像を再生する場合には、対応する基本画像に対して、差分画像の差分データを反映させるように処理することにより、撮影した元の画像を復元して再生し、ＬＣＤ５に表示するなどして利用することができるようにしている。

［他の事象の利用について］
ところで、上述した実施の形態においては、図２を用いて説明したように、第１の事象である画像自体の変化を基準にして、ユーザーの意図に沿った撮影タイミングを検出し、この検出したタイミングで目的とする被写体の画像を自動撮影するようにした。しかし、これに限るものではない。上述もしたように、第２の事象である撮影条件の変化を用いたり、第３の事象である撮像装置自体の動きを用いたりすることにより、ユーザーの意図に沿った撮影タイミングを検出し、この検出したタイミングで目的とする被写体の画像を自動撮影するようにすることも可能である。

ここで、第２の事象である撮影条件の変化は、上述もしたように、この実施の形態の撮像装置自身における撮影条件の変化を意味し、具体的には、連続的に（徐々に）調整が可能である合焦距離、焦点距離、絞り値などの変化である。これら合焦距離、焦点距離、絞り値などの変化量は、自動調整モードの時には、制御部３自身が光学ブロック１１を制御するので、制御部３直接的に知ることができるし、手動調整モードの時には、光学ブロック１１に対してユーザーが行った操作に応じた情報が制御部３に通知される。

したがって、制御部３が、光学ブロック１１に対する調整量に応じた合焦距離、焦点距離、絞り値などの変化量を把握することができ、この把握する変化量が予め決められた第１の閾値以上であった場合に、撮影条件の変化が発生したと判断し、その後にこれら合焦距離、焦点距離、絞り値などの変化量が第２の閾値以下になった場合には、撮影条件の変化が収束したと判断して、自動撮影を行うようにすることができる。

また、第３の事象である撮像装置自身の動きは、当該撮像装置のいわゆるカメラパーンによる移動を意味する。この実施の形態の撮像装置にはジャイロ８が設けられており、このジャイロ８からの検出出力に基づいて、この実施の形態の撮像装置は、自機がパーンするようにされた場合には、どの方向にパーンするようにされたか（パーンの方向）、当該パーンによる移動角度（パーン時の移動角度）はどれ位かを把握することができるようにしている。

この場合のパーンの方向は、主にユーザーを中心とする左右方向、および、ユーザーを中心とする上下方向がほとんどであり、予め決められた第１の閾値以上の撮像装置の向きの変更が検出され場合に移動角度の変化が生じたと判断し、この後、その移動角度の変化が第２の閾値以下になった場合には、移動角度の変化が収束したと判断して、画像を自動撮影することができるようにされる。

なお、この第３の事象を用いる場合、左右方向へのパーンの方が、上下方向へのパーンの場合よりも、画像の変化が激しい場合が多いと考えられる。このため、左右方向の旋回移動の場合に用いる第１の閾値と、上下方向の旋回移動の場合に用いる第１の閾値とでは、左右方向の旋回移動に対するものを低く設定し、上下方向への旋回移動については高く設定するようにし、画像への影響の大きな左右方向のパーンについて敏感に検出して迅速に対処できるようにしておくことが望ましい。

［各事象を用いた撮像装置の動作について］
次に、上述した第１、第２、第３の事象が発生した場合に、ユーザーによってシャッターボタンが押下操作されなくても自動的に撮影を行う場合の処理について、図３〜図５のフローチャートを用いて説明する。

まず、第１の事象（画像変化）を用いる場合の動作について説明する。図３は、第１の事象である画像変化を用いて自動撮影を行う場合の撮像装置の動作について説明するためのフローチャートである。この図３に示す処理は、制御部３が各部を制御することにより実行される処理である。

この実施の形態の撮像装置に電源が投入されると、制御部３は、図３に示す処理を実行し、カメラ部１、カメラＤＳＰ２等を制御して、カメラ部１の光学ブロック１１を通じてとらえた画像を順次に取り込む処理を開始する（ステップＳ１０１）。具体的には、制御部３は、カメラ部１、カメラＤＳＰ２、ＬＣＤ５を制御して、カメラ部１の光学ブロック１１を通じてとらえた画像を順次に取り込んで、カメラＤＳＰ２の第１メモリに書き込み、これを信号処理部２２で処理してＬＣＤ５に供給することにより、とらえている画像をＬＣＤ５の表示画面に表示して、この撮像装置がどのような画像を取られているかをユーザーが知ることができるようにされる。

そして、制御部３は、比較の対象となる最初の撮影画像を迅速かつ適正に得るため、電源が投入されてから一定時間経過するか、あるいは、ユーザーによってシャッターボタンが押下されるまで待ち状態となる（ステップＳ１０２）。なお、一定時間経過したか否かは、時計回路３５を用いて電源が投入されてからの経過時間を計測することにより判別することができる。

ステップＳ１０２の判断処理において、電源が投入されてから一定時間経過した、あるいは、ユーザーによってシャッターボタンが押下されたと判断したときには、制御部３は、カメラ部１、カメラＤＳＰ２を制御して、現在とらえている画像を撮影するようにし、カメラ部１を通じて最新に第１メモリに記録した画像の画像データを記録媒体４と第２メモリ２３とに記録する（ステップＳ１０３）。

そして、制御部３は、カメラＤＳＰ２を制御し、カメラＤＳＰ２の比較部２４により、第１メモリ２１に一時記憶されたカメラ部１を通じて最新に取り込んだ画像の画像データと、第２メモリ２３に一時記憶されている最新に撮影した画像の画像データとを比較する処理を行うようにする（ステップＳ１０４）。このステップＳ１０４の比較処理は、上述もしたように、明るさ（輝度）、色調、各画素のＲＧＢ値を用いた差分検出、あるいは、画像認識処理を用いた差分検出を行う処理である。

そして、制御部３は、比較部３からの比較結果の通知を受けて、比較対象の画像間に予め決められた第１の閾値以上の大きな画像変化が生じているか否かを判断する（ステップＳ１０５）。ステップＳ１０４の判断処理において、大きな画像変化は生じていないと判断したときには、ステップＳ１０４からの処理を繰り返し、新たに取り込んだ画像と最新に撮影した画像との間で比較処理を行うようにする。

ステップＳ１０５の判断処理において、大きな画像変化は生じていると判断したときには、制御部３は、カメラＤＳＰ２を制御し、比較部２４において、第１メモリ２１に一時記憶された新旧２つの画像の比較処理を行うようにする（ステップＳ１０６）。このステップＳ１０６の比較処理もまた、ステップＳ１０４の比較処理と同様に、比較対象の２つの画像間における、明るさ（輝度）、色調、各画素のＲＧＢ値を用いた差分検出、あるいは、画像認識処理を用いた差分検出を行う処理である。

そして、制御部３は、比較部２４からの比較結果に基づいて、比較対象の画像間における画像変化が予め決められた第２の閾値以下となり、連続的に発生している可能性のある画像変化が収束したか否かを判断する（ステップＳ１０７）。ステップＳ１０７の判断処理において、画像変化は収束していないと判断したときには、ステップＳ１０６からの処理を繰り返し、新たに取り込んだ画像と前回取り込んだ画像との間で比較処理を行うようにする。

ステップＳ１０７の判断処理において、画像変化は収束したと判断したときには、制御部３は、カメラ部１、カメラＤＳＰ２を制御して、現在とらえている画像を撮影するようにし、カメラ部１を通じて最新に第１メモリに記録した画像の画像データを記録媒体４と第２メモリ２３とに記録する（ステップＳ１０８）。これにより、第２メモリに一時記憶される画像が変わったことになる。

そして、制御部３は、操作部７を通じて電源をオフにする操作が行われ、撮影可能な状態を終了するようにされたか否かを判断し（ステップＳ１０９）、終了するようにされていないと判断したときには、ステップＳ１０４からの処理を繰り返し、新たに撮影した画像と、最新に第１メモリに取り込んだ画像との間の比較処理を行うようにする。

ステップＳ１０９の判断処理において、終了するようにする操作が行われたと判断したときには、制御部３は、各部を制御し、カメラ部１を通じて画像を取り込む処理を終了させるなどの終了処理を行い（ステップＳ１１０）、この図３に示す処理を終了する。

このように、撮像装置がとらえる画像の変化に基づいて、ユーザーが意図する画像のシャッターチャンスを逃さないように、ユーザー意図するシャッターチャンスを画像変化に応じて予測して特定し、ユーザーがシャッターボタンを押下操作しなくても、自動撮影を行うことができるようにしている。

次に、第２の事象（撮影条件の変化）を用いる場合の動作について説明する。図４は、第２の事象である撮影条件の変化を用いて自動撮影を行う場合の撮像装置の動作について説明するためのフローチャートである。この図４に示す処理は、制御部３が各部を制御することにより実行される処理である。

この実施の形態の撮像装置に電源が投入されると、制御部３は、図４に示す処理を実行する。図４において、ステップＳ２０１〜ステップＳ２０３までの処理は、図３に示したステップＳ１０１〜ステップＳ１０３までの処理と同様に行われる処理である。そして、ステップＳ２０３の処理が実行され、この撮像装置に電源投入後、最初の撮影が行われると、制御部３は、撮影条件の監視を開始する（ステップＳ２０４）。

ステップＳ２０４において監視するようにされるのは、上述もしたように、例えば、合焦距離、焦点距離、絞り値などの内の１つ以上の変化量を個別に監視する。そして、制御部３は、監視している撮影条件が予め決められた第１の閾値以上の大きな変化を生じたか否かを判断する（ステップＳ２０５）。

ステップＳ２０５の判断処理において、撮影条件について大きな変化は生じていないと判断したときには、撮影条件の監視処理を続行し、ステップＳ２０５の処理を繰り返すようにする。また、ステップＳ２０５の判断処理において、撮影条件について大きな変化が生じたと判断したときには、さらに撮影条件の変化量の監視を続行して、監視している撮影条件の変化量が、予め決められた第２の閾値以下に収束したか否かを判断する（ステップＳ２０６）。

ステップＳ２０６の判断処理において、撮影条件の変化が収束していないと判断したときには、撮影条件の監視処理を続行し、ステップＳ２０６の処理を繰り返すようにする。また、ステップＳ２０６の判断処理において、撮影条件の変化が収束したと判断したときには、制御部３は、カメラ部１、カメラＤＳＰ２を制御して、現在とらえている画像を撮影するようにし、カメラ部１を通じて最新に第１メモリに記録した画像の画像データを記録媒体４と第２メモリ２３とに記録する（ステップＳ２０７）。これにより、第２メモリに一時記憶される画像が変わったことになる。

そして、制御部３は、操作部７を通じて電源をオフにする操作が行われ、撮影可能な状態を終了するようにされたか否かを判断し（ステップＳ２０８）、終了するようにされていないと判断したときには、ステップＳ２０５からの処理を繰り返し、撮影条件の監視を続行する。

ステップＳ２０８の判断処理において、終了するようにする操作が行われたと判断したときには、制御部３は、各部を制御し、カメラ部１を通じて画像を取り込む処理を終了させるなどの終了処理を行い（ステップＳ２０９）、この図４に示す処理を終了する。

このように、撮像装置の撮影条件の変化に基づいて、ユーザーが意図する画像のシャッターチャンスを逃さないように、ユーザーが意図するシャッターチャンスを撮影条件の変化に応じて予測して特定し、ユーザーがシャッターボタンを押下操作しなくても、自動撮影を行うことができるようにしている。

なお、ここでは、撮影条件として、合焦距離、焦点距離、絞り値等の内の１つ以上を用いるものとして説明したが、これに限るものではない。例えば、ファインダー視野内（カメラ視野内）において、焦点を合わせる位置である合焦ポイントをユーザーが変更するようにした場合において、例えばファインダー視野内中央からファインダー視野内左端側などのように、予め決められる所定値以上に大きく変更した場合に自動的に撮影を行うようにすることもできる。

また、シャッタースピードを予め決められた所定値以上変化させた場合に自動的に撮影を行うようにしてもよい。その他、画質調整を行った場合など、この実施の形態の撮像装置において、撮影する画像についての種々の条件を変更するようにした場合に、その変更が予め決められた第１の閾値よりも大きく、かつ、その変更が予め決められた第２の閾値以下に収束した場合に、画像の自動撮影を行うようにすることができる。

次に、第３の事象（撮像装置の動きの変化）を用いる場合の動作について説明する。図５は、第３の事象である撮像装置の動きの変化を用いて自動撮影を行う場合の撮像装置の動作について説明するためのフローチャートである。この図５に示す処理は、制御部３が各部を制御することにより実行される処理である。

この実施の形態の撮像装置に電源が投入されると、制御部３は、図５に示す処理を実行する。図５において、ステップＳ３０１〜ステップＳ３０３までの処理は、図３に示したステップＳ１０１〜ステップＳ１０３までの処理と同様に行われる処理である。そして、ステップＳ３０３の処理が実行され、この撮像装置に電源投入後、最初の撮影が行われると、制御部３は、この実施の形態の撮像装置に搭載されたジャイロ８の状態の監視を開始する（ステップＳ３０４）。

この実施の形態に撮像装置に搭載されたジャイロ８は、いわゆる２軸ジャイロであり、横方向の旋回と縦方向の旋回との両方について、その旋回の方向と旋回角度とを検出することができるものである。そして、制御部３は、監視しているジャイロ８からの検出出力が予め決められた第１の閾値以上の大きな変化を検出したか否かを判断する（ステップＳ３０５）。

ステップＳ３０５の判断処理において、ジャイロ８が大きな変化を検出していないと判断したときには、ジャイロ８からの検出出力の監視処理を続行し、ステップＳ３０５の処理を繰り返すようにする。また、ステップＳ３０５の判断処理において、ジャイロ８が大きな変化を検出したと判断したときには、さらにジャイロ８からの検出出力の監視を続行して、ジャイロ８からの検出出力が、予め決められた第２の閾値以下に収束したか否かを判断する（ステップＳ３０６）。

ステップＳ３０６の判断処理において、ジャイロ８の検出出力が収束していないと判断したときには、ジャイロ８の検出出力の監視処理を続行し、ステップＳ３０６の処理を繰り返すようにする。また、ステップＳ３０６の判断処理において、ジャイロ８の検出出力が収束したと判断したときには、制御部３は、カメラ部１、カメラＤＳＰ２を制御して、現在とらえている画像を撮影するようにし、カメラ部１を通じて最新に第１メモリに記録した画像の画像データを記録媒体４と第２メモリ２３とに記録する（ステップＳ３０７）。これにより、第２メモリに一時記憶される画像が変わったことになる。

そして、制御部３は、操作部７を通じて電源をオフにする操作が行われ、撮影可能な状態を終了するようにされたか否かを判断し（ステップＳ３０８）、終了するようにされていないと判断したときには、ステップＳ３０５からの処理を繰り返し、ジャイロ８からの検出出力の監視を続行する。

ステップＳ３０８の判断処理において、終了する操作が行われたと判断したときには、制御部３は、各部を制御し、カメラ部１を通じて画像を取り込む処理を終了させるなどの終了処理を行い（ステップＳ３０９）、この図５に示す処理を終了する。

このように、撮像装置に搭載されたジャイロ８からの検出出力の変化に基づいて、ユーザーが意図する画像のシャッターチャンスを逃さないように、ユーザーが意図するシャッターチャンスを撮像装置の動きの変化に応じて予測して特定し、ユーザーがシャッターボタンを押下操作しなくても、自動撮影を行って、目的とする画像の撮影を確実に行うことができるようにされる。

なお、ここでは、第１の事象（画像変化）、第２の事象（撮影条件の変化）、第３の事象（撮像装置の移動）のそれぞれを別個に用いる場合の動作を説明した。しかし、これら第１、第２、第３の事象の全部を用いるようにすることももちろん可能である。

そして、上述したこの実施の形態の撮像装置は、電源をオンにした状態で、撮像装置の向きやズーミングを操作したり、絞りその他の操作をしたりすれば、あるいは、そのような操作をしなくても、被写体のほうに何か変化が起これば、それらの操作が終了するタイミングや変化が収束するタイミングにおいて、自動的に画像を撮影することができるので、その中には、よいアングルとシャッターチャンスで撮影されたものもありうることを期待することができる。

また、このようにして写真を自動的に撮っても、画像に変化がなければ記録されることはないようにしているので、同じような写真ばかり多く撮影して記録メディアの容量を使いきったり、撮影後に延々と同じ写真ばかりを目で見てよい写真を探したりする手間をかけることなどが回避できる。

さらには、基本画像と差分画像を記録することによって、記録メディアの容量を節約できるほか、撮影後にどの写真がどのようにもとの基本画像から変化したのかを直ちに確認することができる。もちろん、差分画像は基本画像と合成することによって、元の画像にもどしてプリントや閲覧することができる。

また、これら全体の特長によって、よい写真を撮るために最後に残ったポイントであるアングルとシャッターチャンスの問題を克服して、素人でも簡単に自分の能力を超えたよい写真を撮影することができる。

また、上述した実施の形態の撮像装置の場合、自動撮影のタイミングが、ユーザーがシャッターボタンを押下するよりも前となることを多くすることができる。したがって、シャッターチャンスを逃すことをないようにすることができる。特に、動きの激しい被写体を撮影する場合などにおいて、被写体を確実かつ適切に撮影することができる。

また、上述した実施の形態の撮像装置において自動撮影を行った場合には、ユーザーによるシャッターボタンなどの押下操作は行われていないため、撮影画像がぶれるなどのこともない。

また、この発明は、静止画像を撮影してこれをデジタルデータとして記録することが可能な種々の撮像装置に適用することができる。また、第２、第３の事象を用いて、シャッターチャンスを予測して自動撮影する部分については、アナログ方式のカメラ（銀塩カメラ）等に対して適用することも可能である。

なお、上述した実施の形態においては、カメラＤＳＰ２の比較手段と制御部３とが協働することにより、比較手段、判断手段としての機能を実現し、また、制御部３が自動撮影制御手段としての機能を実現している。また、カメラＤＳＰの主に差分判別部が、判別手段として機能を実現するようにしている。また、主に制御部３が、各部と協働することによって検出手段、判断手段としての機能を実現するようにしている。

この発明の一実施の形態が適用された撮像装置を説明するためのブロック図である。 画像変化に着目して自動撮影を行う場合の例を説明するための図である。 画像変化を用いて自動撮影を行う場合の撮像装置の動作について説明するためのフローチャートである。 撮影条件の変化を用いて自動撮影を行う場合の撮像装置の動作について説明するためのフローチャートである。 撮像装置の動きの変化を用いて自動撮影を行う場合の撮像装置の動作について説明するためのフローチャートである。

符号の説明

１…カメラ部、１１…光学ブロック、１２…ＣＣＤ、１３…前処理回路、１４…光学ブロック用ドライバ、１５…ＣＣＤ用ドライバ、１６…タイミング生成回路、２…カメラＤＳＰ、２１…第１メモリ、２２…信号処理部、２３…第２メモリ、２４…比較部、３…制御部、３１…ＣＰＵ、３２…ＲＯＭ、３３…ＲＡＭ、３４…フラッシュメモリ、３５…時計回路、４…記録媒体、５…ＬＣＤ、６…デジタル入出力端子、７…操作部７、８…ジャイロスコープ

Claims (20)

1. 撮像素子と、
   前記撮像素子を通じて所定のタイミング毎に取り込まれる画像の画像データを複数画像分一時記憶する第１のメモリ部と、
   最新に撮影した画像の画像データを一時記憶する第２のメモリ部と、
   前記第１のメモリに記録された画像データと、前記第２のメモリに記憶されている画像データとを比較し、第１の閾値以上の画像変化が生じているか否かを検出する比較手段と、
   前記比較手段により、第１の閾値以上の画像変化が生じていることが検出された場合に、前記第２のメモリ部に最新に記録された画像の画像データと、当該最新に記録された画像の画像データよりも前に前記第２のメモリ部に記録された画像の画像データとを比較し、画像変化が第２の閾値以下に収束したか否かを判断する判断手段と、
   前記判断手段により、画像変化が前記第２の閾値以下に収束したと判断された場合に、前記撮像素子を通じて取り込まれる画像を自動的に撮影し、新たに撮影した画像の画像データを前記第２のメモリ部と所定の記録媒体とに記録するように制御する自動撮影制御手段と
   を備えることを特徴とする撮像装置。
2. 請求項１に記載の撮像装置であって、
   新たに撮影した画像の画像データを前記所定の記録媒体に記録するに際し、前記所定の記録媒体に対して最新に１画面分の全ての画像データが記録された撮影済み画像の当該画像データに対する、当該新たに撮影した画像の画像データについての差分が所定値以下であるか否かを判別する判別手段を備え、
   自動撮影制御手段は、前記判別手段により、前記差分が所定値以下であると判別された場合に、前記撮影済み画像の画像データに対する前記新たに撮影した画像の画像データについての差分を、前記新たに撮影した画像の画像データとして記録するように制御することを特徴とする撮像装置。
3. 請求項２に記載の撮像装置であって、
   前記自動撮影制御手段は、１画面分の全ての画像データが記録された画像と当該画像に対する差分データとして記録された画像とをグループ化して管理するように、画像データを前記所定の記録媒体に記録するように制御することを特徴とする撮像装置。
4. 請求項１に記載の撮像装置であって、
   前記比較手段と、前記判断手段とにおいて用いられる画像変化は、画像全体の平均的な明るさの変化であることを特徴とする撮像装置。
5. 請求項１に記載の撮像装置であって、
   前記比較手段と、前記判断手段とにおいて用いられる画像変化は、画像全体の平均的な色調の変化であることを特徴とする撮像装置。
6. 請求項１に記載の撮像装置であって、
   前記比較手段と、前記判断手段とにおいて用いられる画像変化は、比較対照の画像間の被写体の有無、被写体の位置の違い、被写体の向きの違いの１つ以上であることを特徴とする撮像装置。
7. 撮影条件の変化量を連続的に検出する検出手段と、
   前記検出手段により検出される前記変化量を監視し、前記変化量が第１の閾値より大きくなった後に、第２の閾値以下に収束したか否かを判断する判断手段と、
   前記判断手段により、前記変化量が前記第１の閾値より大きくなった後に、前記第２の閾値以下に収束したと判断された場合に、撮像素子を通じて画像を自動的に撮影し、新たに撮影した画像の画像データを所定の記録媒体に記録するように制御する自動撮影制御手段と
   を備えることを特徴とする撮像装置。
8. 請求項７に記載の撮像装置であって、
   新たに撮影した画像の画像データを前記所定の記録媒体に記録するに際し、前記所定の記録媒体に対して最新に１画面分の全ての画像データが記録された撮影済み画像の当該画像データに対する、当該新たに撮影した画像の画像データについての差分が所定値以下であるか否かを判別する判別手段を備え、
   自動撮影制御手段は、前記判別手段により、前記差分が所定値以下であると判別された場合に、前記撮影済み画像の画像データに対する前記新たに撮影した画像の画像データについての差分を、前記新たに撮影した画像の画像データとして記録するように制御することを特徴とする撮像装置。
9. 請求項８に記載の撮像装置であって、
   前記自動撮影制御手段は、１画面分の全ての画像データが記録された画像と当該画像に対する差分データとして記録された画像とをグループ化して管理するように、画像データを前記所定の記録媒体に記録するように制御することを特徴とする撮像装置。
10. 請求項７に記載の撮像装置であって、
    前記検出手段によって検出される前記変化量として、合焦距離、焦点距離、絞り値、パーン時の移動角度の内の１つ以上が用いられることを特徴とする撮像装置。
11. 撮像素子と、前記撮像素子を通じて所定のタイミング毎に取り込まれる画像の画像データを複数画像分一時記憶する第１のメモリ部と、最新に撮影した画像の画像データを一時記憶する第２のメモリ部とを備えた撮像装置において用いられる撮像方法であって、
    前記第１のメモリに記憶されている画像データと、前記第２のメモリに記憶された画像データとを比較し、第１の閾値以上の画像変化が生じているか否かを検出する比較工程と、
    前記比較工程において、第１の閾値以上の画像変化が生じていることを検出した場合に、前記第２のメモリ部に最新に記録された画像の画像データと、当該最新に記録された画像の画像データよりも前に前記第２のメモリ部に記録された画像の画像データとを比較し、画像変化が第２の閾値以下に収束したか否かを判断する判断工程と、
    前記判断工程において、画像変化が前記第２の閾値以下に収束したと判断した場合に、前記撮像素子を通じて取り込まれる画像を自動的に撮影し、新たに撮影した画像の画像データを前記第２のメモリ部と所定の記録媒体とに記録するように制御する自動撮影制御工程と
    を有することを特徴とする撮像方法。
12. 請求項１１に記載の撮像方法であって、
    新たに撮影した画像の画像データを前記所定の記録媒体に記録するに際し、前記所定の記録媒体に対して最新に１画面分の全ての画像データが記録された撮影済み画像の当該画像データに対する、当該新たに撮影した画像の画像データについての差分が所定値以下であるか否かを判別する判別工程を有し、
    自動撮影制御手段は、前記判別工程において、前記差分が所定値以下であると判別した場合に、前記撮影済み画像の画像データに対する前記新たに撮影した画像の画像データについての差分を、前記新たに撮影した画像の画像データとして記録するように制御することを特徴とする撮像方法。
13. 請求項１２に記載の撮像方法であって、
    前記自動撮影制御工程においては、１画面分の全ての画像データが記録された画像と当該画像に対する差分データとして記録された画像とをグループ化して管理するように、画像データを前記所定の記録媒体に記録するように制御することを特徴とする撮像方法。
14. 請求項１１に記載の撮像方法であって、
    前記比較工程と、前記判断工程とにおいて用いる前記画像変化は、画像全体の平均的な明るさの変化であることを特徴とする撮像方法。
15. 請求項１１に記載の撮像方法であって、
    前記比較工程と、前記判断工程とにおいて用いる前記画像変化は、画像全体の平均的な色調の変化であることを特徴とする撮像方法。
16. 請求項１１に記載の撮像方法であって、
    前記比較工程と、前記判断工程とにおいて用いる前記画像変化は、比較対照の画像間の被写体の有無、被写体の位置の違い、被写体の向きの違いの１つ以上であることを特徴とする撮像方法。
17. 撮影条件の変化量を検出する検出工程と、
    前記検出工程において順次に検出される前記変化量を監視し、前記変化量が第１の閾値より大きくなった後に、第２の閾値以下に収束したか否かを判断する判断工程と、
    前記判断工程において、前記変化量が前記第１の閾値より大きくなった後に、前記第２の閾値以下に収束したと判断した場合に、撮像素子を通じて画像を自動的に撮影し、新たに撮影した画像の画像データを所定の記録媒体に記録するように制御する自動撮影制御工程と
    を有することを特徴とする撮像方法。
18. 請求項１７に記載の撮像方法であって、
    新たに撮影した画像の画像データを前記所定の記録媒体に記録するに際し、前記所定の記録媒体に対して最新に１画面分の全ての画像データが記録された撮影済み画像の当該画像データに対する、当該新たに撮影した画像の画像データについての差分が所定値以下であるか否かを判別する判別工程を有し、
    自動撮影制御工程においては、前記判別工程において、前記差分が所定値以下であると判別した場合に、前記撮影済み画像の画像データに対する前記新たに撮影した画像の画像データについての差分を、前記新たに撮影した画像の画像データとして記録するように制御することを特徴とする撮像方法。
19. 請求項１８に記載の撮像方法であって、
    前記自動撮影制御工程においては、１画面分の全ての画像データが記録された画像と当該画像に対する差分データとして記録された画像とをグループ化して管理するように、画像データを前記所定の記録媒体に記録するように制御することを特徴とする撮像方法。
20. 請求項１７に記載の撮像方法であって、
    前記検出工程において検出する前記変化量は、合焦距離、焦点距離、絞り値、パーン時の移動角度の内の１つ以上であることを特徴とする撮像方法。

Images