JP2007104586A - 複眼式撮影装置の非連動オート系処理装置 - Google Patents

Abstract

【課題】本発明は、複数の撮影光学系で同一の被写体を捉えて複数の固体撮像素子それぞれに結像した各被写体像それぞれを表す複数の画像データを生成する複眼式撮影装置に関し、撮影画面内の任意のエリアの特定な複数の対象を検出し、検出された複数の対象それぞれの焦点や露光を調整する複眼式撮影装置の非連動オート系処理装置を提供することを目的とする。
【解決手段】複数の固体撮像素子それぞれに結像した各被写体像それぞれを表す複数の画像データそれぞれに基づいて、これらの複数の画像データそれぞれにより表される複数の画像中の、複数の撮影光学系毎に互いに異なる任意のエリアの特定な対象を検出し、複数の撮影光学系それぞれについて実行された、複数の撮影光学系毎にそれぞれ検出された各任意のエリアの特定な対象に着目した焦点調整動作および露光調整動作のうちの少なくとも１つの動作を反映させた画像データを生成する。
【選択図】 図３

Description

本発明は、複数の固体撮像素子と、これらの複数の固体撮像素子それぞれに被写体像を結像する複数の撮影光学系とを備え、これらの複数の撮影光学系で同一の被写体を捉えて複数の固体撮像素子それぞれに結像した各被写体像それぞれを表す複数の画像データを生成する複眼式撮影装置に関する。

従来より、撮影装置の中には、一般にＡＦロックおよびＡＥロックと呼ばれる機能が搭載された撮影装置がある。このような撮影装置では、シャッタレリーズボタンが半押し操作されることによって所望の被写体までの距離が測定されるとともに、その被写体の輝度が測定される。その後、シャッタレリーズボタンが半押しされた状態を保って構図を決定した上でシャッタレリーズボタンを全押し操作することによって、焦点および露光の双方が適正に調整された撮影画像を得ることができる。従って、このような撮影装置によれば、撮影者自身が焦点や露光を手動で調整する必要がないため、初心者でも容易に鮮明な撮影画像を得ることができる。

また、撮影装置の中には、撮影画面内の人物の顔を検出し、検出された顔に対する焦点を調整する、いわゆる顔認識ＡＦ機能が搭載された撮影装置がある（例えば、非特許文献１参照）。この撮影装置は、撮影画面内において人物が移動したり、撮影者が構図を変えた場合など、人物撮影時において被写体の位置や距離が変化しても顔認識ＡＦ機能が動作し続けるものである。従って、このような撮影装置によれば、人物が撮影画面内の中央部分に位置しない構図であっても、ＡＦロック機能が搭載された撮影装置におけるフォーカスロック操作を行うことなく、人物の顔に焦点が適正に自動調整された撮影画像を得ることができる。

また、撮影装置の中には、複数の固体撮像素子それぞれに被写体像を結像する複数の撮影光学系を備えた複眼式撮影装置もある。このような複眼式撮影装置として、例えば、複数の撮影光学系で同一の被写体を左右の視線に対応する相互に異なる方向から捉える立体撮影モードや、２つの撮影光学系で相互に隣接する被写体を捉えるパノラマ撮影モードが搭載された複眼式撮影装置が知られている。また、複眼式撮影装置において、複数の撮影光学系それぞれが露光量を制御する手段を有し、これら複数の撮影光学系により得られた複数の撮影画像、もしくは、複数の撮影画像を分割した画像に基づいて各撮影光学系それぞれに適した露光量を決定する複眼式撮影装置が提案されている（例えば、特許文献１参照）。
"生体認証技術を用いた、世界初の「顔認識ＡＦ」機能をコンパクトデジタルカメラに搭載"、［ｏｎｌｉｎｅ］、平成１７年２月１６日、株式会社ニコン、［平成１７年９月１６日検索］、インターネット＜ＵＲＬ：http://www.nikon.co.jp/main/jpn/whatsnew/2005/facepriority_05.htm＞ 特開平７−１１０５０５号公報

上述した特許文献１に提案された技術によれば、複眼式撮影装置において、複数の撮影光学系それぞれに対して適正な露光制御を行うことができる。ところが、複眼式撮影装置にあっては、例えば非特許文献１に提案された顔認識ＡＦのような、撮影画面内の任意のエリアの特定な対象を検出し、検出された対象の焦点や露光を調整する技術が搭載されるまでには至っていない。また、非特許文献１に提案された技術は、撮影画面内に複数の人物がいる場合には、最も手前の人物の顔に焦点を調整するものである。そのため、撮影画面内の複数の人物それぞれまでの距離が異なる場合には、焦点調整された最も手前の人物を除く人物に対する焦点が外れることとなり、その距離の大きさによっては、焦点が外れた人物において大きなピンぼけが発生してしまう。

本発明は、上記事情に鑑み、複数の固体撮像素子それぞれに被写体像を結像する複数の撮影光学系を備えた複眼式撮影装置において、撮影画面内の任意のエリアの特定な複数の対象を検出し、検出された複数の対象それぞれの焦点や露光を調整する複眼式撮影装置の非連動オート系処理装置を提供することを目的とするものである。

上記目的を達成する本発明の複眼式撮影装置の非連動オート系処理装置は、
複数の固体撮像素子と、これらの複数の固体撮像素子それぞれに被写体像を結像する複数の撮影光学系とを備え、これらの複数の撮影光学系で同一の被写体を捉えて複数の固体撮像素子それぞれに結像した各被写体像それぞれを表す複数の画像データを生成する複眼式撮影装置の非連動オート系処理装置において、
上記複数の固体撮像素子それぞれに結像した各被写体像それぞれを表す複数の画像データを取得する画像データ取得部と、
上記画像データ取得部により取得された複数の画像データそれぞれに基づいて、これらの複数の画像データそれぞれにより表される複数の画像中の、上記複数の撮影光学系毎に互いに異なる任意のエリアの特定な対象を検出する対象検出部と、
前記対象検出部により上記複数の撮影光学系毎にそれぞれ検出された各任意のエリアの特定な対象に着目した焦点調整動作および露光調整動作のうちの少なくとも１つの動作を実行する動作実行部と、
上記動作実行部により実行された上記複数の撮影光学系それぞれについての焦点調整動作および露光調整動作のうちの少なくとも１つの動作を反映させた画像データを生成する画像データ生成部とを備えたことを特徴とする。

本発明の複眼式撮影装置の非連動オート系処理装置は、上記複数の固体撮像素子それぞれに結像した各被写体像それぞれを表す複数の画像データそれぞれに基づいて、これらの複数の画像データそれぞれにより表される複数の画像中の、上記複数の撮影光学系毎に互いに異なる任意のエリアの特定な対象を検出し、複数の撮影光学系それぞれについて実行された、複数の撮影光学系毎にそれぞれ検出された各任意のエリアの特定な対象に着目した焦点調整動作および露光調整動作のうちの少なくとも１つの動作を反映させた画像データを生成するものである。従って、本発明の複眼式撮影装置の非連動オート系処理装置によれば、撮影画面内に複数の対象が存在する場合において、これら複数の対象を互いに異なる対象として検出して、複数の撮影光学系毎にそれぞれ検出された各任意のエリアの特定な対象に着目した焦点調整動作や露光調整動作が、複数の撮影光学系それぞれについて実行されることにより、画像データ毎に異なる対象に焦点調整や露光調整された複数の画像データが得られる。

ここで、上記本発明の複眼式撮影装置の非連動オート系処理装置は、上記動作実行部が、上記画像中の人物の検出動作を実行するものであることが好ましい。

また、上記本発明の複眼式撮影装置の非連動オート系処理装置は、上記動作実行部が、上記画像中の顔の検出動作を実行するものであることも好ましい形態である。

このように、対象検出部が画像中の人物や顔を検出することによって、撮影画面内に複数の人物が存在する場合において、画像データ毎に異なる人物に焦点調整や露光調整された複数の画像データが得られる。

本発明によれば、複数の固体撮像素子それぞれに被写体像を結像する複数の撮影光学系を備えた複眼式撮影装置において、撮影画面内の任意のエリアの特定な複数の対象を検出し、検出された複数の対象それぞれの焦点や露光を調整する複眼式撮影装置の非連動オート系処理装置が提供される。

以下、図面を参照して本発明の実施の形態を説明する。

図１は、本発明の複眼式撮影装置の非連動オート系処理装置の一実施形態が適用された第１実施形態の２眼式デジタルカメラ１０を前面から見た外観斜視図である。

図１に示す２眼式デジタルカメラ１０は、２つの固体撮像素子（ここでは、Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ：ＣＣＤとする）それぞれに被写体像を結像する２つの撮影光学系を備え、これらの２つの撮影光学系で同一の被写体を捉えて２つのＣＣＤそれぞれに結像した各被写体像それぞれを表す２つの画像データを生成する撮影装置である。

図１に示すように、この２眼式デジタルカメラ１０の前面の中央部には、外観上、被写体に焦点を合わせる複数のフォーカスレンズなどで構成される撮影光学系がそれぞれに内蔵された２つの撮影レンズ１１，１２が備えられている。また、この２眼式デジタルカメラ１０の内部の、２つの撮影レンズ１１，１２それぞれの背面にはＣＣＤ１１３，１２３（図２参照）が配備されている。２つの撮影レンズ１１，１２のうちの一方の撮影レンズ１１を経由してきた被写体光は、この一方の撮影レンズ１１の背面に配備されたＣＣＤ１１３（図２参照）に入射されてアナログ信号である被写体信号に変換され、一方の撮影レンズ１１に対する他方の撮影レンズ１２を経由してきた被写体光は、この他方の撮影レンズ１２の背面に配備されたＣＣＤ１２３（図２参照）に入射されてアナログ信号である被写体信号に変換される。また、この２眼式デジタルカメラ１０の前面の上部には、シャッタレリーズボタン１４への押下操作に同期して発光する閃光発光部１３が備えられている。また、この２眼式デジタルカメラ１０はセルフタイマ撮影機能を有しており、この２眼式デジタルカメラ１０の前面の中央上部には、セルフタイマ撮影機能を用いた撮影時に点滅するＬＥＤ発光部１４が備えられている。

また、この２眼式デジタルカメラ１０の上面には、シャッタレリーズボタン１５が備えられている。このシャッタレリーズボタン１５は、半押しおよび全押しの２段階で構成されている。この２眼式デジタルカメラ１０は、静止画を撮影する際に選択する静止画撮影モードと、動画を撮影する際に選択する動画撮影モードと、記録メディアに保存された撮影画像を再生する際に選択する再生モードとを有しており、静止画撮影モードあるいは動画撮影モードを選択すると、顔認識機能による画像中の顔の検出、ＡＦ機能による焦点調整、およびＡＥ機能による露光調整が連続的に行われる。

詳細な説明は後述するが、静止画撮影モードが選択された後にシャッタレリーズボタン１５を半押しすると、顔認識機能により検出された顔までの距離およびその顔の輝度を半押しされた時点の位置に固定するＡＦロックおよびＡＥロックが設定される。その後、シャッタレリーズボタン１５が半押しされた状態を保って構図を決定した上でシャッタレリーズボタン１５を全押しすると、シャッタが切られて被写体の静止画撮影が行われ、焦点および露光の双方が適正に調整された撮影画像が得られる。

また、静止画撮影モードが選択された後にシャッタレリーズボタン１５を全押しすると、顔認識機能による画像中の顔の検出、ＡＦ機能による焦点調整、およびＡＥ機能による露光調整が連続的に行われるとともに、顔認識機能により検出された顔までの距離およびその顔の輝度に基づいた動画撮影が行われる。

図２は、図１に示す２眼式デジタルカメラ１０の機能を示すブロック図である。

図２に示すように、２眼式デジタルカメラ１０の内部には、大きく分けて、２つの撮影レンズ１１，１２（図１参照）のうちの一方の撮影レンズ１１（図１参照）側に内蔵された第１撮影部１１０と、その一方の撮影レンズ１１（図１参照）に対する他方の撮影レンズ１２（図１参照）側に内蔵された第２撮影部１２０と、第１撮影部１１０および第２撮影部１２０から送られる信号を処理する信号処理部１３０とが設けられている。

第１撮影部１１０には、フォーカスレンズ１１１、ＩＲフィルタ（赤外線カットフィルタ）１１２、ＣＣＤ１１３、カメラＣＰＵ１１４、ＴＧ（タイミングジェネレータ）１１５、メカＣＰＵ１１６、ＣＤＳ（相関二重サンプリング）回路１１７、ＡＧＣ（オートゲインコントロール）回路１１８、Ａ／Ｄ（アナログ／デジタル）コンバータ１１９が具備されている。

また、この第１撮影部１１０と同様に、第２撮影部１２０にも、フォーカスレンズ１２１、ＩＲフィルタ１２２、ＣＣＤ１２３、カメラＣＰＵ１２４、ＴＧ１２５、メカＣＰＵ１２６、ＣＤＳ回路１２７、ＡＧＣ回路１２８、Ａ／Ｄコンバータ１２９が具備されている。

また、信号処理部１３０には、不揮発性メモリ１３１、ＲＡＭ１３２、第１バッファメモリ１３３ａ、第２バッファメモリ１３３ｂ、ＡＦ演算部１３４、ＡＥ演算部１３５、特定被写体検出部１３６、画像メモリ１３７、画像信号処理部１３８、ＤＳＰ１３９、圧縮伸長部１４０、表示メモリ１４１、表示制御部１４２、Ｄ／Ａコンバータ１４３、操作Ｉ／Ｆ１４４、電源制御部１４５、記録メディアＩ／Ｆ１４６、通信制御部１４７、動静止画記録制御プログラムＲＯＭ１４９が具備されており、これらの各種要素はバス１４８を介して相互に接続されている。

さらに、この２眼式デジタルカメラ１０には、第１撮影部１１０、第２撮影部１２０、および信号処理部１３０のほかに、スルー画像や撮影画像などを表示させるための画像表示部１５０、図１に示すシャッタレリーズボタン１５や図示しない電源ボタンや各種設定を行う各種設定ボタンをまとめて表示した操作部１６０、２眼式デジタルカメラ１０に電力を供給するバッテリ１７０、撮影画像を表す画像データを記録しておく記録メディア１８０も設けられている。２眼式デジタルカメラ１０には、これらの他に、シャッタなどが備えられているが本発明の主題とは無関係であるので図示を省略する。

２眼式デジタルカメラ１０にバッテリ１７０を装填し、図示しない電源ボタンを操作して電源スイッチが入れられると電源がオンされ、２眼式デジタルカメラ１０が駆動される。

まず第１撮影部１１０の構成を、図２を参照して説明する。

２眼式デジタルカメラ１０では、図２の左方から被写体光が入射し、第１撮影部１１０のフォーカスレンズ１１１を経て、被写体光の赤外線をカットするＩＲフィルタ１１２を通過した後、被写体光に基づく被写体像をＣＣＤ１１３に結像し、アナログ信号である被写体信号として読み取る。ＣＣＤ１１３に被写体信号を出力させるにあたっては、カメラＣＰＵ１１４からの、所定時間ごと、あるいは図１に示すシャッタレリーズボタン１５が押下されたときに、ＣＣＤ１１３に被写体信号を出力させる指示に従った指示信号が、ＴＧ１１５を介してＣＣＤ１１３に与えられることによって行われる。尚、本来、撮影光学系には複数のレンズが配備され、それら複数のレンズのうち少なくとも１つのレンズが焦点の調節に大きく関与し、各レンズの相対位置が焦点距離に関与するが、この図２では、それらの複数のレンズのうち、焦点の調節に係わるレンズをフォーカスレンズ１１１として模式的に示している。

この２眼式デジタルカメラ１０が駆動されると、メカＣＰＵ１１６からの、フォーカスレンズ１１１を所定の駆動範囲内で移動させる指示や合焦位置に向かわせるための合焦位置の指示に従った指示信号によって、フォーカスレンズ１１３が移動し、撮影画角のうちの顔認識機能により検出された顔に焦点を合わせるＡＦ機能による焦点調整が連続的に行われる。また、詳細な説明は後述するが、撮影画角のうちの顔認識機能により検出された顔に対する露光調整を行うＡＥ機能による露光調整も連続的に行われる。

ＣＣＤ１１３に結像して読み取られた被写体信号はＣＤＳ回路１１７に読み出され、このＣＤＳ回路１１７で増幅率を調整してその調整された増幅率で被写体信号を増幅する。ＣＤＳ回路１１７で増幅率が調整された被写体信号はＡＧＣ回路１１８に読み出され、このＡＧＣ回路１１８でゲインを制御することによって被写体信号レベルの強弱を自動補正する。ＡＧＣ回路１１８で被写体信号レベルの強弱が自動補正された被写体信号は、Ａ／Ｄコンバータ１１９に読み出され、このＡ／Ｄコンバータ１１９でアナログ信号がデジタル信号に変換され信号処理部１３０へと出力される。

第２撮影部１２０の構成は、上述した第１撮影部１１０と同様の構成であるため、第２撮影部１２０の構成の説明は省略する。

次に、信号処理部１３０の構成を、図２を参照して説明する。

不揮発性メモリ１３１には、２眼式デジタルカメラ１０を動作させる各種プログラムなどが保存されている。

ＲＡＭ１３２には、例えば、ユーザによって、各モードそれぞれについて設定された項目情報などが書き込まれて保存される。

２眼式デジタルカメラ１０は、静止画撮影モードあるいは動画撮影モードが選択された際、顔認識機能による画像中の顔の検出、ＡＦ機能による焦点調整、およびＡＥ機能による露光調整を連続的に行うために、静止画撮影や動画撮影の前にも被写体信号を生成する。尚、静止画撮影や動画撮影の前に生成される被写体信号は、本撮影時に生成される被写体信号よりも低解像度の一時的なデータである。

第１撮影部１１０のフォーカスレンズ１１１などを経てＡ／Ｄコンバータ１１９でデジタル信号に変換された、静止画撮影や動画撮影の前に生成される低解像度の被写体信号や静止画撮影や動画撮影時に生成される被写体信号は、信号処理部１３０の第１バッファメモリ１３３ａに一旦蓄えられる。この第１バッファメモリ１３３ａは、本発明にいう画像データ取得部の一例に相当する。第１バッファメモリ１３３ａに一旦蓄えられた被写体信号は、画像中の顔の検出機能を実現するための演算を行う特定被写体検出部１３６に読み出され、この特定被写体検出部１３６で、その被写体信号のＲＧＢ信号から画像中の顔を検出する。この特定被写体検出部１３６は、本発明にいう対象検出部の一例に相当する。

また、その被写体信号は、ＡＦ機能を実現するための演算を行うＡＦ演算部１３４に読み出され、このＡＦ演算部１３４で、その被写体信号のＲＧＢ信号から被写体のコントラストを検出して被写体までの距離を測定し、検出結果に基づいて、フォーカスレンズ１１１，１２１によって焦点調整を行う。尚、ＡＦ演算部１３４は、特定被写体検出部１３６により顔が検出された場合にはその顔に対する焦点調整を行う。

さらに、その被写体信号は、ＡＥ機能を実現するための演算を行うＡＥ演算部１３５にも読み出され、このＡＥ演算部１３５で、その被写体信号のＲＧＢ信号から輝度信号を抽出して被写体の輝度を検出し、検出結果に基づいて、ＣＣＤ１１３，１２３に与えられる被写体光の光量が適切になるように露光調整を行う。尚、ＡＥ演算部１３５は、特定被写体検出部１３６により顔が検出された場合にはその顔に対する露光調整を行う。

このＡＦ演算部１３４とＡＥ演算部１３５との組み合わせは、本発明にいう動作実行部の一例に相当する。

また、第２撮影部１２０のフォーカスレンズ１２１などを経てＡ／Ｄコンバータ１２９でデジタル信号に変換された、静止画撮影や動画撮影の前に生成される低解像度の被写体信号や静止画撮影や動画撮影に生成される被写体信号は、信号処理部１３０の第２バッファメモリ１３３ｂに一旦蓄えられる。この第２バッファメモリ１３３ｂも、上述した第１バッファメモリ１３３ａと同様に、本発明にいう画像データ取得部の一例に相当する。第２バッファメモリ１３３ｂに一旦蓄えられた被写体信号は、画像中の顔の検出機能を実現するための演算を行う特定被写体検出部１３６に読み出され、この特定被写体検出部１３６で、その被写体信号のＲＧＢ信号から画像中の顔を検出する。尚、画像中に顔が複数存在する場合には、第１撮影部１１０で生成されて第１バッファメモリ１３３ａに一旦蓄えられた被写体信号に基づいて特定被写体検出部１３６で実行された顔の検出とは異なる顔を検出する。この特定被写体検出部１３６は、本発明にいう対象検出部の一例に相当する。

また、その被写体信号は、ＡＦ機能を実現するための演算を行うＡＦ演算部１３４に読み出され、このＡＦ演算部１３４で、その被写体信号のＲＧＢ信号から被写体のコントラストを検出して被写体までの距離を測定し、検出結果に基づいて、フォーカスレンズ１１１，１２１によって焦点調整を行う。尚、ＡＦ演算部１３４は、特定被写体検出部１３６により顔が検出された場合にはその顔に対する焦点調整を行う。

さらに、その被写体信号は、ＡＥ機能を実現するための演算を行うＡＥ演算部１３５にも読み出され、このＡＥ演算部１３５で、その被写体信号のＲＧＢ信号から輝度信号を抽出して被写体の輝度を検出し、検出結果に基づいて、ＣＣＤ１１３，１２３に与えられる被写体光の光量が適切になるように露光調整を行う。尚、ＡＥ演算部１３５は、特定被写体検出部１３６により顔が検出された場合にはその顔に対する露光調整を行う。

このＡＦ演算部１３４とＡＥ演算部１３５との組み合わせは、本発明にいう動作実行部の一例に相当する。

動静止画記録制御プログラムＲＯＭ１４９には、第１撮影部１１０で生成されて第１バッファメモリ１３３ａに一旦蓄えられた被写体信号に基づいて、特定被写体検出部１３６で実行された顔の検出、ＡＦ演算部１３４で実行された焦点調整、およびＡＥ演算部１３５で実行された露光調整のそれぞれの結果を、その第１バッファメモリ１３３ａに一旦蓄えられた被写体信号に反映させて、焦点および露光の双方が適正に調整された撮影画像を表す画像データを生成するとともに、第２撮影部１２０で生成されて第２バッファメモリ１３３ｂに一旦蓄えられた被写体信号に基づいて、特定被写体検出部１３６で実行された顔の検出、ＡＦ演算部１３４で実行された焦点調整、およびＡＥ演算部１３５で実行された露光調整のそれぞれの結果を、その第２バッファメモリ１３３ｂに一旦蓄えられた被写体信号に反映させて、焦点および露光の双方が適正に調整された撮影画像を表す画像データを生成するプログラムが保存されている。このプログラムに従って、各撮像部に対応する撮影画像を表す画像データを複数生成する。この動静止画記録制御プログラムＲＯＭ１４９は、本発明にいう画像データ生成部の一例に相当する。

従って、撮影画面内に複数の顔が存在する場合において、これら複数の顔を互いに異なる顔として検出して、２つの撮影部１１０，１２０毎にそれぞれ検出された顔それぞれに着目した焦点調整動作や露光調整動作が、２つの撮影部１１０，１２０それぞれについて実行されることにより、画像データ毎に異なる顔に焦点調整や露光調整された複数の画像データが得られる。

また、特定被写体検出部１３６が画像中の顔を検出することによって、撮影画面内に複数の人物が存在する場合において、画像データ毎に異なる人物の顔に焦点調整や露光調整された複数の画像データが得られる。

尚、ここでは、特定被写体検出部１３６が画像中の顔を検出する例を挙げたが、本発明にいう対象検出部は、これに限られるものではなく、例えば、画像中の人物など、画像中の任意のエリアの特定な対象を検出するものであってもよい。

画像信号処理部１３８は、静止画撮影や動画撮影時に生成されて画像メモリ１３７に書き込まれた被写体信号を画像メモリ１３７から読み出して、その被写体信号に対してＲＧＢレベルの調節やガンマ調整などを施す。

ＤＳＰ１３９は、静止画撮影や動画撮影時に生成されて画像メモリ１３７に書き込まれた被写体信号を画像メモリ１３７から読み出して、その被写体信号に対して輪郭強調などを施す。

圧縮伸長部１４０は、静止画撮影や動画撮影時に生成されて画像メモリ１３７に書き込まれた被写体信号を画像メモリ１３７から読み出して、その被写体信号に対してＪＰＥＧ圧縮に代表される圧縮処理や伸長処理を施す。

表示制御部１４２およびＤ／Ａコンバータ１４３は、画像信号処理部１３８、ＤＳＰ１３９、および圧縮伸長部１４０によって画像処理が施されて表示メモリ１４１に書き込まれた被写体信号を、画像表示部１５０で表示できるデータの形式に変換する。変換された後の被写体信号は、画像表示部１５０に送られ、被写体信号を表す撮影画像が画像表示部１５０に表示される。

操作Ｉ／Ｆ１４４は、操作部１６０による設定情報の授受を行うものである。

電源制御部１４５は、２眼式デジタルカメラ１０に装填されたバッテリ１７０の電池残量の画像表示部１５０への表示を制御する。

記録メディアＩ／Ｆ１４６は、記録メディア１８０への被写体信号の記録や読み出しのための情報や信号の授受を行うものである。

通信制御部１４７は、信号処理部１３０内の各種要素間の通信を制御する。

２眼式デジタルカメラ１０は、基本的には以上のように構成されている。

ここで、２眼式デジタルカメラ１０における、本発明の一実施形態としての特徴は、撮影画面内に複数の顔が存在する場合において、これら複数の顔を互いに異なる顔として検出して、２つの撮影部１１０，１２０毎にそれぞれ検出された顔それぞれに着目した焦点調整動作や露光調整動作を実行する動作にあり、以下、この動作について詳述する。

図３は、第１実施形態の２眼式デジタルカメラ１０の起動処理が開始されてから静止画撮影が終了するまでの間における動作の流れを説明するフローチャートである。

図３に示すフローチャートで説明する動作は、図示しない電源ボタン操作されることによって開始される。

まず、図示しない電源ボタンが操作されたことを受けて電源スイッチが入れられると電源がオンされ、２眼式デジタルカメラ１０が駆動される（ステップＳ１０１）。

ステップＳ１０１で２眼式デジタルカメラ１０が駆動されると、動作指示待ちのスタンバイ状態に移行し（ステップＳ１０２）、静止画を撮影する際に選択する静止画撮影モードを選択すると（ステップＳ１０３：Ｙｅｓ）、静止画撮影が可能な撮影準備状態に移行し、顔認識機能による画像中の顔の検出、ＡＦ機能による焦点調整、およびＡＥ機能による露光調整が連続的に行われる（ステップＳ１０４）。

また、ステップＳ１０２でスタンバイ状態に移行した後、動画を撮影する際に選択する動画撮影モードを選択すると（ステップＳ１０３：Ｎｏ）動画撮影モードに移行し（ステップＳ１０５）、記録メディアに保存された撮影画像を再生する際に選択する再生モードを選択すると（ステップＳ１０３：Ｎｏ）、再生モードに移行する（ステップＳ１０５）。

ステップＳ１０４で撮影準備状態に移行した後、シャッタレリーズボタン１５が半押しされるまでは（ステップＳ１０６：Ｎｏ）、ステップＳ１０３〜ステップＳ１０５の動作が可能である。

ステップＳ１０４で撮影準備状態に移行した後、シャッタレリーズボタン１５が半押しされると（ステップＳ１０６：Ｙｅｓ）、第１撮影部１１０で生成されて第１バッファメモリ１３３ａに一旦蓄えられた被写体信号に基づいて、特定被写体検出部１３６で実行される第１の人物の顔の検出、ＡＦ演算部１３４で実行される焦点調整、およびＡＥ演算部１３５で実行される露光調整のそれぞれの動作が実行される（ステップＳ１０７）。また、ステップＳ１０７の動作と平行して、第２撮影部１２０で生成されて第２バッファメモリ１３３ｂに一旦蓄えられた被写体信号に基づいて、特定被写体検出部１３６で実行された第２の人物の顔の検出、ＡＦ演算部１３４で実行された焦点調整、およびＡＥ演算部１３５で実行された露光調整のそれぞれの動作が実行される（ステップＳ１０８）。

ステップＳ１０７の動作によって、第１バッファメモリ１３３ａに一旦蓄えられた被写体信号の、特定被写体検出部１３６により検出された第１の人物の顔に着目したＡＦ／ＡＥ最適化が終了し（ステップＳ１０９：Ｙｅｓ）、ステップＳ１０８の動作によって、第２バッファメモリ１３３ｂに一旦蓄えられた被写体信号の、特定被写体検出部１３６により検出された第２の人物の顔に着目したＡＦ／ＡＥ最適化が終了して（ステップＳ１１０：Ｙｅｓ）、双方の最適化が終了すると（ステップＳ１１１：Ｙｅｓ）、ＡＦ演算部１３４およびＡＥ演算部１３５の各々の動作の演算結果に基づいて、第１撮影部１１０のフォーカスレンズ１１１および第２撮影部１２０のフォーカスレンズ１２１それぞれの位置をその半押しされた時点の位置に固定するＡＦロックが設定されるとともに、被写体の輝度をその半押しされた時点の位置に固定するＡＥロックが設定される。尚、ＡＦ演算部１３４の動作によるＡＦ最適化、およびＡＥ演算部１３５の動作によるＡＦ最適化のいずれか一方の最適化、あるいは双方の最適化が正確に実行されなかった場合には（ステップＳ１０９：Ｎｏ、ステップＳ１１０：Ｎｏ、ステップＳ１１１：Ｎｏ）、ステップＳ１０７やステップＳ１０８の動作が再度実行される。

ステップＳ１１１で双方の最適化が終了した後、シャッタレリーズボタン１５が半押しされた状態を保って構図を決定した上でシャッタレリーズボタン１５が全押しされると（ステップＳ１１２：Ｙｅｓ）、シャッタが切られて露光開始されることにより被写体の静止画撮影が行われる（ステップＳ１１３）。

静止画撮影が行われるにあたっては、動静止画記録制御プログラムＲＯＭ１４９に保存されたプログラムに従って、ステップＳ１０９：Ｙｅｓの結果を、第１バッファメモリ１３３ａに一旦蓄えられた被写体信号に反映させて、焦点および露光の双方が第１の人物の顔に着目して適正に調整された撮影画像を表す画像データが生成されるとともに、ステップＳ１１０：Ｙｅｓの結果を、その第２バッファメモリ１３３ｂに一旦蓄えられた被写体信号に反映させて、焦点および露光の双方が第２の人物の顔に着目して適正に調整された撮影画像を表す画像データが生成される。

生成された各被写体信号は、画像メモリ１３７や画像信号処理部１３８やＤＳＰ１３９や圧縮伸長部１４０や記録メディアＩ／Ｆ１４６などを経て記録メディア１８０に記録され（ステップＳ１１４）、本撮影が終了する（ステップＳ１１５）。

また、ステップＳ１１１で双方の最適化が終了した後、シャッタレリーズボタン１５が全押しされることなく（ステップＳ１１２：Ｎｏ）半押しが解除されると（ステップＳ１１６：Ｙｅｓ）、静止画撮影が可能な撮影準備状態（ステップＳ１０４）に移行してＡＦ機能による焦点調整およびＡＥ機能による露光調整が連続的に行われ、再度、上述したステップＳ１０６〜ステップＳ１１２の動作が可能となる。

以上で、本発明の第１実施形態の説明を終了する。

次に、本発明の第２実施形態および第３実施形態について説明する。

尚、以下説明する第２実施形態および第３実施形態では、上述した第１実施形態との相違点に注目し、同じ要素については同じ符号を付して説明を省略する。

図４は、本発明の複眼式撮影装置の非連動オート系処理装置の一実施形態が適用された第２実施形態の３眼式デジタルカメラ２０を前面から見た外観斜視図であり、図５は、本発明の複眼式撮影装置の非連動オート系処理装置の一実施形態が適用された第３実施形態の４眼式デジタルカメラ３０を前面から見た外観斜視図である。

図４に示す３眼式デジタルカメラ２０は、３つのＣＣＤそれぞれに被写体像を結像する３つの撮影光学系を備え、これらの３つの撮影光学系で同一の被写体を捉えて３つのＣＣＤそれぞれに結像した各被写体像を画像データに生成する撮影装置である。図４に示すように、この３眼式デジタルカメラ２０の前面の中央部には、外観上、被写体に焦点を合わせる複数のフォーカスレンズなどで構成される撮影光学系がそれぞれに内蔵された３つの撮影レンズ２１，２２，２３が備えられている。この３眼式デジタルカメラ２０は、本発明の複眼式撮影装置の非連動オート系処理装置の一例に相当する。

図５に示す４眼式デジタルカメラ３０は、４つのＣＣＤそれぞれに被写体像を結像する４つの撮影光学系を備え、これらの４つの撮影光学系で同一の被写体を捉えて４つのＣＣＤそれぞれに結像した各被写体像を画像データに生成する撮影装置である。図５に示すように、この４眼式デジタルカメラ３０の前面の中央部には、外観上、被写体に焦点を合わせる複数のフォーカスレンズなどで構成される撮影光学系がそれぞれに内蔵された４つの撮影レンズ３１，３２，３３，３４が備えられている。この４眼式デジタルカメラ３０は、本発明の複眼式撮影装置の非連動オート系処理装置の一例に相当する。

尚、上述した第１実施形態では、２つのＣＣＤそれぞれに被写体像を結像する２つの撮影光学系を備えた２眼式デジタルカメラに本発明を適用した例で説明したが、本発明は、これに限られるものではなく、例えば、第２実施形態で示した３眼式デジタルカメラや第３実施形態で示した４眼式デジタルカメラなど、複数の固体撮像素子それぞれに被写体像を結像する複数の撮影光学系を備えた複眼式撮影装置の非連動オート系処理装置であればよい。

本発明の複眼式撮影装置の非連動オート系処理装置の一実施形態が適用された第１実施形態の２眼式デジタルカメラを前面から見た外観斜視図である。 図１に示す２眼式デジタルカメラの機能を示すブロック図である。 第１実施形態の２眼式デジタルカメラの起動処理が開始されてから静止画撮影が終了するまでの間における動作の流れを説明するフローチャートである。 本発明の複眼式撮影装置の非連動オート系処理装置の一実施形態が適用された第２実施形態の３眼式デジタルカメラを前面から見た外観斜視図である。 本発明の複眼式撮影装置の非連動オート系処理装置の一実施形態が適用された第３実施形態の４眼式デジタルカメラを前面から見た外観斜視図である。

符号の説明

１０ ２眼式デジタルカメラ
１１，１２，２１，２２，２３，３１，３２，３３，３４ 撮影レンズ
１３ 閃光発光部
１４ ＬＥＤ発光部
１５ シャッタレリーズボタン
１１０ 第１撮影部
１１１，１２１ フォーカスレンズ
１１２，１２２ ＩＲフィルタ
１１３，１２３ ＣＣＤ
１１４，１２４ カメラＣＰＵ
１１５，１２５ ＴＧ
１１６，１２６ メカＣＰＵ
１１７，１２７ ＣＤＳ回路
１１８，１２８ ＡＧＣ回路
１１９，１２９ Ａ／Ｄコンバータ
１２０ 第２撮影部
１３０ 信号処理部
１３１ 不揮発性メモリ
１３２ ＲＡＭ
１３３ａ 第１バッファメモリ
１３３ｂ 第２バッファメモリ
１３４ ＡＦ演算部
１３５ ＡＥ演算部
１３６ 特定被写体検出部
１３７ 画像メモリ
１３８ 画像信号処理部
１３９ ＤＳＰ
１４０ 圧縮伸長部
１４１ 表示メモリ
１４２ 表示制御部
１４３ Ｄ／Ａコンバータ
１４４ 操作Ｉ／Ｆ
１４５ 電源制御部
１４６ 記録メディアＩ／Ｆ
１４７ 通信制御部
１４８ バス
１５０ 画像表示部
１６０ 操作部
１７０ バッテリ
１８０ 記録メディア
１４９ 動静止画記録制御プログラムＲＯＭ
２０ ３眼式デジタルカメラ
３０ ４眼式デジタルカメラ

Claims (3)

1. 複数の固体撮像素子と、該複数の固体撮像素子それぞれに被写体像を結像する複数の撮影光学系とを備え、該複数の撮影光学系で同一の被写体を捉えて該複数の固体撮像素子それぞれに結像した各被写体像それぞれを表す複数の画像データを生成する複眼式撮影装置の非連動オート系処理装置において、
   前記複数の固体撮像素子それぞれに結像した各被写体像それぞれを表す複数の画像データを取得する画像データ取得部と、
   前記画像データ取得部により取得された複数の画像データそれぞれに基づいて、該複数の画像データそれぞれにより表される複数の画像中の、前記複数の撮影光学系毎に互いに異なる任意のエリアの特定な対象を検出する対象検出部と、
   前記対象検出部により前記複数の撮影光学系毎にそれぞれ検出された各任意のエリアの特定な対象に着目した焦点調整動作および露光調整動作のうちの少なくとも１つの動作を実行する動作実行部と、
   前記動作実行部により実行された前記複数の撮影光学系それぞれについての焦点調整動作および露光調整動作のうちの少なくとも１つの動作を反映させた画像データを生成する画像データ生成部とを備えたことを特徴とする複眼式撮影装置の非連動オート系処理装置。
2. 前記動作実行部が、前記画像中の人物の検出動作を実行するものであることを特徴とする請求項１記載の複眼式撮影装置の非連動オート系処理装置。
3. 前記動作実行部が、前記画像中の顔の検出動作を実行するものであることを特徴とする請求項１記載の複眼式撮影装置の非連動オート系処理装置。

Images