JP2009200924A - 撮像装置 - Google Patents

Abstract

【課題】 本発明の目的は、明るいシーンの撮影においても画像中の被写体と非被写体を高精度に分離することができる撮像装置を提供することである。
【解決手段】 本発明の撮像装置（１１〜２６）は、同一シーンに対してストロボ光強度の高い撮影とストロボ光強度の低い撮影とを行うと共に、それらの撮影により取得された画像の輝度比較に基づき本撮影画像中の被写体領域と非被写体領域との境界を検出する撮像装置において制御手段（２０）を備える。この制御手段（２０）は、ストロボ光強度の高い撮影を行うときには、撮像素子（１４）の露光期間のうちストロボ光の非発光期間と重複する期間が自動露出モード撮影におけるその重複する期間よりも短くなるように撮像素子（１４）の露光とストロボ光の発光とのタイミングを制御する。
【選択図】 図１

Description

本発明は、画像中の被写体と非被写体を高精度に分離することができる撮像装置に関する。以下、画像中の被写体と非被写体を分離することを「被写体分離」と称す。

画像中の被写体と非被写体を分離する技術が数多く提案されている。その一例として、特許文献１には、対象物に対して照明を当てた画像と照明を当てない画像とを撮影し、その２つの画像の中から輝度が変化する領域を被写体の領域として抽出する技術が知られている。
特開平１０−２１０３４０号公報

しかし、従来技術では、例えば、晴れた日の屋外や明るい照明下の屋内でポートレート撮影を行うなど、「明るいシーン」で撮影する場合には、照明光の光量に比べて環境光の光量が大きくなるため照明を当てた画像と照明を当てない画像との間で被写体の輝度変化量が小さくなり、結果として被写体と非被写体の分離を高精度に行うことが困難であった。

本発明は、上記従来技術の課題を解決するものである。本発明は、明るいシーンの撮影においても画像中の被写体と非被写体を高精度に分離することができる撮像装置を提供することを目的とする。

第１の発明の撮像装置は、同一シーンに対してストロボ光強度の高い撮影とストロボ光強度の低い撮影とを行うと共に、それらの撮影により取得された画像の輝度比較に基づき本撮影画像中の被写体領域と非被写体領域との境界を検出する撮像装置において制御手段を備える。この制御手段は、ストロボ光強度の高い撮影を行うときには、撮像素子の露光期間のうちストロボ光の非発光期間と重複する期間が自動露出モード撮影におけるその重複する期間よりも短くなるように撮像素子の露光とストロボ光の発光とのタイミングを制御する。

なお、ここでいう「ストロボ光強度の低い撮影」とは、ストロボ非発光撮影を含むものとする。

第２の発明は、第１の発明において、制御手段が、露光の開始と発光の開始との時間差を、自動露出モード撮影における露光の開始と発光の開始との時間差よりも小さくする。

第３の発明は、第１の発明または第２の発明において、制御手段が、露光の終了と発光の終了との時間差を、自動露出モード撮影における露光の終了と発光の終了との時間差よりも小さくする。

第４の発明は、第１〜３の発明の何れか一の発明において、制御手段が、露光の開始から終了までの時間と発光の開始から終了までの時間とを一致させる。

第５の発明は、第１〜４の発明の何れか一の発明において、制御手段が、撮像素子の露光期間を制御するシャッターの開度が最大となるタイミングと発光のタイミングとを一致させる。

第６の発明は、第１〜５の発明の何れか一の発明において、輝度比較に用いられる本撮影画像以外の画像に対してノイズ低減処理を施すノイズ低減手段を備える。

第７の発明は、第１〜６の発明の何れか一の発明において、輝度比較に用いられる画像間の非被写体領域の信号レベルが揃うように、輝度比較に用いられる画像を正規化する正規化手段を更に備える。

第８の発明は、第１〜７の発明の何れか一の発明において、ストロボ光強度の高い撮影では、ストロボ光を自動露出モード撮影の発光量よりも大きい発光量で発光させる。

第９の発明は、第８の発明において、ストロボ光強度の高い撮影で取得された画像中の白飛び領域を輝度比較にかかわらず優先的に被写体領域とみなす判別手段を更に備える。

第１０の発明は、第１〜９の発明の何れか一の発明において、本撮影画像中の被写体領域と非被写体領域とに対して異なる画像処理を施す画像処理手段を更に備える。

第１１の発明は、第１０の発明において、画像処理手段が、非被写体領域に対してボカシ処理を施す。

本発明では、同一シーンを撮影したストロボ光強度の異なる複数枚の画像の輝度比較に基づき被写体分離を行う際に、複数枚の画像のうちストロボ光強度の高い画像を撮影するときには、撮像素子の露光期間のうちのストロボ光が発光されない期間を自動露出モード撮影でのその期間よりも短くするように撮像素子の露光とストロボ光の発光とのタイミングを制御する。従って、本発明によれば、環境光による撮像素子の露光量を減少させて、ストロボ光による撮像素子の露光量の比率を相対的に高めることにより、ストロボ光強度の高い画像と低い画像との間の、被写体の輝度変化量と背景の輝度変化量との乖離量を大きくすることができるので、被写体分離の精度を高くすることができる。

（第１実施形態の説明）
以下、第１実施形態の電子カメラについて説明する。

図１は、本発明の撮像装置を適用した電子カメラのブロック図である。

電子カメラは、撮像レンズ１１およびレンズ駆動部１２と、メカニカルシャッター１３と、撮像素子１４と、信号処理部１５と、タイミングジェネレータ（ＴＧ）１６と、バッファメモリ１７と、データ処理部１８と、圧縮／復号部１９と、制御部２０と、測光部２１と、モニタ２２と、記録媒体２３と、発光部２４と、操作部２５と、バス２６とを有している。ここで、バッファメモリ１７、データ処理部１８、圧縮／復号部１９、制御部２０、測光部２１、モニタ２２、記録媒体２３は、バス２６を介して接続されている。また、レンズ駆動部１２、メカニカルシャッター１３、信号処理部１５、ＴＧ１６、発光部２４、操作部２５は、それぞれ制御部２０に接続されている。

撮像レンズ１１は、フォーカスレンズやズームレンズを含む複数のレンズ群で構成されている。なお、簡単のため、図１では撮像レンズ１１を１枚のレンズとして図示している。

レンズ駆動部１２は、制御部２０の指示に応じてレンズ駆動信号を発生し、撮像レンズ１１を光軸方向に移動させてフォーカス調整やズーム調整を行うと共に、撮像レンズ１１を通過した光束による被写体像を撮像素子１４の撮像面に形成する。

メカニカルシャッター１３は、例えば、絞り羽根兼用のシャッター羽根を有したレンズシャッター（ビハインド・ザ・レンズシャッター）である。メカニカルシャッター１３は、制御部２０の指示に応じて、シャッター羽根の開口量の調整と開閉動作の制御とを行うことで、撮像素子１４の撮像面に到達する光束の光量を調整すると共に、その光束による撮像素子１４の露光時間を制御する。

撮像素子１４は、ＣＣＤ型やＣＭＯＳ型の撮像素子であり、撮像レンズ１１の像空間側に配置されている。撮像素子１４は、撮像面に形成された被写体像を光電変換してアナログ画像信号を生成する。この撮像素子１４の出力は信号処理部１５に接続されている。

信号処理部１５は、制御部２０の指示に応じて、撮像素子１４から出力されたアナログ画像信号に対し、ＣＤＳ（相関二重サンプリング）、ゲイン調整、Ａ／Ｄ変換、ホワイトバランス調整、色分離（補間）およびガンマ変換などの信号処理を施すと共に、処理後の画像信号を出力する。また、信号処理部１５は、制御部２０の指示に基づいてゲイン調整の調整量を設定し、それによってＩＳＯ感度に相当する撮影感度の調整を行う。なお、信号処理部１５の出力はバッファメモリ１７に接続されている。

ＴＧ１６は、制御部２０の指示に基づき撮像素子１４および信号処理部１５に対してタイミングパルスを供給する。撮像素子１４および信号処理部１５の駆動タイミングはそのタイミングパルスによって制御される。

バッファメモリ１７は、信号処理部１５から出力される画像信号を画像データとして一時的に記憶する。また、バッファメモリ１７は、制御部２０による処理の過程で作成された画像データを一時的に記憶する。

データ処理部１８は、制御部２０の指示に応じて、画像データにボカシ処理等の画像処理を施す。

圧縮／復号部１９は、制御部２０の指示に応じて、画像データに圧縮処理を施す。なお、圧縮処理は、ＪＰＥＧ（Joint Photographic Experts Group）形式などによって行われる。

測光部２１は、制御部２０の指示に応じて、バッファメモリ１７に記録された画像データに基づき、多分割測光（マルチパターン測光）、中央部重点測光、スポット測光などの公知の測光方式により、被写体や撮影シーン全体の明るさや、撮影シーンの明るさ分布を示す評価値を算出する。

モニタ２２は、電子カメラ筐体の背面などに設けられたＬＣＤモニタや、接眼部を備えた電子ファインダなどであり、制御部２０の指示に応じて各種の画像を表示する。

記録媒体２３には、制御部２０によって、圧縮処理後の画像データが記録される。なお、記録媒体２３は、半導体メモリを内蔵したメモリカードや、小型のハードディスクなどである。

発光部２４は、制御部２０の指示に基づき、電子カメラ筐体に設けられたエレクトロニックフラッシュ等を駆動して、被写体を照明するためのストロボ光を被写界に向けて発光する。

操作部２５は、レリーズ釦、撮影モード切替釦などの操作部材を含み、ユーザーによる部材操作の内容に応じた操作信号を制御部２０に送る。

制御部２０は、操作部２５から送られた操作信号に応じて電子カメラの各部を統括制御する。例えば、制御部２０は、操作部２５のレリーズ釦の半押し操作信号を受けると、撮影に先立ち、レンズ駆動部１２と協働して撮像レンズ１１の焦点調節制御（ＡＦ）を行う。また制御部２０は、測光部２１を駆動させて撮影シーンの評価値を算出させ、その評価値に基づき信号処理部１５などの設定内容を調節する。

撮影時、制御部２０は、測光部２１が算出した評価値に基づき露出条件を決定すると共に、その決定した条件の下でレンズ駆動部１２、メカニカルシャッター１３、信号処理部１５、ＴＧ１６および発光部２４を駆動させて撮影を行う。シャッター速度の設定は、メカニカルシャッター１３の開放時間と、撮像素子１４の電荷蓄積時間との組み合わせによって行われる。また、撮影された画像の画像データは、信号処理部１５を介してバッファメモリ１７へ記録される。制御部２０は、データ処理部１８および圧縮／復号部１９を駆動させて、バッファメモリ１７に記録された画像の画像データに対し画像処理および圧縮処理を施すと共に、それら処理後の画像データを記録媒体２３へ記録する。

以下、第１実施形態の電子カメラの被写体分離の動作を、図２の流れ図を参照して説明する。図２のフローは、従来技術では被写体分離が困難な「明るいシーン」で撮影する場合に実行されるものである。なお、ここでいう「被写体」は、カメラに近い位置に存在する、ユーザーが撮影したい対象のことであり、「背景」は、被写体よりもカメラから離れた位置に存在し、被写体に比べてストロボ光が届きにくい対象のことである。

Ｓ１０１：制御部２０は、ユーザーによるレリーズ釦の全押しを操作部２５から受信した操作信号によって検知すると、予備撮影の露出条件を決定する。ここで予備撮影とは、予備撮影画像を取得する撮影であり、予備撮影画像とは、以下のＳ１０６の輝度比較により被写体と背景を分離するためのみに用いられる画像である。予備撮影の露出条件の決定としては、具体的には、メカニカルシャッター１３の開閉動作、撮像素子１４の露光、発光部２４のストロボ発光の各タイミングを決定する。

ここで、予備撮影の露出制御を説明するにあたり、比較のため、電子カメラが自動露出モードにあるときの露出制御について、図３および図４を参照しながら説明する。

図３は、メカニカルシャッター１３の開閉動作の制御とそれによる撮像素子１４の露光量との関係を示している。なお、図３の縦軸が示す光量とは、明るさ、即ち単位時間当たりに撮像素子１４に入射する光量である。

メカニカルシャッター１３は、レリーズ釦の全押しにより撮影が開始されると、時間ｔc1からシャッター開時関数Ｆo（ｔ）に基づいて開いていき、時間ｔo1で全開の状態となる。そしてメカニカルシャッター１３は、全開の状態を一定時間（時間ｔo1〜ｔo2）維持した後、時間ｔo2を境にシャッター閉時関数Ｆc（ｔ）に基づいて閉じていき、時間ｔc2で完全に閉じた状態となる。なお、シャッター開時関数Ｆo（ｔ）はメカニカルシャッター１３の開く時の特性を表した関数であり、シャッター閉時関数Ｆc（ｔ）はその閉じる時の特性を表した関数である。図３では、これら関数の出力を簡単のため直線で示している。

撮像素子１４の電荷蓄積時間が、ｔc1〜ｔc2の期間をカバーしていたならば、このようなメカニカルシャッター１３の開閉動作の制御から、撮像素子１４の露光量Ｓは、撮像素子１４に入射する光量を時間ｔc1〜時間ｔc2に亘って積分した全光量となる。これは、図３の台形部分の面積に相当する。電子カメラが自動露出モードであるときには、通常、この露光量Ｓが適正な光量になるようにシャッターの開閉動作が制御される。

図４は、自動露出モードによる「明るいシーン」の撮影における、メカニカルシャッター１３の開閉動作、撮像素子１４の露光および発光部２４のストロボ発光の制御とそれによる撮像素子１４の露光量との関係を示している。

「明るいシーン」の撮影では、適正な露光量が短時間で得られるため、メカニカルシャッター１３の開閉動作は、図４の≪シャッター開閉≫の部分に示したように制御される。具体的には、メカニカルシャッター１３は、レリーズ釦の全押しにより撮影が開始されると、時間ｔc1からシャッター開時関数Ｆo（ｔ）に基づいて開いていくが、全開の状態になる前に時間ｔc0で閉じ始めてしまう。そしてメカニカルシャッター１３は、シャッター閉時関数Ｆc（ｔ）に基づいて閉じていき、時間ｔc2で完全に閉じた状態となる。また、撮像素子１４の露光は、図４の≪ＣＣＤ露光≫の部分に示したように制御され、撮像素子１４は、メカニカルシャッター１３が開き始めると同時に露光を開始し（時間ｔc1）、それが完全に閉じると同時に露光を終了する（時間ｔc2）。この時、環境光による撮像素子１４の露光量Ｓeは、シャッター開時関数Ｆo（ｔ）及びシャッター閉時関数Ｆc（ｔ）に基づき、数式（１）で表される。

ここで、この撮影の際に、被写体分離のため強制的にストロボ光を発光をさせるようにすると、発光部２４のストロボ発光は、図４の≪ストロボ発光≫の部分に示したように制御されることとなる。具体的には、発光部２４は、メカニカルシャッター１３が最も大きく開いた時（時間ｔc0）に発光量が最大となるようにタイミングを合わせて、撮像素子１４の露光時間（時間ｔc1〜ｔc2）よりも極めて短い時間（時間ｔs1〜ｔs2）だけストロボ光を発光する。この場合、ストロボ光による撮像素子１４の露光量Ｓsは、シャッター開時関数Ｆo（ｔ）、シャッター閉時関数Ｆc（ｔ）及びストロボ光量関数Ｆs（ｔ）に基づき、数式（２）で表される。

ところで、被写体と背景の分離は、ストロボ光を発光させた場合に、電子カメラの近くにある被写体は、電子カメラから遠くにある背景に比べて、ストロボ光の照射効果が高くなることを利用して行っている。つまり、ストロボ光を発光させて撮影した画像（ストロボ発光画像）と、ストロボ光を発光させずに撮影した画像（ストロボ非発光画像）とを比較すると、被写体は背景よりも輝度変化量が大きくなる。従って、この輝度変化量の違いを利用すれば、被写体と背景を分離することができる。

以下、これを具体的に説明する。

上記式（２）により、被写体で反射したストロボ光による撮像素子１４の露光量をＳs0、また背景で反射したストロボ光による撮像素子１４の露光量をＳsbとする。そして、上記式（１）により、被写体または背景で反射した環境光による撮像素子１４の露光量をＳeとする。そうすると、ストロボ発光時の被写体からの反射光による撮像素子１４の露光量はＳs0＋Ｓeとなり、背景からの反射光による撮像素子１４の露光量はＳsb＋Ｓeとなる。またストロボ非発光時の被写体および背景からの反射光による撮像素子１４の露光量は何れもＳeとなる。通常、画像の輝度（ここでは、撮像素子１４の撮像面の光電変換によって発生する信号量を輝度とする）は、画面内に存在する物体からの反射光による撮像素子１４の露光量によって決定される。したがって、ストロボ発光画像中の被写体の輝度は（Ｓs0＋Ｓe）で表すことができ、背景の輝度は（Ｓsb＋Ｓe）で表すことができる。またストロボ非発光画像中の被写体および背景の輝度は何れもＳeで表すことができる。よって、被写体および背景の輝度変化量を輝度の比率（輝度比）に基づいて求めるとすれば、両画像における被写体の輝度比は（Ｓs0＋Ｓe）／Ｓeとなり、背景の輝度比は（Ｓsb＋Ｓe）／Ｓeとなる。

以上のことから、ストロボ発光画像とストロボ非発光画像における被写体の輝度比と背景の輝度比との乖離量は数式（３）で表される。

つまり、この乖離量を大きくすれば、被写体分離を高精度に行うことができる。

しかし、「明るいシーン」の撮影では、環境光による撮像素子１４の露光量Ｓeが大きくなり、上記数式（３）の乖離量が小さくなってしまうため、結果として被写体分離の精度が低下してしまう。

そこで、第１実施形態の予備撮影では、被写体分離の精度を高めるために、環境光による撮像素子１４の露光量Ｓeを小さくするように露出制御を行う。

制御部２０は、予備撮影の露出条件を図５に示すように決定する。具体的には、メカニカルシャッター１３の開閉動作は自動露出モードのそれと同じとし、撮像素子１４の露光および発光部２４のストロボ発光の各タイミングを以下のように決定する。

制御部２０は、撮像素子１４の露光のタイミングとして、露光開始を時間ｔs1、露光終了を時間ｔs2に決定する（図５の≪ＣＣＤ露光≫の部分を参照）。また、発光部２４のストロボ発光のタイミングとして、発光開始を時間ｔs1、発光終了を時間ｔs2に決定する（図５の≪ストロボ発光≫の部分を参照）。即ち、撮像素子１４の露光の開始および終了と発光部２４のストロボ発光の開始および終了とを一致させるようにそれらのタイミングを決定する。

このようなタイミングで露出制御を行うことにより、図４の自動露出モードの露出制御と比較して、ストロボ光による撮像素子１４の露光量Ｓsを維持した状態で、環境光による撮像素子１４の露光量Ｓeを最小値（Ｓe1）にすることができる。この時、ストロボ発光画像とストロボ非発光画像における被写体の輝度比と背景の輝度比との乖離量は、上記式（３）から（Ｓs0−Ｓsb）／Ｓe1となる。ここで、環境光による撮像素子１４の露光量はＳe1であり、自動露出モードの露出制御での同露光量Ｓeと比べるとＳe＞Ｓe1であるため、乖離量の関係は、｛（Ｓs0−Ｓsb）／Ｓe1｝＞｛（Ｓs0−Ｓsb）／Ｓe｝となる。したがって、第１実施形態の電子カメラの露出制御によれば、「明るいシーン」の撮影においても自動露出モードの露出制御よりも乖離量を大きくすることができるので、被写体分離の精度が高められる。

制御部２０は、上述したように予備撮影の露出条件を決定した後にＳ１０２へ移行する。

Ｓ１０２：制御部２０は、Ｓ１０１で決定した露出条件の下で第１の予備撮影を行う。但し、この第１の予備撮影においては、制御部２０は、発光部２４を駆動させ強制的にストロボ光を発光させて撮影を行う。この第１の予備撮影で撮影された第１の予備撮影画像の画像データは、バッファメモリ１７に記録される。

本実施例では、この第１の予備撮影画像として、スルー画像を取得する。ここでスルー画像とは、撮像素子の特定の使い方によって得られる画像である。スルー画像は、本撮影時に取得される画像に比べて解像度が低いが、撮像素子からの読み出しが短時間で行えるので、撮影するシーンの情報を略リアルタイムに取得するのに適している。

Ｓ１０３：制御部２０は、Ｓ１０１で決定した露出条件の下で第２の予備撮影を行う。但し、この第２の予備撮影においては、制御部２０は、ストロボ光の発光を禁止して撮影を行う。この第２の予備撮影で撮影された第２の予備撮影画像の画像データは、バッファメモリ１７の第１の予備撮影画像とは別の領域に記録される。

本実施例では、この第２の予備撮影画像についても、Ｓ１０２と同様にスルー画像を取得する。

Ｓ１０４：制御部２０は、本撮影の露出条件を適正露出となる条件に決定する。この適正露出となる条件は、自動露出モードで決定されるのと同じ条件である。なお、本撮影とは、観賞用の画像（本撮影画像）を撮影する工程である。また、適正露出とは、撮影する画面内の最大輝度と最小輝度とが撮像素子１４のダイナミックレンジ内に収まり、黒つぶれや白飛びの無い画像が撮影される露出のことを意味する。

Ｓ１０５：制御部２０は、Ｓ１０４で決定した露出条件の下で本撮影を行う。この本撮影で撮影された本撮影画像の画像データは、バッファメモリ１７の第１および第２の予備撮影画像とは別の領域に記録される。

Ｓ１０６：制御部２０は、バッファメモリ１７に記録されている第１の予備撮影画像（ストロボ発光画像）と第２の予備撮影画像（ストロボ非発光画像）の輝度比較を行い、画像間の輝度の変化量が所定の閾値を超える領域を被写体の領域として抽出し、被写体と背景とを分離するための被写体分離情報を作成する。なお、輝度比較は、輝度の差分または輝度の比率に基づいて行うことができるが、ここでは輝度の比率に基づいて行う。輝度の比率に基づいて被写体分離を行うと、輝度比較演算の過程で被写体の反射率が相殺されるため、被写体の反射率に依存しない高精度の分離が可能になる（輝度の比率に基づく輝度比較により被写体を抽出する技術については、特開２００５−１３０２６８号公報で提案がされている）。

Ｓ１０７：制御部２０は、Ｓ１０６で作成した被写体分離情報に基づき、バッファメモリ１７の本撮影画像から被写体と背景を分離する。ここで、Ｓ１０６で得られた被写体分離情報は、スルー画像同士の輝度比較によって得られたものであるため、本撮影画像と比較すると解像度が低く、直接本撮影画像の被写体分離には適用できない。そこで、解像度変換処理により被写体分離情報を本撮影画像の解像度に変換し、被写体分離情報と本撮影画像の解像度を揃えた後に、本撮影画像の被写体と背景を分離する処理を行う。

Ｓ１０８：制御部２０は、データ処理部１８を駆動させて、Ｓ１０７で分離した被写体および背景の各領域に異なる画像処理を施す。ここでは、例えば、背景のみに対してボカシ処理を施す。ボカシ処理は、例えば点拡がり関数のフィルタ演算（畳み込み演算）で実行されるが、これに限定されるものではなく、平均化フィルタやガウシアンフィルタ等、種々のデジタルフィルタを用いても行える。

Ｓ１０９：制御部２０は、モニタ２２を駆動させて、Ｓ１０８での画像処理後の画像をＬＣＤモニタ等に表示する。ユーザーは、その表示によって画像の出来ばえを確認することができる。

Ｓ１１０：制御部２０は、圧縮／復号部１９を駆動させ、画像処理後の画像に対して圧縮処理を施すと共に、圧縮された画像を記録媒体２３に記録する。

（第１実施形態の作用効果）
以上、第１実施形態の電子カメラでは、撮像素子１４の露光と発光部２４のストロボ発光との開始および終了のタイミングを一致させるように露出条件が決定され、その露出条件の下で予備撮影が行われる。このように露出制御を行うことで、ストロボ光による撮像素子１４の露光量を維持したまま、環境光による撮像素子１４の露光量を最小とすることができる。したがって、第１実施形態の電子カメラでは、「明るいシーン」の撮影においても、第１の予備撮影画像と第２の予備撮影画像との間の、被写体の輝度比と背景の輝度比との乖離量を大きくすることができ、被写体分離の精度が高められる。

（第２実施形態の説明）
次に、第２実施形態の電子カメラについて説明する。なお、以下の説明では、第１実施形態と共通する電子カメラの構成要素については同一符号を付して重複説明を省略する。また、第１実施形態と共通する電子カメラの被写体分離の動作についても重複説明を省略する。

第２実施形態は第１実施形態の変形例である。第２実施形態の電子カメラでは、第１実施形態のＳ１０１の処理を変更して以下のように予備撮影の露出条件を決定する。

Ｓ１０１：制御部２０は、ユーザーによるレリーズ釦の全押しを操作部２５から受信した操作信号によって検知すると、予備撮影の露出条件を図６に示すように決定する。具体的には、メカニカルシャッター１３の開閉動作は自動露出モードのそれと同じとし、撮像素子１４の露光および発光部２４のストロボ発光の各タイミングを以下のように決定する。

制御部２０は、撮像素子１４の露光開始と発光部２４のストロボ発光開始とのタイミング差を自動露出モードの露出制御（図４）でのタイミング差（ｔs1−ｔc1）よりも小さくするように、撮像素子１４の露光開始を時間ｔc1'、発光部２４のストロボ発光開始を時間ｔs1のタイミングに決定する。これによりタイミング差はｔs1−ｔc1'となる。また、制御部２０は、撮像素子１４の露光終了と発光部２４のストロボ発光終了とのタイミング差についても自動露出モードの露出制御でのタイミング差（ｔc2−ｔs2）よりも小さくするように、撮像素子１４の露光終了を時間ｔc2'、発光部２４のストロボ発光終了を時間ｔs2のタイミングに決定する（図６の≪ＣＣＤ露光≫および≪ストロボ発光≫の部分を参照）。これによりタイミング差はｔc2'−ｔs2となる。

このようなタイミングで露出制御を行うことにより、自動露出モードの露出制御と比較して、ストロボ光による撮像素子１４の露光量Ｓsを維持した状態で、環境光による撮像素子１４の露光量をＳeからＳe2に減少させることができる。この時、第１の予備撮影画像（ストロボ発光画像）と第２の予備撮影画像（ストロボ非発光画像）における被写体の輝度比と背景の輝度比との乖離量は、上記式（３）から（Ｓs0−Ｓsb）／Ｓe2となる。ここで、環境光による撮像素子１４の露光量はＳe2であり、自動露出モードの露出制御での同露光量Ｓeと比べるとＳe＞Ｓe2であるため、乖離量の関係は、｛（Ｓs0−Ｓsb）／Ｓe2｝＞｛（Ｓs0−Ｓsb）／Ｓe｝となる。したがって、第２実施形態の電子カメラの露出制御によれば、「明るいシーン」の撮影においても自動露出モードの露出制御よりも乖離量を大きくすることができるので、被写体分離の精度が高められる。

この第２実施形態の電子カメラの露出制御は、理想的な露出制御である第１実施形態の電子カメラの露出制御の実現が精度的に困難な場合に、より実用的な手段として用いることができる。これを用いる場合、上述した環境光による撮像素子１４の露光量Ｓe2ができるだけ小さくなるように、撮像素子１４の露光開始と発光部２４のストロボ発光開始とのタイミング差（ｔs1−ｔc1'）およびその露光終了とストロボ発光終了とのタイミング差（ｔc2'−ｔs2）をできるだけ小さくすることが望ましい。但し、環境光による撮像素子１４の露光量Ｓe2が、少なくとも自動露出モードの露出制御における環境光による撮像素子１４の露光量Ｓeよりも小さくなるように露出制御がされるならば、被写体分離の精度を改善する効果を得ることができる。

制御部２０は、このように予備撮影の露出条件を決定した後にＳ１０２へ移行する。

（第２実施形態の作用効果）
以上、第２実施形態の電子カメラでは、撮像素子１４の露光と発光部２４のストロボ発光について、それらの開始タイミングの差を小さくし、かつそれらの終了タイミングの差を小さくするように露出条件が決定され、その露出条件の下で予備撮影が行われる。このように露出制御を行うことで、ストロボ光による撮像素子１４の露光量を維持したまま、環境光による撮像素子１４の露光量を減少させることができる。したがって、第２実施形態の電子カメラでは、「明るいシーン」の撮影においても、第１の予備撮影画像と第２の予備撮影画像との間の、被写体の輝度比と背景の輝度比との乖離量を大きくすることができ、被写体分離の精度が高められる。

（第３実施形態の説明）
次に、第３実施形態の電子カメラについて説明する。なお、以下の説明では、第１実施形態と共通する電子カメラの構成要素については同一符号を付して重複説明を省略する。また、第１実施形態と共通する電子カメラの被写体分離の動作についても重複説明を省略する。

第３実施形態は第１実施形態の変形例である。第３実施形態の電子カメラでは、第１実施形態のＳ１０１の処理を変更して以下のように予備撮影の露出条件を決定する。

Ｓ１０１：制御部２０は、ユーザーによるレリーズ釦の全押しを操作部２５から受信した操作信号によって検知すると、予備撮影の露出条件を図７に示すように決定する。具体的には、メカニカルシャッター１３の開閉動作は自動露出モードのそれと同じとし、撮像素子１４の露光および発光部２４のストロボ発光の各タイミングを以下のように決定する。

制御部２０は、撮像素子１４の露光開始と発光部２４のストロボ発光開始とのタイミング差のみを自動露出モードの露出制御（図４）でのタイミング差（ｔs1−ｔc1）よりも小さくするように、撮像素子１４の露光開始を時間ｔc1'、発光部２４のストロボ発光開始を時間ｔs1のタイミングに決定する（図７の≪ＣＣＤ露光≫および≪ストロボ発光≫の部分を参照）。これによりタイミング差はｔs1−ｔc1'となる。

このようなタイミングで露出制御を行うことにより、自動露出モードの露出制御と比較して、ストロボ光による撮像素子１４の露光量Ｓsを維持した状態で、環境光による撮像素子１４の露光量をＳeからＳe3に減少させることができる。この時、第１の予備撮影画像（ストロボ発光画像）と第２の予備撮影画像（ストロボ非発光画像）における被写体の輝度比と背景の輝度比との乖離量は、上記式（３）から（Ｓs0−Ｓsb）／Ｓe3となる。ここで、環境光による撮像素子１４の露光量はＳe3であり、自動露出モードの露出制御での同露光量Ｓeと比べるとＳe＞Ｓe3であるため、乖離量の関係は、｛（Ｓs0−Ｓsb）／Ｓe3｝＞｛（Ｓs0−Ｓsb）／Ｓe｝となる。したがって、第３実施形態の電子カメラの露出制御によれば、「明るいシーン」の撮影においても自動露出モードの露出制御よりも乖離量を大きくすることができるので、被写体分離の精度が高められる。また、一般に、撮像素子１４の露光終了後にその撮像面に光が入射すると、スミア等の不具合が発生する可能性がある。しかし、第３実施形態の電子カメラでは、図７に示すように、撮像素子１４の露光の終了はメカニカルシャッター１３が完全に閉じるのと同時に時間ｔc2で行われるので、撮像素子１４の露光終了後にその撮像面に光が入射することはない。したがって、第３実施形態の電子カメラの露出制御によれば、スミア等の不具合の発生もなく、被写体分離の精度が高められる。

制御部２０は、このように予備撮影の露出条件を決定した後にＳ１０２へ移行する。
（第３実施形態の作用効果）
以上、第３実施形態の電子カメラでは、撮像素子１４の露光開始と発光部２４のストロボ発光開始とのタイミング差のみを小さくするように露出条件が決定され、その露出条件の下で予備撮影が行われる。このように露出制御を行うことで、ストロボ光による撮像素子１４の露光量を維持したまま、環境光による撮像素子１４の露光量を減少させることができる。したがって、第３実施形態の電子カメラでは、「明るいシーン」の撮影においても、第１の予備撮影画像と第２の予備撮影画像との間の、被写体の輝度比と背景の輝度比との乖離量を大きくすることができ、被写体分離の精度が高められる。

さらに、第３実施形態の電子カメラでは、撮像素子１４の露光の終了がメカニカルシャッター１３が完全に閉じるのと同時に行われる。このため、撮像素子１４の露光終了後にその撮像面に光が入射することはない。したがって、第３実施形態の電子カメラでは、スミア等の不具合の発生もなく、被写体分離の精度が高められる。

以上、第１〜第３実施形態の電子カメラの被写体分離の動作について説明した。

なお、上述した第１〜第３実施形態の電子カメラで決定された露出条件の下で予備撮影を行った場合、図４に示すような自動露出モードによる露出制御と比較して環境光による露光量が減少するため、露出アンダーの予備撮影画像が撮影される可能性がある。しかし、予備撮影画像は観賞用の本撮影画像とは異なり被写体分離のみに用いられる画像であるため、輝度比較による被写体分離さえ行うことができればよく、その露出状態は特に限定されない。ただし、画像が露出アンダーになると、一般にＳ／Ｎ比が低下するため、被写体分離において輝度比較が正確に行えなくなり、分離精度が低下する可能性がある。従って、例えば以下に示すような手法で、予備撮影画像のＳ／Ｎ比の改善を図ることが望ましい。
（手法１）自動露出モードの露出条件よりもシャッターが大きく開いたタイミングで予備撮影を行う手法
予備撮影画像のＳ／Ｎ比を改善する手法を、第１実施形態の電子カメラ（図５）を例にして説明する。

Ｓ１０１で予備撮影の露出条件を決定する際、図８に示すように、撮像素子１４の露光と発光部２４のストロボ発光との開始および終了を、メカニカルシャッター１３が開き始めてから全開の状態となるまでの時間（図３におけるシャッター開時間）の範囲内においてできるだけ遅いタイミングに決定する。具体的には、撮像素子１４の露光と発光部２４のストロボ発光の開始タイミングをｔs1’（第１実施形態の電子カメラではｔs1であった）に、またそれらの終了タイミングをｔs2’（第１実施形態の電子カメラではｔs2であった）に決定する。そして、これらの決定に合わせて、メカニカルシャッター１３が閉じ始めるタイミングを時間ｔc0’に決定する。

このようにタイミングを決定することで、メカニカルシャッター１３が閉じ始めるタイミングは時間ｔc0から時間ｔc0’と遅くなり、第１実施形態の電子カメラよりもメカニカルシャッター１３が大きく開いた状態で予備撮影が行われるようになる。そのため、第１実施形態の電子カメラと比較すると、撮像素子１４の露光時間は変わらない（（ｔs2−ｔs1）＝（ｔs2’−ｔs1’））が、環境光による撮像素子１４の露光量はＳe1からＳe4に増加するので予備撮影画像のＳ／Ｎ比が向上する。また、このときストロボ光による撮像素子１４の露光量もＳsからＳs’に増加するが、この増加の割合Ｓs’／Ｓsは環境光による撮像素子１４の露光量が増加した割合Ｓe4／Ｓe1と同じでありその比率は変わらないので、被写体分離の精度は第１実施形態の電子カメラのときと変わらない。従って、第１実施形態の電子カメラによる被写体分離精度の改善効果を維持したままで、予備撮影画像のＳ／Ｎ比を改善することができる。

なお、この手法は、第１実施形態の電子カメラだけでなく、第２および第３実施形態の電子カメラにも同様に適用することができ、この手法を適用すれば、それらの実施形態においても同様に予備撮影画像のＳ／Ｎ比の改善効果を得ることができる。なお、この手法は、第１の予備撮影（ストロボ発光撮影）に適用すればよく、第２の予備撮影（ストロボ非発光撮影）には、適用しても、しなくてもよい。
（手法２）予備撮影画像にノイズ低減処理を施す手法
以下（ａ）〜（ｃ）のようなノイズ低減処理を実施することにより、予備撮影画像のＳ／Ｎ比を改善することができる。
（ａ）複数枚の予備撮影画像の平均をとる処理
予備撮影を複数回連続して行うことにより複数枚の予備撮影画像を撮影すると共に、それら複数枚の予備撮影画像を平均化してノイズの低減された１枚の画像を作成する。なお、このような画像は、複数枚の予備撮影画像の輝度成分を平均化したり、ＲＧＢやＬａｂ等で表される各成分を個別に平均化したりすることにより作成される。

このような処理をＳ１０２での第１の予備撮影とＳ１０３での第２の予備撮影とにおいてそれぞれ実施し、その実施によって作成された２枚のノイズ低減された画像をＳ１０６での輝度比較に用いるようにする。
（ｂ）予備撮影画像の解像度を低くする処理
予備撮影で撮影された予備撮影画像の解像度を、例えばバイキュービックやバイリニアなどの隣接画素の情報を用いた解像度変換手法により低減して、ノイズの低減された画像を作成する。

このような処理をＳ１０２での第１の予備撮影とＳ１０３での第２の予備撮影とにおいてそれぞれ実施し、その実施によって作成された２枚のノイズ低減された画像をＳ１０６での輝度比較に用いるようにする。
（ｃ）第２の予備撮影時にストロボ光を少量発光させる処理
Ｓ１０３での第２の予備撮影でストロボ光を少量だけ発光させて予備撮影画像を撮影する。なお、その発光量は、Ｓ１０２での第１の予備撮影時の発光量よりも格段に低く、少なくとも数分の１以下の光量である。このようにして撮影されたノイズの少ない第２の予備撮影画像をＳ１０６での輝度比較に用いるようにする。

なお、上述した（ａ）〜（ｃ）の処理は、それぞれ単独で適用してもよく、また２つ以上を併用して適用してもよい。

また、予備撮影画像のノイズ低減処理には、上述した（ａ）〜（ｃ）の処理以外にも種々の一般的なノイズ低減方法が利用できる。

以上、予備撮影画像のＳ／Ｎ比を改善する２つの手法について説明した。

なお、予備撮影画像のＳ／Ｎ比を改善する手法は、この２つ手法に限定されない。例えば、手法１と同様な露光量の制御を「撮影感度を低くして、かつ絞りを開ける」といったような撮影感度と絞りとの組み合わせにより行ってもよい。

また、上記第１〜第３の実施形態において、第１の予備撮影画像（ストロボ発光画像）及び第２の予備撮影画像（ストロボ非発光画像）は、共にスルー画像を用いる例を示したが、これに限定されない。例えば、第１及び第２の予備撮影画像は、本撮影画像と同様な高解像度画像でも良い。スルー画像は本撮影画像に比べて解像度が低く、かつ撮像素子からの読み出しが短時間で行えるため、予備撮影画像としてスルー画像を用いた場合には、ノイズ低減処理や以降の被写体と背景を分離するための輝度比較処理において、処理負荷の低減に伴う高速化を図ることができる。一方、予備撮影画像として高解像度画像を用いると、スルー画像を用いた場合と比較して、特に上記のノイズ低減処理（ｂ）において有効である。一般に、画像の解像度を低減する場合、解像度低減後の画像の画素値は、解像度低減前の画像の対応する領域の複数の画素値に基づいて決定される。この時、解像度低減後の画像の画素に対応する解像度低減前の画像領域の画素数が多いほど、ノイズ低減効果を高めることができる。ここで、スルー画像と高解像度画像の双方についてそれぞれ解像度を低減して、同じ解像度の低解像度画像を作成する場合を考えると、高解像度画像はスルー画像よりも解像度が高い（すなわち単位画像サイズあたりの画素数が多い）ため、解像度低減後の画像の画素値を、スルー画像を用いた場合よりも多くの画素値に基づいて作成することができる。従って、高解像度画像を用いた場合の方が、優れたノイズ低減効果を得ることができる。

また、上記第１〜第３の実施形態において、第２の予備撮影（ストロボ非発光撮影）の露出条件は、第１の予備撮影（ストロボ発光撮影）の露出条件とストロボ発光条件（ストロボを発光するかしないか）のみが異なる場合の例を示したが、これに限定されない。例えば、第２の予備撮影は、第１の予備撮影と撮像素子１４の露光タイミングが異なる露出条件で撮影を行っても良い。この時、第２の予備撮影を、自動露出モードのような、第１の予備撮影の露出条件よりも環境光による撮像素子１４の露光量が大きくなるような露出条件で行うと、第２の予備撮影画像については露出アンダーに伴うＳ／Ｎ比の低下を回避することができる。

また、上記第１〜第３の実施形態において、第１の予備撮影画像と第２の予備撮影画像の輝度比較に基づき被写体と背景の分離情報（被写体分離情報）を作成する例を示したが、これに限定されない。例えば、ストロボ発光画像である第１の予備撮影画像とストロボ非発光画像である本撮影画像との輝度比較に基づいて被写体分離情報を作成してもよい。この場合、Ｓ１０３の第２の予備撮影を省略することができるため、撮影工程を短縮することができる。ただし、上記第１〜第３の実施形態のように、予備撮影画像としてスルー画像を用いた場合は、第１の予備撮影画像（スルー画像）と本撮影画像は解像度が異なるため、解像度変換処理により両画像の解像度を揃えた後に、両画像の対応する部分の輝度比較を行う。例えば、第１の予備撮影画像の解像度に合わせて本撮影画像の画像サイズを縮小し、第１の予備撮影画像と縮小サイズの本撮影画像を用いて輝度比較を行い、被写体分離情報を作成する。

また、上記第１〜第３の実施形態において、被写体と背景を分離するための輝度比較を、輝度の比率に基づいて行う例を示したが、これに限定されない。例えば、輝度比較を輝度の差分に基づいて行ってもよい。但し、輝度比較を輝度の差分に基づいて行う時、輝度比較に用いる２枚の画像において、環境光による撮像素子１４の露光量が異なる場合（例えば、上述したような、第１の予備撮影と第２の予備撮影で撮像素子１４の露光タイミングが異なる露出条件で撮影を行った場合や、第１の予備撮影画像と本撮影画像で輝度比較を行う場合など）は、被写体と背景の分離が正確に行われなくなる可能性がある。そこで、そのような場合には、輝度比較に用いる２枚の画像において、背景の信号レベルが揃うようにゲイン調整を行った後に輝度比較を行う。

更に、上述したように予備撮影画像は本撮影画像のように観賞用には用いられないので、予備撮影時のストロボ光の照射量は、必ずしも適正光量に限定される必要はない。むしろ被写体分離の精度を高めるという観点からすれば、できるだけ大きい光量でストロボ光を照射することが好ましい。なぜならば、ストロボ光の照射量が大きいほど、被写体で反射したストロボ光による露光量Ｓs0と背景で反射したストロボ光による露光量Ｓsbとの差（Ｓs0−Ｓsb）が大きくなる。それ故、上記式（３）で表される第１の予備撮影画像（ストロボ発光画像）と第２の予備撮影画像（ストロボ非発光画像）における被写体の輝度比と背景の輝度比との乖離量が大きくなり、被写体分離の精度が高まるからである。但し、大きい光量でストロボ光を照射すると、特にカメラの近くに位置にしている被写体の画像信号に飽和（以下、この画像信号の飽和を「白飛び」と称する。）が発生する可能性がある。以下、画像に白飛びした領域が存在する場合の被写体分離の方法について、図９を用いて説明する。図９は、胸元に白色の部分がある服を着た人物の被写体を第１〜第３の実施形態の電子カメラの何れかで撮影した場合を示している。ストロボ発光画像である第１の予備撮影画像においては、服の白色部分は反射率が高いために白飛びしている。この白飛びした領域は画像信号が飽和レベルとなっているため、同領域には飽和レベル以上のストロボ光の効果が記録されていない。従って、第１の予備撮影画像と第２の予備撮影画像との輝度比較において、服の白色部分の輝度変化量は、白飛びのために実際の輝度変化量よりも小さくなってしまう。その結果、服の白色部分が被写体としては認識されず、被写体分離の精度が低下する。そこで、ストロボ発光画像である第１の予備撮影画像中に白飛びした領域が存在する場合には、その領域を優先的に被写体として判断するようにすればよい。このように判断すれば、白飛びした領域である服の白色部分が被写体として正しく認識されるようになり、被写体分離精度の低下を防止することができる。

（その他）
なお、Ｓ１０２の第１の予備撮影とＳ１０３の第２の予備撮影の撮影順序は、どちらが先であっても良い。

また、Ｓ１０１〜Ｓ１０３の予備撮影とＳ１０４〜Ｓ１０５の本撮影の撮影順序は、どちらが先であっても良い。

また、Ｓ１０６における第１の予備撮影画像と第２の予備撮影画像の輝度比較は、画素単位で行ってもよく、また複数画素から成る領域の単位で行ってもよい。

また、Ｓ１０６で作成される被写体と背景の分離情報（被写体分離情報）を、Ｓ１０５で撮影される本撮影画像とともに記録媒体２３に記録するようにして、Ｓ１０７以降の処理は実行せずに終了してもよい。そして、そうした場合には、電子カメラの動作モードが画像再生モードなどの非撮影モードの時に、記録媒体２３の被写体分離情報と本撮影画像とを用いてＳ１０７以降の処理を実行するようにしてもよい。

また、Ｓ１０６以降の処理の一部または全部については、電子カメラに実行させる代わりにコンピュータ等の外部処理装置に実行させてもよい。

また、Ｓ１０７で、被写体と背景を分離した後に、その分離状況をＬＣＤモニタ等に表示してユーザーに確認させる処理を実行するようにしてもよい。そして、分離状況の確認の際にユーザーが分離処理のやり直しを指示した場合には、被写体の領域を抽出するための閾値を別の値に変更して再度Ｓ１０６〜Ｓ１０７の被写体分離の処理を実行するようにしてもよい。さらに、これら一連の処理は、ユーザーが望む結果が得られるまで繰り返して実行してもよい。

また、Ｓ１０８では、画像処理の一例として背景のみにボカシ処理を施す例を示したが、画像処理はこれに限定されず、ボカシ処理以外に、明るさ補正処理、コントラスト強調処理、鮮鋭化処理など、様々な処理を適用することができる。また、画像処理は、被写体のみに施してもよく、背景のみに施してもよく、更には被写体と背景の双方に施してもよい。なお、被写体と背景の双方に画像処理を施す場合は、被写体と背景にそれぞれ異なる画像処理を施すことが望ましい。例えば、被写体には鮮鋭化処理を、背景にはボカシ処理をそれぞれ施したり、被写体には背景よりも弱いボカシ処理を施したり、被写体には背景よりも強いコントラスト強調処理や鮮鋭化処理を施すことが望ましい。

また、Ｓ１０９では、画像処理後の画像をＬＣＤモニタ等に表示させた後に、ユーザーから画像処理のやり直しの指示を受け付けるようにしてもよい。そして、ユーザーがやり直しを指示した場合には、画像処理の条件（例えば、ボカシ処理の場合には、ボカシ処理の強弱など）を変更してＳ１０８〜Ｓ１０９の処理を再度実行するようにしてもよい。さらに、これら一連の処理は、ユーザーが望む結果が得られるまで繰り返して実行してもよい。

また、上述した説明では、本撮影画像から被写体と背景を分離する例を示したが、被写体と前景を分離したり、被写体，背景，及び前景を同時に分離してもよい。

本発明の撮像装置を適用した電子カメラのブロック図である。 第１実施形態の電子カメラの被写体分離の動作を示す流れ図である。 自動露出モードによる露出制御（シャッター開閉動作の制御）を説明する図である。 自動露出モードによる露出制御（明るいシーンでのシャッター開閉動作、撮像素子の露光、ストロボ発光の制御）を説明する図である。 第１実施形態の電子カメラの第１の予備撮影の露出制御を説明する図である。 第２実施形態の電子カメラの第１の予備撮影露出制御を説明する図である。 第３実施形態の電子カメラの第１の予備撮影露出制御を説明する図である。 第１の予備撮影画像のＳ／Ｎ比を改善する手法を説明する図である。 画像に白飛び領域が存在する場合の被写体分離方法を説明する図である。

符号の説明

１１…撮像レンズ，１２…レンズ駆動部，１３…メカニカルシャッター，１４…撮像素子，１５…信号処理部，１６…タイミングジェネレータ（ＴＧ），１７…バッファメモリ，１８…データ処理部，１９…圧縮／復号部，２０…制御部，２１…測光部，２２…モニタ，２３…記録媒体，２４…発光部，２５…操作部，２６…バス

Claims (11)

1. 同一シーンに対してストロボ光強度の高い撮影とストロボ光強度の低い撮影とを行うと共に、前記撮影により取得された画像の輝度比較に基づき本撮影画像中の被写体領域と非被写体領域との境界を検出する撮像装置において、
   前記ストロボ光強度の高い撮影を行うときには、撮像素子の露光期間のうち前記ストロボ光の非発光期間と重複する期間が自動露出モード撮影における前記重複する期間よりも短くなるように前記撮像素子の露光と前記ストロボ光の発光とのタイミングを制御する制御手段を備える
   ことを特徴とする撮像装置。
2. 請求項１に記載の撮像装置において、
   前記制御手段は、前記露光の開始と前記発光の開始との時間差を自動露出モード撮影における前記時間差よりも小さくする
   ことを特徴とする撮像装置。
3. 請求項１または請求項２に記載の撮像装置において、
   前記制御手段は、前記露光の終了と前記発光の終了との時間差を自動露出モード撮影における前記時間差よりも小さくする
   ことを特徴とする撮像装置。
4. 請求項１〜請求項３の何れか一項に記載の撮像装置において、
   前記制御手段は、前記露光の開始から終了までの時間と前記発光の開始から終了までの時間とを一致させる
   ことを特徴とする撮像装置。
5. 請求項１〜請求項４の何れか一項に記載の撮像装置において、
   前記制御手段は、前記撮像素子の露光期間を制御するシャッターの開度が最大となるタイミングと前記発光のタイミングとを一致させる
   ことを特徴とする撮像装置。
6. 請求項１〜請求項５の何れか一項に記載の撮像装置において、
   前記輝度比較に用いられる本撮影画像以外の画像に対してノイズ低減処理を施すノイズ低減手段を備える
   ことを特徴とする撮像装置。
7. 請求項１〜請求項６の何れか一項に記載の撮像装置において、
   前記輝度比較に用いられる画像間の非被写体領域の信号レベルが揃うように前記輝度比較に用いられる画像を正規化する正規化手段を更に備える
   ことを特徴とする撮像装置。
8. 請求項１〜請求項７の何れか一項に記載の撮像装置において、
   前記ストロボ光強度の高い撮影では、前記ストロボ光を自動露出モード撮影の発光量よりも大きい発光量で発光させる
   ことを特徴とする撮像装置。
9. 請求項８に記載の撮像装置において、
   前記ストロボ光強度の高い撮影で取得された画像中の白飛び領域を前記輝度比較にかかわらず優先的に前記被写体領域とみなす判別手段を更に備える
   ことを特徴とする撮像装置。
10. 請求項１〜請求項９の何れか一項に記載の撮像装置において、
    前記本撮影画像中の被写体領域と非被写体領域とに対して異なる画像処理を施す画像処理手段を更に備える
    ことを特徴とする撮像装置。
11. 請求項１０に記載の撮像装置において、
    前記画像処理手段は、前記非被写体領域に対してボカシ処理を施す
    ことを特徴とする撮像装置。