JP2010074479A - 画像信号処理装置、画像信号処理方法、プログラム、撮像装置および撮像システム - Google Patents

Abstract

【課題】撮像装置において撮影者が意図した画像を容易に撮影できるようにする。
【解決手段】閃光発光装置２００Ａ，２００Ｂの発光量をゼロおよび最大発光量の１／１６の量として連続撮影して画像信号Ａ，Ｂ，Ｃを得る（ST13〜ST15)。環境光による画像信号Ａおよび閃光発光装置２００Ａ，２００Ｂの発光による画像信号ＢＡ，ＣＡの重み付け加算信号Ｍを求め、この重み付け加算信号Ｍによる画像をモニタに表示する（ST16）。この場合、撮影者に表示画像を参照させて重み付け係数を設定させる。シャッター釦が押されるとき、撮影者が設定した重み付け係数に基づいて絞り、露光時間、発光量等の撮影条件を決定かつ設定して、本撮影を行う（ST18,ST19）。撮影者は重み付け係数の設定時に画像を確認しながら設定を行うので、撮像装置で意図した画像を容易に撮影できる。
【選択図】図６

Description

この発明は、画像信号処理装置、画像信号処理方法、プログラム、撮像装置および撮像システムに関する。詳しくは、この発明は、閃光発光装置の発光量をゼロおよび所定量として連続撮影して得られた画像信号から、環境光による画像信号および閃光発光装置の発光による画像信号の重み付け加算信号を求め、この重み付け加算信号による画像を表示部に表示して撮影者に重み付け係数を設定させ、撮影者が設定した重み付け係数に基づいて絞り、露光時間、発光量等の撮影条件を決定することにより、撮像装置において撮影者が意図した画像を容易に撮影できるようにした画像信号処理装置等に関する。

近年、被写体像を撮影光学系により固体撮像素子（例えば、ＣＣＤ２次元イメージセンサ）上に結像して電気信号に変換し、これにより得られた静止画像の画像データを半導体メモリ、光記録ディスク等の記録媒体に記録するデジタルカメラが広く普及しつつある。

デジタルカメラでは、本撮影の前準備として予備撮影を実施し、この予備撮影で得られた被写体像の画像データをもとに撮影条件を自動的に調整する機能をもつものが多い。したがって、撮影者は、それ程の熟練を必要とせず、その時の状況に応じた適切な撮影条件下で撮影を行うことが可能となる。

さらに具体的に、閃光発光モード時における撮影について以下で説明する。予備撮影においては、閃光発光装置から、例えば、最大発光量の１／１６の発光を行いながら、撮影が行われる。予備撮影で得られた画像を、カメラ内のＤＳＰ（デジタルシグナルプロセッサ）にて自動で解析を行い、本撮影における閃光発光装置の発光量を決める。そして、本撮影において、その指定された発光量で閃光発光装置を発光させながら撮影が行われる。この場合、ＤＳＰが自動で決めてしまうため、撮影者の意図しない発光量で本撮影が行われることもあり、撮影者の不満でもあった。

この不満を解決するための工夫として、従来、モデリング発光というものがある。モデリング発光とは、一定の微小発光量で連続発光させることである。撮影者は、本撮影前に、閃光発光装置をモデリング発光させて、被写体にどのように光が当たりどのような影ができるかを視認する。これにより、撮影者は本撮影の結果画像が、予想できるようになる。

しかしながら、モデリング発光では、連続発光させるため、電力を使いすぎるという問題があった。また、連続発光では、フラッシュが点滅しているのと同じであり、明るくなったり暗くなったりの繰り返しであり、目が疲れてしまうので、そのような状況下では、被写体にどのように光が当たりどのような影ができるかを正確に視認することはできなかった。

なお、特許文献１、特許文献２、特許文献３では、予備撮影において、閃光発光装置からの発光を行った画像と、閃光発光装置からの発光を行わない画像との差などにより、閃光発光装置の光が届く範囲と、そうでない範囲の２つに分別し、それを撮影者に提示することで、本撮影の結果画像を予想できるようにする工夫が述べられている。

しかしながら、閃光発光装置の光が届く範囲と、そうでない範囲という２つに区別してしまうため、閃光発光装置の光が、ある程度届く、あるいは、少し届くなどという詳細な情報を撮影者に提供できなかった。
特開２００７−２６７４１２号公報 特開２００２−４４５１６号公報 特開平１０−３３３２３５号公報

上述したように、モデリング発光および特許文献１〜３に記載の発明において、閃光発光モード時における撮影において、予め、どのような画像が得られるかを正確かつ詳細に撮影者に提示することができなかった。また、モデリング発光および特許文献１〜３に記載の発明において、閃光発光装置の発光量を変えることでどのような画像が撮影できるかを撮影者に予め提示することはできなかった。

この発明の目的は、撮像装置において撮影者が意図した画像を容易に撮影可能とすることにある。

この発明の概念は、
撮像装置の絞り機構の絞りが予め決められた絞りであり、上記撮像装置の固体撮像素子の露光時間が予め決められた露光時間であり、閃光発光装置の発光量がゼロである撮影条件を第１の撮影条件とし、上記撮像装置の絞り機構の絞りが予め決められた絞りであり、上記撮像装置の固体撮像素子の露光時間が予め決められた露光時間であり、上記閃光発光装置の発光量が予め決められた発光量である撮影条件を第２の撮影条件とし、上記撮像装置において上記第１の撮影条件および上記第２の撮影条件で連続して撮影して得られた第１の画像信号および第２の画像信号を取り込む画像信号取り込み部と、
上記画像信号取り込み部で取り込まれた上記第１の画像信号および上記第２の画像信号を用い、環境光による画像信号および上記閃光発光装置の発光による画像信号の重み付け加算信号を得る画像信号演算部と、
上記画像信号演算部で得られた上記重み付け加算信号による画像の表示部への表示を制御する表示制御部と、
上記画像信号演算部で重み付け加算される上記環境光による画像信号および上記閃光発光装置の発光による画像信号のそれぞれの重み付け係数を撮影者が設定するための入力デバイスと、
上記入力デバイスで設定された重み付け係数に基づいて、上記絞り機構の絞り、上記固体撮像素子の露光時間および上記閃光発光装置の発光量を決定する撮影条件決定部と
を備える画像信号処理装置にある。

この発明の画像信号処理装置は、撮像装置内に構成されるか、あるいは撮像装置に接続されたＰＣ（Personal Computer）等の外部機器により構成される。

この発明において、画像信号取り込み部により、第１の画像信号および第２の画像信号が取り込まれる。第１の画像信号および第２の画像信号は、撮像装置において第１の撮影条件および第２の撮影条件で連続して撮影して得られたものである。ここで、第１の撮影条件では、撮像装置の絞り機構の絞りは予め決められた絞りとされ、撮像装置の固体撮像素子の露光時間は予め決められた露光時間とされ、閃光発光装置の発光量はゼロとされる。第２の撮影条件では、撮像装置の絞り機構の絞りは予め決められた絞りとされ、撮像装置の固体撮像素子の露光時間は予め決められた露光時間とされ、閃光発光装置の発光量は予め決められた発光量とされる。

画像信号演算部により、第１の画像信号および上記第２の画像信号が用いられ、環境光による画像信号および閃光発光装置の発光による画像信号の重み付け加算信号が得られる。

第２の撮影条件における露光時間と第１の撮影条件における露光時間が等しくされている場合、第２の画像信号は、環境光による画像信号および閃光発光装置の発光による画像信号が加算されたものとなっている。この場合、画像信号演算部では、環境光による画像信号として第１の画像信号が使用され、閃光発光装置による画像信号として第２の画像信号から第１の画像信号を減算した減算信号が使用される。

また、第２の撮影条件における露光時間が第１の撮影条件における露光時間に比べて充分に短くされている場合、第２の画像信号における環境光による画像信号の成分は無視できるものとなる。この場合、画像信号演算部では、環境光による画像信号として第１の画像信号が使用され、閃光発光装置による画像信号として第２の画像信号が使用される。

表示制御部により、重み付け加算信号による画像の表示部への表示が制御される。ここで、画像信号処理装置が撮像装置内に構成される場合、表示部は、撮像装置が備える表示パネル、あるいは撮像装置に接続される外部モニタ等である。また、画像信号処理装置がＰＣ（Personal Computer）等の外部機器により構成される場合、表示部は、ＰＣに付属されるモニタ等である。

入力デバイス（ユーザ操作部）により、画像信号演算部で重み付け加算される環境光による画像信号および閃光発光装置の発光による画像信号のそれぞれの重み付け係数の設定が可能とされる。この場合、画像信号演算部では設定された重み付け係数が用いられて、環境光による画像信号および閃光発光装置の発光による画像信号の重み付け加算が行われて、重み付け加算信号が得られる。そして、表示部には、その重み付け加算信号による画像が表示される。そのため、撮影者は、表示部に表示される画像を見ながら、意図した画像となるように、重み付け係数の設定が可能となる。

撮影条件決定部により、入力デバイスで設定された重み付け係数に基づいて、絞り機構の絞り、固体撮像素子の露光時間および閃光発光装置の発光量が決定される。例えば、環境光による画像信号の係数が「１」とされる場合には、絞り機構の絞り、固体撮像素子の露光時間は、第１の撮影条件における絞り、露光時間に決定される。また、例えば、環境光による画像信号の係数が「２」とされる場合には、第１の撮影条件における絞り、露光時間を基準として、絞りは同じで露光時間が２倍に、あるいは露光時間は同じで絞りは２倍明るい絞りに決定される。

例えば、閃光発光装置の発光による画像の係数が「１」とされる場合には、閃光発光装置の発光量は、第２の撮影条件における発光量に決定される。また、例えば、閃光発光装置の発光による画像の係数が「１」とされる場合には、閃光発光装置の発光量は、第２の撮影条件における発光量を基準として、２倍の発光量に決定される。

このように決定される絞り、露光時間、発光量が、撮像装置の絞り機能の絞り、撮像装置の固体撮像素子の露光時間、閃光発光装置の発光量として設定されることで、撮影者は、意図した画像を容易に撮影可能となる。

なお、上述したように決定された絞り、露光時間、発光量が例えば表示部に表示され、撮影者がその表示を見て撮像装置および閃光発光装置に手動で設定してもよく、あるいは、画像信号処理装置がさらにその設定を自動で行う撮影条件設定部を備えるようにしてもよい。

この発明は、例えば、表示制御部は、画像信号演算部で得られた重み付け加算信号による画像の他、環境光による画像信号で得られる画像および閃光発光装置の発光による画像信号で得られる画像の表示部への表示を制御する、ようにされてもよい。これにより、撮影者に、環境光による画像信号で得られる画像、閃光発光装置の発光による画像信号で得られる画像等を視認させることができる。

この発明によれば、閃光発光装置の発光量をゼロおよび所定量として連続撮影して得られた画像信号から、環境光による画像信号および閃光発光装置の発光による画像信号の重み付け加算信号を求め、この重み付け加算信号による画像を表示部に表示して撮影者に重み付け係数を設定させ、撮影者が設定した重み付け係数に基づいて絞り、露光時間、発光量等の撮影条件を決定するものであり、撮像装置において撮影者が意図した画像を容易に撮影できる。

以下、発明を実施するための最良の形態（以下、「実施の形態」とする）について説明する。なお、説明は以下の順序で行う。
１．実施の形態
２．変形例

＜１．実施の形態＞
［撮像システムの構成例］
図１は、実施の形態としての撮像システム１０の構成例を示している。

この撮像システム１０は、撮像装置としてのデジタルカメラ１００と、２個の閃光発光装置２００Ａ，２００Ｂとからなっている。閃光発光装置２００Ａ，２００Ｂは閃光を発光する。閃光発光装置２００Ａ，２００Ｂは、伝送線２１０Ａ，２１０Ｂにより、デジタルカメラ１００に接続されている。閃光発光装置２００Ａ，２００Ｂは、デジタルカメラ１００から伝送線２１０Ａ，２１０Ｂ介して送られてくる制御信号により制御される。

なお、デジタルカメラ１００から閃光発光装置２００Ａ，２００Ｂに制御信号を伝送する方式としては、伝送線２１０Ａ，２１０Ｂを用いる有線方式に限定されるものではなく、無線により制御信号を伝送する無線方式であってもよい。この無線方式の場合には、伝送線２１０Ａ，２１０Ｂは不要となる。この無線方式は、例えば、特開平０４−３４３３４３号公報などに記載されており、従来公知である。

デジタルカメラ１００の筐体の上面には、シャッター釦ＳＢが配設されている。また、デジタルカメラ１００の筐体の前面には、撮影レンズ１１０の他に、後述する環境光による画像信号および閃光発光装置２００Ａ，２００Ｂの発光による画像信号の重み付け係数を撮影者が設定するためのダイヤルＤＬａ，ＤＬｂが配設されている。ダイヤルＤＬａは重み付け係数を設定する画像信号を選択するためのダイヤルであり、ダイヤルＤＬｂは重み付け係数の値を設定するためのダイヤルである。デジタルカメラ１００の詳細構成については後述する。

［撮影状況の例］
図２は、図１の撮像システム１０を使用した場合の撮影状況の例を示している。図２は、撮影状況を上から見下ろした図である。デジタルカメラ１００、閃光発光装置２００Ａおよび２００Ｂは、図２に示すような位置関係にある。なお、伝送線２１０Ａおよび２１０Ｂの図示は省略している。

図２において、撮影対象人物３０１は、撮像システム１０に近い位置におり、閃光発光装置２００Ａ，２００Ｂからの光が届く範囲にいる。撮影対象人物３０１の後ろにドア３０２が位置しており、このドア３０２は背景となる物体である。ドア３０２は、撮像システム１０から遠い位置にあり、閃光発光装置２００Ａ，２００Ｂからの光が届かない範囲にある。

閃光発光装置２００Ａは、デジタルカメラ１００から見て、左側から撮影対象人物３０１を照射することになる。閃光発光装置３００Ｂは、デジタルカメラ１００から見て、右側から撮影対象人物３０１を照射することになる。なお、図２において、閃光発光装置２００Ａから発せられる光の方向を破線で示し、閃光発光装置２００Ｂから発せられる光の方向を一点鎖線で示している。

図３は、図２の撮影状況で撮影したときに得られる撮影画像４００を示している。実際の撮影画像４００は、後述するように明暗のある画像である。ここでは、画像内に映っている被写体の構図（位置関係）の説明を行うため、輪郭部分のみを描いている。図３に示すように、撮影画像４００には、撮影対象人物３０１の投影像４０１およびドア３０２の投影像４０２が存在する。
撮影対象人物３０１の投影像４０１の左側４０１Ｌは、閃光発光装置２００Ａの光が最も良く届く部分の投影像である。この投影像４０１の右側４０１Ｒは、閃光発光装置２００Ａに対して逆側の部分の投影像のため、閃光発光装置２００Ａの光があまり届かない部分の投影像である。

同様に、撮影対象人物３０１の投影像４０１の右側４０１Ｒは、閃光発光装置２００Ｂの光が最も良く届く部分の投影像である。この投影像４０１の左側４０１Ｌは、閃光発光装置２００Ｂに対して逆側の部分の投影像のため、閃光発光装置２００Ｂの光があまり届かない部分の投影像である。

［デジタルカメラの構成例］
デジタルカメラ１００の構成例を説明する。図４は、デジタルカメラ１００の構成例を示している。デジタルカメラ１００は、ＣＰＵ（Central Processing Unit）１０１と、ＲＯＭ（Read OnlyMemory）１０２と、ＲＡＭ（Random Access Memory）１０３と、入力デバイス（ユーザ操作部）１０４とを有している。また、デジタルカメラ１００は、撮像レンズ１１１と、絞り機構としてのアイリス１１２と、撮像素子１１３と、アイリス制御部１１４と、ＣＤＳ(Correlated Double Sampling)回路１１５と、Ａ／Ｄ(Analog/Digital)変換部１１６と、デジタル信号処理部（ＤＳＰ：Digital Signal Processor）１１７を有している。また、デジタルカメラ１００は、タイミングジェネレータ１１８と、内部メモリ１１９と、リムーバブルメモリ１２０と、モニタ１２１と、発光制御部１２２を有している。

ＣＰＵ１０１は、デジタルカメラ１００の各部を制御する制御部を構成する。ＲＯＭ１０２は、ＣＰＵ１０１の制御プログラム等を記憶している。ＲＡＭ１０３は、ＣＰＵ１０１の制御処理に必要なデータの一時記憶等に用いられる。ＣＰＵ１０１は、ＲＯＭ１０２から読み出したプログラムやデータをＲＡＭ１０３上に展開してプログラムを起動し、デジタルカメラ１００の各部を制御する。

入力デバイス１０４は、ユーザインタフェースを構成し、バス１０５を介してＣＰＵ１０１に接続されている。この入力デバイス１０４は、デジタルカメラ１００の図示しない筐体面に配置されたキー、ボタン、ダイヤル等で構成される。上述したシャッター釦ＳＢ、ダイヤルＤＬａ，ＤＬｂも、この入力デバイス１０４に含まれている。ＣＰＵ１０１は、入力デバイス１０４からバス１０５を介して入力される情報の解析を行って、撮影者の操作に対応した制御を行う。

被写体からの光は、光学系、つまり、撮像レンズ１１１およびアイリス１１２を通過して、撮像素子１１３に入射する。この場合、被写体からの光は撮像レンズ１１１により集光され、アイリス１１２により集光された光の一部だけが撮像素子１１３に到達する。アイリス１１２の絞りは、アイリス制御部１１４により制御される。撮像素子１１３は、例えば、ＣＣＤ(Charge Coupled Device)イメージセンサ、ＣＭＯＳ(ComplementaryMetal Oxide Semiconductor）イメージセンサ等で構成される。撮像素子１１３は、撮像面に被写体の光学像が結像された状態で撮像処理を行って、撮像画像信号を出力する。

ＣＤＳ回路１１５は、撮像素子１１３から供給される撮像画像信号を、相関二重サンプリングによりノイズ成分を除去した後、Ａ／Ｄ変換部１１６に供給する。Ａ／Ｄ変換部１１６は、ＣＤＳ回路１１５から供給される撮像画像信号をアナログ信号からデジタル信号に変換した後、デジタル信号処理部１１７に供給する。

デジタル信号処理部１１７は、Ａ／Ｄ変換部１１６から供給される撮像画像信号に対して画像処理を行う。ここでいう画像処理は、デモザイク処理、ホワイトバランス処理、ガンマ補正処理などである。これら処理は、全ての汎用デジタルカメラで行われる処理なので、その詳細を省略する。このデジタル信号処理部１１７で処理された画像データは、汎用の画像フォーマットの画像データとなる。

デジタル信号処理部１１７は、処理された画像データを、一時的に保存するための内部メモリ１１９に転送し、また、最終保存用のリムーバブルメモリ１２０に転送する。リムーバブルメモリ１２０は、メモリカード等である。リムーバブルメモリ１２０は、デジタルカメラ１００から取り外すことができ、取り外し後、ＰＣ（Personal Computer）等に装着して、保存された画像を閲覧することができるようになっている。

また、デジタル信号処理部１１７は、内部メモリ１１９、あるいはリムーバブルメモリ１２０のデータを読み込み、モニタ１２１に表示する。モニタ１２０は、例えば、デジタルカメラ１００の筐体背面等に設けられるＬＣＤ（Liquid Crystal Display）等の表示パネルで構成される。

発光制御部１２２は、閃光発光装置２００Ａ，２００Ｂの発光を制御する。発光制御部１２２は、ＣＰＵ１０１の制御のもと、発光タイミングおよび発光量の指示を、伝送線２１０Ａ，２１０Ｂを介して、閃光発光装置２００Ａ，２００Ｂに伝える。

［撮影処理の流れ］
次に、図１に示す撮像システム１０を使用して実際に撮影を行う場合の処理の流れを説明する。なお、この処理に入る前に、撮影者は、入力デバイス１０４を操作して、閃光発光モードで撮影するか、さらに、閃光発光モードで撮影する場合にモニタリングを行うかを設定しておく。この入力デバイス１０４からの撮影者設定情報は、バス１０５を介して、ＣＰＵ１０１に伝えられている。

図５のフローチャートは、実際に撮影を行う場合におけるＣＰＵ１０１の制御処理を示している。

ＣＰＵ１０１は、ステップＳＴ１において、撮影者のパワーオン操作に対応して、制御処理を開始し、その後に、ステップＳＴ２の処理に移る。このステップＳＴ２において、ＣＰＵ１０１は、閃光発光モードでの撮影であるか否かを判断する。閃光発光モードでの撮影でないとき、ＣＰＵ１０１は、ステップＳＴ３において、閃光発光装置を使わない通常撮影に対応した制御処理を行う。

この制御処理は、従来から行われている閃光発光装置を使わない撮影時における制御処理と同様であって公知であるので、その詳細説明は省略する。この撮影時には、ＣＰＵ１０１は、閃光発光装置を使わない通常の撮影を行い、その撮影結果をデジタル信号処理部１１７で処理して、汎用の画像フォーマットに変換し、リムーバブルメモリ１２０に記録する。ＣＰＵ１０１は、ステップＳＴ３の制御処理の後、ステップＳＴ４において、処理を終了する。

また、ステップＳＴ２で閃光発光モードでの撮影であるとき、ＣＰＵ１０１は、ステップＳＴ５において、モニタリングを行うか否かを判断する。モニタリングを行わないとき、ＣＰＵ１０１は、ステップＳＴ６の処理に移る。このステップＳＴ６において、ＣＰＵ１０１は、閃光発光装置を使用した通常撮影に対応した制御処理を行う。この制御処理は、従来から行われている閃光発光装置を使った撮影時における制御処理と同様であって公知であるので、その詳細説明は省略する。この撮影時には、ＣＰＵ１０１は、閃光発光装置を使った通常の撮影を行い、その撮影結果をデジタル信号処理部１１７で処理して、汎用の画像フォーマットに変換し、リムーバブルメモリ１２０に記録する。ＣＰＵ１０１は、ステップＳＴ６の制御処理の後、ステップＳＴ４において、処理を終了する。

また、ステップＳＴ５でモニタリングを行うとき、ＣＰＵ１０１は、ステップＳＴ７において、モニタリングを用いた撮影に対応した制御処理（モニタリング制御処理）を行う。ＣＰＵ１０１は、ステップＳＴ７の制御処理の後、ステップＳＴ４において、処理を終了する。

［モニタリング制御処理］
モニタリング制御処理について説明する。図６のフローチャートは、図５のフローチャートのステップＳＴ７を展開したフローチャートである。

ＣＰＵ１０１は、ステップＳＴ１１において、処理を開始し、その後に、ステップＳＴ１２の処理に移る。このステップＳＴ１２において、ＣＰＵ１０１は、入力デバイス１０４を構成するシャッター釦ＳＢ（図１参照）が撮影者により押されるまで待機する。ＣＰＵ１０１は、シャッター釦ＳＢが押された場合、ステップＳＴ１３の処理に移る。

このステップＳＴ１３において、ＣＰＵ１０１は、予め決められた絞り（「Ｆ」と呼ぶことにする）および露光時間（「Ｓ」と呼ぶことにする）で撮影を行う。この際、ＣＰＵ１０１は、バス１０５を介して、発光制御部１２２に発光禁止の命令を送る。これにより、発光制御部１２２は閃光発光装置２００Ａ，２００Ｂに対して発光信号を送らないので、撮影時には閃光発光装置２００Ａ，２００Ｂからの発光は行われない。

この撮影により、環境光（太陽光など：図示省略）のみにより照射された光源下での撮影画像を得ることができる。この場合、撮像素子１１３から得られる撮像画像信号はＣＤＳ回路１１５およびＡ／Ｄ変換部１１６を介してデジタル信号処理部１１７に供給されて処理される。そして、処理後の画像信号（「Ａ」と呼ぶことにする）は、汎用の画像フォーマットに変換されて、内部メモリ１１９に取り込まれる。

ＣＰＵ１０１は、ステップＳＴ１３の処理の後、ステップＳＴ１４の処理に移る。このステップＳＴ１４において、ＣＰＵ１０１は、閃光発光装置２００Ａを１／１６発光させながら上述のステップＳＴ１３と同じ絞りＦと露光時間Ｓで撮影を行う。この際、ＣＰＵ１０１は、バス１０５を介して、発光制御部１２２に、「閃光発光装置２００Ａに対してプレ発光モードで発光」および「閃光発光装置２００Ｂに対して発光禁止」の命令を、送る。

これにより、発光制御部１２２は閃光発光装置２００Ａに対して「最大発光量の１／１６の量」で発光する信号を送り、かつ、閃光発光装置２００Ｂに対しては発光信号を送らないので、撮影時には閃光発光装置２００Ａのみ発光（光量は、最大発光量の１／１６の量）が行われる。この撮影により、環境光（太陽光など：図示省略）と閃光発光装置２００Ａの２つの光により照射された光源下での撮影画像を得ることができる。この場合、撮像素子１１３から得られる撮像画像信号はＣＤＳ回路１１５およびＡ／Ｄ変換部１１６を介してデジタル信号処理部１１７に供給されて処理される。そして、処理後の画像信号（「Ｂ」と呼ぶことにする）は、汎用の画像フォーマットに変換されて、内部メモリ１１９に取り込まれる。

ＣＰＵ１０１は、ステップＳＴ１４の処理の後、ステップＳＴ１５の処理に移る。このステップＳＴ１５において、ＣＰＵ１０１は、閃光発光装置２００Ｂを１／１６発光させながら上述のステップＳＴ１３と同じ絞りＦと露光時間Ｓで撮影を行う。この際、ＣＰＵ１０１は、バス１０５を介して、発光制御部１２２に、「閃光発光装置２００Ｂに対してプレ発光モードで発光」および「閃光発光装置２００Ａに対して発光禁止」の命令を、送る。

これにより、発光制御部１２２は閃光発光装置２００Ｂに対して「最大発光量の１／１６の量」で発光する信号を送り、かつ、閃光発光装置２００Ａに対しては発光信号を送らないので、撮影時には閃光発光装置２００Ｂのみ発光（光量は、最大発光量の１／１６の量）が行われる。この撮影により、環境光（太陽光など：図示省略）と閃光発光装置２００Ｂの２つの光により照射された光源下での撮影画像を得ることができる。この場合、撮像素子１１３から得られる撮像画像信号はＣＤＳ回路１１５およびＡ／Ｄ変換部１１６を介してデジタル信号処理部１１７に供給されて処理される。そして、処理後の画像信号（「Ｃ」と呼ぶことにする）は、汎用の画像フォーマットに変換されて、内部メモリ１１９に取り込まれる。

ＣＰＵ１０１は、ステップＳＴ１５の処理の後、ステップＳＴ１６の処理に移る。このステップＳＴ１６において、撮影者からの入力デバイス１０４を使った指示に基づき、デジタル信号処理部１１７にて画像処理を行い、その結果をモニタ１２１に表示する。このステップＳＴ１６における処理の詳細は後述する。このステップＳＴ１６の処理は、撮影者からの入力デバイス１０４を使った指示がある毎に、行われる。

ＣＰＵ１０１は、ステップＳＴ１６の処理の後、ステップＳＴ１７の処理に移る。このステップＳＴ１７において、ＣＰＵ１０１は、入力デバイス１０４を構成するシャッター釦ＳＢ（図１参照）が撮影者により押されるまで待機する。ＣＰＵ１０１は、シャッター釦ＳＢが押された場合、ステップＳＴ１８の処理に移る。

すなわち、ＣＰＵ１０１は、ステップＳＴ１６およびステップＳＴ１７において、「撮影者からの入力デバイス１０４を使った指示がある毎に、デジタル信号処理部１１７にて、その指示に基づいた画像処理（重み付け加算処理）を行い、その結果を、モニタ１２１に表示する。この処理は、シャッター釦ＳＢが押されるまで行われる。そして、シャッター釦ＳＢが押された場合に、ステップＳＴ１８の処理に進む。」という処理を行うことになる。

ＣＰＵ１０１は、ステップＳＴ１８において、シャッター釦ＳＢを押す直前の撮影者からの入力デバイス１０４を使った指示に基づいた「絞り、露光時間、閃光発光装置２００Ａの発光量、閃光発光装置２００Ｂの発光量」の決定および設定を行い、そして、撮影を行う。この撮影が本撮影である。なお、絞り等の具体的な値の設定は、後述する。

次に、ＣＰＵ１０１は、ステップＳＴ１９において、ステップＳＴ１８の撮影で撮像素子１１３から得られる撮像画像信号をデジタル信号処理部１１７で処理し、処理後の画像信号を汎用の画像フォーマットに変換して、リムーバブルメモリ１２０に格納する。ＣＰＵ１０１は、ステップＳＴ１９の処理の後、ステップＳＴ２０において、リターンする。

次に、図６のフローチャートのステップＳＴ１６の処理の詳細、および、図６のフローチャートのステップＳＴ１８で設定する具体的な値について説明する。

［撮影者からの指示と画像処理］
図６のフローチャートのステップＳＴ１６における「撮影者からの入力デバイス１０４を使った指示」とは、具体的には、「環境光の強さ」、「閃光発光装置２００Ａの強さ」、「閃光発光装置２００Ｂの強さ」、および、「モニタ１２１に表示する画像の種類」である。

「環境光の強さ」は、例えば、「１／８倍」、「１／４倍」、「１／２倍」、「１倍」、「２倍」、「４倍」、および、「８倍」の中から選ぶようにされる。この値を「Ｐ」とする。すなわち、Ｐは、１／８、１／４、１／２、１、２、４、８のいずれかである。「閃光発光装置２００Ａの強さ」は、例えば、「０倍」、「１／２倍」、「１倍」、「２倍」、「４倍」、「８倍」、および、「１６倍」の中から選ぶようにされる。この値を「Ｑ」とする。すなわち、Ｑは、０、１／２、１、２、４、８、１６のいずれかである。

「閃光発光装置２００Ｂの強さ」は、例えば、「０倍」、「１／２倍」、「１倍」、「２倍」、「４倍」、「８倍」、および、「１６倍」の中から選ぶようにされる。この値を「Ｒ」とする。すなわち、Ｒは、０、１／２、１、２、４、８、１６のいずれかである。「モニタ１２１に表示する画像の種類」は、例えば、「環境光」、「閃光発光装置２００Ａ」、「閃光発光装置２００Ｂ」、および、「環境光と閃光発光装置２００Ａと閃光発光装置２００Ｂ」の中から選ぶようにされる。

図６のフローチャートのステップＳＴ１６における「デジタル信号処理部１１７での画像処理」とは、具体的には、以下の処理（１）〜処理（６）である。

処理（１）：内部メモリ１１９に記憶された画像信号Ｂから、内部メモリ１１９に記憶された画像信号Ａを、減算する処理。その結果の画像信号を「ＢＡ」と呼ぶことにする。
処理（２）：内部メモリ１１９に記憶された画像信号Ｃから、内部メモリ１１９に記憶された画像信号Ａを、減算する処理。その結果の画像信号を「ＣＡ」と呼ぶことにする。

処理（３）：内部メモリ１１９に記憶された画像信号Ａに対して、撮影者の指示した「環境光の強さ」の倍率で乗算する処理。その結果の画像信号を「ＡＭ」と呼ぶことにする。
処理（４）：画像信号ＢＡに対して、撮影者の指示した「閃光発光装置２００Ａの強さ」の倍率で乗算する処理。その結果の画像信号を「ＢＡＭ」と呼ぶことにする。

処理（５）：画像信号ＣＡに対して、撮影者の指示した「閃光発光装置２００Ｂの強さ」の倍率で乗算する処理。その結果の画像信号を「ＣＡＭ」と呼ぶことにする。
処理（６）：画像信号ＡＭと画像信号ＢＡＭと画像信号ＣＡＭの３つの画像信号を加算する処理。その結果の画像信号を「Ｍ」と呼ぶことにする。

上述の処理により、どのような画像信号を作成できるかを説明する。画像信号Ａは、環境光により照射された光源下で、絞りＦ、露光時間Ｓで撮影して得られた画像信号である。画像信号Ｂは、環境光と閃光発光装置２００Ａ（光量は、最大発光量の１／１６の量）の２つの光により照射された光源下で、絞りＦ、露光時間Ｓで撮影して得られた画像信号である。画像信号Ｃは、環境光と閃光発光装置２００Ｂ（光量は、最大発光量の１／１６の量）の２つの光により照射された光源下で、絞りＦ、露光時間Ｓで撮影して得られた画像信号である。

画像信号ＢＡは、画像信号Ｂから画像信号Ａを引いて得られた画像信号である。すなわち、画像信号ＢＡは、環境光が存在しない状態で、閃光発光装置２００Ａ（光量は、最大発光量の１／１６の量）の光により照射された光源下で、絞りＦで撮影して得られた画像信号と等価である。なお、閃光発光装置２００Ａの照射は一瞬であり、画像信号ＢＡのレベルは露光時間Ｓには依存しない。

画像信号ＣＡは、画像信号Ｃから画像信号Ａを引いて得られた画像信号である。すなわち、画像信号ＣＡは、環境光が存在しない状態で、閃光発光装置２００Ｂ（光量は、最大発光量の１／１６の量）の光により照射された光源下で、絞りＦで撮影して得られた画像信号と等価である。なお、閃光発光装置２００Ｂの照射は一瞬であり、画像信号ＢＡのレベルは露光時間Ｓには依存しない。

画像信号ＡＭは、画像信号Ａを、Ｐ倍した画像信号である。この画像信号ＡＭは、環境光により照射された光源下で、絞りをＦとし、露光時間をＳよりもＰ倍長い時間として撮影して得られた画像信号と等価である。あるいは、この画像信号ＡＭは、環境光のみにより照射された光源下で、絞りをＦよりもＰ倍明るい絞りとし、露光時間をＳとして撮影して得られた画像信号と等価である。

画像信号ＢＡＭは、画像信号ＢＡを、Ｑ倍した画像信号である。この画像信号ＢＡＭは、環境光が存在しない状態で、閃光発光装置２００Ａ（光量は、最大発光量のＱ／１６の量）の光により照射された光源下で、絞りをＦとして撮影して得られた画像信号と等価である。あるいは、この画像信号ＢＡＭは、環境光が存在しない状態で、閃光発光装置２００Ａ（光量は、最大発光量のＱ／（Ｐ×１６）の量）の光により照射された光源下で、絞りをＦよりもＰ倍明るい絞りとして撮影して得られた画像信号と等価である。

画像信号ＣＡＭは、画像信号ＣＡを、Ｒ倍した画像信号である。この画像信号ＣＡＭは、環境光が存在しない状態で、閃光発光装置２００Ｂ（光量は、最大発光量のＲ／１６の量）の光により照射された光源下で、絞りをＦとして撮影して得られた画像信号と等価である。あるいは、この画像信号ＣＡＭは、環境光が存在しない状態で、閃光発光装置２００Ｂ（光量は、最大発光量のＲ／（Ｐ×１６）の量）の光により照射された光源下で、絞りをＦよりもＰ倍明るい絞りとして撮影して得られた画像信号と等価である。

画像信号Ｍは、画像信号ＡＭと画像信号ＢＡＭと画像信号ＣＡＭの３つの画像信号を加算して得られた画像信号である。この画像信号Ｍは、環境光と閃光発光装置２００Ａ（光量は、最大発光量のＱ／１６の量）と閃光発光装置２００Ｂ（光量は、最大発光量のＲ／１６の量）の３つの光により照射された光源下で、絞りをＦとし、露光時間をＳよりもＰ倍長い時間として撮影して得られた画像信号と等価である。あるいは、この画像信号Ｍは、環境光と閃光発光装置２００Ａ（光量は、最大発光量のＱ／（Ｐ×１６）の量）と閃光発光装置２００Ｂ（光量は、最大発光量のＲ／（Ｐ×１６）の量）の３つの光により照射された光源下で、絞りをＦよりもＰ倍明るい絞りとし、露光時間をＳとして撮影して得られた画像信号と等価である。

図６のフローチャートのステップＳＴ１６における「モニタ１２１に表示する」画像とは、撮影者の指示した「モニタ１２１に表示する画像の種類」が「環境光」である場合には、上述の画像信号ＡＭによる画像であり、撮影者の指示した「モニタ１２１に表示する画像の種類」が「閃光発光装置２００Ａ」である場合には、上述の画像信号ＢＡＭによる画像である。また、「モニタ１２１に表示する」画像とは、撮影者の指示した「モニタ１２１に表示する画像の種類」が「閃光発光装置２００Ｂ」である場合には、上述の画像信号ＣＡＭによる画像であり、撮影者の指示した「モニタ１２１に表示する画像の種類」が「環境光と閃光発光装置２００Ａと閃光発光装置２００Ｂ」である場合には、上述の画像信号Ｍによる画像である。

なお、ステップＳＴ１５からステップＳＴ１６に処理が移動した直後、すなわち、デフォルト状態では、「環境光（太陽光など：図示省略）の強さ」＝１倍、「閃光発光装置１０２の強さ」＝１倍、「閃光発光装置１０３の強さ」＝１倍、および、「モニタ１２１に表示する画像の種類」＝「環境光と閃光発光装置２００Ａと閃光発光装置２００Ｂ」が設定されている。すなわち、Ｐ＝１、Ｑ＝１、Ｒ＝１である。この事柄について、図７を用いて、詳細説明をする。

図７の「Ａ」、「Ｂ」、「Ｃ」、「ＢＡ」、「ＣＡ」、「ＡＭ」、「ＢＡＭ」、「ＣＡＭ」、および、「Ｍ」は、それぞれ、「画像信号Ａのよる画像」、「画像信号Ｂによる画像」、「画像信号Ｃによる画像」、「画像信号ＢＡによる画像」、「画像信号ＣＡによる画像」、「画像信号ＡＭによる画像」、「画像信号ＢＡＭによる画像」、「画像信号ＣＡＭによる画像」、および、「画像信号Ｍによる画像」を表している。なお、後述する図８〜１０における「Ａ」等も同様である。

図７の減算処理６０１、減算処理６０２、乗算処理６０３、乗算処理６０４、乗算処理６０５、および、「２つの加算処理６０６，６０７」は、それぞれ、上述の「ステップ１６における処理（１）〜（６）を表している。なお、後述する図８〜図１０における減算処理６０１等も同様である。

図７のＡに示すように、画像信号Ａによる画像は、ドア３０２の投影像（図３で説明した投影像４０２部分）も、人物投影像左側（図３で示した投影像４０１Ｌ）も、人物投影像右側（図３で示した投影像４０１Ｒ）も、全て、暗めに写っている。

図７のＢに示すように、画像信号Ｂによる画像は、ドア３０２の投影像（図３で説明した投影像４０２部分）と人物投影像右側（図３で示した４０１Ｒ）は、暗めに写っているが、閃光発光装置２００Ａからの光により、人物投影像左側（図３で示した投影像４０１Ｌ）は明るめに写っている。

図７のＣに示すように、画像信号Ｃによる画像は、ドア３０２の投影像（図３で説明した投影像４０２部分）と人物投影像左側（図３で示した投影像４０１Ｌ）は、暗めに写っているが、閃光発光装置２００Ｂからの光により、人物投影像右側（図３で示した投影像４０１Ｒ）は明るめに写っている。

図７のＢＡに示すように、画像信号ＢＡによる画像は、ドア３０２の投影像（図３で説明した４０２部分）はほとんど真っ黒であり、人物投影像右側（図３で示した投影像４０１Ｒ）は、暗めに写っており、人物投影像左側（図３で示した４０１Ｌ）は明るめに写っている。ドア３０２の投影像（図３で説明した投影像４０２部分）がほとんど真っ黒である理由は、ドア３０２には閃光発光装置２００Ａからの光が届かないからである。

図７のＣＡに示すように、画像信号ＣＡによる画像は、ドア３０２の投影像（図３で説明した４０２部分）はほとんど真っ黒であり、人物投影像左側（図３で示した投影像４０１Ｌ）は、暗めに写っており、人物投影像右側（図３で示した投影像４０１Ｒ）は明るめに写っている。ドア３０２の投影像（図３で説明した投影像４０２部分）がほとんど真っ黒である理由は、ドア３０２には閃光発光装置２００Ｂからの光が届かないからである。

図７のＡＭ、ＢＡＭ、ＣＡＭは、Ｐ＝１、Ｑ＝１、Ｒ＝１であるので、それぞれ、Ａ、ＢＡ、ＣＡと同じである。図７のＭに示すように、画像信号Ｍは、ドア３０２の投影像（図３で説明した投影像４０２部分）は暗めに写っており、閃光発光装置２００Ａからの光により人物投影像左側（図３で示した投影像４０１Ｌ）は明るめに写っており、閃光発光装置２００Ｂからの光により人物投影像右側（図３で示した投影像４０１Ｒ）は明るめに写っている。

「モニタに表示する画像の種類」＝「環境光と閃光発光装置２００Ａと閃光発光装置２００Ｂ」が設定されているので、図７のＭに示す画像が、モニタ１２１に表示され、この画像を撮影者は視認することができる。

この画像を撮影者は見て、例えば、ドア３０２の投影像（図３で説明した投影像４０２部分）部分が暗いので、本撮影では明るく撮影したいと考える。そして、もし、そのようにして撮影した場合には、どのような画像が得られるかを知りたい。この場合、撮影者は、入力デバイス１０４を使って「環境光の強さ」を２倍に指定する。この指定は、バス１０５を介して、ＣＰＵ１０１に伝えられる。さらに、ＣＰＵ１０１は、１０５を介して、デジタル信号処理部１１７に対して、「Ｐ＝２、Ｑ＝１、Ｒ＝１として、処理し、その結果を表示する」という命令を下す。この事柄について、図８を用いて、詳細説明をする。

図８において、ＱとＲの値が図７の場合と同じなので、Ａ、Ｂ、Ｃ、ＢＡ、ＣＡ、ＢＡＭ、ＣＡＭは、図７と全く同一である。図８のＡＭは、Ｐ＝２なので、Ａに対して２倍の明るさの画像となる。従って、図８のＭに示すように、画像信号Ｍによる画像は、ドア３０２の投影像（図３で説明した投影像４０２部分）は明るめに写っており、閃光発光装置２００Ａからの光により人物投影像左側（図３で示した投影像４０１Ｌ）は明るめに写っており、閃光発光装置２００Ｂからの光により人物投影像右側（図３で示した投影像４０１Ｒ）は明るめに写っている。

「モニタ１２１に表示する画像の種類」＝「環境光と閃光発光装置２００Ａと閃光発光装置２００Ｂ」が設定されているので、図８のＭに示す画像が、モニタ１２１に表示され、この画像を撮影者は視認することができる。

あるいは、図７のＭの画像を撮影者は見て、たとえば、人物投影像左側（図３で示した投影像４０１Ｌ）をもっと明るく写したいと考える。そして、もし、そのようにして撮影した場合には、どのような画像が得られるかを知りたい。この場合、撮影者は、入力デバイス１０４を使って「閃光発光装置２００Ａの強さ」を２倍に指定する。この指定は、バス１０５を介して、ＣＰＵ１０１に伝えられる。さらに、ＣＰＵ１０１は、バス１０５を介して、デジタル信号処理部１１７に対して、「Ｐ＝１、Ｑ＝２、Ｒ＝１として、処理し、その結果を表示する」という命令を下す。この事柄について、図９を用いて、詳細説明をする。

図９において、ＰとＲの値が図７の場合と同じなので、Ａ、Ｂ、Ｃ、ＢＡ、ＣＡ、ＡＭ、ＣＡＭは、図７と全く同一である。図９のＢＡＭは、Ｑ＝２なので、ＢＡに対して２倍の明るさの画像となる。従って、図９のＭに示すように、画像信号Ｍによる画像は、ドア３０２の投影像（図３で説明した投影像４０２部分）は暗めに写っており、閃光発光装置２００Ａからの光により人物投影像左側（図３で示した投影像４０１Ｌ）はとても明るく写っており、閃光発光装置２００Ｂからの光により人物投影像右側（図３で示した投影像４０１Ｒ）は明るめに写っている。

「モニタ１２１に表示する画像の種類」＝「環境光と閃光発光装置２００Ａと閃光発光装置２００Ｂ」が設定されているので、図９のＭに示す画像が、モニタ１２１に表示され、この画像を撮影者は視認することができる。

さらに、あるいは、図７のＭの画像を撮影者は見て、例えば、ドア３０２の投影像（図３で説明した投影像４０２部分）をさらに暗くすると共に、人物投影像左側（図３で示した投影像４０１Ｌ）を完全に暗く写し、かつ、人物投影像右側（図３で示した投影像４０１Ｒ）をもっと明るく写したいと考える。そして、もし、そのようにして撮影した場合には、どのような画像が得られるかを知りたい。この場合、撮影者は、入力デバイス１０４を使って、「環境光の強さ」を１／２倍に設定し、「閃光発光装置２００Ａの強さ」を０倍に指定し、さらに「閃光発光装置２００Ｂの強さ」を２倍に指定する。この指定は、バス１０５を介して、ＣＰＵ１０１に伝えられる。さらに、ＣＰＵ１０１は、バス１０５を介して、デジタル信号処理部１１７に対して、「Ｐ＝１／２、Ｑ＝０、Ｒ＝２として、処理し、その結果を表示する」という命令を下す。この事柄について、図１０を用いて、詳細説明をする。

図１０において、Ａ、Ｂ、Ｃ、ＢＡ、ＣＡは、図７と全く同一である。図１０のＡＭは、Ｐ＝１／２であるので、Ａに対して１／２倍の明るさの画像となる。また、図１０のＢＡＭは、Ｑ＝０なので、黒い画像となる。さらに、図１０のＣＡＭは、Ｒ＝２なので、ＣＡに対して２倍の明るさの画像となる。従って、図１０のＭに示すように、画像信号Ｍによる画像は、ドア３０２の投影像（図３で説明した投影像４０２部分）は暗く写っており、閃光発光装置２００Ａからの光が全くないので人物投影像左側（図３で示した投影像４０１Ｌ）は暗めに写っており、閃光発光装置２００Ｂからの光により人物投影像右側（図３で示した投影像４０１Ｒ）はとても明るく写っている。

「モニタ１２１に表示する画像の種類」＝「環境光と閃光発光装置２００Ａと閃光発光装置２００Ｂ」が設定されているので、図１０のＭに示す画像が、モニタ１２１に表示され、この画像を撮影者は視認することができる。

勿論、各図を用いて説明した場合のいずれの場合においても、「モニタ１２１に表示する画像の種類」として、「環境光」や「閃光発光装置２００Ａ」や「閃光発光装置２００Ｂ」を指定することで、各図の中のＡＭやＢＡＭやＣＡＭをモニタ１２１に表示することができ、撮影者に対して、環境光の成分のみの画像や、閃光発光装置２００Ａが発光する光の成分のみの画像や、閃光発光装置２００Ｂが発光する光の成分のみの画像を視認させることができる。

このように、図６のフローチャートのステップＳＴ１６において、撮影者からの簡単な指示によって、「環境光の強さ」、「閃光発光装置２００Ａの強さ」、および、「閃光発光装置２００Ｂの強さ」を変えて撮影すると、どのような画像ができるかを撮影者に視認させることができる。これにより、撮影者に、意図に即した「各光源の強さ」を簡単に指定させることができる。

なお、撮影者が最終的に指示した「各光源の強さ（環境光の強さ：Ｐ、閃光発光装置２００Ａの強さ：Ｑ、および、閃光発光装置２００Ｂの強さ：Ｒ）」に関するデータは、例えば、ＣＰＵ１０１内に保持され、ステップＳＴ１８において、そのデータは使用される。

［絞り等の具体的な値の設定］
次に、図６のフローチャートのステップＳＴ１８で設定する具体的な値について説明する。このステップＳＴ１８で設定する値は、本撮影における「絞り」、「露光時間」、「閃光発光装置２００Ａの発光量」、および、「閃光発光装置２００Ｂの発光量」である。

上述していないが、図５のフローチャートの処理に入る前に、撮影者は、入力デバイス１０４を介して、「絞り優先」あるいは「シャッター速度優先」の選択（撮影モードの選択）を行っている。この撮影モード選択は、ほとんど全てのデジタルカメラ製品には搭載されており、ここでは、その説明を省略する。絞り優先とは、決められた絞り（前述のＦという値）を変えずに撮影するモードである。シャッター速度優先とは、決められた露光時間（前述のＳという値）を変えずに撮影するモードである。

ステップＳＴ１８の処理に到達する前に、既に、ステップＳＴ１６において、撮影者が、本撮影で撮影する際の「各光源の強さ（環境光の強さ：Ｐ、閃光発光装置２００Ａの強さ：Ｑ、および、閃光発光装置２００Ｂの強さ：Ｒ）」を指定し終わっている。そして、このデータは、例えば、ＣＰＵ１０１内に保持されている。

ＣＰＵ１０１は、「絞り優先」が選択されているときは、以下の設定で本撮影を行う。すなわち、ＣＰＵ１０１は、絞りは「Ｆ」、露光時間は「Ｐ×Ｓ（すなわち、ＳよりもＰ倍長い時間）」、閃光発光装置２００Ａの強さは「最大発光量のＱ／１６の量」、閃光発光装置２００Ｂの強さは「最大発光量のＲ／１６の量」として本撮影を行う。これにより、ステップＳＴ１６において撮影者が最終的に指定した際にモニタ１２１で視認した画像Ｍと同じ画像を本撮影で得ることができる。

また、ＣＰＵ１０１は、「シャッター速度優先」が選択されているときは、以下の設定で本撮影を行う。すなわち、ＣＰＵ１０１は、絞りは「ＦよりもＰ倍明るい絞り」、露光時間は「Ｓ」、閃光発光装置２００Ａの強さは「最大発光量のＱ／（Ｐ×１６）の量」、閃光発光装置２００Ｂの強さは「最大発光量のＲ／（Ｐ×１６）の量」として本撮影を行う。これにより、ステップＳＴ１６において撮影者が最終的に指定した際にモニタ１２１で視認した画像Ｍと同じ画像を本撮影で得ることができる。

以上説明したように、図１に示す撮像システム１０のデジタルカメラ１００においては、閃光発光装置２００Ａ，２００Ｂの発光量をゼロおよび最大発光量の１／１６の量として連続撮影して得られた画像信号から、環境光による画像信号Ａおよび閃光発光装置２００Ａ，２００Ｂの発光による画像信号ＢＡ，ＣＡの重み付け加算信号Ｍを求め、この重み付け加算信号Ｍによる画像をモニタ１２１に表示し、撮影者に表示画像を参照させて重み付け係数Ｐ，Ｑ，Ｒを設定させ、撮影者が設定した重み付け係数Ｐ，Ｑ，Ｒに基づいて絞り、露光時間、発光量等の撮影条件を決定して、本撮影を行う。そのため、デジタルカメラ１００において、撮影者が意図した画像を容易に撮影できる。

＜２．変形例＞
なお、上述実施の形態においては、ＣＰＵ１０１は、撮影者が、本撮影で撮影する際の「各光源の強さ（環境光の強さ：Ｐ、閃光発光装置１０２の強さ：Ｑ、および、閃光発光装置１０３の強さ：Ｒ）」の指定データに基づいて絞り、露光時間、閃光発光装置２００Ａ，２００Ｂの発光量を決定すると共に、その決定値を設定して本撮影を行う。しかし、ＣＰＵ１０１は、絞り、露光時間、閃光発光装置２００Ａ，２００Ｂの発光量を決定した後、その決定値を例えばモニタ１２１に表示し、撮影者がその表示を見て、絞り、露光時間、閃光発光装置２００Ａ，２００Ｂの発光量を実際に手動で設定するようにしてもよい。

また、上述実施の形態においては、全ての処理をデジタルカメラ１００内で行うとしたが、例えば、ＰＣ（パーソナルコンピュータ：図示省略）とデジタルカメラ１００を接続して、ＰＣに撮像データを転送して、ＰＣ内で処理し、ＰＣに付属されるモニタにより、撮影者に視認させてもよい。

また、上述実施の形態においては、閃光発光装置が２つの場合について説明したが、１つあるいは３個以上の場合でも、もちろん、この発明は適用できる。

また、図６のフローチャートのステップＳＴ１４における撮影は、露光時間を十分に短くして撮影してもよい。このように撮影すると、環境光と閃光発光装置２００Ａ（光量は、最大発光量の１／１６の量）の２つの光により照射された光源下で、「絞り＝Ｆ」、「露光時間＝十分に短い時間」で撮影して得られた画像信号を得ることができる。この場合、露光時間が十分に短いので、環境光の成分は無視できる。

したがって、環境光が存在しない状態で、閃光発光装置２００Ａ（光量は、最大発光量の１／１６の量）の光により照射された光源下で、絞りＦで撮影して得られた画像信号とほぼ等価となる。つまり、減算処理を行わなくても、この画像信号を、上述した画像信号ＢＡと考えてもよい。このようにすれば、図７〜図１０において示した減算処理６０１を行わずに、ステップＳＴ１４で得られた画像信号Ｂをそのまま画像信号ＢＡとして使用することができる。このことは、図６のフローチャートのステップＳＴ１５についても言える。

この発明は、撮像装置において撮影者が意図した画像を容易に撮影できるものであり、撮像装置と閃光発光装置とからなる撮像システムに適用できる。

この発明の実施の形態としての撮像システムの構成例を示すブロック図である。 撮像システムによる撮影状況を説明するための図である。 撮像システムを使用して撮影したときの画像例を示す図である。 撮影システムを構成するデジタルカメラの構成例を示すブロック図である。 実際に撮影を行う場合におけるＣＰＵの制御処理を説明するためのフローチャートである。 ＣＰＵのモニタリング制御処理を説明するためのフローチャートである。 本撮影前に行うモニタリングの撮影の際に得られる画像と処理により得られる画像を説明するための図である。 本撮影前に行うモニタリングの撮影の際に得られる画像と処理により得られる画像を説明するための図である。 本撮影前に行うモニタリングの撮影の際に得られる画像と処理により得られる画像を説明するための図である。 本撮影前に行うモニタリングの撮影の際に得られる画像と処理により得られる画像を説明するための図である。

符号の説明

１０・・・撮像システム、１００・・・デジタルカメラ、１０１・・・ＣＰＵ、１０２・・・ＲＯＭ、１０３・・・ＲＡＭ、１０４・・・入力デバイス、１０５・・・バス、１１１・・・撮像レンズ、１１２・・・アイリス、１１３・・・撮像素子、１１４・・・アイリス制御部、１１７・・・デジタル信号処理部、１１８・・・タイミングジェネレータ、１１９・・・内部メモリ、１２０・・・リムーバブルメモリ、１２１・・・モニタ、１２２・・・発光制御部、２００Ａ，２００Ｂ・・・閃光発光装置、２１０Ａ，２１０Ｂ・・・伝送線、３０１・・・撮影対象人物、３０２・・・ドア（背景となる物体）、４００・・・撮影画像、４０１，４０２・・・投影像

Claims (9)

1. 撮像装置の絞り機構の絞りが予め決められた絞りであり、上記撮像装置の固体撮像素子の露光時間が予め決められた露光時間であり、閃光発光装置の発光量がゼロである撮影条件を第１の撮影条件とし、上記撮像装置の絞り機構の絞りが予め決められた絞りであり、上記撮像装置の固体撮像素子の露光時間が予め決められた露光時間であり、上記閃光発光装置の発光量が予め決められた発光量である撮影条件を第２の撮影条件とし、上記撮像装置において上記第１の撮影条件および上記第２の撮影条件で連続して撮影して得られた第１の画像信号および第２の画像信号を取り込む画像信号取り込み部と、
   上記画像信号取り込み部で取り込まれた上記第１の画像信号および上記第２の画像信号を用い、環境光による画像信号および上記閃光発光装置の発光による画像信号の重み付け加算信号を得る画像信号演算部と、
   上記画像信号演算部で得られた上記重み付け加算信号による画像の表示部への表示を制御する表示制御部と、
   上記画像信号演算部で重み付け加算される上記環境光による画像信号および上記閃光発光装置の発光による画像信号のそれぞれの重み付け係数を撮影者が設定するための入力デバイスと、
   上記入力デバイスで設定された重み付け係数に基づいて、上記絞り機構の絞り、上記固体撮像素子の露光時間および上記閃光発光装置の発光量を決定する撮影条件決定部と
   を備える画像信号処理装置。
2. 上記第２の撮影条件における露光時間と上記第１の撮影条件における露光時間は等しくされており
   上記画像信号演算部は、
   上記環境光による画像信号として上記第１の画像信号を使用し、
   上記閃光発光装置による画像信号として上記第２の画像信号から上記第１の画像信号を減算した減算信号を使用する
   請求項１に記載の画像信号処理装置。
3. 上記第２の撮影条件における露光時間は上記第１の撮影条件における露光時間に比べて充分に短くされており
   上記画像信号演算部は、
   上記環境光による画像信号として上記第１の画像信号を使用し、
   上記閃光発光装置による画像信号として上記第２の画像信号を使用する
   請求項１に記載の画像信号処理装置。
4. 上記撮像装置の絞り機構における絞りを上記撮影条件決定部で決定された絞りに設定し、上記撮像装置の固体撮像素子における露光時間を上記撮影条件決定部で決定された露光時間に設定し、上記閃光発光装置の発光量を上記撮影条件決定部で決定された発光量に設定する撮影条件設定部をさらに備える
   請求項１に記載の画像信号処理装置。
5. 上記表示制御部は、
   上記画像信号演算部で得られた重み付け加算信号による画像の他、上記環境光による画像信号で得られる画像および上記閃光発光装置の発光による画像信号で得られる画像の上記表示部への表示を制御する
   請求項１に記載の画像信号処理装置。
6. 撮像装置の絞り機構の絞りが予め決められた絞りであり、上記撮像装置の固体撮像素子の露光時間が予め決められた露光時間であり、閃光発光装置の発光量がゼロである撮影条件を第１の撮影条件とし、上記撮像装置の絞り機構の絞りが予め決められた絞りであり、上記撮像装置の固体撮像素子の露光時間が予め決められた露光時間であり、上記閃光発光装置の発光量が予め決められた発光量である撮影条件を第２の撮影条件とし、上記撮像装置において上記第１の撮影条件および上記第２の撮影条件で連続して撮影して得られた第１の画像信号および第２の画像信号を取り込む取り込みステップと、
   上記取り込みステップで取り込まれた上記第１の画像信号および上記第２の画像信号を用い、環境光による画像信号および上記閃光発光装置の発光による画像信号の重み付け加算信号を得る演算ステップと、
   上記演算ステップで得られた上記重み付け加算信号による画像の表示部への表示を制御する表示制御ステップと、
   上記演算ステップで重み付け加算される上記環境光による画像信号および上記閃光発光装置の発光による画像信号のそれぞれの重み付け係数を撮影者が設定する撮影者操作ステップと、
   上記撮影者操作ステップで設定された重み付け係数に基づいて、上記絞り機構の絞り、上記固体撮像素子の露光時間および上記閃光発光装置の発光量を決定する撮影条件決定ステップと
   を備える画像信号処理方法。
7. コンピュータを、
   撮像装置の絞り機構の絞りが予め決められた絞りであり、上記撮像装置の固体撮像素子の露光時間が予め決められた露光時間であり、閃光発光装置の発光量がゼロである撮影条件を第１の撮影条件とし、上記撮像装置の絞り機構の絞りが予め決められた絞りであり、上記撮像装置の固体撮像素子の露光時間が予め決められた露光時間であり、上記閃光発光装置の発光量が予め決められた発光量である撮影条件を第２の撮影条件とし、上記撮像装置において上記第１の撮影条件および上記第２の撮影条件で連続して撮影して得られた第１の画像信号および第２の画像信号を取り込む画像信号取り込み手段と、
   上記画像信号取り込み手段で取り込まれた上記第１の画像信号および上記第２の画像信号を用い、環境光による画像信号および上記閃光発光装置の発光による画像信号の重み付け加算信号を得る画像信号演算手段と、
   上記画像信号演算手段で得られた上記重み付け加算信号による画像の表示部への表示を制御する表示制御手段と、
   上記画像信号演算手段で重み付け加算される上記環境光による画像信号および上記閃光発光装置の発光による画像信号のそれぞれの重み付け係数を撮影者が設定するための撮影者操作手段と、
   上記撮影者操作手段で設定された重み付け係数に基づいて、上記絞り機構の絞り、上記固体撮像素子の露光時間および上記閃光発光装置の発光量を決定する撮影条件決定手段と
   して機能させるためのプログラム。
8. 被写体を撮像する固体撮像素子と、
   上記被写体からの光の上記固体撮像素子に対する透過量を調節する絞り機構と、
   上記固体撮像素子で得られた撮像信号を処理して画像信号を得る撮像信号処理部と、
   上記撮像信号処理部で得られた画像信号を記録媒体に格納する記録部と、
   閃光発光装置の発光を制御する発光制御部と、
   上記撮像信号処理部で得られた画像信号を処理して、上記絞り機構の絞り、上記固体撮像素子の露光時間および上記閃光発光装置の発光量を設定する画像信号処理部を備え、
   上記画像信号処理部は、
   上記絞り機構の絞りが予め決められた絞りであり、上記固体撮像素子の露光時間が予め決められた露光時間であり、上記閃光発光装置の発光量がゼロである撮影条件を第１の撮影条件とし、上記絞り機構の絞りが予め決められた絞りであり、上記固体撮像素子の露光時間が予め決められた露光時間であり、上記閃光発光装置の発光量が予め決められた発光量である撮影条件を第２の撮影条件とし、上記第１の撮影条件および上記第２の撮影条件で連続して撮影され上記撮影信号処理部で得られた第１の画像信号および第２の画像信号を取り込む画像信号取り込み部と、
   上記画像信号取り込み部で取り込まれた上記第１の画像信号および上記第２の画像信号を用い、環境光による画像信号および上記閃光発光装置の発光による画像信号の重み付け加算信号を得る画像信号演算部と、
   上記画像信号演算部で得られた上記重み付け加算信号による画像の表示部への表示を制御する表示制御部と、
   上記画像信号演算部で重み付け加算される上記環境光による画像信号および上記閃光発光装置の発光による画像信号のそれぞれの重み付け係数を撮影者が設定するための入力デバイスと、
   上記入力デバイスで設定された重み付け係数に基づいて、上記絞り機構の絞り、上記固体撮像素子の露光時間および上記閃光発光装置の発光量を決定する撮影条件決定部と、
   上記撮像装置の絞り機構における絞りを上記撮影条件決定部で決定された絞りに設定し、上記撮像装置の固体撮像素子における露光時間を上記撮影条件決定部で決定された露光時間に設定し、上記閃光発光装置の発光量を上記撮影条件決定部で決定された発光量に設定する撮影条件設定部を有する
   撮像装置。
9. 撮像装置と閃光発光装置とからなる撮像システムであって、
   上記撮像装置は、
   被写体を撮像する固体撮像素子と、
   上記被写体からの光の上記固体撮像素子に対する透過量を調節する絞り機構と、
   上記固体撮像素子で得られた撮像信号を処理して画像信号を得る撮像信号処理部と、
   上記撮像信号処理部で得られた画像信号を記録媒体に格納する記録部と、
   上記閃光発光装置の発光を制御する発光制御部と、
   上記撮像信号処理部で得られた画像信号を処理して、上記絞り機構の絞り、上記固体撮像素子の露光時間および閃光発光装置の発光量を設定する画像信号処理部を備え、
   上記画像信号処理部は、
   上記絞り機構の絞りが予め決められた絞りであり、上記固体撮像素子の露光時間が予め決められた露光時間であり、上記閃光発光装置の発光量がゼロである撮影条件を第１の撮影条件とし、上記絞り機構の絞りが予め決められた絞りであり、上記固体撮像素子の露光時間が予め決められた露光時間であり、上記閃光発光装置の発光量が予め決められた発光量である撮影条件を第２の撮影条件とし、上記第１の撮影条件および上記第２の撮影条件で連続して撮影され上記撮影信号処理部で得られた第１の画像信号および第２の画像信号を取り込む画像信号取り込み部と、
   上記画像信号取り込み部で取り込まれた上記第１の画像信号および上記第２の画像信号を用い、環境光による画像信号および上記閃光発光装置の発光による画像信号の重み付け加算信号を得る画像信号演算部と、
   上記画像信号演算部で得られた上記重み付け加算信号による画像の表示部への表示を制御する表示制御部と、
   上記画像信号演算部で重み付け加算される上記環境光による画像信号および上記閃光発光装置の発光による画像信号のそれぞれの重み付け係数を撮影者が設定するための入力デバイスと、
   上記入力デバイスで設定された重み付け係数に基づいて、上記絞り機構の絞り、上記固体撮像素子の露光時間および上記閃光発光装置の発光量を決定する撮影条件決定部と、
   上記撮像装置の絞り機構における絞りを上記撮影条件決定部で決定された絞りに設定し、上記撮像装置の固体撮像素子における露光時間を上記撮影条件決定部で決定された露光時間に設定し、上記閃光発光装置の発光量を上記撮影条件決定部で決定された発光量に設定する撮影条件設定部を有する
   撮像システム。