JP2011199860A - Imaging device and image generating program - Google Patents
Imaging device and image generating program Download PDFInfo
- Publication number
- JP2011199860A JP2011199860A JP2011042832A JP2011042832A JP2011199860A JP 2011199860 A JP2011199860 A JP 2011199860A JP 2011042832 A JP2011042832 A JP 2011042832A JP 2011042832 A JP2011042832 A JP 2011042832A JP 2011199860 A JP2011199860 A JP 2011199860A
- Authority
- JP
- Japan
- Prior art keywords
- exposure
- exposure condition
- value
- luminance value
- condition
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 42
- 238000001514 detection method Methods 0.000 claims abstract description 20
- 238000000034 method Methods 0.000 claims description 44
- 239000002131 composite material Substances 0.000 claims description 19
- 238000005375 photometry Methods 0.000 claims description 6
- 230000002194 synthesizing effect Effects 0.000 abstract description 3
- 230000000875 corresponding effect Effects 0.000 description 37
- 238000012545 processing Methods 0.000 description 35
- 230000002159 abnormal effect Effects 0.000 description 13
- 230000006870 function Effects 0.000 description 12
- 230000035945 sensitivity Effects 0.000 description 5
- 238000012546 transfer Methods 0.000 description 4
- 238000012790 confirmation Methods 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
Images
Landscapes
- Exposure Control For Cameras (AREA)
- Studio Devices (AREA)
Abstract
Description
本発明は、例えばデジタルスチルカメラ等の撮像装置及び画像生成プログラムに関する。 The present invention relates to an imaging apparatus such as a digital still camera and an image generation program.
従来から、暗部と明部を有する同一の被写体を異なる露出条件で撮影して得られた複数の撮像画像を合成することにより、暗部が黒くつぶれたり明部が白く飛んだりしていない一つの合成画像を生成可能とするハイダイナミックレンジ（以下、「ＨＤＲ」という。）撮影技法が知られている（例えば、特許文献１参照）。 Conventionally, by combining multiple captured images obtained by shooting the same subject with dark and bright areas under different exposure conditions, one composition where the dark areas are not crushed black and the bright areas are not flying white A high dynamic range (hereinafter, referred to as “HDR”) imaging technique capable of generating an image is known (see, for example, Patent Document 1).
すなわち、こうした従来のＨＤＲ撮影技法では、例えば露出条件の異なる２つの撮像画像を得る場合に通常の露出条件から高露出側（短秒側）と低露出側（長秒側）に露出段数を各々異ならせた高露出側の露出条件と低露出側の露出条件で撮影された２つの撮像画像を合成することにより一つの合成画像を生成していた。 That is, in such a conventional HDR imaging technique, for example, when two captured images having different exposure conditions are obtained, the number of exposure steps is set from the normal exposure condition to the high exposure side (short seconds side) and the low exposure side (long seconds side). One composite image is generated by combining two captured images photographed under different exposure conditions on the high exposure side and exposure conditions on the low exposure side.
ところで、撮像装置には、通常、露出値（露出条件）の設定範囲を制限するために定められた露出連動範囲（露出条件設定範囲）が設定されている。加えて、被写体の明部と暗部との輝度の差は、一般に、露出連動範囲の上限側（高輝度の環境下）の方が露出連動範囲の下限側（低輝度の環境下）に比べて大きくなる。このため、露出連動範囲の上限側付近のＨＤＲ処理結果が最適となるように高露出側と低露出側との露出段数の差を設定した場合には、露出連動範囲の上限付近以外の部分（中央部や下限付近）で露出オーバーになってしまうおそれがあるという問題があった。 By the way, an exposure interlocking range (exposure condition setting range) defined to limit the setting range of the exposure value (exposure condition) is normally set in the imaging apparatus. In addition, the difference in brightness between the bright and dark areas of the subject is generally higher at the upper limit of the exposure interlocking range (in a high-brightness environment) than at the lower limit of the exposure interlocking range (in a low-brightness environment). growing. For this reason, when the difference in the number of exposure steps between the high exposure side and the low exposure side is set so that the HDR processing result near the upper limit side of the exposure interlocking range is optimal, the portion other than the vicinity of the upper limit of the exposure interlocking range ( There has been a problem that overexposure may occur at the center or near the lower limit.
本発明は、このような事情に鑑みてなされたものであり、その目的は、暗部と明部とを有する被写体を最適露出条件でハイダイナミックレンジ撮影することができる撮像装置及び画像生成プログラムを提供することにある。 The present invention has been made in view of such circumstances, and an object of the present invention is to provide an imaging apparatus and an image generation program capable of photographing a subject having a dark part and a bright part with high dynamic range under optimum exposure conditions. There is to do.
上記目的を達成するために、本発明の撮像装置は、被写体を測光して輝度値を検出する輝度値検出手段と、該輝度値検出手段により検出された輝度値に基づき、第１露出条件と、該第１露出条件よりも低露出側の第２露出条件とを演算する露出条件演算手段と、設定された閾値よりも低い側の、前記第１露出条件に対応する第１露出値と、前記第２露出条件に対応する第２露出値との差を、設定された閾値よりも高い側の、前記第１露出条件に対応する第１露出値と、前記第２露出条件に対応する第２露出値との差よりも小さくなるように前記第２露出値を調整する露出調整手段と、該露出調整手段の調整後における露出値と対応する露出条件を前記第１露出条件及び前記第２露出条件として設定する露出条件設定手段と、該露出条件設定手段により設定された前記第１露出条件及び前記第２露出条件に従って撮像された撮像画像を合成して一つの合成画像を生成する合成画像生成手段とを備えたことを要旨とする。 In order to achieve the above object, an imaging apparatus according to the present invention includes a luminance value detection unit that performs photometry of a subject and detects a luminance value, and a first exposure condition based on the luminance value detected by the luminance value detection unit. Exposure condition calculation means for calculating a second exposure condition on a lower exposure side than the first exposure condition; a first exposure value corresponding to the first exposure condition on a lower side than a set threshold; The difference between the second exposure value corresponding to the second exposure condition and the first exposure value corresponding to the first exposure condition on the side higher than the set threshold value and the second exposure value corresponding to the second exposure condition. Exposure adjustment means for adjusting the second exposure value so as to be smaller than the difference between the two exposure values, and the exposure conditions corresponding to the exposure values after adjustment of the exposure adjustment means are the first exposure condition and the second exposure value. Exposure condition setting means for setting as an exposure condition, and the exposure condition setting means And summarized in that and a synthesized image generating means for generating one composite image by synthesizing an image captured in accordance with the set first exposure condition and the second exposure condition by.
また、本発明の撮像装置は、被写体を測光して輝度値を検出する輝度値検出手段と、該輝度値検出手段により検出された輝度値に基づき、第１露出条件と、該第１露出条件よりも低露出側の第２露出条件とを演算する露出条件演算手段と、前記第１露出条件に対応する第１露出値と、前記第２露出条件に対応する第２露出値との差が、相対的に明るいシーンよりも、相対的に暗いシーンの方が小さくなるように、前記第２露出値を調整する露出調整手段と、該露出調整手段の調整後における露出値と対応する露出条件を前記第１露出条件及び前記第２露出条件として設定する露出条件設定手段と、該露出条件設定手段により設定された前記第１露出条件及び前記第２露出条件に従って撮像された撮像画像を合成して一つの合成画像を生成する合成画像生成手段とを備えたことを要旨とする。 In addition, the imaging apparatus of the present invention includes a brightness value detection unit that performs photometry of a subject and detects a brightness value, a first exposure condition, and the first exposure condition based on the brightness value detected by the brightness value detection unit. A difference between an exposure condition calculation means for calculating a second exposure condition on the lower exposure side, a first exposure value corresponding to the first exposure condition, and a second exposure value corresponding to the second exposure condition. The exposure adjustment means for adjusting the second exposure value so that the relatively dark scene is smaller than the relatively bright scene, and the exposure condition corresponding to the exposure value after adjustment of the exposure adjustment means Exposure condition setting means for setting the first exposure condition and the second exposure condition as the first exposure condition and the second exposure condition, and a captured image captured according to the first exposure condition and the second exposure condition set by the exposure condition setting means A single composite image And gist that a formed image generating means.
また、本発明の撮像装置において、前記閾値は、露出条件の設定範囲を制限するために定められた露出条件設定範囲内における中間値よりも高い側の値を含む少なくとも１つの値に設定されていることを要旨とする。 In the imaging apparatus of the present invention, the threshold value is set to at least one value including a value higher than an intermediate value within an exposure condition setting range determined to limit the exposure condition setting range. It is a summary.
また、本発明の撮像装置において、前記輝度値検出手段は、前記被写体を複数の分割領域毎に測光して領域毎の輝度値を検出し、前記露出条件演算手段は、前記輝度値検出手段により検出された各輝度値のうちの最大輝度値を含む一群の高輝度値中の一つの輝度値を第１輝度値として、該第１輝度値に基づき前記第１露出条件を演算すると共に、前記各輝度値のうちの最小輝度値を含む一群の低輝度値中の一つの輝度値を第２輝度値として、該第２輝度値に基づき前記第２露出条件を演算することを要旨とする。 In the imaging apparatus according to the aspect of the invention, the luminance value detection unit may measure the subject for each of a plurality of divided regions to detect a luminance value for each region, and the exposure condition calculation unit may include the luminance value detection unit. One luminance value in a group of high luminance values including the maximum luminance value among the detected luminance values is set as a first luminance value, and the first exposure condition is calculated based on the first luminance value, and The gist is to calculate the second exposure condition based on the second luminance value by using one luminance value in a group of low luminance values including the minimum luminance value among the luminance values as the second luminance value.
また、本発明の撮像装置において、前記第１輝度値は前記一群の高輝度値中の前記最大輝度値であり、前記第２輝度値は前記一群の低輝度値中の前記最小輝度値であることを要旨とする。 In the imaging device of the present invention, the first luminance value is the maximum luminance value in the group of high luminance values, and the second luminance value is the minimum luminance value in the group of low luminance values. This is the gist.
また、本発明の画像生成プログラムは、コンピュータに、被写体を測光して輝度値を検出する輝度値検出手順と、該輝度値検出手順により検出された輝度値に基づき、第１露出条件と、該第１露出条件よりも低露出側の第２露出条件とを演算する露出条件演算手順と、設定された閾値よりも低い側の、前記第１露出条件に対応する第１露出値と、前記第２露出条件に対応する第２露出値との差を、設定された閾値よりも高い側の、前記第１露出条件に対応する第１露出値と、前記第２露出条件に対応する第２露出値との差よりも小さくなるように前記第２露出値を調整する露出調整手順と、該露出調整手順の調整後における露出値と対応する露出条件を前記第１露出条件及び前記第２露出条件として設定する露出条件設定手順と、該露出条件設定手順により設定された前記第１露出条件及び前記第２露出条件に従って各々撮像された撮像画像を合成して一つの合成画像を生成する合成画像生成手順とを実行させることを要旨とする。 Further, the image generation program of the present invention causes a computer to measure a luminance value by measuring a subject and detect a luminance value, a first exposure condition based on the luminance value detected by the luminance value detection procedure, An exposure condition calculation procedure for calculating a second exposure condition on a lower exposure side than the first exposure condition; a first exposure value corresponding to the first exposure condition on a side lower than a set threshold; The difference between the second exposure value corresponding to the second exposure condition and the second exposure value corresponding to the second exposure condition and the first exposure value corresponding to the first exposure condition on the side higher than the set threshold value. An exposure adjustment procedure for adjusting the second exposure value so as to be smaller than a difference between the exposure value and an exposure condition corresponding to the exposure value after the adjustment of the exposure adjustment procedure, the first exposure condition and the second exposure condition Exposure condition setting procedure to be set as the exposure condition And summarized in that to execute the composite image generating procedure for generating one composite image by combining each captured imaged image according to the set the first exposure condition and the second exposure condition by a constant step.
また、本発明の画像生成プログラムは、コンピュータに、被写体を測光して輝度値を検出する輝度値検出手順と、該輝度値検出手順により検出された輝度値に基づき、第１露出条件と、該第１露出条件よりも低露出側の第２露出条件とを演算する露出条件演算手順と、前記第１露出条件に対応する第１露出値と、前記第２露出条件に対応する第２露出値との差が、相対的に明るいシーンよりも、相対的に暗いシーンの方が小さくなるように、前記第２露出値を調整する露出調整手順と、該露出調整手順の調整後における露出値と対応する露出条件を前記第１露出条件及び前記第２露出条件として設定する露出条件設定手順と、該露出条件設定手順により設定された前記第１露出条件及び前記第２露出条件に従って撮像された撮像画像を合成して一つの合成画像を生成する合成画像生成手順とを実行させることを要旨とする。 Further, the image generation program of the present invention causes a computer to measure a luminance value by measuring a subject and detect a luminance value, a first exposure condition based on the luminance value detected by the luminance value detection procedure, An exposure condition calculation procedure for calculating a second exposure condition on a lower exposure side than the first exposure condition, a first exposure value corresponding to the first exposure condition, and a second exposure value corresponding to the second exposure condition And an exposure adjustment procedure for adjusting the second exposure value so that a relatively dark scene is smaller than a relatively bright scene, and an exposure value after adjustment of the exposure adjustment procedure, An exposure condition setting procedure for setting corresponding exposure conditions as the first exposure condition and the second exposure condition, and an image picked up according to the first exposure condition and the second exposure condition set by the exposure condition setting procedure Combine the images And summarized in that to execute the composite image generating step of generating a single composite image.
本発明によれば、暗部と明部とを有する被写体を最適露出条件でハイダイナミックレンジ撮影することができる。 According to the present invention, a subject having a dark part and a bright part can be photographed with a high dynamic range under an optimum exposure condition.
以下、本発明を撮像装置としてのデジタルスチルカメラ（以下、「カメラ」という。）及びこのカメラを用いて被写体をハイダイナミックレンジ（ＨＤＲ）撮影する場合の撮像方法に具体化した実施形態を図１〜図４に基づいて説明する。 FIG. 1 shows an embodiment in which the present invention is embodied in a digital still camera (hereinafter referred to as “camera”) as an imaging apparatus and an imaging method in the case of photographing a subject with high dynamic range (HDR) using the camera. Description will be made with reference to FIG.
図１に示すように、カメラ１１は、ズームレンズなどの複数のレンズからなるレンズ部１２（図１では図面の簡略化のため１つのレンズのみ図示）と、レンズ部１２を通過した被写体光の光量を調整する絞り１３と、その絞り１３を通過した被写体光を撮像面となる入射側の受光面１４aに結像させる撮像素子１４とを有している。そして、撮像素子１４
の出力側には、ＡＦＥ（Analog Front End）１５と画像処理回路１６とが接続されると共に、その画像処理回路１６に対してＭＰＵ（Micro Processing Unit）１７がデータバス
１８を介して接続されている。
As shown in FIG. 1, the
An AFE (Analog Front End) 15 and an
また、ＭＰＵ１７には、カメラ１１の制御プログラムを記憶した不揮発性メモリ１９、バッファメモリとして機能するＲＡＭ２０、表示手段として機能する液晶表示のモニタ２１、及び記録媒体であるメモリカード２２を挿脱可能なカードＩ／Ｆ（Inter-Face）２３がデータバス１８を介して接続されている。さらに、カメラ本体（図示略）には、そのカメラ１１の使用者により操作されるモード切り替えボタンやレリーズボタン等からなる操作部材２４が、ＭＰＵ１７に対して各々の操作信号（モード切替信号や半押し操作信号など）をデータ通信可能に設けられている。
In addition, a
撮像素子１４は、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサ、又はＣＣＤ（Charge Coupled Device）イメージセンサからなり、電子シャッター機能を有すると共に、その受光面１４ａには多数の受光素子（図示略）が二次元的に配列されている。そして、撮像素子１４は、その受光面１４ａに結像した被写体像に対応した信号電荷を蓄積し、その蓄積した信号電荷を画像データの元となる画素信号と呼ばれるアナログ信号でＡＦＥ１５に出力する。
The
ＡＦＥ１５は、撮像素子１４から入力したアナログ信号の画素信号を所定のタイミングでサンプリング（相関二重サンプリング）し、例えばＩＳＯ感度に基づく所定信号レベルとなるように増幅する信号処理部（図示略）と、その増幅後の画素信号をデジタル信号に変換するＡ／Ｄ変換部（図示略）とを有している。そして、ＡＦＥ１５は、アナログ信号の画素信号をＡ／Ｄ変換部でデジタル化することにより生成した画像データを画像処理回路１６に出力する。
The
画像処理回路１６は、ＡＦＥ１５から入力した画像データに対して、ＭＰＵ１７からの制御信号に基づき各種の画像処理を施す。そして、画像処理回路１６は、そのように画像処理を施した画像データを、ＲＡＭ２０に一旦記憶させると共に、モニタ２１にスルー画像として表示させる。なお、後述するＨＤＲ撮影モードで合成画像を生成する際には、ＲＡＭ２０に記憶した複数の画像を読み出して合成し、再度ＲＡＭ２０に記憶する。また、レリーズボタンが全押し操作された場合は、そのときの画像データと対応する画像をモニタ２１に確認用画像として表示させる一方、例えばＪＰＥＧ圧縮のためのフォーマット処理等の所定の画像処理を施した後に、メモリカード２２に画像ファイルとして記録させる。
The
不揮発性メモリ１９には、カメラ１１の制御プログラム、カメラ１１における露出条件である露出値（Exposure Value；ＥＶ値）の設定範囲を制限するために定められた露出連動範囲（露出条件設定範囲）の上限値ＲＪ及び下限値ＲＫと、後述する異常閾値、段数閾値及び設定閾値Ｓとが記憶されている（図４参照）。
The
ＭＰＵ１７は、不揮発性メモリ１９に記憶された画像生成プログラムなどの制御プログラムに基づきカメラ１１における各種の処理動作（例えばＨＤＲ撮影処理等）を統括的に制御する。そして、データバス１８は、そうしたＭＰＵ１７の制御に伴う各種データの伝送路として機能する。また、操作部材２４におけるモード切り替えボタンは、カメラ１１の動作モードを切り替える場合に操作されるボタンであって、例えば撮影モードを通常撮影モードとＨＤＲ撮影モードとの間で切り替える場合に操作される。一方、レリーズボタンは、カメラ１１の動作モードが撮影モードである場合において被写体を撮影するときに押し下げ操作される。
The MPU 17 comprehensively controls various processing operations (for example, HDR imaging processing) in the
そして、このカメラ１１では、通常撮影モードにおいて操作部材２４のレリーズボタンが半押し操作された段階で被写体に対する焦点合わせのためのＡＦ（Auto Focus）処理と露出調整のためのＡＥ（Auto Exposure）処理が実行され、その後にレリーズボタンが全押し操作された段階で画像の生成処理が実行されるようになっている。一方、このカメラ１１では、ＨＤＲ撮影モードにおいて操作部材２４のレリーズボタンが半押し操作されたときは、通常撮影モードの場合のＡＥ処理及び合成画像生成処理とは異なるＨＤＲ撮影用のＡＥ処理及び合成画像生成処理が実行されるようになっている。
In the
すなわち、ＨＤＲ撮影モードの場合には、図２に示す画像２５における被写体のように暗部と明部とを有する同一の被写体をＨＤＲ撮影する際に必要な高露出側の第１露出条件と低露出側の第２露出条件を決定するためのＡＥ処理が実行される。因みに、図２の画像２５は、太陽２６が山２７の左側上方に位置しているために山麓にある湖２８の湖面が湖畔の立木２９の日陰になって暗くなった風景を被写体とするものである。そのため、この画像２５では、明るい太陽２６が領域内に位置する領域Ａと領域Ｅは明部になる一方、湖面が日陰の湖２８が領域内に位置する領域Ｐと太陽２６を背にした立木２９が領域内に位置する領域Ｌは暗部となる。
That is, in the HDR shooting mode, the first exposure condition on the high exposure side and the low exposure necessary for HDR shooting of the same subject having a dark part and a bright part like the subject in the
なお、図２に示す画像２５の被写体からの光を領域Ａ〜Ｐ毎に測光して領域Ａ〜Ｐ毎の輝度値を検出した場合は、左上隅の領域Ａ内に太陽２６の大半が位置しているため、この左上隅の領域Ａの輝度値が最大輝度値となる。そして、その領域Ａの直ぐ下の領域Ｅ内には太陽２６の一部分が位置しているため、この領域Ｅの輝度値は最大輝度値に準じる高輝度の輝度値となる。したがって、この画像２５内の被写体では、領域Ａの輝度値と領域Ｅの輝度値により最大輝度値を含む一群の高輝度値が構成されている。
When the light from the subject of the
その一方、右下隅の領域Ｐ内には日陰で湖面が暗い湖２８が位置しているため、この右下隅の領域Ｐの輝度値が最小輝度値となる。そして、この領域Ｐの直ぐ上の領域Ｌ内には湖畔の立木２９が太陽２６からの光を背にした（具体的には左側後方から受けた）状態で位置しているため、この領域Ｌの輝度値は最小輝度値に準じる低輝度の輝度値となる。したがって、この画像２５内の被写体では、領域Ｐの輝度値と領域Ｌの輝度値により最小輝度値を含む一群の低輝度値が構成されている。
On the other hand, since the
そして、本実施形態の場合は、暗部と明部とを有する被写体画像における領域Ａ〜Ｐ毎の輝度値に基づき第１露出条件と第２露出条件が決定されると、その暗部（領域Ｐ，Ｌ）と明部（領域Ａ，Ｅ）とを有する同一の被写体が第１露出条件と第２露出条件とで連続撮影されるようになっている。因みに、本実施形態の場合は、撮像素子１４の電子シャッター速度が調整されることによりＨＤＲ撮影用のＡＥ処理が実行される。具体的には、連続撮影のための電子シャッター速度として、第１露出条件となる高速側の第１シャッター速度と、第２露出条件となる低速側の第２シャッター速度が設定されるようになっている。
In the case of the present embodiment, when the first exposure condition and the second exposure condition are determined based on the luminance value for each of the areas A to P in the subject image having the dark part and the bright part, the dark part (area P, L) and the same subject having bright portions (areas A and E) are continuously photographed under the first exposure condition and the second exposure condition. Incidentally, in the case of the present embodiment, the AE process for HDR imaging is executed by adjusting the electronic shutter speed of the
そして、その後にレリーズボタンが全押し操作されたときには、暗部（領域Ｐ，Ｌ）と明部（領域Ａ，Ｅ）とを有する同一の被写体を第１シャッター速度（第１露出条件）と第２シャッター速度（第２露出条件）とで連続撮影して得た２つの撮像画像を合成することによって一つの合成画像が生成されるようになっている。 After that, when the release button is fully pressed, the same subject having the dark part (areas P and L) and the bright part (areas A and E) is set to the first shutter speed (first exposure condition) and the second. One composite image is generated by combining two captured images obtained by continuous shooting at the shutter speed (second exposure condition).
そこで次に、このカメラ１１を用いて暗部と明部とを有する被写体をＨＤＲ撮影する際にＭＰＵ１７が実行するＨＤＲ撮影処理ルーチン（画像生成プログラム）の概要について、図３のフローチャートを参照しながら以下説明する。
Therefore, next, an outline of an HDR imaging processing routine (image generation program) executed by the
さて、ＭＰＵ１７は、カメラ１１の動作モードが撮影モードである場合において、操作部材２４のモード切り替えボタンが操作されることにより、撮影モードが通常撮影モードからＨＤＲ撮影モードに切り替えられると、図３のフローチャートに示すＨＤＲ撮影処理ルーチンを開始する。
When the shooting mode is switched from the normal shooting mode to the HDR shooting mode by operating the mode switching button of the
そして先ず、ステップＳ１１において、ＭＰＵ１７は、操作部材２４のレリーズボタンが半押しされたか否かを判定する。ステップＳ１１の判定結果が否定判定（ステップＳ１１＝ＮＯ）である場合、ＭＰＵ１７は、このステップＳ１１の判定を周期的に繰り返す。そして、このステップＳ１１の判定結果が肯定判定（ステップＳ１１＝ＹＥＳ）になると、ＭＰＵ１７は、その処理を次のステップＳ１２に移行する。
First, in step S11, the
そして、次のステップＳ１２において、ＭＰＵ１７は、その時点でモニタ２１にスルー画像として表示されている被写体画像における領域Ａ〜Ｐ毎の輝度値を検出する。具体的には、撮像素子１４で得られたＲ，Ｇ，Ｂの画像データから輝度信号Ｙと色差信号Ｃｒ，Ｃｂとを分離した上で、その輝度信号Ｙを領域Ａ〜Ｐ毎に積算することにより領域Ａ〜Ｐ毎の輝度値を検出する。この点で、ＭＰＵ１７は、輝度値検出手順を実行する輝度値検出手段として機能する。そして、全ての領域Ａ〜Ｐにおける輝度値を検出すると、ＭＰＵ１７は、検出した各輝度値を領域Ａ〜Ｐ毎に対応させてＲＡＭ２０に一時記憶させた後、その処理を次のステップＳ１３に移行する。
In the next step S12, the
そして、次のステップＳ１３において、ＭＰＵ１７は、先のステップＳ１２で検出した領域Ａ〜Ｐ毎の各輝度値の中に異常値があるか否かを判定する。具体的には、検出された全ての輝度値の平均値を算出すると共に、その平均値との数値差が予め不揮発性メモリ１９に記憶した異常閾値を超える輝度値（異常値）があるか否かを判定する。そして、ステップＳ１３の判定結果が肯定判定（ステップＳ１３＝ＹＥＳ）である場合、ＭＰＵ１７は、その処理を次のステップＳ１４に移行する。
In the next step S13, the
そして、次のステップＳ１４において、ＭＰＵ１７は、先のステップＳ１２で検出した領域Ａ〜Ｐ毎の各輝度値の中からステップＳ１３で異常値と判定された輝度値を除外し、その処理を次のステップＳ１５に移行する。一方、ステップＳ１３の判定結果が否定判定（ステップＳ１３＝ＮＯ）である場合、ＭＰＵ１７は、ステップＳ１４を経由することなく、その処理をステップＳ１５に直接移行する。
Then, in the next step S14, the
そして、次のステップＳ１５において、ＭＰＵ１７は、先のステップＳ１４で除外された後の残りの各輝度値の中から第１露出条件と第２露出条件とを決定するための輝度値となる第１輝度値と第２輝度値とを選択する。本実施形態の場合は、先のステップＳ１４で異常値が除外された後の残りの各輝度値のうち輝度が最大の一つの高輝度値が第１輝度値に選択されると共に、残りの各輝度値のうち輝度が最小の一つの低輝度値が第２輝度値に選択される。その後、ＭＰＵ１７は、これらの第１輝度値及び第２輝度値をＲＡＭ２０に一時記憶させた後、その処理を次のステップＳ１６に移行する。
Then, in the next step S15, the
そして、次のステップＳ１６において、ＭＰＵ１７は、第１輝度値（例えば、領域Ａの最大輝度値）及び第２輝度値（例えば、領域Ｐの最小輝度値）に基づき第１露出条件及び第２露出条件を演算する。この点で、ＭＰＵ１７は、露出条件演算手順を実行する露出条件演算手段として機能する。そして、このステップＳ１６の処理が終了すると、ＭＰＵ１７は、その処理を次のステップＳ１７に移行する。
In the next step S16, the
そして、次のステップＳ１７において、ＭＰＵ１７は、第１輝度値（例えば、領域Ａの最大輝度値）に基づき算出される第１露出条件が対応する第１露出段数と第２輝度値（例えば、領域Ｐの最小輝度値）に基づき算出される第２露出条件が対応する第２露出段数との段数差が、予め不揮発性メモリ１９に記憶した段数閾値（本実施形態では３段）以上であるか否かを判定する。そして、このステップＳ１７の判定結果が肯定判定（ステップＳ１７＝ＹＥＳ）である場合、ＭＰＵ１７は、その処理を次のステップＳ１８に移行する。
Then, in the next step S17, the
そして、次のステップＳ１８において、ＭＰＵ１７は、図４に示すように、露出値が、予め不揮発性メモリ１９に記憶された設定閾値Ｓよりも低い側において第１露出段数と第２露出段数との段数差が段数閾値未満（本実施形態では２段）となるように、第２露出段数を調整する。この点で、ＭＰＵ１７は、露出調整手順を実行する露出調整手段として機能する。
Then, in the next step S18, as shown in FIG. 4, the
具体的には、第１輝度値に基づいて算出される第１露出条件が対応する第１露出段数はそのままで、第２輝度値に基づき算出される第２露出条件が対応する第２露出段数の方を、設定閾値Ｓと露出連動範囲の下限値ＲＫとの間で第１露出段数に近づける。したがって、露出連動範囲内において、設定閾値Ｓよりも低い側における第１露出条件が対応する第１露出段数と第２露出条件が対応する第２露出段数との段数差（２段）が、設定閾値Ｓよりも高い側における第１露出条件が対応する第１露出段数と第２露出条件が対応する第２露出段数との段数差（３段）よりも小さくなる。なお、設定閾値Ｓは、露出連動範囲内における上限値ＲＪと下限値ＲＫとの中間値よりも高い側の１つの値（本実施形態ではＥＶ値１２）に設定されている。
Specifically, the first exposure step number corresponding to the first exposure condition calculated based on the first luminance value is maintained, and the second exposure step number corresponding to the second exposure condition calculated based on the second luminance value is maintained. This is made closer to the first exposure step number between the set threshold S and the lower limit value RK of the exposure interlocking range. Accordingly, in the exposure interlocking range, the difference in the number of steps (two steps) between the first exposure step number corresponding to the first exposure condition and the second exposure step number corresponding to the second exposure condition on the side lower than the set threshold S is set. The difference is smaller than the difference (three steps) between the number of first exposure steps corresponding to the first exposure condition on the side higher than the threshold S and the number of second exposure steps corresponding to the second exposure condition. The setting threshold S is set to one value (
そして、このように設定閾値Ｓよりも低い側において第１露出段数と第２露出段数との段数差が２段となるように調整された後の第２露出段数をＲＡＭ２０に一時記憶させた後、ＭＰＵ１７は、その処理を次のステップＳ１９に移行する。一方、先のステップＳ１７の判定結果が否定判定（ステップＳ１７＝ＮＯ）である場合、ＭＰＵ１７は、ステップＳ１８を経由することなく、その処理をステップＳ１９に直接移行する。
After the second exposure step number after the adjustment so that the difference in the step number between the first exposure step number and the second exposure step number is two on the side lower than the set threshold value S is temporarily stored in the
そして、次のステップＳ１９において、ＭＰＵ１７は、段数差が設定閾値Ｓを境に変化する関係にある第１露出段数と第２露出段数とに基づき第１露出条件となる第１シャッター速度と第２露出条件となる第２シャッター速度とを連続撮影時における撮像素子１４における電子シャッター速度として設定する。この点で、ＭＰＵ１７は、露出条件設定手順を実行する露出条件設定手段として機能する。そして、このステップＳ１９の処理が終了すると、ＭＰＵ１７は、その処理を次のステップＳ２０に移行する。
Then, in the next step S19, the
そして、次のステップＳ２０において、ＭＰＵ１７は、操作部材２４のレリーズボタンが全押しされたか否かを判定する。ステップＳ２０の判定結果が否定判定（ステップＳ２０＝ＮＯ）である場合、ＭＰＵ１７は、このステップＳ２０の判定を周期的に繰り返す。そして、ステップＳ２０の判定結果が肯定判定（ステップＳ２０＝ＹＥＳ）になると、ＭＰＵ１７は、その処理を次のステップＳ２１に移行する。
In the next step S20, the
そして、次のステップＳ２１において、ＭＰＵ１７は、撮像素子１４の電子シャッター機能により被写体を第１シャッター速度と第２シャッター速度で連続撮影して得られた２つの撮像画像の画像データを画像処理回路１６において合成させることにより一つの合成画像を生成する。この点で、ＭＰＵ１７と画像処理回路１６は、合成画像生成手順を実行する合成画像生成手段として機能する。そして、そのような画像処理により生成した合成画像をモニタ２１に確認用画像として表示させた後、その画像の画像データをファイル化してメモリカード２２に記憶させると、ＭＰＵ１７は、以上のＨＤＲ撮影処理ルーチンを終了する。
In the next step S21, the
なお、ＨＤＲ撮影モードで複数の画像の合成を行なう際には、合成する画像間のズレを検出し、被写体像が一致するように少なくとも一枚の画像をシフトさせて合成させる。画像間のズレは、例えば、画像間の動きベクトルを解析して検出してもよく、その他の方法を用いてもよい。 When combining a plurality of images in the HDR shooting mode, a shift between images to be combined is detected, and at least one image is shifted and combined so that the subject images match. For example, the displacement between images may be detected by analyzing a motion vector between images, or other methods may be used.
次に、以上のように構成された本実施形態のカメラ１１の作用について、特に、暗部と明部とを有する被写体をＨＤＲ撮影する場合の撮像方法に着目して以下説明する。
なお、説明の前提として、この場合にカメラ１１で撮影する画像は図２に示す風景の画像２５であって、既述したように、その画像２５における被写体画像は暗部と明部を有しているものとする。そして、その被写体画像を１６個の領域Ａ〜Ｐに分割した場合における領域Ａ〜Ｐ毎の輝度値については、領域内に太陽２６の大半が位置する左上隅の領域Ａの輝度値が最大輝度値である一方、領域内に日陰で湖面が暗い湖２８が位置する右下隅の領域Ｐの輝度値が最小輝度値であるものとする。さらに、操作部材２４におけるモード切り替えボタンが操作されたことにより撮影モードは通常撮影モードからＨＤＲ撮影モードに切り替えられているものとする。
Next, the operation of the
Note that, as a premise of the description, the image captured by the
さて、以上のような前提の下、カメラ１１のレンズ部１２を被写体となる山２７の方向に向けると、山麓に湖２８と立木２９がある山２７の稜線の左側上方に太陽２６が昇った状態にある風景がスルー画像としてモニタ２１に表示される。そして、その状態で、カメラ１１の使用者により、レリーズボタンが半押しされると、ＡＦ処理が実行されると共に、ＨＤＲ撮影用のＡＥ処理として電子シャッター機能を有する撮像素子１４における連続撮影時のシャッター速度が設定される。
Under the above premise, when the
すなわち、被写体画像における各領域Ａ〜Ｐの輝度値のうち領域Ａの輝度値である最大輝度値に基づき高速側の第１シャッター速度（高露出側の第1露出条件）が設定される。また、被写体画像における各領域Ａ〜Ｐの輝度値のうち領域Ｐの輝度値である最小輝度値に基づき低速側の第２シャッター速度（低露出側の第２露出条件）が設定される。 That is, the first shutter speed on the high speed side (first exposure condition on the high exposure side) is set based on the maximum luminance value that is the luminance value of the area A among the luminance values of the areas A to P in the subject image. Further, the second shutter speed on the low speed side (second exposure condition on the low exposure side) is set based on the minimum luminance value that is the luminance value of the area P among the luminance values of the areas A to P in the subject image.
なお、この場合における第１シャッター速度の露出段数と第２シャッター速度の露出段数との段数差が段数閾値（３段）以上であると、その段数差が露出連動範囲内における設定閾値ＳよりもＥＶ値が低い側で段数閾値未満（２段）となるように、第２シャッター速度の露出段数が第１シャッター速度の露出段数に近づけられる。そして、そのような段数差の調整が行なわれた後の露出段数と対応した各シャッター速度が連続撮影用の第１シャッター速度及び第２シャッター速度として設定される。 In this case, if the step difference between the number of exposure steps of the first shutter speed and the number of exposure steps of the second shutter speed is equal to or greater than the step number threshold (three steps), the difference in step number is larger than the set threshold S in the exposure interlocking range The exposure step number at the second shutter speed is brought closer to the exposure step number at the first shutter speed so that the EV value is less than the step number threshold (two steps) on the low side. Then, each shutter speed corresponding to the number of exposure steps after such adjustment of the step number difference is set as the first shutter speed and the second shutter speed for continuous shooting.
ここで、例えば、第１シャッター速度の露出段数と第２シャッター速度の露出段数との段数差が露出連動範囲内の全域に亘って３段であった場合には、露出連動範囲における設定閾値Ｓよりも高い側（輝度値が高い側）の領域では適正露出値となるが、設定閾値Ｓよりも低い側（輝度値が中程度〜低い側）の領域では露出オーバーとなる可能性がある。これは、被写体画像の輝度値が高い場合（被写体画像の明るさが明るい場合）における明部と暗部との差に比べて、被写体画像の輝度値が中程度〜低い場合（被写体画像の明るさが通常〜暗い場合）における明部と暗部との差の方が小さいからである。 Here, for example, when the difference in the number of steps between the exposure step number of the first shutter speed and the exposure step number of the second shutter speed is three steps throughout the exposure interlocking range, the set threshold value S in the exposure interlocking range. In the region on the higher side (the luminance value is higher), the appropriate exposure value is obtained, but in the region on the lower side (the luminance value is in the middle to lower side), there is a possibility that the exposure is overexposed. This is because the brightness value of the subject image is moderate to low (the brightness of the subject image) compared to the difference between the bright part and the dark part when the brightness value of the subject image is high (when the brightness of the subject image is bright). This is because the difference between the bright part and the dark part in the case of normal to dark is smaller.
この点、本実施形態では、上述のように露出連動範囲内における設定閾値ＳよりもＥＶ値が低い側で第２シャッター速度の露出段数を第１シャッター速度の露出段数に近づけることによってこれら両露出段数の段数差の調整が行われるため、被写体画像の輝度値が中〜低い場合でも、露出オーバーになることが効果的に抑制される。 In this regard, in the present embodiment, as described above, both exposures are performed by bringing the exposure step number of the second shutter speed closer to the exposure step number of the first shutter speed on the side where the EV value is lower than the set threshold value S within the exposure interlocking range. Since the difference in the number of steps is adjusted, overexposure is effectively suppressed even when the luminance value of the subject image is medium to low.
また、シャッター速度（露出条件）の算出基礎となる各領域Ａ〜Ｐの輝度値に関して、全領域の平均輝度値との数値差が異常閾値を超える輝度値を検出したときには、その領域の輝度値はＨＤＲ撮影に用いるシャッター速度の算出基礎には不適な異常値であるとして除外される。そして、こうした異常値を除外した残りの各輝度値に基づき第１シャッター速度及び第２シャッター速度が決定される。 In addition, regarding the luminance value of each of the areas A to P, which is the basis for calculating the shutter speed (exposure condition), when a luminance value with a numerical difference from the average luminance value of all areas exceeding the abnormal threshold is detected, the luminance value of that area Are excluded as abnormal values that are inappropriate for the basis of calculation of the shutter speed used for HDR imaging. Then, the first shutter speed and the second shutter speed are determined based on the remaining luminance values excluding such abnormal values.
そして、このように第１シャッター速度及び第２シャッター速度が設定された後において、カメラ１１のレリーズボタンが全押しされると、被写体画像が第１シャッター速度と第２シャッター速度で連続撮影される。その際、第１シャッター速度は、その被写体画像では明部となる領域Ａの輝度値（最大輝度値）に適合した露出条件となるシャッター速度であるため、かかる第１シャッター速度で撮影された第１撮像画像には白とびの発生もほとんど無い。同様に、第２シャッター速度は、その被写体画像で暗部となる領域Ｐの輝度値（最小輝度値）に適合した露出条件となるシャッター速度であるため、かかる第２シャッター速度で撮影された第２撮像画像には黒つぶれの発生もほとんど無い。
Then, after the first shutter speed and the second shutter speed are set as described above, when the release button of the
そして、そのような連続撮影により得られた第１撮像画像と第２撮影画像が合成された一つの合成画像がＭＰＵ１７の制御に基づき画像処理回路１６において生成される。すると、暗部が黒つぶれすることなく、また、明部が白飛びしていない一つの合成画像が生成され、その合成画像がメモリカード２２に記憶保存される。
Then, one composite image obtained by combining the first captured image and the second captured image obtained by such continuous shooting is generated in the
以上のような本実施形態によれば、以下のような効果を得ることができる。
（１）第１シャッター速度の露出段数と第２シャッター速度の露出段数との段数差は、設定閾値Ｓよりも露出値（ＥＶ値）が低い側の方が、設定閾値Ｓよりも露出値が高い側よりも小さくなるように、第２シャッター速度の露出段数を第１シャッター速度の露出段数に近づけることで調整される。このため、設定閾値Ｓを適宜変更することで、暗部と明部とを有する被写体画像の輝度の高さにかかわらず、その輝度（明るさ）に応じた最適露出条件でＨＤＲ撮影することができる。
According to the present embodiment as described above, the following effects can be obtained.
(1) The difference between the number of exposure steps at the first shutter speed and the number of exposure steps at the second shutter speed is such that the exposure value (EV value) lower than the setting threshold S has an exposure value lower than the setting threshold S. Adjustment is made by bringing the number of exposure steps of the second shutter speed closer to the number of exposure steps of the first shutter speed so as to be smaller than the higher side. For this reason, by appropriately changing the setting threshold S, HDR shooting can be performed under the optimum exposure condition corresponding to the luminance (brightness) regardless of the luminance level of the subject image having the dark part and the bright part. .
（２）設定閾値Ｓが露出連動範囲内における上限値ＲＪと下限値ＲＫとの中間値よりも露出値が高い側に設定された１つの値に設定されているため、被写体画像の輝度値が高い場合だけでなく中程度〜低い場合でも、露出オーバーになることを効果的に抑制することができる。 (2) Since the set threshold value S is set to one value that is set to a higher exposure value than the intermediate value between the upper limit value RJ and the lower limit value RK in the exposure interlocking range, the luminance value of the subject image is Overexposure can be effectively suppressed not only in the case of high but also in the case of medium to low.
（３）被写体の画像における実際の輝度値（第１輝度値及び第２輝度値）に基づきＨＤＲ撮影用の各露出条件として高速側の第１シャッター速度及び低速側の第２シャッター速度を設定しているので、暗部と明部とを有する被写体を暗部と明部との明暗比に応じた最適露出条件でＨＤＲ撮影することができる。 (3) The first shutter speed on the high speed side and the second shutter speed on the low speed side are set as the exposure conditions for HDR shooting based on the actual luminance values (first luminance value and second luminance value) in the image of the subject. Therefore, it is possible to perform HDR imaging of an object having a dark part and a bright part under an optimal exposure condition corresponding to the contrast ratio between the dark part and the bright part.
（４）暗部（領域Ｐ）と明部（領域Ａ）とを有する被写体の画像における複数の分割領域Ａ〜Ｐ毎の輝度値を検出した上で、明部の輝度値に基づき高露出用の第１露出条件を設定すると共に、暗部の輝度値に基づき低露出用の第２露出条件を設定している。そのため、暗部と明部とを有する被写体を暗部と明部との実際の明暗比に応じた最適露出条件で、より一層好適にＨＤＲ撮影することができる。 (4) After detecting the luminance value for each of the plurality of divided areas A to P in the image of the subject having the dark part (area P) and the bright part (area A), the high-exposure value is obtained based on the luminance value of the bright part. The first exposure condition is set, and the second exposure condition for low exposure is set based on the luminance value of the dark part. Therefore, it is possible to more suitably perform HDR shooting of an object having a dark part and a bright part under an optimal exposure condition corresponding to an actual light / dark ratio between the dark part and the bright part.
（５）高露出側の第１露出条件の算出基礎となる第１輝度値として最も明るい領域Ａの輝度値である最大輝度値を用いると共に、低露出側の第２露出条件の算出基礎となる第２輝度値として最も暗い領域Ｐの輝度値である最小輝度値を用いるようにしている。そのため、明暗比に応じた露出条件の設定を簡便に行なうことができる。 (5) The maximum luminance value, which is the luminance value of the brightest region A, is used as the first luminance value that is the basis for calculating the first exposure condition on the high exposure side, and is the basis for calculating the second exposure condition on the low exposure side. The minimum luminance value that is the luminance value of the darkest region P is used as the second luminance value. Therefore, it is possible to easily set the exposure condition according to the light / dark ratio.
（６）領域Ａ〜Ｐ毎の輝度値を検出した場合において、平均輝度値から大きく乖離した異常値の輝度値がある場合には、そうした異常な輝度値を除外し、残りの各輝度値中から第１及び第２露出条件の算出基礎となる第１及び第２輝度値を選択するようにしている。そのため、異常な露出条件を設定してしまう虞を抑制することができる。 (6) When the luminance value for each of the regions A to P is detected, if there is an abnormal luminance value greatly deviating from the average luminance value, such abnormal luminance value is excluded, and the remaining luminance values The first and second luminance values that are the basis for calculating the first and second exposure conditions are selected. Therefore, the possibility of setting abnormal exposure conditions can be suppressed.
（７）本実施形態では、露出条件である露出値を決定する場合の三要素であるシャッター速度、絞り値及びＩＳＯ感度のうちシャッター速度で露出段数を設定するようにしている。そのため、絞り値やＩＳＯ感度で露出条件を設定する場合との対比において、被写界深度が変わったり色かけが生じたりする虞を抑制しつつ簡単に露出条件を設定することができる。 (7) In this embodiment, the number of exposure steps is set by the shutter speed among the shutter speed, aperture value, and ISO sensitivity, which are the three elements when determining the exposure value that is the exposure condition. Therefore, in contrast to the case where the exposure condition is set based on the aperture value or ISO sensitivity, the exposure condition can be easily set while suppressing the possibility that the depth of field changes or coloration occurs.
なお、上記実施形態は以下のような別の実施形態に変更してもよい。
・第１露出条件及び第２露出条件は、被写体画像の平均輝度値に対応する露出段数（露出値）に対して予め設定した露出段数分だけ加算及び減算した各露出段数にそれぞれ対応させて設定するようにしてもよい。すなわち、被写体画像の暗部及び明部のそれぞれの輝度値を実測することなく、被写体画像の平均輝度値に基づいて該被写体画像の暗部及び明部の露出段数をそれぞれ機械的に算出し、その算出した各露出段数に基づき第１露出条件及び第２露出条件をそれぞれ設定するようにしてもよい。
The above embodiment may be changed to another embodiment as described below.
The first exposure condition and the second exposure condition are set to correspond to each exposure step number obtained by adding and subtracting a predetermined exposure step number to the exposure step number (exposure value) corresponding to the average luminance value of the subject image. You may make it do. That is, without actually measuring the luminance values of the dark and bright portions of the subject image, the number of exposure steps of the dark and bright portions of the subject image is mechanically calculated based on the average luminance value of the subject image, and the calculation is performed. The first exposure condition and the second exposure condition may be set based on each exposure step number.
・第１露出条件及び第２露出条件を設定する場合の基礎値となる第１輝度値及び第２輝度値としては、最大輝度値及び最小輝度値以外の高輝度値及び低輝度値を用いてもよい。例えば、第１輝度値としては明部のうちで２番目に明るい領域Ｅの輝度値（高輝度値）を用いると共に、第２輝度値としては暗部のうちで２番目に暗い領域Ｌの輝度値（低輝度値）を用いるようにしてもよい。要は、最大輝度値を含む一群の高輝度値中の一つの輝度値を第１輝度値にすると共に、最小輝度値を含む一群の低輝度値中の一つの輝度値を第２輝度値として、高露出側の第１露出条件及び低露出側の第２露出条件を設定するようにしてもよい。 A high luminance value and a low luminance value other than the maximum luminance value and the minimum luminance value are used as the first luminance value and the second luminance value, which are basic values when the first exposure condition and the second exposure condition are set. Also good. For example, the luminance value of the second brightest region E (high luminance value) in the bright portion is used as the first luminance value, and the luminance value of the second darkest region L in the dark portion is used as the second luminance value. (Low luminance value) may be used. In short, one luminance value in a group of high luminance values including the maximum luminance value is set as the first luminance value, and one luminance value in the group of low luminance values including the minimum luminance value is set as the second luminance value. The first exposure condition on the high exposure side and the second exposure condition on the low exposure side may be set.
・被写体画像の領域Ａ〜Ｐ毎に検出された各輝度値のうちに異常な輝度値があるか否かを異常閾値との対比により判別する工程を省略してもよい。すなわち、ＨＤＲ撮影処理ルーチンにおいて、ステップＳ１３及びステップＳ１４を省略してもよい。 The step of discriminating whether or not there is an abnormal luminance value among the luminance values detected for each of the regions A to P of the subject image may be omitted. That is, step S13 and step S14 may be omitted in the HDR imaging processing routine.
・ＨＤＲ撮影処理ルーチンのステップＳ１７において、段数閾値は３段以外の任意の段数（例えば、３段、４段、６段など）に設定されたものであってもよい。この場合、設定閾値Ｓを境に調整する第２露出条件の第２露出段数も、段数閾値に合わせて適宜設定する必要がある。 In step S17 of the HDR imaging processing routine, the step number threshold may be set to an arbitrary number of steps (for example, 3, 4, 6, etc.) other than 3. In this case, the second exposure step number of the second exposure condition that is adjusted with the setting threshold S as a boundary also needs to be set appropriately according to the step number threshold value.
・ＨＤＲ撮影処理ルーチンのステップＳ１８において、第２露出条件の第２露出段数を設定閾値Ｓから露出連動範囲の下限値ＲＫまでの間で段階的に第１露出条件の第１露出段数に近づけるようにしてもよい。 In step S18 of the HDR imaging processing routine, the second exposure step number of the second exposure condition is gradually brought closer to the first exposure step number of the first exposure condition between the setting threshold value S and the lower limit value RK of the exposure interlocking range. It may be.
・ＨＤＲ撮影処理ルーチンのステップＳ１８において、第２露出条件の第２露出段数を設定閾値Ｓから露出連動範囲の下限値ＲＫに向かうに連れて徐々に（リニアに）第１露出条件の第１露出段数に近づけるようにしてもよい。 In step S18 of the HDR imaging processing routine, the first exposure under the first exposure condition gradually (linearly) as the second exposure step number of the second exposure condition is moved from the set threshold value S to the lower limit value RK of the exposure interlocking range. You may make it approach the number of steps.
・露出連動範囲内に設定閾値Ｓを複数設定してもよい。例えば、露出連動範囲内における上限値ＲＪと下限値ＲＫとの中間値よりも低い側の１つの値（例えばＥＶ値５）に更に他の設定閾値を設定し、この更に設定した設定閾値と露出連動範囲の下限値ＲＫとの間で第１露出条件の第１露出段数と第２露出条件の第２露出段数との段数差が１段となるようにしてもよい。 A plurality of setting threshold values S may be set within the exposure interlocking range. For example, another set threshold value is set to one value (for example, EV value 5) on the lower side than the intermediate value between the upper limit value RJ and the lower limit value RK in the exposure interlocking range, and this further set threshold value and exposure are set. The difference in the number of steps between the first exposure step number of the first exposure condition and the second exposure step number of the second exposure condition may be one step between the lower limit value RK of the interlocking range.
・設定閾値Ｓは、必ずしも露出連動範囲内に設定する必要はない。すなわち、設定閾値Ｓは、露出連動範囲の上限値ＲＪよりも高い値に設定してもよいし、露出連動範囲の下限値ＲＫよりも低い値に設定してもよい。 The setting threshold S is not necessarily set within the exposure interlocking range. That is, the setting threshold value S may be set to a value higher than the upper limit value RJ of the exposure interlocking range, or may be set to a value lower than the lower limit value RK of the exposure interlocking range.
・被写体画像を任意の数の分割領域に分割し、その分割した分割領域毎に輝度値を検出するようにしてもよい。すなわち、例えば、被写体画像を全く分割することなく輝度値を検出するようにしてもよい。 The subject image may be divided into an arbitrary number of divided areas, and the luminance value may be detected for each divided area. That is, for example, the luminance value may be detected without dividing the subject image at all.
・露出条件を決定する場合、シャッター速度以外に絞り１３の絞り値やＩＳＯ感度により露出条件を設定するようにしてもよい。すなわち、シャッター速度、絞り値及びＩＳＯ感度のうちの少なくとも一つにより露出条件を設定可能である。
When determining the exposure condition, the exposure condition may be set based on the aperture value of the
・なお、上記実施の形態では、設定閾値Ｓと露出値（ＥＶ値）とを比較して露出段数の変更を行なったが、比較する値は、明るさを示す値であれば他の値（例えば、外光輝度を示すＢＶ値）でもよい。 In the above embodiment, the set threshold value S and the exposure value (EV value) are compared to change the number of exposure steps. However, if the value to be compared is a value indicating brightness, other values ( For example, it may be a BV value indicating external light luminance).
・画像生成プログラムを予めメモリカードなどの外部記憶媒体に記憶させておき、該外部記憶媒体をカメラに装着した際に、外部記憶媒体からカメラに画像生成プログラムが取り込まれるようにしてもよい。 The image generation program may be stored in advance in an external storage medium such as a memory card, and when the external storage medium is attached to the camera, the image generation program may be taken into the camera from the external storage medium.
・上記実施形態においては、撮像装置の一種であるデジタルスチルカメラに具体化したが、例えばデジタルビデオカメラやカメラ機能付き携帯電話などの他の撮像装置及びそれらを用いた撮像方法に具体化してもよい。 In the above embodiment, the present invention is embodied in a digital still camera which is a kind of imaging apparatus, but may be embodied in other imaging apparatuses such as a digital video camera or a mobile phone with a camera function and an imaging method using them. Good.
・上記実施の形態においては、撮像素子の受光面に結像した被写体画像を測光して輝度地を検出したが、撮像素子ではなく、他の測光素子を用いて被写体の輝度値を検出することとしてもよい。 In the above embodiment, the subject image formed on the light receiving surface of the image sensor is photometrically detected to detect the luminance ground. However, the luminance value of the subject is detected using another photometric element instead of the image sensor. It is good.
・上記実施の形態においては、設定閾値よりもＥＶ値が低い場合には、該ＥＶ値が高い場合よりも露出段数の差を小さくすると説明している。しかしながら、ＭＰＵ１７は、設定閾値よりもＥＶ値が低い場合には、該ＥＶ値が高い場合よりも露出値の差を小さくなるようにしてもよい。このような場合、ＭＰＵ１７は、設定された閾値よりも低い側の、第１露出条件に対応する第１露出値と、第２露出条件に対応する第２露出値との差を、設定された閾値よりも高い側の、第１露出条件に対応する第１露出値と、第２露出条件に対応する第２露出値との差よりも小さくなるように第２露出値を調整する。
In the above embodiment, it is described that when the EV value is lower than the set threshold value, the difference in the number of exposure steps is made smaller than when the EV value is high. However, when the EV value is lower than the set threshold value, the
・上記実施の形態においては、設定した閾値よりも高い場合と、低い場合とで露出段数（露出値）の差を異ならせることとして説明している。しかしながら、露出段数（露出値）の差を異ならせる条件は他の条件でもいい。例えば、ＭＰＵ１７は、相対的に暗いシーンの場合は、相対的に明るいシーンの場合よりも、露出段数（露出値）の差を小さくしてもよい。この場合、ＭＰＵ１７は、第１露出条件に対応する第１露出値と、第２露出条件に対応する第２露出値との差が、相対的に明るいシーンよりも相対的に暗いシーンの方が小さくなるように、第２露出値を調整する。また、例えば、ＭＰＵ１７は、分割測光により得た各輝度値のうち、最も低い輝度値が所定の閾値よりも低い場合に、最も低い輝度値が所定の閾値より高い場合よりも、露出段数（露出値）の差が小さくなるように第２露出値を調整してもよい。また、ＭＰＵ１７は、分割測光により得た各輝度値の平均値が所定の閾値よりも低い場合に、各輝度値の平均値が所定の閾値より高い場合よりも、露出段数（露出値）の差が小さくなるように第２露出値を調整してもよい。なお、上記所定の閾値は、ユーザにより、あるいは撮影シーン等に応じて適宜変更可能としてもよい。
In the above-described embodiment, it is described that the difference in the number of exposure steps (exposure value) is different depending on whether the threshold is higher or lower than the set threshold. However, other conditions may be used as conditions for differentiating the number of exposure steps (exposure values). For example, the
１１…カメラ（撮像装置）、１４…撮像素子（輝度値検出手段）、１４ａ…受光面、１６…画像処理回路（合成画像生成手段）、１７…ＭＰＵ（輝度値検出手段、露出条件演算手段、露出調整手段、露出条件設定手段、合成画像生成手段、コンピュータ）、Ａ〜Ｐ…領域、Ｓ…設定閾値（閾値）。
DESCRIPTION OF
Claims (7)
該輝度値検出手段により検出された輝度値に基づき、第１露出条件と、該第１露出条件よりも低露出側の第２露出条件とを演算する露出条件演算手段と、
設定された閾値よりも低い側の、前記第１露出条件に対応する第１露出値と、前記第２露出条件に対応する第２露出値との差を、設定された閾値よりも高い側の、前記第１露出条件に対応する第１露出値と、前記第２露出条件に対応する第２露出値との差よりも小さくなるように前記第２露出値を調整する露出調整手段と、
該露出調整手段の調整後における露出値と対応する露出条件を前記第１露出条件及び前記第２露出条件として設定する露出条件設定手段と、
該露出条件設定手段により設定された前記第１露出条件及び前記第２露出条件に従って撮像された撮像画像を合成して一つの合成画像を生成する合成画像生成手段とを備えたことを特徴とする撮像装置。 A luminance value detecting means for measuring a subject to measure a luminance value;
Exposure condition calculation means for calculating a first exposure condition and a second exposure condition on a lower exposure side than the first exposure condition based on the luminance value detected by the luminance value detection means;
The difference between the first exposure value corresponding to the first exposure condition and the second exposure value corresponding to the second exposure condition on the side lower than the set threshold is set to be higher on the side higher than the set threshold. Exposure adjusting means for adjusting the second exposure value to be smaller than a difference between the first exposure value corresponding to the first exposure condition and the second exposure value corresponding to the second exposure condition;
Exposure condition setting means for setting an exposure condition corresponding to an exposure value after adjustment of the exposure adjustment means as the first exposure condition and the second exposure condition;
And a synthesized image generating unit that synthesizes the captured images captured according to the first exposure condition and the second exposure condition set by the exposure condition setting unit to generate one synthesized image. Imaging device.
該輝度値検出手段により検出された輝度値に基づき、第１露出条件と、該第１露出条件よりも低露出側の第２露出条件とを演算する露出条件演算手段と、
前記第１露出条件に対応する第１露出値と、前記第２露出条件に対応する第２露出値との差が、相対的に明るいシーンよりも、相対的に暗いシーンの方が小さくなるように、前記第２露出値を調整する露出調整手段と、
該露出調整手段の調整後における露出値と対応する露出条件を前記第１露出条件及び前記第２露出条件として設定する露出条件設定手段と、
該露出条件設定手段により設定された前記第１露出条件及び前記第２露出条件に従って撮像された撮像画像を合成して一つの合成画像を生成する合成画像生成手段とを備えたことを特徴とする撮像装置。 A luminance value detecting means for measuring a subject to measure a luminance value;
Exposure condition calculation means for calculating a first exposure condition and a second exposure condition on a lower exposure side than the first exposure condition based on the luminance value detected by the luminance value detection means;
The difference between the first exposure value corresponding to the first exposure condition and the second exposure value corresponding to the second exposure condition is smaller in a relatively dark scene than in a relatively bright scene. Exposure adjusting means for adjusting the second exposure value;
Exposure condition setting means for setting an exposure condition corresponding to an exposure value after adjustment of the exposure adjustment means as the first exposure condition and the second exposure condition;
And a synthesized image generating unit that synthesizes the captured images captured according to the first exposure condition and the second exposure condition set by the exposure condition setting unit to generate one synthesized image. Imaging device.
前記露出条件演算手段は、前記輝度値検出手段により検出された各輝度値のうちの最大輝度値を含む一群の高輝度値中の一つの輝度値を第１輝度値として、該第１輝度値に基づき前記第１露出条件を演算すると共に、前記各輝度値のうちの最小輝度値を含む一群の低輝度値中の一つの輝度値を第２輝度値として、該第２輝度値に基づき前記第２露出条件を演算することを特徴とする請求項１〜３のいずれか一つに記載の撮像装置。 The luminance value detecting means measures the subject for each of a plurality of divided areas to detect a luminance value for each area,
The exposure condition calculation means uses, as a first brightness value, one brightness value in a group of high brightness values including the maximum brightness value among the brightness values detected by the brightness value detection means as the first brightness value. The first exposure condition is calculated based on the luminance value, and one luminance value in the group of low luminance values including the minimum luminance value among the luminance values is set as the second luminance value, and the second luminance value is used based on the second luminance value. The imaging apparatus according to claim 1, wherein the second exposure condition is calculated.
被写体を測光して輝度値を検出する輝度値検出手順と、
該輝度値検出手順により検出された輝度値に基づき、第１露出条件と、該第１露出条件よりも低露出側の第２露出条件とを演算する露出条件演算手順と、
設定された閾値よりも低い側の、前記第１露出条件に対応する第１露出値と、前記第２露出条件に対応する第２露出値との差を、設定された閾値よりも高い側の、前記第１露出条件に対応する第１露出値と、前記第２露出条件に対応する第２露出値との差よりも小さくなるように前記第２露出値を調整する露出調整手順と、
該露出調整手順の調整後における露出値と対応する露出条件を前記第１露出条件及び前記第２露出条件として設定する露出条件設定手順と、
該露出条件設定手順により設定された前記第１露出条件及び前記第２露出条件に従って各々撮像された撮像画像を合成して一つの合成画像を生成する合成画像生成手順とを実行させるための画像生成プログラム。 On the computer,
Luminance value detection procedure for photometric measurement of a subject to detect luminance values;
An exposure condition calculation procedure for calculating a first exposure condition and a second exposure condition on a lower exposure side than the first exposure condition based on the luminance value detected by the luminance value detection procedure;
The difference between the first exposure value corresponding to the first exposure condition and the second exposure value corresponding to the second exposure condition on the side lower than the set threshold is set to be higher on the side higher than the set threshold. An exposure adjustment procedure for adjusting the second exposure value to be smaller than a difference between a first exposure value corresponding to the first exposure condition and a second exposure value corresponding to the second exposure condition;
An exposure condition setting procedure for setting an exposure condition corresponding to an exposure value after adjustment of the exposure adjustment procedure as the first exposure condition and the second exposure condition;
Image generation for executing a combined image generation procedure for generating a single combined image by combining captured images captured according to the first exposure condition and the second exposure condition set by the exposure condition setting procedure program.
被写体を測光して輝度値を検出する輝度値検出手順と、
該輝度値検出手順により検出された輝度値に基づき、第１露出条件と、該第１露出条件よりも低露出側の第２露出条件とを演算する露出条件演算手順と、
前記第１露出条件に対応する第１露出値と、前記第２露出条件に対応する第２露出値との差が、相対的に明るいシーンよりも、相対的に暗いシーンの方が小さくなるように、前記第２露出値を調整する露出調整手順と、
該露出調整手順の調整後における露出値と対応する露出条件を前記第１露出条件及び前記第２露出条件として設定する露出条件設定手順と、
該露出条件設定手順により設定された前記第１露出条件及び前記第２露出条件に従って撮像された撮像画像を合成して一つの合成画像を生成する合成画像生成手順とを実行させるための画像生成プログラム。 On the computer,
Luminance value detection procedure for photometric measurement of a subject to detect luminance values;
An exposure condition calculation procedure for calculating a first exposure condition and a second exposure condition on a lower exposure side than the first exposure condition based on the luminance value detected by the luminance value detection procedure;
The difference between the first exposure value corresponding to the first exposure condition and the second exposure value corresponding to the second exposure condition is smaller in a relatively dark scene than in a relatively bright scene. And an exposure adjustment procedure for adjusting the second exposure value;
An exposure condition setting procedure for setting an exposure condition corresponding to an exposure value after adjustment of the exposure adjustment procedure as the first exposure condition and the second exposure condition;
An image generation program for executing a composite image generation procedure for generating a single composite image by combining the captured images captured in accordance with the first exposure condition and the second exposure condition set by the exposure condition setting procedure .
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011042832A JP5772064B2 (en) | 2010-02-26 | 2011-02-28 | Imaging apparatus and image generation program |
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010041553 | 2010-02-26 | ||
| JP2010041553 | 2010-02-26 | ||
| JP2011042832A JP5772064B2 (en) | 2010-02-26 | 2011-02-28 | Imaging apparatus and image generation program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2011199860A true JP2011199860A (en) | 2011-10-06 |
| JP5772064B2 JP5772064B2 (en) | 2015-09-02 |
Family
ID=44877416
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2011042832A Active JP5772064B2 (en) | 2010-02-26 | 2011-02-28 | Imaging apparatus and image generation program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5772064B2 (en) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013225724A (en) * | 2012-04-19 | 2013-10-31 | Canon Inc | Imaging device, control method therefor, program, and storage medium |
| JP2020048159A (en) * | 2018-09-21 | 2020-03-26 | キヤノン株式会社 | Imaging control device, imaging control method, and program |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001197362A (en) * | 2000-01-14 | 2001-07-19 | Matsushita Electric Ind Co Ltd | Solid-state image pickup device |
| JP2006227228A (en) * | 2005-02-17 | 2006-08-31 | Canon Inc | Illumination photographing apparatus, illuminating device and photographing device |
| JP2009284136A (en) * | 2008-05-21 | 2009-12-03 | Nikon Corp | Electronic camera |
-
2011
- 2011-02-28 JP JP2011042832A patent/JP5772064B2/en active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001197362A (en) * | 2000-01-14 | 2001-07-19 | Matsushita Electric Ind Co Ltd | Solid-state image pickup device |
| JP2006227228A (en) * | 2005-02-17 | 2006-08-31 | Canon Inc | Illumination photographing apparatus, illuminating device and photographing device |
| JP2009284136A (en) * | 2008-05-21 | 2009-12-03 | Nikon Corp | Electronic camera |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013225724A (en) * | 2012-04-19 | 2013-10-31 | Canon Inc | Imaging device, control method therefor, program, and storage medium |
| JP2020048159A (en) * | 2018-09-21 | 2020-03-26 | キヤノン株式会社 | Imaging control device, imaging control method, and program |
| JP7224826B2 (en) | 2018-09-21 | 2023-02-20 | キヤノン株式会社 | Imaging control device, imaging control method, and program |
Also Published As
| Publication number | Publication date |
|---|---|
| JP5772064B2 (en) | 2015-09-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| TWI524709B (en) | Image capture apparatus, method of controlling image capture apparatus, and electronic device | |
| US8421882B2 (en) | Imaging apparatus and imaging control method | |
| JP5738080B2 (en) | Imaging apparatus and control method thereof | |
| US8988544B2 (en) | High dynamic range imaging device and image synthesis program | |
| JP4542058B2 (en) | Imaging apparatus and imaging method | |
| US8237854B2 (en) | Flash emission method and flash emission apparatus | |
| KR20090098197A (en) | Digital photographing apparatus to control flash lighting, controlling method for the same, and recording medium which records the program for carrying the same method | |
| JP6077853B2 (en) | Imaging apparatus, control method therefor, program, and storage medium | |
| JP2007221209A (en) | Camera, imaging method, expose arithmetic unit and program | |
| JP2010232711A (en) | Image capturing apparatus and image processing program | |
| JP2017108309A (en) | Imaging apparatus and imaging method | |
| JP4717720B2 (en) | Image processing apparatus and method, and program | |
| US20170318208A1 (en) | Imaging device, imaging method, and image display device | |
| EP2161938B1 (en) | Imaging apparatus, imaging method and computer readable recording medium storing programs for executing the imaging method | |
| CN111434104B (en) | Image processing apparatus, image capturing apparatus, image processing method, and recording medium | |
| US7864860B2 (en) | Image pickup apparatus and motion vector deciding method | |
| JP5048599B2 (en) | Imaging device | |
| JP5515852B2 (en) | Imaging apparatus and image generation program | |
| JP2008271024A (en) | Image processing apparatus and method and program | |
| JP5515795B2 (en) | Imaging apparatus and imaging method | |
| JP5532621B2 (en) | Electronic camera and image processing program | |
| JP5772064B2 (en) | Imaging apparatus and image generation program | |
| JP5245648B2 (en) | Image processing apparatus and program | |
| JP2015037222A (en) | Image processing apparatus, imaging apparatus, control method, and program | |
| JP2012204952A (en) | Exposure control apparatus, and camera |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140225 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20141112 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20141118 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150119 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150602 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150615 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 5772064 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |