JP5459178B2 - Imaging apparatus, white balance adjustment method, and white balance adjustment program - Google Patents
Imaging apparatus, white balance adjustment method, and white balance adjustment program Download PDFInfo
- Publication number
- JP5459178B2 JP5459178B2 JP2010248677A JP2010248677A JP5459178B2 JP 5459178 B2 JP5459178 B2 JP 5459178B2 JP 2010248677 A JP2010248677 A JP 2010248677A JP 2010248677 A JP2010248677 A JP 2010248677A JP 5459178 B2 JP5459178 B2 JP 5459178B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- value
- unit
- luminance
- white balance
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Color Television Image Signal Generators (AREA)
- Processing Of Color Television Signals (AREA)
- Studio Devices (AREA)
Description
本発明は、撮像装置、ホワイトバランス調整方法及びホワイトバランス調整プログラムに関し、特に、ストロボの発光時に撮像された画像について、画像全体の色味を向上させる技術に関する。 The present invention relates to an imaging apparatus, a white balance adjustment method, and a white balance adjustment program, and more particularly to a technique for improving the color of an entire image taken at the time of flash emission.
従来より、ストロボの発光時に色温度の違いにより生じる不自然なホワイトバランスを、より自然なものになるように補正するために、様々なホワイトバランスの調整方法が考案されている。
このようなホワイトバランスの調整手法としては、例えば、ストロボの発光時の画像とストロボの非発光時の画像をそれぞれ複数の領域に分割し、それぞれに対応する領域の輝度差に基づいて、分割された領域毎にホワイトバランスをそれぞれ設定する、といった手法が知られている（特許文献１参照）。
Conventionally, various white balance adjustment methods have been devised in order to correct an unnatural white balance caused by a difference in color temperature at the time of flash light emission so that it becomes more natural.
As such a white balance adjustment method, for example, an image when the flash is fired and an image when the flash is not fired are divided into a plurality of regions, and the image is divided based on the luminance difference between the corresponding regions. A method is known in which white balance is set for each region (see Patent Document 1).
しかしながら、上述の特許文献１に記載される手法が適用されると、分割された領域についてそれぞれ独立してホワイトバランスが設定されるために、画像全体の色味が不自然になる虞があった。
However, when the method described in
特に、上記の手法では、ストロボが照射されていないと判断された領域は、一律にホワイトバランスが設定されていた。換言すると、ストロボが照射されていないと判断された領域以外の領域はホワイトバランスの設定上何ら考慮する必要はないという思想の下、ホワイトバランスが設定されていた。
しかしながら、現実問題として、ストロボが全く照射されていないと判断された領域でも実際には多少のストロボの影響を受けていることが多い。従って、ストロボが照射されていないと判断された領域についても、ストロボの照射を考慮したホワイトバランスの設定がなされないと、結果として、画像全体の色味が不自然になる。
In particular, in the above method, the white balance is uniformly set in the area determined not to be irradiated with the strobe. In other words, the white balance is set based on the idea that there is no need to consider any area other than the area determined not to be irradiated with the strobe in setting the white balance.
However, as a practical problem, even in a region where it is determined that the strobe is not irradiated at all, it is often affected by some strobe. Therefore, even if it is determined that the strobe is not irradiated, if the white balance is not set in consideration of the strobe irradiation, the color of the entire image becomes unnatural as a result.
本発明は、このような状況に鑑みてなされたものであり、ストロボの発光時に撮像された画像について、画像全体の色味を向上させることを目的とする。 The present invention has been made in view of such a situation, and an object of the present invention is to improve the color of the entire image taken at the time of flash emission.
上記目的を達成するため、請求項１に記載の発明は、撮像手段と、発光手段と、前記発光手段による発光により明るくされた時の画像である第１の画像と当該第１の画像よりも明るさの低い第２の画像とを前記撮像手段に撮像するように制御する撮像制御手段と、前記第１の画像及び前記第２の画像の撮像の際に設定されたホワイトバランスを調整するための各色成分のゲイン値を夫々取得する第１の取得手段と、前記撮像手段により撮像された画像を複数の領域に分割する分割手段と、前記第１の画像と前記第２の画像とについて、前記複数の領域の輝度値を夫々取得する第２の取得手段と、前記複数の領域の各々について、前記第２の取得手段により算出された前記第１の画像の領域の輝度値と当該第１の画像の領域に対応する前記第２の画像の領域の輝度値との相対値を算出する算出手段と、前記算出手段により算出された複数の相対値の中から、所定数の相対値を選択する選択手段と、前記第１の取得手段により取得された前記第１の画像及び前記第２の画像の各色成分のゲイン値と前記選択手段により選択された所定数の相対値とに基づいて、前記第１の画像の少なくとも一部の領域の各色成分のゲイン値を補正する補正手段とを備えた撮像装置であることを特徴とする。
また、上記目的を達成するために、請求項２に記載の発明は、前記補正手段は、前記第１の画像のうち、前記相対値が所定値以上又は所定値以下の領域の各色成分のゲイン値を補正することを特徴とする。
また、上記目的を達成するために、請求項３に記載の発明は、前記選択手段は、前記算出手段により夫々算出された相対値が所定値以上又は所定値以下である前記第１の画像の領域を特定する特定手段を有し、前記特定手段により特定された所定値以上又は所定値以下の所定数の相対値を選択することを特徴とする。
また、上記目的を達成するために、請求項４に記載の発明は、前記算出手段は、前記第１の画像の領域の輝度値を当該第１の画像の領域に対応する前記第２の画像の領域の輝度値で除した値を前記相対値として算出し、前記特定手段は、前記算出手段により夫々算出された相対値の中から、値の高い順又は値の低い順に所定数の相対値を特定することを特徴とする。
In order to achieve the above-mentioned object, the invention described in
In order to achieve the above object, the invention according to
In order to achieve the above object, the invention according to
In order to achieve the above object, according to a fourth aspect of the present invention, the calculation means includes: the second image corresponding to a region of the first image having a luminance value of the region of the first image. The value divided by the luminance value of the area is calculated as the relative value, and the specifying unit calculates a predetermined number of relative values from the relative value calculated by the calculating unit in order of increasing value or decreasing value. It is characterized by specifying.
また、上記目的を達成するために、請求項５に記載の発明は、前記第１の取得手段により取得された画像の各色成分を他の色空間における少なくとも輝度情報を含む画素のパラメータの組に変換する変換手段をさらに備え、前記補正手段は、さらに、前記変換手段により変換された画素のパラメータの組に基づいて、前記各色成分のゲイン値を補正する撮像装置であることを特徴とする。 In order to achieve the above object, according to a fifth aspect of the present invention, each color component of the image acquired by the first acquisition unit is converted into a set of pixel parameters including at least luminance information in another color space. The image processing apparatus further includes conversion means for converting, and the correction means is an imaging apparatus that corrects the gain value of each color component based on a set of pixel parameters converted by the conversion means.
また、上記目的を達成するために、請求項６に記載の発明は、発光により明るくされた時の画像である第１の画像と当該第１の画像よりも明るさの低い第２の画像とを撮像手段に撮像させるよう制御する撮像制御ステップと、前記第１の画像及び前記第２の画像の撮像の際に設定されたホワイトバランスを調整するための各色成分のゲイン値を夫々取得する第１の取得ステップと、前記第１の取得ステップの処理により取得された画像を複数の領域に分割する分割ステップと、前記第１の画像と前記第２の画像とについて、前記複数の領域の輝度値を夫々取得する第２の取得ステップと、前記複数の領域の各々について、前記第２の取得ステップにて取得された前記第１の画像の領域の輝度値と当該第１の画像の領域に対応する前記第２の画像の領域の輝度値との相対値を算出する算出ステップと、前記算出ステップにて算出された複数の相対値の中から、所定数の相対値を選択する選択ステップと、前記第１の取得ステップにより取得された前記第１の画像及び前記第２の画像の各色成分のゲイン値と前記選択ステップにて選択された所定数の相対値とに基づいて、前記第１の画像の少なくとも一部の領域の各色成分のゲイン値を補正する補正ステップとを含むホワイトバランス調整方法であることを特徴とする。
In order to achieve the above object, the invention according to
また、上記目的を達成するために、請求項７に記載の発明は、コンピュータを、発光により明るくされた時の画像である第１の画像と当該第１の画像よりも明るさの低い第２の画像とを撮像手段に撮像させる撮像制御手段、前記第１の画像及び前記第２の画像のホワイトバランスを調整するための各色成分のゲイン値を夫々取得する第１の取得手段、前記撮像手段により撮像された画像を複数の領域に分割する分割手段、前記第１の画像と前記第２の画像とについて、前記複数の領域の輝度値を夫々取得する第２の取得手段、前記複数の領域の各々について、前記第２の取得手段により取得された前記第１の画像の領域の輝度値と当該第１の画像の領域に対応する前記第２の画像の領域の輝度値との相対値を夫々算出する算出手段、前記算出手段により算出された複数の相対値の中から、所定数の相対値を選択する選択手段、前記第１の取得手段により取得された前記第１の画像及び前記第２の画像の各色成分のゲイン値と前記選択手段により選択された所定数の相対値とに基づいて、前記第１の画像の少なくとも一部の領域の各色成分のゲイン値を補正する補正手段として機能させるホワイトバランス調整プログラムであることを特徴とする。 In order to achieve the above object, according to a seventh aspect of the present invention, there is provided a first image that is an image when the computer is brightened by light emission, and a second image that is lower in brightness than the first image . Imaging control means for causing the imaging means to image the first image, first acquisition means for acquiring gain values of the respective color components for adjusting white balance of the first image and the second image, and the imaging means dividing means for dividing an image captured in a plurality of regions, the above for the first image and the second image, the second acquisition unit configured to respectively obtain the luminance values of the plurality of regions, said plurality of areas for each of the relative value of the luminance value of the region of the second image corresponding to a second region of the luminance value and the first image region of the acquired by the acquisition means and the first image each calculation means for calculating, the calculating From among the plurality of relative values calculated by the step, selecting means for selecting a predetermined number of relative values, the gain of each color component of the first said acquired by the acquisition means in the first image and the second image based on the value and a predetermined number of relative values selected by the selecting means is the white balance adjusting program which functions as a correction means for correcting the gain value of each color component of at least a partial area of the first image It is characterized by that.
本発明によれば、ストロボの発光時に撮像された画像について、画像全体の色味を向上させることができる。 ADVANTAGE OF THE INVENTION According to this invention, the color of the whole image can be improved about the image imaged at the time of flash emission.
以下、本発明の実施形態について、図を用いて説明する。
図１は、本発明に係る撮像装置１の一実施形態におけるハードウェアの構成を示すブロック図である。
図１に示す撮像装置１は、例えばデジタルカメラにより構成することができる。
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
FIG. 1 is a block diagram showing a hardware configuration in an embodiment of an
The
撮像装置１は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１１と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１３と、画像処理部１４と、画像分割部１５と、ホワイトバランスゲイン算出部１６と、輝度取得部１７と、バス１８と、入出力インターフェース１９と、撮像部２０と、発光部２１と、操作部２２と、表示部２３と、記憶部２４、通信部２５と、ドライブ２６と、を備えている。
The
ＣＰＵ１１は、ＲＯＭ１２に記録されているプログラム、又は、記憶部２４からＲＡＭ１３にロードされたプログラムに従って各種の処理を実行する。
The
ＲＡＭ１３には、ＣＰＵ１１が各種の処理を実行する上において必要なデータ等も適宜記憶される。
The
画像処理部１４は、ＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）や、ＶＲＡＭ（Ｖｉｄｅｏ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等から構成されており、ＣＰＵ１１と協働して、画像のデータに対して各種画像処理を施す。
例えば、画像処理部１４は、後述する撮像部２０から出力される撮像画像のデータに対して、ノイズ低減、ホワイトバランスの調整、手ぶれ補正等の画像処理を施す。
The
For example, the
画像分割部１５は、画像処理部１４において行われる画像処理のうち、ホワイトバランスの調整に用いる画像のデータを、空間方向に幾つかの領域のデータに分割する。なお、画像分割部１５のさらなる詳細については、後述する。
The
ホワイトバランスゲイン算出部１６は、画像処理部１４において行われる画像処理のうち、ホワイトバランスの調整に用いるホワイトバランスゲインを算出する。なお、ホワイトバランスゲイン算出部１６のさらなる詳細については、後述する。
The white balance
輝度取得部１７は、画像処理部１４において行われる画像処理のうち、ホワイトバランスの調整に用いる画像のデータから、輝度値等を取得する。なお、輝度取得部１７のさらなる詳細については、輝度比較部４１も含めて後述する。
The
ＣＰＵ１１、ＲＯＭ１２、ＲＡＭ１３、画像処理部１４、画像分割部１５、ホワイトバランスゲイン算出部１６、及び輝度取得部１７は、バス１８を介して相互に接続されている。このバス１８にはまた、入出力インターフェース１９も接続されている。入出力インターフェース１９には、撮像部２０、発光部２１、操作部２２、表示部２３、記憶部２４、通信部２５及びドライブ２６が接続されている。
The
撮像部２０は、図示はしないが、光学レンズ部と、イメージセンサと、を備えている。
Although not shown, the
光学レンズ部は、被写体を撮影するために、光を集光するレンズ、例えばフォーカスレンズやズームレンズ等で構成される。
フォーカスレンズは、イメージセンサの受光面に被写体像を結像させるレンズである。ズームレンズは、焦点距離を一定の範囲で自在に変化させるレンズである。
光学レンズ部にはまた、必要に応じて、焦点、露出、ホワイトバランス等の設定パラメータを調整する周辺回路が設けられる。
The optical lens unit is configured by a lens that collects light, for example, a focus lens or a zoom lens, in order to photograph a subject.
The focus lens is a lens that forms a subject image on the light receiving surface of the image sensor. The zoom lens is a lens that freely changes the focal length within a certain range.
The optical lens unit is also provided with a peripheral circuit for adjusting setting parameters such as focus, exposure, and white balance as necessary.
イメージセンサは、光電変換素子や、ＡＦＥ（Ａｎａｌｏｇ Ｆｒｏｎｔ Ｅｎｄ）等から構成される。
光電変換素子は、例えばＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）型の光電変換素子等から構成される。光電変換素子には、光学レンズ部から被写体像が入射される。そこで、光電変換素子は、被写体像を光電変換（撮像）して画像信号を一定時間蓄積し、蓄積した画像信号をアナログ信号としてＡＦＥに順次供給する。
ＡＦＥは、このアナログの画像信号に対して、Ａ／Ｄ（Ａｎａｌｏｇ／Ｄｉｇｉｔａｌ）変換処理等の各種信号処理を実行する。各種信号処理によって、ディジタル信号が生成され、撮像部２０の出力信号として出力される。
なお、以下、撮像部２０の出力信号を、「撮像画像のデータ」と呼ぶ。従って、撮像部２０からは撮像画像のデータが出力されて、ＣＰＵ１１、画像処理部１４、画像分割部１５、ホワイトバランスゲイン算出部１６等に適宜供給される。
The image sensor includes a photoelectric conversion element, AFE (Analog Front End), and the like.
The photoelectric conversion element is composed of, for example, a CMOS (Complementary Metal Oxide Semiconductor) type photoelectric conversion element or the like. A subject image is incident on the photoelectric conversion element from the optical lens unit. Therefore, the photoelectric conversion element photoelectrically converts (captures) the subject image, accumulates the image signal for a predetermined time, and sequentially supplies the accumulated image signal as an analog signal to the AFE.
The AFE performs various signal processing such as A / D (Analog / Digital) conversion processing on the analog image signal. By various signal processing, a digital signal is generated and output as an output signal of the
Hereinafter, the output signal of the
発光部２１は、ストロボを有し、ＣＰＵ１１の制御に従って、ストロボを発光させる。本実施形態においては、ユーザが操作部２２に対する撮像画像の記録指示の操作、例えば操作部２２のうち図示せぬレリーズ釦の押下操作をしたことを契機として、ストロボが発光される。
The
操作部２２は、例えば、図示せぬレリーズ釦等の各種釦により構成され、ユーザの指示操作を受け付ける。
The
表示部２３は、各種画像を表示可能なディスプレイ等により構成される。
The
記憶部２４は、ＤＲＡＭ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等で構成され、後述するスルー画像、表示対象の原画像、当該原画像に合成され得る画像等の各種画像のデータを記憶する。
The
通信部２５は、インターネットを含むネットワークを介して他の装置（図示せず）との間で行う通信を制御する。
The
ドライブ２６には、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリ等よりなる、リムーバブルメディア３１が適宜装着される。ドライブ２６によってリムーバブルメディア３１から読み出されたプログラムは、必要に応じて記憶部２４にインストールされる。また、リムーバブルメディア３１は、記憶部２４に記憶されている画像のデータ等の各種データも、記憶部２４と同様に記憶することができる。
A
以上、図１を参照して、本実施形態の撮像装置１のハードウェアの構成について説明した。
次に、このようなハードウェアの構成を有する撮像装置１が実行するストロボ撮像処理の流れについて説明する。ストロボ撮像処理とは、ストロボを発光させて被写体を撮像し、その結果得られる撮像画像のデータに対して、ホワイトバランスの調整を行った後に、リムーバブルメディア３１等に記録するまでの一連の処理をいう。
図２は、図１のハードウェアの構成を有する撮像装置１が実行するストロボ撮像処理の流れを説明するフローチャートである。
The hardware configuration of the
Next, the flow of strobe imaging processing executed by the
FIG. 2 is a flowchart for explaining the flow of strobe imaging processing executed by the
先ず、撮像装置１の動作モードとして、本実施形態では、ストロボを発光せずに被写体を撮像する通常モードと、ストロボを発光して被写体を撮像するストロボモードとが設けられているとする。そして、ユーザは、操作部２２に対する所定の操作をすることで、動作モードとして、通常モード又はストロボモードを選択的に指示することができるものとする。
この場合、ストロボモードの選択が指示されると、ストロボ撮像処理は開始する。
First, as an operation mode of the
In this case, when the selection of the strobe mode is instructed, the strobe imaging process starts.
ステップＳ１において、ＣＰＵ１１は、スルー撮像処理及びスルー表示処理を実行する。
即ち、ＣＰＵ１１は、撮像部２０や画像処理部１４を制御して、撮像部２０による撮像動作を継続させる。そして、ＣＰＵ１１は、撮像部２０による撮像動作が継続されている間、当該撮像部２０から順次出力される撮像画像のデータを、メモリ（本実施形態では記憶部２４）に一時的に記憶させる。このような一連の処理が、ここでいう「スルー撮像処理」である。
また、ＣＰＵ１１は、スルー撮像処理時にメモリ（本実施形態では記憶部２４）に一時的に記録された各データを順次読み出して、各々に対応する撮像画像を表示部２３に順次表示させる。このような一連の処理が、ここでいう「スルー表示処理」である。なお、スルー表示処理により表示部２３に表示されている撮像画像を、以下、「スルー画像」と呼ぶ。
In step S1, the
That is, the
Further, the
ステップＳ２において、ＣＰＵ１１は、撮像画像の記録指示があったか否かを判断する。
本実施形態においては、上述したように、ユーザは、操作部２２のうちレリーズ釦を押下操作することによって、撮像画像の記録指示をすることができる。
従って、レリーズ釦が押下操作されていない場合には、ステップＳ２においてＮＯであると判定されて、処理はステップＳ１に戻される。即ち、レリーズ釦が押下操作されるまでの間、ステップＳ１及びＳ２のループ処理が繰り返し実行されることによって、スルー撮像処理及びスルー表示処理が繰り返し実行され、被写体のスルー画像がリアルタイムに表示部２３に表示され続ける。
なお、図示はしないが、所定時間経過しても未だレリーズ釦が押下操作されない場合には、ＣＰＵ１１等は、ストロボ撮像処理を強制終了するようにしてもよい。
In step S <b> 2, the
In the present embodiment, as described above, the user can issue an instruction to record a captured image by pressing the release button of the
Therefore, if the release button has not been pressed, it is determined NO in step S2, and the process returns to step S1. That is, until the release button is pressed, the loop processing in steps S1 and S2 is repeatedly executed, so that the through imaging process and the through display process are repeatedly executed, and the through image of the subject is displayed in real time on the
Although not shown, if the release button is not pressed even after a predetermined time has elapsed, the
その後、レリーズ釦が押下操作された場合には、ステップＳ２においてＹＥＳであると判定されて、処理はステップＳ３に進む。 Thereafter, when the release button is pressed, it is determined as YES in Step S2, and the process proceeds to Step S3.
ステップＳ３において、ＣＰＵ１１は、発光とともに被写体を撮像することを制御する。詳細には、ＣＰＵ１１は、発光部２１を制御して、ストロボを発光させるとともに、撮像部２０を制御して、被写体を撮像させる。
本実施形態では、このときに撮像部２０から出力された撮像画像のデータが、記録対象のデータとして記憶部２４に一時的に記憶される。
In step S <b> 3, the
In this embodiment, the captured image data output from the
ステップＳ４において、ＣＰＵ１１は、ステップＳ１のスルー撮像処理でストロボ非発光時に被写体が撮像されたスルー画像のデータと、ステップＳ３の処理でストロボ発光時に被写体が撮像された撮像画像のデータとを用いて、記録対象の撮像画像のホワイトバランスを調整する処理を実行する。
このようなステップＳ４の処理を、図２の記載にあわせて、以下、「ホワイトバランス処理」と呼ぶ。また、ステップＳ１のスルー撮像処理でストロボ非発光時に被写体が撮像されたスルー画像のデータを、以下、「非発光時スルー画像のデータ」と呼ぶ。一方、ステップＳ３の処理でストロボ発光時に被写体が撮像された撮像画像のデータを、以下、「発光時撮像画像のデータ」と呼ぶ。
ここで、記録対象の撮像画像のデータは、本実施形態では、発光時撮像画像のデータが採用されるものとする。ただし、発光時撮像画像のデータとは別に、ホワイトバランスの設定後、もう１度ストロボを発光させて撮像部２０が被写体を撮像した結果得られる撮像画像のデータを記録対象として採用してもよい。この場合、当該記録対象の撮像画像のデータは、設定されたホワイトバランスで調整される。
なお、ホワイトバランス処理のさらなる詳細については、後述する。
In step S4, the
Such processing in step S4 is hereinafter referred to as “white balance processing” in accordance with the description in FIG. Further, the data of the through image in which the subject is imaged when the flash is not emitted in the through imaging process in step S1 is hereinafter referred to as “data of the through image when no light is emitted”. On the other hand, the data of the captured image in which the subject is imaged at the time of flash emission in the process of step S3 is hereinafter referred to as “data of the captured image at the time of light emission”.
Here, in the present embodiment, the data of the captured image to be recorded is adopted as the data of the captured image to be recorded. However, separately from the captured image data at the time of light emission, after the white balance is set, the captured image data obtained as a result of the
Further details of the white balance process will be described later.
ステップＳ５において、ＣＰＵ１１は、ステップＳ４の処理でホワイトバランス処理が施された、記録対象の撮像画像のデータをリムーバブルメディア３１に記録する。
これにより、ストロボ撮像処理は終了となる。
In step S <b> 5, the
Thereby, the strobe imaging process is completed.
以上、ストロボ撮像処理について説明した。
次に、ストロボ撮像処理のうち、ステップＳ４で実行されるホワイトバランス処理について説明する。
ここでは、まず、ホワイトバランス処理を実行するための機能的構成について説明し、次に、その機能的構成に基づいて実行されるホワイトバランス処理の流れについて説明する。
The strobe imaging process has been described above.
Next, the white balance process executed in step S4 in the strobe imaging process will be described.
Here, first, a functional configuration for executing the white balance processing will be described, and then a flow of white balance processing executed based on the functional configuration will be described.
ホワイトバランス処理が実行される場合、図１の撮像装置１のうち、画像分割部１５と、ホワイトバランスゲイン算出部１６と、輝度取得部１７と、が機能する。
When the white balance process is executed, the
画像分割部１５は、非発光時スルー画像及び発光時撮像画像の各データを、複数の領域、本実施形態においては、図３に示すように８×８の６４の領域の各データにそれぞれ分割する。
なお、本明細書では、このように画像分割部１５により分割された領域を、以下、「分割領域」と呼ぶ。
図３は、非発光時スルー画像又は発光時撮像画像から８×８の６４の分割領域が得られた状態を示す模式図である。
同図に示すように、本実施形態では、各分割領域に対して、一意に特定する固有の番号、具体的には左上端の分割領域から、水平方向は右方向に、垂直方向は下方向に向けた順序で、１、２、３、４、５、６、７、８、９、１０、・・・、６３、６４という番号が付されている。なお、以下、分割領域に付される番号を、「分割番号」と呼ぶ。
分割番号の付し方は、非発光時スルー画像及び発光時撮像画像で統一されているため、非発光時スルー画像と発光時撮像画像とのそれぞれの同一番号の分割領域は、画像全体における、位置、大きさ、及び範囲は同一となっている。
なお、各分割領域のデータは、例えば、付された番号と対応付けられてテーブル方式で記憶部に記憶されて、管理される。
The
In the present specification, the region divided by the
FIG. 3 is a schematic diagram showing a state in which 64 divided regions of 8 × 8 are obtained from the through image at the time of non-light emission or the captured image at the time of light emission.
As shown in the figure, in this embodiment, a unique number that uniquely identifies each divided region, specifically, from the divided region at the upper left corner, the horizontal direction is the right direction, and the vertical direction is the downward direction. The
Since the division numbering method is unified for the non-light-emitting through image and the light-emitting captured image, the divided areas of the same number of the non-light-emitting through image and the light-emitting captured image are the same in the entire image, The position, size, and range are the same.
Note that the data of each divided area is stored and managed in the storage unit in a table format in association with, for example, a number assigned thereto.
ホワイトバランスゲイン算出部１６は、画像分割部１５により分割された分割領域毎に、非発光時スルー画像についてのホワイトバランスゲインと、発光時撮像画像についてのホワイトバランスゲインとを、それぞれ算出する。
詳細には、本実施形態では、非発光時スルー画像と発光時撮像画像の各データは、ＲＧＢ（Ｒ：Ｒｅｄ，Ｇ：Ｇｒｅｅｎ，Ｂ：Ｂｌｕｅ）成分により構成されているものとする。
この場合、ホワイトバランスゲイン算出部１６は、非発光時スルー画像の分割領域毎のホワイトバランスゲインとして、Ｒ成分のゲイン（以下、「ＳＲＧ」と呼ぶ）と、Ｇ成分のゲイン（以下、「ＳＧＧ」と呼ぶ）と、Ｂ成分のゲイン（以下、「ＳＢＧ」と呼ぶ）と、をそれぞれ算出する。なお、ＳＲＧ，ＳＧＧ，ＳＢＧを併せて、以下、「非発光時スルー画像のＲＧＢ成分のゲイン値」と呼ぶ。即ち、非発光時スルー画像について、分割領域毎のＲＧＢ成分のゲイン値がそれぞれ算出される。
また、ホワイトバランスゲイン算出部１６は、発光時撮像画像の分割領域毎のホワイトバランスゲインとして、Ｒ成分のゲイン（以下、「ＬＲＧ」と呼ぶ）と、Ｇ成分のゲイン（以下、「ＬＧＧ」と呼ぶ）と、Ｂ成分のゲイン（以下、ＬＢＧと呼ぶ）と、をそれぞれ算出する。ＳＲＧ，ＳＧＧ，ＳＢＧを併せて、以下、「発光時撮像画像のＲＧＢ成分のゲイン値」と呼ぶ。即ち、発光時撮像画像について、分割領域毎のＲＧＢ成分のゲイン値がそれぞれ算出される。
The white balance
Specifically, in the present embodiment, it is assumed that each data of the through image at the time of non-light emission and the captured image at the time of light emission is composed of RGB (R: Red, G: Green, B: Blue) components.
In this case, the white balance
Further, the white balance
次に、ホワイトバランスゲイン算出部１６は、複数の分割領域毎に、発光時撮像画像のＲＧＢ成分のゲイン値をそれぞれ補正する。
ここで、本実施形態では、複数の分割領域は、ストロボの光がしっかりと照射されていると推定される分割領域（以下、「照射領域」と呼ぶ）、又は、それ以外の分割領域（以下、「非照射領域」と呼ぶ）に分類される。なお、照射領域と非照射領域との分類手法については、後述する。
このため、本実施形態では、発光時撮像画像のＲＧＢ成分のゲイン値の補正手法が、照射領域と非照射領域とでは異なる。
Next, the white balance
Here, in the present embodiment, the plurality of divided areas are divided areas (hereinafter referred to as “irradiated areas”) that are presumed that the strobe light is firmly irradiated, or other divided areas (hereinafter referred to as “irradiated areas”). , Called “non-irradiated region”). In addition, the classification method of an irradiation area | region and a non-irradiation area | region is mentioned later.
For this reason, in this embodiment, the correction method of the gain value of the RGB component of the captured image at the time of light emission differs between the irradiation region and the non-irradiation region.
そこで、以下、発光時撮像画像のうち、非照射領域のＲＧＢ成分のゲイン値の補正手法について説明する。
非照射領域であっても、ストロボ光が全く照射されていないことは稀であり、ストロボ光の照射具合を考慮したホワイトバランスの調整が必要になる。このような調整を可能にすべく、発光時撮像画像のうち、非照射領域のＲＧＢ成分のゲイン値は、次のようにして補正される。
Therefore, a method for correcting the gain value of the RGB component of the non-irradiated area in the captured image during light emission will be described below.
Even in the non-irradiated region, it is rare that no strobe light is irradiated, and it is necessary to adjust the white balance in consideration of the degree of strobe light irradiation. In order to enable such adjustment, the gain value of the RGB component in the non-irradiated region in the captured image during light emission is corrected as follows.
ホワイトバランスゲイン算出部１６は、非発光時スルー画像及び発光時撮像画像の非照射領域のＲＧＢ成分の各ゲイン値を、ＹＵＶ（Ｙ：輝度，Ｕ：輝度と青成分の色差，Ｖ：輝度と赤成分の色差）成分のゲイン値に変換する。
なお、以下、非発光時スルー画像及び発光時撮像画像のＲＧＢ成分の各ゲイン値から変換されたＹＵＶ成分の各ゲイン値を、「ＹＵＶ変換値」と呼ぶ。
The white balance
Hereinafter, the YUV component gain values converted from the RGB component gain values of the non-light-emitting through image and the light-emitting captured image are referred to as “YUV converted values”.
ここで、非発光時スルー画像の非照射領域のＹＵＶ変換値は、Ｙ成分のゲイン（以下、ＳＹと呼ぶ）と、Ｕ成分のゲイン（以下、ＳＵと呼ぶ）と、Ｖ成分のゲイン（以下、ＳＶと呼ぶ）と、から構成される。
この場合、非発光時スルー画像のＹＵＶ変換値は、次の式（１）から演算される。
In this case, the YUV conversion value of the through image when not emitting light is calculated from the following equation (1).
一方、発光時撮像画像の非照射領域のＹＵＶ変換値は、Ｙ成分のゲイン（以下、ＬＹと呼ぶ）と、Ｕ成分のゲイン（以下、ＬＵと呼ぶ）と、Ｖ成分のゲイン（以下、ＬＶと呼ぶ）と、から構成される。
この場合、発光時スルー画像の非照射領域のＹＵＶ変換値は、次の式（２）から演算される。
In this case, the YUV conversion value of the non-irradiated region of the live view through image is calculated from the following equation (2).
次に、ホワイトバランスゲイン算出部１６は、非発光時スルー画像と発光時撮像画像との各非照射領域の輝度比率（輝度比率は後述する）を総合的に考慮して、発光時撮像画像の非照射領域のＹＵＶ変換値のうち、Ｙ成分のゲインＬＹを補正する。
ここで、発光時撮像画像の非照射領域のＹＵＶ変換値のうち、補正後のＹ成分のゲインを、以下、「ＬＹ’」と呼ぶ。換言すると、ＬＹに対して、非発光時スルー画像と発光時撮像画像との各非照射領域の輝度比率を総合的に考慮した重み付けがなされた値が、ＬＹ’である。
ＬＹ’は、例えば次の式（３）により求められる。
Here, among the YUV conversion values of the non-irradiated area of the captured image during light emission, the corrected Y component gain is hereinafter referred to as “LY ′”. In other words, LY ′ is a value obtained by weighting LY in consideration of the luminance ratio of each non-irradiated area between the non-light-emitting through image and the light-emitting captured image.
For example, LY ′ is obtained by the following equation (3).
次に、ホワイトバランスゲイン算出部１６は、式（３）によりＹ成分が補正（重み付け）された発光時撮像画像の非照射領域のＹＵＶ変換値を、ＲＧＢ成分のゲイン値に逆変換する。具体的には、ホワイトバランスゲイン算出部１６は、次の式（４）に従って、逆変換後の発光時撮像画像の非照射領域のＲＧＢ成分のゲイン値を求める。
また、式（４）の左辺において、左から掛けられている行列は、式（１）や式（２）で用いられている変換行列の逆行列である。
Next, the white balance
On the left side of Equation (4), the matrix multiplied from the left is an inverse matrix of the transformation matrix used in Equation (1) or Equation (2).
このようにして、発光時撮像画像のうち、非照射領域のＲＧＢ成分のゲイン値が補正される。 In this way, the gain value of the RGB component of the non-irradiation area in the captured image during light emission is corrected.
以上、発光時撮像画像のうち、非照射領域のＲＧＢ成分のゲイン値の補正手法について説明した。
なお、発光時撮像画像のうち、照射領域のＲＧＢ成分のゲイン値の補正手法については、特に限定されず、例えば本実施形態では、後述する輝度比率に基づく補正手法が採用されているものとする。
In the above, the correction method of the gain value of the RGB component of a non-irradiation area among the captured images during light emission has been described.
In addition, the correction method of the gain value of the RGB component of the irradiation region in the captured image at the time of emission is not particularly limited. For example, in the present embodiment, a correction method based on a luminance ratio described later is adopted. .
そして、ホワイトバランスゲイン算出部１６は、発光時撮像画像の分割領域毎におけるＲＧＢ成分の補正後のゲイン値に基づいて、記録対象の撮像画像のホワイトバランス設定を分割領域毎に行う。
Then, the white balance
以上説明したように、ホワイトバランスゲイン算出部１６の処理では、分割領域毎の輝度比率が必要になる。このような輝度比率の演算等を行うべく、輝度取得部１７が設けられている。
即ち、輝度取得部１７は、非発光時スルー画像及び発光時撮像画像のデータから、輝度値を分割領域単位で取得する。
ここで、分割領域は複数の画素から構成されるため、分割領域の輝度とは、当該分割領域を構成する各画素の輝度に基づいて演算された値、例えば、各画素の輝度の平均値を意味するものとする。
As described above, the processing of the white balance
That is, the
Here, since the divided area is composed of a plurality of pixels, the luminance of the divided area is a value calculated based on the luminance of each pixel constituting the divided area, for example, an average value of the luminance of each pixel. Shall mean.
輝度取得部１７には、輝度比較部４１が設けられている。
輝度比較部４１は、発光時スルー画像及び非発光時撮像画像の各分割領域の輝度比率を算出する。
領域番号ｉ（ｉは、分割総数以下の正の整数値であり、本実施形態では６４以下の正の整数値）の輝度比率Ｐｉは、次の式（５）により求められる。
本実施形態では、このような式（５）による輝度比較部４１の演算結果は、例えば図４に示すテーブル形式で記憶部２４に記憶されて、管理される。
The
The
The luminance ratio Pi of the region number i (i is a positive integer value equal to or less than the total number of divisions, and in the present embodiment, a positive integer value equal to or less than 64) is obtained by the following equation (5).
In this embodiment, the calculation result of the brightness |
図４は、発光時スルー画像及び非発光時撮像画像の各分割領域の輝度比率を格納するテーブルの一例を示している。
本実施形態において、図４のテーブルは行列構造を有しているため、以下、図４中横方向の項目の集合体を「行」と称し、同図中縦方向の項目の集合体を「列」と称する。所定の行には、所定の領域番号が対応付けられている。即ち、所定の行には、当該行に対応する領域番号についての、「領域番号」、「非発光時の輝度」、「発光時の輝度」、及び「輝度比率」という項目がそれぞれ配置されている。
上から第ｉ行目（ただし、図４の項目名が記載された一番上の行は除外する。以下同じ）。の「領域番号」には、領域番号ｉが格納される。
上から第ｉ行目の「非発光時の輝度」には、非発光時スルー画像のｉ番目の分割領域の輝度Ｙｉが格納される。
上から第ｉ行目の「発光時の輝度」には、発光時撮像画像のｉ番目の分割領域の輝度Ｙｉ’が格納される。
上から第ｉ行目の「輝度比率」には、ｉ番目の輝度比率Ｐｉ、即ち式（５）の演算結果が格納される。
FIG. 4 shows an example of a table that stores the luminance ratio of each divided region of the through image during light emission and the captured image during non-light emission.
In the present embodiment, since the table of FIG. 4 has a matrix structure, the collection of items in the horizontal direction in FIG. 4 is hereinafter referred to as “row”, and the collection of items in the vertical direction in FIG. Referred to as a column. A predetermined area number is associated with the predetermined line. In other words, items of “area number”, “brightness at non-light emission”, “brightness at light emission”, and “brightness ratio” for the area number corresponding to the row are arranged in a predetermined line, respectively. Yes.
The i-th line from the top (however, the top line in which the item names in FIG. 4 are described is excluded. The same applies hereinafter). The “region number” stores the region number i.
In the “illuminance at the time of non-light emission” on the i-th row from the top, the luminance Yi of the i-th divided area of the through image at the time of non-light emission is stored.
In the “iluminance at the time of light emission” on the i-th row from the top, the luminance Yi ′ of the i-th divided region of the captured image at the time of light emission is stored.
In the “brightness ratio” in the i-th row from the top, the i-th brightness ratio Pi, that is, the calculation result of Expression (5) is stored.
本実施形態では、このように求められた分割領域毎の輝度比率に基づいて、各分割領域が、非照射領域又は照射領域に分類される。具体的には例えば本実施形態では、ストロボの光がしっかりと当たっているときの輝度比率のうち最低値として適切な値が、閾値として予め設定されている。この場合、輝度比率Ｐｉが閾値以下ならば、ｉ番目の分割領域は非照射領域に分類され、一方、輝度比率Ｐｉが閾値を越えているならば、ｉ番目の分割領域は照射領域に分類される。 In the present embodiment, each divided area is classified into a non-irradiated area or an irradiated area based on the luminance ratio for each divided area thus obtained. Specifically, for example, in this embodiment, an appropriate value as a minimum value is preset as a threshold value among the luminance ratios when the strobe light is shining firmly. In this case, if the luminance ratio Pi is equal to or smaller than the threshold value, the i-th divided area is classified as a non-irradiated area, while if the luminance ratio Pi exceeds the threshold value, the i-th divided area is classified as an irradiated area. The
次に、輝度比較部４１は、全分割領域毎の輝度比率を比率の低い順番にソートする。
そして、輝度比較部４１は、輝度の低い順番にソートされた各分割領域の輝度比率のうち、下位２乃至４番目の輝度比率の平均値を、上述した平均輝度比率Ｃとして求める。
具体的には、輝度比較部４１は、次の式（６）を演算することにより、平均輝度比率Ｃを求める。
例えば、全分割領域の輝度比率（Ｃ１＝Ｙ１’／Ｙ１，Ｃ２＝Ｙ２’／Ｙ２，Ｃ３＝Ｙ３’／Ｙ３，・・・，Ｃ８＝Ｙ８’／Ｙ８，・・・，Ｃ２２＝Ｙ２２’／Ｙ２２，・・・，Ｃ６４＝Ｙ６４’／Ｙ６４）のうち、下位４番目までの輝度比率が次の通りであったとする。即ち、６４番目（下から１番目）：Ｃｔ１＝Ｃ１＝Ｙ１’／Ｙ１、６３番目（下から２番目）：Ｃｔ２＝Ｃ２＝Ｙ２’／Ｙ２、６２番目（下から３番目）：Ｃｔ３＝Ｃ８＝Ｙ８’／Ｙ８、６１番目（下から４番目）：Ｃｔ４＝Ｃ２２＝Ｙ２２’／Ｙ２２であったものとする、この場合、平均輝度比率Ｃは、次の式（７）により算出される。
The
Specifically, the
For example, the luminance ratio (C1 = Y1 ′ / Y1, C2 = Y2 ′ / Y2, C3 = Y3 ′ / Y3,..., C8 = Y8 ′ / Y8,..., C22 = Y22 ′ / Y22,..., C64 = Y64 ′ / Y64), the luminance ratio up to the fourth lower order is as follows. That is, 64th (first from the bottom): Ct1 = C1 = Y1 ′ / Y1, 63rd (second from the bottom): Ct2 = C2 = Y2 ′ / Y2, 62nd (third from the bottom): Ct3 = C8 = Y8 ′ / Y8, 61st (fourth from the bottom): Assume that Ct4 = C22 = Y22 ′ / Y22. In this case, the average luminance ratio C is calculated by the following equation (7).
以上、図３及び図４を参照して、本実施形態の図１の撮像装置１の機能的構成のうち、図２のステップＳ４のホワイトバランス処理を実行するための機能的構成について説明した。
The functional configuration for executing the white balance process in step S4 in FIG. 2 among the functional configurations of the
次に、このような機能的構成を有する撮像装置１が実行するステップＳ４のホワイトバランス処理の詳細な流れについて説明する。
ホワイトバランス処理においては、ＣＰＵ１１の制御の下、ホワイトバランスゲイン算出部１６乃至輝度取得部１７の何れかが各ステップの処理を実行する。ただし、以下の説明においては、ＣＰＵ１１の制御についての説明は省略する。
図５は、図１の撮像装置１が実行する図２のストロボ撮像処理のうち、ステップＳ４のホワイトバランス処理の流れの詳細を説明するフローチャートである。
Next, a detailed flow of the white balance process in step S4 executed by the
In the white balance process, under the control of the
FIG. 5 is a flowchart for explaining the details of the flow of the white balance process in step S4 in the strobe imaging process of FIG. 2 executed by the
ステップＳ２１において、画像分割部１５は、非発光時スルー画像と発光時撮像画像の各データを８×８の分割領域にそれぞれ分割し、輝度取得部１７は、各分割領域の輝度値を取得する。
In step S21, the
ステップＳ２２において、輝度比較部４１は、非発光時スルー画像の輝度値と発光時撮像画像の輝度値との輝度比率を分割領域毎にそれぞれ算出する。
詳細には、輝度比較部４１は、上述した式（５）を演算することにより、ｉ番の分割領域についての輝度比率Ｐｉを算出する。このような式（５）の演算が、１乃至６４番の各々に対して実行され、輝度比率Ｐ１乃至Ｐ６４が算出される。
本実施形態では、このような式（５）による輝度比較部４１の演算結果は、例えば図４に示すテーブル形式で記憶部に分割領域毎に記憶されて、管理される。
In step S <b> 22, the
Specifically, the
In this embodiment, the calculation result of the brightness |
ステップＳ２３において、ホワイトバランスゲイン算出部１６は、非発光時スルー画像と発光時撮像画像の各データについて、分割領域毎のＲＧＢ成分のゲイン値を設定する。
In step S23, the white balance
ステップＳ２４において、ホワイトバランスゲイン算出部１６は、処理対象の領域番号ｉとして「１」を設定する（ｉ＝１）。即ち、本実施形態では、後述するステップＳ２５乃至ステップＳ３０までの処理の対象となる分割領域が、分割番号の順番で順次設定される。このため、処理対象の分割番号ｉとして、先ず「１」が設定される。
In step S24, the white balance
ステップＳ２５において、ホワイトバランスゲイン算出部１６は、輝度比率Ｐｉが閾値を超えているか否かを判定する（Ｐｉ＞しきい値）。
In step S25, the white balance
輝度比率Ｐｉが閾値よりも高い場合とは、上述したように、処理対象の領域番号ｉの分割領域が照射領域である場合を意味する。このような場合、ステップＳ２５の処理でＹＥＳであると判定されて、処理はステップＳ２６に進む。
ステップＳ２６において、ホワイトバランスゲイン算出部１６は、輝度比率Ｐｉに基づいて、領域番号ｉの分割領域（照射領域）のＲＧＢ成分のゲイン値を補正する。
これにより、処理はステップＳ３１に進む。ただし、ステップＳ３１以降の処理については後述する。
The case where the luminance ratio Pi is higher than the threshold means a case where the divided area of the area number i to be processed is an irradiation area as described above. In such a case, it is determined as YES in the process of step S25, and the process proceeds to step S26.
In step S <b> 26, the white balance
Thereby, a process progresses to step S31. However, the processing after step S31 will be described later.
これに対して、輝度比率Ｐｉが閾値以下の場合とは、上述したように、処理対象の領域番号ｉの分割領域が非照射領域である場合を意味する。このような場合、ステップＳ２５の処理でＮＯであると判定されて、処理はステップＳ２７に進む。
そして、次のようなステップＳ２７乃至Ｓ３０の処理が実行されて、領域番号ｉの分割領域のＲＧＢ成分のゲイン値が補正される。
On the other hand, the case where the luminance ratio Pi is equal to or smaller than the threshold means a case where the divided region of the region number i to be processed is a non-irradiation region as described above. In such a case, it is determined as NO in the process of step S25, and the process proceeds to step S27.
Then, the following processing of steps S27 to S30 is executed to correct the RGB component gain values of the divided region of region number i.
即ち、ステップＳ２７において、輝度比較部４１は、ステップＳ２２の処理で演算された全輝度比率Ｐ１乃至Ｐ６４のうち、低位２乃至４番目の輝度比率に基づいて、平均輝度比率Ｃを算出する。
具体的には、上述した式（６）に従って、平均輝度比率Ｃが演算される。
なお、ステップＳ２７の処理は、ステップＳ２５の処理で初回にＮＯと判定された後に１回だけ実行すれば足り、それ以降、省略しても構わない。
That is, in step S27, the
Specifically, the average luminance ratio C is calculated according to the above-described equation (6).
Note that the process of step S27 need only be executed once after it is determined NO in the process of step S25 for the first time, and may be omitted thereafter.
ステップＳ２８において、ホワイトバランスゲイン算出部１６は、ステップＳ２３の処理で設定されたゲイン値のうち、番号ｉの分割領域（照射領域）のＲＧＢ成分のゲイン値をＹＵＶ変換値に変換する。
詳細には、ホワイトバランスゲイン算出部１６は、上述した式（１）に従って、領域番号ｉの分割領域（非照射領域）のＹＵＶ変換値が求められる。
In step S28, the white balance
Specifically, the white balance
ステップＳ２９において、ホワイトバランスゲイン算出部１６は、ステップＳ２７の処理で求めた平均輝度比率Ｃに基づいて、発光時撮像画像の領域番号ｉの分割領域（非照射領域）のＹＵＶ変換値のうち、Ｙ成分の値を補正することによって、重み付けしたＹ成分の値を算出する。
詳細には、ホワイトバランスゲイン算出部１６は、ステップＳ２４の処理で算出した平均輝度比率Ｃを係数として用いる上述した式（３）に従って、発光時撮像画像の領域番号ｉの分割領域（非照射領域）のＹＵＶ変換値のうち、Ｙ成分のゲインＬＹを、ゲインＬＹ’に補正する。
このように、非発光時スルー画像と発光時撮像画像との各分割領域のうち、非照射領域の輝度比率を総合的に考慮して、発光時撮像画像の領域番号ｉの分割領域（非照射領域）のＹＵＶ変換値のうち、Ｙ成分のゲインＬＹが補正されて、補正後のＹ成分のゲインＬＹ’となる。
In step S29, the white balance
Specifically, the white balance
In this way, among the divided regions of the non-light-emitting through image and the light-emitting captured image, the luminance ratio of the non-irradiated region is comprehensively considered and the divided region (i.e., non-irradiated) The Y component gain LY is corrected among the YUV conversion values in the region), and the corrected Y component gain LY ′ is obtained.
ステップＳ３０において、ホワイトバランスゲイン算出部１６は、領域番号ｉの分割領域（非照射領域）についての、重み付けが加味されたＹＵＶ変換値をＲＧＢ成分のゲイン値に逆変換する。
詳細には、ホワイトバランスゲイン算出部１６は、上述した式（４）に従って、発光時撮像画像の領域番号ｉの分割領域（非照射領域）領域におけるＲＧＢ成分の逆変換後のゲイン値を求める。
即ち、ホワイトバランスゲイン算出部１６は、ステップＳ２９の処理で重み付けが付加された、発光時撮像画像の番号ｉの分割領域（非照射領域）のＹＵＶ変換値（ＬＹ’，ＬＵ，ＬＶ）を、Ｒ成分のゲイン（ＬＲα）と、Ｇ成分のゲイン（ＬＧα）と、Ｂ成分のゲイン（ＬＢα）と、にそれぞれ逆変換する。
In step S <b> 30, the white balance
Specifically, the white balance
That is, the white balance
このようにして、発光時撮像画像の領域番号ｉの分割領域のＲＧＢ成分のゲイン値は、当該分割領域が照射領域の場合（ステップＳ２５の処理でＹＥＳであると判定された場合）にはステップＳ２６の処理により、当該分割領域が非照射領域の場合（ステップＳ２５の処理でＮＯであると判定された場合）にはステップＳ２７乃至Ｓ３０の処理により、それぞれ補正される。
これにより、処理はステップＳ３１に進む。
In this way, the gain value of the RGB component of the divided area of area number i of the captured image at the time of light emission is a step when the divided area is an irradiation area (when it is determined YES in the process of step S25). If the divided area is a non-irradiated area by the process of S26 (if it is determined NO in the process of step S25), the process is corrected by the processes of steps S27 to S30.
Thereby, a process progresses to step S31.
ステップＳ３１において、ホワイトバランスゲイン算出部１６は、領域番号ｉを１だけインクリメントする（ｉ＝ｉ＋１）。
In step S31, the white balance
ステップＳ３２において、ホワイトバランスゲイン算出部１６は、領域番号ｉが６４を超えたか否かを判定する。
領域番号ｉが６４を超えていない場合、即ち、発光時撮像画像のＲＧＢ成分のゲイン値が補正されていない分割領域が存在する場合、ステップＳ３２においてＮＯであると判定されて、処理はステップＳ２５に戻され、それ以降の処理が繰り返される。
即ち、領域番号１乃至６４の分割領域のそれぞれに対して、ステップＳ２５乃至Ｓ３２のループ処理がその都度実施される。この場合、照射領域に分類される分割領域（ステップＳ２５の処理でＹＥＳであると判定される分割領域）については、ステップＳ２６の処理により、発光時撮像画像のＲＧＢ成分のゲイン値が補正される。これに対して、非照射領域に分類される分割領域（ステップＳ２５の処理でＮＯであると判定される分割領域）については、ステップＳ２７乃至Ｓ３０の処理により、発光時撮像画像のＲＧＢ成分のゲイン値が補正される。
そして、最後の分割領域、即ち領域番号６４の分割領域についてのステップＳ３１の処理が実行されると、領域番号ｉは、６５となり、６４を超える。従って、次のステップＳ３２においてＹＥＳであると判定されて、処理はステップＳ３３に進む。
In step S <b> 32, the white balance
If the area number i does not exceed 64, that is, if there is a divided area in which the gain value of the RGB component of the captured image during light emission is not corrected, it is determined NO in step S32, and the process proceeds to step S25. And the subsequent processing is repeated.
That is, the loop process of steps S25 to S32 is performed for each of the divided areas of
When the process of step S31 is executed for the last divided area, that is, the divided area having the
ステップＳ３３において、ホワイトバランスゲイン算出部１６は、分割領域毎に、照射領域についてはステップＳ２６の処理で補正されたＲＧＢ成分のゲイン値に基づいて、非照射領域についてはステップＳ２７乃至Ｓ３０の処理で補正されたＲＧＢ成分のゲイン値に基づいて、発光時撮像画像のホワイトバランスを設定する。
これにより、ホワイトバランス処理は終了する。即ち、図２のステップＳ４の処理は終了して、処理はステップＳ５に進む。
In step S33, the white balance
As a result, the white balance process ends. That is, the process of step S4 in FIG. 2 ends, and the process proceeds to step S5.
以上説明したように、撮像装置１は、発光部２１と、撮像部２０と、ＣＰＵ１１と、ホワイトバランスゲイン算出部１６と、画像分割部１５と、輝度算出部と、輝度比較部４１と、を備える。
As described above, the
ＣＰＵ１１は、ユーザの操作により、発光部２１による発光により明るくされた時の画像である発光時撮像画像と当該発光部２１による発光がなされていない時の画像である非発光時スルー画像とを撮像部２０に撮像するように制御する。
ホワイトバランスゲイン算出部１６は、撮像の際に設定された発光時撮像画像及び非発光時スルー画像のホワイトバランスを調整するための各色成分のゲイン値を夫々算出する。
画像分割部１５は、撮像部２０により撮像された撮像領域を複数の領域に分割する。
輝度取得部１７は、画像分割部１５により夫々分割された領域の発光時撮像画像と非発光時スルー画像とについて、画像分割部１５により分割された複数の領域の輝度値を夫々算出する。
輝度比較部４１は、輝度取得部１７により算出された発光時撮像画像の領域の輝度値を非発光時スルー画像の領域の輝度値で除した値を相対値として夫々算出する。
ホワイトバランスゲイン算出部１６は、輝度比較部４１により夫々算出された相対値が所定値以下の領域を特定する。
輝度比較部４１は、夫々算出された相対値の中から、値の低い相対値を優先して複数選択する。
ホワイトバランスゲイン算出部１６は、算出された発光時撮像画像及び非発光時スルー画像の各色成分の値と輝度比較部４１により選択された複数の相対値とに基づいて、発光時撮像画像の各色成分のゲイン値を補正する。
The
The white balance
The
The
The
The white balance
The
The white balance
このように構成される撮像装置１においては、ストロボの発光時に撮像された画像において、画像の自然な色再現性を向上させることができる。
In the
また、ホワイトバランスゲイン算出部１６は、取得された発光時撮像画像及び非発光時スルー画像のＲＧＢ成分を他の色空間である少なくとも輝度情報を含む画素のパラメータの組（ＹＵＶ変換値）に変換する。
また、ホワイトバランスゲイン算出部１６は、さらに、変換された画素のパラメータの組（ＹＵＶ変換値）に基づいて、ＲＧＢ成分のゲイン値を補正する。
Further, the white balance
Further, the white balance
このように構成される撮像装置１においては、ＹＵＶ変換値に変換することにより、グレーバランスレベルで輝度の調整を行うために、ストロボの発光時に撮像された画像の各色成分の毎の輝度を個別に調整する場合に生じ得る特定の色の変化が生じなくなり、画像の自然な色再現性をより向上させることができる。
In the
なお、本発明は、上述の実施形態に限定されるものではなく、本発明の目的を達成できる範囲での変形、改良等は本発明に含まれるものである。 In addition, this invention is not limited to the above-mentioned embodiment, The deformation | transformation in the range which can achieve the objective of this invention, improvement, etc. are included in this invention.
また、上述の実施形態では、輝度比率Ｐｉを、上述した式（５）により求めたがこれに限られない。例えば輝度比率Ｐｉは、次の式（８）により求めることができる。この場合には、平均輝度比率Ｃには、上位２乃至４番目の各輝度比率Ｐｉが用いられる。
また、上述の実施形態では、平均輝度比率を下位２から４番目の輝度比率を用いたがこれに限られない。平均輝度比率に用いる輝度比率は、少なくとも、全輝度比率において、相対的に低い値となっているものであればよい。 In the above-described embodiment, the average luminance ratio is the second to fourth luminance ratio, but the present invention is not limited to this. The luminance ratio used for the average luminance ratio only needs to be a relatively low value at least in the entire luminance ratio.
また、上述の実施形態では、最下位の輝度比率を用いないように構成したが、これに限られない。最下位の輝度比率が他の輝度比率に比べて飛び抜けて低い値である等の不安定な値でなければ、最下位の輝度比率を用いるように構成してもよい。 In the above-described embodiment, the lowest luminance ratio is not used. However, the present invention is not limited to this. If the lowest luminance ratio is not an unstable value such as a low value compared with other luminance ratios, the lowest luminance ratio may be used.
また、上述の実施形態では、画像の分割は、非発光時スルー画像及び発光時撮像画像の各データを、複数の領域、本実施形態においては、図３に示すように８×８の６４の分割領域の各データにそれぞれ分割したがこれに限られない。画像の分割は、複数の領域に分割すればよく、分割数や分割領域の決定は、適宜決定可能である。 In the above-described embodiment, the image is divided into each of the non-light-emitting through image and the light-emitting captured image data in a plurality of areas, in this embodiment, 8 × 8 64 as shown in FIG. Although it divided | segmented into each data of the division area, it is not restricted to this. The image may be divided into a plurality of regions, and the number of divisions and the divided regions can be determined as appropriate.
また、上述の実施形態では、撮像部２０により撮像した発光時撮像画像及び非発光時スルー画像を用いてホワイトバランス処理を実行したが、これに限られない。ホワイトバランス処理は、例えば、ＣＰＵ１１や画像処理部１４により外部から取得した撮像画像及びスルー画像を用いてもよい。また、上述の実施形態では、発光時撮像画像と非発光時スルー画像とを用いてホワイトバランス処理を実行したがこれに限られない、例えば、発光時撮像画像と非発光時撮像画像を用いてホワイトバランス処理を実行してもよい。
In the above-described embodiment, the white balance processing is performed using the captured image at the time of light emission and the through image at the time of non-light emission captured by the
また、上述の実施形態では、本発明が適用される電子装置は、デジタルカメラ等の撮像装置１を例として説明したが、特にこれに限定されない。本発明は、上述のホワイトバランス処理を実行可能な電子機器一般に適用することができる。具体的には、例えば、本発明は、ノート型のパーソナルコンピュータ、ビデオカメラ、携帯型ナビゲーション装置、携帯電話装置、ポータブルゲーム機、ＷＥＢカメラ等に適用可能である。
In the above-described embodiment, the electronic apparatus to which the present invention is applied has been described by taking the
上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。また例えば、上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。換言すると、図１のハードウェアの構成は例示に過ぎず、特に限定されない。即ち、上述した一連の処理を全体として実行できる機能が撮像装置１に備えられていれば足り、この機能を実現するためにどのような機能ブロックを用いるのかは特に図１の例に限定されない。また、１つの機能ブロックは、ハードウェア単体で構成してもよいし、ソフトウェア単体で構成してもよいし、それらの組み合わせで構成してもよい。
The series of processes described above can be executed by hardware or can be executed by software. For example, the series of processes described above can be executed by hardware or can be executed by software. In other words, the hardware configuration in FIG. 1 is merely an example, and is not particularly limited. That is, it is sufficient that the
一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、コンピュータ等にネットワークや記録媒体からインストールされる。コンピュータは、専用のハードウェアに組み込まれているコンピュータであってもよい。また、コンピュータは、各種のプログラムをインストールすることで、各種の機能を実行することが可能なコンピュータ、例えば汎用のパーソナルコンピュータであってもよい。 When a series of processing is executed by software, a program constituting the software is installed on a computer or the like from a network or a recording medium. The computer may be a computer incorporated in dedicated hardware. The computer may be a computer capable of executing various functions by installing various programs, for example, a general-purpose personal computer.
このようなプログラムを含む記録媒体は、ユーザにプログラムを提供するために装置本体とは別に配布される図１のリムーバブルメディア３１により構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される記録媒体等で構成される。リムーバブルメディア３１は、例えば、磁気ディスク（フロッピディスクを含む）、光ディスク、又は光磁気ディスク等により構成される。光ディスクは、例えば、ＣＤ−ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｋ−Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ），ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｋ）等により構成される。光磁気ディスクは、ＭＤ（Ｍｉｎｉ−Ｄｉｓｋ）等により構成される。また、装置本体に予め組み込まれた状態でユーザに提供される記録媒体は、例えば、プログラムが記録されている図１のＲＯＭ１２や、図１の記憶部２４に含まれるハードディスク等で構成される。
The recording medium including such a program is not only constituted by the
なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、その順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的或いは個別に実行される処理をも含むものである。 In the present specification, the step of describing the program recorded on the recording medium is not limited to the processing performed in time series along the order, but is not necessarily performed in time series, either in parallel or individually. The process to be executed is also included.
１・・・撮像装置、１１・・・ＣＰＵ、１２・・・ＲＯＭ、１３・・・ＲＡＭ、１４・・・画像処理部、１５・・・ホワイトバランスゲイン算出部、１６・・・画像分割部、１７・・・輝度取得部、１８・・・バス、１９・・・入出力インターフェース、２０・・・撮像部、２１・・・発光部、２２・・・操作部、２３・・・表示部、２４・・・記憶部、２５・・・通信部、２６・・・ドライブ、３１・・・リムーバブルメディア、４１・・・輝度比較部
DESCRIPTION OF
Claims (7)
発光手段と、
前記発光手段による発光により明るくされた時の画像である第１の画像と当該第１の画像よりも明るさの低い第２の画像とを前記撮像手段に撮像するように制御する撮像制御手段と、
前記第１の画像及び前記第２の画像の撮像の際に設定されたホワイトバランスを調整するための各色成分のゲイン値を夫々取得する第１の取得手段と、
前記撮像手段により撮像された画像を複数の領域に分割する分割手段と、
前記第１の画像と前記第２の画像とについて、前記複数の領域の輝度値を夫々取得する第２の取得手段と、
前記複数の領域の各々について、前記第２の取得手段により算出された前記第１の画像の領域の輝度値と当該第１の画像の領域に対応する前記第２の画像の領域の輝度値との相対値を算出する算出手段と、
前記算出手段により算出された複数の相対値の中から、所定数の相対値を選択する選択手段と、
前記第１の取得手段により取得された前記第１の画像及び前記第２の画像の各色成分のゲイン値と前記選択手段により選択された所定数の相対値とに基づいて、前記第１の画像の少なくとも一部の領域の各色成分のゲイン値を補正する補正手段と
を備えたことを特徴とする撮像装置。 Imaging means;
A light emitting means;
An imaging control unit that controls the imaging unit to capture a first image that is an image brightened by light emission from the light emitting unit and a second image that is lower in brightness than the first image ; ,
First acquisition means for acquiring gain values of the respective color components for adjusting white balance set at the time of capturing the first image and the second image;
A dividing unit that divides an image captured by the imaging unit into a plurality of regions;
Second acquisition means for acquiring the luminance values of the plurality of regions for the first image and the second image, respectively.
For each of the plurality of regions, and the luminance value of the region of the second image corresponding to the region of the luminance value and the first image of the region of the calculated first image by the second acquisition unit A calculating means for calculating a relative value of
Selecting means for selecting a predetermined number of relative values from among a plurality of relative values calculated by the calculating means;
On the basis of the predetermined number of relative values selected by said selecting means and gain value for each color component of the first said acquired by the acquisition means in the first image and the second image, the first image An image pickup apparatus comprising: a correction unit that corrects a gain value of each color component in at least a part of the image area.
前記算出手段により夫々算出された相対値が所定値以上又は所定値以下である前記第１の画像の領域を特定する特定手段を有し、A specifying unit that specifies a region of the first image in which the relative value calculated by the calculating unit is a predetermined value or more or a predetermined value or less;
前記特定手段により特定された所定値以上又は所定値以下の所定数の相対値を選択することを特徴とする請求項１又は２に記載の撮像装置。The imaging apparatus according to claim 1, wherein a predetermined number of relative values greater than or less than a predetermined value specified by the specifying unit are selected.
前記特定手段は、前記算出手段により夫々算出された相対値の中から、値の高い順又は値の低い順に所定数の相対値を特定することを特徴とする請求項３に記載の撮像装置。The imaging apparatus according to claim 3, wherein the specifying unit specifies a predetermined number of relative values in descending order of the value from the relative values calculated by the calculating unit.
前記補正手段は、さらに、前記変換手段により変換された画素のパラメータの組に基づいて、前記各色成分のゲイン値を補正することを特徴とする請求項１から４の何れか１項に記載の撮像装置。 Conversion means for converting each color component of the image acquired by the first acquisition means into a set of pixel parameters including at least luminance information in another color space;
Wherein the correction means further on the basis of the set of pixels of the parameter converted by the converting means, of the according to any one of claims 1, characterized in that to correct the gain value of each color component 4 Imaging device.
前記第１の画像及び前記第２の画像の撮像の際に設定されたホワイトバランスを調整するための各色成分のゲイン値を夫々取得する第１の取得ステップと、
前記第１の取得ステップの処理により取得された画像を複数の領域に分割する分割ステップと、
前記第１の画像と前記第２の画像とについて、前記複数の領域の輝度値を夫々取得する第２の取得ステップと、
前記複数の領域の各々について、前記第２の取得ステップにて取得された前記第１の画像の領域の輝度値と当該第１の画像の領域に対応する前記第２の画像の領域の輝度値との相対値を算出する算出ステップと、
前記算出ステップにて算出された複数の相対値の中から、所定数の相対値を選択する選択ステップと、
前記第１の取得ステップにより取得された前記第１の画像及び前記第２の画像の各色成分のゲイン値と前記選択ステップにて選択された所定数の相対値とに基づいて、前記第１の画像の少なくとも一部の領域の各色成分のゲイン値を補正する補正ステップと
を含むことを特徴とするホワイトバランス調整方法。 An imaging control step for controlling the imaging means to image a first image that is an image that is brightened by light emission and a second image that is lower in brightness than the first image ;
A first acquisition step of acquiring a gain value of each color component for adjusting a white balance set at the time of capturing the first image and the second image;
A dividing step of dividing the image acquired by the processing of the first acquiring step into a plurality of regions;
A second acquisition step of acquiring the luminance values of the plurality of regions for the first image and the second image, respectively.
For each of the plurality of regions, the luminance value of the first image region acquired in the second acquiring step and the luminance value of the second image region corresponding to the first image region. a calculation step of calculating a relative value with,
A selection step of selecting a predetermined number of relative values from a plurality of relative values calculated in the calculation step;
Based on said predetermined number of relative values selected by said selecting step between the gain value of each color component of the first said acquired by the acquisition step of the first image and the second image, the first And a correction step of correcting a gain value of each color component in at least a partial area of the image .
発光により明るくされた時の画像である第１の画像と当該第１の画像よりも明るさの低い第２の画像とを撮像手段に撮像させる撮像制御手段、
前記第１の画像及び前記第２の画像のホワイトバランスを調整するための各色成分のゲイン値を夫々取得する第１の取得手段、
前記撮像手段により撮像された画像を複数の領域に分割する分割手段、
前記第１の画像と前記第２の画像とについて、前記複数の領域の輝度値を夫々取得する第２の取得手段、
前記複数の領域の各々について、前記第２の取得手段により取得された前記第１の画像の領域の輝度値と当該第１の画像の領域に対応する前記第２の画像の領域の輝度値との相対値を夫々算出する算出手段、
前記算出手段により算出された複数の相対値の中から、所定数の相対値を選択する選択手段、
前記第１の取得手段により取得された前記第１の画像及び前記第２の画像の各色成分のゲイン値と前記選択手段により選択された所定数の相対値とに基づいて、前記第１の画像の少なくとも一部の領域の各色成分のゲイン値を補正する補正手段
として機能させることを特徴とするホワイトバランス調整プログラム。 Computer
An imaging control unit that causes the imaging unit to capture a first image that is an image that is brightened by light emission and a second image that is lower in brightness than the first image ;
The first image and the second first obtaining means for obtaining respective gain values of each color component for adjusting the white balance of the image,
Dividing means for dividing the image captured by the imaging unit into a plurality of regions,
Second acquisition means for acquiring the luminance values of the plurality of regions for the first image and the second image, respectively.
For each of the plurality of regions, and the luminance value of the region of the second image corresponding to the region of the luminance value and the first image region of the acquired first image by said second acquisition means Calculating means for calculating the relative values of
Selecting means for selecting a predetermined number of relative values from among a plurality of relative values calculated by the calculating means;
On the basis of the predetermined number of relative values selected by said selecting means and gain value for each color component of the first said acquired by the acquisition means in the first image and the second image, the first image A white balance adjustment program that functions as a correction unit that corrects the gain value of each color component in at least a part of the area.
Priority Applications (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010248677A JP5459178B2 (en) | 2010-11-05 | 2010-11-05 | Imaging apparatus, white balance adjustment method, and white balance adjustment program |
| KR1020110113664A KR101317552B1 (en) | 2010-11-04 | 2011-11-03 | Image capturing apparatus, method and storage medium capable of adjusting white balance |
| CN201110343843.8A CN102469243B (en) | 2010-11-04 | 2011-11-03 | Image capturing apparatus capable of adjusting white balance |
| US13/288,137 US20120113295A1 (en) | 2010-11-04 | 2011-11-03 | Image capturing apparatus capable of adjusting white balance |
| US14/306,880 US20140293089A1 (en) | 2010-11-04 | 2014-06-17 | Image capturing apparatus capable of adjusting white balance |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010248677A JP5459178B2 (en) | 2010-11-05 | 2010-11-05 | Imaging apparatus, white balance adjustment method, and white balance adjustment program |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2012100223A JP2012100223A (en) | 2012-05-24 |
| JP2012100223A5 JP2012100223A5 (en) | 2013-12-12 |
| JP5459178B2 true JP5459178B2 (en) | 2014-04-02 |
Family
ID=46391608
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2010248677A Expired - Fee Related JP5459178B2 (en) | 2010-11-04 | 2010-11-05 | Imaging apparatus, white balance adjustment method, and white balance adjustment program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5459178B2 (en) |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5021338B2 (en) * | 2007-03-02 | 2012-09-05 | 富士フイルム株式会社 | White balance correction apparatus and method |
| JP2009033289A (en) * | 2007-07-25 | 2009-02-12 | Sanyo Electric Co Ltd | Imaging apparatus and method |
| JP5064312B2 (en) * | 2007-08-06 | 2012-10-31 | パナソニック株式会社 | White balance adjusting device, imaging device, white balance adjusting method, program, and integrated circuit |
-
2010
- 2010-11-05 JP JP2010248677A patent/JP5459178B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2012100223A (en) | 2012-05-24 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101317552B1 (en) | Image capturing apparatus, method and storage medium capable of adjusting white balance | |
| US8285075B2 (en) | Image processing apparatus, image processing method, and program | |
| US7548689B2 (en) | Image processing method | |
| US8553138B2 (en) | Image capture apparatus and method for generating combined-image data | |
| US8558944B2 (en) | Image capture apparatus and method for generating combined-image data | |
| US8275212B2 (en) | Image processing apparatus, image processing method, and program | |
| US8599283B2 (en) | Image capture apparatus and image capturing method | |
| US8970745B2 (en) | Image processing device, image processing method and storage medium to suppress shading of images in which pixel addition processing is performed | |
| JP5231734B2 (en) | Image sensor and image brightness distribution adjusting method | |
| JP5408053B2 (en) | Image processing apparatus and image processing method | |
| JP4894907B2 (en) | Imaging apparatus, imaging processing method, and program | |
| JP5115568B2 (en) | Imaging apparatus, imaging method, and imaging program | |
| CN1992820A (en) | Digital camera with face detection function for facilitating exposure compensation | |
| JP2017022610A (en) | Image processing apparatus and image processing method | |
| JP4539432B2 (en) | Image processing apparatus and imaging apparatus | |
| US8059904B2 (en) | Image-processing device, electronic camera, image-processing program, and image-processing method | |
| US8155472B2 (en) | Image processing apparatus, camera, image processing program product and image processing method | |
| JP5225137B2 (en) | Imaging apparatus, image processing method, and program | |
| JP6375806B2 (en) | Image processing apparatus, method, and imaging apparatus | |
| JP4935925B1 (en) | Imaging apparatus, white balance adjustment method, and white balance adjustment program | |
| JP4944639B2 (en) | Image processing apparatus, image processing method, and photographing apparatus | |
| JP2008294524A (en) | Image processor and image processing method | |
| JP5459178B2 (en) | Imaging apparatus, white balance adjustment method, and white balance adjustment program | |
| JP4960597B2 (en) | White balance correction apparatus and method, and imaging apparatus | |
| JP2009010694A (en) | Exposure control circuit and imaging apparatus loaded with it |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20131024 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20131024 |
|
| A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20131030 |
|
| A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20131107 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20131217 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20131230 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 5459178 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| LAPS | Cancellation because of no payment of annual fees |