JP2011033979A - Light emission quantity controller and light emission quantity control method - Google Patents
Light emission quantity controller and light emission quantity control method Download PDFInfo
- Publication number
- JP2011033979A JP2011033979A JP2009182442A JP2009182442A JP2011033979A JP 2011033979 A JP2011033979 A JP 2011033979A JP 2009182442 A JP2009182442 A JP 2009182442A JP 2009182442 A JP2009182442 A JP 2009182442A JP 2011033979 A JP2011033979 A JP 2011033979A
- Authority
- JP
- Japan
- Prior art keywords
- light
- reception signal
- light emission
- emission amount
- output
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 23
- 230000004907 flux Effects 0.000 claims abstract description 20
- 238000003384 imaging method Methods 0.000 claims description 6
- 238000001514 detection method Methods 0.000 claims description 3
- 238000004020 luminiscence type Methods 0.000 claims 2
- 238000010586 diagram Methods 0.000 description 14
- 230000003287 optical effect Effects 0.000 description 13
- 230000011514 reflex Effects 0.000 description 5
- 238000009825 accumulation Methods 0.000 description 4
- 230000000994 depressogenic effect Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000005375 photometry Methods 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 1
- 230000009191 jumping Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
Images
Landscapes
- Stroboscope Apparatuses (AREA)
- Studio Devices (AREA)
Abstract
Description
本発明は、発光量制御装置および発光量制御方法に関するものである。 The present invention relates to a light emission amount control device and a light emission amount control method.
従来より、閃光装置を備えたデジタルカメラなどの撮像装置において、撮影に先立って閃光装置の予備発光を行い、予備発光時の反射光を撮像装置に備えられた測光センサで受光し、予備発光時の反射光の光量と、閃光装置を発光させない状態における光量との差に基づいて、撮影時における閃光装置の発光量を決定する技術が知られている。たとえば、特許文献1では、予備発光に要する時間を短縮するために、予備発光時の反射光を測光センサで受光する際に、測光センサを構成する各画素の画素信号を所定の画素間隔で間欠的に読み出して、間欠的に読み出した画像信号を用いて、撮影時における閃光装置の発光量を決定する手法を開示している。 Conventionally, in an imaging device such as a digital camera equipped with a flash device, preliminary light emission of the flash device is performed prior to shooting, and reflected light at the time of preliminary light emission is received by a photometric sensor provided in the imaging device, and at the time of preliminary light emission There is known a technique for determining the light emission amount of the flash device at the time of photographing based on the difference between the light amount of the reflected light and the light amount in a state where the flash device does not emit light. For example, in Patent Document 1, in order to reduce the time required for preliminary light emission, when the reflected light at the time of preliminary light emission is received by the photometric sensor, the pixel signal of each pixel constituting the photometric sensor is intermittent at predetermined pixel intervals. A method is disclosed in which the amount of light emitted by the flash device at the time of shooting is determined using image signals read out intermittently and intermittently read out.
しかしながら、従来技術においては、撮影画面内に点光源が存在する場合において、非発光時と予備発光時の間で、わずかでも構図にブレが生じると、このような点光源からの輝度を正しく取得することができないことがあり、結果として、撮影時における閃光装置の発光量を適切に決定することができないという問題があった。 However, in the prior art, when there is a point light source in the shooting screen, if even a slight blur occurs in the composition between the non-light emission and the preliminary light emission, the luminance from such a point light source is correctly acquired. As a result, there has been a problem that the amount of light emitted from the flash device at the time of photographing cannot be determined appropriately.
本発明が解決しようとする課題は、構図にブレが生じた場合においても、閃光装置などの発光手段の発光量を適切に決定することができる発光量制御装置および発光量制御方法を提供することである。 The problem to be solved by the present invention is to provide a light emission amount control device and a light emission amount control method capable of appropriately determining the light emission amount of light emitting means such as a flash device even when the composition is blurred. It is.
本発明は、以下の解決手段によって上記課題を解決する。なお、発明の実施形態を示す図面に対応する符号を付して説明するが、この符号は発明の理解を容易にするためだけのものであって発明を限定する趣旨ではない。 The present invention solves the above problems by the following means. In addition, although the code | symbol corresponding to drawing which shows embodiment of this invention is attached | subjected and demonstrated, this code | symbol is only for making an understanding of invention easy, and is not the meaning which limits invention.
[1]本発明に係る発光量制御装置は、光束を受光して受光信号を出力する複数の受光素子を有する受光手段(136)と、対象に対して光束を発光する発光手段(300)と、前記発光手段が発光していない状態で前記複数の受光素子のうちの第1受光素子によって得られる第1受光信号、および前記第1受光素子とは異なる第2受光素子によって得られる第2受光信号のいずれかと、前記発光手段が第1の光束を発光した状態で前記受光手段によって得られる第3受光信号とに基づいて、前記発光手段による前記第1の光束とは異なる第2の光束の発光量を決定する制御手段(150)とを備えたことを特徴とする。 [1] A light emission amount control device according to the present invention includes a light receiving unit (136) having a plurality of light receiving elements that receive a light beam and output a light reception signal, and a light emitting unit (300) that emits the light beam to a target. The first light receiving signal obtained by the first light receiving element among the plurality of light receiving elements in the state where the light emitting means is not emitting light, and the second light receiving obtained by the second light receiving element different from the first light receiving element. Based on one of the signals and a third light receiving signal obtained by the light receiving means in a state where the light emitting means emits the first light flux, the second light flux different from the first light flux by the light emitting means And a control means (150) for determining the light emission amount.
[2]上記発光量制御装置に係る発明において、前記制御手段(150)は、前記第3受光信号に基づいて、前記第1受光信号と前記第2受光信号のいずれかを選択することを特徴とする。 [2] In the invention related to the light emission amount control device, the control means (150) selects either the first light reception signal or the second light reception signal based on the third light reception signal. And
[3]上記発光量制御装置に係る発明において、前記制御手段(150)は、前記第3受光信号の出力と、前記第1受光信号の出力および前記第2受光信号の出力のそれぞれとの差分を算出し、算出した差分に基づいて、前記第1受光信号と前記第2受光信号のいずれかを選択することを特徴とする。 [3] In the invention related to the light emission amount control device, the control means (150) is configured to output a difference between the output of the third light reception signal and the output of the first light reception signal and the output of the second light reception signal. And either one of the first light receiving signal and the second light receiving signal is selected based on the calculated difference.
[4]上記発光量制御装置に係る発明において、前記制御手段(150)は、前記第1受光信号または前記第2受光信号のうち、選択された受光信号の出力と、前記第3受光信号の出力との差分に基づいて、前記第2の光束の発光量を決定することを特徴とする。 [4] In the invention related to the light emission amount control device, the control means (150) includes the output of the light reception signal selected from the first light reception signal or the second light reception signal, and the third light reception signal. The light emission amount of the second light flux is determined based on the difference from the output.
[5]上記発光量制御装置に係る発明において、前記発光手段(300)による前記第1の光束の発光時における、前記受光手段のブレ量を検出するブレ検出手段をさらに有し、前記制御手段(150)は、前記ブレ検出手段により検出されたブレ量に基づいて、前記第1受光信号と前記第2受光信号のいずれかを選択することを特徴とする。 [5] In the invention relating to the light emission amount control device, the light emission means (300) further includes a blur detection unit that detects a blur amount of the light receiving unit when the first light flux is emitted, and the control unit (150), based on the shake amount detected by the shake detecting means, and selects one of the first light receiving signal and the second light receiving signal.
[6]本発明に係る撮像装置は、上記発明に係る発光量制御装置を備えることを特徴とする。 [6] An imaging device according to the present invention includes the light emission amount control device according to the above invention.
[7]本発明に係る発光量制御方法は、対象に対して第1の光束を発光している状態、および発光していない状態における光束を、複数の受光素子により受光し、発光していない状態で前記複数の受光素子のうちの第1受光素子によって得られる第1受光信号、前記第1受光素子とは異なる第2受光素子によって得られる第2受光信号、および前記対象に対して前記第1の光束を発光している状態で前記受光素子によって得られる第3受光信号を取得し、前記第1受光信号および前記第2受光信号のいずれかと、前記第3受光信号とに基づいて、前記第1の光束とは異なる第2の光束の発光量を決定することを特徴とする。 [7] In the light emission amount control method according to the present invention, a light beam in a state where the first light beam is emitted to a target and a state where the light beam is not emitted is received by a plurality of light receiving elements and is not emitted. A first light-receiving signal obtained by a first light-receiving element of the plurality of light-receiving elements, a second light-receiving signal obtained by a second light-receiving element different from the first light-receiving element, and the target Acquiring a third light receiving signal obtained by the light receiving element in a state of emitting one light beam, and based on one of the first light receiving signal and the second light receiving signal and the third light receiving signal, The light emission amount of the second light beam different from the first light beam is determined.
[8]上記発光量制御方法に係る発明において、前記第3受光信号に基づいて、前記第1受光信号と前記第2受光信号のいずれかを選択することを特徴とする。 [8] In the invention related to the light emission amount control method, one of the first light reception signal and the second light reception signal is selected based on the third light reception signal.
[9]上記発光量制御方法に係る発明において、前記第3受光信号の出力と、前記第1受光信号の出力および前記第2受光信号の出力のそれぞれとの差分を算出し、算出した差分に基づいて、前記第1受光信号と前記第2受光信号のいずれかを選択することを特徴とする。 [9] In the invention related to the light emission amount control method, a difference between the output of the third light reception signal and each of the output of the first light reception signal and the output of the second light reception signal is calculated, and the calculated difference is calculated. Based on this, either the first light reception signal or the second light reception signal is selected.
[10]上記発光量制御方法に係る発明において、前記第1受光信号または前記第2受光信号のうち、選択された受光信号の出力と、前記第3受光信号の出力との差分に基づいて、前記第2の光束の発光量を決定することを特徴とする。 [10] In the invention related to the light emission amount control method, based on the difference between the output of the light reception signal selected from the first light reception signal or the second light reception signal and the output of the third light reception signal, The light emission amount of the second light beam is determined.
本発明によれば、構図にブレが生じた場合においても、閃光装置などの発光手段の発光量を適切に決定することができる発光量制御装置および発光量制御方法を提供することができる。 According to the present invention, it is possible to provide a light emission amount control device and a light emission amount control method that can appropriately determine the light emission amount of light emission means such as a flash device even when the composition is blurred.
以下、本発明の実施形態を図面に基づいて説明する。
図1は、本実施形態に係る一眼レフデジタルカメラ1の要部構成を示す図であり、上記発明に係る発光量制御装置および撮像装置に関する構成以外の一眼レフデジタルカメラシステムの一般的構成については、その図示と説明を一部省略する。
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
FIG. 1 is a diagram showing a main configuration of a single-lens reflex digital camera 1 according to the present embodiment, and a general configuration of a single-lens reflex digital camera system other than the configuration related to the light emission amount control device and the imaging device according to the invention described above. Some illustrations and explanations thereof are omitted.
本実施形態の一眼レフデジタルカメラ1(以下、単にカメラ1という。)は、カメラボディ100とレンズ鏡筒200と閃光装置300とを備えており、レンズ鏡筒200および閃光装置300は、それぞれマウント部を介して、カメラボディ100と着脱可能に結合されている。
The single-lens reflex digital camera 1 (hereinafter simply referred to as the camera 1) of the present embodiment includes a
レンズ鏡筒200には、レンズ210,220や絞り装置230などからなる撮影光学系が内蔵されている。
The
レンズ220は、たとえばフォーカスレンズであり、その光軸L1に沿って移動可能に設けられ、レンズ駆動モータ(不図示)によってその位置が調節される。
The
絞り装置230は、上記撮影光学系を通過して撮像素子110に至る光束の光量を制限するとともにボケ量を調整するために、光軸L1を中心にした開口径が調節可能に構成されている。
The
カメラボディ100は、図1に示すように、被写体からの光束を撮像素子110、ファインダ134、および測光センサ136へ導くためのクイックリターンミラー120を備える。
As shown in FIG. 1, the
図1には、クイックリターンミラー120が被写体の観察位置にある状態を実線で示し、被写体の撮影位置にある状態を二点鎖線で示す。クイックリターンミラー120は、被写体の観察位置にある状態では光軸L1の光路上に挿入される一方で、被写体の撮影位置にある状態では光軸L1の光路から退避するように回転する。
In FIG. 1, a state where the
クイックリターンミラー120が、被写体の観察位置にある状態においては、被写体からの光束(光軸L1)が当該クイックリターンミラー120で反射してファインダ134および測光センサ136へ導かれる(光軸L2,L3)。一方で、撮影者がレリーズボタン140を押すとクイックリターンミラー120が撮影位置に回転し、被写体からの光束(光軸L1)は撮像素子110へ導かれる。
In a state where the
撮像素子110は、カメラボディ100の、被写体からの光束の光軸L1上であって、撮影光学系の予定焦点面となる位置に設けられ、その前面にシャッタ111が設けられている。撮像素子110は、複数の光電変換素子が二次元に配列されたものであって、二次元CCDイメージセンサ、CMOSセンサまたはCIDなどで構成することができる。この撮像素子110で光電変換された電気画像信号は、カメラ制御装置150に送信され、カメラ制御装置150で画像処理されたのちメモリ(不図示)に保存される。なお、撮影画像を格納するメモリは内蔵型メモリやカード型メモリなどで構成することができる。
The
一方、クイックリターンミラー120で反射された被写体光は、撮像素子110と光学的に等価な面に配置された焦点板131に結像し、ペンタプリズム132と接眼レンズ133とを介して撮影者により観察可能となっている。これにより、レリーズしない状態において、ファインダ134を通して被写体およびその背景を観察することができる。
On the other hand, the subject light reflected by the
また、接眼レンズ133の近傍には、測光用レンズ135と測光センサ136が設けられ、焦点板131に結像した被写体光の一部を受光する。測光センサ136は、CMOSセンサなどで構成される。測光センサ136で光電変換された電気画像信号は、カメラ制御装置150に送信され、閃光装置300による閃光発光量を演算するために用いられる。
A
カメラ制御装置150は、レンズ鏡筒200に備えられたレンズ制御装置(不図示)と電気的に接続され、レンズ情報を受信するとともに、レンズ制御装置へ絞り開口径やレンズ220の駆動量などの情報を送信する。また、カメラ制御装置150は、閃光装置300に備えられた閃光制御装置(不図示)と電気的に接続されており、発光指令を送信するなど、カメラ1全体の制御を司る。
The
なお、カメラ制御装置150から閃光制御装置に送信される発光指令としては、撮像素子110により被写体を撮影する際における撮影時発光指令の他、被写体の撮影時における閃光装置300の閃光発光量を算出するための予備発光を行うための予備発光指令などが挙げられる。また、カメラ制御装置150は、上述したように測光センサ136から電気画像信号を取得することで得られる閃光装置300による閃光発光量を演算し、算出した閃光発光量を、撮影時閃光発光指令とともに、閃光装置300に送信することで、被写体の撮影時における閃光装置300の閃光発光量を制御する。
As the light emission command transmitted from the
閃光装置300は、閃光装置300に備えられた閃光制御装置(不図示)が、カメラ制御装置150から送信される発光指令を受信することで、発光指令に基づいて被写体に対して閃光発光を行う。
In the
次に、本実施形態に係るカメラ1の動作例を説明する。図2は、本実施形態に係るカメラ1の動作を示すフローチャートである。なお、以下に説明する動作は、カメラ1の電源がONされることにより開始される。 Next, an operation example of the camera 1 according to this embodiment will be described. FIG. 2 is a flowchart showing the operation of the camera 1 according to this embodiment. The operation described below is started when the camera 1 is turned on.
まず、ステップS1では、カメラ1の電源がONされると、測光センサ136により、閃光装置300による閃光発光が行われていない状態において、測光用の画像信号の取得が行なわれ、測光センサ136により取得された画像信号が、カメラ制御装置150に出力される。ここで、本実施形態における、測光センサ136により取得された画像信号の出力方法について説明する。図3は、測光センサ136を示す図である。図3に示すように、測光センサ136は、横20×縦30の画素が配置されてなるものである。なお、本実施形態においては、これらの画素の横方向の座標をi=0〜19とし、縦方向の座標をj=0〜29とする。
First, in step S1, when the power of the camera 1 is turned on, an image signal for photometry is acquired by the
そして、本実施形態では、画像信号を、図4(A)〜図4(C)に示すように、それぞれ異なる出力パターンを有するものとし、これらのパターンに応じた画像信号を、カメラ制御装置150に出力する。すなわち、本実施形態では、3種類の画像信号を出力する。なお、図4(A)〜図4(C)中においては、網掛けして示した画素が、画像信号を出力するための画素に相当する。すなわち、図4(A)に示すパターンにおいては、j=0,3,6,9,12,15,18,21,24,27である画素が、画像信号を出力するための画素となり、その他の行の画素については、出力を行なわない。なお、図4(A)に示すパターンかなる画像信号を「非発光時画像信号A」とする。同様に、図4(B)に示すパターンにおいては、j=1,4,7,10,13,16,19,22,25,28である画素が、画像信号を出力するための画素となり、このパターンからなる画像信号を「非発光時画像信号B」とする。さらに、図4(C)に示すパターンにおいては、j=2,5,8,11,14,17,20,23,26,29である画素が、画像信号を出力するための画素となり、このパターンからなる画像信号を「非発光時画像信号C」とする。
In the present embodiment, the image signals have different output patterns as shown in FIGS. 4A to 4C, and the image signals corresponding to these patterns are transmitted to the
そして、本実施形態では、測光センサ136により取得された画像信号が、このような異なる3つの非発光時画像信号A〜Cとして、カメラ制御装置150に出力される。
In this embodiment, the image signal acquired by the
たとえば、図5に示すような場面(撮影画面内に、被写体の後ろに点光源としての日光が存在するような場面)においては、図6(A)に示すように、非発光時画像信号Aには、点光源としての日光の存在する部分の画素の画像信号が含まれないこととなるため、図6(B)に示すように、非発光時画像信号Aの出力には、点光源としての日光の存在に起因する出力が含まれないものとなる。なお、図6(B)は、図6(A)に示す場面における、非発光時画像信号Aの出力を示す図であり、相対的に輝度が低い部分を濃いドットで示しており、一方、相対的に輝度が高い部分を薄いドットで示している(後述する図7(B)、図8(B)、図9(B)、図10(B)においても同様。)。 For example, in a scene as shown in FIG. 5 (a scene in which sunlight as a point light source exists behind the subject in the shooting screen), as shown in FIG. 6B does not include the image signal of the pixel in the part where sunlight as a point light source exists, so that as shown in FIG. The output due to the presence of sunlight is not included. FIG. 6B is a diagram showing the output of the non-light-emitting image signal A in the scene shown in FIG. 6A, where the relatively low luminance portions are indicated by dark dots, The relatively high luminance portions are indicated by thin dots (the same applies to FIGS. 7B, 8B, 9B, and 10B described later).
一方、図5に示すような場面において、図7(A)、図8(A)に示すように、非発光時画像信号Bおよび非発光時画像信号Cには、点光源としての日光の存在する部分の画素の画像信号が含まれることとなるため、図7(B)、図8(B)に示すように、非発光時画像信号Bおよび非発光時画像信号Cの出力には、点光源としての日光の存在に起因する出力が含まれることとなる。 On the other hand, in the scene as shown in FIG. 5, as shown in FIGS. 7A and 8A, the non-light-emitting image signal B and the non-light-emitting image signal C have sunlight as a point light source. 7 (B) and FIG. 8 (B), the output of the non-light emitting image signal B and the non-light emitting image signal C includes dots as shown in FIGS. The output resulting from the presence of sunlight as the light source is included.
次いで、ステップS2では、カメラ制御装置150により、レリーズスイッチ140の押下げ動作が行なわれたか否かの判定が行なわれ、レリーズスイッチ140の押下げ動作が行なわれた場合には、ステップS2に進む。一方、レリーズスイッチ140の押下げ動作が行なわれていない場合には、レリーズスイッチ140の押下げ動作が行なわれるまで、カメラ1の電源がOFFされたか否かの判断(ステップS3)、および上述した測光センサ136による測光用の画像信号の取得および取得した画像信号(非発光時画像信号A〜C)のカメラ制御装置150への出力(ステップS1)が繰り返される。なお、ステップS3において、カメラ1の電源がOFFされたと判定された場合には、本処理を終了することとなる。
Next, in step S2, the
ステップS3では、カメラ制御装置150により、閃光装置300に備えられた閃光制御装置に、被写体の撮影時における閃光装置300の閃光発光量を測定するための予備発光を行うための予備発光指令が送出され、これに基づき、閃光装置300により予備発光が行われる。そして、この際において、測光センサ136により、予備発光時における、測光用の画像信号の取得が行なわれ、測光センサ136により取得された画像信号が、カメラ制御装置150に出力される。本実施形態では、予備発光時における、予備発光時画像信号として、上述した図4(A)に示す出力パターンを有する画像信号(すなわち、上述した非発光時画像信号Aと同様の出力パターンを有する画像信号)が選択される。すなわち、j=0,3,6,9,12,15,18,21,24,27である画素が、予備発光時における画像信号を出力するための画素となり、その他の行の画素については、出力を行なわない。
In step S3, the
たとえば、ステップS3において、ステップS1における場合と比較して、構図の変更が行なわれておらず、かつ、構図ブレが全く無いとした場合には、図9(A)に示すように、予備発光時画像信号には、点光源としての日光の存在する部分の画素の画像信号は含まれないものとなるため、図9(B)に示すように、予備発光時画像信号の出力には、点光源としての日光の存在に起因する出力が含まれないものとなる。また、図9(B)においては、閃光装置300により予備発光を行っているため、被写体部分が背景部分と比較して、輝度の明るいものとなる。
For example, in step S3, when the composition has not been changed and there is no composition blur as compared with the case in step S1, preliminary light emission is performed as shown in FIG. Since the time image signal does not include the image signal of the pixel in the portion where the sunlight as the point light source exists, as shown in FIG. The output resulting from the presence of sunlight as a light source is not included. In FIG. 9B, since the preliminary flash is performed by the
これに対して、ステップS3において、ステップS1における場合と比較して、構図の変更が行なわれていないものの、構図ブレが起こった場合には、図10(A)に示すように、予備発光時画像信号には、点光源としての日光の存在する部分の画素の画像信号が含まれることとなるため、図10(B)に示すように、予備発光時画像信号の出力には、点光源としての日光の存在に起因する出力が含まれることとなる。 On the other hand, in step S3, compared to the case in step S1, the composition is not changed, but when composition blurring occurs, as shown in FIG. Since the image signal includes an image signal of a pixel in a portion where sunlight as a point light source exists, as shown in FIG. Output due to the presence of sunlight.
ステップS5では、カメラ制御装置150により、ステップS1で取得された非発光時画像信号A〜Cのうち、撮影時における閃光装置300による閃光発光量を決定するために用いる非発光時画像信号の選択が行なわれる。以下、画像信号の選択方法について、説明を行なう。
In step S5, of the non-light emitting image signals A to C acquired in step S1 by the
なお、以下においては、非発光時画像信号A〜Cにおける各画素の出力(A/D変換後の出力)をVoy[i][j][k]とし、予備発光時画像信号における各画素の出力(A/D変換後の出力)をVoySB[i][j]として、説明を行なう。ここにおいて、i=0〜19、j=0〜9、k=0〜2であり、k=0の場合には非発光時画像信号Aを表し、k=1の場合には非発光時画像信号Bを表し、k=2の場合には非発光時画像信号Cを表す。また、各画素の出力Voy[i][j][k]およびVoySB[i][j]は、0〜1023の整数値をとるものである。 In the following, the output of each pixel in the non-light emitting image signals A to C (output after A / D conversion) is Voy [i] [j] [k], and each pixel in the preliminary light emitting image signal is output. The output (output after A / D conversion) will be described as VoySB [i] [j]. Here, i = 0 to 19, j = 0 to 9, k = 0 to 2, and k = 0 represents the non-light emitting image signal A, and k = 1 represents the non-light emitting image. The signal B is represented. When k = 2, the non-light emitting image signal C is represented. Further, the output Voy of each pixel [i] [j] [k] and VoySB [i] [j] is assumed to take an integer value of 0 to 1023.
まず、カメラ制御装置150は、下記式(1)に従って、非発光時画像信号A〜Cと、予備発光時画像信号との差分(Sabun[k])の算出を行なう。
Sabun[k] = ΣΣABS(VoySB[i][j]−Voy[i][j][k]×Intpx/IntpxBack) …(1)
ただし、上記式(1)中、ABS()は引数の絶対値を返す関数であり、Intpxは、予備発光時画像信号を取得した際における測光センサ306の蓄積時間であり、IntpxBackは、非発光時画像信号A〜Cを取得した際における測光センサ306の蓄積時間である。また、上記式(1)中、「ΣΣ」は、i,j(i=0〜19、j=0〜9)に対して繰り返し加算を行なうことを意味している。
First, the
Sabun [k] = ΣΣ ABS (VoySB [i] [j] −Voy [i] [j] [k] × Intpx / IntpxBack) (1)
In the above formula (1), ABS () is a function that returns the absolute value of the argument, Intpx is the accumulation time of the photometric sensor 306 when the image signal at the time of preliminary light emission is acquired, and IntpxBack is a non-light emission This is the accumulation time of the photometric sensor 306 when the hour image signals A to C are acquired. In the above formula (1), “ΣΣ” means that addition is repeatedly performed on i, j (i = 0 to 19, j = 0 to 9).
そして、本実施形態では、上記式(1)に従った差分(Sabun[k])の算出を、k=0〜2のそれぞれ(すなわち、非発光時画像信号A〜Cのそれぞれ)について行ない、これらのうち、最も差分(Sabun[k])の小さいものを、閃光発光量を決定するために用いる非発光時画像信号として選択する。すなわち、たとえば、k=0のときの差分(Sabun[0])が最も小さい場合には、非発光時画像信号Aが、閃光発光量を決定するために用いる非発光時画像信号として選択される。同様に、k=1のときの差分(Sabun[1])が最も小さい場合には、非発光時画像信号Bが、k=2のときの差分(Sabun[2])が最も小さい場合には、非発光時画像信号Cが、それぞれ閃光発光量を決定するために用いる非発光時画像信号として選択される。 In this embodiment, the difference (Sabun [k]) according to the above equation (1) is calculated for each of k = 0 to 2 (that is, the non-light emitting image signals A to C), Among these, the one with the smallest difference (Sabun [k]) is selected as a non-light emitting image signal used to determine the flash emission amount. That is, for example, when the difference (Sabun [0]) when k = 0 is the smallest, the non-light emitting image signal A is selected as the non-light emitting image signal used to determine the flash emission amount. . Similarly, when the difference (Sabun [1]) when k = 1 is the smallest, the image signal B when not emitting light is the smallest when the difference (Sabun [2]) when k = 2 is smallest. The non-light-emission image signal C is selected as a non-light-emission image signal used for determining the flash emission amount.
たとえば、図9(A)に示すように、ステップS3において、構図ブレが全く無い場合には、図9(B)に示すように、予備発光時画像信号の出力には、点光源としての日光の存在に起因する出力が含まれないものとなる。そのため、同様に、その出力に、点光源としての日光の存在に起因する出力が含まれない非発光時画像信号Aが、最も出力の差分(Sabun[k])の小さいものとして選択されることとなる。すなわち、k=0が選択されることとなる。なお、図11に、予備発光時画像信号の出力と、非発光時画像信号Aの出力との差分を示す図を示す。なお、図11においては、差分が小さい部分を濃いドットで示しており、一方、差分が大きい部分を薄いドットで示している(後述する図12においても同様。)。 For example, as shown in FIG. 9A, in the case where there is no composition blur at step S3, as shown in FIG. The output due to the presence of is not included. Therefore, similarly, the non-light-emitting image signal A that does not include the output due to the presence of sunlight as a point light source is selected as the one having the smallest output difference (Sabun [k]). It becomes. That is, k = 0 is selected. FIG. 11 is a diagram showing a difference between the output of the image signal during preliminary light emission and the output of the image signal A during non-light emission. In FIG. 11, a portion having a small difference is indicated by a dark dot, while a portion having a large difference is indicated by a thin dot (the same applies to FIG. 12 described later).
これに対して、図10(A)に示すように、ステップS3において、構図ブレが発生した場合には、図10(B)に示すように、予備発光時画像信号の出力には、点光源としての日光の存在に起因する出力が含まれることとなる。そのため、同様に、その出力に、点光源としての日光の存在に起因する出力が含まれる非発光時画像信号Bが、最も出力の差分(Sabun[k])の小さいものとして選択されることとなる。すなわち、k=1が選択されることとなる。 On the other hand, as shown in FIG. 10A, when composition blur occurs in step S3, as shown in FIG. 10B, a point light source is used to output the preliminary light emission image signal. As a result, the output resulting from the presence of sunlight is included. Therefore, similarly, the non-light-emitting image signal B including the output due to the presence of sunlight as a point light source is selected as the one having the smallest output difference (Sabun [k]). Become. That is, k = 1 is selected.
ステップS6では、カメラ制御装置150により、ステップS5で選択した非発光時画像信号、および予備発光時画像信号を用いて、撮影時における閃光装置300の閃光発光量の算出が行われる。以下、撮影時における閃光装置300の閃光発光量の算出方法について説明する。
In step S6, the
まず、カメラ制御装置150は、下記式(2)に従って、測光センサ306により測定された測光用画像における画面全体の平均反射量RMを算出する。なお、下記式(2)において、Voy[i][j][k]としては、上述したステップS5で選択された非発光時画像信号の出力が用いられる。すなわち、非発光時画像信号Aが選択された場合には、Voy[i][j][0]が用いられ、非発光時画像信号B、Cが選択された場合には、Voy[i][j][1]、Voy[i][j][2]がそれぞれ用いられる。
RM = (ΣΣ(VoySB[i][j]−Voy[i][j][k]×Intpx/IntpxBack)/(i×j) …(2)
ただし、上記式(2)中、Intpxは、予備発光時画像信号を取得した際における測光センサ306の蓄積時間であり、IntpxBackは、非発光時画像信号A〜Cを取得した際における測光センサ306の蓄積時間である。また、上記式(1)中、「ΣΣ」は、i,j(i=0〜19、j=0〜9)に対して繰り返し加算を行なうことを意味している。
First, the
RM = (ΣΣ (VoySB [i] [j] −Voy [i] [j] [k] × Intpx / IntpxBack) / (i × j)) (2)
In the above formula (2), Intpx is the accumulation time of the photometric sensor 306 when the pre-light emission image signal is acquired, and IntpxBack is the photometric sensor 306 when the non-light emission image signals A to C are acquired. Is the accumulation time. In the above formula (1), “ΣΣ” means that addition is repeatedly performed on i, j (i = 0 to 19, j = 0 to 9).
なお、上記式(2)においては、予備発光時画像信号の出力から、ステップS5で選択された非発光時画像信号の出力を減算して、予備発光に基づく反射光成分の抽出を行い、これを平均することで、画面全体の平均反射量RMを求めるものである。 In the above equation (2), the output of the non-light emission image signal selected in step S5 is subtracted from the output of the preliminary light emission image signal to extract the reflected light component based on the preliminary light emission. Is obtained to obtain an average reflection amount RM of the entire screen.
次いで、カメラ制御装置150は、下記式(3)にしたがって、発光量ガイドナンバーGNを算出する。なお、発光量ガイドナンバーGNは、閃光装置300の閃光発光量に相当するものである。
GN = Power√2(−Log2(RM)+GvMon+GNConst) …(3)
ただし、上記式(3)において、Power√2()は、√2の引数乗を返す関数であり、Log2()は2を底とした引数の対数値を返す関数である。また、GNConstは発光量を基準値とするための定数項であり、GvMonは下記式(4)で算出される。
GvMon = Log√2(GnMon) …(4)
ただし、上記式(4)において、Log√2は√2を底とした引数の対数値をとる関数であり、GnMonは、ステップS3における予備発光時における発光量ガイドナンバーである。
Next, the
GN = Power√2 (−Log 2 (RM) + GvMon + GNConst) (3)
However, in the above formula (3), Power√2 () is a function that returns the power of the argument of √2, and Log 2 () is a function that returns the logarithmic value of the argument with 2 as the base. GNConst is a constant term for using the light emission amount as a reference value, and GvMon is calculated by the following equation (4).
GvMon = Log √2 (GnMon) (4)
In the above equation (4), Log √2 is a function that takes a logarithmic value of an argument with √2 as the base, and GnMon is a light emission amount guide number at the time of preliminary light emission in step S3.
そして、上記式(3)にしたがって、カメラ制御装置150により、算出された発光量ガイドナンバーGN(閃光発光量)が、閃光装置300に備えられた閃光制御装置に送信される。
Then, the calculated light emission amount guide number GN (flash emission amount) is transmitted by the
次いで、ステップS7では、被写体像の撮影が行なわれる。具体的には、まず、カメラ制御装置150により、クイックリターンミラー120の上部への跳ね上げ動作(図1中の二点鎖線部分への移動)、およびシャッタ111の開放動作が行なわれる。そして、カメラ制御装置150から、閃光装置300に備えられた閃光制御装置に、撮影時発光指令が送信され、閃光装置300により、ステップS6で算出された発光量ガイドナンバーGN(閃光発光量)に基づいて、閃光発光が行われ、これと同期して、撮像素子110により被写体像の撮影が行なわれる。そして、その後、カメラ制御装置150により、クイックリターンミラー120を元の位置に戻す動作、およびシャッタ111を閉じる動作が行なわれる。
Next, in step S7, a subject image is taken. Specifically, first, the
ステップS8では、カメラ1の電源がOFFされたか否かの判断が行なわれる。カメラ1の電源がOFFされたと判断された場合には、本処理を終了する。一方、カメラ1の電源がOFFされていないと判断された場合には、ステップS1に戻り、上述した処理を繰り返し実行する。 In step S8, it is determined whether or not the camera 1 is turned off. If it is determined that the power of the camera 1 has been turned off, this process is terminated. On the other hand, if it is determined that the power of the camera 1 is not turned off, the process returns to step S1 and the above-described processing is repeatedly executed.
本実施形態に係るカメラ1は以上のように動作する。 The camera 1 according to the present embodiment operates as described above.
本実施形態においては、予備発光時に測光サンサ136から出力する予備発光時画像信号として、図4(A)に示すように、特定の一部の画素を画像信号を出力するための画素とし、かつ、図4(A)〜図4(C)に示す非発光時画像信号A〜Cとの出力の差分を算出し、出力の差分の最も小さいものを選択し、選択した非発光時画像信号と、予備発光時画像信号とに基づいて、閃光装置300の閃光発光量を算出するものである。そのため、本実施形態によれば、特定の一部の画素を画像信号を出力するための画素とすることで、予備発光時における予備発光時画像信号の出力速度を速いものとしながら、閃光装置300の閃光発光量を適切に決定することができる。
In the present embodiment, as a preliminary light emission image signal output from the
加えて、本実施形態によれば、予備発光時画像信号の出力と、非発光時画像信号A〜Cとの出力の差分を算出し、これに基づき、閃光装置300の閃光発光量を算出するものであるため、図10(A)に示すように構図ブレが発生した場合においても、適切に閃光発光量を決定することができる。特に、図10(A)に示す場合において、単に同様のパターンを有する非発光時画像信号Aの出力と、図10(A)に示す予備発光時画像信号の出力との差を算出すると、図12に示すように、点光源である日光の存在する部分の画素において、差分が大きく出てしまい、結果として、閃光発光量を適切に決定することができないという問題がある。これに対して、本実施形態では、上記構成を有することで、このような問題を有効に解決するものである。
In addition, according to the present embodiment, the difference between the output of the preliminary light emission image signal and the non-light emission image signals A to C is calculated, and based on this, the flash light emission amount of the
なお、以上説明した実施形態は、上記発明の理解を容易にするために記載されたものであって、上記発明を限定するために記載されたものではない。したがって、上記の実施形態に開示された各要素は、上記発明の技術的範囲に属する全ての設計変更や均等物をも含む趣旨である。 The embodiment described above is described for facilitating the understanding of the invention, and is not described for limiting the invention. Therefore, each element disclosed in the above embodiment includes all design changes and equivalents belonging to the technical scope of the above invention.
たとえば、上述した実施形態では、測光センサ136の画像信号出力用の画素パターンを3種類のパターンとしたが、その数に制限はなく、適宜設定することができる。また、上述した実施形態では、測光センサ136の画像信号出力用の画素パターンを、縦方向に沿って間欠となるようなパターンとしたが、横方向に沿って間欠となるようなパターンとしてもよい。
For example, in the above-described embodiment, the pixel pattern for image signal output of the
また、上述した実施形態では、測光センサ136により、閃光装置300の閃光発光量を決定するための測定を行う構成を例示したが、測光センサ136の代わりに、撮像素子110を用いて行なうような構成としてもよい。
In the above-described embodiment, the configuration for performing the measurement for determining the flash emission amount of the
さらに、上述した実施形態において、カメラ1は角速度センサを有するものとし、撮影時における閃光装置300による閃光発光量を決定するために用いる非発光時画像信号の選択を行なう際に、角速度センサにより、カメラのブレを検出するとともに、ブレ量に基づいて、閃光発光量を決定するために用いる非発光時画像信号を決定するような構成としてもよい。
Furthermore, in the above-described embodiment, the camera 1 has an angular velocity sensor, and when the non-light emitting image signal used for determining the flash emission amount by the
1…一眼レフデジタルカメラ
100…カメラボディ
110…撮像素子
136…測光センサ
140…レリーズスイッチ
150…カメラ制御装置
200…レンズ鏡筒
300…閃光装置
DESCRIPTION OF SYMBOLS 1 ... Single-lens reflex
Claims (10)
対象に対して光束を発光する発光手段と、
前記発光手段が発光していない状態で前記複数の受光素子のうちの第1受光素子によって得られる第1受光信号、および前記第1受光素子とは異なる第2受光素子によって得られる第2受光信号のいずれかと、前記発光手段が第1の光束を発光した状態で前記受光手段によって得られる第3受光信号とに基づいて、前記発光手段による前記第1の光束とは異なる第2の光束の発光量を決定する制御手段とを備えたことを特徴とする発光量制御装置。 A light receiving means having a plurality of light receiving elements for receiving a light beam and outputting a light reception signal;
A light emitting means for emitting a light beam to an object;
A first light receiving signal obtained by a first light receiving element of the plurality of light receiving elements in a state where the light emitting means is not emitting light, and a second light receiving signal obtained by a second light receiving element different from the first light receiving element. Or a third light receiving signal obtained by the light receiving means in a state where the light emitting means emits the first light flux, and the light emitting means emits a second light flux different from the first light flux. A light emission amount control device comprising: control means for determining the amount.
前記制御手段は、前記第3受光信号に基づいて、前記第1受光信号と前記第2受光信号のいずれかを選択することを特徴とする発光量制御装置。 The light emission amount control device according to claim 1,
The light emission amount control device, wherein the control means selects either the first light reception signal or the second light reception signal based on the third light reception signal.
前記制御手段は、前記第3受光信号の出力と、前記第1受光信号の出力および前記第2受光信号の出力のそれぞれとの差分を算出し、算出した差分に基づいて、前記第1受光信号と前記第2受光信号のいずれかを選択することを特徴とする発光量制御装置。 The light emission amount control device according to claim 2,
The control means calculates a difference between the output of the third received light signal and each of the output of the first received light signal and the output of the second received light signal, and based on the calculated difference, the first received light signal And the second light receiving signal are selected.
前記制御手段は、前記第1受光信号または前記第2受光信号のうち、選択された受光信号の出力と、前記第3受光信号の出力との差分に基づいて、前記第2の光束の発光量を決定することを特徴とする発光量制御装置。 In the luminescence amount control device according to any one of claims 1 to 3,
The control means is configured to emit light of the second light flux based on a difference between the output of the selected light reception signal and the output of the third light reception signal among the first light reception signal or the second light reception signal. A light emission amount control device, characterized in that:
前記発光手段による前記第1の光束の発光時における、前記受光手段のブレ量を検出するブレ検出手段をさらに有し、
前記制御手段は、前記ブレ検出手段により検出されたブレ量に基づいて、前記第1受光信号と前記第2受光信号のいずれかを選択することを特徴とする発光量制御装置。 In the luminescence amount control device according to any one of claims 1 to 4,
A blur detection unit that detects a blur amount of the light receiving unit when the first light flux is emitted by the light emitting unit;
The light emission amount control device, wherein the control means selects one of the first light reception signal and the second light reception signal based on a shake amount detected by the shake detection means.
発光していない状態で前記複数の受光素子のうちの第1受光素子によって得られる第1受光信号、前記第1受光素子とは異なる第2受光素子によって得られる第2受光信号、および前記対象に対して前記第1の光束を発光している状態で前記受光素子によって得られる第3受光信号を取得し、
前記第1受光信号および前記第2受光信号のいずれかと、前記第3受光信号とに基づいて、前記第1の光束とは異なる第2の光束の発光量を決定することを特徴とする発光量制御方法。 The light beam in a state where the first light beam is emitted to the object and a state where the light beam is not emitted is received by a plurality of light receiving elements
A first light receiving signal obtained by a first light receiving element of the plurality of light receiving elements in a state where no light is emitted, a second light receiving signal obtained by a second light receiving element different from the first light receiving element, and the target A third light receiving signal obtained by the light receiving element in a state where the first light flux is emitted,
A light emission amount, wherein a light emission amount of a second light beam different from the first light beam is determined based on one of the first light reception signal and the second light reception signal and the third light reception signal. Control method.
前記第3受光信号に基づいて、前記第1受光信号と前記第2受光信号のいずれかを選択することを特徴とする発光量制御方法。 In the light emission amount control method according to claim 7,
A light emission amount control method, wherein either the first light reception signal or the second light reception signal is selected based on the third light reception signal.
前記第3受光信号の出力と、前記第1受光信号の出力および前記第2受光信号の出力のそれぞれとの差分を算出し、算出した差分に基づいて、前記第1受光信号と前記第2受光信号のいずれかを選択することを特徴とする発光量制御方法。 The light emission amount control method according to claim 8,
A difference between the output of the third light reception signal and the output of the first light reception signal and the output of the second light reception signal is calculated, and the first light reception signal and the second light reception are calculated based on the calculated difference. A light emission amount control method, wherein one of the signals is selected.
前記第1受光信号または前記第2受光信号のうち、選択された受光信号の出力と、前記第3受光信号の出力との差分に基づいて、前記第2の光束の発光量を決定することを特徴とする発光量制御方法。 The light emission amount control method according to any one of claims 7 to 9,
Determining the light emission amount of the second light flux based on the difference between the output of the selected light reception signal and the output of the third light reception signal of the first light reception signal or the second light reception signal; A feature of the light emission amount control method.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009182442A JP5521429B2 (en) | 2009-08-05 | 2009-08-05 | Light emission amount control device and light emission amount control method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009182442A JP5521429B2 (en) | 2009-08-05 | 2009-08-05 | Light emission amount control device and light emission amount control method |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011033979A true JP2011033979A (en) | 2011-02-17 |
JP5521429B2 JP5521429B2 (en) | 2014-06-11 |
Family
ID=43763092
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009182442A Active JP5521429B2 (en) | 2009-08-05 | 2009-08-05 | Light emission amount control device and light emission amount control method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5521429B2 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2012093519A1 (en) * | 2011-01-06 | 2012-07-12 | 富士フイルム株式会社 | Imaging device and light emission amount control method |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000162676A (en) * | 1998-11-25 | 2000-06-16 | Canon Inc | Image pickup device, image pickup method and recording medium |
-
2009
- 2009-08-05 JP JP2009182442A patent/JP5521429B2/en active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000162676A (en) * | 1998-11-25 | 2000-06-16 | Canon Inc | Image pickup device, image pickup method and recording medium |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2012093519A1 (en) * | 2011-01-06 | 2012-07-12 | 富士フイルム株式会社 | Imaging device and light emission amount control method |
US9001266B2 (en) | 2011-01-06 | 2015-04-07 | Fujifilm Corporation | Imaging device and light emission amount control method of the same |
Also Published As
Publication number | Publication date |
---|---|
JP5521429B2 (en) | 2014-06-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5020651B2 (en) | Imaging apparatus and imaging system | |
US8294785B2 (en) | Method for adjusting photosensitiveness of digital camera | |
JP6303304B2 (en) | camera | |
JP2010213038A (en) | Imaging apparatus | |
JP2008122534A (en) | Imaging apparatus, control method and program therefor | |
JP2007135140A (en) | Imaging apparatus | |
JP2011227372A (en) | Lighting device and camera | |
JP2010041510A (en) | Imaging apparatus and control method | |
JP2009053568A (en) | Imaging apparatus and imaging system | |
JP6393091B2 (en) | Imaging apparatus, control method therefor, program, and storage medium | |
JP5521429B2 (en) | Light emission amount control device and light emission amount control method | |
JP2012063664A (en) | Photometric device and electronic camera | |
JP2013101362A (en) | Camera system | |
CN109387992B (en) | Image pickup apparatus capable of sufficiently ensuring light emission accuracy and control method thereof | |
JP2022012301A (en) | Information processing apparatus, imaging apparatus, control method, and program | |
JP5458860B2 (en) | Imaging device | |
JP5531607B2 (en) | Focus detection apparatus and imaging apparatus | |
JP2013041002A (en) | Camera | |
JP2010113223A (en) | Imaging device, stroboscopic system, and light emission control method | |
JP2011114442A (en) | Electronic camera | |
JP5515541B2 (en) | Imaging device | |
JP2009003261A (en) | Focus adjustment device, imaging device and focus adjustment method | |
CN108712617B (en) | Image pickup apparatus that performs reflected flash shooting, control method thereof, and storage medium | |
JP6128193B2 (en) | Imaging device | |
JP2016142776A (en) | Imaging device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120806 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130910 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130911 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20131111 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20131217 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140217 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140311 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140324 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5521429 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |