JP2010213220A - Imaging apparatus, and imaging control method - Google Patents

Imaging apparatus, and imaging control method Download PDF

Info

Publication number
JP2010213220A
JP2010213220A JP2009059943A JP2009059943A JP2010213220A JP 2010213220 A JP2010213220 A JP 2010213220A JP 2009059943 A JP2009059943 A JP 2009059943A JP 2009059943 A JP2009059943 A JP 2009059943A JP 2010213220 A JP2010213220 A JP 2010213220A
Authority
JP
Japan
Prior art keywords
image
exposure
exposure unevenness
line
recorded
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2009059943A
Other languages
Japanese (ja)
Other versions
JP5129182B2 (en
Inventor
Takayuki Matsuura
孝之 松浦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2009059943A priority Critical patent/JP5129182B2/en
Publication of JP2010213220A publication Critical patent/JP2010213220A/en
Application granted granted Critical
Publication of JP5129182B2 publication Critical patent/JP5129182B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50—Control of the SSIS exposure
    • H04N25/53—Control of the integration time
    • H04N25/531—Control of the integration time by controlling rolling shutters in CMOS SSIS

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Indication In Cameras, And Counting Of Exposures (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Studio Devices (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To pick up an image free of exposure unevenness even in a scene affected by flash light emission from other person, in a rolling shutter system imaging apparatus. <P>SOLUTION: Exposure starts with a delay in exposure start timing for each line for a CMOS sensor without using a mechanical shutter, and imaging with the rolling shutter system is performed to read information on each line sequentially, starting from a line where a predetermined exposure time has passed, so that an image of one frame of an object to be recorded is acquired (at step S10). Existence or non-existence of exposure unevenness due to other person's flash light emission contained in the acquired image of the object to be recorded is detected (at step S12). When exposure unevenness is detected, a warning indicating the exposure unevenness is issued (at step S16), and recording processing is performed or is canceled dependent on recording/cancel instruction input from a photographer (at steps S18 and S20). <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は撮像装置及び撮像制御方法に係り、特にローリングシャッタ方式の撮像装置に適用される技術に関する。   The present invention relates to an imaging apparatus and an imaging control method, and more particularly to a technique applied to a rolling shutter imaging apparatus.

フォーカルプレーンシャッタ搭載のカメラにおいて、フラッシュ発光と露光タイミングを合わせることで面内露光ムラを回避するようにした撮像装置が提案されている（特許文献１）。   In a camera equipped with a focal plane shutter, there has been proposed an imaging apparatus that avoids in-plane exposure unevenness by matching flash emission and exposure timing (Patent Document 1).

また、ＣＭＯＳセンサを用いた撮像装置において、フォーカルプレーンシャッタを使用せずに、フォーカルプレーンシャッタと同様なシャッタを電子的に実現する方式として、各ライン毎に露光開始タイミングをずらして露光を開始させるとともに、所定の露光時間が経過したラインから順次ライン上の情報を読み出すローリングシャッタ方式が知られている。   In addition, in an imaging apparatus using a CMOS sensor, exposure is started by shifting the exposure start timing for each line as a method of electronically realizing a shutter similar to the focal plane shutter without using the focal plane shutter. In addition, a rolling shutter system is known in which information on a line is sequentially read from a line where a predetermined exposure time has elapsed.

このローリングシャッタ方式は、各ライン毎に露光タイミング及び読出しタイミングに時間差があるという特徴があるため、一部のラインの露光期間中にフラッシュのような発光期間の短い強い光が入射すると、その一部のラインの領域が他のラインの領域よりも明るくなる（面内輝度ムラが生じる）といった問題がある。   This rolling shutter system is characterized in that there is a time difference between the exposure timing and the readout timing for each line. Therefore, when strong light with a short light emission period such as a flash is incident during the exposure period of some lines, the rolling shutter system is one of the features. There is a problem that the area of the part line becomes brighter than other line areas (in-plane luminance unevenness occurs).

このローリングシャッタ方式による輝度ムラを軽減するために、特許文献２には、最初のラインの露光タイミングから最後のラインの露光終了時まで常にフラッシュを発光し続ける撮像装置が開示されている。   In order to reduce luminance unevenness due to the rolling shutter system, Patent Document 2 discloses an imaging apparatus that always emits flash from the exposure timing of the first line to the end of exposure of the last line.

特開２００６−６４９７４号公報JP 2006-64974 A 特開２００７―３２４６４９号公報JP 2007-324649 A

しかしながら、特許文献１及び２に記載の発明は、撮像装置自体に設けられたフラッシュ装置からフラッシュを発光する場合における輝度ムラを軽減するための技術である。撮像装置自体に設けられたフラッシュ装置であれば、発光タイミングを制御することも可能であるが、他人が所有するカメラのフラッシュ光の発光タイミングを制御することはできない。   However, the inventions described in Patent Documents 1 and 2 are techniques for reducing luminance unevenness when a flash is emitted from a flash device provided in the imaging device itself. If it is a flash device provided in the imaging device itself, the light emission timing can be controlled, but the flash light emission timing of the camera owned by another person cannot be controlled.

例えば、結婚式や記者会見などの多くのカメラが同時にフラッシュを発光させるシーンにおいて、ローリングシャッタ方式の撮像装置により撮影を行う場合には、他人が所有するカメラが発光したフラッシュ光によって画面内に露光ムラが生じるが、この問題を特許文献１、２に記載の発明では解決することができない。   For example, in a scene where many cameras, such as weddings and press conferences, simultaneously emit flash, when shooting with a rolling shutter type imaging device, the screen is exposed to the flash light emitted by the camera owned by another person. Although unevenness occurs, this problem cannot be solved by the inventions described in Patent Documents 1 and 2.

本発明はこのような事情に鑑みてなされたもので、ローリングシャッタ方式の撮像装置において、他者のフラッシュ発光があるシーンにおいても露光ムラのない画像の撮像を行うことができる撮像装置及び撮像制御方法を提供することを目的とする。   The present invention has been made in view of such circumstances, and in a rolling shutter type imaging apparatus, an imaging apparatus capable of capturing an image without exposure unevenness even in a scene where there is flash emission by another person, and imaging control It aims to provide a method.

前記目的を達成するために請求項１に記載の発明は、複数ラインの受光領域を有する撮像素子に対し、各ライン毎に露光開始タイミングをずらして露光を開始させるとともに、所定の露光時間が経過したラインから順次ライン上の情報を読み出すローリングシャッタ方式の撮像装置において、前記撮像素子から順次読み出した複数ラインの情報からなる１フレームの画像であって、シャッタレリーズ動作に同期した記録対象の１フレームの画像、又は該画像と隣接するフレームの画像とを含む複数フレームの画像を取得する画像取得手段と、前記取得した記録対象の１フレームの画像中に含まれる他者のフラッシュ発光に起因する露光ムラの有無を検出する露光ムラ検出手段と、前記露光ムラ検出手段によって露光ムラが検出されると、露光ムラを示す警告を発する露光ムラ警告手段と、を備えたことを特徴としている。   In order to achieve the above object, according to the first aspect of the present invention, an image sensor having a plurality of light receiving areas starts exposure by shifting the exposure start timing for each line, and a predetermined exposure time elapses. In a rolling shutter type imaging apparatus that sequentially reads out information on a line from a line that has been recorded, the image is a single frame that includes information of a plurality of lines that are sequentially read from the imaging element, and is one frame to be recorded in synchronization with a shutter release operation. An image acquisition means for acquiring an image of a plurality of frames including an image of the image or an image of an adjacent frame, and exposure resulting from flash emission of another person included in the acquired image of one frame to be recorded Exposure unevenness detecting means for detecting the presence or absence of unevenness, and when exposure unevenness is detected by the exposure unevenness detecting means, exposure Is characterized with uneven exposure warning means for issuing a warning indicating La, further comprising a.

即ち、記録対象の１フレームの画像中の露光ムラ（他者のフラッシュ発光等に起因する露光ムラ）の有無を検出し、露光ムラが検出された場合には、露光ムラを示す警告を発するようにしている。この警告により再撮像が喚起され、撮影者は再撮像を行うことで露光ムラのない画像の撮像を行うことができる。   That is, the presence / absence of exposure unevenness (exposure unevenness caused by flash emission of others) in one frame image to be recorded is detected, and if exposure unevenness is detected, a warning indicating the exposure unevenness is issued. I have to. Re-imaging is triggered by this warning, and the photographer can capture an image without uneven exposure by performing re-imaging.

請求項２に示すように請求項１に記載の撮像装置において、前記画像取得手段により取得された画像が一時的に記録される内部メモリと、画像表示手段と、前記露光ムラ警告手段により警告が発せられると、前記内部メモリに記録された画像を前記画像表示手段に表示させる表示制御手段と、画像の記録を入力する記録指示手段と、前記記録指示手段により前記画像ムラの警告が発せられた画像に対する記録指示が入力されると、前記内部メモリに記録された画像を不揮発性の記録媒体に記録する記録手段と、を更に備えたことを特徴としている。   According to a second aspect of the present invention, in the imaging apparatus according to the first aspect, a warning is issued by the internal memory in which the image acquired by the image acquisition unit is temporarily recorded, the image display unit, and the exposure unevenness warning unit. When issued, a display control means for displaying the image recorded in the internal memory on the image display means, a recording instruction means for inputting recording of the image, and the image unevenness warning is issued by the recording instruction means The image processing apparatus further includes recording means for recording the image recorded in the internal memory on a non-volatile recording medium when a recording instruction for the image is input.

即ち、記録対象の画像中に露光ムラが検出された場合には、その記録対象の画像を内部メモリに一時保持するとともに、画像表示手段に表示させるようにしたため、撮影者に露光ムラの有無の確認をとって貰うことができる。そして、露光ムラが誤検出された場合や露光ムラが許容できる場合に、撮影者から記録指示が入力されると、内部メモリに記録された画像を不揮発性の記録媒体に記録するようにしている。   That is, when exposure unevenness is detected in the image to be recorded, the image to be recorded is temporarily stored in the internal memory and displayed on the image display means. You can get confirmation. When the exposure unevenness is erroneously detected or when the exposure unevenness is acceptable, when a recording instruction is input from the photographer, the image recorded in the internal memory is recorded on a non-volatile recording medium. .

請求項３に示すように請求項２に記載の撮像装置において、前記露光ムラ検出手段は、少なくともライン方向と平行な露光ムラの境界を示すライン位置を検出し、前記露光ムラ警告手段は、前記画像表示手段に表示された画像上に前記検出されたライン位置を示すマーカを表示することを特徴としている。これにより、撮影者は、露光ムラの有無の確認を容易に行うことができる。   According to a third aspect of the present invention, in the imaging apparatus according to the second aspect, the exposure unevenness detection unit detects a line position indicating at least a boundary of exposure unevenness parallel to the line direction, and the exposure unevenness warning unit includes the exposure unevenness warning unit. A marker indicating the detected line position is displayed on the image displayed on the image display means. Thereby, the photographer can easily check the presence or absence of exposure unevenness.

請求項４に係る発明は、複数ラインの受光領域を有する撮像素子に対し、各ライン毎に露光開始タイミングをずらして露光を開始させるとともに、所定の露光時間が経過したラインから順次ライン上の情報を読み出すローリングシャッタ方式の撮像装置において、前記撮像素子から読み出した複数ラインの情報からなる１フレームの画像であって、シャッタレリーズ動作に同期した記録対象の１フレームの画像と、該画像と隣接するフレームの画像とを含む複数フレームの画像を取得する画像取得手段と、前記取得した記録対象の１フレームの画像中に含まれる他者のフラッシュ発光に起因する露光ムラの有無を検出する露光ムラ検出手段と、前記露光ムラ検出手段によって露光ムラが検出されると、前記記録対象の画像の前記露光ムラに対応する高輝度領域の情報を、前記隣接するフレームの画像における前記高輝度領域に対応する情報に基づいて補正する露光ムラ補正手段と、を備えたことを特徴としている。   According to a fourth aspect of the present invention, an image sensor having a plurality of light-receiving areas starts exposure by shifting the exposure start timing for each line, and information on the lines sequentially from a line where a predetermined exposure time has passed. In a rolling shutter type imaging apparatus that reads out image data, a 1-frame image composed of information of a plurality of lines read out from the imaging device, and a 1-frame image to be recorded synchronized with a shutter release operation, are adjacent to the image. Image acquisition means for acquiring images of a plurality of frames including a frame image, and exposure unevenness detection for detecting presence or absence of exposure unevenness caused by flash emission of another person included in the acquired image of one frame to be recorded And when the exposure unevenness is detected by the exposure unevenness detection means, the exposure unevenness of the image to be recorded is detected. High information of the luminance area is characterized by comprising an exposure unevenness correcting means for correcting, based on the information corresponding to the high luminance region in the image of the adjacent frames.

即ち、シャッタレリーズ動作に同期した記録対象の１フレームの画像の他に、その画像と隣接するフレームの画像も取得しておき、記録対象の画像中に露光ムラが検出された場合には、その記録対象の画像に隣接するフレームの画像を使用し、露光ムラに対応する高輝度領域の情報を、隣接するフレームの画像における高輝度領域に対応する情報に基づいて補正するようにしている。これにより、露光ムラを自動的に補正することができ、露光ムラのない画像を記録することができる。   That is, in addition to an image of a recording target frame synchronized with the shutter release operation, an image of a frame adjacent to the image is also acquired, and when exposure unevenness is detected in the recording target image, The image of the frame adjacent to the image to be recorded is used, and the information of the high brightness area corresponding to the exposure unevenness is corrected based on the information corresponding to the high brightness area in the image of the adjacent frame. Thereby, exposure unevenness can be automatically corrected, and an image without exposure unevenness can be recorded.

請求項５に示すように請求項４に記載の撮像装置において、前記露光ムラ補正手段は、前記記録対象の画像の前記露光ムラに対応する高輝度領域の情報を、前記隣接するフレームの画像における前記高輝度領域に対応する情報と置換することを特徴としている。   5. The imaging apparatus according to claim 4, wherein the exposure unevenness correction unit is configured to display information on a high brightness area corresponding to the exposure unevenness of the image to be recorded in the image of the adjacent frame. It replaces with the information corresponding to the said high-intensity area | region, It is characterized by the above-mentioned.

請求項６に示すように請求項４に記載の撮像装置において、前記露光ムラ補正手段は、前記記録対象の画像の前記露光ムラに対応する高輝度領域に対応するラインの輝度値を、前記高輝度領域に対応するラインの平均輝度値が前記隣接するフレームの画像における同一ラインの平均輝度値と一致するように補正することを特徴としている。   According to a sixth aspect of the present invention, in the imaging device according to the fourth aspect, the exposure unevenness correcting unit converts the brightness value of a line corresponding to a high brightness area corresponding to the exposure unevenness of the image to be recorded into the high brightness area. The correction is performed so that the average luminance value of the line corresponding to the luminance region matches the average luminance value of the same line in the image of the adjacent frame.

即ち、請求項５に記載の発明は、記録対象の画像の露光ムラに対応する高輝度領域の情報を、隣接するフレームの画像における高輝度領域に対応する情報と置換することにより、高輝度領域の情報を補正しているが、請求項６に記載の発明は、高輝度領域の情報を、隣接するフレームの画像における同一ラインの平均輝度と一致するようにライン毎に補正することで、高輝度領域の情報を補正している。   That is, the invention according to claim 5 replaces the information of the high luminance area corresponding to the exposure unevenness of the image to be recorded with the information corresponding to the high luminance area in the image of the adjacent frame, thereby obtaining the high luminance area. However, in the invention according to claim 6, the information of the high luminance region is corrected for each line so as to match the average luminance of the same line in the image of the adjacent frame. The information on the brightness area is corrected.

請求項７に示すように請求項４から６のいずれかに記載の撮像装置において、前記露光ムラ検出手段によって露光ムラが検出されると、露光ムラを示す警告を発する露光ムラ警告手段と、画像表示手段と、前記露光ムラ警告手段により警告が発せられると、前記記録対象の画像を前記画像表示手段に表示させる表示制御手段と、露光ムラの補正の指示を入力する補正指示手段と、前記露光ムラ補正手段は、前記補正指示手段により前記画像ムラの警告が発せられた画像に対する補正指示が入力されると、前記記録対象の画像の露光ムラの補正を行うことを特徴としている。   In the imaging apparatus according to any one of claims 4 to 6, as described in claim 7, when exposure unevenness is detected by the exposure unevenness detection means, an exposure unevenness warning unit that issues a warning indicating exposure unevenness, and an image A display means, a display control means for displaying the image to be recorded on the image display means when the warning is issued by the exposure unevenness warning means, a correction instruction means for inputting an instruction for correcting exposure unevenness, and the exposure The unevenness correcting means corrects exposure unevenness of the image to be recorded when a correction instruction for an image for which the image unevenness warning has been issued is input by the correction instruction means.

即ち、記録対象の画像中に露光ムラが検出された場合には、直ちに露光ムラを補正せずに、露光ムラを示す警告を発するとともに、記録対象の画像を画像表示手段に表示させる。そして、撮影者から露光ムラの補正指示が入力されると、露光ムラの補正が行われる。これにより、露光ムラが誤検出された場合に誤った補正を防止することができる。   That is, when exposure unevenness is detected in an image to be recorded, the exposure unevenness is not corrected immediately, a warning indicating exposure unevenness is issued, and the image to be recorded is displayed on the image display means. When an exposure unevenness correction instruction is input from the photographer, exposure unevenness correction is performed. Thereby, it is possible to prevent erroneous correction when exposure unevenness is erroneously detected.

請求項８に示すように請求項１から７のいずれかに記載の撮像装置において、前記露光ムラ検出手段は、前記取得した記録対象の１フレームの画像から１ライン毎又は複数ライン毎の平均輝度値を算出する輝度値算出手段と、前記算出した平均輝度値に基づいて前後方向のライン間における所定の閾値を越える輝度変化を検出する輝度変化検出手段とを有し、前記輝度変化検出手段により検出される輝度変化の有無に基づいて前記露光ムラの有無を検出することを特徴としている。   The imaging apparatus according to any one of claims 1 to 7, wherein the exposure unevenness detection unit is configured to obtain an average luminance for each line or for each of a plurality of lines from the acquired image of one frame to be recorded. A luminance value calculating means for calculating a value, and a luminance change detecting means for detecting a luminance change exceeding a predetermined threshold between lines in the front-rear direction based on the calculated average luminance value, and the luminance change detecting means It is characterized in that the presence or absence of the exposure unevenness is detected based on the presence or absence of the detected luminance change.

他者のフラッシュ発光に起因する面内露光ムラは、あるライン（フラッシュ光を受光しているラインと受光していないライン）を境界にその前半部又は後半部の輝度が、他の部分よりも高輝度になっている。従って、記録対象の画像から１ライン毎又は複数ライン毎の平均輝度値を算出し、この平均輝度値がラインの前後方向で大幅に変化する箇所を検出することで露光ムラの有無を検出するようにしている。   The in-plane exposure unevenness caused by the flash emission of others is that the brightness of the first half or the second half of a certain line (the line receiving the flash light and the line not receiving the light) is higher than the other parts. The brightness is high. Accordingly, the average luminance value for each line or a plurality of lines is calculated from the image to be recorded, and the presence or absence of exposure unevenness is detected by detecting a portion where the average luminance value changes significantly in the front-rear direction of the line. I have to.

請求項９に示すように請求項１から８のいずれかに記載の撮像装置において、前記露光ムラ検出手段は、前記画像取得手段により取得した複数フレームの画像からそれぞれ１ライン毎又は複数ライン毎の平均輝度値を算出する輝度値算出手段と、前記複数フレームの画像の同一ラインについて算出された平均輝度値に基づいて前記記録対象の画像のラインの平均輝度値が、隣接する画像のラインの平均輝度値よりも大きくなるラインを検出する高輝度ライン検出手段とを有し、前記高輝度ライン検出手段により検出される高輝度ラインの有無に基づいて前記露光ムラの有無を検出することを特徴としている。   The imaging apparatus according to any one of claims 1 to 8, wherein the exposure unevenness detection unit is configured to detect each line or each line from a plurality of frames of images acquired by the image acquisition unit. A luminance value calculating means for calculating an average luminance value; and an average luminance value of lines of the image to be recorded based on an average luminance value calculated for the same line of the images of the plurality of frames is an average of lines of adjacent images High luminance line detecting means for detecting a line larger than the luminance value, and detecting the presence or absence of the exposure unevenness based on the presence or absence of the high luminance line detected by the high luminance line detecting means. Yes.

他者のフラッシュ光が記録対象の画像のあるラインに入射している場合には、記録対象の画像と隣接するフレームの画像の同一ラインには、前記ラッシュ光は入射していないと考えられる。これは、フラッシュ光（一般のキセノン管からのフラッシュ光）の発光時間は極めて短いからである。従って、記録対象の画像の任意のラインの平均輝度値が、隣接する画像の同一ラインの平均輝度値よりも大きい場合には、そのラインにはフラッシュ光が入射していると考えられる。このように、隣接するフレームの画像よりも高輝度となっているライン（高輝度ライン）の有無から露光ムラの有無を検出するようにしている。   When another person's flash light is incident on a certain line of the image to be recorded, it is considered that the rush light is not incident on the same line of the image of the frame adjacent to the image to be recorded. This is because the emission time of flash light (flash light from a general xenon tube) is extremely short. Therefore, when the average luminance value of an arbitrary line of the image to be recorded is larger than the average luminance value of the same line of the adjacent image, it is considered that flash light is incident on that line. In this way, the presence or absence of exposure unevenness is detected from the presence or absence of a line (high luminance line) having higher brightness than the image of the adjacent frame.

請求項１０に示すように請求項４から７のいずれかに記載の撮像装置において、前記画像取得手段は、前記記録対象の１フレーム画像と、該画像の直前及び直後のフレームの画像とを含む３フレームの画像を取得し、前記露光ムラ補正手段は、前記記録対象の画像の露光ムラの補正に使用する前記隣接するフレームの画像として、前記直前及び直後のフレームの画像のうちのいずれか一方を選択する選択手段を有することを特徴としている。   The imaging apparatus according to any one of claims 4 to 7, wherein the image acquisition unit includes one frame image to be recorded and images of frames immediately before and after the image. The three-frame image is acquired, and the exposure unevenness correcting unit is configured to select one of the immediately preceding and immediately following frame images as the adjacent frame image used for correcting the exposure unevenness of the image to be recorded. It has the selection means to select.

請求項１１に示すように請求項１０に記載の撮像装置において、前記選択手段は、前記記録対象の画像の前記露光ムラに対応する高輝度領域に対応する前記直前及び直後のフレームの画像における同一領域の平均輝度値をそれぞれ算出する算出手段を有し、前記算出された平均輝度値のうち低い平均輝度値を有する画像を選択することを特徴としている。   The imaging device according to claim 10, wherein the selection unit is the same in the images of the immediately preceding and following frames corresponding to the high-intensity region corresponding to the exposure unevenness of the image to be recorded. Calculation means for calculating the average luminance value of each region is provided, and an image having a low average luminance value is selected from the calculated average luminance values.

これにより、一部でもフラッシュ露光していない画像を補正用の画像として選択することができる。   As a result, it is possible to select an image that is not partly flash exposed as a correction image.

請求項１２に示すように請求項１０に記載の撮像装置において、前記選択手段は、前記記録対象の画像の前記露光ムラに対応する高輝度領域が画像中の前半部か後半部かを判断する判断手段を有し、前半部と判断した場合には直後のフレームの画像を選択し、後半部と判断した場合には直前のフレームの画像を選択することを特徴としている。   The imaging device according to claim 10, wherein the selection unit determines whether a high brightness area corresponding to the exposure unevenness of the image to be recorded is a first half or a second half of the image. It has a determination means, and when it is determined that it is the first half, the image of the immediately following frame is selected, and when it is determined that it is the second half, it selects the image of the immediately preceding frame.

これにより、フラッシュの発光時点から遠い画像側を選択することができ、フラッシュ露光していない画像を補正用の画像として選択することができる。   Accordingly, it is possible to select an image side far from the flash emission point, and it is possible to select an image not subjected to flash exposure as a correction image.

請求項１３に係る発明は、複数ラインの受光領域を有する撮像素子に対し、各ライン毎に露光開始タイミングをずらして露光を開始させるとともに、所定の露光時間が経過したラインから順次ライン上の情報を読み出すローリングシャッタ方式の撮像装置における撮像制御方法において、前記撮像素子から順次読み出した複数ラインの情報からなる１フレームの画像であって、シャッタレリーズ動作に同期した記録対象の１フレームの画像、又は該画像と隣接するフレームの画像とを含む複数フレームの画像を取得し、前記取得した記録対象の１フレームの画像中に含まれる他者のフラッシュ発光に起因する露光ムラの有無を検出し、前記露光ムラが検出されると、露光ムラを示す警告を発することを特徴としている。   According to the thirteenth aspect of the present invention, the image sensor having a plurality of light-receiving regions starts exposure by shifting the exposure start timing for each line, and information on the lines sequentially from a line where a predetermined exposure time has passed. In the imaging control method in the rolling shutter type imaging apparatus that reads out the image, a one-frame image including information of a plurality of lines sequentially read from the imaging device, and a one-frame image to be recorded in synchronization with the shutter release operation, or Obtaining an image of a plurality of frames including the image and an image of an adjacent frame, detecting presence / absence of exposure unevenness caused by flash emission of another person included in the obtained image of one frame to be recorded, When exposure unevenness is detected, a warning indicating exposure unevenness is issued.

請求項１４に示すように請求項１３に記載の撮像制御方法において、前記露光ムラが検出されると、該露光ムラが検出された記録対象の画像を画像表示手段に表示させ、前記表示結果を確認した撮影者から画像の記録を指示する指示入力があると、前記記録対象の画像を不揮発性の記録媒体に記録することを特徴としている。   In the imaging control method according to claim 13, when the exposure unevenness is detected, an image to be recorded on which the exposure unevenness is detected is displayed on an image display unit, and the display result is displayed. When there is an instruction input for instructing recording of an image from the confirmed photographer, the image to be recorded is recorded on a non-volatile recording medium.

請求項１５に係る発明は、複数ラインの受光領域を有する撮像素子に対し、各ライン毎に露光開始タイミングをずらして露光を開始させるとともに、所定の露光時間が経過したラインから順次ライン上の情報を読み出すローリングシャッタ方式の撮像装置における撮像制御方法において、前記撮像素子から読み出した複数ラインの情報からなる１フレームの画像であって、シャッタレリーズ動作に同期した記録対象の１フレームの画像と、該画像と隣接するフレームの画像とを含む複数フレームの画像を取得し、前記取得した記録対象の１フレームの画像中に含まれる他者のフラッシュ発光に起因する露光ムラの有無を検出し、前記露光ムラが検出されると、前記記録対象の画像の前記露光ムラに対応する高輝度領域の情報を、前記隣接するフレームの画像における前記高輝度領域に対応する情報に基づいて補正することを特徴としている。   According to the fifteenth aspect of the present invention, an image sensor having a plurality of light-receiving regions starts exposure by shifting the exposure start timing for each line, and information on the lines sequentially from a line where a predetermined exposure time has elapsed. In the imaging control method in the rolling shutter type imaging apparatus for reading out the image, a 1-frame image composed of information of a plurality of lines read from the imaging device, the 1-frame image to be recorded synchronized with the shutter release operation, Obtaining an image of a plurality of frames including an image and an image of an adjacent frame, detecting presence or absence of exposure unevenness caused by flash emission of another person included in the obtained image of one frame to be recorded; When unevenness is detected, the information on the high brightness area corresponding to the exposure unevenness of the image to be recorded is Is characterized in that corrected based on the information corresponding to the high luminance region in the frame image.

請求項１６に示すように請求項１５に記載の撮像制御方法において、前記露光ムラに対応する高輝度領域の情報の補正は、前記記録対象の画像の前記露光ムラに対応する高輝度領域の情報を、前記隣接するフレームの画像における前記高輝度領域に対応する情報に置換することにより行うことを特徴としている。   16. The imaging control method according to claim 15, wherein the correction of the information on the high brightness area corresponding to the exposure unevenness is information on the high brightness area corresponding to the exposure unevenness of the image to be recorded. Is replaced with information corresponding to the high-intensity region in the image of the adjacent frame.

請求項１７に示すように請求項１５に記載の撮像制御方法において、前記露光ムラに対応する高輝度領域の情報の補正は、前記記録対象の画像の前記露光ムラに対応する高輝度領域に対応するラインの輝度値を、前記高輝度領域に対応するラインの平均輝度値が前記隣接するフレームの画像における同一ラインの平均輝度値と一致するように補正することにより行うことを特徴としている。   17. The imaging control method according to claim 15, wherein the correction of the information on the high brightness area corresponding to the exposure unevenness corresponds to the high brightness area corresponding to the exposure unevenness of the image to be recorded. In this case, the luminance value of the line to be corrected is corrected so that the average luminance value of the line corresponding to the high luminance area matches the average luminance value of the same line in the image of the adjacent frame.

請求項１８に示すように請求項１３から１７のいずれかに記載の撮像制御方法において、前記露光ムラが検出されると、前記記録対象の画像の前記露光ムラに対応する高輝度領域の情報の補正の前に、露光ムラを示す警告を発生するとともに前記記録対象の画像を画像表示手段に表示させ、その後、露光ムラの補正の指示が入力されると、前記露光ムラに対応する高輝度領域の情報の補正を行うことを特徴としている。   In the imaging control method according to any one of claims 13 to 17, as described in claim 18, when the exposure unevenness is detected, information on a high-luminance area corresponding to the exposure unevenness of the image to be recorded is recorded. Before the correction, a warning indicating exposure unevenness is generated and the image to be recorded is displayed on the image display means. After that, when an instruction to correct the exposure unevenness is input, a high brightness area corresponding to the exposure unevenness It is characterized by correcting the information.

本発明によれば、ローリングシャッタ方式の撮像装置において、他者のフラッシュ発光に起因する露光ムラを検出できるようにし、また、露光ムラを検出した場合には、警告を発して再撮像を促し、又は隣接するフレームの画像を使用して露光ムラに対応する高輝度領域の情報を補正するようにしたため、他者のフラッシュ発光があるシーンにおいても露光ムラのない画像の撮像を行うことができる。   According to the present invention, in a rolling shutter type imaging device, it is possible to detect exposure unevenness due to flash emission of others, and when exposure unevenness is detected, a warning is issued to prompt re-imaging, Alternatively, since the information of the high luminance area corresponding to the exposure unevenness is corrected using the image of the adjacent frame, it is possible to capture an image without the exposure unevenness even in the scene where the flash emission of the other person exists.

図１は本発明に係る撮像装置の内部構成を示すブロック図である。FIG. 1 is a block diagram showing an internal configuration of an imaging apparatus according to the present invention. 図２は本発明に係る撮像制御方法の第１実施形態を示すフローチャートである。FIG. 2 is a flowchart showing the first embodiment of the imaging control method according to the present invention. 図３は他者のカメラのフラッシュ光により面内露光ムラが発生する様子を示すタイミングチャートである。FIG. 3 is a timing chart showing how in-plane exposure unevenness occurs due to the flash light of the camera of another person. 図４はライン状輝度変化の検出方法の第１実施例を示すフローチャートである。FIG. 4 is a flowchart showing a first embodiment of a method for detecting a line-like luminance change. 図５は他者のカメラのフラッシュ光による露光ムラがライン方向で変化する様子を示す図である。FIG. 5 is a diagram showing a state in which the exposure unevenness due to the flash light of the camera of another person changes in the line direction. 図６は他者のカメラのフラッシュ光によるライン間の輝度差を示す図である。FIG. 6 is a diagram showing a luminance difference between lines due to flash light of another person's camera. 図７は輝度ムラの警告表示を行うＬＣＤ画面の一例を示す図である。FIG. 7 is a diagram showing an example of an LCD screen that displays a warning of uneven brightness. 図８はライン状輝度変化の検出方法の第２実施例を示すフローチャートである。FIG. 8 is a flowchart showing a second embodiment of the method for detecting a line-like luminance change. 図９はシャッタレリーズスイッチの全押し時に保存される３枚の画像の露光及び読み出しタイミングを示すタイミングチャートであり、記録対象の画像の露光期間前半にフラッシュ光が入射した状態を示す図である。FIG. 9 is a timing chart showing the exposure and readout timings of the three images stored when the shutter release switch is fully pressed, and shows a state in which flash light is incident in the first half of the exposure period of the image to be recorded. 図１０はシャッタレリーズスイッチの全押し時に保存される３枚の画像の露光及び読み出しタイミングを示すタイミングチャートであり、記録対象の画像の露光期間後半にフラッシュ光が入射した状態を示す図である。FIG. 10 is a timing chart showing the exposure and readout timings of three images stored when the shutter release switch is fully pressed, and shows a state in which flash light is incident in the second half of the exposure period of the image to be recorded. 図１１は本発明に係る撮像制御方法の第２実施形態を示すフローチャートである。FIG. 11 is a flowchart showing a second embodiment of the imaging control method according to the present invention. 図１２は本発明に係る撮像制御方法の第３実施形態を示すフローチャートである。FIG. 12 is a flowchart showing a third embodiment of the imaging control method according to the present invention. 図１３は本発明に係る撮像制御方法の第４実施形態を示すフローチャートである。FIG. 13 is a flowchart showing a fourth embodiment of the imaging control method according to the present invention.

以下、添付図面に従って本発明に係る撮像装置及び撮像制御方法の実施の形態について説明する。   Embodiments of an imaging apparatus and an imaging control method according to the present invention will be described below with reference to the accompanying drawings.

［撮像装置］
図１は本発明に係る撮像装置の内部構成を示すブロック図である。 [Imaging device]
FIG. 1 is a block diagram showing an internal configuration of an imaging apparatus according to the present invention.

同図に示すように、撮像装置（デジタルカメラ）１は、主として中央処理装置（ＣＰＵ）１０、操作部１２、フラッシュ発光部２０、レンズユニット２２、ＣＭＯＳセンサ２６、タイミングジェネレータ（ＴＧ）２８、ＡＧＣ回路３０、Ａ／Ｄ変換器３２、画像信号処理回路３４、圧縮伸張処理回路３６、ＬＣＤドライバ３８、液晶ディスプレイ（ＬＣＤ）４０、ＡＥ／ＷＢ検出回路４２、メモリカード４４、メディアコントローラ４６で構成されている。   As shown in the figure, the image pickup apparatus (digital camera) 1 mainly includes a central processing unit (CPU) 10, an operation unit 12, a flash light emitting unit 20, a lens unit 22, a CMOS sensor 26, a timing generator (TG) 28, an AGC. The circuit 30 includes an A / D converter 32, an image signal processing circuit 34, a compression / decompression processing circuit 36, an LCD driver 38, a liquid crystal display (LCD) 40, an AE / WB detection circuit 42, a memory card 44, and a media controller 46. ing.

ＣＰＵ１０は、操作部１２から入力される操作信号に基づき所定の制御プログラムに従ってデジタルカメラ１の全体を統括制御する。ＣＰＵ１０に接続されたＲＯＭ１６には、デジタルカメラ１を動作させるための制御プログラムや各種設定情報が書き込まれており、ＣＰＵ１０はこのプログラムに従って各部を制御する。   The CPU 10 performs overall control of the entire digital camera 1 according to a predetermined control program based on an operation signal input from the operation unit 12. In the ROM 16 connected to the CPU 10, a control program for operating the digital camera 1 and various setting information are written, and the CPU 10 controls each unit according to this program.

また、ＣＰＵ１０は、ＡＦエリア（例えば、画面中央部）内の信号を切り出し、ＡＦエリア内の絶対値データを積算する。   Further, the CPU 10 cuts out signals in the AF area (for example, the center of the screen) and integrates absolute value data in the AF area.

操作部１２は、シャッタレリーズボタン、電源／モードスイッチ、モードダイヤル、ズームキー、十字キー、メニュー／ＯＫキー、ＢＡＣＫキー等で構成される。   The operation unit 12 includes a shutter release button, a power / mode switch, a mode dial, a zoom key, a cross key, a menu / OK key, a BACK key, and the like.

シャッタレリーズボタンは、半押し操作時に自動露出制御（ＡＥ制御）、自動焦点制御（ＡＦ制御）等の各種撮影準備処理を指示し、この状態でシャッタレリーズボタンが更に押し込まれる全押し操作時に本撮像の処理を指示する。   The shutter release button instructs various shooting preparation processes such as automatic exposure control (AE control) and automatic focus control (AF control) at the time of half-pressing operation, and in this state the main imaging is performed at the time of full-pressing operation. Is instructed.

電源／モードスイッチは、デジタルカメラ１の電源のオン／オフを切り替える際に操作される。   The power / mode switch is operated when the power of the digital camera 1 is switched on / off.

モードダイヤルは、デジタルカメラ１の動作モードを切り替える際に操作される。動作モードとしては、撮影を１回だけ行う静止画（単写）撮影モード、複数回の撮影を連続して行う連写撮影モード、撮影により得られた画像をＬＣＤ４０に再生表示する再生モードなどがある。   The mode dial is operated when the operation mode of the digital camera 1 is switched. The operation mode includes a still image (single shooting) shooting mode in which shooting is performed only once, a continuous shooting mode in which a plurality of shootings are continuously performed, and a playback mode in which an image obtained by shooting is played back and displayed on the LCD 40. is there.

ズームキーは、ズームレンズを変倍する際に操作される。   The zoom key is operated when zooming the zoom lens.

十字キーは、ＬＣＤ４０に表示されたメニュー画面内のカーソルを移動させる。   The cross key moves the cursor in the menu screen displayed on the LCD 40.

メニュー／ＯＫキーは、ＬＣＤ４０にメニュー画面を表示する際や選択内容を決定する際などに操作される。メニュー／ＯＫキー、十字キー等の操作により、種々の撮影シーン（屋内、人物、夜景など）から所望とする撮影シーンが設定可能となっている。撮影シーン機能は、設定された撮影シーンに応じて、種々の撮影条件を自動的に設定する機能である。ＣＰＵ１０は、設定された撮影シーンに応じて、露出値、撮影感度、ホワイトバランスの制御パラメータ、フラッシュ発光の有無などの撮影条件を、当該撮影シーンに好適な値に自動的に設定する。なお、撮影シーンの設定は、ＣＰＵ１０が自動的に撮影シーンを判断し、最適な撮影シーンに設定する（自動シーン認識）機能により行なわれてもよい。   The menu / OK key is operated when a menu screen is displayed on the LCD 40 or when a selection content is determined. A desired shooting scene can be set from various shooting scenes (indoor, person, night view, etc.) by operating the menu / OK key, the cross key, and the like. The shooting scene function is a function for automatically setting various shooting conditions according to the set shooting scene. The CPU 10 automatically sets shooting conditions such as an exposure value, shooting sensitivity, white balance control parameters, flash emission, and the like to values suitable for the shooting scene in accordance with the set shooting scene. The setting of the shooting scene may be performed by a function in which the CPU 10 automatically determines the shooting scene and sets the optimum shooting scene (automatic scene recognition).

ＢＡＣＫキーは、ＬＣＤ４０に表示されたメニュー画面を戻す際に操作される。ＲＡＭ１４は、ＣＰＵ１０による演算作業領域、及び画像データの一時記憶領域として利用される。ＲＯＭ１６は、ＣＰＵ１０が実行する制御プログラム及び制御に必要な各種データやデジタルカメラ１の動作に関する各種設定情報などが格納されている。ＶＲＡＭ１８は、スルー画像の表示用の画像データ等を一時記憶する。   The BACK key is operated when returning the menu screen displayed on the LCD 40. The RAM 14 is used as a calculation work area for the CPU 10 and a temporary storage area for image data. The ROM 16 stores a control program executed by the CPU 10, various data necessary for control, various setting information related to the operation of the digital camera 1, and the like. The VRAM 18 temporarily stores image data for displaying a through image.

フラッシュ発光部２０は、撮影を実行する際に被写体輝度に応じてフラッシュを照射する。   The flash light emitting unit 20 irradiates a flash according to the subject brightness when performing shooting.

レンズユニット２２は、主として、ズーム機構及びフォーカス機構と、絞りとで構成される。ズーム機構は、ズーム操作キーの操作に応答して、撮影レンズ２２ａを移動させてズーミングを行う。フォーカス機構は、撮影レンズ２２ａに組み込まれたフォーカスレンズを移動させてピント合せを行う。絞り装置２２ｂは、絞り開度を調節することで、ＣＭＯＳ型イメージセンサ２６（以下、ＣＭＯＳセンサ２６という）に入射する被写体光の光量を調節する。絞り装置２２ｂは、モータ２３を介してＣＰＵ１０により動作制御される。   The lens unit 22 mainly includes a zoom mechanism and a focus mechanism, and a diaphragm. In response to the operation of the zoom operation key, the zoom mechanism moves the photographing lens 22a to perform zooming. The focus mechanism performs focusing by moving a focus lens incorporated in the photographic lens 22a. The aperture device 22b adjusts the amount of subject light incident on the CMOS image sensor 26 (hereinafter referred to as the CMOS sensor 26) by adjusting the aperture opening. The diaphragm device 22 b is controlled in operation by the CPU 10 via the motor 23.

ＣＭＯＳセンサ２６は、多数のフォトセンサがマトリクス状に配列された複数ラインの受光面を有しており、受光面に結像された被写体像は、各フォトセンサによって、その入射光量に応じた量の信号電荷に変換される。   The CMOS sensor 26 has a plurality of lines of light-receiving surfaces in which a large number of photosensors are arranged in a matrix, and the subject image formed on the light-receiving surface is an amount corresponding to the amount of incident light by each photosensor. Is converted into a signal charge.

各フォトセンサに蓄積された電荷は、フォトセンサ別のアンプにより電圧信号に変換され、タイミングジェネレータ（ＴＧ）２８から入力されるタイミング信号によってアナログの画像信号として出力される。   The electric charge accumulated in each photosensor is converted into a voltage signal by an amplifier for each photosensor, and is output as an analog image signal by a timing signal input from a timing generator (TG) 28.

具体的には、ＣＭＯＳセンサ２６は、ＴＧ２８から垂直走査回路を介して加えられる垂直走査信号により、読み出しラインが順次選択される。選択された１ライン分の信号は、ＣＤＳ回路に読み出され、ここでＴＧ２８から入力されるタイミング信号に基づいて保持されノイズ除去が行われる。ＣＤＳ回路に保持された１ライン分の信号は、水平走査回路を介して加えられる水平走査信号により順次出力ラインに読み出される。   Specifically, in the CMOS sensor 26, read lines are sequentially selected by a vertical scanning signal applied from the TG 28 via a vertical scanning circuit. The selected signal for one line is read out to the CDS circuit, where it is held based on the timing signal input from the TG 28 and noise is removed. A signal for one line held in the CDS circuit is sequentially read out to an output line by a horizontal scanning signal applied via a horizontal scanning circuit.

垂直走査回路により選択されたラインは、信号転送後に順次リセット信号が加えられてフォトセンサの電荷がリセットされ、その後に再度電荷の蓄積を開始する。   For the lines selected by the vertical scanning circuit, a reset signal is sequentially applied after signal transfer to reset the charge of the photosensor, and thereafter charge accumulation is started again.

ＣＭＯＳセンサ２６の先頭のラインから最終のラインまで垂直走査回路により走査すると、再び先頭のラインに戻り、これにより１フレーム周期としたローリングシャッタが構成されている。また、各ラインの読出しタイミングとリセットタイミングとを適宜設定することにより、フォトセンサがリセットされてから読み出されるまでの時間（シャッタスピード）を設定することができる。   When the vertical scanning circuit scans from the first line to the last line of the CMOS sensor 26, it returns to the first line again, thereby forming a rolling shutter with a period of one frame. Further, by appropriately setting the readout timing and reset timing of each line, it is possible to set the time (shutter speed) from when the photosensor is reset to when it is read out.

ＡＧＣ（Automatic Gain Control）回路３０は、ＣＭＯＳセンサ２６から出力された画像信号に対して、ＣＰＵ１０によって設定される撮像感度に応じたゲインで画像信号を増幅してＡ／Ｄ変換器３２に出力する。   An AGC (Automatic Gain Control) circuit 30 amplifies the image signal with a gain corresponding to the imaging sensitivity set by the CPU 10 with respect to the image signal output from the CMOS sensor 26 and outputs the amplified image signal to the A / D converter 32. .

Ａ／Ｄ変換器３２は、ＡＧＣ回路３０から出力されたアナログ信号を、例えば１２ビットのデジタル信号に変換して出力する。Ａ／Ｄ変換器３２から出力されたデジタル信号は画像信号処理回路３４に送られる。   The A / D converter 32 converts the analog signal output from the AGC circuit 30 into, for example, a 12-bit digital signal and outputs it. The digital signal output from the A / D converter 32 is sent to the image signal processing circuit 34.

画像信号処理回路３４は、同時化回路（単板ＣＭＯＳセンサのカラーフィルタ配列に伴う色信号の空間的なズレを補間して色信号を同時式に変換する処理回路）、ホワイトバランス補正回路、ガンマ補正回路、輪郭補正回路、輝度・色差信号生成回路等を含み、ＣＰＵ１０からの指令に従い、入力された画像信号に所要の信号処理を施して、輝度データ（Ｙデータ）と色差データ（Ｃｒ，Ｃｂデータ）とからなる画像データ（ＹＵＶデータ）を生成する。   The image signal processing circuit 34 includes a synchronization circuit (a processing circuit that converts a color signal into a simultaneous expression by interpolating a spatial shift of the color signal associated with the color filter array of the single-chip CMOS sensor), a white balance correction circuit, a gamma A correction circuit, a contour correction circuit, a luminance / color difference signal generation circuit, and the like are included, and in accordance with a command from the CPU 10, the input image signal is subjected to necessary signal processing to obtain luminance data (Y data) and color difference data (Cr, Cb). Image data (YUV data).

圧縮伸張処理回路３６は、ＣＰＵ１０からの指令に従い、入力された画像データに所定形式の圧縮処理を施し、圧縮画像データを生成する。また、ＣＰＵ１０からの指令に従い、入力された圧縮画像データに所定形式の伸張処理を施し、非圧縮の画像データを生成する。   The compression / decompression processing circuit 36 performs compression processing in a predetermined format on the input image data in accordance with a command from the CPU 10 to generate compressed image data. Further, in accordance with a command from the CPU 10, the input compressed image data is subjected to a decompression process in a predetermined format to generate uncompressed image data.

ＬＣＤドライバ３８は、画像信号処理回路３４で生成され、ＶＲＡＭ１８に保持された画像信号に対し所定の信号処理を施し、画像表示用の信号を生成し、これを一定のタイミングでＬＣＤ４０に出力する。   The LCD driver 38 performs predetermined signal processing on the image signal generated by the image signal processing circuit 34 and held in the VRAM 18, generates an image display signal, and outputs the signal to the LCD 40 at a fixed timing.

ＬＣＤ４０は、カラー表示が可能な液晶ディスプレイで構成されており、再生モード時に撮影済み画像を表示するための画像表示器として利用されるとともに、各種設定操作を行なう際のユーザインターフェースとして利用される。また、撮影モード時には、スルー画像が表示されて、画角確認用の電子ファインダとして利用される。   The LCD 40 is configured by a liquid crystal display capable of color display, and is used as an image display for displaying a photographed image in the reproduction mode and a user interface for performing various setting operations. In the shooting mode, a through image is displayed and used as an electronic viewfinder for checking the angle of view.

ＡＥ／ＷＢ検出回路４２は、ＡＥ制御に必要な物理量として、１画面を複数のエリア（たとえば１６×１６）に分割し、分割したエリア（以下、測光分割エリアという）ごとにＲ、Ｇ、Ｂの画像信号の積算値を算出する。算出された値は画像信号処理回路３４に出力され、画像信号処理回路３４内のホワイトバランス補正回路で用いられる。   The AE / WB detection circuit 42 divides one screen into a plurality of areas (for example, 16 × 16) as physical quantities necessary for AE control, and R, G, B for each divided area (hereinafter referred to as a photometric division area). The integrated value of the image signal is calculated. The calculated value is output to the image signal processing circuit 34 and used in the white balance correction circuit in the image signal processing circuit 34.

メディアコントローラ４６は、メディアスロットに装填されたフラッシュメモリ等の不揮発性のメモリカード４４に対してデータの読み／書きを制御する。   The media controller 46 controls reading / writing of data with respect to a nonvolatile memory card 44 such as a flash memory loaded in the media slot.

以上のように構成されたデジタルカメラ１の作用について説明する。   The operation of the digital camera 1 configured as described above will be described.

［第１実施形態（露光ムラの警告）］
図２は本発明に係る撮像制御方法の第１実施形態を示すフローチャートである。 [First Embodiment (Exposure unevenness warning)]
FIG. 2 is a flowchart showing the first embodiment of the imaging control method according to the present invention.

シャッタレリーズボタンが全押しされ、ＣＰＵ１０に対して記録用の撮像が指示されると、絞り装置２２ｂ及び電子シャッタが制御され、本撮像用の露光制御が行われるとともに、ＣＭＯＳセンサ２６から画像信号のローリング読み出しが行われる（ステップＳ１０）。   When the shutter release button is fully pressed and the CPU 10 is instructed to take an image for recording, the aperture device 22b and the electronic shutter are controlled to perform exposure control for the main image taking, and from the CMOS sensor 26 the image signal is received. Rolling reading is performed (step S10).

続いて、記録用の１フレーム分の画像信号のローリング読み出しが終了すると、その１フレームの画像中のライン状輝度変化の検出を行う（ステップＳ１２）。   Subsequently, when the rolling reading of the image signal for one frame for recording is completed, the line-like luminance change in the image of the one frame is detected (step S12).

図３（Ａ）〜（Ｃ）は、それぞれ本撮像の露光中に他者のカメラのフラッシュ光が入射し、面内露光ムラが発生する状態を示している。   FIGS. 3A to 3C show states in which in-plane exposure unevenness occurs due to the flash light of the camera of the other person entering during the exposure of the main imaging.

ローリングシャッタ方式の場合、１ラインずつ露光開始時間がずれており、露光中に他者のカメラのフラッシュ光が入射すると、そのフラッシュ光の入射タイミングに応じて、画像の前半部、後半部、又は中央部が高輝度領域となる露光ムラが発生する（図３（Ａ）〜（Ｃ））。   In the case of the rolling shutter method, the exposure start time is shifted line by line, and when the flash light of the other person's camera is incident during exposure, the first half, second half, or Exposure unevenness in which the central portion becomes a high luminance region occurs (FIGS. 3A to 3C).

尚、図３（Ｃ）に示す露光ムラは、最初のラインの読み出し開始から最後のラインの読み出し開始までの時間よりも１ラインの露光時間が長い場合には発生しない。   Note that the uneven exposure shown in FIG. 3C does not occur when the exposure time for one line is longer than the time from the start of reading the first line to the start of reading the last line.

＜ライン状輝度変化の検出方法の第１実施例＞
図４はライン状輝度変化の検出方法の第１実施例を示すフローチャートである。 <First Example of Method for Detecting Line-shaped Luminance Change>
FIG. 4 is a flowchart showing a first embodiment of a method for detecting a line-like luminance change.

いま、ＣＭＯＳセンサ２６の全ライン数をｎとし、まず、ラインの位置を示す変数ｉを１にセットする（ステップＳ１００）。   Now, assuming that the total number of lines of the CMOS sensor 26 is n, first, a variable i indicating the position of the line is set to 1 (step S100).

続いて、ラインｉ，ｉ＋１の平均輝度値Ｅｉ，Ｅｉ＋１を取得する（ステップＳ１０２）。平均輝度値は、ＣＭＯＳセンサ２６からライン毎にローリング読み出した１ライン分の画像信号を積算平均することにより取得することができる。 Subsequently, the average luminance values E i and E i + 1 of the lines i and i + 1 are acquired (step S102). The average luminance value can be obtained by integrating and averaging the image signals for one line that are read out from the CMOS sensor 26 for each line.

次に、前後のラインの平均輝度値Ｅｉ，Ｅｉ＋１の差を求め、この差（Ｅｉ＋１−Ｅｉ）が上限の閾値Th1よりも大きい場合（Ｅｉ＋１−Ｅｉ＞Th1）、又は下限の閾値Th1よりも小さい場合（Ｅｉ＋１−Ｅｉ＜Th2）には、そのラインｉの位置（ライン番号）を記憶する（ステップＳ１０４〜ステップＳ１１０）。 Next, the difference between the average luminance values E i and E i + 1 of the preceding and following lines is obtained, and when this difference (E i + 1 −E i ) is larger than the upper threshold value Th1 (E i + 1 −E i > Th1), or the lower limit If it is smaller than the threshold value Th1 (E i + 1 −E i <Th2), the position (line number) of the line i is stored (step S104 to step S110).

いま、図３（Ａ）、（Ｂ）に示したように１フレームの露光期間中の前半部、又は前半部にフラッシュ光が入射すると、ローリング読み出しした各ラインの輝度平値は、図５（Ａ）、（Ｂ）に示すようにライン位置に応じて変化し、図６（Ａ）、（Ｂ）に示すようにフラッシュ光が入射したラインと入射していないラインの境界（ライン間）は、大きな輝度差が生じる。   Now, as shown in FIGS. 3A and 3B, when flash light is incident on the first half or the first half of the exposure period of one frame, the luminance average value of each line read by rolling is shown in FIG. As shown in A) and (B), it changes according to the line position, and as shown in FIGS. 6A and 6B, the boundary (between lines) between the line where the flash light is incident and the line where it is not incident is as follows. A large luminance difference occurs.

したがって、上記のように上限の閾値Th1、又は下限の閾値Th2を越える輝度差を検出することにより、他者のカメラのフラッシュによる露光ムラが発生したと判断する。尚、ステップＳ１０８でラインｉの位置が記憶される場合には、そのライン位置から後半部にフラッシュ光が受光したと判断し（図５（Ｂ）、図６（Ｂ）参照）、ステップＳ１１０でラインｉの位置が記憶される場合には、そのライン位置より前半部にフラッシュ光が受光したと判断する（図５（Ａ）、図６（Ａ）参照）。   Therefore, by detecting the luminance difference exceeding the upper limit threshold Th1 or the lower limit threshold Th2 as described above, it is determined that exposure unevenness due to the flash of the camera of the other party has occurred. If the position of line i is stored in step S108, it is determined that flash light has been received in the latter half of the line position (see FIGS. 5B and 6B), and in step S110. When the position of line i is stored, it is determined that flash light has been received in the first half of the line position (see FIGS. 5A and 6A).

続いて、変数ｉを１だけインクリメントし（ステップＳ１１２）、ｉ＝ｎ（ｎ：最後のラインの位置）か否かを判別する（ステップＳ１１４）。ｉ＜ｎの場合（「Ｎｏ」の場合）には、ステップＳ１０２に戻り、ｉ＝ｎの場合（「Ｙｅｓ」の場合）には、終了する。   Subsequently, the variable i is incremented by 1 (step S112), and it is determined whether or not i = n (n: position of the last line) (step S114). If i <n (in the case of “No”), the process returns to step S102, and if i = n (in the case of “Yes”), the process ends.

図２に戻って、ライン状輝度変化の検出処理が終了すると、ライン状の輝度変化が発生したか否か（即ち、ライン間の平均輝度が大きく変化したライン位置が記憶されているか否か）を判別し（ステップＳ１４）、ライン状の輝度変化が発生したと判別されると、露光ムラの警告を発する（ステップＳ１６）。   Returning to FIG. 2, when the line-like luminance change detection process is completed, whether or not a line-like luminance change has occurred (that is, whether or not the line position where the average luminance between the lines has greatly changed is stored). (Step S14), and if it is determined that a line-like luminance change has occurred, an exposure unevenness warning is issued (step S16).

この露光ムラの警告は、例えば、図７に示すようにデジタルカメラ１の背面のＬＣＤ４０に撮影した画像を表示するとともに、そのＬＣＤ４０の画面に「露光ムラ発生！」等のメッセージを表示する。また、ライン間の平均輝度が大きく変化したライン位置を示すマーカＭ（この実施の形態では、破線）を表示する。   For example, as shown in FIG. 7, the exposure unevenness warning displays an image taken on the LCD 40 on the back of the digital camera 1 and a message such as “Exposure unevenness occurred!” On the LCD 40 screen. In addition, a marker M (in this embodiment, a broken line) indicating the line position where the average luminance between the lines has greatly changed is displayed.

撮影者は、上記露光ムラの警告が発せられると、実際に露光ムラが発生しているか否かをＬＣＤ４０の画面上で確認し、露光ムラの検出が誤検出の場合又は露光ムラが許容できる場合には記録指示を行い、露光ムラが許容できない場合には画像の記録処理をキャンセルするキャンセル指示を行う（ステップＳ１８）。記録指示は、操作部１２のメニュー／ＯＫキーを押すことにより行うことができ、キャンセル指示は、操作部１２のＢＡＣＫキーを押すことにより行うことができる。これらのキー操作方法は、ＬＣＤ４０の画面に表示される。   When the exposure unevenness warning is issued, the photographer confirms whether or not the exposure unevenness actually occurs on the screen of the LCD 40, and when the exposure unevenness is detected erroneously or when the exposure unevenness is acceptable. A recording instruction is issued, and if the uneven exposure is not acceptable, a canceling instruction is issued to cancel the image recording process (step S18). The recording instruction can be performed by pressing the menu / OK key of the operation unit 12, and the cancel instruction can be performed by pressing the BACK key of the operation unit 12. These key operation methods are displayed on the screen of the LCD 40.

ステップＳ１４において、ライン状の輝度変化が発生していないと判別された場合、及びステップＳ１８で記録指示が行われた場合には、ＲＡＭ１４に一時的に保持されている撮像した画像の圧縮処理、メモリカード４４への記録等の記録処理が行われる（ステップＳ２０）。   If it is determined in step S14 that a line-like luminance change has not occurred, and if a recording instruction is issued in step S18, compression processing of the captured image temporarily held in the RAM 14, Recording processing such as recording on the memory card 44 is performed (step S20).

上記露光ムラの警告により撮影者は撮り直すことができ、これにより露光ムラのない画像又は露光ムラが許容できる画像のみを記録することができる。   The photographer can retake the image by the exposure unevenness warning, thereby recording only an image having no exposure unevenness or an image in which exposure unevenness is acceptable.

尚、この実施の形態では、露光ムラが警告されたときに、画像の記録／キャンセルを撮影者が選択できるようになっているが、これに限らず、無条件に記録してもよい。   In this embodiment, when the exposure unevenness is warned, the photographer can select image recording / cancellation. However, the present invention is not limited to this, and recording may be performed unconditionally.

＜ライン状輝度変化の検出方法の第２実施例＞
図８はライン状輝度変化の検出方法の第２実施例を示すフローチャートである。 <Second Embodiment of Method for Detecting Line-like Luminance Change>
FIG. 8 is a flowchart showing a second embodiment of the method for detecting a line-like luminance change.

いま、ＣＭＯＳセンサ２６の全ライン数をｎとし、まず、ラインの位置を示す変数ｉを１にセットする（ステップＳ１２０）。   Now, assuming that the total number of lines of the CMOS sensor 26 is n, first, a variable i indicating the position of the line is set to 1 (step S120).

この検出方法を適用する場合には、記録対象の１フレームの画像の隣接するフレーム（前後のフレーム）の画像も同時に取得し、３枚の画像をＲＡＭ１４に記憶させておく。   When this detection method is applied, images of adjacent frames (front and back frames) of one frame image to be recorded are simultaneously acquired, and three images are stored in the RAM 14.

即ち、シャッタレリーズスイッチが半押しされると、ローリングシャッタによる露光及び読出しを行い、ＲＡＭ１４に保持される画像を最新のフレームの画像で更新する。そして、シャッタレリーズスイッチが全押しされると、前記フレーム画像の更新を行わずに、シャッタレリーズ直後に取り込んだ記録対象の１フレームの画像と、次のフレームの画像とをＲＡＭ１４に保存し、これにより３枚の画像をＲＡＭ１４に一時保存する。   That is, when the shutter release switch is pressed halfway, exposure and reading are performed by the rolling shutter, and the image held in the RAM 14 is updated with the latest frame image. When the shutter release switch is fully depressed, the frame image is not updated, and the one frame image to be recorded and the next frame image captured immediately after the shutter release are stored in the RAM 14. Thus, the three images are temporarily stored in the RAM 14.

図９及び図１０はシャッタレリーズスイッチの全押し時に保存される３枚の画像の露光及び読み出しタイミングを示している。   9 and 10 show the exposure and readout timings of the three images stored when the shutter release switch is fully pressed.

図９及び図１０上で、時刻ｔ１は、シャッタレリーズスイッチの全押し直後のローリングシャッタの内部同期信号のタイミングを示しており、時刻ｔ０、ｔ２は、時刻ｔ１の前後のフレームのタイミングを示している。 9 and 10, time t 1 indicates the timing of the internal synchronization signal of the rolling shutter immediately after the shutter release switch is fully pressed, and times t 0 and t 2 indicate the frames before and after time t 1. Timing is shown.

図８に戻って、これらの３枚の時系列順の画像をＡ、Ｂ、Ｃとすると、画像Ａ、Ｂ、Ｃの同一のラインｉの輝度平均値ＥＡｉ、ＥＢｉ、ＥＣｉをそれぞれ取得する（ステップＳ１２２）。 Returning to FIG. 8, if these three time-series images are A, B, and C, the luminance average values E Ai , E Bi , and E Ci of the same line i of the images A, B, and C are respectively represented. Obtain (step S122).

続いて、輝度平均値ＥＡｉ、ＥＢｉ、ＥＣｉを比較し、ＥＡｉ＜ＥＢｉ、又はＥＢｉ＞ＥＣｉの条件を満たすラインｉを検出する（ステップＳ１２４）。 Subsequently, the luminance average values E Ai , E Bi , and E Ci are compared, and a line i that satisfies the condition of E Ai <E Bi or E Bi > E Ci is detected (step S124).

即ち、図９に示すように記録対象の画像の露光期間前半にフラッシュ光が入射すると、時刻ｔ１からフラッシュ光の入射タイミングまでに露光を開始したラインの平均輝度値は、その前後のフレームの同一ラインの平均輝度値よりも大きくなる。   That is, as shown in FIG. 9, when the flash light is incident in the first half of the exposure period of the image to be recorded, the average luminance value of the line where the exposure is started from the time t1 to the flash light incident timing is the same in the preceding and subsequent frames. It becomes larger than the average luminance value of the line.

一方、図１０に示すように記録対象の画像の露光期間後半にフラッシュ光が入射すると、フラッシュ光の入射タイミングのラインから最後のラインの平均輝度値は、その前後のフレームの同一ラインの平均輝度値よりも大きくなる。   On the other hand, as shown in FIG. 10, when the flash light is incident in the second half of the exposure period of the image to be recorded, the average luminance value from the line at the flash light incident timing to the last line is the average luminance of the same line in the previous and subsequent frames. Larger than the value.

上記のようにして３つの同一ラインの平均輝度値を比較することにより、画像Ｂ上のラインのうち隣接するフレームの画像よりも平均輝度の大きいラインを、フラッシュ光が入射したラインと判別し、そのラインｉの位置（ライン番号）を記憶する（ステップＳ１２６）。   By comparing the average luminance values of three identical lines as described above, a line having a higher average luminance than the image of the adjacent frame among the lines on the image B is determined as the line on which the flash light is incident, The position (line number) of the line i is stored (step S126).

続いて、変数ｉを１だけインクリメントし（ステップＳ１２８）、ｉ＝ｎ（ｎ：最後のラインの位置）か否かを判別する（ステップＳ１３０）。ｉ＜ｎの場合（「Ｎｏ」の場合）には、ステップＳ１２２に戻る。   Subsequently, the variable i is incremented by 1 (step S128), and it is determined whether i = n (n: position of the last line) or not (step S130). If i <n (“No”), the process returns to step S122.

ｉ＝ｎの場合（「Ｙｅｓ」の場合）には、ステップＳ１２６に記憶された情報に基づいて露光ムラの有無の判定、及び露光ムラが有ると判定され場合の高輝度領域の判別が行われる（ステップＳ１３２）。   When i = n (in the case of “Yes”), the presence / absence of exposure unevenness is determined based on the information stored in step S126, and the high-luminance area is determined when it is determined that exposure unevenness exists. (Step S132).

例えば、ステップＳ１２６において、ライン位置が記憶されている場合には、露光ムラが有ると判定し、また、ライン位置が連続して記憶されている場合には、その連続しているライン位置の範囲が、高輝度領域と判別することができる。   For example, if the line position is stored in step S126, it is determined that there is uneven exposure. If the line position is stored continuously, the range of the continuous line position is determined. However, it can be determined as a high luminance region.

尚、ステップＳ１２４では、同一のラインｉの輝度平均値ＥＡｉ、ＥＢｉ、ＥＣｉの大小を比較しているが、一定の閾値以上大きいか否かを判定するようにしてもよい。また、ステップＳ１２６で記憶されたライン番号が連続していない場合や、連続していても数ラインの場合には、露光ムラと判定しないようにしてもよい。 In step S124, the brightness average values E Ai , E Bi , and E Ci of the same line i are compared. However, it may be determined whether or not the brightness average values are larger than a certain threshold. Further, if the line numbers stored in step S126 are not continuous, or if they are continuous and there are several lines, they may not be determined as exposure unevenness.

［第２実施形態（露光ムラの補正）］
図１１は本発明に係る撮像制御方法の第２実施形態を示すフローチャートである。尚、図２に示した第１実施形態と共通する部分には同一のステップ番号を付し、その詳細なせ説明は省略する。 [Second Embodiment (Correction of Exposure Unevenness)]
FIG. 11 is a flowchart showing a second embodiment of the imaging control method according to the present invention. The same steps as those in the first embodiment shown in FIG. 2 are denoted by the same step numbers, and detailed description thereof is omitted.

この第２実施形態では、図９及び図１０を用いて説明したようにシャッタレリーズスイッチの全押し時に同期して、記録対象の画像Ｂと、その前後のフレームの画像Ａ、Ｃの少なくとも一方の画像を取得し、ＲＡＭ１４に一時保持する。   In the second embodiment, as described with reference to FIGS. 9 and 10, in synchronization with the shutter release switch being fully pressed, at least one of the image B to be recorded and the images A and C of the frames before and after that is recorded. An image is acquired and temporarily stored in the RAM 14.

ステップＳ１４において、ライン状の輝度変化が発生したと判別されると、ステップＳ３０に遷移する。   If it is determined in step S14 that a line-like luminance change has occurred, the process proceeds to step S30.

ステップＳ３０では、画像Ｂ中の高輝度領域の情報と、隣接するフレームの画像（この実施の形態では、直後のフレームの画像Ｃ）の同一領域の情報とを置き換える画像処理を行う。   In step S30, image processing is performed to replace the information of the high luminance area in the image B and the information of the same area of the image of the adjacent frame (in this embodiment, the image C of the immediately subsequent frame).

例えば、図９に示すように記録対象の画像Ｂの露光期間前半にフラッシュ光が入射すると、前半部の領域が高輝度領域Ｂ１となるが、この高輝度領域Ｂ１の情報と、直後のフレームの画像Ｃの同一領域Ｃ１の情報とを置き換える画像処理を行う。 For example, when the flash light is incident on the exposure period the first half of the image B to be recorded as shown in FIG. 9, the area of the front half portion becomes high luminance region B 1, in the high luminance area B 1 information and, immediately after performing image processing to replace the information in the same area C 1 of the image C of the frame.

同様に、図１０に示すように記録対象の画像Ｂの露光期間後半にフラッシュ光が入射すると、後半部の領域が高輝度領域Ｂ２となるが、この高輝度領域Ｂ２の情報と、直後のフレームの画像Ｃの同一領域Ｃ２の情報とを置き換える画像処理を行う。 Similarly, when the flash light in the second half the exposure period of the image B to be recorded as shown in FIG. 10 is incident, although the area of the rear half portion has a higher luminance region B 2, and the high-luminance region B 2 information, immediately performing image processing for replacing of the image information of the same region C 2 of the C frames.

このようにライン状の輝度変化が発生したと判別されると、記録対象の画像中の高輝度領域の情報が直後のフレームの画像の同一領域の情報に置換（補正）され、その補正後の画像が記録処理される（ステップＳ２０）。   When it is determined that a line-like luminance change has occurred in this way, the information of the high luminance area in the image to be recorded is replaced (corrected) with the information of the same area of the image of the immediately following frame, and the corrected An image is recorded (step S20).

尚、直後のフレームの画像Ｃの代わりに、直前のフレームの画像Ａを使用して上記と同様の補正を行うようにしてもよい。   Note that the same correction as described above may be performed using the image A of the immediately preceding frame instead of the image C of the immediately following frame.

また、記録対象の画像Ｂと、その前後のフレームの画像Ａ、Ｃの３枚の画像Ａ、Ｂ、Ｃを使用し、補正に使用する画像として、直前のフレームの画像Ａと直後のフレームの画像Ｃとを適宜選択するようにしてもよい。   Further, the image B to be recorded and the images A, B, and C of the images A and C of the frames before and after the image B are used, and the images A and B of the immediately preceding frame are used as images for correction. You may make it select the image C suitably.

選択方法の第１の例としては、図９に示すように記録対象の画像Ｂの露光期間前半にフラッシュ光が入射する場合（画像Ｂの前半部の領域が高輝度領域Ｂ１となる場合）は、直後のフレームの画像Ｃを選択し、図１０に示すように記録対象の画像Ｂの露光期間後半にフラッシュ光が入射する場合（画像Ｂの後半部の領域が高輝度領域Ｂ２となる場合）は、直前のフレームの画像Ａを選択する。 As a first example of a selection method, (if the area of the front half portion of the image B has a higher luminance region B 1) when the flash light exposure period the first half of the image B to be recorded as shown in FIG. 9 is incident selects an image C immediately after the frame, the area of the rear half portion of the case (image B flash light is incident has a higher luminance region B 2 in the second half the exposure period of the image B to be recorded as shown in FIG. 10 In the case), the image A of the immediately preceding frame is selected.

これによれば、選択されたフレームの画像は、いずれの領域にもフラッシュ光が入ってないものとなり、例えば、フラッシュ光の発光時間が長い場合にも対応できる。   According to this, the image of the selected frame has no flash light in any region, and for example, it can cope with a case where the flash light emission time is long.

また、選択方法の第２の例としては、図９に示すように記録対象の画像Ｂの露光期間前半にフラッシュ光が入射する場合（画像Ｂの前半部の領域が高輝度領域Ｂ１となる場合）は、直後、直後のフレームの画像Ａ、Ｃの対応する領域Ａ１、Ｃ１の平均輝度を比較し、平均輝度が低い方の画像を選択する。また、図１０に示すように記録対象の画像Ｂの露光期間後半にフラッシュ光が入射する場合（画像Ｂの後半部の領域が高輝度領域Ｂ２となる場合）は、直後、直後のフレームの画像Ａ、Ｃの対応する領域Ａ２、Ｃ２の平均輝度を比較し、平均輝度が低い方の画像を選択する。 As the second example of the selection method, the area of the front half portion of the case (image B flash light is incident has a higher luminance region B 1 in the exposure period the first half of the image B to be recorded as shown in FIG. 9 In the case), the average brightness of the corresponding areas A 1 and C 1 of the images A and C in the immediately following frame is compared, and the image with the lower average brightness is selected. Also, if the flash light in the second half the exposure period of the image B to be recorded as shown in FIG. 10 is incident (if regions of the second half portion of the image B has a higher luminance region B 2) is immediately after the immediately following frame The average brightness of the corresponding areas A 2 and C 2 of the images A and C are compared, and the image with the lower average brightness is selected.

更に、直後、直後のフレームの画像Ａ、Ｃの両者を使用して、それぞれ２つの補正画像を作成し、これをＬＣＤ４０に並べて表示し又は切り替えて表示し、撮影者にいずれか一方を選択させるようにしてもよい。   Further, two corrected images are created using both the images A and C of the immediately following and immediately following frames, respectively, and these are displayed side by side on the LCD 40 or switched to be displayed, and the photographer is allowed to select one of them. You may do it.

更にまた、移動する被写体を撮像する場合には、ローリング歪みが発生するが、ローリング歪みの影響が少ない方の画像を選択するようにしてもよい。   Furthermore, when a moving subject is imaged, rolling distortion occurs, but an image with less influence of rolling distortion may be selected.

［第３実施形態（露光ムラの補正）］
図１２は本発明に係る撮像制御方法の第３実施形態を示すフローチャートである。尚、図２に示した第２実施形態と共通する部分には同一のステップ番号を付し、その詳細な説明は省略する。 [Third Embodiment (Correction of Exposure Unevenness)]
FIG. 12 is a flowchart showing a third embodiment of the imaging control method according to the present invention. In addition, the same step number is attached | subjected to the part which is common in 2nd Embodiment shown in FIG. 2, and the detailed description is abbreviate | omitted.

この第３実施形態は、第２の実施形態のステップＳ３０の処理の代わりに、ステップＳ４０及びステップＳ４２の処理を行う点で第２実施形態と相違する。   The third embodiment is different from the second embodiment in that the processes of step S40 and step S42 are performed instead of the process of step S30 of the second embodiment.

ステップＳ４０では、記録対象の画像中の高輝度領域と、直後のフレームの画像の同一領域とから、それぞれ同一ラインの平均輝度値を算出する。   In step S40, the average luminance value of the same line is calculated from the high luminance area in the image to be recorded and the same area in the image of the immediately subsequent frame.

ステップＳ４２では、記録対象の画像の高輝度領域に対応するラインの輝度値を、そのラインの輝度値の平均輝度値が直後のフレームの画像の対応するラインの平均輝度値と一致するように補正する。この補正を高輝度領域のライン毎に行う。   In step S42, the luminance value of the line corresponding to the high luminance area of the image to be recorded is corrected so that the average luminance value of the luminance value of the line matches the average luminance value of the corresponding line of the image of the immediately subsequent frame. To do. This correction is performed for each line in the high luminance region.

このようにライン状の輝度変化が発生したと判別されると、記録対象の画像中の高輝度領域の情報が直後のフレームの画像の同一領域の情報の輝度値と一致するように補正され、その補正後の画像が記録処理される（ステップＳ２０）。   When it is determined that a line-like luminance change has occurred in this way, the information of the high luminance area in the image to be recorded is corrected to match the luminance value of the information in the same area of the image of the immediately following frame, The corrected image is recorded (step S20).

尚、補正に使用する画像として、直前及び直後のフレームの画像のうちのいずれの画像を選択するかについては、第２実施形態と同様に行うことができる。   Note that as an image used for correction, which of the images of the immediately preceding and immediately following frames is to be selected can be performed as in the second embodiment.

［第４実施形態（露光ムラの警告及び補正）］
図１３は本発明に係る撮像制御方法の第４実施形態を示すフローチャートである。尚、図２、図１１に示した第１実施形態、第２実施形態と共通する部分には同一のステップ番号を付し、その詳細な説明は省略する。 [Fourth embodiment (warning unevenness warning and correction)]
FIG. 13 is a flowchart showing a fourth embodiment of the imaging control method according to the present invention. Note that the same step numbers are assigned to portions common to the first embodiment and the second embodiment shown in FIGS. 2 and 11, and a detailed description thereof is omitted.

この第４実施形態は、第１の実施形態と第２実施形態とを組み合わせたものであり、ステップＳ１４において、ライン状の輝度変化が発生したと判別されると、ステップＳ１６に遷移し、ここで、第１実施形態と同様に露光ムラの警告を発する。   The fourth embodiment is a combination of the first embodiment and the second embodiment. If it is determined in step S14 that a line-like luminance change has occurred, the process proceeds to step S16. Thus, an exposure unevenness warning is issued as in the first embodiment.

そして、記録対象の画像をＬＣＤ４０に表示させ、露光ムラの補正の要否を撮影者に判断させる（ステップＳ５０）。撮影者により露光ムラの補正指示が入力されると、第２実施形態と同様にして記録対象の画像Ｂ中の高輝度領域の情報を、隣接するフレームの画像の同一領域の情報とを置き換える画像処理を行う（ステップＳ３０）。   Then, the image to be recorded is displayed on the LCD 40, and the photographer determines whether or not the exposure unevenness needs to be corrected (step S50). When an exposure unevenness correction instruction is input by the photographer, an image in which the information on the high-intensity area in the image B to be recorded is replaced with the information on the same area in the image of the adjacent frame as in the second embodiment. Processing is performed (step S30).

一方、撮影者により露光ムラを補正しない旨の指示入力があると、ステップＳ２０に遷移し、補正処理が行われない画像が記録される。   On the other hand, if the photographer inputs an instruction not to correct exposure unevenness, the process proceeds to step S20, and an image that is not subjected to correction processing is recorded.

これによれば、露光ムラが誤って検出された場合に、誤った補正がされた画像が作成記録されないようにすることができる。   According to this, when exposure unevenness is erroneously detected, it is possible to prevent an image that has been erroneously corrected from being created and recorded.

尚、ステップＳ３０の補正処理の代わりに、図１２に示した第３実施形態のステップＳ４０、Ｓ４２による補正処理を行うようにしてもよい。   Instead of the correction process in step S30, the correction process in steps S40 and S42 of the third embodiment shown in FIG. 12 may be performed.

［その他］
他者のカメラのフラッシュ発光に起因する露光ムラの検出方法（ライン状輝度変化の検出方法）としては、図４に示した第１実施例、図８に示した第２実施例に限らず、例えば両者を併用し、両者で同時に検出された場合に露光ムラが発生したと判断してもよいし、いずれか一方で検出された場合に、露光ムラが発生したと判断してもよい。 [Others]
The method for detecting unevenness of exposure due to flash emission of the camera of another person (detection method for line-like luminance change) is not limited to the first embodiment shown in FIG. 4 and the second embodiment shown in FIG. For example, both may be used together, and it may be determined that exposure unevenness has occurred when both are detected simultaneously, or it may be determined that exposure unevenness has occurred when either is detected.

また、露光ムラの警告は、ＬＣＤ４０による警告表示に限らず、音声による警告や音声と文字とを併用した警告でもよい。   The exposure unevenness warning is not limited to the warning display on the LCD 40, but may be a warning by voice or a warning using both voice and characters.

更に、本発明は自らフラッシュ発光して撮像する場合にも適用できる。この場合には、全てのラインの露光期間中に均等にフラッシュ光が入射するように１フレームの露光期間とフラッシュの発光タイミングを制御する必要がある。また、自らフラッシュ発光させた撮像時の他者のフラッシュ光による露光ムラの検出は、図４に示した方法により行うことができる。   Furthermore, the present invention can also be applied to a case where an image is taken by flash emission by itself. In this case, it is necessary to control the exposure period of one frame and the light emission timing of the flash so that the flash light is uniformly incident during the exposure period of all lines. In addition, the detection of exposure unevenness by another person's flash light at the time of imaging with self-flash emission can be performed by the method shown in FIG.

本発明は上述した実施形態に限定されず、本発明の精神を逸脱しない範囲で種々の変形が可能であることは言うまでもない。   It goes without saying that the present invention is not limited to the above-described embodiments, and various modifications can be made without departing from the spirit of the present invention.

１…撮像装置（デジタルカメラ）、１０…ＣＰＵ、１２…操作部、１４…ＲＡＭ、１６…ＲＯＭ、２０…フラッシュ発光部、２２…レンズユニット、２６…ＣＭＯＳセンサ、２８…タイミングジェネレータ（ＴＧ）、３２…Ａ／Ｄ変換器、３４…画像信号処理回路、３６…圧縮伸張処理回路、４０…液晶ディスプレイ（ＬＣＤ）、４４…メモリカード   DESCRIPTION OF SYMBOLS 1 ... Imaging device (digital camera), 10 ... CPU, 12 ... Operation part, 14 ... RAM, 16 ... ROM, 20 ... Flash light emission part, 22 ... Lens unit, 26 ... CMOS sensor, 28 ... Timing generator (TG), 32 ... A / D converter, 34 ... Image signal processing circuit, 36 ... Compression / decompression processing circuit, 40 ... Liquid crystal display (LCD), 44 ... Memory card

Claims (18)

複数ラインの受光領域を有する撮像素子に対し、各ライン毎に露光開始タイミングをずらして露光を開始させるとともに、所定の露光時間が経過したラインから順次ライン上の情報を読み出すローリングシャッタ方式の撮像装置において、
前記撮像素子から順次読み出した複数ラインの情報からなる１フレームの画像であって、シャッタレリーズ動作に同期した記録対象の１フレームの画像、又は該画像と隣接するフレームの画像とを含む複数フレームの画像を取得する画像取得手段と、
前記取得した記録対象の１フレームの画像中に含まれる他者のフラッシュ発光に起因する露光ムラの有無を検出する露光ムラ検出手段と、
前記露光ムラ検出手段によって露光ムラが検出されると、露光ムラを示す警告を発する露光ムラ警告手段と、
を備えたことを特徴とする撮像装置。 A rolling shutter type imaging device that starts exposure by shifting the exposure start timing for each line, and sequentially reads information on the line from a line where a predetermined exposure time has elapsed, with respect to an imaging device having a plurality of light receiving areas. In
An image of one frame composed of information of a plurality of lines sequentially read out from the image sensor, including one frame image to be recorded synchronized with a shutter release operation, or an image of a frame adjacent to the image. Image acquisition means for acquiring images;
Exposure unevenness detection means for detecting the presence or absence of exposure unevenness due to flash emission of another person included in the acquired one-frame image of the recording target;
When exposure unevenness is detected by the exposure unevenness detection means, exposure unevenness warning means for issuing a warning indicating exposure unevenness,
An imaging apparatus comprising: 前記画像取得手段により取得された画像が一時的に記録される内部メモリと、
画像表示手段と、
前記露光ムラ警告手段により警告が発せられると、前記内部メモリに記録された画像を前記画像表示手段に表示させる表示制御手段と、
画像の記録を入力する記録指示手段と、
前記記録指示手段により前記画像ムラの警告が発せられた画像に対する記録指示が入力されると、前記内部メモリに記録された画像を不揮発性の記録媒体に記録する記録手段と、
を更に備えたことを特徴とする請求項１に記載の撮像装置。 An internal memory in which an image acquired by the image acquisition means is temporarily recorded;
Image display means;
Display control means for displaying an image recorded in the internal memory on the image display means when a warning is issued by the exposure unevenness warning means;
Recording instruction means for inputting image recording;
A recording unit that records an image recorded in the internal memory on a non-volatile recording medium when a recording instruction for an image for which the image unevenness warning has been issued is input by the recording instruction unit;
The imaging apparatus according to claim 1, further comprising: 前記露光ムラ検出手段は、少なくともライン方向と平行な露光ムラの境界を示すライン位置を検出し、
前記露光ムラ警告手段は、前記画像表示手段に表示された画像上に前記検出されたライン位置を示すマーカを表示することを特徴とする請求項２に記載の撮像装置。 The exposure unevenness detecting means detects a line position indicating an exposure unevenness boundary parallel to at least the line direction,
The imaging apparatus according to claim 2, wherein the exposure unevenness warning unit displays a marker indicating the detected line position on an image displayed on the image display unit. 複数ラインの受光領域を有する撮像素子に対し、各ライン毎に露光開始タイミングをずらして露光を開始させるとともに、所定の露光時間が経過したラインから順次ライン上の情報を読み出すローリングシャッタ方式の撮像装置において、
前記撮像素子から読み出した複数ラインの情報からなる１フレームの画像であって、シャッタレリーズ動作に同期した記録対象の１フレームの画像と、該画像と隣接するフレームの画像とを含む複数フレームの画像を取得する画像取得手段と、
前記取得した記録対象の１フレームの画像中に含まれる他者のフラッシュ発光に起因する露光ムラの有無を検出する露光ムラ検出手段と、
前記露光ムラ検出手段によって露光ムラが検出されると、前記記録対象の画像の前記露光ムラに対応する高輝度領域の情報を、前記隣接するフレームの画像における前記高輝度領域に対応する情報に基づいて補正する露光ムラ補正手段と、
を備えたことを特徴とする撮像装置。 A rolling shutter type imaging device that starts exposure by shifting the exposure start timing for each line, and sequentially reads information on the line from a line where a predetermined exposure time has elapsed, with respect to an imaging device having a plurality of light receiving areas. In
A one-frame image composed of information of a plurality of lines read from the image sensor, and includes a plurality of frames including a one-frame image to be recorded synchronized with a shutter release operation and an image of a frame adjacent to the image. Image acquisition means for acquiring
Exposure unevenness detection means for detecting the presence or absence of exposure unevenness due to flash emission of another person included in the acquired one-frame image of the recording target;
When exposure unevenness is detected by the exposure unevenness detection means, information on the high brightness area corresponding to the exposure unevenness of the image to be recorded is based on information corresponding to the high brightness area in the image of the adjacent frame. Exposure unevenness correcting means for correcting
An imaging apparatus comprising: 前記露光ムラ補正手段は、前記記録対象の画像の前記露光ムラに対応する高輝度領域の情報を、前記隣接するフレームの画像における前記高輝度領域に対応する情報と置換することを特徴とする請求項４に記載の撮像装置。   The exposure unevenness correcting unit replaces information on a high brightness area corresponding to the exposure unevenness of the image to be recorded with information corresponding to the high brightness area in the image of the adjacent frame. Item 5. The imaging device according to Item 4. 前記露光ムラ補正手段は、前記記録対象の画像の前記露光ムラに対応する高輝度領域に対応するラインの輝度値を、前記高輝度領域に対応するラインの平均輝度値が前記隣接するフレームの画像における同一ラインの平均輝度値と一致するように補正することを特徴とする請求項４に記載の撮像装置。   The exposure unevenness correcting unit is configured to calculate a brightness value of a line corresponding to the high brightness area corresponding to the exposure unevenness of the image to be recorded, and an image of an adjacent frame in which an average brightness value of the line corresponding to the high brightness area is The imaging apparatus according to claim 4, wherein correction is performed so as to match an average luminance value of the same line. 前記露光ムラ検出手段によって露光ムラが検出されると、露光ムラを示す警告を発する露光ムラ警告手段と、
画像表示手段と、
前記露光ムラ警告手段により警告が発せられると、前記記録対象の画像を前記画像表示手段に表示させる表示制御手段と、
露光ムラの補正の指示を入力する補正指示手段と、
前記露光ムラ補正手段は、前記補正指示手段により前記画像ムラの警告が発せられた画像に対する補正指示が入力されると、前記記録対象の画像の露光ムラの補正を行うことを特徴とする請求項４から６のいずれかに記載の撮像装置。 When exposure unevenness is detected by the exposure unevenness detection means, exposure unevenness warning means for issuing a warning indicating exposure unevenness,
Image display means;
Display control means for displaying the image to be recorded on the image display means when a warning is issued by the exposure unevenness warning means;
Correction instruction means for inputting an instruction to correct exposure unevenness;
The exposure unevenness correcting means corrects exposure unevenness of the image to be recorded when a correction instruction for an image for which the image unevenness warning has been issued is input by the correction instruction means. The imaging device according to any one of 4 to 6. 前記露光ムラ検出手段は、前記取得した記録対象の１フレームの画像から１ライン毎又は複数ライン毎の平均輝度値を算出する輝度値算出手段と、前記算出した平均輝度値に基づいて前後方向のライン間における所定の閾値を越える輝度変化を検出する輝度変化検出手段とを有し、
前記輝度変化検出手段により検出される輝度変化の有無に基づいて前記露光ムラの有無を検出することを特徴とする請求項１から７のいずれかに記載の撮像装置。 The exposure unevenness detection unit includes a luminance value calculation unit that calculates an average luminance value for each line or for each of a plurality of lines from the acquired image of one frame to be recorded, and a front-rear direction based on the calculated average luminance value. Luminance change detecting means for detecting a luminance change exceeding a predetermined threshold between lines,
The imaging apparatus according to claim 1, wherein the presence or absence of the exposure unevenness is detected based on the presence or absence of a brightness change detected by the brightness change detection unit. 前記露光ムラ検出手段は、前記画像取得手段により取得した複数フレームの画像からそれぞれ１ライン毎又は複数ライン毎の平均輝度値を算出する輝度値算出手段と、前記複数フレームの画像の同一ラインについて算出された平均輝度値に基づいて前記記録対象の画像のラインの平均輝度値が、隣接する画像のラインの平均輝度値よりも大きくなるラインを検出する高輝度ライン検出手段とを有し、
前記高輝度ライン検出手段により検出される高輝度ラインの有無に基づいて前記露光ムラの有無を検出することを特徴とする請求項１から８のいずれかに記載の撮像装置。 The exposure unevenness detection unit calculates a luminance value calculation unit that calculates an average luminance value for each line or each of a plurality of lines from the plurality of frames of images acquired by the image acquisition unit, and calculates the same line of the images of the plurality of frames. A high-luminance line detection means for detecting a line in which the average luminance value of the line of the image to be recorded is larger than the average luminance value of the line of the adjacent image based on the average luminance value,
9. The imaging apparatus according to claim 1, wherein the presence / absence of the uneven exposure is detected based on the presence / absence of a high luminance line detected by the high luminance line detecting means. 前記画像取得手段は、前記記録対象の１フレーム画像と、該画像の直前及び直後のフレームの画像とを含む３フレームの画像を取得し、
前記露光ムラ補正手段は、前記記録対象の画像の露光ムラの補正に使用する前記隣接するフレームの画像として、前記直前及び直後のフレームの画像のうちのいずれか一方を選択する選択手段を有することを特徴とする請求項４から７のいずれかに記載の撮像装置。 The image acquisition means acquires a three-frame image including the one-frame image to be recorded and an image of a frame immediately before and after the image;
The exposure unevenness correction means includes selection means for selecting one of the immediately preceding and immediately following frame images as the adjacent frame image used for correcting the exposure unevenness of the image to be recorded. The imaging apparatus according to claim 4, wherein: 前記選択手段は、前記記録対象の画像の前記露光ムラに対応する高輝度領域に対応する前記直前及び直後のフレームの画像における同一領域の平均輝度値をそれぞれ算出する算出手段を有し、前記算出された平均輝度値のうち低い平均輝度値を有する画像を選択することを特徴とする請求項１０に記載の撮像装置。   The selection unit includes a calculation unit that calculates an average luminance value of the same region in the immediately preceding and immediately following frame images corresponding to the high luminance region corresponding to the exposure unevenness of the image to be recorded, and the calculation The image pickup apparatus according to claim 10, wherein an image having a low average luminance value is selected from the average luminance values obtained. 前記選択手段は、前記記録対象の画像の前記露光ムラに対応する高輝度領域が画像中の前半部か後半部かを判断する判断手段を有し、前半部と判断した場合には直後のフレームの画像を選択し、後半部と判断した場合には直前のフレームの画像を選択することを特徴とする請求項１０に記載の撮像装置。   The selection unit includes a determination unit that determines whether a high-intensity area corresponding to the exposure unevenness of the image to be recorded is the first half or the second half of the image. The image pickup apparatus according to claim 10, wherein an image of the immediately preceding frame is selected when it is determined that the second half image is selected. 複数ラインの受光領域を有する撮像素子に対し、各ライン毎に露光開始タイミングをずらして露光を開始させるとともに、所定の露光時間が経過したラインから順次ライン上の情報を読み出すローリングシャッタ方式の撮像装置における撮像制御方法において、
前記撮像素子から順次読み出した複数ラインの情報からなる１フレームの画像であって、シャッタレリーズ動作に同期した記録対象の１フレームの画像、又は該画像と隣接するフレームの画像とを含む複数フレームの画像を取得し、
前記取得した記録対象の１フレームの画像中に含まれる他者のフラッシュ発光に起因する露光ムラの有無を検出し、
前記露光ムラが検出されると、露光ムラを示す警告を発することを特徴とする撮像制御方法。 A rolling shutter type imaging device that starts exposure by shifting the exposure start timing for each line, and sequentially reads information on the line from a line where a predetermined exposure time has elapsed, with respect to an imaging device having a plurality of light receiving areas. In the imaging control method in
An image of one frame composed of information of a plurality of lines sequentially read out from the image sensor, including one frame image to be recorded synchronized with a shutter release operation, or an image of a frame adjacent to the image. Get an image,
Detecting the presence or absence of uneven exposure caused by the flash emission of the other person included in the acquired one-frame image of the recording target;
An imaging control method characterized by issuing a warning indicating exposure unevenness when the exposure unevenness is detected. 前記露光ムラが検出されると、該露光ムラが検出された記録対象の画像を画像表示手段に表示させ、
前記表示結果を確認した撮影者から画像の記録を指示する指示入力があると、前記記録対象の画像を不揮発性の記録媒体に記録することを特徴とする請求項１３に記載の撮像制御方法。 When the exposure unevenness is detected, an image to be recorded is displayed on the image display means in which the exposure unevenness is detected,
14. The imaging control method according to claim 13, wherein the recording target image is recorded on a non-volatile recording medium when there is an instruction input for instructing recording of an image from a photographer confirming the display result. 複数ラインの受光領域を有する撮像素子に対し、各ライン毎に露光開始タイミングをずらして露光を開始させるとともに、所定の露光時間が経過したラインから順次ライン上の情報を読み出すローリングシャッタ方式の撮像装置における撮像制御方法において、
前記撮像素子から読み出した複数ラインの情報からなる１フレームの画像であって、シャッタレリーズ動作に同期した記録対象の１フレームの画像と、該画像と隣接するフレームの画像とを含む複数フレームの画像を取得し、
前記取得した記録対象の１フレームの画像中に含まれる他者のフラッシュ発光に起因する露光ムラの有無を検出し、
前記露光ムラが検出されると、前記記録対象の画像の前記露光ムラに対応する高輝度領域の情報を、前記隣接するフレームの画像における前記高輝度領域に対応する情報に基づいて補正することを特徴とする撮像制御方法。 A rolling shutter type imaging device that starts exposure by shifting the exposure start timing for each line, and sequentially reads information on the line from a line where a predetermined exposure time has elapsed, with respect to an imaging device having a plurality of light receiving areas. In the imaging control method in
A one-frame image composed of information of a plurality of lines read from the image sensor, and includes a plurality of frames including a one-frame image to be recorded synchronized with a shutter release operation and an image of a frame adjacent to the image. Get
Detecting the presence or absence of uneven exposure caused by the flash emission of the other person included in the acquired one-frame image of the recording target;
When the exposure unevenness is detected, the information on the high brightness area corresponding to the exposure unevenness of the image to be recorded is corrected based on the information corresponding to the high brightness area in the image of the adjacent frame. A characteristic imaging control method. 前記露光ムラに対応する高輝度領域の情報の補正は、前記記録対象の画像の前記露光ムラに対応する高輝度領域の情報を、前記隣接するフレームの画像における前記高輝度領域に対応する情報に置換することにより行うことを特徴とする請求項１５に記載の撮像制御方法。   The correction of the information on the high brightness area corresponding to the exposure unevenness is performed by changing the information on the high brightness area corresponding to the exposure unevenness of the image to be recorded into the information corresponding to the high brightness area in the image of the adjacent frame. The imaging control method according to claim 15, wherein the imaging control method is performed by replacement. 前記露光ムラに対応する高輝度領域の情報の補正は、前記記録対象の画像の前記露光ムラに対応する高輝度領域に対応するラインの輝度値を、前記高輝度領域に対応するラインの平均輝度値が前記隣接するフレームの画像における同一ラインの平均輝度値と一致するように補正することにより行うことを特徴とする請求項１５に記載の撮像制御方法。   The correction of the information of the high brightness area corresponding to the exposure unevenness is performed by calculating the brightness value of the line corresponding to the high brightness area corresponding to the exposure unevenness of the image to be recorded as the average brightness of the line corresponding to the high brightness area. 16. The imaging control method according to claim 15, wherein the imaging control method is performed by correcting the value so as to match an average luminance value of the same line in the image of the adjacent frame. 前記露光ムラが検出されると、前記記録対象の画像の前記露光ムラに対応する高輝度領域の情報の補正の前に、露光ムラを示す警告を発生するとともに前記記録対象の画像を画像表示手段に表示させ、
その後、露光ムラの補正の指示が入力されると、前記露光ムラに対応する高輝度領域の情報の補正を行うことを特徴とする請求項１３から１７のいずれかに記載の撮像制御方法。 When the exposure unevenness is detected, a warning indicating the exposure unevenness is generated and the image to be recorded is displayed on the image display means before correcting the information of the high luminance area corresponding to the exposure unevenness of the image to be recorded. Displayed on the
18. The imaging control method according to claim 13, wherein when an instruction to correct exposure unevenness is input, information on a high luminance area corresponding to the exposure unevenness is corrected.
JP2009059943A 2009-03-12 2009-03-12 Imaging apparatus and imaging control method Expired - Fee Related JP5129182B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009059943A JP5129182B2 (en) 2009-03-12 2009-03-12 Imaging apparatus and imaging control method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009059943A JP5129182B2 (en) 2009-03-12 2009-03-12 Imaging apparatus and imaging control method

Publications (2)

Publication Number Publication Date
JP2010213220A true JP2010213220A (en) 2010-09-24
JP5129182B2 JP5129182B2 (en) 2013-01-23

Family

ID=42972894

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009059943A Expired - Fee Related JP5129182B2 (en) 2009-03-12 2009-03-12 Imaging apparatus and imaging control method

Country Status (1)

Country Link
JP (1) JP5129182B2 (en)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010263533A (en) * 2009-05-11 2010-11-18 Panasonic Corp Imaging apparatus
EP2629508A2 (en) 2012-02-14 2013-08-21 JVC Kenwood Corporation Image processing device, image processing method, image processing program for flash detection
JP2013192201A (en) * 2012-02-14 2013-09-26 Jvc Kenwood Corp Image processing apparatus, image processing method, and image processing program
JP2014050070A (en) * 2012-09-04 2014-03-17 Jvc Kenwood Corp Image signal processing device and method
EP2739035A1 (en) 2012-12-03 2014-06-04 JVC KENWOOD Corporation Image processing device and method for correction of artefacts due to external flash
WO2014103140A1 (en) * 2012-12-25 2014-07-03 パナソニック株式会社 Solid-state image pickup device
JP2014124263A (en) * 2012-12-25 2014-07-07 Hoya Corp Endoscope apparatus
JP2015019330A (en) * 2013-07-12 2015-01-29 キヤノン株式会社 Imaging device, method of controlling imaging device, and computer program
JP2015033405A (en) * 2013-08-07 2015-02-19 Hoya株式会社 Imaging apparatus
KR101690887B1 (en) * 2015-09-15 2016-12-28 한국과학기술원 High-speed periodic signal reconstruction with compensation for rolling shutter effect using an off-the-shelf camera
EP3086487A4 (en) * 2014-03-14 2017-08-02 Univerlink Inc. Visible light receiving method
WO2018145030A1 (en) * 2017-02-06 2018-08-09 Intuitive Surgical Operations, Inc. System and method for extracting multiple feeds from a rolling-shutter sensor
CN113873101A (en) * 2020-06-30 2021-12-31 浙江大华技术股份有限公司 Control method and device of warning lamp, storage medium and electronic device

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006174253A (en) * 2004-12-17 2006-06-29 Samsung Techwin Co Ltd Imaging apparatus
JP2007166408A (en) * 2005-12-15 2007-06-28 Toshiba Corp Image processing apparatus and image processing method
JP2007306225A (en) * 2006-05-10 2007-11-22 Sony Corp Imaging apparatus and method, and program
WO2010100866A1 (en) * 2009-03-03 2010-09-10 パナソニック株式会社 Imaging apparatus which corrects effects of flash

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006174253A (en) * 2004-12-17 2006-06-29 Samsung Techwin Co Ltd Imaging apparatus
JP2007166408A (en) * 2005-12-15 2007-06-28 Toshiba Corp Image processing apparatus and image processing method
JP2007306225A (en) * 2006-05-10 2007-11-22 Sony Corp Imaging apparatus and method, and program
WO2010100866A1 (en) * 2009-03-03 2010-09-10 パナソニック株式会社 Imaging apparatus which corrects effects of flash

Cited By (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010263533A (en) * 2009-05-11 2010-11-18 Panasonic Corp Imaging apparatus
US8947588B2 (en) 2012-02-14 2015-02-03 JVC Kenwood Corporation Image processing device, image processing method, image processing program
EP2629508A2 (en) 2012-02-14 2013-08-21 JVC Kenwood Corporation Image processing device, image processing method, image processing program for flash detection
JP2013192201A (en) * 2012-02-14 2013-09-26 Jvc Kenwood Corp Image processing apparatus, image processing method, and image processing program
JP2014050070A (en) * 2012-09-04 2014-03-17 Jvc Kenwood Corp Image signal processing device and method
EP2739035A1 (en) 2012-12-03 2014-06-04 JVC KENWOOD Corporation Image processing device and method for correction of artefacts due to external flash
US8964109B2 (en) 2012-12-03 2015-02-24 JVC Kenwood Corporation Image processing device and method
WO2014103140A1 (en) * 2012-12-25 2014-07-03 パナソニック株式会社 Solid-state image pickup device
JPWO2014103140A1 (en) * 2012-12-25 2017-01-12 パナソニックＩｐマネジメント株式会社 Solid-state imaging device
JP2014124263A (en) * 2012-12-25 2014-07-07 Hoya Corp Endoscope apparatus
US9491379B2 (en) 2012-12-25 2016-11-08 Panasonic Intellectual Property Management Co., Ltd. Solid-state image pickup device which increases video reading speed and reduces distortion
JP2015019330A (en) * 2013-07-12 2015-01-29 キヤノン株式会社 Imaging device, method of controlling imaging device, and computer program
JP2015033405A (en) * 2013-08-07 2015-02-19 Hoya株式会社 Imaging apparatus
EP3086487A4 (en) * 2014-03-14 2017-08-02 Univerlink Inc. Visible light receiving method
US9929807B2 (en) 2014-03-14 2018-03-27 Univerlink Inc. Visible light receiving method
KR101903588B1 (en) * 2014-03-14 2018-10-04 유니버링크 가부시키가이샤 Visible light receiving method
KR101690887B1 (en) * 2015-09-15 2016-12-28 한국과학기술원 High-speed periodic signal reconstruction with compensation for rolling shutter effect using an off-the-shelf camera
WO2018145030A1 (en) * 2017-02-06 2018-08-09 Intuitive Surgical Operations, Inc. System and method for extracting multiple feeds from a rolling-shutter sensor
US11159735B2 (en) 2017-02-06 2021-10-26 Intuitive Surgical Operations, Inc. System and method for extracting multiple feeds from a rolling-shutter sensor
US11647295B2 (en) 2017-02-06 2023-05-09 Intuitive Surgical Operations, Inc. System and method for extracting multiple feeds from a rolling-shutter sensor
US11968458B2 (en) 2017-02-06 2024-04-23 Intuitive Surgical Operations, Inc. System and method for extracting multiple feeds from a rolling-shutter sensor
CN113873101A (en) * 2020-06-30 2021-12-31 浙江大华技术股份有限公司 Control method and device of warning lamp, storage medium and electronic device
CN113873101B (en) * 2020-06-30 2023-07-18 浙江大华技术股份有限公司 Method and device for controlling warning lamp, storage medium and electronic device

Also Published As

Publication number Publication date
JP5129182B2 (en) 2013-01-23

Similar Documents

Publication Publication Date Title
JP5129182B2 (en) Imaging apparatus and imaging control method
JP5144481B2 (en) Imaging apparatus and imaging method
KR100932462B1 (en) Imaging device
JP4615458B2 (en) Exposure control method and imaging apparatus
JP2011015222A (en) Imaging apparatus, and imaging control method
JP2007281547A (en) Imaging apparatus and imaging method
JP2007264196A (en) Strobe control unit and method
JP4697549B2 (en) Image capturing apparatus and face detection method thereof
JP4977569B2 (en) Imaging control apparatus, imaging control method, imaging control program, and imaging apparatus
JP2010187113A (en) Imaging apparatus, and white balance bracketing photographing program
US8040380B2 (en) Image-taking apparatus
JP5109867B2 (en) Digital camera
JP2009017427A (en) Imaging device
JP2008298847A (en) Photographing method and digital camera
JP6231814B2 (en) EXPOSURE DETERMINING DEVICE, IMAGING DEVICE, CONTROL METHOD, AND PROGRAM
JP4964992B2 (en) Image capturing apparatus and image recording method thereof
JP5144451B2 (en) Imaging apparatus and flash control method
JP2008072412A (en) Photographing device and method, and program
JP2012120019A (en) Camera
JP5316098B2 (en) Imaging apparatus, imaging method, and program
JP4985716B2 (en) Imaging apparatus, method for setting focus evaluation area, and program
JP2007013586A (en) Image pickup device
JP2004135184A (en) Digital camera
JP5043178B2 (en) Image blur correction apparatus and correction method thereof
JP2008022321A (en) Image shake correcting device and correcting method thereof

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110802

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120710

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120807

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121003

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20121025

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20121101

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 5129182

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20151109

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees