JP2020053960A - Imaging apparatus, control method of the same, and program - Google Patents

Imaging apparatus, control method of the same, and program Download PDF

Info

Publication number
JP2020053960A
JP2020053960A JP2019134378A JP2019134378A JP2020053960A JP 2020053960 A JP2020053960 A JP 2020053960A JP 2019134378 A JP2019134378 A JP 2019134378A JP 2019134378 A JP2019134378 A JP 2019134378A JP 2020053960 A JP2020053960 A JP 2020053960A
Authority
JP
Japan
Prior art keywords
pixel
moving object
imaging apparatus
shutter speed
subject
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019134378A
Other languages
Japanese (ja)
Other versions
JP7442989B2 (en
Inventor
靖浩 伊藤
Yasuhiro Ito
靖浩 伊藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to US16/571,954 priority Critical patent/US11165966B2/en
Publication of JP2020053960A publication Critical patent/JP2020053960A/en
Priority to US17/491,664 priority patent/US11863873B2/en
Application granted granted Critical
Publication of JP7442989B2 publication Critical patent/JP7442989B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Exposure Control For Cameras (AREA)
  • Studio Devices (AREA)

Abstract

To generate an image corresponding to a scene with a wide dynamic range without causing a sense of discomfort in a moving subject portion.SOLUTION: The imaging apparatus capable of photographing an image by controlling photographing conditions for each pixel or each area, includes: specifying means for specifying a moving body area of the image on the basis of motion information of a subject; and setting means for setting photographing conditions for each pixel or each area so as to apply the same shutter speed for pixels corresponding to the moving body area.SELECTED DRAWING: Figure 1

Description

本発明は、撮像装置において、ダイナミックレンジの広いシーンに応じた画像を生成する技術に関する。   The present invention relates to a technique for generating an image corresponding to a scene with a wide dynamic range in an imaging device.

従来、ビデオカメラなどの撮像装置を用いて動被写体を撮影する手法の一つとして、特許文献1に示される手法が提案されている。この手法では、動画映像の複数フレームから動被写体の移動速度を推定し、推定された移動速度に応じてシャッタースピードや絞りなどの撮影条件を調整する。この方法を用いることで、動被写体に対して調整された最適な撮影条件で画像を撮影することができる。   2. Description of the Related Art Conventionally, a technique disclosed in Patent Literature 1 has been proposed as one of techniques for photographing a moving subject using an imaging device such as a video camera. In this method, a moving speed of a moving subject is estimated from a plurality of frames of a moving image, and shooting conditions such as a shutter speed and an aperture are adjusted according to the estimated moving speed. By using this method, an image can be photographed under optimal photographing conditions adjusted for a moving subject.

また、画素毎に露光量を制御することにより、シーンの輝度レンジに応じたダイナミックレンジで撮影を行う手法も提案されている(特許文献2参照)。   In addition, a method has been proposed in which an exposure amount is controlled for each pixel to perform shooting with a dynamic range corresponding to a luminance range of a scene (see Patent Document 2).

特開2004−120298号公報JP 2004-120298 A 特開2010−136205号公報JP 2010-136205 A

露出は、シャッタースピードと絞り、感度で決まるが、動画撮影の場合は絞りを固定することが多いため、露出を調整するためにはシャッタースピードが調整される。しかしながら、特許文献1に記載の手法にしたがってシャッタースピードを動被写体の移動速度に応じて決定すると、ダイナミックレンジの広いシーンへの対応が難しくなる。すなわち、特許文献1に記載された手法では、シャッタースピードが遅くなった場合に、動被写体の周囲の明るい領域が白飛びしやすくなり、シャッタースピードが速くなった場合には、動被写体の周囲の暗い領域が黒潰れしやすくなる。   Exposure is determined by the shutter speed, aperture, and sensitivity. In the case of moving image shooting, the aperture is often fixed, so the shutter speed is adjusted to adjust the exposure. However, if the shutter speed is determined according to the moving speed of the moving subject according to the method described in Patent Document 1, it is difficult to handle a scene with a wide dynamic range. In other words, according to the method described in Patent Document 1, when the shutter speed is reduced, a bright area around the moving subject tends to be overexposed, and when the shutter speed is increased, the surrounding area of the moving subject is reduced. Dark areas tend to be crushed black.

一方で、特許文献2に記載された手法により動被写体を含むシーンを撮影すると、一つの動被写体の中で明るさが異なる領域が存在する場合に、その領域の画素毎に異なるシャッタースピードが設定されることがある。そうすると、同一の動被写体であっても、画素位置によって、動きによるぶれ量が異なる画像が生成されてしまう可能性がある。そのような画像の動被写体部分には、違和感が生じてしまう。   On the other hand, when a scene including a moving subject is photographed by the method described in Patent Literature 2, when an area having different brightness exists in one moving subject, a different shutter speed is set for each pixel of the area. May be done. Then, even for the same moving subject, there is a possibility that an image having a different amount of motion blur depending on the pixel position may be generated. The moving subject portion of such an image gives a sense of discomfort.

本発明はこのような問題に鑑みなされたものであり、動被写体部分に違和感を生じさせないようにして、ダイナミックレンジの広いシーンに応じた画像を生成することができる撮像装置、該撮像装置の制御方法、及びプログラムを提供することを目的とする。   The present invention has been made in view of such a problem, and has an imaging apparatus capable of generating an image corresponding to a scene with a wide dynamic range without causing a sense of incongruity in a moving subject portion, and a control of the imaging apparatus. It is intended to provide a method and a program.

本発明の一実施形態において、画素毎または領域毎に撮影条件を制御して画像を撮影することが可能な撮像装置は、被写体の動き情報に基づいて、前記画像の動体領域を特定する特定手段と、前記動体領域に対応する画素については同一のシャッタースピードが適用されるように、前記画素毎または前記領域毎の撮影条件を設定する設定手段とを有する。   In one embodiment of the present invention, an imaging device capable of controlling an imaging condition for each pixel or each area to capture an image includes a specifying unit that specifies a moving body area of the image based on motion information of a subject. And setting means for setting a shooting condition for each pixel or each region so that the same shutter speed is applied to pixels corresponding to the moving body region.

本発明によると、動被写体部分に違和感を生じさせないようにして、ダイナミックレンジの広いシーンに応じた画像を生成することができる。   According to the present invention, it is possible to generate an image corresponding to a scene having a wide dynamic range without causing a feeling of strangeness in a moving subject portion.

一実施形態における撮像装置の構成図である。FIG. 1 is a configuration diagram of an imaging device according to an embodiment. 一実施形態における明るさマップ及び動体マップを示す模式図である。It is a schematic diagram showing a brightness map and a moving object map in one embodiment. 一実施形態における撮像処理の全体的な流れを示すフローチャートである。5 is a flowchart illustrating an overall flow of an imaging process according to one embodiment. 一実施形態における撮影条件設定処理の流れを示すフローチャートである。5 is a flowchart illustrating a flow of a shooting condition setting process according to an embodiment. 一実施形態におけるISO感度設定変更処理の流れを示すフローチャートである。9 is a flowchart illustrating a flow of an ISO sensitivity setting change process according to an embodiment. 一実施形態におけるシャッタースピード設定変更処理の流れを示すフローチャートである。6 is a flowchart illustrating a flow of a shutter speed setting change process according to an embodiment. 一実施形態における撮影条件変更テーブルの例を示す図である。FIG. 4 is a diagram illustrating an example of a shooting condition change table according to one embodiment. 一実施形態における撮像処理の全体的な流れを示すフローチャートである。5 is a flowchart illustrating an overall flow of an imaging process according to one embodiment. 一実施形態における動体マップ値更新テーブルの例を示す図である。It is a figure showing an example of a moving body map value update table in one embodiment. 一実施形態における撮影条件変更テーブルの例を示す図である。FIG. 4 is a diagram illustrating an example of a shooting condition change table according to one embodiment.

[実施例1] [Example 1]

以下、添付図面を参照しながら、本発明の実施形態について詳細に説明する。なお、以下の実施形態において示す構成は一例にすぎず、本発明は図示された構成に必ずしも限定されるものではない。   Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings. Note that the configurations described in the following embodiments are merely examples, and the present invention is not necessarily limited to the illustrated configurations.

(第1の実施形態)
[概要]
実施形態の概要について説明する。本実施形態では、動体マップ取得部から与えられた動体マップと、明るさマップ取得部から与えられた明るさマップとに基づいて、センサ上の各画素の露出条件を決定する。センサには、例えば特許文献2に示されたような画素毎に撮影条件を設定できるセンサを用いる。このため、撮影条件は、画素毎にシャッタースピードと感度の設定値を含む。
(First embodiment)
[Overview]
An outline of the embodiment will be described. In the present embodiment, the exposure condition of each pixel on the sensor is determined based on the moving object map provided from the moving object map obtaining unit and the brightness map provided from the brightness map obtaining unit. As the sensor, for example, a sensor that can set an imaging condition for each pixel as shown in Patent Document 2 is used. For this reason, the shooting conditions include the set values of the shutter speed and the sensitivity for each pixel.

また、本実施形態においては、動体マップおよび明るさマップは、センサ画素数に比べて少ない画素数で構成されている。動体マップの値を参照し、動体の可能性が高い画素については、シャッタースピード設定値を被写体で同一の値に設定する。そして、明るさマップに基づいて、各画素の露出設定の変更を行う。以下、これらの処理の詳細について説明する。   Also, in the present embodiment, the moving object map and the brightness map are configured with a smaller number of pixels than the number of sensor pixels. Referring to the value of the moving object map, the shutter speed setting value is set to the same value for the subject for the pixel having a high possibility of the moving object. Then, the exposure setting of each pixel is changed based on the brightness map. Hereinafter, details of these processes will be described.

[装置構成]
図1は、一実施形態における撮像装置の構成図である。本実施形態における撮像装置は、画素毎にシャッタースピードやISO感度などの撮影条件を設定することができ、画素毎に露光量を制御して画像を撮影することができる。
[Device configuration]
FIG. 1 is a configuration diagram of an imaging device according to an embodiment. The imaging apparatus according to the present embodiment can set shooting conditions such as a shutter speed and an ISO sensitivity for each pixel, and can shoot an image by controlling an exposure amount for each pixel.

撮像部101は、被写体の光を検知するための装置である。撮像部101は、例えば、ズームレンズ、フォーカスレンズ、ぶれ補正レンズ、絞り、シャッター、光学ローパスフィルタ、iRカットフィルタ、カラーフィルタ、及び、CMOSやCCDなどのセンサなどから構成される。   The imaging unit 101 is a device for detecting light of a subject. The imaging unit 101 includes, for example, a zoom lens, a focus lens, a blur correction lens, an aperture, a shutter, an optical low-pass filter, an iR cut filter, a color filter, and a sensor such as a CMOS or a CCD.

A/D変換部102は、被写体の光の検知量をデジタル値に変換するための装置である。   The A / D converter 102 is a device for converting a light detection amount of a subject into a digital value.

信号処理部103は、上記デジタル値を信号処理し、デジタル画像を生成するための装置であり、例えば、デモザイキング処理、ホワイトバランス処理、及びガンマ処理などを行う。   The signal processing unit 103 is a device that performs signal processing on the digital value to generate a digital image, and performs, for example, demosaicing processing, white balance processing, and gamma processing.

D/A変換部104は、信号処理部103で得られたデジタル画像を表示用にアナログ変換する処理を行う。   The D / A converter 104 performs a process of converting the digital image obtained by the signal processor 103 into an analog signal for display.

エンコーダ部105は、上記デジタル画像に対してデータ圧縮処理を行うための装置であり、例えば、JPEG方式で圧縮するなどの処理を行う。   The encoder unit 105 is a device for performing a data compression process on the digital image, and performs, for example, a process such as compression by the JPEG method.

メディアインターフェース(メディアI/F)部106は、撮像装置をPCやその他のメディア(例えば、ハードディスク、メモリーカード、CFカード、SDカード、USBメモリなど)につなぐためのインターフェースである。   The media interface (media I / F) unit 106 is an interface for connecting the imaging device to a PC or other media (for example, a hard disk, a memory card, a CF card, an SD card, a USB memory, etc.).

CPU107は、上述した各構成要素の処理の全てに関わる。ROM108とRAM109は、処理に必要なプログラム、データ、作業領域などをCPU107に提供する。また、後述する処理に必要な制御プログラムがROM108に格納されている場合には、一旦RAM109に読み込まれた後に、CPU107によって実行される。   The CPU 107 is involved in all of the processing of each component described above. The ROM 108 and the RAM 109 provide the CPU 107 with programs, data, work areas, and the like necessary for processing. When a control program required for processing described later is stored in the ROM 108, the control program is temporarily read into the RAM 109 and then executed by the CPU 107.

操作部111は、ユーザからの指示を入力する装置であり、例えば、ボタンやモードダイヤル、表示部113に付随するタッチパネル等が該当する。本実施形態の場合は、HDR(ハイダイナミックレンジ)出力と標準出力との切り替えのための入力も操作部111で行う。   The operation unit 111 is a device for inputting an instruction from a user, and corresponds to, for example, a button, a mode dial, a touch panel attached to the display unit 113, and the like. In the case of the present embodiment, the input for switching between HDR (high dynamic range) output and standard output is also performed by the operation unit 111.

キャラクタジェネレーション部112は、文字やグラフィックを生成するための装置である。   The character generation unit 112 is a device for generating characters and graphics.

表示部113は、撮影画像やGUI等の画像を表示する装置であり、一般的にはCRTや液晶ディスプレイなどが用いられる。また、公知のタッチスクリーンであっても良い。その場合、タッチスクリーンによる入力については操作部111の入力として扱うことも可能である。   The display unit 113 is a device that displays a captured image or an image such as a GUI, and generally uses a CRT, a liquid crystal display, or the like. Further, a known touch screen may be used. In that case, the input through the touch screen can be treated as the input of the operation unit 111.

動体マップ取得部114は、撮像部101で取得される被写体に動きがあるかどうかを検出するための構成である。動体マップ取得部114は例えば、撮像部101から時系列に沿った撮像データを取得し、撮像データ間の輝度変化を複数画素で平均化することにより、画素毎の被写体の動き情報を生成する。輝度変化の平均値が大きい場合は、動きのある画素として動き情報が生成され、輝度変化の平均値が小さい場合は動きのない画素として動き情報が生成される。動体マップ取得部114は、このようにして生成された動き情報を画像における各画素に対して生成することで、動体マップとして保持する。動体マップの詳細については後述する。なお、動体マップは上記の方法だけでなく、他の方法を用いて取得してもよい。例えば、時系列に沿った2つの撮像データ間においては、同じ画素位置の画素値の差分を所定の閾値と比較し、差分が大きい画素は動体領域、差分が小さい画素は非動体領域とすることで、動体マップを生成することもできる。   The moving body map acquisition unit 114 has a configuration for detecting whether or not the subject acquired by the imaging unit 101 has a motion. For example, the moving object map acquisition unit 114 acquires imaging data in a time series from the imaging unit 101, and averages a luminance change between the imaging data with a plurality of pixels to generate motion information of a subject for each pixel. When the average value of the luminance change is large, the motion information is generated as a pixel having motion, and when the average value of the luminance change is small, the motion information is generated as a pixel without motion. The moving body map acquisition unit 114 generates the motion information generated in this manner for each pixel in the image, and holds the generated motion information as a moving body map. Details of the moving object map will be described later. It should be noted that the moving object map may be obtained using another method in addition to the above method. For example, a difference between pixel values at the same pixel position is compared with a predetermined threshold value between two pieces of imaging data along a time series, and a pixel having a large difference is a moving object region and a pixel having a small difference is a non-moving object region. Thus, a moving object map can be generated.

明るさマップ取得部115は、撮像部101で取得される撮像データから、画素毎に被写体の明るさを示す明るさマップを取得する。たとえば、明るさマップ取得部115は、センサから得られた画素毎の明るさ情報を複数画素で平均化し、画像の明るさマップとして保持する。明るさマップの詳細については後述する。   The brightness map acquisition unit 115 acquires a brightness map indicating the brightness of the subject for each pixel from the imaging data acquired by the imaging unit 101. For example, the brightness map obtaining unit 115 averages brightness information for each pixel obtained from the sensor by a plurality of pixels, and stores the averaged brightness information as an image brightness map. Details of the brightness map will be described later.

撮像系制御部110は、CPU107で指示された撮像系の制御を行うための装置である。本実施形態では、撮像系制御部110で設定されたシャッタースピードやISO感度などの撮影条件の設定を、撮像部101に対して画素毎に行う。また、撮像系制御部110は、フォーカスを合わせる、シャッターを開く、絞りを調節するなどの制御も行う。   The imaging system control unit 110 is a device for controlling the imaging system instructed by the CPU 107. In the present embodiment, the setting of shooting conditions such as the shutter speed and the ISO sensitivity set by the imaging system control unit 110 is performed for the imaging unit 101 for each pixel. The imaging system control unit 110 also performs control such as focusing, opening a shutter, and adjusting an aperture.

なお、撮像装置は、上記以外にも様々な構成要素を含むが、本発明の主眼ではないので、その説明は省略する。   Note that the imaging device includes various components other than the above, but is not the main subject of the present invention, and therefore description thereof is omitted.

本実施形態で説明する撮影条件設定処理は、動体マップ取得部114から動体マップを取得し、明るさマップ取得部115から明るさマップを取得し、動体マップおよび明るさマップに基づいて撮像系制御部110を制御するための撮影条件データを生成する。撮影条件設定処理は、CPU107が、ROM108に格納された制御プログラムをRAM109に読み込み、実行することで実施される。   The photographing condition setting process described in the present embodiment includes acquiring a moving object map from the moving object map acquiring unit 114, acquiring a brightness map from the brightness map acquiring unit 115, and controlling the imaging system based on the moving object map and the brightness map. The imaging condition data for controlling the unit 110 is generated. The shooting condition setting process is performed by the CPU 107 reading a control program stored in the ROM 108 into the RAM 109 and executing the control program.

[明るさマップ及び動体マップについて]
本実施形態において用いられる、明るさマップと動体マップについて、図2の模式図を参照して以下に説明する。
[About brightness map and moving object map]
The brightness map and the moving object map used in the present embodiment will be described below with reference to the schematic diagram of FIG.

図2(a)は撮影画像の例を示し、図2(b)は明るさマップの例を示し、図2(c)は動体マップの例を示す。明るさマップ及び動体マップのいずれも、撮影画像の画素数よりも少ない画素数で構成された情報である。また、明るさマップ及び動体マップは、撮影画像よりも少ないビット数で表現されており、例えば撮影画像が12ビットで表現されているのに対して、明るさマップや動体マップは8ビットで表現される。明るさマップは、値が高いほど照度が高いことを意味する。動体マップは、値が高いほどその領域の被写体に動体が含まれている確率が高いことを示す。   2A shows an example of a captured image, FIG. 2B shows an example of a brightness map, and FIG. 2C shows an example of a moving object map. Both the brightness map and the moving object map are information composed of a smaller number of pixels than the number of pixels of the captured image. Further, the brightness map and the moving object map are represented by a smaller number of bits than the captured image. For example, while the captured image is represented by 12 bits, the brightness map and the moving object map are represented by 8 bits. Is done. In the brightness map, the higher the value, the higher the illuminance. The moving object map indicates that the higher the value, the higher the probability that the moving object is included in the subject in the area.

[撮像処理の全体的な流れ]
本実施形態の撮像装置における撮像処理の全体的な流れを、図3のフローチャートを用いて説明する。ここでは、例えば操作部111により、HDR出力が指定された撮影開始の指示が入力されると、以下に説明する撮像処理が開始される。
[Overall flow of imaging processing]
The overall flow of the imaging process in the imaging apparatus according to the present embodiment will be described with reference to the flowchart in FIG. Here, for example, when an instruction to start shooting in which HDR output is specified is input by the operation unit 111, an imaging process described below is started.

なお、フローチャートで示される一連の処理は、CPU107がROM108に格納されている制御プログラムをRAM109に読み込み、実行することにより行われる。あるいはまた、フローチャートにおけるステップの一部または全部の機能をASICや電子回路等のハードウェアで実現してもよい。各処理の説明における記号「S」は、当該フローチャートにおけるステップを意味する。その他のフローチャートについても同様である。   A series of processes shown in the flowchart is performed by the CPU 107 reading a control program stored in the ROM 108 into the RAM 109 and executing the control program. Alternatively, some or all of the functions of the steps in the flowchart may be realized by hardware such as an ASIC or an electronic circuit. The symbol “S” in the description of each process means a step in the flowchart. The same applies to other flowcharts.

まず、S201において、CPU107は、明るさマップ取得部115を用いて、被写体の明るさマップを取得する。   First, in S201, the CPU 107 obtains a brightness map of a subject using the brightness map obtaining unit 115.

S202において、CPU107は、動体マップ取得部114を用いて、被写体の動体マップを取得する。   In step S202, the CPU 107 acquires a moving object map of the subject using the moving object map acquiring unit 114.

S203において、CPU107は、S201で取得した明るさマップ、およびS202で取得した動体マップをもとに、撮像部101が撮影を行う際の撮影条件を設定する。すなわち、CPU107は、撮影条件設定手段として機能する。詳細については後述する。   In S203, the CPU 107 sets shooting conditions when the imaging unit 101 performs shooting based on the brightness map obtained in S201 and the moving object map obtained in S202. That is, the CPU 107 functions as a photographing condition setting unit. Details will be described later.

S204において、CPU107は、S203で設定した撮影条件データを撮像系制御部110に送り、撮像部101を駆動させて撮影を行い、撮像データを取得する。   In step S204, the CPU 107 sends the imaging condition data set in step S203 to the imaging system control unit 110, drives the imaging unit 101 to perform imaging, and acquires imaging data.

S205において、CPU107は、S204で得られた撮像データに対して、露光量差に合わせてデジタルゲインを適用し、画像全体の輝度を合わせる。S204で得られる撮像データは、画素毎に異なる撮影条件が適用されているため、これらの撮影条件を疑似的に統一するために、各画素に対して露光量差に相当するデジタルゲインを適用する。   In step S205, the CPU 107 applies a digital gain to the image data obtained in step S204 in accordance with the exposure difference, and adjusts the luminance of the entire image. Since different imaging conditions are applied to each pixel in the imaging data obtained in S204, a digital gain corresponding to an exposure difference is applied to each pixel in order to pseudo-unify these imaging conditions. .

以上説明したように、本実施形態の撮像装置における撮像処理が実施される。   As described above, the imaging processing in the imaging device of the present embodiment is performed.

[撮影条件設定処理]
次に、図3のS203に示した撮影条件設定処理について、図4のフローチャートを用いて説明する。
[Shooting condition setting process]
Next, the shooting condition setting process shown in S203 of FIG. 3 will be described with reference to the flowchart of FIG.

S301において、CPU107は、S201で取得した動体マップをRAM109へ入力する。   In S301, the CPU 107 inputs the moving object map acquired in S201 to the RAM 109.

S302において、CPU107は、RAM109へ入力した動体マップをもとに、動体に対応する領域を動体領域として特定する。具体的には、CPU107は、動体マップのうち、値が所定の閾値以上である部分を動体部分と判定し、動体マップの値を最大値である255に更新する。一方、CPU107は、動体マップのうち、値が所定の閾値より小さい部分を非動体領域と判定し、動体マップの値を最小値である0に更新する。このように、CPU107は、動体領域特定手段として機能する。   In step S302, the CPU 107 specifies a region corresponding to the moving object as a moving object region based on the moving object map input to the RAM 109. Specifically, the CPU 107 determines that a portion of the moving object map whose value is equal to or greater than a predetermined threshold value is a moving object portion, and updates the value of the moving object map to the maximum value of 255. On the other hand, the CPU 107 determines that the portion of the moving object map whose value is smaller than the predetermined threshold value is the non-moving object region, and updates the value of the moving object map to 0 which is the minimum value. As described above, the CPU 107 functions as a moving body region specifying unit.

S303において、CPU107は、S202で取得した明るさマップをRAM109へ入力する。   In S303, the CPU 107 inputs the brightness map acquired in S202 to the RAM 109.

S304において、CPU107は、撮影時の基本露出量を決定する。基本露出量は、例えばユーザが指定したシャッタースピード、ISO感度、絞り値を基に決定される。なお、基本露出量は、明るさマップ取得部115から得られた明るさマップを参照して平均明るさを露出量に変換して決定してもよいし、他の方法で決定してもよい。   In S304, the CPU 107 determines a basic exposure amount at the time of shooting. The basic exposure amount is determined based on, for example, the shutter speed, ISO sensitivity, and aperture value specified by the user. Note that the basic exposure amount may be determined by converting the average brightness into an exposure amount with reference to the brightness map obtained from the brightness map acquisition unit 115, or may be determined by another method. .

S305において、CPU107は、撮影条件設定画素の位置を初期化する。例えば、CPU107は、左上の座標を初期値として設定する。以降、各画素の撮影条件設定処理は、右下へ向かって順次行われる。   In S305, the CPU 107 initializes the position of the shooting condition setting pixel. For example, the CPU 107 sets upper left coordinates as initial values. After that, the shooting condition setting process for each pixel is sequentially performed toward the lower right.

S306において、CPU107は、撮影条件設定処理が行われる対象画素の位置(すなわち、処理対象の画素位置)に対応する動体マップの値が、動体部分を示す値(すなわち、255)かどうかを判定する。動体部分であると判定された場合はS307へ進み、そうでない場合はS308へ進む。   In S306, the CPU 107 determines whether or not the value of the moving object map corresponding to the position of the target pixel on which the shooting condition setting process is performed (that is, the pixel position of the processing target) is a value indicating the moving object portion (that is, 255). . If it is determined that it is a moving body part, the process proceeds to S307; otherwise, the process proceeds to S308.

S307において、CPU107は、処理対象の画素位置に対応する照度分布マップの値を参照し、ISO感度を変更した撮影条件を設定する。すなわち、動体部分については、シャッタースピードを変更せずに、ISO感度を変更する。したがって、一つの動体の中で明るさが異なる領域が存在する場合でも、同一のシャッタースピードが適用されるので、動体がぶれたとしてもそのぶれ量は同じになり、違和感を生じさせないようにすることができる。詳細は後述する。   In S307, the CPU 107 refers to the value of the illuminance distribution map corresponding to the pixel position to be processed, and sets photographing conditions with the changed ISO sensitivity. That is, the ISO sensitivity of the moving body portion is changed without changing the shutter speed. Therefore, even when there is an area with different brightness in one moving object, the same shutter speed is applied. be able to. Details will be described later.

S308において、CPU107は、処理対象の画素位置に対応する照度分布マップの値を参照し、シャッタースピードを変更した撮影条件を設定する。すなわち、非動体部分については、ISO感度を変更せずに、シャッタースピードを変更する。詳細は後述する。   In step S308, the CPU 107 refers to the value of the illuminance distribution map corresponding to the pixel position to be processed, and sets an imaging condition with a changed shutter speed. That is, for the non-moving part, the shutter speed is changed without changing the ISO sensitivity. Details will be described later.

S309において、CPU107は、撮影条件設定処理が全画素で終了したか判定する。終了していれば処理を終了し、そうでなければS310へ進む。   In step S309, the CPU 107 determines whether the shooting condition setting processing has been completed for all pixels. If the processing has been completed, the processing is completed; otherwise, the processing proceeds to S310.

S310において、CPU107は、処理対象の画素位置を次の画素位置に移行する。一つの画素に対する処理が終わると、一つ右の画素へ移動する。画素が右端部にある場合には、一つ下の行の左端部の画素へ移動する。   In S310, the CPU 107 shifts the pixel position to be processed to the next pixel position. When the process for one pixel is completed, the process moves to the right pixel. If the pixel is at the right end, it moves to the pixel at the left end of the next lower row.

[ISO感度設定変更処理]
次に、図4のS307に示したISO感度設定変更処理について、図5のフローチャートを用いて説明する。
[ISO sensitivity setting change processing]
Next, the ISO sensitivity setting change processing shown in S307 of FIG. 4 will be described with reference to the flowchart of FIG.

まず、S401において、CPU107は、RAM109に保存されている明るさマップを参照する。   First, in S401, the CPU 107 refers to the brightness map stored in the RAM 109.

S402において、CPU107は、処理対象の画素位置に対応する明るさマップの値を参照し、図4のS304で決定した基本露出量との明るさの差から、ゲイン変更量を算出する。具体的には、CPU107は、以下の式(1)を用いてゲイン変更量を求めることができる。
G=round(L(X,Y)/N(map)) (1)
In S402, the CPU 107 refers to the value of the brightness map corresponding to the pixel position to be processed, and calculates the gain change amount from the difference in brightness from the basic exposure amount determined in S304 in FIG. Specifically, the CPU 107 can obtain the gain change amount using the following equation (1).
G = round (L (X, Y) / N (map)) (1)

ここで、Gはゲイン変更量、L(X,Y)は対象画素と同一の領域に属する明るさマップの値、N(map)は、図7(a)に示す、ISO感度設定変更量をまとめた撮影条件変更テーブルの要素数を示す。撮影条件変更テーブルについては後述する。   Here, G is the gain change amount, L (X, Y) is the value of the brightness map belonging to the same area as the target pixel, and N (map) is the ISO sensitivity setting change amount shown in FIG. Shows the number of elements in the combined shooting condition change table. The shooting condition change table will be described later.

S403において、CPU107は、S402で求めたゲイン変更量をもとに、図7(a)に示す撮影条件変更テーブルを参照し、撮影条件を決定する。具体的には、式(1)を用いて算出されたゲイン変更量Gの値から、撮影条件変更テーブルの明るさマップ値の範囲を参照し、該当するISO感度設定変更量を、S304で決定したISO感度に対して加える。例えば、式(1)で求めたゲイン変更量Gが75であった場合、撮影条件変更テーブルを参照して、S304で決定したISO感度を1段分上げるという設定変更を行う。   In step S403, the CPU 107 determines a shooting condition based on the gain change amount obtained in step S402 with reference to the shooting condition change table shown in FIG. More specifically, the corresponding ISO sensitivity setting change amount is determined in S304 from the value of the gain change amount G calculated using Expression (1) with reference to the range of the brightness map value in the shooting condition change table. To the ISO sensitivity. For example, when the gain change amount G obtained by Expression (1) is 75, the setting change is performed by referring to the shooting condition change table to increase the ISO sensitivity determined in S304 by one step.

[シャッタースピード設定変更処理]
次に、図4のS308に示したシャッタースピード設定変更処理について、図6のフローチャートを用いて説明する。
[Shutter speed setting change processing]
Next, the shutter speed setting change processing shown in S308 of FIG. 4 will be described with reference to the flowchart of FIG.

まず、S501において、CPU107は、RAM109に保存されている明るさマップを参照する。   First, in S501, the CPU 107 refers to the brightness map stored in the RAM 109.

S502において、CPU107は、処理対象の画素位置に対応する明るさマップの値を参照し、図4のS304で決定した基本露出量との明るさの差から、ゲイン変更量を算出する。具体的には、CPU107は、以下の式(2)を用いてゲイン変更量を求めることができる。
G‘=round(L(X,Y)/N‘(map)) (2)
In S502, the CPU 107 refers to the value of the brightness map corresponding to the pixel position to be processed, and calculates the gain change amount from the difference in brightness from the basic exposure amount determined in S304 in FIG. Specifically, the CPU 107 can obtain the gain change amount using the following equation (2).
G ′ = round (L (X, Y) / N ′ (map)) (2)

ここで、G‘はゲイン変更量、L(X,Y)は対象画素と同一の領域に属する明るさマップの値、N‘(map)は、図7(b)に示す撮影条件変更テーブルの要素数を示す。撮影条件変更テーブルについては後述する。   Here, G ′ is a gain change amount, L (X, Y) is a value of a brightness map belonging to the same region as the target pixel, and N ′ (map) is a value in the shooting condition change table shown in FIG. Indicates the number of elements. The shooting condition change table will be described later.

S403において、CPU107は、S502で求めたゲイン変更量をもとに、図7(b)に示す撮影条件変更テーブルを参照し、撮影条件を決定する。具体的には、式(2)を用いて算出されたゲイン変更量G‘の値から、撮影条件変更テーブルの明るさマップ値の範囲を参照し、該当するシャッタースピード変更量を、S304で決定したシャッタースピードに対して加える。例えば、式(2)で求めたゲイン変更量G’が190であった場合、撮影条件変更テーブルを参照して、S304で決定したシャッタースピードを1段分短くするという設定変更を行う。   In step S403, the CPU 107 determines a shooting condition based on the gain change amount obtained in step S502 with reference to the shooting condition change table illustrated in FIG. 7B. Specifically, from the value of the gain change amount G ′ calculated using Expression (2), the corresponding shutter speed change amount is determined in S304 by referring to the range of the brightness map value in the shooting condition change table. Added to the shutter speed. For example, when the gain change amount G 'obtained by the equation (2) is 190, the setting change is performed by referring to the photographing condition change table to shorten the shutter speed determined in S304 by one step.

[撮影条件変更テーブル]
図7は、図5のS402や図6のS502で用いた撮影条件変更テーブルの例を示す。図7(a)は、ISO感度を変更する場合の撮影条件変更テーブルを示し、明るさマップ値とISO値との関係が示されている。図7(b)は、シャッタースピードを変更する場合の撮影条件変更テーブルを示し、シャッタースピード(Tv)の値と明るさマップ値との関係が示されている。
[Shooting condition change table]
FIG. 7 shows an example of the photographing condition change table used in S402 of FIG. 5 and S502 of FIG. FIG. 7A shows a photographing condition change table when the ISO sensitivity is changed, and shows the relationship between the brightness map value and the ISO value. FIG. 7B shows a shooting condition change table when the shutter speed is changed, and shows the relationship between the value of the shutter speed (Tv) and the brightness map value.

以上説明したように、本実施形態によれば、動被写体部分に違和感を生じさせないようにして、ダイナミックレンジの広いシーンに応じた画像を生成することができる。   As described above, according to the present embodiment, it is possible to generate an image corresponding to a scene having a wide dynamic range without causing a sense of incongruity in a moving subject portion.

(第2の実施形態)
次に、本発明の第2の実施形態について説明する。本実施形態では、動物体の露光量補正をシャッタースピード、およびゲインの両方を用いて行う。これは、被写体となる動物体の速さに応じて露光量補正を変化させるとき、動物体の速さが非常に速い場合や、動物体が非常に明るい、または暗い場合等、ISO感度による補正だけでは動体部分の露光量が十分に調整できない場合があるからである。
(Second embodiment)
Next, a second embodiment of the present invention will be described. In the present embodiment, the exposure of the moving object is corrected using both the shutter speed and the gain. This is because when the exposure correction is changed according to the speed of the moving object, the speed of the moving object is extremely high, or the speed of the moving object is very bright or dark. This is because there is a case where the exposure amount of the moving body portion cannot be sufficiently adjusted by only the above.

まず、本実施形態における撮影処理の全体的な流れを、図8のフローチャートを用いて説明する。また、図9は、本実施形態における動体マップ値更新テーブルの例を示し、図10は、本実施形態における撮影条件変更テーブルの例を示す。なお、本実施形態の説明では、第1の実施形態と異なる点を主に説明する。   First, the overall flow of the photographing process according to the present embodiment will be described with reference to the flowchart in FIG. FIG. 9 shows an example of a moving object map value update table in the present embodiment, and FIG. 10 shows an example of a shooting condition change table in the present embodiment. In the description of the present embodiment, points different from the first embodiment will be mainly described.

本実施形態では、動体マップのグループ化の方法、ゲイン振り条件の設定方法、及びシャッタースピードの設定方法が、第1の実施形態と異なる。   In the present embodiment, a method for grouping moving object maps, a method for setting gain swing conditions, and a method for setting a shutter speed are different from those in the first embodiment.

S602において、CPU107は、RAM109へ入力した動体マップをもとに、動体に対応する領域を動体領域として特定する。具体的には、CPU107は、動体マップのうち、図9に示す表のように、動体マップの値が所定の値以上である部分を動体部分と判定し、動体マップの値を図9の表に基づき更新する。例えば、動体マップの値が150であった場合は、動体マップの値を128へと更新する。また、CPU107は、動体マップのうち、値が所定の値より小さい部分を非動体領域と判定し、動体マップの値を最小値である0に更新する。なお、この値の区分は図9に示す値だけでなく、他の値で区分分けしてもよい。   In S602, the CPU 107 specifies a region corresponding to the moving object as a moving object region based on the moving object map input to the RAM 109. Specifically, the CPU 107 determines a portion of the moving object map in which the value of the moving object map is equal to or more than a predetermined value as a moving object portion, as shown in the table of FIG. Update based on For example, if the value of the moving object map is 150, the value of the moving object map is updated to 128. In addition, the CPU 107 determines a portion of the moving object map having a value smaller than the predetermined value as the non-moving object region, and updates the value of the moving object map to 0 which is the minimum value. Note that this value may be divided not only by the values shown in FIG. 9 but also by other values.

S607において、CPU107は、処理対象の画素位置に対応する照度分布マップの値を参照し、同じ動体マップ値を持つ画素の平均照度を算出する。そして、図10(a)の表に従い、同じ動体マップ値を持つ画素のシャッタースピードを変更する。あわせて、上記同じ動体マップ値を持つ画素の照度マップの値を修正する。例えば、ある動体画素の照度が100で、その動体部分の平均照度が50であった場合は、動体部分のシャッタースピードを1段分長くし、照度マップの値から50を引いて50へと変更する。   In step S607, the CPU 107 calculates the average illuminance of the pixels having the same moving object map value with reference to the value of the illuminance distribution map corresponding to the pixel position to be processed. Then, the shutter speed of the pixels having the same moving object map value is changed according to the table of FIG. In addition, the value of the illuminance map of the pixel having the same moving object map value is corrected. For example, when the illuminance of a certain moving object pixel is 100 and the average illuminance of the moving object portion is 50, the shutter speed of the moving object portion is increased by one step, and 50 is subtracted from the value of the illuminance map and changed to 50. I do.

S611において、CPU107は、図10(b)の表を参照して、動体部分について、ゲインを変更した撮影条件を設定する。これらの動作により、同じ速度で動くと判定された動体部分については、シャッタースピードを同一の値にし、併せて被写体の照度に応じてゲインを変更する。したがって、動体の中で明るさが異なる領域が存在する場合でも、動体には同一のシャッタースピードが適用される。このため、動体がぶれたとしてもそのぶれ量は同じになり、違和感を生じさせないようにすることができる。また、全体的に暗い動体や、全体的に明るい動体などに対して、第1の実施形態のようにゲインによる変更のみで対応しようとした場合、動体部分に対して大きなゲインを適用する必要が出てくる。本実施形態においては、このような場合でも、動体全体に対するシャッタースピードを変更することで、動体のぶれ量を同じにすることができる。併せて、動体の照度が異なる領域が存在しても、ゲインの変更により適切な露光条件を設定することができる。   In step S611, the CPU 107 refers to the table of FIG. With these operations, the shutter speed is set to the same value for the moving body portion determined to move at the same speed, and the gain is changed according to the illuminance of the subject. Therefore, the same shutter speed is applied to the moving object even when there are regions having different brightness in the moving object. For this reason, even if the moving object is shaken, the amount of the shake is the same, so that it is possible to prevent the user from feeling uncomfortable. Further, when it is attempted to deal with a moving object that is entirely dark or a moving object that is entirely bright by changing only the gain as in the first embodiment, it is necessary to apply a large gain to the moving object portion. Come out. In the present embodiment, even in such a case, by changing the shutter speed for the entire moving body, it is possible to make the amount of shake of the moving body the same. In addition, even if there is a region where the illuminance of the moving object is different, an appropriate exposure condition can be set by changing the gain.

以上説明したように、本実施形態によれば、動体領域の露光量調整がISO感度だけでは十分でなかった場合にも、露光量調整を行った画像を得ることができる。   As described above, according to the present embodiment, even when the exposure amount adjustment of the moving body region is not sufficient only by the ISO sensitivity, it is possible to obtain the image in which the exposure amount adjustment is performed.

なお、本発明は、複数枚合成を行う画像に対しても適用できる。その場合、動体を含む撮影時には、複数枚の画像が同一のシャッタースピードになる。これらの画像を合成するため、動体部分のぶれの違いがなくなり、違和感の少ない画像を得ることができる。   Note that the present invention can be applied to an image on which a plurality of images are combined. In this case, when capturing a moving object, a plurality of images have the same shutter speed. Since these images are combined, there is no difference in the movement of the moving body portion, and an image with less discomfort can be obtained.

また、上述の実施形態では、画素毎に撮影条件を設定できるセンサを用いる場合を例にしたが、領域毎に撮影条件を設定できるセンサを用いる場合にも適用できる。その場合は、動体である被写体を含む領域に対しては、同じシャッタースピードが設定されるように撮影条件を設定する。   Further, in the above-described embodiment, the case where the sensor that can set the shooting condition for each pixel is used as an example, but the present invention is also applicable to the case where the sensor that can set the shooting condition for each region is used. In that case, shooting conditions are set so that the same shutter speed is set for a region including a moving subject.

(その他の実施形態)
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
(Other embodiments)
The present invention supplies a program for realizing one or more functions of the above-described embodiments to a system or an apparatus via a network or a storage medium, and one or more processors in a computer of the system or the apparatus read and execute the program. This processing can be realized. Further, it can also be realized by a circuit (for example, an ASIC) that realizes one or more functions.

101 撮像部
102 A/D変換部
103 信号処理部
104 D/A変換部
105 エンコーダ部
106 メディアI/F部
107 CPU
108 ROM
109 RAM
110 撮像系制御部
111 操作部
112 キャラクタジェネレーション部
113 表示部
114 動体マップ取得部
115 明るさマップ取得部
101 imaging unit 102 A / D conversion unit 103 signal processing unit 104 D / A conversion unit 105 encoder unit 106 media I / F unit 107 CPU
108 ROM
109 RAM
110 imaging system control unit 111 operation unit 112 character generation unit 113 display unit 114 moving object map acquisition unit 115 brightness map acquisition unit

Claims (20)

画素毎または領域毎に撮影条件を制御して画像を撮影することが可能な撮像装置であって、
被写体の動き情報に基づいて、前記画像の動体領域を特定する特定手段と、
前記動体領域に対応する画素については同一のシャッタースピードが適用されるように、前記画素毎または前記領域毎の撮影条件を設定する設定手段と
を有することを特徴とする撮像装置。
An imaging device capable of shooting an image by controlling shooting conditions for each pixel or each region,
Specifying means for specifying a moving object region of the image based on motion information of the subject;
An imaging apparatus comprising: a setting unit configured to set a photographing condition for each pixel or each region so that the same shutter speed is applied to a pixel corresponding to the moving body region.
前記被写体の明るさ情報を取得する取得手段をさらに有し、
前記設定手段は、前記明るさ情報に基づいて、前記画素毎または前記領域毎の撮影条件を設定することを特徴とする請求項1に記載の撮像装置。
Further comprising an acquisition unit for acquiring the brightness information of the subject,
2. The imaging apparatus according to claim 1, wherein the setting unit sets a shooting condition for each pixel or each area based on the brightness information.
前記設定手段は、前記動体領域においては、前記シャッタースピードは同一にし、前記明るさ情報に応じたISO感度を設定し、非動体領域においては、前記ISO感度を同一にし、前記明るさ情報に応じたシャッタースピードに設定することを特徴とする請求項2に記載の撮像装置。   The setting unit sets the shutter speed to be the same in the moving object region, sets the ISO sensitivity according to the brightness information, and sets the ISO sensitivity to the same in the non-moving object region, and sets the ISO sensitivity according to the brightness information. The imaging apparatus according to claim 2, wherein the shutter speed is set to a predetermined shutter speed. 前記設定手段は、前記画像を撮影する際の基本露出量を決定し、前記基本露出量に応じた撮影条件を設定した後、前記動体領域に対応する画素のシャッタースピードを変更せずに、ISO感度を決定することを特徴とする請求項1に記載の撮像装置。   The setting means determines a basic exposure amount at the time of shooting the image, sets shooting conditions in accordance with the basic exposure amount, and then changes the ISO speed without changing a shutter speed of a pixel corresponding to the moving object region. The imaging device according to claim 1, wherein the sensitivity is determined. 前記被写体の明るさ情報を取得する取得手段をさらに有し、
前記設定手段は、前記ISO感度の変更量を、前記被写体の明るさ情報と前記基本露出量との差に基づいて決定することを特徴とする請求項4に記載の撮像装置。
Further comprising an acquisition unit for acquiring the brightness information of the subject,
The imaging apparatus according to claim 4, wherein the setting unit determines the change amount of the ISO sensitivity based on a difference between brightness information of the subject and the basic exposure amount.
前記設定手段は、前記画像を撮影する際の基本露出量を決定し、前記基本露出量に応じた撮影条件を設定した後、前記動体領域ではないと判定された非動体領域に対応する画素のISO感度を変更せずに、シャッタースピードを決定することを特徴とする請求項1に記載の撮像装置。   The setting unit determines a basic exposure amount at the time of shooting the image, sets shooting conditions according to the basic exposure amount, and sets a pixel corresponding to a non-moving object region determined not to be the moving object region. The imaging apparatus according to claim 1, wherein the shutter speed is determined without changing the ISO sensitivity. 前記被写体の明るさ情報を取得する取得手段をさらに有し、
前記設定手段は、前記シャッタースピードの変更量を、前記被写体の明るさ情報と前記基本露出量との差に基づいて決定することを特徴とする請求項6に記載の撮像装置。
Further comprising an acquisition unit for acquiring the brightness information of the subject,
The imaging apparatus according to claim 6, wherein the setting unit determines the change amount of the shutter speed based on a difference between brightness information of the subject and the basic exposure amount.
前記動き情報は、時系列に沿った撮像データ間の輝度変化を複数画素で平均化して生成された動体マップであることを特徴とする請求項1乃至7のいずれか1項に記載の撮像装置。   The imaging apparatus according to any one of claims 1 to 7, wherein the motion information is a moving object map generated by averaging a luminance change between imaging data along a time series by a plurality of pixels. . 前記明るさ情報は、画素毎の明るさを複数画素で平均化して生成された明るさマップであることを特徴とする請求項2、3、5、及び7のいずれか1項に記載の撮像装置。   The imaging apparatus according to any one of claims 2, 3, 5, and 7, wherein the brightness information is a brightness map generated by averaging the brightness of each pixel with a plurality of pixels. apparatus. 前記被写体の明るさ情報を取得する取得手段と、
前記動体領域と前記明るさ情報に基づいて、同じ被写体の平均照度を算出する算出手段とをさらに有し、
前記設定手段は、前記平均照度に基づいて、各動体領域における各画素のシャッタースピードを設定することを特徴とする請求項1に記載の撮像装置。
Acquiring means for acquiring brightness information of the subject;
A calculating unit that calculates an average illuminance of the same subject based on the moving body region and the brightness information,
The imaging apparatus according to claim 1, wherein the setting unit sets a shutter speed of each pixel in each moving object region based on the average illuminance.
前記設定手段は、前記動体領域における画素のうち、前記平均照度よりも明るい照度の画素がある場合は、前記動体領域のシャッタースピードが長くなるように制御すること特徴とする請求項10に記載の撮像装置。   The method according to claim 10, wherein, when there is a pixel having an illuminance brighter than the average illuminance among the pixels in the moving body region, the setting unit controls the shutter speed of the moving body region to be longer. Imaging device. 前記被写体の明るさ情報は、照度マップであることを特徴とする請求項10または11に記載の撮像装置。   The imaging apparatus according to claim 10, wherein the brightness information of the subject is an illuminance map. 前記取得手段は、前記照度マップにおける前記動体領域における画素のうち、前記平均照度よりも明るい照度の画素の値を、前記平均照度により更新することを特徴とする請求項12に記載の撮像装置。   13. The imaging apparatus according to claim 12, wherein the acquisition unit updates a value of a pixel having an illuminance that is brighter than the average illuminance among pixels in the moving object region in the illuminance map, based on the average illuminance. 前記設定手段は、同じ速度で動くと判定された動体部分については、前記シャッタースピードを同一の値に設定することを特徴とする請求項1に記載の撮像装置。   The imaging apparatus according to claim 1, wherein the setting unit sets the shutter speed to the same value for a moving body portion determined to move at the same speed. 前記特定手段は、前記動き情報に基づいて、動きの大きさに応じて前記動体領域を特定することを特徴とする請求項1に記載の撮像装置。   The imaging apparatus according to claim 1, wherein the specifying unit specifies the moving body region according to a magnitude of a motion based on the motion information. 前記設定手段は、
前記画像を撮影する際の基本露出量を決定し、
前記特定手段が前記動体領域を特定するまでは、全ての画素に対して前記基本露出量に応じた撮影条件を設定することを特徴とする請求項1に記載の撮像装置。
The setting means,
Determine the basic exposure amount when shooting the image,
2. The imaging apparatus according to claim 1, wherein a shooting condition according to the basic exposure amount is set for all pixels until the specifying unit specifies the moving body region. 3.
前記撮影条件は、ISO感度とシャッタースピードであることを特徴とする請求項1に記載の撮像装置。   The imaging apparatus according to claim 1, wherein the imaging conditions are an ISO sensitivity and a shutter speed. 前記被写体の明るさ情報を取得する取得手段をさらに有し、
前記設定手段は、非動体領域に対応する画素に対しては、前記明るさ情報に応じて少なくとも一部の画素で異なるシャッタースピードが設定されることを特徴とする請求項1に記載の撮像装置。
Further comprising an acquisition unit for acquiring the brightness information of the subject,
2. The imaging apparatus according to claim 1, wherein the setting unit sets different shutter speeds for at least some of the pixels corresponding to the non-moving object region in accordance with the brightness information. .
コンピュータを、請求項1乃至18のいずれか1項に記載の撮像装置として機能させるためのプログラム。   A program for causing a computer to function as the imaging device according to any one of claims 1 to 18. 画素毎または領域毎に撮影条件を制御して画像を撮影することが可能な撮像装置の制御方法であって、
被写体の動き情報に基づいて、前記画像の動体領域を特定する特定工程と、
前記動体領域に対応する画素については同一のシャッタースピードが適用されるように、前記画素毎または前記領域毎の撮影条件を設定する設定工程と
を含むことを特徴とする制御方法。
A control method of an imaging device capable of shooting an image by controlling shooting conditions for each pixel or each region,
A specifying step of specifying a moving body region of the image based on movement information of the subject;
A setting step of setting shooting conditions for each pixel or each region so that the same shutter speed is applied to pixels corresponding to the moving body region.
JP2019134378A 2018-09-19 2019-07-22 Imaging device, control method for the imaging device, and program Active JP7442989B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US16/571,954 US11165966B2 (en) 2018-09-19 2019-09-16 Image capturing apparatus, method of controlling image capturing apparatus, and storage medium
US17/491,664 US11863873B2 (en) 2018-09-19 2021-10-01 Image capturing apparatus, method of controlling image capturing apparatus, and storage medium

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018175131 2018-09-19
JP2018175131 2018-09-19

Publications (2)

Publication Number Publication Date
JP2020053960A true JP2020053960A (en) 2020-04-02
JP7442989B2 JP7442989B2 (en) 2024-03-05

Family

ID=69994155

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019134378A Active JP7442989B2 (en) 2018-09-19 2019-07-22 Imaging device, control method for the imaging device, and program

Country Status (1)

Country Link
JP (1) JP7442989B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021192884A1 (en) 2020-03-25 2021-09-30 ヤンマーパワーテクノロジー株式会社 Heat pump

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012235332A (en) * 2011-05-02 2012-11-29 Sony Corp Imaging apparatus, imaging apparatus control method and program
JP2013255080A (en) * 2012-06-06 2013-12-19 Casio Comput Co Ltd Imaging apparatus, synthesized image generating method and program
WO2014192152A1 (en) * 2013-05-31 2014-12-04 株式会社ニコン Electronic device and control program

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012235332A (en) * 2011-05-02 2012-11-29 Sony Corp Imaging apparatus, imaging apparatus control method and program
JP2013255080A (en) * 2012-06-06 2013-12-19 Casio Comput Co Ltd Imaging apparatus, synthesized image generating method and program
WO2014192152A1 (en) * 2013-05-31 2014-12-04 株式会社ニコン Electronic device and control program

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021192884A1 (en) 2020-03-25 2021-09-30 ヤンマーパワーテクノロジー株式会社 Heat pump

Also Published As

Publication number Publication date
JP7442989B2 (en) 2024-03-05

Similar Documents

Publication Publication Date Title
JP6911202B2 (en) Imaging control method and imaging device
KR101692401B1 (en) Image process method and apparatus
JP6343200B2 (en) Imaging apparatus, control method therefor, and program
JP5624809B2 (en) Image signal processing device
US8587671B2 (en) Digital image processing apparatus, an image processing method, and a recording medium storing the image processing method for obtaining an out-of-focus image by using a plurality of images
JP6720881B2 (en) Image processing apparatus and image processing method
JP2018207413A (en) Imaging apparatus
US11863873B2 (en) Image capturing apparatus, method of controlling image capturing apparatus, and storage medium
JP6541501B2 (en) IMAGE PROCESSING APPARATUS, IMAGING APPARATUS, AND IMAGE PROCESSING METHOD
JP6108680B2 (en) Imaging apparatus, control method therefor, program, and storage medium
CN108513062B (en) Terminal control method and device, readable storage medium and computer equipment
JP2009200743A (en) Image processor, image processing method, image processing program and imaging apparatus
EP4199528A1 (en) Image processing apparatus, image capture apparatus, and image processing method
JP7442989B2 (en) Imaging device, control method for the imaging device, and program
JP2010183460A (en) Image capturing apparatus and method of controlling the same
JP2014232994A (en) Image processing apparatus and method, and imaging apparatus
JP6157274B2 (en) Imaging apparatus, information processing method, and program
US9288461B2 (en) Apparatus and method for processing image, and computer-readable storage medium
JP2016208118A (en) Image processing apparatus, image processing method, and program
JP2021164112A (en) Imaging apparatus, image processing device, and image processing program
JP2017183983A (en) Imaging apparatus, control method and control program of the same
JP5338248B2 (en) Image processing apparatus, electronic camera, and image processing program
JP6786346B2 (en) Image processing equipment, image processing methods, and programs
JP2018037747A (en) Information processing device, and control method and program of same
JP2022093912A (en) Imaging device, imaging method, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220720

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230327

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230411

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230609

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230926

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231127

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240123

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240221

R151 Written notification of patent or utility model registration

Ref document number: 7442989

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151