JP7442989B2 - 撮像装置、該撮像装置の制御方法、及びプログラム - Google Patents

撮像装置、該撮像装置の制御方法、及びプログラム Download PDF

Info

Publication number
JP7442989B2
JP7442989B2 JP2019134378A JP2019134378A JP7442989B2 JP 7442989 B2 JP7442989 B2 JP 7442989B2 JP 2019134378 A JP2019134378 A JP 2019134378A JP 2019134378 A JP2019134378 A JP 2019134378A JP 7442989 B2 JP7442989 B2 JP 7442989B2
Authority
JP
Japan
Prior art keywords
moving object
pixel
imaging device
shutter speed
brightness information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019134378A
Other languages
English (en)
Other versions
JP2020053960A (ja
Inventor
靖浩 伊藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to US16/571,954 priority Critical patent/US11165966B2/en
Publication of JP2020053960A publication Critical patent/JP2020053960A/ja
Priority to US17/491,664 priority patent/US11863873B2/en
Application granted granted Critical
Publication of JP7442989B2 publication Critical patent/JP7442989B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Exposure Control For Cameras (AREA)
  • Studio Devices (AREA)

Description

本発明は、撮像装置において、ダイナミックレンジの広いシーンに応じた画像を生成する技術に関する。
従来、ビデオカメラなどの撮像装置を用いて動被写体を撮影する手法の一つとして、特許文献1に示される手法が提案されている。この手法では、動画映像の複数フレームから動被写体の移動速度を推定し、推定された移動速度に応じてシャッタースピードや絞りなどの撮影条件を調整する。この方法を用いることで、動被写体に対して調整された最適な撮影条件で画像を撮影することができる。
また、画素毎に露光量を制御することにより、シーンの輝度レンジに応じたダイナミックレンジで撮影を行う手法も提案されている(特許文献2参照)。
特開2004-120298号公報 特開2010-136205号公報
露出は、シャッタースピードと絞り、感度で決まるが、動画撮影の場合は絞りを固定することが多いため、露出を調整するためにはシャッタースピードが調整される。しかしながら、特許文献1に記載の手法にしたがってシャッタースピードを動被写体の移動速度に応じて決定すると、ダイナミックレンジの広いシーンへの対応が難しくなる。すなわち、特許文献1に記載された手法では、シャッタースピードが遅くなった場合に、動被写体の周囲の明るい領域が白飛びしやすくなり、シャッタースピードが速くなった場合には、動被写体の周囲の暗い領域が黒潰れしやすくなる。
一方で、特許文献2に記載された手法により動被写体を含むシーンを撮影すると、一つの動被写体の中で明るさが異なる領域が存在する場合に、その領域の画素毎に異なるシャッタースピードが設定されることがある。そうすると、同一の動被写体であっても、画素位置によって、動きによるぶれ量が異なる画像が生成されてしまう可能性がある。そのような画像の動被写体部分には、違和感が生じてしまう。
本発明はこのような問題に鑑みなされたものであり、動被写体部分に違和感を生じさせないようにして、ダイナミックレンジの広いシーンに応じた画像を生成することができる撮像装置、該撮像装置の制御方法、及びプログラムを提供することを目的とする。
本発明の一実施形態において、本発明の一実施形態において、画素毎または領域毎に撮影条件を制御して画像を撮影することが可能な撮像装置は、被写体の動き情報に基づいて、前記画像の動体領域を特定する特定手段と、前記被写体の明るさ情報を取得する取得手段と、前記動体領域に対応する画素については同一のシャッタースピードが適用され、かつ、前記明るさ情報に応じたISO感度が適用されるように画素毎または領域毎に前記撮影条件を設定し、前記動体領域でない非動体領域に対応する画素については、同一のISO感度が適用され、かつ、前記明るさ情報に応じたシャッタースピードが適用されるように画素毎または領域毎に前記撮影条件を設定する設定手段と、を有することを特徴とする。
本発明によると、動被写体部分に違和感を生じさせないようにして、ダイナミックレンジの広いシーンに応じた画像を生成することができる。
一実施形態における撮像装置の構成図である。 一実施形態における明るさマップ及び動体マップを示す模式図である。 一実施形態における撮像処理の全体的な流れを示すフローチャートである。 一実施形態における撮影条件設定処理の流れを示すフローチャートである。 一実施形態におけるISO感度設定変更処理の流れを示すフローチャートである。 一実施形態におけるシャッタースピード設定変更処理の流れを示すフローチャートである。 一実施形態における撮影条件変更テーブルの例を示す図である。 一実施形態における撮像処理の全体的な流れを示すフローチャートである。 一実施形態における動体マップ値更新テーブルの例を示す図である。 一実施形態における撮影条件変更テーブルの例を示す図である。
[実施例1]
以下、添付図面を参照しながら、本発明の実施形態について詳細に説明する。なお、以下の実施形態において示す構成は一例にすぎず、本発明は図示された構成に必ずしも限定されるものではない。
(第1の実施形態)
[概要]
実施形態の概要について説明する。本実施形態では、動体マップ取得部から与えられた動体マップと、明るさマップ取得部から与えられた明るさマップとに基づいて、センサ上の各画素の露出条件を決定する。センサには、例えば特許文献2に示されたような画素毎に撮影条件を設定できるセンサを用いる。このため、撮影条件は、画素毎にシャッタースピードと感度の設定値を含む。
また、本実施形態においては、動体マップおよび明るさマップは、センサ画素数に比べて少ない画素数で構成されている。動体マップの値を参照し、動体の可能性が高い画素については、シャッタースピード設定値を被写体で同一の値に設定する。そして、明るさマップに基づいて、各画素の露出設定の変更を行う。以下、これらの処理の詳細について説明する。
[装置構成]
図1は、一実施形態における撮像装置の構成図である。本実施形態における撮像装置は、画素毎にシャッタースピードやISO感度などの撮影条件を設定することができ、画素毎に露光量を制御して画像を撮影することができる。
撮像部101は、被写体の光を検知するための装置である。撮像部101は、例えば、ズームレンズ、フォーカスレンズ、ぶれ補正レンズ、絞り、シャッター、光学ローパスフィルタ、iRカットフィルタ、カラーフィルタ、及び、CMOSやCCDなどのセンサなどから構成される。
A/D変換部102は、被写体の光の検知量をデジタル値に変換するための装置である。
信号処理部103は、上記デジタル値を信号処理し、デジタル画像を生成するための装置であり、例えば、デモザイキング処理、ホワイトバランス処理、及びガンマ処理などを行う。
D/A変換部104は、信号処理部103で得られたデジタル画像を表示用にアナログ変換する処理を行う。
エンコーダ部105は、上記デジタル画像に対してデータ圧縮処理を行うための装置であり、例えば、JPEG方式で圧縮するなどの処理を行う。
メディアインターフェース(メディアI/F)部106は、撮像装置をPCやその他のメディア(例えば、ハードディスク、メモリーカード、CFカード、SDカード、USBメモリなど)につなぐためのインターフェースである。
CPU107は、上述した各構成要素の処理の全てに関わる。ROM108とRAM109は、処理に必要なプログラム、データ、作業領域などをCPU107に提供する。また、後述する処理に必要な制御プログラムがROM108に格納されている場合には、一旦RAM109に読み込まれた後に、CPU107によって実行される。
操作部111は、ユーザからの指示を入力する装置であり、例えば、ボタンやモードダイヤル、表示部113に付随するタッチパネル等が該当する。本実施形態の場合は、HDR(ハイダイナミックレンジ)出力と標準出力との切り替えのための入力も操作部111で行う。
キャラクタジェネレーション部112は、文字やグラフィックを生成するための装置である。
表示部113は、撮影画像やGUI等の画像を表示する装置であり、一般的にはCRTや液晶ディスプレイなどが用いられる。また、公知のタッチスクリーンであっても良い。その場合、タッチスクリーンによる入力については操作部111の入力として扱うことも可能である。
動体マップ取得部114は、撮像部101で取得される被写体に動きがあるかどうかを検出するための構成である。動体マップ取得部114は例えば、撮像部101から時系列に沿った撮像データを取得し、撮像データ間の輝度変化を複数画素で平均化することにより、画素毎の被写体の動き情報を生成する。輝度変化の平均値が大きい場合は、動きのある画素として動き情報が生成され、輝度変化の平均値が小さい場合は動きのない画素として動き情報が生成される。動体マップ取得部114は、このようにして生成された動き情報を画像における各画素に対して生成することで、動体マップとして保持する。動体マップの詳細については後述する。なお、動体マップは上記の方法だけでなく、他の方法を用いて取得してもよい。例えば、時系列に沿った2つの撮像データ間においては、同じ画素位置の画素値の差分を所定の閾値と比較し、差分が大きい画素は動体領域、差分が小さい画素は非動体領域とすることで、動体マップを生成することもできる。
明るさマップ取得部115は、撮像部101で取得される撮像データから、画素毎に被写体の明るさを示す明るさマップを取得する。たとえば、明るさマップ取得部115は、センサから得られた画素毎の明るさ情報を複数画素で平均化し、画像の明るさマップとして保持する。明るさマップの詳細については後述する。
撮像系制御部110は、CPU107で指示された撮像系の制御を行うための装置である。本実施形態では、撮像系制御部110で設定されたシャッタースピードやISO感度などの撮影条件の設定を、撮像部101に対して画素毎に行う。また、撮像系制御部110は、フォーカスを合わせる、シャッターを開く、絞りを調節するなどの制御も行う。
なお、撮像装置は、上記以外にも様々な構成要素を含むが、本発明の主眼ではないので、その説明は省略する。
本実施形態で説明する撮影条件設定処理は、動体マップ取得部114から動体マップを取得し、明るさマップ取得部115から明るさマップを取得し、動体マップおよび明るさマップに基づいて撮像系制御部110を制御するための撮影条件データを生成する。撮影条件設定処理は、CPU107が、ROM108に格納された制御プログラムをRAM109に読み込み、実行することで実施される。
[明るさマップ及び動体マップについて]
本実施形態において用いられる、明るさマップと動体マップについて、図2の模式図を参照して以下に説明する。
図2(a)は撮影画像の例を示し、図2(b)は明るさマップの例を示し、図2(c)は動体マップの例を示す。明るさマップ及び動体マップのいずれも、撮影画像の画素数よりも少ない画素数で構成された情報である。また、明るさマップ及び動体マップは、撮影画像よりも少ないビット数で表現されており、例えば撮影画像が12ビットで表現されているのに対して、明るさマップや動体マップは8ビットで表現される。明るさマップは、値が高いほど照度が高いことを意味する。動体マップは、値が高いほどその領域の被写体に動体が含まれている確率が高いことを示す。
[撮像処理の全体的な流れ]
本実施形態の撮像装置における撮像処理の全体的な流れを、図3のフローチャートを用いて説明する。ここでは、例えば操作部111により、HDR出力が指定された撮影開始の指示が入力されると、以下に説明する撮像処理が開始される。
なお、フローチャートで示される一連の処理は、CPU107がROM108に格納されている制御プログラムをRAM109に読み込み、実行することにより行われる。あるいはまた、フローチャートにおけるステップの一部または全部の機能をASICや電子回路等のハードウェアで実現してもよい。各処理の説明における記号「S」は、当該フローチャートにおけるステップを意味する。その他のフローチャートについても同様である。
まず、S201において、CPU107は、明るさマップ取得部115を用いて、被写体の明るさマップを取得する。
S202において、CPU107は、動体マップ取得部114を用いて、被写体の動体マップを取得する。
S203において、CPU107は、S201で取得した明るさマップ、およびS202で取得した動体マップをもとに、撮像部101が撮影を行う際の撮影条件を設定する。すなわち、CPU107は、撮影条件設定手段として機能する。詳細については後述する。
S204において、CPU107は、S203で設定した撮影条件データを撮像系制御部110に送り、撮像部101を駆動させて撮影を行い、撮像データを取得する。
S205において、CPU107は、S204で得られた撮像データに対して、露光量差に合わせてデジタルゲインを適用し、画像全体の輝度を合わせる。S204で得られる撮像データは、画素毎に異なる撮影条件が適用されているため、これらの撮影条件を疑似的に統一するために、各画素に対して露光量差に相当するデジタルゲインを適用する。
以上説明したように、本実施形態の撮像装置における撮像処理が実施される。
[撮影条件設定処理]
次に、図3のS203に示した撮影条件設定処理について、図4のフローチャートを用いて説明する。
S301において、CPU107は、S201で取得した動体マップをRAM109へ入力する。
S302において、CPU107は、RAM109へ入力した動体マップをもとに、動体に対応する領域を動体領域として特定する。具体的には、CPU107は、動体マップのうち、値が所定の閾値以上である部分を動体部分と判定し、動体マップの値を最大値である255に更新する。一方、CPU107は、動体マップのうち、値が所定の閾値より小さい部分を非動体領域と判定し、動体マップの値を最小値である0に更新する。このように、CPU107は、動体領域特定手段として機能する。
S303において、CPU107は、S202で取得した明るさマップをRAM109へ入力する。
S304において、CPU107は、撮影時の基本露出量を決定する。基本露出量は、例えばユーザが指定したシャッタースピード、ISO感度、絞り値を基に決定される。なお、基本露出量は、明るさマップ取得部115から得られた明るさマップを参照して平均明るさを露出量に変換して決定してもよいし、他の方法で決定してもよい。
S305において、CPU107は、撮影条件設定画素の位置を初期化する。例えば、CPU107は、左上の座標を初期値として設定する。以降、各画素の撮影条件設定処理は、右下へ向かって順次行われる。
S306において、CPU107は、撮影条件設定処理が行われる対象画素の位置(すなわち、処理対象の画素位置)に対応する動体マップの値が、動体部分を示す値(すなわち、255)かどうかを判定する。動体部分であると判定された場合はS307へ進み、そうでない場合はS308へ進む。
S307において、CPU107は、処理対象の画素位置に対応する照度分布マップの値を参照し、ISO感度を変更した撮影条件を設定する。すなわち、動体部分については、シャッタースピードを変更せずに、ISO感度を変更する。したがって、一つの動体の中で明るさが異なる領域が存在する場合でも、同一のシャッタースピードが適用されるので、動体がぶれたとしてもそのぶれ量は同じになり、違和感を生じさせないようにすることができる。詳細は後述する。
S308において、CPU107は、処理対象の画素位置に対応する照度分布マップの値を参照し、シャッタースピードを変更した撮影条件を設定する。すなわち、非動体部分については、ISO感度を変更せずに、シャッタースピードを変更する。詳細は後述する。
S309において、CPU107は、撮影条件設定処理が全画素で終了したか判定する。終了していれば処理を終了し、そうでなければS310へ進む。
S310において、CPU107は、処理対象の画素位置を次の画素位置に移行する。一つの画素に対する処理が終わると、一つ右の画素へ移動する。画素が右端部にある場合には、一つ下の行の左端部の画素へ移動する。
[ISO感度設定変更処理]
次に、図4のS307に示したISO感度設定変更処理について、図5のフローチャートを用いて説明する。
まず、S401において、CPU107は、RAM109に保存されている明るさマップを参照する。
S402において、CPU107は、処理対象の画素位置に対応する明るさマップの値を参照し、図4のS304で決定した基本露出量との明るさの差から、ゲイン変更量を算出する。具体的には、CPU107は、以下の式(1)を用いてゲイン変更量を求めることができる。
G=round(L(X,Y)/N(map)) (1)
ここで、Gはゲイン変更量、L(X,Y)は対象画素と同一の領域に属する明るさマップの値、N(map)は、図7(a)に示す、ISO感度設定変更量をまとめた撮影条件変更テーブルの要素数を示す。撮影条件変更テーブルについては後述する。
S403において、CPU107は、S402で求めたゲイン変更量をもとに、図7(a)に示す撮影条件変更テーブルを参照し、撮影条件を決定する。具体的には、式(1)を用いて算出されたゲイン変更量Gの値から、撮影条件変更テーブルの明るさマップ値の範囲を参照し、該当するISO感度設定変更量を、S304で決定したISO感度に対して加える。例えば、式(1)で求めたゲイン変更量Gが75であった場合、撮影条件変更テーブルを参照して、S304で決定したISO感度を1段分上げるという設定変更を行う。
[シャッタースピード設定変更処理]
次に、図4のS308に示したシャッタースピード設定変更処理について、図6のフローチャートを用いて説明する。
まず、S501において、CPU107は、RAM109に保存されている明るさマップを参照する。
S502において、CPU107は、処理対象の画素位置に対応する明るさマップの値を参照し、図4のS304で決定した基本露出量との明るさの差から、ゲイン変更量を算出する。具体的には、CPU107は、以下の式(2)を用いてゲイン変更量を求めることができる。
G‘=round(L(X,Y)/N‘(map)) (2)
ここで、G‘はゲイン変更量、L(X,Y)は対象画素と同一の領域に属する明るさマップの値、N‘(map)は、図7(b)に示す撮影条件変更テーブルの要素数を示す。撮影条件変更テーブルについては後述する。
03において、CPU107は、S502で求めたゲイン変更量をもとに、図7(b)に示す撮影条件変更テーブルを参照し、撮影条件を決定する。具体的には、式(2)を用いて算出されたゲイン変更量G‘の値から、撮影条件変更テーブルの明るさマップ値の範囲を参照し、該当するシャッタースピード変更量を、S304で決定したシャッタースピードに対して加える。例えば、式(2)で求めたゲイン変更量G’が190であった場合、撮影条件変更テーブルを参照して、S304で決定したシャッタースピードを1段分短くするという設定変更を行う。
[撮影条件変更テーブル]
図7は、図5のS402や図6のS502で用いた撮影条件変更テーブルの例を示す。図7(a)は、ISO感度を変更する場合の撮影条件変更テーブルを示し、明るさマップ値とISO値との関係が示されている。図7(b)は、シャッタースピードを変更する場合の撮影条件変更テーブルを示し、シャッタースピード(Tv)の値と明るさマップ値との関係が示されている。
以上説明したように、本実施形態によれば、動被写体部分に違和感を生じさせないようにして、ダイナミックレンジの広いシーンに応じた画像を生成することができる。
(第2の実施形態)
次に、本発明の第2の実施形態について説明する。本実施形態では、動物体の露光量補正をシャッタースピード、およびゲインの両方を用いて行う。これは、被写体となる動物体の速さに応じて露光量補正を変化させるとき、動物体の速さが非常に速い場合や、動物体が非常に明るい、または暗い場合等、ISO感度による補正だけでは動体部分の露光量が十分に調整できない場合があるからである。
まず、本実施形態における撮影処理の全体的な流れを、図8のフローチャートを用いて説明する。また、図9は、本実施形態における動体マップ値更新テーブルの例を示し、図10は、本実施形態における撮影条件変更テーブルの例を示す。なお、本実施形態の説明では、第1の実施形態と異なる点を主に説明する。
本実施形態では、動体マップのグループ化の方法、ゲイン振り条件の設定方法、及びシャッタースピードの設定方法が、第1の実施形態と異なる。
S602において、CPU107は、RAM109へ入力した動体マップをもとに、動体に対応する領域を動体領域として特定する。具体的には、CPU107は、動体マップのうち、図9に示す表のように、動体マップの値が所定の値以上である部分を動体部分と判定し、動体マップの値を図9の表に基づき更新する。例えば、動体マップの値が150であった場合は、動体マップの値を128へと更新する。また、CPU107は、動体マップのうち、値が所定の値より小さい部分を非動体領域と判定し、動体マップの値を最小値である0に更新する。なお、この値の区分は図9に示す値だけでなく、他の値で区分分けしてもよい。
S607において、CPU107は、処理対象の画素位置に対応する照度分布マップの値を参照し、同じ動体マップ値を持つ画素の平均照度を算出する。そして、図10(a)の表に従い、同じ動体マップ値を持つ画素のシャッタースピードを変更する。あわせて、上記同じ動体マップ値を持つ画素の照度マップの値を修正する。例えば、ある動体画素の照度が100で、その動体部分の平均照度が50であった場合は、動体部分のシャッタースピードを1段分長くし、照度マップの値から50を引いて50へと変更する。
S611において、CPU107は、図10(b)の表を参照して、動体部分について、ゲインを変更した撮影条件を設定する。これらの動作により、同じ速度で動くと判定された動体部分については、シャッタースピードを同一の値にし、併せて被写体の照度に応じてゲインを変更する。したがって、動体の中で明るさが異なる領域が存在する場合でも、動体には同一のシャッタースピードが適用される。このため、動体がぶれたとしてもそのぶれ量は同じになり、違和感を生じさせないようにすることができる。また、全体的に暗い動体や、全体的に明るい動体などに対して、第1の実施形態のようにゲインによる変更のみで対応しようとした場合、動体部分に対して大きなゲインを適用する必要が出てくる。本実施形態においては、このような場合でも、動体全体に対するシャッタースピードを変更することで、動体のぶれ量を同じにすることができる。併せて、動体の照度が異なる領域が存在しても、ゲインの変更により適切な露光条件を設定することができる。
以上説明したように、本実施形態によれば、動体領域の露光量調整がISO感度だけでは十分でなかった場合にも、露光量調整を行った画像を得ることができる。
なお、本発明は、複数枚合成を行う画像に対しても適用できる。その場合、動体を含む撮影時には、複数枚の画像が同一のシャッタースピードになる。これらの画像を合成するため、動体部分のぶれの違いがなくなり、違和感の少ない画像を得ることができる。
また、上述の実施形態では、画素毎に撮影条件を設定できるセンサを用いる場合を例にしたが、領域毎に撮影条件を設定できるセンサを用いる場合にも適用できる。その場合は、動体である被写体を含む領域に対しては、同じシャッタースピードが設定されるように撮影条件を設定する。
(その他の実施形態)
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
101 撮像部
102 A/D変換部
103 信号処理部
104 D/A変換部
105 エンコーダ部
106 メディアI/F部
107 CPU
108 ROM
109 RAM
110 撮像系制御部
111 操作部
112 キャラクタジェネレーション部
113 表示部
114 動体マップ取得部
115 明るさマップ取得部

Claims (18)

  1. 画素毎または領域毎に撮影条件を制御して画像を撮影することが可能な撮像装置であって、
    被写体の動き情報に基づいて、前記画像の動体領域を特定する特定手段と、
    前記被写体の明るさ情報を取得する取得手段と、
    前記動体領域に対応する画素については同一のシャッタースピードが適用され、かつ、前記明るさ情報に応じたISO感度が適用されるように画素毎または領域毎に前記撮影条件を設定し、前記動体領域でない非動体領域に対応する画素については、同一のISO感度が適用され、かつ、前記明るさ情報に応じたシャッタースピードが適用されるように画素毎または領域毎に前記撮影条件を設定する設定手段と、
    を有することを特徴とする撮像装置。
  2. 前記設定手段は、前記画像を撮影する際の基本露出量を決定し、前記基本露出量に応じた前記撮影条件を設定した後、前記動体領域に対応する画素または領域毎のシャッタースピードを変更せずに、前記明るさ情報に応じたISO感度を決定することを特徴とする請求項1に記載の撮像装置。
  3. 前記設定手段は、前記動体領域に対応する画素または領域毎の前記明るさ情報に応じたISO感度の変更量を、前記明るさ情報と前記基本露出量との差に基づいて決定することを特徴とする請求項に記載の撮像装置。
  4. 前記設定手段は、前記画像を撮影する際の基本露出量を決定し、前記基本露出量に応じた前記撮影条件を設定した後、前記非動体領域に対応する画素または領域毎前記明るさ情報に応じたISO感度を変更せずに、前記明るさ情報に応じたシャッタースピードを決定することを特徴とする請求項1に記載の撮像装置。
  5. 前記設定手段は、前記非動体領域に対応する画素または領域毎に、前記明るさ情報に応じたシャッタースピードの変更量を、前記明るさ情報と前記基本露出量との差に基づいて決定することを特徴とする請求項に記載の撮像装置。
  6. 前記動き情報は、時系列に沿った撮像データ間の輝度変化を複数画素で平均化して生成された動体マップであることを特徴とする請求項1乃至のいずれか1項に記載の撮像装置。
  7. 前記明るさ情報は、画素毎の明るさを複数画素で平均化して生成された明るさマップであることを特徴とする請求項1乃至6のいずれか1項に記載の撮像装置。
  8. 前記動体領域の画素位置に対応する前記明るさ情報に基づいて、同じ前記被写体の平均照度を算出する算出手段をさらに有し、
    前記設定手段は、前記平均照度に基づいて、各動体領域における各画素について適用するシャッタースピードを決定することを特徴とする請求項1に記載の撮像装置。
  9. 前記設定手段は、前記動体領域における画素のうち、前記平均照度よりも明るい照度の画素がある場合は、適用するシャッタースピードが長くなるように決定すること特徴とする請求項に記載の撮像装置。
  10. 前記明るさ情報は、照度マップであることを特徴とする請求項またはに記載の撮像装置。
  11. 前記取得手段は、前記照度マップにおける前記動体領域における画素のうち、前記平均照度よりも明るい照度の画素の値を、前記平均照度により更新することを特徴とする請求項10に記載の撮像装置。
  12. 前記設定手段は、前記動体領域に対応する領域のうち、同じ速度で動くと判定された動体部分については、同一のシャッタースピードを適用することを特徴とする請求項1に記載の撮像装置。
  13. 前記特定手段は、前記動き情報に基づいて、動きの大きさに応じて前記動体領域を特定することを特徴とする請求項1に記載の撮像装置。
  14. 前記設定手段は、
    前記画像を撮影する際の基本露出量を決定し、
    前記特定手段が前記動体領域を特定するまでは、全ての画素に対して前記基本露出量に応じた前記撮影条件を設定することを特徴とする請求項1に記載の撮像装置。
  15. 前記撮影条件は、ISO感度とシャッタースピードであることを特徴とする請求項1に記載の撮像装置。
  16. 前記設定手段は、前記非動体領域に対応する少なくとも一部の画素については、前記明るさ情報に応じて画素毎に異なる前記明るさ情報に応じたシャッタースピードを適用することを特徴とする請求項1に記載の撮像装置。
  17. コンピュータを、請求項1乃至16のいずれか1項に記載の撮像装置として機能させるためのプログラム。
  18. 画素毎または領域毎に撮影条件を制御して画像を撮影することが可能な撮像装置の制御方法であって、
    被写体の動き情報に基づいて、前記画像の動体領域を特定する特定工程と、
    前記被写体の明るさ情報を取得する取得工程と、
    前記動体領域に対応する画素については同一のシャッタースピードが適用され、かつ、前記明るさ情報に応じたISO感度が適用されるように画素毎または領域毎に前記撮影条件を設定し、前記動体領域でない非動体領域に対応する画素については、同一のISO感度が適用され、かつ、前記明るさ情報に応じたシャッタースピードが適用されるように画素毎または領域毎に前記撮影条件を設定する設定工程と、
    を含むことを特徴とする制御方法。
JP2019134378A 2018-09-19 2019-07-22 撮像装置、該撮像装置の制御方法、及びプログラム Active JP7442989B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US16/571,954 US11165966B2 (en) 2018-09-19 2019-09-16 Image capturing apparatus, method of controlling image capturing apparatus, and storage medium
US17/491,664 US11863873B2 (en) 2018-09-19 2021-10-01 Image capturing apparatus, method of controlling image capturing apparatus, and storage medium

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018175131 2018-09-19
JP2018175131 2018-09-19

Publications (2)

Publication Number Publication Date
JP2020053960A JP2020053960A (ja) 2020-04-02
JP7442989B2 true JP7442989B2 (ja) 2024-03-05

Family

ID=69994155

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019134378A Active JP7442989B2 (ja) 2018-09-19 2019-07-22 撮像装置、該撮像装置の制御方法、及びプログラム

Country Status (1)

Country Link
JP (1) JP7442989B2 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7360349B2 (ja) 2020-03-25 2023-10-12 ヤンマーパワーテクノロジー株式会社 ヒートポンプ

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012235332A (ja) 2011-05-02 2012-11-29 Sony Corp 撮像装置、および撮像装置制御方法、並びにプログラム
JP2013255080A (ja) 2012-06-06 2013-12-19 Casio Comput Co Ltd 撮像装置、合成画像生成方法、及び、プログラム
WO2014192152A1 (ja) 2013-05-31 2014-12-04 株式会社ニコン 電子機器及び制御プログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012235332A (ja) 2011-05-02 2012-11-29 Sony Corp 撮像装置、および撮像装置制御方法、並びにプログラム
JP2013255080A (ja) 2012-06-06 2013-12-19 Casio Comput Co Ltd 撮像装置、合成画像生成方法、及び、プログラム
WO2014192152A1 (ja) 2013-05-31 2014-12-04 株式会社ニコン 電子機器及び制御プログラム

Also Published As

Publication number Publication date
JP2020053960A (ja) 2020-04-02

Similar Documents

Publication Publication Date Title
US20160044243A1 (en) Image pickup apparatus, image pickup system, and method of controlling image pickup apparatus
JP2013106149A (ja) 撮像装置、その制御方法、及びプログラム
JP6720881B2 (ja) 画像処理装置及び画像処理方法
JP5859061B2 (ja) 撮像装置、画像処理装置、および、これらの制御方法
WO2019124289A1 (ja) 装置、制御方法および記憶媒体
JP2018207413A (ja) 撮像装置
US11863873B2 (en) Image capturing apparatus, method of controlling image capturing apparatus, and storage medium
US10832386B2 (en) Image processing apparatus, image processing method, and storage medium
JP6541501B2 (ja) 画像処理装置、撮像装置、及び画像処理方法
JP6800806B2 (ja) 画像処理装置、画像処理方法およびプログラム
JP2014179920A (ja) 撮像装置及びその制御方法、プログラム、並びに記憶媒体
JP7442989B2 (ja) 撮像装置、該撮像装置の制御方法、及びプログラム
JP2006287814A (ja) 撮像装置及び動きベクトル決定方法
EP4199528A1 (en) Image processing apparatus, image capture apparatus, and image processing method
JP6157274B2 (ja) 撮像装置、情報処理方法及びプログラム
JP2017229025A (ja) 画像処理装置、画像処理方法、及びプログラム
JP2021164112A (ja) 撮像装置、画像処理装置、および画像処理プログラム
JP2016208118A (ja) 画像処理装置、画像処理方法及びプログラム
JP5307572B2 (ja) 撮像システム、映像信号処理プログラム、および撮像方法
JP6900577B2 (ja) 画像処理装置及びプログラム
JP5943682B2 (ja) 撮像装置、その制御方法及びプログラム
JP2010271507A (ja) 撮像装置、露出調整方法及びプログラム
JP2009278486A (ja) 撮像装置
JP2022093912A (ja) 撮像装置、撮像方法およびプログラム
JP2000032331A (ja) 自動露光制御装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220720

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230327

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230411

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230609

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230926

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231127

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240123

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240221

R151 Written notification of patent or utility model registration

Ref document number: 7442989

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151