JP5406553B2 - 焦点調節装置、及び焦点調節方法 - Google Patents

焦点調節装置、及び焦点調節方法 Download PDF

Info

Publication number
JP5406553B2
JP5406553B2 JP2009034111A JP2009034111A JP5406553B2 JP 5406553 B2 JP5406553 B2 JP 5406553B2 JP 2009034111 A JP2009034111 A JP 2009034111A JP 2009034111 A JP2009034111 A JP 2009034111A JP 5406553 B2 JP5406553 B2 JP 5406553B2
Authority
JP
Japan
Prior art keywords
focus
process proceeds
focus lens
subject
scan
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2009034111A
Other languages
English (en)
Other versions
JP2010193074A (ja
Inventor
賢志 木本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2009034111A priority Critical patent/JP5406553B2/ja
Publication of JP2010193074A publication Critical patent/JP2010193074A/ja
Application granted granted Critical
Publication of JP5406553B2 publication Critical patent/JP5406553B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Focusing (AREA)
  • Automatic Focus Adjustment (AREA)
  • Studio Devices (AREA)

Description

本発明は、焦点調節機能を有する電子スチルカメラなどの撮像装置等に適用される焦点調節装置、焦点調節方法等に関するものである。
従来、電子スチルカメラやビデオカメラなどではオートフォーカス(AFとも記す)を行う場合、CCD(電荷結合素子)などを用いた撮像素子から得られる輝度信号の高域周波数成分が最大になるレンズ位置を合焦位置とする方式が用いられている。この方式の1つとして、次のスキャン方式が知られている。即ち、移動範囲の全域に亘ってレンズを駆動しながら撮像素子から得られる輝度信号の高域周波数成分に基づく評価値(焦点評価値とも記す)をその都度に記憶していき、記憶した値のうち、その最大値に相当するレンズ位置を合焦位置とする。
もう1つの方式として、焦点評価値が増加する方向にレンズを動かし、焦点評価値が最大になる位置を合焦位置とする山登り方式(いわゆるContinuous AF。コンティニュアスAFとも記す)が知られている。
また、これまでに、撮影準備指示前にコンティニュアスAFを行い合焦状態を維持することで、撮影準備指示後に行なうスキャン方式によるAFの移動範囲を制限し、AF動作の時間を短縮する方法がある(特許文献1参照)。
特許4106485号公報
前記コンティニュアスAFにおいて、焦点評価値の増加する方向にレンズを動かそうとした場合、画面内における合焦すべき領域が分からないと、合焦すべき被写体にピントを合わせることができない。特許文献1では、前記コンティニュアスAFにおいて、前記スキャン方式を組み合わせることでより合焦動作を早くしている。しかし、ユーザーがピントを合わせたいと考えている画面内の合焦すべき被写体(主被写体とも記す)を判断していないので、撮影シーンによっては、合焦すべき被写体にピントを合わせることができないという事態が起こり得る。
一方で、被写体が暗く映像信号のレベルが低い場合、映像信号をそのまま用いたのでは、輝度が足りないことに加えて、撮像素子のノイズの影響により焦点評価値の本来の信号成分が得にくくなる。
上記課題に鑑み、本発明の技術的特徴として、フォーカスレンズを用いて結像された被写体像を電気信号に変換する光電変換手段と、前記光電変換手段の出力信号から焦点検出領域における特定周波数帯域の信号成分を抽出する抽出手段と、装置全体の動作を制御する制御手段と、前記焦点検出領域の明るさを検出する検出手段とを有する撮像装置における焦点調節方法であって、撮影準備前に、フォーカスレンズを移動させると共に、設定された焦点検出領域における抽出手段の出力信号をフォーカスレンズの位置と関連づけて取得するAFスキャン動作を行って、合焦すべき被写体領域を特定する第1の動作を実施する第1の工程と、撮影準備時に、前記AFスキャン動作を行い合焦動作を実施して、前記第1の動作と異なる第2の動作を実施する第2の工程と、撮影準備前において前記検出手段によって得られた明るさが第1の閾値未満の場合には、前記第1の動作とは異なる第3の動作を実施する第3の工程とを含むことを特徴とする。
本発明によれば、低照度状態における主被写体の検出性能の低下を抑え、合焦すべき被写体に素早くピントを合わせることが可能となる。すなわち、例えば、低照度環境下において画面内の合焦すべき被写体領域を判断し、撮影準備前にピントを合わせておく際、焦点評価値のS/N低下による主被写体領域の検出性能の低下を改善する。こうして、撮影準備時において合焦すべき被写体に素早くピントを合わせることができる。
本発明の一実施例である撮像装置の構成を示すブロック図である。 本発明の実施例である焦点調節装置の動作を表すフローチャートである。 図2における安定判断のサブルーチンを説明するフローチャートである。 図2における顔検出時AFスキャンのサブルーチンを説明するフローチャートである。 図4、図11、図14、図21におけるシーン変化判定のサブルーチンを説明するフローチャートである。 図4、図12、図15における合焦判定のサブルーチンを説明するフローチャートである。 図6における合焦判定の仕方を説明する図である。 図2における被写体領域特定AFスキャンのサブルーチンを説明するフローチャートである。 図8におけるAF枠設定の例を説明する図である 図8における前回参照判定のサブルーチンを説明するフローチャートである。 図8における前回参照AFスキャンのサブルーチンを説明するフローチャートである。 図11における主被写体領域判定のサブルーチンを説明するフローチャートである。 図12における主被写体領域判定を説明するための図である。 図8におけるゾーンAFスキャンのサブルーチンを説明するフローチャートである。 図14におけるゾーン更新判定のサブルーチンを説明するフローチャートである。 図15におけるゾーン更新判定の例を説明する図である。 図8における一様面判断のサブルーチンを説明するフローチャートである。 図17における一様面判定のサブルーチンを説明するフローチャートである。 図18における一様面判定の仕方を説明する図である。 図8におけるフォーカス駆動のサブルーチンを説明するフローチャートである。 図2におけるコンティニュアスAFのサブルーチンを説明するフローチャートである。 図2におけるシーン不安定判断のサブルーチンを説明するフローチャートである。 図2における撮影処理のサブルーチンを説明するフローチャートである。 図23における本露光用AFのサブルーチンを説明するフローチャートである。 図24における本露光用AFスキャンのサブルーチンを説明するフローチャートである。 図23における本露光処理のサブルーチンを説明するフローチャートである。 実施例1の図2における被写体領域特定用AF枠設定処理のサブルーチンを説明するフローチャートである。 図27における被写体領域特定用AF枠設定処理を説明するための図である。 実施例2の図2における被写体領域特定用AF枠設定処理のサブルーチンを説明するフローチャートである。 図29における被写体領域特定用AF枠設定処理を説明するための図である。
本発明の実施の形態について説明する。
本発明の装置及び方法において重要なことは、次の点である。撮影準備前において、得られた被写体の明るさが第1の閾値未満の場合には、前記AFスキャン動作を行って合焦すべき被写体領域を特定する第1の動作とは異なる第3の動作を実施することである。
上記考え方に基づき、本発明の装置及び方法の基本的な実施形態は、次の様な構成を有する。焦点調節装置は、焦点調節を行うためのフォーカスレンズ及びその駆動手段と、光電変換手段と、抽出手段と、制御手段と、被写体輝度検出手段とを有する。光電変換手段は、フォーカスレンズを用いて結像された被写体像を電気信号に変換するCCD、CMOSなどの撮像素子である。抽出手段は、光電変換手段の出力信号から被写体の輝度に関する特定周波数帯域の信号成分(典型的には高周波成分)を抽出する。被写体輝度検出手段は、焦点検出領域の明るさを検出する。制御手段は、装置全体の動作を制御する。
制御手段は、駆動手段を制御してフォーカスレンズを移動させると共に、光電変換手段の設定された焦点検出領域における抽出手段の出力信号をフォーカスレンズの位置と関連づけて取得するAFスキャン動作を行うことができる。また、制御手段は、前記取得した抽出手段の出力に基づいてフォーカスレンズをその駆動手段を介して制御して合焦動作を実施することができる。また、制御手段は、撮影準備前にAFスキャン動作を行って合焦すべき被写体領域を特定する第1の動作を実施することができる。また、制御手段は、撮影準備時に前記AFスキャン動作を行い合焦動作を実施して、第1の動作と異なる第2の動作を実施することができる。また、制御手段は、撮影準備前において被写体輝度検出手段によって得られた明るさが第1の閾値未満の場合には、前記第1の動作とは異なる第3の動作を実施する。
また、焦点調節方法は、上記の如き手段を有する撮像装置における焦点調節方法であって、次の第1の工程乃至第3の工程を含む。第1の工程では、撮影準備前に、フォーカスレンズを移動させると共に、設定手段などで設定された焦点検出領域における抽出手段の出力信号をフォーカスレンズの位置と関連づけて取得するAFスキャン動作を行う。そして、合焦すべき被写体領域を特定する第1の動作を実施する。第2の工程では、撮影準備時に、前記AFスキャン動作を行い合焦動作を実施して、前記第1の動作と異なる第2の動作を実施する。第3の工程では、撮影準備前において前記被写体輝度検出手段によって得られた明るさが第1の閾値未満の場合には、前記第1の動作とは異なる第3の動作を実施する。
前記基本的な実施形態において、以下に述べる様なより具体的な実施形態が可能である。
前記第3の動作は、前記光電変換手段の動作モードおよび前記抽出手段における周波数帯域を第1の動作とは異なる様に設定した前記AFスキャン動作を行って合焦すべき被写体領域を特定する動作とすることができる。また、前記第3の動作は、前記焦点検出領域の大きさを第1の動作とは異なる様に設定した前記AFスキャン動作を行って合焦すべき被写体領域を特定する動作とすることができる。また、前記第3の動作は、前記焦点検出領域の数を第1の動作とは異なる様に設定した前記AFスキャン動作を行って合焦すべき被写体領域を特定する動作とすることができる。
また、前記制御手段は、特定の被写体距離にピントを固定する様に動作を行うピント固定動作を行える様にできる。この場合、前記第3の動作は、前記被写体輝度検出手段によって得られた明るさが第1の閾値よりも暗い第2の閾値以上の場合には前記AFスキャン動作を行って合焦すべき被写体領域を特定する動作とする。そして、前記被写体輝度検出手段によって得られた明るさが第2の閾値未満の場合には前記ピント固定動作による動作とする。
また、前記制御手段は、次のコンティニュアスAF動作を行える様にできる。コンティニュアスAF動作では、前記フォーカスレンズを所定量移動する前に抽出した前記抽出手段の出力信号とその移動の後に抽出した前記抽出手段の出力信号とから、前記フォーカスレンズを次に移動する時の移動方向を決定する。そして、前記移動方向に前記フォーカスレンズを移動し、この移動動作を繰り返し行うことにより前記フォーカスレンズを前記抽出手段の出力信号のピーク位置に移動する。この場合、前記第3の動作は、前記被写体輝度検出手段によって得られた明るさが第1の閾値よりも暗い第2の閾値以上の場合には前記AFスキャン動作を行って合焦すべき被写体領域を特定する動作とする。そして、前記被写体輝度検出手段によって得られた明るさが第2の閾値未満の場合には前記コンティニュアスAF動作による動作とする。
また、前記制御手段は、前記ピント固定動作を行うことができると共に、前記コンティニュアスAF動作を行える様にできる。この場合、前記第3の動作は、前記被写体輝度検出手段によって得られた明るさが第1の閾値よりも暗い第2の閾値以上の場合には前記AFスキャン動作を行って合焦すべき被写体領域を特定する動作とする。前記被写体輝度検出手段によって得られた明るさが第2の閾値未満で且つ第2の閾値より暗い第3の閾値以上の場合には前記コンティニュアスAF動作による動作とする。そして、前記被写体輝度検出手段によって得られた明るさが第3の閾値未満の場合には前記ピント固定動作による動作とする。
以下、図面を参照しながら本発明の実施例を説明する。図1は本発明の実施例を適用した焦点調節装置を備える撮像装置である電子カメラの構成を示すブロック図である。
図1において、101は、ズーム機構を含む撮影レンズである。102は、入射光量を制御する光量制御手段である絞り及びシャッターである。103は、光量制御手段の駆動手段を含むAE(Automatic Exposure)処理部である。104は、後述する撮像素子上に焦点を合わせるためのフォーカスレンズである。105は、フォーカスレンズ104の駆動手段を含むAF処理部である。106はストロボである。107はEF(フラッシュ調光)処理部である。
108は、被写体からの反射光を電気信号に変換する受光手段ないし光電変換手段としての撮像素子である。109は、撮像素子108の出力ノイズを除去するCDS(相関二重サンプリング処理)回路やA/D変換前に処理を行う非線形増幅回路を含むA/D変換部である。110は、光電変換手段の出力信号から被写体の輝度を算出する輝度算出手段と該輝度算出手段の出力から特定周波数帯域の信号成分を抽出する抽出手段とを含む画像処理部である。111はWB(ホワイトバランス)処理部である。112はフォーマット変換部である。
113は、高速な内蔵メモリ(例えばランダムアクセスメモリなど、DRAMとも記す) である。114は、メモリーカードなどの記録媒体とそのインターフェースからなる画像記録部である。115は、装置全体の動作を制御する制御手段として撮影シーケンスなどシステムを制御するシステム制御部(CPUとも記す)である。116は画像表示用メモリ(VRAMとも記す)
である。117は、画像表示、操作補助のための表示やカメラ状態の表示の他、撮影時には撮影画面と焦点検出領域を表示する操作表示部である。118は、カメラを外部から操作するための操作部である。119は、顔検出モードをONまたはOFFに切り替える等の設定を行う撮影モードスイッチである。
120は、システムに電源を投入するためのメインスイッチである。121は、AFやAE等の撮影スタンバイ動作を行うための合焦位置確定指示手段である撮影スタンバイスイッチ(SW1とも記す)
である。このSW1(121)が操作されることにより、フォーカスレンズ104の撮影のための合焦位置が確定される。この確定のための手順は後述する。122は、SW1の操作後、撮影を行う撮影スイッチ(SW2とも記す)である。
123は、画像処理部110で処理された画像信号を用いて顔検出を行い、検出した1つ又は複数の顔情報(位置・大きさ・信頼度)をCPU115に送る顔検出モジュールである。なお、顔の検出方法は、本発明の主眼点ではないため詳細な説明は省略する。
124は、画面内の被写体及び背景が動いているかどうかを検出して動体情報をシステム制御部115に送る動体検出部である。具体的には、画像処理部110で処理された画像信号のうち、時系列的に並んだ2枚の画像を比較し、その差分情報から被写体/背景の動体情報(動作量、位置、範囲)を検出する。125は、カメラ自体の角速度を検出してカメラ動き情報をCPU115に送る角速度センサ部である。この角速度センサ部を用いて、カメラが縦位置の状態で構えられているのか、横位置の状態で構えられているのかを検出することも可能である。
DRAM113は、一時的な画像記憶手段としての高速バッファとして、或いは画像の圧縮・伸張における作業用メモリなどに使用される。前記操作部118は、例えば次の様なものが含まれる。撮像装置の撮影機能や画像再生時の設定などの各種設定を行うメニュースイッチ、撮影レンズのズーム動作を指示するズームレバー、撮影モードと再生モードの動作モード切換えスイッチ、などである。
次に、図2のフローチャートを参照しながら本実施例に係る電子カメラの動作について説明する。まず、S201では、CPU115が、撮影準備を指示するSW1の状態(ON/OFF)を判定し、該状態がON(オン)状態ならばS212へ進み、OFF(オフ)状態の場合にはS202へ進む。S202では、後述する手順に従ってシーン安定判断を行う(図3参照)。S203では、S202において撮影シーンが安定したと判断したかどうかを調べ、安定したと判断していればS204へ進み、安定したと判断されていなければS201へ戻る。ここで、撮影シーンが安定した状態とは、撮影する被写体、カメラの状態が安定して維持され、撮影に適した状態になっていることである。
S204では、顔検出モジュール123において顔検出されたかどうかを調べ、顔検出されていればS207へ進み、顔検出されていなければS205へ進む。S207では、後述する手順に従って顔検出時AFスキャンを行い(図4参照)、S209へ進む。
S205では、被写体領域特定用のAF枠設定を行う。ここで、AF枠とは、画面内の焦点評価値を取得する領域のことである。また、焦点評価値とは、撮像素子108から読み出されたアナログ映像信号をA/D変換部109がデジタル信号に変換し、その出力から画像処理部110が輝度信号の高周波成分を抽出した値のことである。この被写体領域特定用のAF枠設定の詳細については図27を用いて後述する。
S206では、被写体特定実施フラグがTRUEか否かを判断する。TRUEである場合はS208の被写体領域特定AFスキャンを実施し、FALSEである場合はS209のコンティニュアスAFに進む。S208では、後述する手順に従って被写体領域を特定するためのAFスキャンを行う(図8参照)。S209では、後述する手順に従ってコンティニュアスAFを行う(図21参照)。ここで、コンティニュアスAFを行わずに、単純に1回だけ特定された被写体領域について合焦動作を行ったり、単に被写体領域を特定するのみに止めたりして、次の第2のスキャン動作に引き継がせるということも可能である。なお、図9は図8におけるAF枠設定の例を説明する図である。
S210では、後述する手順に従ってシーン不安定判断を行う(図22参照)。S211では、S210において撮影シーンが不安定と判断されたかどうかを調べ、不安定となっていればS201へ進み、不安定となっていなければS209へ進む。ここで、撮影シーンが不安定とは、撮影する被写体の状態、カメラの状態が不安定となり、撮影に適した状態ではなくなることである。
S212では、合焦度判定フラグをFALSEにする。S213では、後述する手順に従って撮影処理を行う(図23参照)。
また、上述した動作と並行して、常にCPU115からの制御信号に基づきAE処理部103により、絞り及びシャッター102を制御して操作表示部117に表示される画像の明るさが適正になる様にAE動作を行っている。
図3は、図2におけるS202のシーン安定判断を説明するフローチャートである。S301では、角速度センサ部125で検出したカメラ動作量が所定量以下となっているかどうかを調べ、所定量以下であればS302へ進み、そうでなければS304へ進む。ここではカメラ動作量が所定量以下になっていることを調べることにより、カメラの状態が安定しているかを判断する。
S302では、前回からの輝度変化量が所定量以下かどうかを調べ、所定量以下であればS303へ進み、そうでなければS304へ進む。ここでは輝度変化量が所定値以下になっていることを調べることにより、撮影する被写体が変化していないことを判断する。S303では、撮影シーンが安定状態となったと判断して本処理を終了する。S304では、撮影シーンが安定状態ではないと判断して本処理を終了する。
図4は、図2におけるS207の顔検出時AFスキャンを説明するフローチャートである。S401では、顔検出モジュール123で検出した顔情報(位置・大きさ)に基づいてAF枠設定を行う。S402では、AF処理部105がフォーカスレンズ104をスキャン開始位置へと移動させる。ここで、スキャン開始位置は、例えば、検出した顔の大きさより推定した人物の距離に基づいて決定する。S403では、CPU115は、現在のフォーカスレンズ位置における焦点評価値をDRAM113へ記憶させる。S404では、フォーカスレンズ104の現在位置を取得してCPU115が該位置のデータをDRAM113へ記憶させる。
S405では、CPU115が、撮影準備を指示するSW1の状態(ON/OFF)を判定し、該状態がON(オン)状態なら本処理を終了して図2に示すS212へ進み、OFF(オフ)状態の場合にはS406へ進む。S406では、後述する手順に従ってシーン変化判定を行う(図5参照)。シーン変化判定とは、撮影するシーンが変わったかを、カメラの状態、被写体の状態から判定する処理である。
S407では、CPU115がフォーカスレンズ104の現在位置がスキャン終了位置と等しいかを調べ、両者が等しい場合にはS409へ進み、そうでなければS408へ進む。ここで、スキャン終了位置は、例えば、検出した顔の大きさより推定した人物の距離に基づいて決定する。S408では、AF処理部105がフォーカスレンズ104をスキャン終了方向へ向かって所定量だけ移動させた後、S403に戻る。S409では、後述する手順に従って合焦判定を行う(図6参照)。
S410では、S409における合焦判定で○判定となったかどうかを調べ、○判定となっていればS411へ進み、そうでなければS414へ進む。ここで○判定とは、被写体のコントラストが十分にあり、且つスキャンした距離範囲内に被写体が存在する場合のことである。
S411では、S403で取得した焦点評価値がピークとなる合焦位置を算出する。S412では、AF処理部105がフォーカスレンズ104を、S411で算出した合焦位置へと移動させる。S413では、ピーク検出フラグをTRUEにする。
S414では、○判定ではない、つまり被写体のコントラストが不十分、若しくはスキャンした距離範囲外に被写体が存在するので、AF処理部105がフォーカスレンズ104を、予めDRAM113に記憶している位置(定点)へと移動させる。ここで、定点は被写体の存在確率の高い距離に設定する。例えば、顔が検出されていれば、検出した顔の大きさより推定した人物の距離とする。
図5は、図4のS406、後述する図11のS1105、図14のS1405、図21のS2107におけるシーン変化判定を説明するフローチャートである。S501では、顔検出モジュール123で検出した顔検出状態が変化したかどうかを調べ、顔検出状態が変化していれば本判定処理を終了して図2に示すS201へ戻り、そうでなければS502へ進む。ここで、顔検出状態とは、顔検出されているかどうかである。つまり、前回のシーン変化判定時に顔検出されていて今回のシーン変化判定時に顔検出されていなければ、顔検出状態が変化したことになる。
S502では、角速度センサ部125で検出したカメラ動作量が所定量以上となっているかどうかを調べ、所定量以上であれば、本判定処理を終了して図2のS201へ戻り、そうでなければS503へ進む。
S503では、後述するコンティニュアスAF中であるかどうかを調べ、コンティニュアスAF中であればS504へ進む。S504では、被写体輝度差が所定値以下かを判断する。被写体輝度差とは、前回のシーン変化判定時に取得した被写体輝度値と、今回のシーン変化判定時に検出された被写体輝度値との差である。被写体輝度値の差が大きい場合は、シーンが変化したと判断する。被写体輝度差が、所定値以下であれば、本判定処理を終了し、所定値より大きい場合は、本判定処理を終了して図2のS201へ戻る。
コンティニュアスAF中でなければ、S505へ進む。S505では、露光時間が所定時間以上であるかどうかを調べ、露光時間が所定時間以上であれば、本判定処理を終了して図2のS201へ戻る。これは、露光時間が所定時間以上の場合、焦点評価値を取得する間隔が延びてしまう為、AFの精度を確保できなくなるからである。そうでなければS506へ進む。
S506では、絞り102の状態が変化したかどうかを調べ、状態が変化していればS507へ進み、そうでなければ本判定処理を終了する。なお、本実施例では、絞り制御を用いた場合について説明しているが、絞り制御の替わりにNDフィルタによって露出制御を行った場合は、NDフィルタの状態の変化を見てもよい。これは、絞り、若しくはNDフィルタの状態が変化した場合は、焦点評価値のピーク位置が変化する為である。
S507では、顔検出モジュール123で顔を検出しているかどうかを調べ、顔を検出していれば本判定処理を終了して図4のS402へ進み、そうでなければ本判定処理を終了して後述する図8のS809へ進む。
次に、図4のS409、後述する図12のS1201、図15のS1501における合焦判定のサブルーチンについて図6と図7を用いて説明する。
焦点評価値は、遠近競合などの場合を除けば、横軸にフォーカスレンズ位置、縦軸に焦点評価値をとると、その形は図7に示す様な山状になる。そこで、焦点評価値の、最大値と最小値の差、一定値(Slope Thr)以上の傾きで傾斜している部分の長さ、傾斜している部分の勾配から、山の形状を判断することにより、合焦判定を行うことができる。
合焦判定における判定結果は、以下に示す様に○判定、×判定で出力される。
○判定:被写体のコントラストが十分、且つスキャンした距離範囲内の距離に被写体が存在する。
×判定:被写体のコントラストが不十分、若しくはスキャンした距離範囲外の距離に被写体が位置する。
また、×判定のうち、至近側方向のスキャンした距離範囲外に被写体が位置する場合を△判定とする。
山の形状を判断する為の、一定値以上の傾きで傾斜している部分の長さL、傾斜している部分の勾配SL/Lを、図7を用いて説明する。SLは傾斜している部分の山の高さを示す。山の頂上(A点)から傾斜が続いていると認められる点をD点、E点とし、D点とE点の幅を山の幅Lとする。傾斜が続いていると認める範囲は、A点から、所定量(Slope Thr)以上、焦点評価値が下がったスキャンポイントが続く範囲とする。スキャンポイントとは、連続的にフォーカスレンズを動かして、スキャン開始点からスキャン終了点まで移動する間に、焦点評価値を取得するポイントのことである。A点とD点の焦点評価値の差SL1とA点とE点の焦点評価値の差SL2の和SL1+SL2をSLとする。
図6のフローチャートにおいて、S601では、焦点評価値の最大値と最小値を求め、次にS602では焦点評価値が最大となるスキャンポイントを求め、S603へ進む。S603では、スキャンポイント、焦点評価値から、山の形状を判断する為のL、SLを求め、S604へ進む。
S604では、山の形状が至近側登り止まりかを判断する。至近側登り止まりだと判断するのは、次の2つの条件を満たす場合である。1つの条件は、焦点評価値が最大値となるスキャンポイントがスキャンを行った所定範囲における至近端であることである。もう1つの条件は、至近端のスキャンポイントでの焦点評価値と、至近端のスキャンポイントより1ポイント分無限遠よりのスキャンポイントでの焦点評価値との差が、所定値以上であることである。至近側登り止まりだと判断した場合は、S609へ進み、そうでなければS605へ進む。
S605では、山の形状が無限遠側登り止まりかを判断する。無限遠側登り止まりだと判断するのは、次の2つの条件を満たす場合である。1つの条件は、焦点評価値の最大値となるスキャンポイントがスキャンを行った所定範囲における無限遠端であることである。もう1つの条件は、無限遠端スキャンポイントにおける焦点評価値と、無限遠端スキャンポイントより1ポイント分至近端よりのスキャンポイントにおける焦点評価値との差が、所定値以上であることである。無限遠側登り止まりだと判断した場合は、S608へ進み、そうでなければS606へ進む。
S606では、一定値以上の傾きで傾斜している部分の長さLが所定値以上、且つ傾斜している部分の傾斜の平均値SL/Lが所定値以上、且つ焦点評価値の最大値(Max)と最小値(Min)の差が所定値以上であれば、S607へ進む。そうでなければ、S608へ進む。S607では、得られた焦点評価値が山状となっていて、被写体にコントラストがあり、焦点調節が可能である為、判定結果を○判定としている。S608では、得られた焦点評価値が山状となっておらず、被写体にコントラストがなく、焦点調節が不可能である為、判定結果を×判定としている。S609では、得られた焦点評価値が山状となってはいないが、至近側方向に登り続けている状態となっており、更に至近側に被写体ピークが存在している可能性がある為、判定結果を△判定としている。以上の様にして、合焦判定を行う。
次に、図27のフローチャートを参照しながら本実施例における被写体領域特定用AF枠設定処理について説明する。
まず、S2701では、電子ズームをしているかどうかを調べ、電子ズームをしていればS2705へ進み、そうでなければS2702へ進む。S2705では、電子ズーム時用のAF枠設定を行う。ここで電子ズームとは画面中央領域を拡大して操作表示部117に表示することである。この時、撮像素子108上の狭い領域を拡大するため、操作表示部117に表示される画像は、電子ズームしない時に比べて少ない画素数から生成されたものとなる。従って、電子ズーム時に操作表示部117に表示される画像に対して、電子ズームをしない時と同じ割合になる様にAF枠を設定すると、電子ズームしない時に比べてAF枠内の画素数も少なくなり、焦点評価値のS/Nが低下する。そのため、電子ズーム時と電子ズームをしない時とで、AF枠設定の仕方を変える必要がある。本実施例では、電子ズーム時は、画面中央付近に所定の大きさのAF枠を1枠設定することとする。
次に、S2702にて、現在の被写体輝度を取得する。本実施例の説明の都合上、この値を被写体輝度Bとする。この被写体輝度自体は、図2で示した処理と平行して実施されているAE動作の結果として得られるものであり、被写体輝度検出手段を含むAE処理部によって算出される。
次に、S2703にて、先に取得した被写体輝度Bと低照度閾値1とを比較する。この低照度閾値1とは被写体が十分に明るいか否かを示す閾値であり、この条件に該当する場合にはS2706に進む。S2706では、N1×N1のAF枠設定を行う。本実施例中では、図28(a)に示す様に、高輝度な状況ではAF枠の大きさを縦横の長さ共に画面の10%とし、N1=5で5×5のAF枠設定を実施するものとする。次に、S2709にて、被写体領域特定実施フラグをTRUEに設定し、処理を終了する。
先に図2を用いて説明した通り、このフラグ値の状態に基づいて図2のS208の被写体領域特定スキャンを実施するか、S209のコンティニュアスAFを実施するかが切り替わる。
一方で、被写体輝度Bが低照度閾値1未満の場合にはS2704に進む。S2704では、更に被写体輝度Bが低照度閾値1未満且つ低照度閾値2以上であるか否かを判断する。このとき、上記の条件に該当する場合にはS2707に進み、該当しない場合にはS2708に進む。S2707では、N2×N2のAF枠設定を行う。本実施例では、図28(b)に示す様に一定の暗さの状況ではAF枠の大きさを縦横の長さ共に画面の18%とし、N2=3で3×3のAF枠設定を実施するものとする。次に、S2709にて被写体領域特定実施フラグをTRUEに設定し、処理を終了する。
また、被写体輝度Bが低照度閾値2未満の場合にはS2708に進む。S2708では、図28(c)に示す様に焦点評価値の算出が困難になるような明るさでは、AF枠の大きさを縦横の長さ共に画面の25%とし、1×1のAF枠設定を実施するものとする。次に、S2710に進み、被写体領域特定実施フラグをFALSEに設定し処理を終了する。
以上説明してきた通り、本実施例における被写体領域特定用AF枠設定処理では、被写体の明るさに基づいて被写体領域特定用AFスキャンで使用するAF枠の大きさを切り替えることを特徴としている。一般的に被写体が暗く映像信号のレベルが低い場合、映像信号をそのまま用いたのでは輝度が足りないことに加えて、撮像素子のノイズの影響により焦点評価値の本来の信号成分が得にくくなる。そのため、本実施例の様にAF枠を構成する画素数を被写体の明るさに基づいて切り替えることで、低照度時であっても適切な焦点評価値の算出が可能となる。
なお、AF枠の大きさと数に関して、本発明は本実施例により限定されるものではない。例えば、AF枠の大きさは画面内の主被写体の存在確率を考慮して設定してもよいし、また横方向と縦方向でAF枠数を異なる様な設定であってもよい。
次に、図8は図2におけるS208の被写体領域特定AFスキャンを説明するフローチャートである。ここでは、画面内の主被写体の領域を特定するためのAFスキャンを行う。
まず、S801では、後述する手順に従って前回参照判定を行う(図10参照)。S802では、S801において前回参照判定した結果、前回と撮影シーンがあまり変わらないと判定された場合はS803へ進み、そうでなければS806へ進む。S803では、後述する手順に従って前回参照AFスキャンを行う(図11参照)。S804では、S803の前回参照AFスキャンにおいて主被写体領域が特定できたかどうかを調べ、主被写体領域が特定できたいればS805へ進み、そうでなければS806へ進む。
S805では、ピーク検出フラグをTRUEにする。S806では、後述する手順に従ってゾーンAFスキャンを行う(図14参照)。S807では、S806のゾーンAFスキャンにおいて主被写体領域が特定できたかどうかを調べ、主被写体領域が特定できていればS805へ進み、そうでなければS808へ進む。S808では、後述する手順に従って一様面判断を行う(図17参照)。S809では、S806のゾーンAFスキャンにおいて主被写体領域が特定できなかったので、画面内に予め設定してある所定領域にAF枠を設定する。ここで、所定領域は、例えば画面の中央領域に1枠設定するなど、主被写体が存在しそうな領域に設定する。S810では、後述する手順に従ってフォーカス駆動を行う(図20参照)。
図10は、上述の図8におけるS804の前回参照判定を説明するフローチャートである。ここでは、前回AFスキャンを行った撮影シーンに対して、今回、撮影シーンがあまり変化していないかどうかを判定する。
まず、S1001では、前回のAFスキャンにおいて主被写体領域を特定できていたかどうかを調べ、主被写体領域を特定できていればS1002へ進み、そうでなければS1006へ進む。S1002では、現在のフォーカスレンズ104の位置が所定位置より至近側にあるかどうかを調べ、至近側にあればS1003へ進み、そうでなければS1006へ進む。ここでは所定位置よりも至近側かどうかの判定を行ったが、所定位置より無限遠側かどうかの判定にしてもよい。
S1003では、前回AFスキャンを行った時間と今回の時間差が所定時間以内かどうかを調べ、所定時間以内であればS1004へ進み、そうでなければS1006へ進む。S1004では、前回のAFスキャン時のカメラの向きと同じかどうかを調べ、同じであればS1005へ進み、そうでなければS1006へ進む。ここで、カメラの向きとは例えばカメラの縦横位置のことであり、角速度センサ部125により検出する。S1005では、前回のAFスキャンでの撮影シーンとあまり変わらないと判定して本判定処理を終了する。S1006では、前回のAFスキャンと撮影シーンが大きく変わったと判定して本判定処理を終了する。
図11は、図8におけるS806の前回参照AFスキャンを説明するフローチャートである。まず、S1101では、現在のフォーカスレンズ104の位置を中心にスキャン範囲を第1の範囲に設定する。ここでは前回の撮影シーンとあまり変わらないと判断されているので、第1のスキャン範囲は狭い範囲とする。S1102では、フォーカスレンズ104をスキャン開始位置へと移動させる。S1103では、撮像素子108から読み出されたアナログ映像信号をA/D変換部109がデジタル信号に変換し、その出力から画像処理部110が輝度信号の高周波成分を抽出し、CPU115はこれを焦点評価値として記憶させる。S1104では、フォーカスレンズ104の現在位置を取得してCPU115が該位置のデータを記憶させる。
S1105では、CPU115が、撮影準備を指示するSW1の状態(ON/OFF)を判定し、該状態がON(オン)状態なら本処理を終了して図2のS212へ進み、OFF(オフ)状態の場合にはS1106へ進む。S1106では、前述した図5のシーン変化判定を行う。S1107では、CPU115がフォーカスレンズ104の現在位置がスキャン終了位置と等しいかを調べ、両者が等しい場合にはS1108へ進み、そうでなければS1109へ進む。S1108では、後述する主被写体領域判定を行う(図12参照)。S1109では、AF処理部105がフォーカスレンズ104をスキャン終了方向へ向かって所定量だけ移動させた後、S1103に戻る。
図12は、図11におけるS1108、後述する図14におけるS1411の主被写体領域判定を説明するフローチャートである。ここでは、画面内の主被写体領域が特定できたかどうかを判定する。図13は、図12における主被写体領域判定の例を説明する図である。この例では、AF枠サイズの大きさを画面の10%、N=5、スキャン範囲を0〜500、所定深度範囲を±10とする。なお、スキャン範囲及び所定深度範囲の数値はフォーカスレンズ104の位置を表す数値である。これは、図示しないフォーカスレンズ104の駆動用モータにステッピングモータを使用する場合のパルス数に相当し、値が大きい方が至近側とする。
まず、S1201では、設定した各AF枠すべてにおいて、前述した図6の合焦判定を行う。例えば、各AF枠において図13(a)に示す様な合焦判定結果となるとする。S1202では、各AF枠における焦点評価値のピーク位置(以下PeakPosと記す)を算出して記憶しておく。例えば、各AF枠において図13(b)に示す様なピーク位置算出結果になるとする。S1203では、設定しているAF枠が1枠かどうかを調べ、設定しているAF枠が1枠であればS1214へ進み、そうでなければS1204へ進む。
S1204では、中央M×M枠の各AF枠のPeakPosを至近順にソートし、ソートされた数をSとする。以下の説明ではM=3とする。図13の太線で囲んだ縦3枠、横3枠の合計9枠がこれを示す。ここで、S1201の合焦判定で×判定のAF枠ではピーク位置が算出できないのでソートの対象としない。例えば、図13(b)の場合は、至近順に410、400、400、400、100、100、100、90とソートされ、ソート数S=8となる。
S1205では、S1202で算出したM×M枠内のピーク位置の至近順を示すカウンタPを1に設定する。S1206では、ソート順でP番目のPeakPosをPeakPosPとする。例えば、図13(b)の例はP=1の場合、PeakPosP=410となる。S1207では、中央のM×M個のAF枠中において○判定であって且つPeakPosPの枠に対して所定深度範囲内のAF枠の「かたまり」を検出し、「かたまり」を構成するAF枠の数と各AF枠の位置を記憶しておく。ここで、「かたまり」とは、例えば、条件を満たすAF枠が上下左右に隣接している状態のものである。また、「かたまり」が複数存在する場合には、「かたまり」を構成するAF枠の数や「かたまり」の位置に基づいて、複数の「かたまり」のうちの1つを選択してもよい。
S1208では、中央のN×N個のAF枠中において、中央のM×M個のAF枠中の枠を1枠以上含む様に、○判定であって且つPeakPosPに対して所定深度内の「かたまり」を検出する。そして、「かたまり」を構成するAF枠の数と各AF枠の位置を記憶しておく。例えば、図13(a)、(b)の様な判定結果に対して、図13(c)に灰色の枠で示す様な「かたまり」が検出される。
S1209では、S1207またはS1208で検出した「かたまり」が中央枠を含む「かたまり」であるかどうかを調べ、中央枠を含む「かたまり」であればS1215へ進み、そうでなければS1210へ進む。S1210では、S1207またはS1208で検出した「かたまり」が、M×M枠内に所定枠数以上含む「かたまり」であるかどうかを調べ、あればS1215へ進み、そうでなければS1211へ進む。S1211では、S1207またはS1208で検出した「かたまり」が、中央M×M枠のうちの枠を1枠は含み、N×N枠内のAF枠を所定数以上含む「かたまり」であるかどうかを調べ、そうであればS1215へ進む。そうでなければS1212へ進む。S1212では、カウンタPに1を加える。S1213では、カウンタPがソート数Sよりも大きいどうかを調べ、カウンタPがソート数Sよりも大きければS1217へ進み、そうでなければS1206に戻る。
S1214では、S1201での合焦判定結果が○判定かどうかを調べ、○判定であればS1215へ進み、そうでなければS1217へ進む。S1215では、主被写体領域が特定できたと判定する。S1216では、かたまりを構成する各AF枠を主被写体領域と判断して選択して本判定処理を終了する。ここで設定しているAF枠が1枠の場合はその1枠を選択する。S1217では、主被写体領域の特定ができなかったと判定して本判定処理を終了する。
次に、図14は、図8におけるS809のゾーンAFスキャンを説明するフローチャートである。ここでゾーンとは、合焦可能距離範囲を複数の範囲に分割した際の1つ1つの範囲のことを指す。
まず、S1401では、フォーカスレンズ104をスキャン開始位置へと移動させる。ここで、スキャン開始位置は、例えば、無限遠端位置とする。S1402では、撮像素子108から読み出されたアナログ映像信号をA/D変換部109がデジタル信号に変換し、その出力から画像処理部110が輝度信号の高周波成分を抽出し、CPU115はこれを焦点評価値として記憶させる。S1403では、フォーカスレンズ104の現在位置を取得してCPU115が該位置のデータを記憶させる。
S1404では、CPU115が、撮影準備を指示するSW1の状態(ON/OFF)を判定し、該状態がON(オン)状態なら本処理を終了して図2のS212へ進み、OFF(オフ)状態の場合にはS1405へ進む。S1405では、前述した図5のシーン変化判定を行う。S1406では、フォーカスレンズ104が予め設定したゾーンの境界位置にあるかどうかを調べ、そうであればS1407へ進み、そうでなければS1409へ進む。S1407では、後述する手順に従ってゾーン更新判定を行う(図15参照)。ここでゾーン更新とは、或るゾーンをスキャンした後、引き続き隣接するゾーンをスキャンすることを指す。
S1408では、S1407で判定した結果、ゾーン更新すると判定されたかどうかを調べ、ゾーン更新すると判定されていればS1409へ進み、そうでなければS1411へ進む。S1409では、CPU115がフォーカスレンズ104の現在位置がスキャン終了位置と等しいかを調べ、両者が等しい場合にはS1411へ進み、そうでなければS1410へ進む。S1410では、フォーカスレンズ104をスキャン終了方向へ向かって所定量だけ移動させた後、S1402に戻る。S1411では、前述した図12の主被写体領域判定を行う。
図15は、図14におけるS1407のゾーン更新判定を説明するフローチャートである。ここでは、スキャン方向の先に主被写体が存在していそうかどうか、つまりAFスキャンを続けるかどうかを判定する。図16は、図15におけるゾーン更新判定の例を説明する図である。この例では、AF枠の大きさを画面の10%、N=5、M=3とする。
まず、S1501では、設定した各AF枠すべてにおいて前述した図6の合焦判定を行う。例えば、各AF枠において図16(a)に示す様な合焦判定結果となるとする。S1502では、最終ゾーンまでスキャンをしたかどうかを調べ、最終ゾーンまでスキャンしていればS1512へ進み、そうでなければS1503へ進む。S1503では、○判定枠があるかどうかを調べ、○判定枠があればS1504へ進み、そうでなければS1511へ進む。
S1504では、中央枠が△判定かどうかを調べ、中央枠が△判定であればS1511へ進み、そうでなければS1505へ進む。S1505では、中央M×M枠の中で△判定枠が所定枠数以上の「かたまり」としてあるかどうかを調べ、あればS1511へ進み、そうでなければS1506へ進む。図16では、例として所定数を2とする。S1506では、中央M×M枠のうちの枠を1枠以上含む様にN×N枠のAF枠中に△判定枠が所定枠数以上の「かたまり」としてあるかどうかを調べ、そうあればS1511へ進み、そうでなければS1507へ進む。図16では、例として所定数を4とする。S1507では、中央M×M枠中に○判定枠が所定数以上の「かたまり」としてあるかどうかを調べ、そうであればS1512へ進み、そうでなければS1508へ進む。図16では、例として所定数を5とする。
S1508では、中央枠が×判定かどうかを調べ、中央枠が×判定であればS1511へ進み、そうでなければS1509へ進む。S1509では、中央M×M枠の中で△判定枠または×判定枠が所定枠数以上の「かたまり」としてあればS1511へ進み、そうでなければS1510へ進む。図16では、例として所定数を2とする。S1510では、中央M×M枠のうちの枠を1枠以上含む様にN×N枠の全ての枠中に△判定枠または×判定枠が所定数以上の「かたまり」としてあるかどうかを調べ、そうであればS1511へ進み、そうでなければS1512へ進む。図16では、例として所定数を4とする。S1511では、「ゾーン更新する」と判定して本判定処理を終了する。S1512では、「ゾーン更新しない」と判定して本判定処理を終了する。
例えばN=5、M=3としたとき、図16(b)に示している灰色の領域の「かたまり」となり、「ゾーン更新する」と判定される。
図17は、図8におけるS811の一様面判断を説明するフローチャートである。ここで「一様面である状態」とは画面内に輝度差がなく、コントラストがないため、AFを行っても焦点評価値ピークが充分に得られない状態のことである。「一様面である状態」において撮影シーンが安定するたびに図2のS208の被写体領域特定AFスキャンが繰り返されると、画面のピント変動が無駄に繰り返されるため、煩わしい。そのため、この一様面判断フローでは、「一様面である状態」を判定した場合には、「一様面である状態」を判定しなくなるまでフォーカスレンズ104を停止する動作を行う。
まず、S1701では、後述する手順に従って一様面判定を行う(図18参照)。S1702では、S1701で判定した結果、撮影シーンが一様面であると判定したかどうかを調べ、一様面と判定していればS1703へと進み、そうでなければ本判断処理を終了する。S1703では、AF処理部105がフォーカスレンズ104を所定位置へと移動させる。ここで所定位置とは、例えば無限遠を被写界深度の無限遠側に含む過焦点距離とする。
S1704では、CPU115が、撮影準備を指示するSW1の状態(ON/OFF)を判定し、該状態がON(オン)状態なら本処理を終了して図2のS212へ進み、OFF(オフ)状態の場合にはS1705へ進む。S1705では、後述する一様面判定を行う。S1706では、S1705で判定した結果、撮影シーンが一様面であると判定したかどうかを調べ、一様面と判定していればS1704に戻り、そうでなければ本判断処理を終了して図2のS201に戻る。
以上の様にして、「一様面である状態」でなくなるまでフォーカスレンズ104を停止することができる。
図18は、図17におけるS1701、S1705の一様面判定を説明するフローチャートである。ここでは、画面内の輝度情報及び焦点評価値に基づいて「一様面である状態」かどうかを判定する。図19は、図18の一様面判定について図で説明したものである。図19(a)の[1]部分は、「一様面である状態」を示しており、図19(a)の[2]部分は、「一様面でない状態」を示している。
まず、S1801では、設定しているAF枠が1枠かどうかを調べ、設定しているAF枠が1枠であればS1805へ進み、そうでなければS1802へ進む。S1802では、「画面中央M×M枠と、画面全体N×N枠中の4隅M×M枠それぞれとの輝度積分値の差分」を算出する。例えば、枠サイズ10%、N=5、M=3とすると、図19(a)の風景の中で[1]部分の領域を撮影シーンとした場合、画面中央M×M枠の輝度積分値は図19(b)のAに示す灰色の領域の輝度値を積分したものとなる。また、画面全体N×N枠中の4隅M×M枠それぞれの輝度積分値は図19(b)のB、C、D、Eに示すそれぞれの灰色の領域の輝度値を積分したものとなる。それぞれの輝度積分値を、A、B、C、D、Eとすると、A−B、A−C、A−D、A−Eの絶対値が、「画面中央M×M枠と、画面全体N×N枠中の4隅M×M枠それぞれの輝度積分値の差分」となる。
S1803では、S1802で算出した「画面中央M×M枠と、画面全体N×N枠中の4隅M×M枠それぞれの輝度積分値の差分」のうち所定値以上の輝度差分となるものがあるかどうを調べ、そうであればS1807へ進む。そうでなければS1804へ進む。S1804では、中央M×M枠の各AF枠の焦点評価値を演算したものを新たな焦点評価値とする。演算の仕方は例えば加算する。S1805では、焦点評価値が所定値以上かどうかを調べ、所定値以上であればS1807へ進み、そうでなければS1806へ進む。S1806では、撮影シーンが「一様面である」と判定して本判定処理を終了する。S1807では、撮影シーンが「一様面ではない」と判定して本判定処理を終了する。
これにより、図19(a)の[1]部分の様な「一様面である状態」では、「一様面である」と判定することができ、図19(a)の[2]部分の様な「一様面ではない状態」では、「一様面ではない」と判定することができる。
図20は、図8におけるS813のフォーカス駆動を説明するフローチャートである。まず、S2001では、主被写体領域が特定できたかどうかを調べ、特定できていればS2002へ進み、そうでなければS2003へ進む。S2002では、選択したAF枠中の最至近位置にフォーカスを駆動して本処理を終了する。S2003では、中央M×M枠中に○判定があるかどうかを調べ、○判定があればS2004へ進み、そうでなければS2005へ進む。S2004では、中央M×M枠中の○判定のうち最至近位置にフォーカスを駆動して本処理を終了する。S2005では、予め記憶している位置(定点)へと移動させて本処理を終了する。ここで、定点は、例えば、被写体の存在確率の高い距離に設定する。
次に、図21は、図2におけるS209のコンティニュアスAFを説明するフローチャートである。まず、S2101では、合焦度判定フラグをTRUEにする。S2102では、設定した各AF枠で焦点評価値を取得する。
S2103では、設定しているAF枠が1枠かどうかを調べ、設定しているAF枠が1枠の場合はS2105へ進み、そうでない場合はS2104へ進む。S2104では、主被写体領域として選択したAF枠の焦点評価値を用いて演算した評価値をS2105以降に用いる焦点評価値として設定し直す。これにより、撮影シーンが変化して画面内の主被写体領域が変化しても、常に画面内の主被写体領域の焦点評価値を算出することができる。
S2105では焦点評価値に基づいて合焦度を算出する。本実施例では、焦点評価値に基づいて、合焦度を高、中、低の3段階で決定することにする。S2106では、CPU115が、撮影準備を指示するSW1の状態(ON/OFF)を判定し、該状態がON(オン)状態ならば本処理を終了して図2のS213へ進み、OFF(オフ)状態の場合にはS2107へ進む。S2107では前述した図5のシーン変化判定を行う。
S2108では、ピーク検出フラグがTRUEであるかどうかを調べ、TRUEであればS2125へ進み、FALSEであればS2109へ進む。S2109では、フォーカスレンズ104の現在位置を取得する。S2110では、焦点評価値の取得及びフォーカスレンズ104の現在位置の取得をカウントするための取得カウンタに1を加える。この取得カウンタは、初期化動作(図示略)において予め0に設定されているものとする。S2111では、取得カウンタの値が1かどうかを調べ、取得カウンタの値が1ならばS2114へ進み、取得カウンタの値が1でなければS2112へ進む。
S2112では、「今回の焦点評価値」が「前回の焦点評価値」よりも大きいかどうかを調べ、そうであればS2113へ進み、そうでなければS2120へ進む。S2113では、増加カウンタに1を加える。S2114では、今回の焦点評価値を焦点評価値の最大値としてCPU115に内蔵される図示しない演算メモリに記憶する。S2115では、フォーカスレンズ104の現在の位置を焦点評価値のピーク位置としてCPU115に内蔵される図示しない演算メモリに記憶する。S2116では、今回の焦点評価値を前回の焦点評価値としてCPU115に内蔵される図示しない演算メモリに記憶する。S2117では、フォーカスレンズ104の現在位置が移動範囲の端にあるかどうかを調べ、そうであれば、S2118へ進み、そうでなければS2119へ進む。S2118では、フォーカスレンズ104の移動方向を反転する。S2119では、フォーカスレンズ104を所定量移動する。
S2120では、「焦点評価値の最大値−今回の焦点評価値」が所定量より大きいかどうかを調べ、「焦点評価値の最大値−今回の焦点評価値」が所定量より大きければステップS2121へ進み、そうでなければステップS2116へ進む。ここで「焦点評価値の最大値−今回の焦点評価値」が所定量より大きいこと、即ち最大値から所定量減少していれば、その最大値をピントのピーク位置での値とみなす。S2121では、増加カウンタが0より大きいかどうかを調べ、0より大きければS2122へ進み、0より小さければS2116へ進む。S2122では、フォーカスレンズ104を前記S2115で記憶した焦点評価値が最大値となったピーク位置へ移動させる。S2123では、ピーク検出フラグをTRUEとする。S2124では、取得カウンタを0とする。
S2125では、今回の焦点評価値が焦点評価値の最大値に対して所定割合以上変動したかどうかを調べ、所定割合以上の大きな変動をしていればS2127へ進み、小さな変動であればS2126へ進む。S2126では、フォーカスレンズ104の位置をそのまま保持する。S2127では、焦点評価値が最大となるフォーカスレンズ位置を再び求め直すため、ピーク検出フラグをFALSEとし、焦点評価値の最大値及びピーク位置をリセットする。S2128では、増加カウンタをリセットする。
以上の様にして、コンティニュアスAF動作では常に主被写体が合焦状態となる様にフォーカスレンズを駆動する。
図22は、図2におけるS211のシーン不安定判断を説明するフローチャートである。まず、S2201では、角速度センサ部125で検出したカメラ動作量が所定量以上となっているかどうかを調べ、所定量以上であればS2205へ進み、そうでなければS2202でへ進む。S2202では、前回からの輝度変化量が所定量以上かどうかを調べ、所定量以上であればS2205へ進み、そうでなければS2203へ進む。S2203では、顔検出モジュール123で検出した顔検出状態が変化したかどうかを調べ、顔検出状態が変化していればS2205へ進み、そうでなければS2204へ進む。ここで、顔検出状態とは、例えば、顔検出されているかどうかである。つまり、前回のシーン不安定判断で顔検出されていて今回のシーン不安定判断で顔検出されていなければ、顔検出状態が変化したことになる。S2204では、撮影シーンが変化していない(シーンが不安定でない)と判断して本処理を終了する。S2205では、撮影シーンが変化した(シーンが不安定である)と判断して本処理を終了する。
次に、図23は、図2におけるS213の撮影処理を説明するフローチャートである。まず、S2301では、AE処理部103で本露光用のAE処理を行う。S2302では、後述する手順に従って本露光用のAFを行う(図24参照)。S2303では、CPU115は撮影スイッチSW2(122)の状態(ON/OFF)を判定し、該状態がONならばS2305へ進むが、OFF状態の場合にはS2304へ進む。S2304では、撮影準備を指示するSW1の状態(ON/OFF)を判定し、該状態がON(オン)状態ならS2303へ進み、OFF(オフ)状態の場合には本処理を終了する。S2305では、後述する手順に従って本露光処理を行い(図26参照)、本処理を終了する。
図24は、図23におけるS2302の本露光用AFを説明するフローチャートである。まず、S2401では、本露光用のAF枠設定を行う。本露光用のAF枠設定は、中央領域に所定の大きさで1枠設定しても、N×N枠の複数枠で設定してもよい。S2402では、主被写体検出フラグがTRUEであるかどうかを調べ、TRUEであればS2403へ進み、そうでなければS2409へ進む。S2403では、図21におけるS2105で算出した合焦度が「高」であるかどうかを調べ、合焦度が「高」であればS2404へ進み、そうでなければS2405へ進む。
S2404では、現在のフォーカスレンズ104の位置を中心にスキャン範囲を第1の範囲(1)に設定する。ここではコンティニュアスAF動作により主被写体にほぼピントが合っている状態、つまり焦点評価値がピークを示す合焦位置付近にフォーカスレンズが位置すると判断して、狭いスキャン範囲を設定する。S2405では、S2105で算出した合焦度が「中」であるかどうかを調べ、合焦度が「中」であればS2406へ進み、そうでなければS2407へ進む。S2406では、現在のフォーカスレンズ104の位置を中心にスキャン範囲を第2の範囲(2)に設定する。ここではコンティニュアスAF動作により合焦位置付近にフォーカスレンズが位置しているが、合焦度が「高」状態ほどではないと判断して第1のスキャン範囲より範囲を広げた狭い範囲とする。S2407では、フォーカスレンズ104の現在位置がマクロ領域かどうかを調べ、マクロ領域であればS2408へ進み、そうでなければS2409へ進む。S2408では、予め記憶してあるマクロ領域であるスキャン範囲を第3の範囲(3)に設定する。S2409では、スキャン範囲を予め記憶してある焦点検出可能範囲全域である第4のスキャン範囲(4)に設定する。
S2410では、後述する手順に従って本露光用AFスキャンを行う(図25参照)。S2411では、後述する図25のS2506で算出したピーク位置にフォーカスレンズ104を移動させる。
図25は、図24におけるS2405の本露光用AFスキャンを説明するフローチャートである。まず、S2501では、フォーカスレンズ104をスキャン開始位置へと移動させる。ここでスキャン開始位置とは、図24のS2404又はS2406又はS2408又はS2409で設定したスキャン範囲の端位置とする。S2502では、撮像素子108から読み出されたアナログ映像信号をA/D変換部109がデジタル信号に変換し、その出力から画像処理部110が輝度信号の高周波成分を抽出し、CPU115はこれを焦点評価値として記憶させる。S2503では、フォーカスレンズ104の現在位置を取得してCPU115が該位置のデータを記憶させる。S2504では、CPU115がフォーカスレンズ104の現在位置がスキャン終了位置と等しいかを調べ、両者が等しい場合にはS2506へ進み、そうでなければS2505へ進む。S2505では、フォーカスレンズ104をスキャン終了方向へ向かって所定量だけ移動させた後、S2502に戻る。S2506では、S2502で記憶した焦点評価値とそのレンズ位置から、焦点評価値のピーク位置を計算する。焦点評価値のピーク位置を計算するにあたって、AF枠を複数枠設定した場合は、図12で説明した主被写体領域判定により決定した主被写体領域の最至近ピーク位置に基づいて計算してもよいし、別の判断の仕方をしてピーク位置計算を行ってもよい。
図26は、図23におけるS2305の本露光処理を説明するフローチャートである。まず、S2601における撮像素子108の露光後に、S2602では撮像素子108に蓄積されたデータを読み出す。S2603では、A/D変換部109で撮像素子108から読み出したアナログ信号をデジタル信号に変換する。S2604では、画像処理部110で、A/D変換部109から出力されるデジタル信号に対して各種画像処理を施す。S2605では、S2604で処理した画像をCPU115の制御下でJPEGなどのフォーマットにしたがって圧縮する。S2606では、S2605で圧縮したデータを画像記録部114に送り、記録させる様にCPU115が制御を行う。
以上説明した様に、本実施例によれば、撮影シーンが低照度であっても主被写体の検出性能の低下を抑えることが可能となり、撮影準備指示前に主被写体領域を特定してピントを合わせ続ける。このことで、撮影準備指示後に主被写体に素早くピントを合わせることが可能となる。
図面を参照しながら本発明の実施例2について説明する。実施例2では、実施例1における図2のS205の被写体特定用AF枠設定に関して、被写体輝度に基づいて撮像素子の駆動、AF枠の設定、焦点評価値を算出する際の抽出する周波数帯域を切り替える。このことにより、低照度時の焦点評価値の算出を改善するものである。
図29のフローチャートを参照しながら本実施例における被写体領域特定用AF枠設定処理について説明する。まず、S2901にて、現在の被写体輝度を取得する。本実施例の説明の都合上、この値を被写体輝度Bとする。この被写体輝度自体は、図2で示した処理と平行して実施されているAE動作の結果として得られるものであり、AE処理部によって算出される。
次に、S2902にて、先に取得した被写体輝度Bと低照度閾値1とを比較する。この低照度閾値1とは、被写体が十分に明るいか否かを示す閾値であり、この条件に該当する場合にはS2904に進む。S2904では、センサの駆動Aに切り替える。このセンサ駆動Aとは、センサからの信号の読み出し時間を優先し、垂直方向のライン数が低照度時と比べて少なくなる様に設定された駆動とする。
次に、S2907では、バンドパスフィルタの設定を、抽出する周波数帯域Aとなる様に設定する。これは、本実施例では水平方向の輝度の高周波成分を抽出して焦点評価値を算出するものとし、センサ駆動Aの水平方向の画素数に応じて、適切な周波数帯域の成分を抽出するためである。
次に、S2910にて、電子ズームをしているかどうかを調べ、電子ズームをしていればS2912へ進み、そうでなければS2913へ進む。S2912では、電子ズーム時用のAF枠設定を行う。ここで、電子ズームとは、画面中央領域を拡大して操作表示部117に表示することである。拡大するため操作表示部に表示される画像の画素数は電子ズームしない時に比べて少なくなる。従って、電子ズーム時に操作表示部117に表示される画像に対して電子ズームをしない時と同じ割合になる様にAF枠を設定すると、電子ズームしない時に比べてAF枠内の画素数が少なくなり、焦点評価値のS/Nが低下する。そのため、電子ズーム時と電子ズームをしない時とで、AF枠設定の仕方を変える必要がある。本実施例では、電子ズーム時は、画面中央付近に所定の大きさのAF枠を1枠設定することとする。
一方、電子ズームでない場合にはS2913に進み、N×NのAF枠設定を行う。本実施例では、図30(a)に示す様に、高輝度な状況ではAF枠の大きさを縦横の長さ共に画面の10%とし、N=5で5×5のAF枠設定を実施するものとする。次に、S2918にて、被写体領域特定実施フラグをTRUEに設定し処理を終了する。
また、被写体輝度Bが低照度閾値1未満の場合にはS2903に進む。S2903では、更に被写体輝度Bが低照度閾値1未満且つ低照度閾値2以上であるか否かを判断する。このとき上記の条件に該当する場合にはS2905に進み、該当しない場合にはS2906に進む。
S2905では、センサ駆動Bに切り替える。このセンサ駆動BとはS/Nの向上優先し、垂直方向のライン数が高輝度時より多く設定された駆動とする。次に、S2908では、バンドパスフィルタの設定を、抽出する周波数帯域Bとなる様に設定する。この様に、低輝度時にあわせてセンサ駆動と抽出する周波数帯域を決定し、低照度時のS/N向上を図る。S2910以降の処理については、先に述べたものと同様である。ただし、S2913におけるAF枠の設定に関して、図30(b)の様にAF枠の数は高輝度時の図30(a)と同じであるが、センサ駆動の違いによりAF枠を構成する画素の数は異なる。これは、S2912における電子ズーム時のAF枠設定も同様である。
一方で、S2903にて被写体輝度Bが低照度閾値2未満の場合にはS2906に進む。S2906では、センサの駆動Bに切り替える。このセンサ駆動Bとは、S/Nの向上を優先し、垂直方向のライン数が高輝度時より多く設定された駆動とする。次に、S2909では、バンドパスフィルタの設定を、抽出する周波数帯域Bとなる様に設定する。S2911では、電子ズームをしているかどうかを調べ、電子ズームをしていればS2915へ進み、そうでなければS2914へ進む。S2914では、図30(c)に示す様に、焦点評価値の算出が困難になるような明るさでは、AF枠の大きさを縦横の長さ共に画面の25%とし、1×1のAF枠設定を実施するものとする。
一方で、電子ズーム時には、S2915にて画面中央付近に所定の大きさのAF枠を1枠設定することとする。S2916では、フォーカスレンズを所定の位置に移動させる。本実施例では過焦点距離とする。
次に、S2917にて、被写体領域特定実施フラグをFALSEに設定する。これにより被写体領域特定用AF枠設定処理の後、図2のS208の被写体領域特定AFスキャンを実施せず、直接S209のコンティニュアスAFを実施する様にする。
次に、S2919に進み、ピーク検出フラグをTRUEに設定する。このピーク検出フラグは、図21のS2108にて参照されるフラグであり、この場合は現在のフォーカスレンズ位置にて停止し、図21のS2102で得られた焦点評価値を基準値としてS215以降の焦点評価値の変化を監視することになる。つまり、焦点評価値の算出が困難な被写体の明るさが継続する限り、以後無駄なピント調整はさせない様にすることが可能となる。
なお、本実施例では、センサ駆動の違いに関して、画素の間引きを前提とした水平方向の画素数、垂直方向のライン数の違いとして説明してきた。しかし、本実施例はこれに限定されるものではなく、例えば、センサのS/Nを向上する方法としてセンサ内での画素加算等の技術が知られており、明るさに応じたセンサ駆動の切り替えとは、この様な技術の組み合わせを含んでもよい。
以上説明した様に、本実施例によれば、撮影シーンが低照度であっても主被写体の検出性能の低下を抑えることが可能となり、撮影準備指示前に主被写体領域を特定してピントを合わせ続ける。このことで、撮影準備指示後に主被写体に素早くピントを合わせることが可能となる。
本発明の焦点調節装置や方法は、焦点調節機能を有する電子スチルカメラなどの撮像装置等に適用することができる。
101:撮影レンズ
102:絞り及びシャッター
103:AE処理部
104:フォーカスレンズ
105:AF処理部
108:撮像素子
109:A/D変換部
110:画像処理部
114:画像記録部
115:システム制御部
120:メインスイッチ
121:撮影スタンバイスイッチ
122:撮影スイッチ
123:顔検出モジュール
124:動体検出部
125:角速度センサ部

Claims (5)

  1. フォーカスレンズを用いて結像された被写体像を電気信号に変換する光電変換手段と、
    前記光電変換手段の出力信号から焦点検出領域における特定周波数帯域の信号成分を抽出する抽出手段と、
    撮影準備前に、前記フォーカスレンズを所定の範囲にわたって移動させると共に、設定された焦点検出領域における前記抽出手段の出力信号を前記フォーカスレンズの位置と関連づけて取得するAFスキャン動作を行うことにより合焦すべき被写体領域を特定する第1の動作を実施し、撮影準備時に、特定された前記被写体領域に基づいて前記AFスキャン動作を行って合焦動作をする第2の動作を実施するよう制御する制御手段と、
    前記焦点検出領域の明るさを検出する検出手段とを有し、
    前記制御手段は、撮影準備前において
    前記検出手段によって得られた明るさが閾値未満の場合には、前記フォーカスレンズを所定量移動する前に抽出した前記抽出手段の出力信号と移動の後に抽出した前記抽出手段の出力信号に基づいて、前記フォーカスレンズを次に移動する際の移動方向を決定して、当該移動方向に前記フォーカスレンズを移動し、前記移動動作を繰り返し行うことにより前記フォーカスレンズを前記抽出手段の出力信号のピーク位置に移動するコンティニュアスAF動作を行う第3の動作を実施するよう制御することを特徴とする焦点調節装置。
  2. 前記制御手段は、撮影準備前において、
    前記検出手段によって得られた明るさが前記閾値以上第1の閾値未満の場合には、前記光電変換手段の動作モードおよび前記抽出手段における周波数帯域を前記第1の動作とは異なる様に設定した前記AFスキャン動作を行って合焦すべき被写体領域を特定する動作を実施すること特徴とする請求項1に記載の焦点調節装置。
  3. 前記制御手段は、撮影準備前において、
    前記検出手段によって得られた明るさが前記閾値以上第1の閾値未満の場合には、前記焦点検出領域の大きさを前記第1の動作とは異なる様に設定した前記AFスキャン動作を行って合焦すべき被写体領域を特定する動作を実施することを特徴とする請求項1又は2に記載の焦点調節装置。
  4. 前記制御手段は、撮影準備前において、
    前記検出手段によって得られた明るさが前記閾値以上第1の閾値未満の場合には、前記焦点検出領域の数を第1の動作とは異なる様に設定した前記AFスキャン動作を行って合焦すべき被写体領域を特定する動作を実施することを特徴とする請求項1から3の何れか1項に記載の焦点調節装置。
  5. フォーカスレンズを用いて結像された被写体像を電気信号に変換する光電変換手段と、前記光電変換手段の出力信号から焦点検出領域における特定周波数帯域の信号成分を抽出する抽出手段と、装置全体の動作を制御する制御手段と、前記焦点検出領域の明るさを検出する検出手段とを有する撮像装置における焦点調節方法であって、
    撮影準備前に、前記フォーカスレンズを所定の範囲にわたって移動させると共に、設定された焦点検出領域における前記抽出手段の出力信号を前記フォーカスレンズの位置と関連づけて取得するAFスキャン動作を行うことにより合焦すべき被写体領域を特定する第1の動作を実施する第1の工程と、
    撮影準備時に、特定された前記被写体領域に基づいて前記AFスキャン動作を行って合焦動作をする第2の動作を実施する第2の工程と、
    撮影準備前において
    前記検出手段によって得られた明るさが閾値未満の場合には、前記フォーカスレンズを所定量移動する前に抽出した前記抽出手段の出力信号と移動の後に抽出した前記抽出手段の出力信号に基づいて、前記フォーカスレンズを次に移動する際の移動方向を決定して、当該移動方向に前記フォーカスレンズを移動し、前記移動動作を繰り返し行うことにより前記フォーカスレンズを前記抽出手段の出力信号のピーク位置に移動するコンティニュアスAF動作を行う第3の動作を実施する第3の工程とを含むことを特徴とする焦点調節方法。
JP2009034111A 2009-02-17 2009-02-17 焦点調節装置、及び焦点調節方法 Expired - Fee Related JP5406553B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009034111A JP5406553B2 (ja) 2009-02-17 2009-02-17 焦点調節装置、及び焦点調節方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009034111A JP5406553B2 (ja) 2009-02-17 2009-02-17 焦点調節装置、及び焦点調節方法

Publications (2)

Publication Number Publication Date
JP2010193074A JP2010193074A (ja) 2010-09-02
JP5406553B2 true JP5406553B2 (ja) 2014-02-05

Family

ID=42818658

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009034111A Expired - Fee Related JP5406553B2 (ja) 2009-02-17 2009-02-17 焦点調節装置、及び焦点調節方法

Country Status (1)

Country Link
JP (1) JP5406553B2 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5850680B2 (ja) * 2011-09-09 2016-02-03 キヤノン株式会社 撮像装置及びその制御方法
JP6057608B2 (ja) * 2012-08-20 2017-01-11 キヤノン株式会社 焦点調節装置及びその制御方法
JP6202843B2 (ja) * 2013-03-19 2017-09-27 キヤノン株式会社 撮像装置
JP6463053B2 (ja) * 2014-09-12 2019-01-30 キヤノン株式会社 自動合焦装置、および自動合焦方法
JP6590496B2 (ja) * 2015-03-13 2019-10-16 キヤノン株式会社 撮像装置、その制御方法、及びプログラム

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS60143068A (ja) * 1983-12-29 1985-07-29 Matsushita Electric Ind Co Ltd 自動焦点整合装置
JPH02163714A (ja) * 1988-12-16 1990-06-25 Kyocera Corp 自動焦点調節装置
JP3673599B2 (ja) * 1996-05-24 2005-07-20 キヤノン株式会社 自動合焦装置
JPH1184228A (ja) * 1997-09-08 1999-03-26 Olympus Optical Co Ltd 自動焦点調節装置
JP2000155257A (ja) * 1998-11-19 2000-06-06 Fuji Photo Film Co Ltd 自動焦点調節装置および方法
JP4106485B2 (ja) * 2002-03-29 2008-06-25 株式会社ニコン カメラ
JP4824586B2 (ja) * 2007-01-18 2011-11-30 株式会社リコー 撮像装置
JP2008176152A (ja) * 2007-01-19 2008-07-31 Canon Inc 撮像装置

Also Published As

Publication number Publication date
JP2010193074A (ja) 2010-09-02

Similar Documents

Publication Publication Date Title
JP5376986B2 (ja) 焦点調節装置、及び焦点調節方法
JP5339954B2 (ja) 焦点調節装置及び焦点調節方法
JP5300520B2 (ja) 焦点調節装置、及び焦点調節方法
JP5297222B2 (ja) 焦点調節装置、及び焦点調節方法
JP5406552B2 (ja) 焦点調節装置、及び焦点調節方法
JP5339955B2 (ja) 焦点調節装置及び焦点調節方法
JP2003248164A (ja) オートフォーカスアダプタ
JP5406553B2 (ja) 焦点調節装置、及び焦点調節方法
US9122125B2 (en) Image-capturing apparatus and method of controlling the same
JP5300521B2 (ja) 焦点調節装置、及び焦点調節方法
JP6139960B2 (ja) 撮像装置およびその制御方法
JP4997043B2 (ja) 撮像装置、方法およびプログラム
JP5855054B2 (ja) 焦点調節装置及び焦点調節方法
JP7289714B2 (ja) 焦点調整装置、撮像装置、焦点調整方法、およびプログラム
JP5355381B2 (ja) 撮像装置及びその合焦制御方法
JP6590496B2 (ja) 撮像装置、その制御方法、及びプログラム
JP2011043633A (ja) 焦点調節装置、及び焦点調節方法
JP2011043632A (ja) 焦点調節装置、及び焦点調節方法
JP6463053B2 (ja) 自動合焦装置、および自動合焦方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120216

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130307

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130314

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130509

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20131004

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20131101

R151 Written notification of patent or utility model registration

Ref document number: 5406553

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: R3D03

LAPS Cancellation because of no payment of annual fees