JP7079161B2 - 撮像装置及びその制御方法 - Google Patents

撮像装置及びその制御方法 Download PDF

Info

Publication number
JP7079161B2
JP7079161B2 JP2018125295A JP2018125295A JP7079161B2 JP 7079161 B2 JP7079161 B2 JP 7079161B2 JP 2018125295 A JP2018125295 A JP 2018125295A JP 2018125295 A JP2018125295 A JP 2018125295A JP 7079161 B2 JP7079161 B2 JP 7079161B2
Authority
JP
Japan
Prior art keywords
index
image
state
aperture
focus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018125295A
Other languages
English (en)
Other versions
JP2020003725A5 (ja
JP2020003725A (ja
Inventor
遼太朗 高橋
淳一 今宮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2018125295A priority Critical patent/JP7079161B2/ja
Priority to US16/451,213 priority patent/US10616469B2/en
Publication of JP2020003725A publication Critical patent/JP2020003725A/ja
Publication of JP2020003725A5 publication Critical patent/JP2020003725A5/ja
Application granted granted Critical
Publication of JP7079161B2 publication Critical patent/JP7079161B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • H04N23/672Focus control based on electronic image sensor signals based on the phase difference signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/55Optical parts specially adapted for electronic image sensors; Mounting thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635Region indicators; Field of view indicators
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • H04N23/675Focus control based on electronic image sensor signals comprising setting of focusing regions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/69Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Indication In Cameras, And Counting Of Exposures (AREA)
  • Focusing (AREA)
  • Viewfinders (AREA)
  • Automatic Focus Adjustment (AREA)

Description

本発明は、撮像装置及びその制御方法に関し、特に、撮像装置における焦点状態を表示する技術に関する。
従来より、測距センサや複数の撮像センサによって被写体の焦点状態を算出し、この焦点状態に基づいて、被写体の前ピン・後ピン状態やピントのずれ具合を表示することが提案されている。このような表示機能はフォーカスガイド機能と呼ばれる。
特許文献1では、ライブビュー画像を表示するとともに、ライブビュー画像に重畳して、フォーカス調整の対象とすべき被写体が表示されている位置に合焦度合いを示す表示アイテムを表示することが提案されている。
特開2016-197180号公報
しかしながら、特許文献1では、フォーカス調整の対象とすべき被写体に対して、前ピン・後ピン状態やピントのずれ具合に基づいてガイドの表示形態を変更するが、絞り値が変動する過渡状態における表示の安定性については言及されていない。
本発明は上記問題点を鑑みてなされたものであり、絞り値が変動する過渡状態において、焦点状態を示すガイド表示の安定性を良くすることを目的とする。
上記目的を達成するために、本発明の撮像装置は、絞りを介して入射する光を撮像信号に変換して得られた画像を周期的に出力する撮像手段と、前記絞りの開口状態を周期的に取得する取得手段と、前記画像の焦点状態を当該画像の露光時の前記絞りの開口状態に基づいて正規化した値に基づいて、前記画像の焦点状態を表す第1の指標を生成する生成手段と、前記画像と、当該画像の焦点状態を示す指標とを重畳して表示手段に表示する制御手段と、前記表示手段に表示された指標を、第2の指標として記憶する記憶手段と、前記画像の露光時と、前記生成手段により前記第1の指標を生成する際との少なくともいずれかにおける前記絞りの開口状態が、変動中でない場合に前記第1の指標を選択し、変動中の場合に前記第2の指標を選択する選択手段と、を有し、前記制御手段は、前記選択手段により選択された指標を表示する。
本発明によれば、絞り値が変動する過渡状態において、焦点状態を示すガイド表示の安定性を良くすることが可能となる。
本発明の実施形態における撮像システムの概略構成を示すブロック図。 実施形態における撮像素子の画素配列の概略図。 実施形態におけるフォーカスガイド表示の一例を示す図。 実施形態におけるフォーカスガイド表示処理に関するフローチャート。 実施形態におけるフォーカスガイド設定処理のフローチャート。 第1の実施形態における絞り込みを行う場合の、露光、読み出し、デフォーカス量演算、及びフォーカスガイド表示処理を行うタイミング、及び各タイミングにおける絞り値を示す図。 第1実施形態におけるフォーカスガイドとライブビューの重畳表示処理を示すフローチャート。 絞り込みを行う場合の本発明の効果を説明する図。 第2実施形態におけるフォーカスガイドとライブビューの重畳表示処理を示すフローチャート。
以下、添付図面を参照して本発明を実施するための形態を詳細に説明する。
●撮像システムの構成
図1は、本発明の実施形態に係るフォーカスガイド機能を備える撮像システムの概略構成を示すブロック図である。なお、本実施形態では、レンズ交換可能な撮像システムとして説明するが、固定レンズを有する撮像装置であってもよい。
図1に示すように、本実施形態における撮像システムは、レンズユニット10とカメラ本体20から構成されている。そして、レンズユニット10全体の動作を統括制御するレンズ制御部106と、撮像システム全体の動作を統括するカメラ制御部207がデータを通信している。
まず、レンズユニット10の構成について説明する。レンズユニット10は、固定レンズ101、絞り102、フォーカスレンズ103、ズームレンズ(不図示)等により構成される撮像光学系を有する。絞り102は、絞り駆動部104によって駆動され、後述する撮像素子201への入射光量を制御する。フォーカスレンズ103は、フォーカスレンズ駆動部105によって駆動され、焦点調節に用いられる。不図示のズームレンズは、ズームレンズ駆動部によって駆動されることにより、ズームの調節に用いられる。なお、本実施形態においては、ズームレンズ及びズームレンズ駆動部は必須の構成ではなく、無くても構わない。
絞り駆動部104、フォーカスレンズ駆動部105、ズームレンズ駆動部はレンズ制御部106によって制御され、絞り102の開口径や、フォーカスレンズ103及びズームレンズの位置が制御される。ユーザによりレンズ操作部107に備えられたフォーカスリングやズームリング等の操作により、フォーカスやズームなどの操作が行われた場合には、レンズ制御部106がユーザ操作に応じた制御を行う。レンズ制御部106は、後述するカメラ制御部207から受信した制御命令や制御情報に応じて、絞り駆動部104やフォーカスレンズ駆動部105、ズームレンズ駆動部の制御を行うと共に、レンズ情報をカメラ制御部207に送信する。
次に、本実施形態に係るフォーカスガイド機能を備えるカメラ本体20の構成について説明する。カメラ本体20において、撮像素子201は、CCDやCMOSセンサにより構成され、レンズユニット10の撮像光学系を介して入射した光が撮像素子201の受光面上に結像される。そして、形成された被写体像が撮像素子201のフォトダイオード(光電変換部)によって入射光量に応じた電荷に光電変換され、蓄積される。各フォトダイオードに蓄積された電荷は、カメラ制御部207の指令に従ってタイミングジェネレータ209から与えられる駆動パルスに基づいて、電荷に応じた電圧信号として撮像素子201から順次読み出される。なお、撮像素子201の詳細構成については後述するが、本実施形態における撮像素子201は、通常の撮像信号の他に、位相差方式の焦点検出に用いることのできる一対のフォーカス用信号を出力することができる。
撮像素子201から読み出された撮像信号及びフォーカス用信号は、CDS/AGC回路202に入力され、リセットノイズを除去する為の相関二重サンプリング、ゲインの調節、信号のデジタル化を行う。CDS/AGC回路202は、処理した撮像信号をカメラ信号処理部203に、フォーカス用信号をフォーカス信号処理部204に出力する。
カメラ信号処理部203は、CDS/AGC回路202から出力された撮像信号に対して各種の画像処理を施して、映像信号を生成する。また、撮像信号を用いて測光を行い、最適な明るさになるようにシャッタースピードや絞り値、感度を決定する。表示部205は、LCDや有機EL等の表示デバイスであり、カメラ信号処理部203から出力された映像信号に基づく画像を表示する。また、撮像信号の記録を行う記録モードの時には、撮像信号はカメラ信号処理部203から記録部206に送られ、光ディスク、半導体メモリ、磁気テープ等の記録媒体に記録される。
フォーカス信号処理部204は、CDS/AGC回路202から出力された一対のフォーカス用信号を基に相関演算を行って焦点状態を検出する。ここでは、相関量、像ずれ量、デフォーカス量、信頼性情報(二像一致度、二像急峻度、コントラスト情報、飽和情報、キズ情報等)を算出する。なお、像ずれ量からデフォーカス量へは、変換係数Kを用いて変換する。そして、算出したデフォーカス量と信頼性情報をカメラ制御部207へ出力する。また、カメラ制御部207は、取得したデフォーカス量や信頼性情報を基に、これらを算出する設定の変更をフォーカス信号処理部204に通知する。
カメラ制御部207は、カメラ本体20内の各構成と情報をやり取りして制御を行う。また、カメラ本体20内の処理だけでなく、ユーザにより操作されたカメラ操作部208からの入力に応じて、電源のON/OFF、設定の変更、記録を制御する。更に、オートフォーカス(AF)/マニュアルフォーカス(MF)制御の切り替え、カメラ信号処理部203により得られる絞り値に基づく絞り込みの制御、記録映像の確認等のユーザ操作に応じた様々な機能を実行する。また、先述したようにレンズユニット10内のレンズ制御部106と情報をやり取りし、撮像光学系の制御命令や制御情報を送信したり、レンズユニット10内の情報を取得する。
●撮像素子の構成
図2は、本実施形態における撮像素子201の画素配列の概略を示す図であり、撮像素子201として用いられる2次元CMOSセンサの画素配列を、撮像画素の4列×4行の範囲で(焦点検出画素の配列としては8列×4行の範囲)で示したものである。
本実施形態において、画素群200は2列×2行の画素からなり、ベイヤー配列のカラーフィルタにより覆われているものとする。そして、各画素群200において、R(赤)の分光感度を有する画素200Rが左上の位置に、G(緑)の分光感度を有する画素200Gが右上と左下の位置に、B(青)の分光感度を有する画素200Bが右下の位置に配置されている。さらに、本実施形態の撮像素子201は、撮像面位相差方式の焦点検出を行うために、各画素は、1つのマイクロレンズ215に対し、複数のフォトダイオード(光電変換部)を保持している。本実施形態では、各画素、2列×1行に配列された2つのフォトダイオード211,212により構成されているものとする。
撮像素子201は、図2に示す2列×2行の画素(4列×2行のフォトダイオード)からなる画素群200を撮像面上に多数配置することで、撮像信号及びフォーカス用信号の取得を可能としている。
このような構成を有する各画素では、異なる瞳領域を通過した光束をマイクロレンズ215で分離し、フォトダイオード211,212に結像する。そして、2つのフォトダイオード211,212からの信号を加算した信号(A+B信号)を撮像信号、個々のフォトダイオード211,212からそれぞれ読み出した2つの信号(A信号、B信号)をフォーカス用信号(焦点検出用信号)として用いる。なお、撮像信号とフォーカス用信号とをそれぞれ読み出してもよいが、処理負荷を考慮して、次のようにしてもよい。即ち、撮像信号(A+B信号)と、フォトダイオード211,212のいずれか一方のフォーカス用信号(例えばA信号)とを読み出し、差分を取ることで、視差を有するもう一方のフォーカス用信号(例えばB信号)を取得する。
なお、本実施形態では各画素において、1つのマイクロレンズ215に対して2つのフォトダイオード211,212を有する構成としているが、フォトダイオードの数は2つに限定されず、それ以上であってもよい。また、瞳分割方向も水平方向に限られるものでは無く、垂直方向であっても良い。また、マイクロレンズ215に対して受光部の開口位置が異なる画素を複数有するようにしてもよい。つまり、結果としてA信号とB信号といった位相差検出用の2つの信号が得られる構成であればよい。また、本発明は図2に示すように全ての画素が複数のフォトダイオードを有する構成に限らず、撮像素子201を構成する通常画素内に、図2に示すような焦点検出用画素を離散的に設ける構成であってもよい。また、同じ撮像素子内において互いに異なる分割方法で分割された複数種類の画素が含まれてもよい。
●フォーカスガイドの表示形態
次に、本実施形態におけるフォーカスガイドの表示形態について、図3を用いて説明する。本実施形態では、フォーカスガイド表示の種類は、第1から第4の表示形態の4つとし、表示パーツ301~311により、検出された焦点状態を表現する。表示パーツ301~311は、フォーカス枠300の上部に配置している。
図3(a)は、第1の表示形態の一例で、被写体に合焦していると判定された状態を示す。合焦と判定されている状態では、内向きの表示パーツ301と外向きの表示パーツ302の位置が一致(ここでは上部で停止)している。また、合焦状態と判定されている場合は、例えば、表示パーツ301と表示パーツ302を他の表示形態の色(例えば白)と異なる色(例えば緑)で表してもよい。
図3(b)及び図3(c)は、それぞれ第2の表示形態と第3の表示形態の一例で、被写体に合焦していないが、焦点検出結果の信頼度が高い場合に、合焦位置までの方向とデフォーカス量の大きさを示す。図3(b)は、被写体よりも至近側にピントが合っている(前ピン)場合で、内向きの表示パーツ303が上部に停止した状態で、外向きの表示パーツ304と305が円周上(弧)に沿って左右対称に移動する。表示パーツ304と表示パーツ305の位置はデフォーカス量の大きさを示し、両者が表示パーツ303の位置(基準位置)から離れるほど、デフォーカス量が大きいことを示している。なお、表示パーツ303は表示パーツ301に対応し、表示パーツ304と表示パーツ305が重なった状態が表示パーツ302に対応する。
図3(c)は、被写体よりも無限遠側にピントが合っている(後ピン)場合で、外向きの表示パーツ306が上部に停止した状態で、内向きの表示パーツ307と308が円周上(弧)に沿って左右対称に移動する。表示パーツ307と表示パーツ308の位置はデフォーカス量の大きさを示し、両者が表示パーツ306の位置(基準位置)から離れるほど、デフォーカス量が大きいことを示している。なお、表示パーツ306は表示パーツ302に対応し、表示パーツ307と表示パーツ308が重なった状態が表示パーツ301に対応する。
以上説明したように、第2の表示形態と第3の表示形態では、移動する表示パーツの位置(すなわち、表示パーツ間の角度または距離)によってデフォーカス量の大きさを示すことができる。また、上部で停止している表示パーツの向きによって合焦位置までの方向(デフォーカス方向)を示すことができる。
なお、本実施形態におけるフォーカスガイドでは、フォーカス信号処理部204とカメラ制御部207で算出されたデフォーカス量を、まず、絞り値に基づく許容錯乱円Fδを用いて正規化する。そして、許容錯乱円Fδを用いて正規化したデフォーカス量から、フォーカスガイドの合焦度合いを示す角度(以下、「指標角度」と呼ぶ。)への変換を行い、その指標角度となるように表示パーツを表示する。
図3(d)は、第4の表示形態の一例で、焦点検出結果の信頼性が低い場合を示している。この場合は、デフォーカス量の大きさもデフォーカス方向も示さずに、焦点検出ができないことをユーザに視認させる。ここでは、表示パーツ309~311を他の表示形態と異なる色(例えばグレー)で表示すると共に、表示パーツ309~311を所定位置で固定する。また、表示パーツ309~311の形状を他の表示形態と異ならせる。
なお、図3に示すフォーカスガイドの表示形態は一例であり、本発明はこの表示形態に限定されるものではない。例えば、図3に示す例では、表示パーツが弧に沿って動く場合について説明したが、例えば、直線的に動くように表示しても構わない。その場合、指標角度では無く、表示パーツ間の距離を求めて表示すればよい。また、図3に示す例では、デーフォーカス量を2つの表示パーツを用いて表現したが、例えば、1つの表示パーツを合焦位置を示す基準位置から遠ざけたり近づけたりするなどして表現してもよい。その他、表示形態には、様々なものが考えられ、本発明は表示形態により限定されるものでは無い。
●フォーカスガイド表示処理
次に、カメラ制御部207が実行するフォーカスガイド表示処理について説明する。図4は、本実施形態におけるフォーカスガイド表示処理を示すフローチャートであり、撮影モードが選択された時に実行される。まず、S401においてライブビュー機能を起動し、撮像素子201から撮像信号を読み出すと共に、レンズユニット10から後述するように絞り値を取得し、ライブビュー画像を表示部205に表示する。なお、ここで取得した絞り値は、露光開始される次のフレームの絞り値であり、カメラ制御部207の不図示のメモリに記憶される。S402では、設定変更操作がされたか否かを判定する。設定変更操作がされた場合はS403へ、操作がされなかった場合はS404へ進む。
S403では、メニュー画面を開いて設定変更操作の受け付け処理を行う。ここで、フォーカスガイド表示のON/OFFの設定変更を受け付ける。設定変更操作の受付が終了すると、S404へ進み、フォーカスガイド表示の設定を確認する。フォーカスガイド表示ONの場合はS405へ、OFFの場合はS407へ進む。S405では、フォーカスガイド設定処理を行う。なお、この処理の詳細については、図5を用いて後述する。S406では、S405で設定されたフォーカスガイドを、ライブビュー画像中に重畳して表示を行う。なお、この処理の詳細については、図7または図9を参照して、詳細に後述する。一方、S407では、ライブビュー画像中にフォーカスガイドを重畳せずに表示を行う。
S408では、ライブビュー表示の終了操作が行われたか否かを判定し、終了操作が行われた場合はライブビュー画像の画面表示を終了し、行われなかった場合は、S402へ戻ってライブビュー表示を継続する。
●フォーカスガイド設定処理
次に、図5のフローチャートを参照して、図4のS405で行われるフォーカスガイド設定処理について説明する。なお、この処理はカメラ制御部207が実行する。
まず、S501において、カメラ制御部207に含まれる不図示のメモリに保持された焦点調節領域の情報を読み出し、フォーカス信号処理部204に通知する。なお、焦点調節領域は、例えば、撮像素子201から得られた撮像信号に対して被写体検出を行い、検出された被写体に対応する領域であっても良いし、予め決められた領域であっても、ユーザにより設定された領域等であっても良い。S502では、S501で得られた焦点調節領域内に存在する被写体について、焦点状態を示す合焦情報及び焦点検出成否の情報をフォーカス信号処理部204から取得する。合焦情報は、合焦または前ピンまたは後ピンのいずれの状態にあるかという情報と、前ピンまたは後ピンの場合は、デフォーカス量を含む。S503では、S501とS502で得られた情報をもとに、表示部205に表示する焦点調節領域を示す枠の表示位置及び表示色を決定する。
S504では、S502で得られた情報について、焦点検出が成功したか失敗したかを判定する。成功していればS505へ、失敗していればS510へ進む。S505では、S502で得られた情報に基づいて、被写体が合焦状態にあるか非合焦状態にあるかを判定する。合焦状態であればS507へ、非合焦状態であればS506へ進む。S506では、S502で得られた情報について、被写体が前ピン状態であるか後ピン状態であるかを判定する。前ピン状態であればS508へ、後ピン状態であればS509へ進む。
S507では、第1の表示形態、すなわち被写体が合焦状態である場合の指標表示形態を選択する。この場合の指標と枠の表示例は、図3(a)に示すものである。S508では、第2の表示形態、すなわち被写体が前ピン状態である場合の指標表示形態を選択する。この場合の指標と枠の表示例は、図3(b)に示すものである。S509では、第3の表示形態、すなわち被写体が後ピン状態である場合の指標表示形態を選択する。この指標と枠の表示例は、図3(c)に示すものである。S510では、第4の表示形態、すなわち被写体が大ボケ状態である場合の指標表示形態を選択する。この指標と枠の表示例は図3(d)に示すものである。
S507~S510で第1~第4の表示形態のいずれかを選択すると、図4の処理に戻る。
<第1の実施形態>
次に、図6を参照して、第1の実施形態における、絞り102の絞り込みを行う場合の、露光、読み出し、デフォーカス量演算、及びフォーカスガイド表示処理を行うタイミング、及び各タイミングにおける絞り値について説明する。絞り102は、例えば、レンズ操作部107やカメラ操作部208に搭載された絞り込みボタンを操作したり、UIで直接絞り値を指定することで変化させることができる。その他、カメラ信号処理部203における測光結果に基づいて、自動的に絞り値を変更してもよい。ここで、絞り込みボタンとは、撮像信号の記録時に実際に得られる画像の背景のボケ具合などを事前に確認するためのボタンである。通常、ライブビュー表示中のピント合わせは、絞り開放状態で行われるため、撮像信号の記録時の絞り値とは異なる場合がある。このときユーザのボタンを押す操作で、設定されている絞り数値まで絞り102が絞り込まれ、被写界深度の変化による画像のボケ具合の変化を確認できる。絞り込みボタンは、押している間に撮像信号の記録時の絞り値となり、絞り込みボタンを解除すると絞り開放状態に戻る。なお、図6に示す例では、フレーム4を露光している時に、絞り値をF2からF16に変更する指示をカメラ本体20からレンズユニット10に対して行い、フレーム4~6の露光期間中、絞りの開口状態が変化している場合について説明する。
図6(a)に示す例では、露光、読み出し、デフォーカス量演算、及びフォーカスガイド表示処理の各処理は垂直同期信号VDに同期して行われる。すなわち、垂直同期信号VDに同期して露光された任意のフレームは、次の垂直同期信号VDに同期して読み出される。そして、更に次の垂直同期信号VDに同期して、読み出したフレームに対してデフォーカス演算を行ってデフォーカス量(焦点状態)を取得し、更にその次の垂直同期信号VDに同期して、得られたデフォーカス量に基づくフォーカスガイド表示処理を行う。この場合、露光されてからフォーカスガイド表示処理が行われるまでに、3垂直同期期間分の時間差が生じる。
また、図6(a)において、線601はメカ機構上の絞り値であり、絞り駆動部104により変化する絞り102の実際の開口状態を示している。破線602はレンズ通信上の絞り値であり、各フレームの開始時における絞り102の実際の開口状態を示している。絞り値602は、垂直同期信号VDに同期して、レンズユニット10からカメラ本体20に通知されるもので、S401でカメラ制御部207のメモリに記憶される絞り値である。なお、第1の実施形態では、絞り駆動部104の制御値を、絞り値602として取得する。また、ここでは垂直同期信号に同期して周期的に通知されるものとするが、通知のタイミングはこれに限られるものでは無く、例えば、カメラ制御部207からのリクエストに応じて行っても良い。ただし、各垂直同期期間に少なくとも1回は絞り値602を通知するように制御する。一点鎖線603はフォーカスガイド表示処理時に用いられる絞り値を示しており、レンズ通信上の絞り値602がフレームデータと一緒に「露光」から「フォーカスガイド表示処理」まで伝搬されたものである。すなわち、任意のフレームの露光開始時に得られたレンズ通信上の絞り値602が、3垂直同期期間後に当該フレームに基づくフォーカスガイド表示処理を行う際に用いられる絞り値603となる。
図6(a)から分かるように、フレーム4~6の露光期間中は、メカ機構上の絞り値601は変化し続けるために、各フレームにおける絞り値602の通知タイミングを除いてレンズ通信上の絞り値602と一致しない。そのため、デフォーカス量を、絞り値602を遅延した絞り値603の許容錯乱円Fδに基づいて正規化すると、指標角度が不正確なものとなってしまう。また、相関量に基づいて検出された像ずれ量に乗算する変換係数も絞り値に依存したものであるため、絞り値603に基づいて算出されたデフォーカス量自体も不正確となってしまう。以上のことから、絞り値が変動する過渡状態において、フォーカスガイドの指標角度が不正確となり、フォーカスガイドの表示が不安定になる状態が発生してしまう。
そこで、本実施形態では、以下のようにフォーカスガイドの表示処理を行うことで、フォーカスガイドの指標角度が不安定な状態になることを抑制する。
図7は、第1の実施形態におけるフォーカスガイドとライブビューの重畳表示処理を示すフローチャートであり、図4のS406における処理の詳細を示している。まず、S701において、S401で取得しておいた、レンズユニット10との通信により得られたレンズ通信上の絞り値602と、フォーカスガイド表示処理時に用いられる絞り値603とを比較する。絞り値602と絞り値603との差が、所定段数未満(閾値未満)の場合はS702へ、所定段数以上(閾値以上)の場合はS703へ進む。なお、S701では、絞り値602と絞り値603が一致か不一致かで判断してもよく、一致していればS702へ、一致していなければS703へ進む。
S702では、図5のS507~S510のいずれかで決定した指標表示形態を選択し、絞り値603を用いて、デフォーカス量から指標角度を算出する。一方、S703では、後述するS705の処理によりメモリに保存されている、前回使用した指標表示形態と指標角度を選択する。これにより、前回使用した指標表示形態と指標角度を維持する。なお、メモリとしては、例えば、カメラ制御部207の不図示の内部メモリを用いても良いし、カメラ制御部207の外部に備えられた不図示のメモリを用いても良い。
S704では、S702またはS703で選択した指標表示形態と指標角度のフォーカスガイドを表示部205上のライブビューに重畳表示する。
S705では、S702またはS703で選択したフォーカスガイドの指標表示形態と指標角度をメモリへ保存する。このメモリに保存された指標表示形態と指標角度は、上述したS703で使用される。以上の処理が終了すると、図4の処理に戻る。
ここで、図7の制御を行わない場合のフォーカスガイドの表示状態と、図7の制御を行った場合のフォーカスガイドの表示状態の一例を図8に示し、各フレームにおける表示状態をまとめたものを、図6(b)の表に示している。図6(b)の表において、上段が図7の制御を行わない場合のフォーカスガイドの表示状態、下段が図7の制御を行った場合のフォーカスガイドの表示状態を示している。
図7の制御を行わない場合、フォーカスガイド表示処理時、フォーカスガイドの指標角度が、絞り込み開始前(フレーム3まで)は図8(a)、絞り込み中(フレーム4~6)は図8(b)、絞り込み終了後(フレーム7以降)は図8(c)で表示される。このように、絞り込み開始前(図6中のF2)から絞り込み終了後(図6中のF16)へ遷移する過程で、図8(b)に示す様に指標角度が一旦小さくなり、表示が不安定になる。ここで、図7の制御を行わない場合に、図8(b)示す様な状態となる理由について、フレーム5を例にとって具体的に説明する。フレーム5の露光開始時の絞り値602がf1であった場合、フォーカスガイド表示処理においてフレーム5の処理を行う際に、絞り値603としてf1を用いて指標角度を算出することになる。しかしながらフレーム5の露光中は、絞り値がf1からf2まで大きく絞られていくため、許容錯乱円Fδが徐々に大きくなると共に、フォーカスレンズが動かされていなければ、デフォーカス量は小さくなっていく。そのため、f1を用いて指標角度を算出すると、本来の角度よりも狭い角度となってしまう。
一方、図7の制御を行った場合、S701の判定に基づいてS702の制御により、フォーカスガイドの指標角度が、フォーカスガイド表示処理時のフレーム1まで、図8(d)に示すような表示がなされる。また、フォーカスガイド表示処理時のフレーム2からフレーム6の間は、S701の判定に基づいてS703の制御により、図8(e)に示すような表示がなされる。図8(e)に示す表示は、図8(d)と同じである。そして、絞り込み終了後は、S701の判定に基づいてS702の制御により、図8(f)に示すような表示がなされる。このように、絞り込みの動作に係る間は絞り込み開始前の表示状態(図8(d))を維持することができるため、絞り値の変動中である過渡状態において、フォーカスガイドの指標角度の安定性を良くすることができる。なお、本来、ガイド表示状態が不正確にならないフレーム2等も、ガイド表示状態を固定させてしまうことになるが、表示品位には、あまり影響が出ない。
上記の通り第1の実施形態によれば、絞り値の変動中である過渡状態において、焦点状態を示すガイド表示の安定性を良くすることができる。
<第2の実施形態>
次に、図9を参照して、本発明の第2の実施形態おけるフォーカスガイドとライブビューの重畳表示処理について説明する。図9に示す処理は、図4のS406において実行される処理であり、各垂直同期期間に1回行われる。
まず、S901において、絞り102の絞り込み動作の状態を検知する。ここでは、レンズユニット10から、絞り102が駆動されているかどうかを示す信号を取得してもよいし、図4のS401で取得してカメラ制御部207のメモリに記憶しておいた1フレーム前の絞り値602と比較することで検知しても良い。次にS902において、S901の検知結果から、絞り込み開始と判定した場合はS903へ、絞り込み開始と判定しなかった場合、すなわち絞り込み中、または、絞り込みが行われていない場合は、S904へ進む。絞り込み開始かどうかの判定は、例えば、S901において絞り102が駆動されている状態が検知されている場合に、前回処理時のS901において絞り102が駆動されていない状態が検知されているかどうかを判定することで行うことができる。また、S901において、レンズユニット10から絞り102の絞り込み開始時刻を取得するようにしても良い。
S903では、絞り込みが開始されてから、絞り102の絞り込み処理に対応した表示を行う時間を示す、絞り込み対応時間を取得する。絞り込み対応時間は、露光中の絞り102の絞り値の変動にかかる絞り込み時間と、露光されてからフォーカスガイド表示処理が行われるまでの時間差(図6(a)に示す例では、3垂直同期期間分)との和である。このうち、絞り込み時間は、レンズ種別や絞り値の変動量に依存するものであり、カメラ本体20またはレンズユニット10に予め用意されたテーブルから取得したり、計算で求めるなど、公知の方法で求めれば良い。
S904では、S903で取得した絞り込み対応時間が経過したかを判定する。なお、ここでの判定は、S901において絞り込み開始時刻が取得できていれば、その時刻から、取得できていなければ、絞り込み開始と判定されたフレームの先頭の時刻からの経過時間と比較することにより行う。絞り込み対応時間が経過している場合はS702へ、経過していない場合はS703へ進む。ここで、絞り込みが行われていない場合、過去に絞り込みが1回でも行われていれば、絞り込み対応時間が経過したかどうかを判定すればよいが、過去に絞り込みが1回も行われていない場合には、絞り込み対応時間が経過したとして判定する。
S702では、今回決定した指標表示形態と指標角度を表示するものとして選択し、フォーカスガイド表示を更新する。一方、S703では、絞り込み対応時間がまだ経過していないので、メモリに保存されている指標表示形態と指標角度を表示するものとして選択し、前回使用した指標表示形態と指標角度を選択し、前回のフォーカスガイド表示を維持する。これにより、露光時における絞り102の開口状態の変動中と、フォーカス処理時における絞り102の開口状態の変動中は、同じフォーカスガイド表示が表示され続ける。
なお、S702以降の処理は、第1の実施形態における図7のS702以降の処理と同様であるため、以下、説明を省略する。
図9に示す表示処理を行うことにより、フォーカスガイドの指標角度が絞り込み前はS702を選択して図8(d)、絞り込み中はS703を選択して図8(e)(=図8(d)、絞り込み後はS702を選択して図8(f)のように表示される。
上記の通り第2の実施形態によれば、第1の実施形態と同様に、絞り込みを行っている間も、安定したフォーカスガイドの表示を行うことができる。
以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。例えば、本発明の実施形態では、絞り込みボタンのユーザ操作時について説明した。ここで、絞り込みボタンの解除時も図7の制御を行わなかった場合には、絞り込み解除開始前から絞り込み解除終了後へ遷移する過程で、指標角度が一旦大きくなり、表示が不安定になる。一方、図7の制御を行えば、絞り込み解除の動作に係る間は絞り込み解除開始前の表示状態(図8(f))を維持することができるため、絞り値の変動中である過渡状態において、フォーカスガイドの指標角度の安定性を良くすることができる。これにより絞り込みの解除を行っている間も、安定したフォーカスガイドの表示を行うことができる。
10:レンズユニット、20:カメラ本体、102:絞り、103:フォーカスレンズ、104:絞り駆動部、105:フォーカスレンズ駆動部、106:レンズ制御部、107:レンズ操作部、201:撮像素子、203:カメラ信号処理部、204:フォーカス信号処理部、205:表示部、207:カメラ制御部、209:タイミングジェネレータ

Claims (12)

  1. 絞りを介して入射する光を撮像信号に変換して得られた画像を周期的に出力する撮像手段と、
    前記絞りの開口状態を周期的に取得する取得手段と、
    前記画像の焦点状態を当該画像の露光時の前記絞りの開口状態に基づいて正規化した値に基づいて、前記画像の焦点状態を表す第1の指標を生成する生成手段と、
    前記画像と、当該画像の焦点状態を示す指標とを重畳して表示手段に表示する制御手段と、
    前記表示手段に表示された指標を、第2の指標として記憶する記憶手段と、
    前記画像の露光時と、前記生成手段により前記第1の指標を生成する際との少なくともいずれかにおける前記絞りの開口状態が、変動中でない場合に前記第1の指標を選択し、変動中の場合に前記第2の指標を選択する選択手段と、を有し、
    前記制御手段は、前記選択手段により選択された指標を表示することを特徴とする撮像装置。
  2. 前記選択手段は、前記画像の露光時の前記絞りの開口状態と、前記生成手段により前記第1の指標を生成する際に取得された前記絞りの開口状態との差が、予め決められた閾値未満である場合に前記第1の指標を選択し、前記閾値以上である場合に前記第2の指標を選択することを特徴とする請求項1に記載の撮像装置。
  3. 前記選択手段は、前記画像の露光時の前記絞りの開口状態と、前記生成手段により前記第1の指標を生成する際に取得された前記絞りの開口状態とが一致する場合に前記第1の指標を選択し、一致しない場合に前記第2の指標を選択することを特徴とする請求項1に記載の撮像装置。
  4. 前記絞りの絞り値を指定する指定手段を更に有し、
    前記選択手段は、前記画像の露光時の前記絞りの開口状態が変化し始めてから、前記絞り値に達するまでの時間と、前記画像を露光してから前記生成手段により前記第1の指標を生成するまでに要する時間とを加算した期間に前記第2の指標を選択し、前記期間を除く期間に前記第1の指標を選択することを特徴とする請求項1に記載の撮像装置。
  5. 前記取得手段は、前記画像の露光の周期と同じ周期で、前記絞りの開口状態を取得することを特徴とする請求項1乃至4のいずれか1項に記載の撮像装置。
  6. 前記取得手段は、前記画像の露光開始時に、前記絞りの開口状態を取得することを特徴とする請求項5に記載の撮像装置。
  7. 前記生成手段は、前記絞りの開口状態に対応する許容錯乱円の大きさに基づいて、焦点状態を正規化することを特徴とする請求項1乃至6のいずれか1に記載の撮像装置。
  8. 前記指標は、焦点状態を表すための、弧に沿って動く2つの表示パーツを含み、前記2つの表示パーツは、前記絞りの開口状態が同じ場合、前記焦点状態が合焦状態から離れるほど、前記2つの表示パーツが成す角度が大きくなることを特徴とする請求項7に記載の撮像装置。
  9. 前記角度は、焦点状態が同じ場合、前記許容錯乱円が大きくなるほど、小さくなることを特徴とする請求項8に記載の撮像装置。
  10. 前記指標は、焦点状態を表すための2つの表示パーツを含み、前記2つの表示パーツは、前記絞りの開口状態が同じ場合、前記焦点状態が合焦状態から離れるほど、前記2つの表示パーツ間の距離が長くなることを特徴とする請求項7に記載の撮像装置。
  11. 前記距離は、焦点状態が同じ場合、前記許容錯乱円が大きくなるほど、短くなることを特徴とする請求項10に記載の撮像装置。
  12. 撮像手段が、絞りを介して入射する光を撮像信号に変換して得られた画像を周期的に出力する撮像工程と、
    取得手段が、前記絞りの開口状態を周期的に取得する取得工程と、
    生成手段が、前記画像の焦点状態を当該画像の露光時の前記絞りの開口状態に基づいて正規化した値に基づいて、前記画像の焦点状態を表す第1の指標を生成する生成工程と、
    制御手段が、前記画像と、当該画像の焦点状態を示す指標とを重畳して表示手段に表示する制御工程と、
    記憶手段が、前記表示手段に表示された指標を、第2の指標として記憶する記憶工程と、
    選択手段が、前記画像の露光時と、前記生成手段により前記第1の指標を生成する際との少なくともいずれかにおける前記絞りの開口状態が、変動中でない場合に前記第1の指標を選択し、変動中の場合に前記第2の指標を選択する選択工程と、を有し、
    前記制御工程では、前記選択工程で選択された指標を表示することを特徴とする撮像装置の制御方法。
JP2018125295A 2018-06-29 2018-06-29 撮像装置及びその制御方法 Active JP7079161B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2018125295A JP7079161B2 (ja) 2018-06-29 2018-06-29 撮像装置及びその制御方法
US16/451,213 US10616469B2 (en) 2018-06-29 2019-06-25 Image capturing apparatus and control method therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018125295A JP7079161B2 (ja) 2018-06-29 2018-06-29 撮像装置及びその制御方法

Publications (3)

Publication Number Publication Date
JP2020003725A JP2020003725A (ja) 2020-01-09
JP2020003725A5 JP2020003725A5 (ja) 2021-08-05
JP7079161B2 true JP7079161B2 (ja) 2022-06-01

Family

ID=69055521

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018125295A Active JP7079161B2 (ja) 2018-06-29 2018-06-29 撮像装置及びその制御方法

Country Status (2)

Country Link
US (1) US10616469B2 (ja)
JP (1) JP7079161B2 (ja)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120050604A1 (en) 2010-08-30 2012-03-01 Samsung Electronics Co., Ltd. Focusing method and apparatus, and recording medium for recording the method
JP2016197231A (ja) 2015-04-03 2016-11-24 キヤノン株式会社 表示制御装置及び方法、及び撮像装置
JP2017123548A (ja) 2016-01-06 2017-07-13 キヤノン株式会社 電子機器及びその制御方法、プログラムならびに記憶媒体
JP2018045102A (ja) 2016-09-14 2018-03-22 キヤノン株式会社 焦点調節装置及び撮像装置
JP2018067787A (ja) 2016-10-19 2018-04-26 キヤノン株式会社 表示制御装置、表示制御装置の制御方法及びプログラム並びに記憶媒体

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6537325B2 (ja) 2015-04-03 2019-07-03 キヤノン株式会社 表示制御装置及びその制御方法
US20160295122A1 (en) * 2015-04-03 2016-10-06 Canon Kabushiki Kaisha Display control apparatus, display control method, and image capturing apparatus
US10491828B2 (en) * 2015-04-03 2019-11-26 Canon Kabushiki Kaisha Display control apparatus and control method of the same
JP6335396B2 (ja) * 2015-09-30 2018-05-30 富士フイルム株式会社 撮影装置及びその制御方法
JP6659148B2 (ja) * 2016-02-03 2020-03-04 キヤノン株式会社 表示制御装置及びその制御方法、プログラム、並びに記憶媒体

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120050604A1 (en) 2010-08-30 2012-03-01 Samsung Electronics Co., Ltd. Focusing method and apparatus, and recording medium for recording the method
JP2016197231A (ja) 2015-04-03 2016-11-24 キヤノン株式会社 表示制御装置及び方法、及び撮像装置
JP2017123548A (ja) 2016-01-06 2017-07-13 キヤノン株式会社 電子機器及びその制御方法、プログラムならびに記憶媒体
JP2018045102A (ja) 2016-09-14 2018-03-22 キヤノン株式会社 焦点調節装置及び撮像装置
JP2018067787A (ja) 2016-10-19 2018-04-26 キヤノン株式会社 表示制御装置、表示制御装置の制御方法及びプログラム並びに記憶媒体

Also Published As

Publication number Publication date
JP2020003725A (ja) 2020-01-09
US10616469B2 (en) 2020-04-07
US20200007782A1 (en) 2020-01-02

Similar Documents

Publication Publication Date Title
EP3267677B1 (en) Imaging device
JP5517514B2 (ja) 撮像装置及びその制御方法
US20130314564A1 (en) Image capturing apparatus and image processing method
JP5361535B2 (ja) 撮像装置
JP5473977B2 (ja) 撮像装置およびカメラシステム
JP2011022386A5 (ja)
JP6808333B2 (ja) 表示制御装置及び方法、及び撮像装置
JP2014215551A (ja) 撮像装置およびその制御方法
US11010030B2 (en) Electronic apparatus capable of performing display control based on display mode, control method thereof, and non-transitory computer readable medium
JP2013218297A (ja) 焦点調節装置および焦点調節方法
JP2012208138A (ja) レンズ駆動制御装置およびレンズ装置
JP2019106634A (ja) 撮像素子及び撮像装置
JPWO2014041845A1 (ja) 撮像装置及び信号処理方法
US20130100251A1 (en) Image capturing device and image capturing method
JP7086551B2 (ja) 撮像装置及びその制御方法
JP2019095594A (ja) 焦点検出装置及び方法、及び撮像装置
JP2013152388A (ja) 撮像装置およびその制御方法
CN106993110B (zh) 摄像设备及其控制方法
JP7079161B2 (ja) 撮像装置及びその制御方法
JP6442824B2 (ja) 焦点検出装置
JP6902921B2 (ja) 撮像装置、制御方法、及びプログラム
JP5748826B2 (ja) 撮像装置およびカメラシステム
JP5597273B2 (ja) 撮像装置及び画像処理方法
JP2019074634A (ja) 撮像装置
JP7207874B2 (ja) 制御装置、撮像装置、制御方法、プログラム、および、記憶媒体

Legal Events

Date Code Title Description
RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20210103

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210113

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210623

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210623

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220411

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220422

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220520

R151 Written notification of patent or utility model registration

Ref document number: 7079161

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151