JP6917803B2 - 撮像装置、制御方法、及びプログラム - Google Patents

Description

本発明は、撮像装置、制御方法、及びプログラムに関する。

デジタルカメラ等の撮像装置の中には、主被写体に対して撮像面位相差方式の自動焦点検出（撮像面位相差ＡＦ）を行いながら静止画の連続撮影を行う連写機能が備えられているものがある。この連写機能の実行中、撮像装置は、背面モニタ等にライブビュー（ＬＶ）画像として表示させる画像と、静止画記録用の画像とを撮像素子から順次読み出して、リアルタイムに表示と記録を行う。

連続撮影時に焦点検出を行いながら撮像素子から取得した画像をＬＶ画像としてモニタ画面に表示させる際に、主被写体への追従性を向上させる技術が知られている。特許文献１では、解像度の異なる画像を逐次モニタ表示するか高解像度画像のみをモニタ表示するかを、フレームレートに応じて切り替える技術が提案されている。特許文献１によれば、フレームレートが低い連続撮影においても、ＬＶ画像の表示時間間隔を短縮してフレーミング時の主被写体への追従性を向上させることができる。

特開２０１５−１４４３４６号公報

撮像素子からの画像データ取得に要する時間は、解像度に応じて異なる。そのため、露光開始タイミングから取得完了タイミングまでの画像取得時間が、画像データの解像度に応じて異なる。特許文献１では、低フレームレート時に解像度の異なる画像データを逐次表示させているため、各々の画像データで画像取得時間が異なり、不均等な時間間隔で取得された画像データを用いたＬＶ表示が行われ、ユーザに違和感を与える可能性がある。

本発明はこのような状況に鑑みてなされたものであり、露光開始から取得完了までに要する時間が異なる画像を順次表示する際に、ユーザに与える違和感を軽減する技術を提供することを目的とする。

上記課題を解決するために、本発明は、撮像素子と、前記撮像素子を用いた露光及び読み出しを制御することで、露光による蓄積電荷の読み出しに必要な時間が異なる第１の画像と第２の画像を取得する撮像制御手段と、前記撮像素子から読み出された画像の表示手段への表示を制御する表示制御手段と、を備え、前記第２の画像は、前記第１の画像よりも解像度が低く、読み出しに必要な時間が短く、前記表示制御手段は、前記表示手段に前記第１の画像と前記第２の画像とを周期的に順に表示させる際に、前記第１の画像及び前記第２の画像の読み出しに必要な時間の差に基づいて、前記第２の画像の読み出し完了から前記表示手段への表示開始までの第１の時間を設定し、前記第１の時間は、前記第１の画像の読み出し完了から前記表示手段への表示開始までの第２の時間より長いことを特徴とする撮像装置を提供する。

なお、その他の本発明の特徴は、添付図面及び以下の発明を実施するための形態における記載によって更に明らかになるものである。

本発明によれば、露光開始から取得完了までに要する時間が異なる画像を順次表示する際に、ユーザに与える違和感を軽減することが可能となる。

撮像装置の構成を示すブロック図。 撮像素子１２２の画素配列を示す図。 カメラ本体１２０が実行する連続撮影処理のフローチャート。 従来の連続撮影処理のタイミングチャート。 第１の実施形態に係る連続撮影処理のタイミングチャート。 第２の実施形態に係る連続撮影処理のタイミングチャート。

以下、添付図面を参照して、本発明の実施形態を説明する。なお、本発明の技術的範囲は、特許請求の範囲によって確定されるのであって、以下の個別の実施形態によって限定されるわけではない。また、実施形態の中で説明されている特徴の組み合わせすべてが、本発明に必須とは限らない。また、別々の実施形態の中で説明されている特徴を適宜組み合せることも可能である。

また、実施形態は発明の理解と説明を容易にするため、具体的かつ特定の構成を有するが、本発明はそのような特定の構成に限定されない。例えば、以下では本発明をレンズ交換可能な一眼レフタイプのデジタルカメラに適用した実施形態について説明するが、本発明はレンズ交換できないタイプのデジタルカメラや、ビデオカメラに対しても適用可能である。また、カメラを備えた任意の電子機器、例えば携帯電話機、パーソナルコンピュータ（ラップトップ、タブレット、デスクトップ型など）、ゲーム機などで実施することもできる。

［第１の実施形態］
●撮像装置の構成の説明（レンズユニット）
図１は、複数の撮影レンズを交換可能なカメラ本体と撮影レンズとからなるカメラシステムの形態を持つ撮像装置の構成を示すブロック図である。本実施形態のカメラシステム（撮像装置）はレンズ交換式一眼レフカメラであり、撮影レンズからなるレンズユニット１００とカメラ本体１２０とを有する。レンズユニット１００は、図中央の点線で示されるマウントＭを介して、カメラ本体１２０に装着される。

レンズユニット１００は、光学系（第１レンズ群１０１、絞り１０２、第２レンズ群１０３、第３レンズ群（フォーカスレンズ１０４））、及び駆動／制御系を有する。第１レンズ群１０１は、レンズユニット１００の先端に配置され、光軸方向ＯＡに移動可能に保持される。絞り１０２は、撮影時の光量を調節する機能のほか、静止画撮影時には露出時間を制御するメカニカルシャッターとしての機能を有する。絞り１０２及び第２レンズ群１０３は、一体で光軸方向ＯＡに移動可能であり、第１レンズ群１０１と連動して移動することによりズーム機能を実現する。フォーカスレンズ１０４も光軸方向ＯＡに移動可能であり、位置に応じてレンズユニット１００が合焦する被写体距離（合焦距離）が変化する。フォーカスレンズ１０４の光軸方向ＯＡにおける位置を制御することにより、レンズユニット１００の合焦距離を調節する焦点調節を行うことができる。

駆動／制御系は、ズームアクチュエータ１１１、絞りアクチュエータ１１２、フォーカスアクチュエータ１１３、ズーム駆動回路１１４、絞り駆動回路１１５、フォーカス駆動回路１１６、レンズＭＰＵ１１７（プロセッサ）、レンズメモリ１１８を有する。

ズーム駆動回路１１４は、ズームアクチュエータ１１１を用いて第１レンズ群１０１及び第２レンズ群１０３を光軸方向ＯＡに駆動し、レンズユニット１００の光学系の画角を制御する。絞り駆動回路１１５は、絞りアクチュエータ１１２を用いて絞り１０２を駆動し、絞り１０２の開口径や開閉動作を制御する。フォーカス駆動回路１１６は、フォーカスアクチュエータ１１３を用いてフォーカスレンズ１０４を光軸方向ＯＡに駆動し、レンズユニット１００の光学系の合焦距離を制御する。また、フォーカス駆動回路１１６は、フォーカスアクチュエータ１１３を用いてフォーカスレンズ１０４の現在位置を検出する。

レンズＭＰＵ１１７は、レンズユニット１００に係る全体的な演算、制御を行い、ズーム駆動回路１１４、絞り駆動回路１１５、フォーカス駆動回路１１６を制御する。また、レンズＭＰＵ１１７は、マウントＭを通じてカメラＭＰＵ１２５と接続され、コマンドやデータを通信する。例えば、レンズＭＰＵ１１７は、フォーカスレンズ１０４の位置を検出し、カメラＭＰＵ１２５からの要求に対してレンズ位置情報を通知する。このレンズ位置情報は、フォーカスレンズ１０４の光軸方向ＯＡにおける位置、光学系が移動していない状態の射出瞳の光軸方向ＯＡにおける位置及び直径、射出瞳の光束を制限するレンズ枠の光軸方向ＯＡにおける位置及び直径などの情報を含む。また、レンズＭＰＵ１１７は、カメラＭＰＵ１２５からの要求に応じて、ズーム駆動回路１１４、絞り駆動回路１１５、フォーカス駆動回路１１６を制御する。レンズメモリ１１８には、撮像面位相差ＡＦに必要な光学情報が予め記憶されている。レンズＭＰＵ１１７は、例えば内蔵する不揮発性メモリやレンズメモリ１１８に記憶されているプログラムを実行することで、レンズユニット１００の動作を制御する。

●撮像装置の構成の説明（カメラ本体）
カメラ本体１２０は、光学系（光学ローパスフィルタ１２１及び撮像素子１２２）と、駆動／制御系とを有する。光学ローパスフィルタ１２１は、撮影画像の偽色やモアレを軽減する。撮像素子１２２は、ＣＭＯＳイメージセンサと周辺回路で構成され、横方向ｍ画素、縦方向ｎ画素（ｎ，ｍは２以上の整数）が配置される。本実施形態の撮像素子１２２は、瞳分割機能を有し、視差を持つ画像データを用いた撮像面位相差ＡＦが可能である。

駆動／制御系は、撮像素子駆動回路１２３、画像処理回路１２４、カメラＭＰＵ１２５（プロセッサ）、表示部１２６、操作スイッチ群１２７、メモリ１２８、撮像面位相差焦点検出部１２９を有する。画像処理回路１２４は、撮像素子１２２が出力する画像データから、焦点検出信号と、表示・記録用の画像データを生成する。

撮像素子駆動回路１２３は、撮像素子１２２の動作を制御すると共に、取得した画像データをＡ／Ｄ変換してカメラＭＰＵ１２５に送信する。画像処理回路１２４は、撮像素子１２２が取得した画像データに対して、γ変換、ホワイトバランス調整処理、色補間処理、圧縮符号化処理など、デジタルカメラで行われる一般的な画像処理を行う。

カメラＭＰＵ１２５は、カメラ本体１２０に係る全体的な演算、制御を行い、撮像素子駆動回路１２３、画像処理回路１２４、表示部１２６、操作スイッチ群１２７、メモリ１２８、撮像面位相差焦点検出部１２９を制御する。カメラＭＰＵ１２５は、マウントＭを介してレンズＭＰＵ１１７と接続され、レンズＭＰＵ１１７とコマンドやデータを通信する。カメラＭＰＵ１２５は、レンズＭＰＵ１１７に対し、レンズ位置の取得要求や、所定の駆動量での絞り、フォーカスレンズ、ズーム駆動要求や、レンズユニット１００に固有の光学情報の取得要求などを発行する。カメラＭＰＵ１２５には、カメラ本体１２０の動作を制御するプログラムを格納したＲＯＭ１２５ａ、変数を記憶するＲＡＭ１２５ｂ、諸パラメータを記憶するＥＥＰＲＯＭ１２５ｃが内蔵されている。

表示部１２６は、ＬＣＤなどから構成され、カメラ本体１２０の撮影モードに関する情報、撮影前のプレビュー画像及び撮影後の確認用画像、焦点検出時の合焦状態画像などを表示する。操作スイッチ群１２７は、電源スイッチ、レリーズ（撮影トリガ）スイッチ、ズーム操作スイッチ、撮影モード選択スイッチ等で構成される。メモリ１２８は、着脱可能なフラッシュメモリで、撮影済み画像を記録する。

撮像面位相差焦点検出部１２９は、画像処理回路１２４により得られる撮像面位相差ＡＦ信号に基づき、撮像面位相差ＡＦによる焦点検出処理を行う。具体的には、画像処理回路１２４が撮像面位相差ＡＦ信号として撮影光学系の一対の瞳領域を通過する光束で形成される一対の像データを生成し、撮像面位相差焦点検出部１２９がこの一対の像データのずれ量に基づいて焦点ずれ量（デフォーカス量）を検出する。このように、本実施形態の撮像面位相差焦点検出部１２９は、専用のＡＦセンサを用いず、撮像素子１２２の出力に基づく撮像面位相差ＡＦを行う。

●焦点検出動作の説明（撮像面位相差ＡＦ）
図２を参照して、撮像面位相差焦点検出部１２９の動作について詳細に説明する。図２は、本実施形態における撮像素子１２２の画素配列を示す図であり、２次元Ｃ−ＭＯＳエリアセンサの縦（Ｙ方向）６行と横（Ｘ方向）８列の範囲を、レンズユニット１００側から観察した状態を示している。撮像素子１２２には、ベイヤー配列のカラーフィルタが設けられている。本実施形態のベイヤー配列は、例えば、奇数行の画素には、左から順に緑（Ｇ）と赤（Ｒ）のカラーフィルタがＸ方向に交互に配置され、偶数行の画素には、左から順に青（Ｂ）と緑（Ｇ）のカラーフィルタがＸ方向に交互に配置されている。画素２１１において、符号２１１ｉが指す円はオンチップマイクロレンズを表し、オンチップマイクロレンズ２１１ｉの内側に配置された複数の矩形（符号２１１ａ，２１１ｂ）はそれぞれ光電変換部を表している。

本実施形態の撮像素子１２２は、撮影光学系の異なる瞳部分領域を各々通過する光束を受光する第１と第２の焦点検出画素を有する。なお、本実施形態では、撮像素子１２２中のすべての画素の光電変換部はＸ方向に２分割され、分割された一方の領域の光電変換信号と、２つの光電変換信号の和とは、独立して読み出しできる構成となっている。しかしながら、Ｘ方向、Ｙ方向に複数分割された構成であってもよい。そして、独立して読み出しされた信号に関して、２つの光電変換信号の和と分割された一方の領域の光電変換信号との差分をとることにより、もう一方の光電変換領域で得られる信号に相当する信号を得ることができる。これらの分割された領域の光電変換信号は、後述する方法で位相差式焦点検出に用いられるほか、視差情報を有した複数画像から構成される３Ｄ（３−Ｄｉｍｅｎｓｉｏｎａｌ）画像を生成することもできる。一方で、２つの光電変換信号の和は、通常の撮影画像として用いられる。

ここで、撮像面位相差ＡＦ信号について説明する。本実施形態においては、図２のオンチップマイクロレンズ２１１ｉと、分割された光電変換部２１１ａ，２１１ｂで撮影光学系の射出光束を瞳分割する。そして、同一画素行に配置された所定範囲内の複数の画素２１１について、光電変換部２１１ａの出力をつなぎ合わせて編成したものを撮像面位相差ＡＦ用のＡ像（ＡＦ用Ａ像）とする。また、光電変換部２１１ｂの出力をつなぎ合わせて編成したものを撮像面位相差ＡＦ用のＢ像（ＡＦ用Ｂ像）とする。光電変換部２１１ａ，２１１ｂの出力は、カラーフィルタの単位配列に含まれる緑、赤、青、緑の出力を加算して算出した疑似的な輝度（Ｙ）信号を用いる。但し、赤、青、緑の色ごとに、ＡＦ用Ａ像、ＡＦ用Ｂ像を編成してもよい。このように生成したＡＦ用Ａ像とＡＦ用Ｂ像の相対的な像ずれ量を相関演算により検出することで、所定領域の焦点ずれ量（デフォーカス量）を検出することができる。本実施形態では、一方の光電変換部の出力と全光電変換部の出力の和を撮像素子１２２から読み出すものとする。例えば光電変換部２１１ａの出力と、光電変換部２１１ａ，２１１ｂの出力の和とが読み出される場合、光電変換部２１１ｂの出力は、和から光電変換部２１１ａの出力を減じることで取得される。これにより、ＡＦ用Ａ像とＡＦ用Ｂ像の両方を得ることができ、撮像面位相差ＡＦが実現できる。このような撮像素子は、例えば特開２００４−１３４８６７号公報に開示されるように公知であるため、これ以上の詳細な説明は省略する。

なお、ここでは一例として水平方向に射出瞳を２分割する構成を説明したが、撮像素子１２２中の一部の画素については垂直方向に射出瞳を２分割する構成としてもよい。また、水平及び垂直の両方向に射出瞳を分割する構成としてもよい。垂直方向に射出瞳を分割する画素を設けることにより、水平だけでなく垂直方向の被写体のコントラストに対応した撮像面位相差ＡＦが可能となる。

以上説明したように、撮像素子１２２は、撮像の機能だけではなく、焦点検出装置としての機能も有している。なお、焦点検出方法としては、射出瞳を分割した光束を受光する焦点検出用画素を備えているため、撮像面位相差ＡＦを行うことが可能である。

●連続撮影処理
次に、図３を参照して、カメラ本体１２０が実行する連続撮影処理について説明する。図３の連続撮影処理において、カメラ本体１２０は、記録用画像及びＡＦ用画像を交互に取得して表示する。ＡＦ用画像は、記録用画像よりも解像度が低い。そのため、ＡＦ用画像に関して露光開始から取得完了までに要する時間は、記録用画像に関して露光開始から取得完了までに要する時間よりも短い。

なお、本実施形態の連続撮影処理において取得及び表示される画像は、記録用画像及びＡＦ用画像に限定されず、露光開始から取得完了までに要する時間が異なる少なくとも２種類の画像を含めばよい。例えば、表示画像の逐次表示中（ＬＶ表示中）に静止画の連続取得を指示する場合に、記録用画像とＬＶ表示用画像とを交互に表示する構成であってもよい。カメラ本体１２０は、ＬＶ表示用画像を取得する場合、処理負荷を軽減するために記録用画像を取得する際の撮像素子１２２の蓄積・読み出し行と比べて、蓄積・読み出し行を間引いて画像の取得を行う。そのため、ＬＶ表示用画像に関して露光開始から取得完了までに要する時間は、記録用画像に関して露光開始から取得完了までに要する時間よりも短い。このような構成を採用する場合は、撮像素子１２２が焦点検出用の画素を備えていない構成であってもよい。

また、本実施形態は、記録用画像及びＡＦ用画像を交互に取得して表示する構成に限定されない。例えば、カメラ本体１２０は、１つの記録用画像の取得に続いて２以上のＡＦ用画像を取得してもよい。

図３は、カメラ本体１２０が実行する連続撮影処理のフローチャートである。本フローチャートにおいて、各ステップの処理は、特に断らない限り、カメラＭＰＵ１２５がＲＯＭ１２５ａに格納されたプログラムに従ってカメラ本体１２０の各部を制御したりレンズＭＰＵ１１７と通信したりすることにより実現される。

Ｓ３０１で、カメラＭＰＵ１２５は、連続撮影の開始が指示されるまで待ち、連続撮影の開始が指示されると、処理をＳ３０２へ進める。ユーザは、例えば操作スイッチ群１２７の操作などにより、カメラ本体１２０に対して連続撮影の開始を指示することができる。Ｓ３０２で、カメラＭＰＵ１２５は、シャッター秒時Ｔｖ、絞り値Ｆなどの撮影条件を設定する。Ｓ３０３で、カメラＭＰＵ１２５は、記録用画像及びＡＦ用画像の表示タイミングを決定する。

ここで、図４及び図５を参照して、Ｓ３０３の処理の詳細について説明する。図４は、従来の連続撮影処理のタイミングチャートを示し、図５は、第１の実施形態に係る連続撮影処理のタイミングチャートを示す。

図４及び図５において、斜線のブロックは、記録用画像に関連する処理を示しており、白色のブロックは、ＡＦ用画像に関連する処理を示している。Ｔｒ１、Ｔｒ２は、それぞれ記録用画像及びＡＦ用画像の露光、読出し、画像取得の時間（露光開始から取得完了までに要する時間）を示している。ｔｒ１、ｔｒ１’は、記録用画像の露光開始時刻を示しており、ｔｒ２は、ＡＦ用画像の露光開始時刻を示している。ｔｄ１、ｔｄ１’は、記録用画像の表示開始時刻を示しており、ｔｄ２は、ＡＦ用画像の表示開始時刻を示している。

また、図４において、Ｔｄ１＿０は、記録用画像の表示時間を示しており、Ｔｄ２＿０は、ＡＦ用画像の表示時間を示している。図５において、Ｔｄ１は、記録用画像の表示時間を示しており、Ｔｄ２は、ＡＦ用画像の表示時間を示している。図５のΔＴｄ１は、記録用画像の表示遅延時間（記録用画像の取得完了から表示開始までの時間）を示しており、ΔＴｄ２は、ＡＦ用画像の表示遅延時間（ＡＦ用画像の取得完了から表示開始までの時間）を示している。なお、図５の例では、ΔＴｄ１＝０であるが、本実施形態はΔＴｄ１＝０に限定されない。図５のｔ１１〜ｔ１８は時刻を表している。なお、図５では時刻をｔ１８まで示しているが、後述するＳ３０８において連続撮影を継続すると判定されれば、時刻ｔ１８以降も連続撮影処理が継続する。

Ｓ３０３では、カメラＭＰＵ１２５は、記録用画像及びＡＦ用画像の表示タイミングを決定する。より具体的には、カメラＭＰＵ１２５は、記録用画像の表示遅延時間ΔＴｄ１、ＡＦ用画像の表示遅延時間ΔＴｄ２、記録用画像の表示時間Ｔｄ１、ＡＦ用画像の表示時間Ｔｄ２を決定する。なお、本実施形態では、記録用画像の表示時間Ｔｄ１はＡＦ用画像の表示開始時刻ｔｄ２まで継続し、ＡＦ用画像の表示時間Ｔｄ２は記録用画像の表示開始時刻ｔｄ１’まで継続するものとする。従って、表示遅延時間ΔＴｄ１，ΔＴｄ２が決まれば表示時間Ｔｄ１，Ｔｄ２も自動的に決まるため、カメラＭＰＵ１２５は、実質的には表示遅延時間ΔＴｄ１，ΔＴｄ２のみを決定すればよい。

図５の例では、カメラＭＰＵ１２５は、ＡＦ用画像の露光開始時刻ｔｒ２から表示開始時刻ｔｄ２までの時間（ｔｄ２−ｔｒ２＝Ｔｒ２＋ΔＴｄ２）が、記録用画像の露光開始時刻ｔｒ１から表示開始時刻ｔｄ１までの時間（ｔｄ１−ｔｒ１＝Ｔｒ１＋ΔＴｄ１）と等しくなるように、表示遅延時間ΔＴｄ１，ΔＴｄ２を決定する。そして、カメラＭＰＵ１２５は、表示遅延時間ΔＴｄ１，ΔＴｄ２に基づき、表示時間Ｔｄ１，Ｔｄ２を算出する。具体的には、カメラＭＰＵ１２５は、Ｓ３０２で設定した撮影条件に基づき、記録用画像及びＡＦ用画像それぞれの露光開始から取得完了までの時間Ｔｒ１，Ｔｒ２を取得する。そして、カメラＭＰＵ１２５は、記録用画像の表示遅延時間ΔＴｄ１を０に決定する（前述の通り、０以外でもよい）。そして、カメラＭＰＵ１２５は、下記の式１に従ってＡＦ用画像の表示遅延時間ΔＴｄ２を算出する。

Ｔｒ２＋ΔＴｄ２＝Ｔｒ１＋ΔＴｄ１
ΔＴｄ２＝Ｔｒ１＋ΔＴｄ１−Ｔｒ２＝Ｔｒ１−Ｔｒ２
・・・（１）

次に、カメラＭＰＵ１２５は、記録用画像及びＡＦ用画像の表示時間Ｔｄ１，Ｔｄ２を算出する。具体的には、カメラＭＰＵ１２５は、Ｓ３０２で設定した撮影条件に基づき、表示遅延時間ΔＴｄ１，ΔＴｄ２が存在しない場合の表示時間Ｔｄ１＿０，Ｔｄ２＿０（図４参照）を取得する。そして、カメラＭＰＵ１２５は、下記の式２に従って表示時間Ｔｄ１，Ｔｄ２を算出する。

Ｔｄ１＝Ｔｄ１＿０＋（ΔＴｄ２−ΔＴｄ１）＝Ｔｄ１＿０＋ΔＴｄ２
Ｔｄ２＝Ｔｄ２＿０＋（ΔＴｄ１−ΔＴｄ２）＝Ｔｄ１＿０−ΔＴｄ２
・・・（２）

Ｓ３０４からＳ３０７では、記録用画像及びＡＦ用画像が順次取得され、Ｓ３０３で決定された表示タイミングに従って順次表示される。Ｓ３０４からＳ３０７の処理は、Ｓ３０８において連続撮影を継続しないと判定されるまで繰り返し実行される。また、Ｓ３０４からＳ３０７の処理と並行して、カメラＭＰＵ１２５は、記録用画像をメモリ１２８に記録し、また、ＡＦ用画像に基づいて撮像面位相差ＡＦを行う。

Ｓ３０４で、カメラＭＰＵ１２５は、記録用画像を取得するための撮像制御（撮像素子１２２の露光・読出しなど）を行う。撮像素子１２２の露光は、ローリングシャッター、又はグローバルシャッターを用いて行われる。記録用画像の取得は、露光開始時刻ｔｒ１（ｔ１１）から取得完了時刻ｔ１２までの間に行われる。

Ｓ３０５で、カメラＭＰＵ１２５は、Ｓ３０３で決定した表示遅延時間ΔＴｄ１及び表示時間Ｔｄ１に基づき、記録用画像の表示開始時刻及び表示時間を設定して、表示部１２６に対して表示指示を出す。具体的には、カメラＭＰＵ１２５は、時刻ｔ１２で記録用画像の表示を開始して、時刻ｔ１６まで表示を継続させる表示指示を出す。

なお、厳密に言えば、Ｓ３０４及びＳ３０５の間に、カメラＭＰＵ１２５は、取得した記録用画像を、表示部１２６での表示に適したデータ形式に変換する処理を行う。この変換処理に要する時間は、記録用画像の露光開始から取得完了までに要する時間Ｔｒ１に含めて扱うことができる。また、Ｓ３０５では、取得した記録用画像を適切なデータ形式に変換してメモリ１２８に記録する処理も並行して行われる。

Ｓ３０６で、カメラＭＰＵ１２５は、ＡＦ用画像を取得するための撮像制御（撮像素子１２２の露光・読出しなど）を行う。ここでの撮像制御は、ＡＦ用画像と記録用画像との相違に関係する部分を除き、Ｓ３０４における撮像制御と同様である。ＡＦ用画像の取得は、露光開始時刻ｔｒ２（ｔ１３）から、取得完了時刻ｔ１４までの間に行われる。

Ｓ３０７で、カメラＭＰＵ１２５は、Ｓ３０３で決定した表示遅延時間ΔＴｄ２及び表示時間Ｔｄ２に基づき、ＡＦ用画像の表示開始時刻及び表示時間を設定して、表示部１２６に対して表示指示を出す。具体的には、カメラＭＰＵ１２５は、時刻ｔ１６でＡＦ用画像の表示を開始して、時刻ｔ１７まで表示を継続させる表示指示を出す。

なお、厳密に言えば、Ｓ３０６及びＳ３０７の間に、カメラＭＰＵ１２５は、取得したＡＦ用画像を、表示部１２６での表示に適したデータ形式に変換する処理を行う。この変換処理に要する時間は、ＡＦ用画像の露光開始から取得完了までに要する時間Ｔｒ２に含めて扱うことができる。また、Ｓ３０７では、取得したＡＦ用画像に基づく撮像面位相差ＡＦも並行して行われる。

Ｓ３０８で、カメラＭＰＵ１２５は、連続撮影を継続するか否かを判定する。ユーザは、例えば操作スイッチ群１２７の操作などにより、連続撮影の継続と終了とを切り替えることができる。連続撮影を継続する場合、カメラＭＰＵ１２５は、処理をＳ３０４に戻し、そうでない場合、本フローチャートの処理は終了する。

以上説明したように、第１の実施形態によれば、カメラ本体１２０は、複数の画像を順次取得して順次表示する処理（表示制御）において、露光開始から取得完了までに要する時間が異なる記録用画像及びＡＦ用画像を取得する。そして、カメラ本体１２０は、記録用画像及びその次に取得されたＡＦ用画像を表示する際に、ＡＦ用画像の露光開始から表示開始までの時間が、記録用画像の露光開始から表示開始までの時間と等しくなるように制御する。これにより、ユーザに与える違和感を軽減することが可能となる。

なお、上の説明では、ＡＦ用画像の露光開始から表示開始までの時間が、記録用画像の露光開始から表示開始までの時間と等しくなるように制御する構成について説明したが、本実施形態はこの構成に限定されない。ＡＦ用画像の露光開始から表示開始までの時間と、記録用画像の露光開始から表示開始までの時間との差の絶対値を少しでも小さくする制御を行えば、ユーザに与える違和感をある程度は軽減することができる。図４に示すように、従来は、差の絶対値が、記録用画像の露光開始から取得完了までの時間からＡＦ用画像の露光開始から取得完了までの時間を引いた時間（Ｔｒ１−Ｔｒ２）に等しい。従って、カメラ本体１２０は、差の絶対値が、記録用画像の露光開始から取得完了までの時間からＡＦ用画像の露光開始から取得完了までの時間を引いた時間未満になるように制御する。この場合、カメラ本体１２０は更に、ＡＦ用画像の露光開始から表示開始までの時間が、記録用画像の露光開始から表示開始までの時間以下となるように制御してもよい。このような制御により、ユーザに与える違和感をある程度は軽減することができる。

［第２の実施形態］
第２の実施形態では、記録用画像及びＡＦ用画像の表示開始時刻の間隔を等しくすることによりユーザに与える違和感を軽減する構成について説明する。本実施形態において、撮像装置（図１）の基本的な構成は第１の実施形態と同様である。以下、主に第１の実施形態と異なる点について説明する。

第２の実施形態では、図３のＳ３０３において記録用画像及びＡＦ用画像の表示タイミングを決定する処理が、第１の実施形態と異なる。図６は、第２の実施形態に係る連続撮影処理のタイミングチャートを示す。図６は、図５と比べて、記録用画像及びＡＦ用画像の表示時間Ｔｄ１，Ｔｄ２と、ＡＦ用画像の表示開始時刻ｔｄ２とが異なる。図６のｔ２１〜ｔ２７は時刻を表している。なお、図６では時刻をｔ２７まで示しているが、第１の実施形態と同様、Ｓ３０８において連続撮影を継続すると判定されれば、時刻ｔ２７以降も連続撮影処理が継続する。第２の実施形態では、カメラＭＰＵ１２５は、記録用画像の表示開始時刻ｔｄ１からＡＦ用画像の表示開始時刻ｔｄ２までの時間が、ＡＦ用画像の表示開始時刻ｔｄ２から記録用画像の表示開始時刻ｔｄ１’までの時間と等しくなるように制御する。

図３のＳ３０１及びＳ３０２の処理は、第１の実施形態と同様である。Ｓ３０３で、カメラＭＰＵ１２５は、記録用画像の表示遅延時間ΔＴｄ１、ＡＦ用画像の表示遅延時間ΔＴｄ２、記録用画像の表示時間Ｔｄ１、ＡＦ用画像の表示時間Ｔｄ２を決定する。具体的には、カメラＭＰＵ１２５は、記録用画像の表示遅延時間ΔＴｄ１を決定する。ここでは、第１の実施形態と同様、ΔＴｄ１＝０であるものとする。そして、カメラＭＰＵ１２５は、Ｓ３０２で設定した撮影条件に基づき、記録用画像の取得完了時刻にΔＴｄ１を加えることにより、記録用画像の表示開始時刻ｔｄ１，ｔｄ１’を算出する。そして、カメラＭＰＵ１２５は、ＡＦ用画像の表示開始時刻ｔｄ２を、記録用画像の表示開始時刻ｔｄ１，ｔｄ１’の中間に決定する。そして、カメラＭＰＵ１２５は、表示開始時刻ｔｄ１，ｔｄ２，ｔｄ１’に基づき、ＡＦ用画像の表示遅延時間ΔＴｄ２、記録用画像の表示時間Ｔｄ１、ＡＦ用画像の表示時間Ｔｄ２を算出する。

Ｓ３０４以降の処理は、Ｓ３０３で決定された表示タイミングが第１の実施形態と異なる点を除き、第１の実施形態と同様である。図６に示すように、記録用画像及びＡＦ用画像が、等しい間隔で順次表示される。

以上説明したように、第２の実施形態によれば、カメラ本体１２０は、記録用画像の表示開始時刻ｔｄ１からＡＦ用画像の表示開始時刻ｔｄ２までの時間が、ＡＦ用画像の表示開始時刻ｔｄ２から記録用画像の表示開始時刻ｔｄ１’までの時間と等しくなるように制御する。これにより、複数の画像の表示間隔が均等になり、ユーザに与える違和感を軽減することが可能となる。

［その他の実施形態］
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

１００…レンズユニット、１２０…カメラ本体、１２２…撮像素子、１２３…撮像素子駆動回路、１２４…画像処理回路、１２５…カメラＭＰＵ、１２６…表示部、１２７…操作スイッチ群

Claims (8)

1. 撮像素子と、
   前記撮像素子を用いた露光及び読み出しを制御することで、露光による蓄積電荷の読み出しに必要な時間が異なる第１の画像と第２の画像を取得する撮像制御手段と、
   前記撮像素子から読み出された画像の表示手段への表示を制御する表示制御手段と、
   を備え、
   前記第２の画像は、前記第１の画像よりも解像度が低く、読み出しに必要な時間が短く、
   前記表示制御手段は、前記表示手段に前記第１の画像と前記第２の画像とを周期的に順に表示させる際に、前記第１の画像及び前記第２の画像の読み出しに必要な時間の差に基づいて、前記第２の画像の読み出し完了から前記表示手段への表示開始までの第１の時間を設定し、
   前記第１の時間は、前記第１の画像の読み出し完了から前記表示手段への表示開始までの第２の時間より長い
   ことを特徴とする撮像装置。
2. 前記表示制御手段は、前記第１の画像及び前記第２の画像を表示する際に、前記第２の画像の読み出し開始から表示までに必要な時間が、前記第１の画像の読み出し開始から表示までに必要な時間以下となるように制御する
   ことを特徴とする請求項１に記載の撮像装置。
3. 前記表示制御手段は、前記第１の画像及び前記第２の画像を表示する際に、前記第２の画像の前記表示手段への表示時間が、前記第１の画像の前記表示手段への表示時間と略等しくなるように制御する
   ことを特徴とする請求項１に記載の撮像装置。
4. 前記表示制御手段は、前記第１の画像と前記第２の画像とを周期的に交互に表示する
   ことを特徴とする請求項１乃至３のいずれか１項に記載の撮像装置。
5. 前記撮像制御手段は、前記撮像素子を用いて連続して取得される、前記第１の画像と前記第２の画像の露光重心の間隔が略同一となるように制御する
   ことを特徴とする請求項１乃至４のいずれか１項に記載の撮像装置。
6. 前記撮像素子は、撮影光学系の異なる瞳部分領域をそれぞれ通過する光束を受光する複数の焦点検出画素を有し、
   前記第１の画像は、記録用の画像データであり、
   前記第２の画像は、視差を持つ焦点検出用の画像データである
   ことを特徴とする請求項１乃至５のいずれか１項に記載の撮像装置。
7. 撮像素子を備える撮像装置が実行する制御方法であって、
   前記撮像素子を用いた露光及び読み出しを制御することで、露光による蓄積電荷の読み出しに必要な時間が異なる第１の画像と第２の画像を取得する撮像制御工程と、
   前記撮像素子から読み出された画像の表示手段への表示を制御する表示制御工程と、
   を備え、
   前記第２の画像は、前記第１の画像よりも解像度が低く、読み出しに必要な時間が短く、
   前記表示制御工程では、前記表示手段に前記第１の画像と前記第２の画像とを周期的に順に表示させる際に、前記第１の画像及び前記第２の画像の読み出しに必要な時間の差に基づいて、前記第２の画像の読み出し完了から前記表示手段への表示開始までの第１の時間を設定し、
   前記第１の時間は、前記第１の画像の読み出し完了から前記表示手段への表示開始までの第２の時間より長い
   ことを特徴とする制御方法。
8. コンピュータを、請求項１乃至６のいずれか１項に記載の撮像装置の各手段として機能させるためのプログラム。

Images