JP6544939B2

JP6544939B2 - 撮像装置及びその制御方法、プログラム、記憶媒体

Info

Publication number: JP6544939B2
Application number: JP2015027944A
Authority: JP
Inventors: 寧司大輪
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2015-02-16
Filing date: 2015-02-16
Publication date: 2019-07-17
Anticipated expiration: 2035-02-16
Also published as: US9936140B2; US20160241792A1; JP2016152458A

Description

本発明は、撮像装置における電子ズームを行う場合の表示制御技術に関するものである。

従来、撮像した画像や外部から伝送された画像をリアルタイムで表示する場合に、撮像や画像の受信のタイミングに対して表示のタイミングが遅れると、素早い被写体の動きに追従して表示することが困難になるという課題があった。この課題に対し、画像の入力に対して表示のタイミングの遅れ（表示遅延）を低減する技術が提案されている。

例えば、特許文献１には、伝送された画像を低遅延で表示する技術が開示されている。特許文献１では、次のような処理が行われる。すなわち、第１の算出部が、画像の書込みが開始された書込み開始時刻から、予め決められた所要時間で書込みを終了できないときに許容される遅延時間を表す許容遅延時間を算出する。第２の算出部が、許容遅延時間以下の遅延時間で書き込まれた画像の書込み開始時刻から、画像の表示を開始する表示タイミングまでに少なくとも要する必要時間を算出する。比較部が、許容遅延時間と必要時間とを比較し、表示調整部が、比較部の比較結果に基づいて表示タイミングを調整する。そして、表示制御部が、調整後の表示タイミングに同期して画像を表示させる。これらの処理により、表示遅延を低減している。

また、表示遅延を低減するメモリアクセスの方法に関して、追い越し制御に関する技術が提案されている。追い越し制御では、同じメモリ領域に対してデータの読み出しが書き込みを追い越さないように所定の遅延量を持たせてメモリアクセス制御を行う。これにより、メモリアクセスによる遅延量を低減することが可能になる。

例えば、特許文献２では、同じメモリ領域に対してデータの書き込みと読み出しを行う場合、データの読み出しが書き込みを追い越さないように所定の遅延量を持たせ、所定の範囲にない場合にアクセスアラームを出力し、読み出しを一時的に停止させる。これにより、読み出しが書き込みを追い越さないように制御する。

特開２０１２−２２２６４３号公報特開２００３−３２３３３３号公報

撮像装置において動画像の撮像、記録、ライブビュー表示を行う場合、撮像、記録、ライブビュー表示のフレームレートを一定に保つ必要がある。例えば時間的に大きさ、位置等が変化する物体を撮影していた場合に撮像、ライブビュー表示のフレームレートが変わってしまうと、記録画像やライブビュー画面での被写体のスムーズな動きが阻害されてしまう。そのため、記録画像やライブビュー画像の見え方が不自然なものとなる可能性がある。特許文献１では、表示のタイミングを調整することで表示遅延の低減を図っているが、上記の理由によりフレームレートを一定に保つ場合には、特許文献１に開示されている技術を適用することは困難である。

また、撮影中に画像の一部を拡大して表示するために電子ズームを用いる場合は、書き込んだ画像の一部の領域を切り出して読み出すことになる。そのため、電子ズームを用いる場合に同じメモリ領域に対してデータの書き込みと読み出しを行うと、電子ズームを用いない場合よりも読み出しが可能になるタイミングが遅くなる場合がある。この遅れが、通常の追い越し制御の技術で設定している書き込みと読み出し間の所定の遅延量を超えた場合、ライブビュー表示が不安定になる場合があった。つまり、画像の一部でフレームの更新が間に合わず、以前のフレームで読み出した画像が２フレームにわたって表示されるようなことがあり、ライブビュー表示の品位を損なうことがあった。

本発明は上述した課題に鑑みてなされたものであり、その目的は、ライブビュー表示をしながら撮影を行う場合において、電子ズームを用いた場合の表示遅延を低減し、安定した画像表示を実現することである。

本発明に係わる撮像装置は、撮像を行い、画像信号を出力する撮像手段と、前記画像信号を記憶する記憶手段と、前記画像信号を前記記憶手段に書き込む書き込み手段と、
前記記憶手段に書き込まれた画像信号の読み出し範囲を変更することにより、前記画像信号の少なくとも一部の領域を読み出す読み出し手段と、前記読み出し手段により読み出された画像信号をライブビュー表示する表示手段と、前記画像信号のフレームごとに、前記書き込み手段が前記記憶手段に前記画像信号を書き込む動作を開始するのに対して一定の遅延時間をおいて前記読み出し手段が前記記憶手段に記憶された前記画像信号を読み出す動作を開始するように制御する制御手段と、前記読み出し手段が前記記憶手段に書き込まれた画像信号の一部の領域を読み出す場合に、該画像信号の一部の領域を拡大する拡大手段と、を備え、前記制御手段は、前記読み出し手段が前記画像信号の一部の領域を読み出す場合、前記書き込み手段の前記記憶手段に対する前記画像信号の書き込み動作と、前記読み出し手段による前記記憶手段からの前記画像信号の読み出し動作とが、前記画像信号の１フレーム期間内に終了するように、前記拡大手段により拡大可能な最大の倍率に基づく前記一定の遅延時間を設定することを特徴とする。

本発明によれば、ライブビュー表示をしながら撮影を行う場合において、電子ズームを用いた場合の表示遅延を低減し、安定した画像表示を実現することが可能となる。

本発明の第１の実施形態に係わる撮像装置の構成を示すブロック図。電子ズームを用いない場合の画像の読み書きの領域と表示領域を説明する図。第１の実施形態における画像の読み書きのタイミングを表す図。第１の実施形態における電子ズーム時の画像の読み書きの領域と表示領域を説明する図。第２の実施形態における電子ズームを用いない場合の画像の読み書きのタイミングを表す図。第３の実施形態における画像の読み書きのタイミングを表す図。第４の実施形態における画像の読み書きのタイミングを表す図。

以下、本発明の実施形態について、添付図面を参照して詳細に説明する。

（第１の実施形態）
図１は、本発明の第１の実施形態に係わる撮像装置の構成を示すブロック図である。図１において、２００は撮像素子であり、不図示の光学レンズ、絞り等を通過した光学像を電気信号に変換し、画像信号を生成する。２０１は画像処理部であり、撮像素子２００から出力される画像信号を取り込み、ノイズ除去、ガンマ処理、補間処理、マトリクス変換処理、合成処理等の各種画像処理を施す。２０２は画像処理部２０１により画像処理されたデータをメモリに書き込むメモリ書き込み部である。

２０３Ａ、２０３ＢはＶＲＡＭであり、メモリ書き込み部２０２により、画像データ２０３Ａ−１，２０３Ｂ−１がそれぞれ書き込まれる。メモリ書き込み部２０２はメモリ内に複数フレーム分のＶＲＡＭを生成することが出来る。本実施形態では説明を分かりやすくするため、メモリ書き込み部２０２はそれぞれ１フレーム分の画像データを書き込み可能なＶＲＡＭ２０３Ａ、２０３Ｂをメモリ内に生成し、それぞれに１フレーム分の画像データ２０３Ａ−１，２０３Ｂ−１を書き込むものとする。メモリは画像信号を一時的に記憶する記憶部であり、本実施形態では揮発性メモリであるダイナミック・ランダム・アクセス・メモリ（ＤＲＡＭ）を使用するが、不揮発性メモリ等の他の一時記憶手段を使用しても構わない。

２０４はメモリ読み出し部であり、メモリ書き込み部２０２でＶＲＡＭ２０３Ａ，２０３Ｂに書き込まれた画像データ２０３Ａ−１，２０３Ｂ−１を交互にメモリから読み出す。２０５は画像変倍部であり、メモリ読み出し部２０４により読み出された画像の特定の領域に対して拡大処理を行う。表示部２０６は画像変倍部２０５により変倍された画像を不図示の表示デバイスに表示する。表示デバイスは液晶ディスプレイ、ＴＶモニタ等既存のものを使用する。

２０７は同期信号生成部である。同期信号生成部２０７は、撮像、ライブビュー表示のフレームレートを規定する同期信号を生成し、撮像素子２００、表示部２０６、後述する変倍制御部２０８に同期信号を送る。フレームレートは３０ｆｐｓ、６０ｆｐｓ等の規格で規定される一定のレートである。２０８は変倍制御部である。変倍制御部２０８は、ユーザーが電子ズームを指定した場合に、同期信号生成部２０７から送られる同期信号を受けてフレーム単位で拡大率と拡大領域を決定する。

図２を参照して、電子ズームを用いない場合のメモリの読み書きとレート制御について説明する。３００は撮像素子２００から入力されメモリ書き込み部２０２によりメモリに書き込まれる画像領域を表している。３０１はメモリ書き込み部２０２による書き込みの走査を表しており、ラスター走査により上端から下端方向に画像データが書き込まれる。３１０はメモリ読み出し部２０４によりメモリから読み出される画像領域を表している。３１１はメモリ読み出し部２０４による読み出しの走査を表しており、書き込みの走査３０１と同様にラスター走査が行われる。３２０は表示部２０６による表示を表している。本実施形態では表示３２０のサイズは読み出される画像領域３１０と同じサイズとする。３２１は表示部２０６による表示の走査を表しており、書き込みの走査３１１と同様にラスター走査が行われる。

図２において、表示の走査３２１は表示デバイスで規定された画像サイズおよびレートで行われる必要がある。読み出しの走査３１１は、表示の走査３２１のレート処理を満たすようにタイミングを合わせて行われる。電子ズームを行っておらず、表示３２０と読み出しの画像サイズ３１０が同じ場合は、読み出しの走査３０１と表示の走査３２１は同じレートで処理することができる。一方書き込みに関しては、図３で後述するように、撮像素子の同期信号に合わせたレートで行われる。上記のようなレートで処理を行う場合、書き込みの走査３０１と読み出しの走査３１１は所定の遅延時間を持ってタイミングをずらして行われる。これにより、同じメモリ領域に対して画像データの書き込みと読み出しのアクセスを行う制御が可能となる。

図３は、本実施形態における画像の読み書きのタイミングを表す図である。本実施形態におけるメモリ書き込み部２０２とメモリ読み出し部２０４による画像の読み書きのタイミングについて、図３を参照して説明する。図３において、（ａ）は電子ズームを用いない場合、（ｂ）は電子ズームを用いる場合のライブビュー動作中の読み書きのタイミングを表している。またそれぞれにおいて横軸は時刻、縦軸は画像の水平ラインの垂直方向位置を表している。縦軸は、矢印の方向に下端から上端の水平ラインを表している。

図３（ａ）において、一定間隔で存在している１００は、同期信号生成部２０７によって生成される撮像素子２００の同期信号を表している。１０１は、メモリ書き込み部２０２によるメモリへの画像データの書き込みタイミングを表している。メモリ書き込み部２０２は、撮像素子の同期信号１００のタイミングに従って、画像の上端から下端に向けてライン単位で画像データをメモリへ書き込む。一定の間隔で存在している１０２は、同期信号生成部２０７によって生成される表示部２０６の同期信号を表している。１０３はメモリ読み出しタイミングであり、メモリ読み出し部２０４は、表示同期信号１０２に従って、画像の上端から下端に向けてライン単位で画像データをメモリから読み出す。１０４は、メモリ読み出し部２０４が読み出す垂直方向の画像の領域を表している。図３（ａ）では読み出し、書き込み共に画像の上端から下端まで走査している。

１０５は撮像素子の同期信号１００の周期を示している。１０６は表示同期信号１０２の周期を示している。図３（ａ）においては撮像素子の同期信号１００の周期１０５と表示同期信号１０２の周期１０６は同じであるが、整数比で異なっていても構わない。例えば撮像素子の同期信号１００が表示同期信号１０２に対して２倍のフレームレートの場合は、表示同期信号１０２は撮像素子の同期信号１００に対して２倍の間隔で生成されることになる。この場合は、メモリ読み出し部２０４はメモリ書き込み部２０２が書き込むフレームに対して、１フレームずつ間引いて読み出せばよい。

１０７は撮像素子の同期信号１００と表示同期信号１０２の位相差であり、同期信号生成部２０７における所定の遅延量を示す。図３（ａ）においては、遅延量１０７を持たせることにより、画像の読み出しタイミング１０３が書き込みタイミング１０１を追い越さないようにすることができる。遅延量１０７は同期信号生成部２０７によって制御される。

次に図３（ｂ）について説明する。図３（ｂ）は電子ズームを用いて画像を拡大する場合を示している。電子ズームによって生じる拡大処理により画像全体ではなく一部の領域を読み出す。１１０はメモリ読み出し部２０４が読み出す垂直方向の画像の領域を表している。１１１は画像の拡大の中心である。図３（ｂ）では画像の拡大の中心と画像の中心とが一致している場合を示している。このとき、表示部２０６が表示する画像は拡大画像であるため、読み出す領域は画像の全体ではなく一部となる。メモリ読み出し部２０４は、電子ズームを用いない場合には図３（ａ）の画像領域１０４を、電子ズームで拡大する場合は図３（ｂ）の１１１を中心として画像領域１１０を読み出す。

電子ズームで最大に拡大する状態が図３（ｂ）に示す状態である場合、図３（ｂ）における画像の読み出しタイミング１０３Ａが書き込みタイミング１０１を追い越さないように保障する遅延量を、所定の遅延量１０７とする。電子ズームの倍率によらずこの遅延量１０７は固定とする。

電子ズームの倍率が最大でない場合、図３（ｂ）の画像読み出し領域１１０は広くなり、メモリからの画像の読み出しタイミング１０３の傾きは図３（ｂ）の読み出しタイミング１０３Ａの傾きよりも大きくなる（急になる）。そのため、画像の読み出しタイミング１０３が画像の書き込みタイミング１０２を追い越すことは無い。つまり、図３（ｂ）のように遅延量１０７を固定の値に設定することにより、電子ズームの倍率によらず画像の読み出しタイミング１０３が書き込みタイミング１０２を追い越さないように保障することができ、画像のライブビュー表示も安定化させることができる。さらに、遅延量１０７が一定となることで撮像素子の同期信号１００と表示同期信号１０２のタイミングが一定となり、撮像から表示までの遅延時間を安定させ、かつ遅延時間を必要最小限に低減させることができる。

次に、図４を参照して、電子ズームを用いる場合のメモリへの画像データの読み書きとレート制御について説明する。４００は、撮像素子２００から出力されメモリ書き込み部２０２によりメモリに書き込まれる画像領域を表している。４０１は、メモリ書き込み部２０２による書き込みの走査を表しており、ラスター走査により上端から下端に向けて画像データが書き込まれる状態を示す。４１０は、画像データが書き込まれたメモリにおける読み出し画像領域を表している。４１０は電子ズームを用いる場合の読み出し領域、４１１は読み出しの走査を表している。４４０は表示部２０６による表示領域を表している。４４１は表示部２０６による表示の走査を表しており、ラスター走査により行われる。画像変倍部２０５は、画像領域４１０の画像サイズを表示画像領域４４０の画像サイズに拡大する。

既に説明したように、表示の走査４４１は表示デバイスで規定された画像サイズおよびレートで行われる必要がある。図４に示す通り、読み出し画像領域４１０と表示画像領域４４０のサイズが異なっているため、読み出しの走査のレート、および表示の走査のレートはそれぞれ異なることなる。図３（ｂ）で示されるように、読み出しの走査は表示の走査に対して開始のタイミングは同じであるが、読み出しの走査のほうが低速度となる。一方で読み出し開始のタイミングは表示の走査の開始タイミングと同じであるため、図４の読み出し画像領域４１０において、書き込みの走査４０１を追い越すことが無いだけの遅延量１０７が必要となる。

上述したように、電子ズームの最大倍率における撮像素子の同期信号１００と表示同期信号１０２の遅延量１０７を、画像の読み出しタイミング１０３が書き込みタイミング１０１を追い越さないように保障する固定の遅延量とする。言い換えれば、メモリ書き込み部２０２のメモリに対する画像信号の書き込み動作と、メモリ読み出し部によるメモリからの画像信号の読み出し動作とが、画像信号の１フレーム期間内に終了するように、一定の遅延時間を設定する。これにより、電子ズーム倍率が変わった場合においても画像の読み出しタイミング１０３が書き込みタイミング１０１を追い越さないよう保証することができるため、撮像素子の同期信号１００と表示同期信号１０２のタイミングを電子ズーム倍率によらず一定とすることができる。そのため、撮像からライブビュー表示までの遅延時間を安定させ、かつ遅延時間を低減させることが可能となる。

（第２の実施形態）
次に、図５を用いて、本発明の第２の実施形態の撮像装置について説明する。第１の実施形態では、電子ズームの有無によらず、メモリへの画像の書き込みに対する画像の読み出しのタイミングの遅延量１０７を固定した一定の値としていた。それに対し、この第２の実施形態では、電子ズームの有無によって遅延量を切り換える。本実施形態では、メモリへの画像の書き込みに対する画像の読み出しのタイミングの遅延量は、電子ズームを用いない場合のライブビュー表示の遅延量を最小にするという視点で制御する。

図５は、第２の実施形態におけるメモリ書き込み部２０２とメモリ読み出し部２０４による画像の読み書きのタイミングを示した図である。電子ズームを行わない場合においては、撮像素子の同期信号と表示同期信号の遅延量を最短とする。図５において、５００は撮像素子の同期信号であり一定間隔で発生する。５０１はメモリ書き込み部２０２による書き込みタイミングを表している。５０２は表示同期信号であり一定間隔で存在している。５０３はメモリ読み出し部２０４によるメモリからの画像データの読み出しタイミングを表している。５０４はメモリ読み出し部２０４が読み出す垂直方向の画像の領域を表している。図５では、画像の読み出し、書き込み共に画像の上端から下端まで走査している。

５０５は撮像素子の同期信号５００の周期を示している。５０６は表示同期信号５０２の周期を示している。５０７は撮像素子の同期信号５００と表示同期信号５０２の位相差を示し、同期信号生成部２０７における所定の遅延量を示す。図３（ａ）では電子ズーム時のことも考慮して遅延量１０７を設定したが、図５では電子ズームを行わない場合に限った遅延量を設定している。電子ズームを用いない場合に、最低限の遅延量５０７を持たせることで、画像の読み出しタイミング５０３が書き込みタイミング５０１を追い越さないようにすることができる。遅延量５０７は同期信号生成部２０７によって制御される。

電子ズームを用いるか用いないかをユーザの操作によって撮影モードなどに応じて切り替えられる場合、電子ズームを用いる場合は第１の実施形態の図３で説明した遅延量１０７を用いる。また、電子ズームを用いない場合は図５の遅延量５０７を用いる。このように撮影モードと連動して遅延量を切り替えることにより、撮像から表示までの遅延時間を安定させ、かつ遅延時間を電子ズームの有り無しに応じて最短にすることが可能となる。

さらに電子ズームの最大倍率が切り替わる場合においても、各最大倍率における図３（ｂ）の最短の遅延量１０７に切り替えることが考えられる。これにより電子ズームの最大倍率が切り替わる場合おいても、これに連動して遅延量１０７を切り替えることで、撮像から表示までの遅延時間を安定させ、かつ遅延時間を最短にすることが可能となる。

（第３の実施形態）
次に、図６を用いて、本発明の第３の実施形態の撮像装置について説明する。第１の実施形態では、電子ズームの最大倍率時に必要な位相差によって決まる時間を固定した一定の遅延量１０７としていた。それに対し、この第３の実施形態では、電子ズームの最大倍率によらず一定の遅延量とする。本実施形態では、製品機能や撮影モードによらず表示遅延量を低減しライブビュー表示を安定にするという視点で制御を行う。

図６は、第３の実施形態におけるメモリ書き込み部２０２とメモリ読み出し部２０４による画像の読み書きのタイミングを示した図である。図６（ａ）は電子ズームの最大倍率、およびメモリ書き込みタイミングの違いによらず一定の遅延量とする例である。図６（ａ）の６００は撮像素子の同期信号であり一定間隔で存在している。６０１はメモリ書き込み部２０２による画像の書き込みタイミングを表している。６０２は表示同期信号であり一定間隔で存在している。６０３はメモリ読み出し部２０４によるメモリからの画像の読み出しタイミングを表している。６０５は撮像素子の同期信号６００の周期を示している。６０６は表示同期信号６０２の周期を示している。

図６（ａ）では、撮像素子の同期信号６００の周期６０５と表示同期信号６０２の周期６０６は同じであるが、整数比で異なっていても構わない。例えば撮像素子の同期信号６００が表示同期信号６０２に対して２倍のフレームレートの場合は、表示同期信号６０２は撮像素子の同期信号６００に対して２倍の間隔で生成されることになる。この場合はメモリ読み出し部２０４はメモリ書き込み部２０２が書き込むフレームに対して、１フレームずつ間引いて読み出せばよい。

６０７は、撮像素子の同期信号６００と表示同期信号６０２の位相差であり所定の遅延量である。図６（ａ）の例では、遅延量６０７は撮像素子の同期信号６００の周期６０５の１／２の期間とする。これにより電子ズームによる拡大の中心が画像の中心と一致する場合、電子ズームの最大倍率によらず画像の読み出しタイミング６０３が書き込みタイミング６０１を追い越さないようにすることができる。遅延量６０７は同期信号生成部２０７によって制御される。

また、図６（ｂ）は電子ズームの最大倍率によらず一定の遅延量とする例である。図６（ｂ）の６１０は撮像素子の同期信号であり一定間隔で存在している。６１１はメモリ書き込み部２０２によるメモリへの画像の書き込みタイミングを表している。６１２は表示同期信号であり一定間隔で存在している。６１３は、メモリ読み出し部２０４によるメモリからの画像の読み出しタイミングを表している。６１５は撮像素子の同期信号６１０の周期を示している。６１６は表示同期信号６１２の周期を示している。図６（ｂ）では撮像素子の同期信号６１０の周期６１５と表示同期信号６１２の周期６１６は同じであるが、前述したように、整数比で異なっていても構わない。

６１７は撮像素子の同期信号６１０と表示同期信号６１２の位相差であり所定の遅延量である。６１８はメモリへの画像の書き込みタイミング６１１の書き込み期間を表わす。図６（ｂ）の例では、遅延量６１７はメモリ書き込み期間６１８の１／２の期間とする。これにより電子ズームの拡大の中心が画像の中心と一致する場合、電子ズームの最大倍率によらず画像の読み出しタイミング６０３が書き込みタイミング６０１を追い越さないようにすることができる。遅延量６１７は同期信号生成部２０７によって制御される。

このように、遅延量６０７を上記のように設定すれば、電子ズームの拡大の中心が画像の中心と一致する場合、電子ズームの最大倍率、およびメモリ書き込みタイミングの違いによらず遅延量６０７を一定とすることができる。そして、撮像から表示までの遅延時間を安定させ、かつ遅延時間を低減させることが可能となる。

また、遅延量６１７を上記のように設定すれば、電子ズームの拡大の中心が画像の中心と一致する場合、電子ズームの最大倍率の違いによらず遅延量６１７を一定とすることができる。そして、撮像から表示までの遅延時間を安定させ、かつ遅延時間を低減させることが可能となる。

（第４の実施形態）
次に、図７を用いて本発明の第４の実施形態の撮像装置について説明する。第１の実施形態では、電子ズームの拡大の中心が画像の中心と一致する例について説明したが、第４の実施形態では、電子ズームの拡大の中心が画像の中心以外である例について説明する。第１の実施形態では電子ズームの最大倍率のときの必要な遅延量で所定の遅延量１０７が決まっていたが、第４の実施形態では、電子ズームの最大倍率と電子ズームの中心位置を考慮して所定の遅延量を決める。

図７（ａ）、（ｂ）、（ｃ）は電子ズームの中心位置が異なる場合のメモリ書き込み部２０２とメモリ読み出し部２０４による画像の読み書きのタイミングを示した図である。図７（ａ）は電子ズームの拡大の中心が画像の中心に一致する場合、図７（ｂ）は電子ズームの拡大の中心が画像の中心より上にある場合、図７（ｃ）は電子ズームの拡大の中心が画像の中心より下にある場合を示す。ここでは、図７（ａ）、（ｂ）、（ｃ）に示す状態は、いずれも電子ズームの最大倍率の状態とする。また図７（ｂ）より上の位置には電子ズームの拡大の中心は来ないものとし、図７（ｃ）より下の位置には電子ズームの拡大の中心は来ないものとする。

図７（ａ）の７００は撮像素子の同期信号であり一定間隔で存在している。７０１はメモリ書き込み部２０２によるメモリへの画像の書き込みタイミングを表している。７０２は表示同期信号であり一定間隔で存在している。７０３はメモリ読み出し部２０４によるメモリからの画像の読み出しタイミングを表している。７０４はメモリ書き込み部２０２によって書き込まれる垂直方向の画像の領域を表している。メモリ書き込みタイミング７０１で画像の上端から下端まで走査している。

７０５は撮像素子の同期信号７００の周期を示している。７０６は表示同期信号７０２の周期を示している。７０７は撮像素子の同期信号５００と表示同期信号５０２の位相差であり、同期信号生成部２０７における所定の遅延量を示す。図７（ａ）の７０８はメモリ読み出し部２０４により読み出される垂直方向の画像領域を表している。７０９は電子ズームの中心であり、図７（ａ）では書き込まれた画像領域７０４の中心である。

図７（ｂ）の７１８はメモリ読み出し部２０４により読み出される垂直方向の画像領域を表している。７１９は電子ズームの拡大の中心である。読み出し領域７１８は図７（ａ）の読み出し領域７０８よりも画像領域７０４の上端側に寄っている。また電子ズームの拡大の中心７１９も画像領域７０４の中心および図７（ａ）の電子ズームの拡大の中心７０９よりも上に位置している。つまり電子ズームの拡大の中心、および領域が画像の上端側に寄っている場合を示している。言い換えれば、図７（ｂ）は、電子ズームが最大倍率で、且つ拡大する領域が最も上端側に寄っている場合を示している。

図７（ｃ）の７２８はメモリ読み出し部２０４により読み出される垂直方向の画像領域を表している。７２９は電子ズームの拡大の中心である。読み出し領域７２８は図７（ａ）の読み出し領域７０８よりも画像領域７０４の下端側に寄っている。また電子ズームの拡大の中心７２９も画像領域７０４の中心および図７（ａ）の電子ズームの拡大の中心７０９よりも下に位置している。つまり電子ズームの拡大の中心、および領域が画像の下端側に寄っている場合を示している。言い換えれば、図７（ｃ）は、電子ズームの最大倍率で、且つ拡大する領域が最も下端側に寄っている場合を示している。

画像の読み出しタイミング７０３が書き込みタイミング７０１を追い越さない遅延量を考えた場合、図７（ｃ）の場合が最も大きな遅延量を必要とする。図７（ｃ）で画像の読み出しタイミング７０３が書き込みタイミング７０１を追い越さない遅延量を遅延量７０７とする。これにより、電子ズームの倍率、電子ズームの拡大の中心の位置によらず、画像の読み出しタイミング７０３が書き込みタイミング７０１を追い越さない固定した一定の遅延量７０７を決定することができる。遅延量７０７は同期信号生成部２０７によって制御される。

以上説明したように、本実施形態では、電子ズームの最大倍率でかつ電子ズームの拡大領域および拡大の中心位置が最も下端に寄っている場合に必要とする遅延量を所定の遅延量７０７とする。これにより、電子ズームの倍率、電子ズームの中心位置によらず、画像の読み出しタイミング７０３が書き込みタイミング７０１を追い越さないように保障することができる。そのため、撮像素子の同期信号７００と表示同期信号７０２のタイミングを電子ズーム倍率、電子ズームの中心位置によらず一定とすることができ、撮像から表示までの遅延時間を安定させ、かつ遅延時間を低減させることが可能となる。

なお、本実施形態は、画像の上端から下端方向に走査した場合の例であり、下端から上端に走査する場合はこれと逆となる。しかし、遅延量７０７は同様に決定することができる。この場合は電子ズーム倍率が最大でかつ上端側に最も寄っている場合に必要とする遅延量を遅延量７０７とすればよい。

以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。

（その他の実施形態）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

１００：撮像素子の同期信号、１０１：メモリ書き込みタイミング、１０２：表示同期信号、１０３：メモリ読み出しタイミング、１０４：画像の垂直方向の読み出し領域、１０５：撮像素子の同期信号の周期、１０６：表示同期信号の周期、１０７：遅延量、１１０：画像の垂直方向の読み出し領域、１１１：拡大の中心

Claims

撮像を行い、画像信号を出力する撮像手段と、
前記画像信号を記憶する記憶手段と、
前記画像信号を前記記憶手段に書き込む書き込み手段と、
前記記憶手段に書き込まれた画像信号の読み出し範囲を変更することにより、前記画像信号の少なくとも一部の領域を読み出す読み出し手段と、
前記読み出し手段により読み出された画像信号をライブビュー表示する表示手段と、
前記画像信号のフレームごとに、前記書き込み手段が前記記憶手段に前記画像信号を書き込む動作を開始するのに対して一定の遅延時間をおいて前記読み出し手段が前記記憶手段に記憶された前記画像信号を読み出す動作を開始するように制御する制御手段と、
前記読み出し手段が前記記憶手段に書き込まれた画像信号の一部の領域を読み出す場合に、該画像信号の一部の領域を拡大する拡大手段と、を備え、
前記制御手段は、前記読み出し手段が前記画像信号の一部の領域を読み出す場合、前記書き込み手段の前記記憶手段に対する前記画像信号の書き込み動作と、前記読み出し手段による前記記憶手段からの前記画像信号の読み出し動作とが、前記画像信号の１フレーム期間内に終了するように、前記拡大手段により拡大可能な最大の倍率に基づく前記一定の遅延時間を設定することを特徴とする撮像装置。
前記制御手段は、前記読み出し手段が前記記憶手段に書き込まれた画像信号の全てを前記記憶手段から読み出すか、前記記憶手段に書き込まれた画像信号の一部の領域を前記記憶手段から読み出すかに応じて、前記一定の遅延時間を変更することを特徴とする請求項１に記載の撮像装置。
前記制御手段は、前記読み出し手段が前記記憶手段に書き込まれた画像信号の一部の領域を前記記憶手段から読み出す場合に、該読み出される画像信号の一部の領域の前記画像信号の全体に対する中心位置に応じて、前記一定の遅延時間を変更することを特徴とする請求項１に記載の撮像装置。
前記表示手段は、前記拡大手段により前記画像信号の一部の領域が拡大された場合は、該拡大された領域の画像信号をライブビュー表示することを特徴とする請求項１乃至３のいずれか１項に記載の撮像装置。
前記記憶手段は、第１の記憶手段と第２の記憶手段とからなり、
前記書き込み手段による書き込みと前記読み出し手段による読み出しとは、前記画像信号の１フレーム単位で前記第１の記憶手段及び前記第２の記憶手段に対して交互に行われることを特徴とする請求項１乃至４のいずれか１項に記載の撮像装置。
前記拡大手段による拡大の拡大率は、ユーザからの電子ズームの指示に応じて制御されることを特徴とする請求項１乃至５のいずれか１項に記載の撮像装置。
撮像を行い、画像信号を出力する撮像手段と、前記画像信号を記憶する記憶手段とを備える撮像装置を制御する方法であって、
前記画像信号を前記記憶手段に書き込む書き込み工程と、
前記記憶手段に書き込まれた画像信号の読み出し範囲を変更することにより、前記画像信号の少なくとも一部の領域を読み出す読み出し工程と、
前記読み出し工程により読み出された画像信号をライブビュー表示する表示工程と、
前記画像信号のフレームごとに、前記書き込み工程で前記記憶手段に前記画像信号を書き込む動作を開始するのに対して一定の遅延時間をおいて前記読み出し工程で前記記憶手段に記憶された前記画像信号を読み出す動作を開始するように制御する制御工程と、
前記読み出し工程において、前記記憶手段に書き込まれた画像信号の一部の領域を読み出す場合に、該画像信号の一部の領域を拡大する拡大工程と、を有し、
前記制御工程では、前記読み出し工程において前記画像信号の一部の領域を読み出す場合、前記書き込み工程における前記記憶手段に対する前記画像信号の書き込み動作と、前記読み出し工程における前記記憶手段からの前記画像信号の読み出し動作とが、前記画像信号の１フレーム期間内に終了するように、前記拡大工程において拡大可能な最大の倍率に基づく前記一定の遅延時間を設定することを特徴とする撮像装置の制御方法。
コンピュータを、請求項１乃至６のいずれか１項に記載の撮像装置の各手段として機能させるためのプログラム。