JP2015019282A - 画像処理装置、画像処理装置の制御方法、画像処理装置の制御プログラムおよび記憶媒体 - Google Patents

Abstract

【課題】 望遠状態で被写体がフレームアウトした場合でも、広角状態で被写体を追い続ける場合でも、速やかに被写体を捉えることを可能にする。
【解決手段】 画像処理装置は、ユーザがズーム位置の変更を指示するための第１の操作手段と、前記第１の操作手段の操作に応じてズーム位置を制御する制御手段とを有する。前記制御手段は、前記第１の操作手段における第１の操作に応じて第１のズーム位置を設定し、さらに前記第１の操作手段における第２の操作に応じてズーム位置を前記第１のズーム位置に移動し、前記第１の操作に応じてズーム位置を広角側に移動する第１のモードと、当該第１のモードと異なる第２のモードとを切り替え可能である。
【選択図】 図５

Description

本発明は、ズーム機能を有する画像処理装置及びその制御方法等に関するものである。

デジタルカメラ等の撮像装置には、ズームレンズの駆動による光学的な変倍（光学ズーム）機能と、撮像した領域の一部を拡大する電子的な変倍（電子ズーム）機能を備えたものがある。近年、ズームレンズの性能向上により、超広角から超望遠まで同一のレンズで撮影でき、また撮像素子の高画素化によって、拡大倍率を高くしても十分な解像感の得られる撮影が可能になってきている。

高倍率のズーム機能を備えるカメラでは、望遠状態での画角合わせの際、被写体のわずかな移動でフレームアウトが起こりうる。また、カメラを少し動かすだけで画角が大きくずれてしまう。そこで、被写体がフレームアウトした場合でも、簡単な操作で被写体を捉え直すことができるようにするための方法が提案されている。

特許文献１では、所定の操作スイッチの押下中は被写体を探索しやくするために画角をズームアウトさせ、該操作スイッチが開放されるともとのズーム位置までズームインする機能が開示されている。この機能によれば、被写体がフレームアウトした場合でも、撮影者は簡単な操作で即座に被写体を捉え直しつつ、所望の画角で撮影を行うことができる。

特開２０１２−６０５９５号公報

特許文献１に開示の機能では、望遠状態で被写体がフレームアウトした場合に、広角方向にズーム位置を変更することによって被写体を捉え直している。一方、撮影者が動いている被写体であると分かっているような場合には、予め広角状態で被写体を追い続けたほうが被写体を捉えやすい場合がある。このような場合でも、シャッタチャンスがきたときに速やかに所望の画角に変更できることが望ましい。

本発明の目的は、望遠状態で被写体がフレームアウトした場合でも、広角状態で被写体を追い続ける場合でも、速やかに被写体を捉えるのを可能にすることである。

上記目的を達成するために、第１の本発明は、ユーザがズーム位置の変更を指示するための第１の操作手段と、前記第１の操作手段の操作に応じてズーム位置を制御する制御手段とを有する画像処理装置であって、前記制御手段は、前記第１の操作手段における第１の操作に応じて第１のズーム位置を設定し、さらに前記第１の操作手段における第２の操作に応じてズーム位置を前記第１のズーム位置に移動し、前記第１の操作に応じてズーム位置を広角側に移動する第１のモードと、当該第１のモードと異なる第２のモードとを切り替え可能であることを特徴とする。

第２の本発明は、ユーザがズーム位置の変更を指示するための第１の操作手段を有する画像処理装置の制御方法であって、前記第１の操作手段における第１の操作に応じて第１のズーム位置を設定するステップと、さらに前記第１の操作手段における第２の操作に応じてズーム位置を前記第１のズーム位置に移動するステップとを有し、前記第１の操作に応じてズーム位置を広角側に移動する第１のモードと、当該第１のモードと異なる第２のモードとを切り替え可能であることを特徴とする。

本発明によれば、望遠状態で被写体がフレームアウトした場合でも、広角状態で被写体を追い続ける場合でも、速やかに被写体を捉えることが可能になる。

本発明の実施形態に係るデジタルカメラの構成例を示すブロック図である。 焦点距離と、被写体距離ごとのフォーカスレンズ位置との関係を例示した図である。 被写体探索状態での画角及び撮影準備状態での画角を例示した図である。 本発明の実施形態に係るズーム機能の処理例を説明するフローチャートである。 ＦＡモードの選択処理例を説明するフローチャートである。 メニュー設定の設定画面を例示した図である。 手動切替モードにおける電子ズーム及び光学ズームによるズームアウト位置の算出方法を説明する図である。 自動切替モードにおける電子ズーム及び光学ズームによるズームアウト位置の算出方法を説明する図である。 選択されるＦＡモードを撮影者に知らせる表示を例示した図である。 被写体探索状態でのズーム操作時の動作例を説明するフローチャートである。 図６とは別の動作例を説明するフローチャートである。 図６の動作と図７の動作を選択可能な動作例を説明するフローチャートである。 ＦＡズーム操作スイッチを含むデジタルカメラの外観を示す図である。 図５とは別のＦＡモードの選択処理例を説明するフローチャートである。

（実施例１）
以下に、本発明の実施例を添付図面に基づいて詳細に説明する。なお、本実施例によって実現される機能は、撮影者によるフレーミングを支援するフレーミング支援ズーム機能であり、便宜上、フレーミングアシストズーム機能（以下、ＦＡズーム機能と略記）と呼ぶこととする。

図１は、本発明の実施例に係る画像処理装置の一例としての、デジタルカメラ１００の構成例を示すブロック図である。レンズ鏡筒１０１は、その内部にレンズ群を保持している。ズームレンズ１０２は光軸方向に移動することにより、焦点距離を調節することで光学的に画角を変更（ズーム位置を移動）する。フォーカスレンズ１０３は光軸方向に移動することによりピントを調節する。防振レンズ１０４は手ぶれに起因する像振れを補正する補正用レンズである。光量を調節する絞り及びシャッタ１０５は露出制御に使用される。レンズ鏡筒１０１を通過した光は、ＣＣＤ（電荷結合素子）やＣＭＯＳ（相補型金属酸化膜半導体）等を用いた撮像素子１０６にて受光され、光電変換されて撮像信号が生成される。撮像信号は、画像処理回路１０７に入力されて、画素補間処理や色変換処理等が施された後、画像データとして画像メモリ１０８に送られる。画像メモリ１０８はＤＲＡＭ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）やＳＲＡＭ（Ｓｔａｔｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等で構成される。

表示手段としての表示部１０９は、ＴＦＴ型ＬＣＤ（薄膜トランジスタ駆動型液晶表示器）等で構成され、撮影した画像データとともに、特定の情報（例えば、撮影情報や後述するＦＡズーム枠等）を表示する。このようなライブビュー等の情報表示により、ユーザが画角合わせを行うための電子ビューファインダ（ＥＶＦ）機能を実現している。

絞りシャッタ駆動部１１０は、画像処理回路１０７での画像処理によって得られた輝度情報に基づいて露出制御値（絞り値及びシャッタ速度）を演算し、演算結果に基づき絞り及びシャッタ１０５を駆動する。これによって、自動露出（ＡＥ）制御が行われる。防振レンズ駆動部１１１は、ジャイロセンサ等の角速度センサの情報に基づいてデジタルカメラ１００に加わる振れ量を演算し、振れを打ち消すように防振レンズ１０４を駆動する。

フォーカスレンズ駆動部１１２は、フォーカスレンズ１０３を駆動する。例えば、コントラストＡＦ方式の制御では、画像処理回路１０７の画像処理によって得られた撮影光学系の焦点調節情報（コントラスト評価値）に基づき、被写体にピントが合うようにフォーカスレンズ１０３が駆動される。なお、本実施形態の適用上、焦点調節制御の如何は問わないので、位相差ＡＦ方式や他の方式と組み合わせた方式も採用可能である。

ズームレンズ駆動部１１３は、ズーム操作指示に従ってズームレンズ１０２を駆動する。操作部１１７には、撮影者がカメラにズーミングを指示するためのズーム操作部材としてのズームレバーまたはズームボタン等が設けられている。ズーム指示操作に用いるズーム操作部材（第２の操作手段）の操作量及び操作方向に基づいてシステム制御部１１４によりズーム駆動速度や駆動方向が演算され、演算結果に従ってズームレンズ１０２が光軸に沿って移動する。

撮影動作によって生成された画像データは、インターフェース部（以下Ｉ／Ｆ部と呼ぶ）１１５を介して記録部１１６に送られて記録される。画像データは、カメラに装着して使用するメモリカード等の外部記録媒体や、デジタルカメラ１００に内蔵されている不揮発性のメモリ１１８、あるいは両方に記録される。

操作部１１７は、前記ズーム操作部材の他、撮影開始を指示するレリーズスイッチ、ＦＡズーム機能の開始や終了を指示する、ＦＡズーム操作スイッチ（第１の操作手段）等を含む。操作信号は前述のシステム制御部１１４に送られる。メモリ１１８は、コンピュータプログラムデータや画像データの他に、デジタルカメラ１００の設定情報や、後述するＦＡズーム機能におけるズームイン位置等の情報を記憶する。なお、ズームイン位置（第１のズーム位置）とは、ＦＡズームの終了時に、開始時のズーム位置へと復帰させる際の戻り位置等であり、その詳細については後述する。

制御手段としてのシステム制御部１１４は、ＣＰＵ（中央演算処理装置）等の演算装置を用いて構成され、撮影者の操作に応じて各部に制御命令を送ることでカメラ全体を制御する。システム制御部１１４は、メモリ１１８に記憶されている各種の制御プログラム、例えば撮像素子１０６の制御やＡＥ／ＡＦ制御、ズーム制御（ＦＡズーム処理を含む）等を行うためのプログラムを実行する。

次に、システム制御部１１４のうち、ＦＡズーム機能に関連する制御について説明する。なお、図１にはシステム制御部１１４の内部処理を１１９乃至１２２の各機能ブロックで表している。

光学ズームによる画角変更時でも合焦状態を維持するためには、レンズ鏡筒１０１に示すリアフォーカスタイプの鏡筒の場合、ズームレンズ１０２の位置に応じてフォーカスレンズ１０３を適正なフォーカス位置へ移動させる必要がある。このような制御をコンピュータズーム（ＣＺ）制御という。図２は、ズームレンズの焦点距離と、ピントが合うフォーカス位置との関係を、被写体までの距離ごとに示すデータデーブルをグラフ化した図である。このテーブルはフォーカスカムテーブルと称する。横軸はズーム位置に対応する焦点距離を示し、縦軸はフォーカス位置を示し、各グラフ線の横にはカメラから被写体までの距離（被写体距離）を示している。システム制御部１１４は、ＡＦ動作時にフォーカスレンズ駆動部１１２を制御してフォーカスレンズ１０３を所定の範囲で移動させることでスキャン動作を行う。この動作中に得られるコントラスト評価値等を用いて既知の方法により、合焦点であるフォーカス位置が検出される。その時のズーム位置とフォーカス位置から、フォーカスカムテーブルを参照することで被写体距離が計測可能である。

デジタルカメラ１００は、光学ズーム機能と電子ズーム機能を有する。ＣＺ制御部１１９とズームレンズ駆動部１１３は、光学ズーム駆動を担当する。ＣＺ制御部１１９は、ズーム動作時にて所定の制御周期ごとにズームレンズ１０２のズーム位置を検出し、そのズーム位置に応じてフォーカスカムテーブルに追従するようにフォーカスレンズ１０３を駆動させる。これによって、合焦状態を維持したまま光学ズーム動作を行うことが可能となる。

一方、電子ズーム制御部１２０及び画像メモリ１０８は、電子ズーム駆動を担当する。電子ズーム制御部１２０は、画像メモリ１０８に転送された画像データから対象領域を切り出すことによって電子ズーム機能を実現する。また、撮像素子１０６に取り込む映像のフレームレート周期で切り出す範囲を徐々に大きくし、表示部１０９に表示させることで滑らかな電子ズーム表示が実現される。

被写体検出部１２３（被写体検出手段）は、画像メモリ１０８の画像データから所望の被写体領域を検出する。本実施例では顔情報を元に被写体として人物を検出する被写体検出方法について説明する。顔検出処理は、画像データ中に存在する顔領域を公知のアルゴリズムにより検出する処理である。例えば、被写体検出部１２３は、画像データ上の正方形状の部分領域から特徴量を抽出し、その特徴量を予め用意された顔の特徴量と比較し、両者の相関が一定の閾値を超える場合に、その部分領域を顔領域と判定する。この判定を、部分領域のサイズ、配置位置、配置角度の組み合わせを様々に変更しながら繰り返せば、画像データ中に存在する様々な顔領域が検出される。被写体検出部１２３は、顔情報と共に、ＣＺ制御部１１９で計測した被写体距離情報及びズームレンズ１０２の焦点距離情報を用いることで画像データ上での被写体領域の大きさを推定することができる。

次に、ＦＡズーム機能の概要と、ＦＡズーム枠制御部１２１及びＦＡズーム制御部１２２について説明する。本実施例におけるＦＡズーム機能は、ズームアウトＦＡモードとズームインＦＡモードの二つのモードを備えている。二つのモードの違いは被写体がフレームアウトしたときに被写体を捉え直すモードか、被写体をフレームアウトさせることなく画角合わせを支援するモードかの違いである。各モードの機能の概要を説明する。

ＦＡズーム機能が非搭載のカメラでは、撮影者が望遠状態でフレーミングしてシャッタチャンスを待っている間に被写体が動いてフレームアウトした場合等に、撮影者は以下の操作が必要であった。
・ズーム操作部材の操作によりズームアウトを行って被写体を探索すること。
・再び所望の画角になるまでズーム操作を行って画角調整すること。

これに対して、ＦＡズーム機能のズームアウトＦＡモードを搭載したデジタルカメラ１００では、撮影前に画角合わせ等を行う状態（以下、撮影準備状態という）で被写体を見失ってしまった場合、撮影者はＦＡズーム操作スイッチを操作すればよい。このＦＡズーム操作スイッチは、ＦＡズーム機能のために割り当てられたスイッチであり、ズーム操作部材とは別の部材である。ＦＡズーム操作スイッチの押下によって、ＦＡズームの開始をカメラに指示する。ＦＡズーム制御部１２２は、ＦＡズーム操作スイッチからのＦＡズーム開始指示にともなって電子ズーム及び光学ズームの各ズーム位置（ズームイン位置）をメモリ１１８に記憶する。さらにＦＡズーム制御部１２２は、後述する図４の処理手順に従って、ＣＺ制御部１１９または電子ズーム制御部１２０に対して広角方向にズームアウトの指示を行い、撮影準備状態よりも画角がズームアウトされた状態（以下、被写体探索状態という）にする。

図３（Ａ）及び図３（Ｄ）はズームイン状態での画角を示し、図３（Ｂ）及び図３（Ｃ）はズームアウト状態での画角を示す。撮影者は被写体がフレームアウトしたとき（図３（Ａ））、被写体を探索するためにＦＡズーム操作スイッチを押下する。ＦＡズーム操作スイッチの押下中はズームアウト状態が保持されるとともに、ズームイン位置を示すＦＡズーム枠３００が画像に重畳して表示部１０９に表示される。被写体探索状態で所望の被写体を発見した場合（図３（Ｂ））、このＦＡズーム枠３００を目安としてＦＡズーム枠内に被写体が収まるようにフレーミングを行う（図３（Ｃ））。その後、撮影者がＦＡズーム操作スイッチを開放してＦＡズーム終了をカメラに指示すると、ＦＡズーム制御部１２２は、記憶しておいた撮影準備状態のズーム位置（ズームイン位置）まで電子ズームまたは光学ズームによるズームイン動作を行う。このようにして、図３（Ｄ）で示すような最適なフレーミング状態が得られる。

ＦＡズーム枠制御部１２１は、図３（Ｂ）及び図３（Ｃ）で示すように、記憶した撮影準備状態での画角を示す大きさを算出し、表示部１０９のＥＶＦの中心部にＦＡズーム枠３００を表示させる。ＦＡズーム枠３００の大きさは、ズームアウトした時点でのズーム倍率を元に計算される。例えば、撮影準備状態から電子ズーム倍率を２倍、光学ズーム倍率を３倍としてズームアウトして被写体探索状態となった場合には、被写体探索状態でＥＶＦに表示される画角に対して、（１／２）×（１／３）＝１／６倍の大きさのＦＡズーム枠が表示される。本処理によって、撮影者は簡単な操作で、フレームアウトした被写体を再度フレームインさせながら所望の画角での撮影することができる。

一方、被写体が動いているなどしてフレームアウトし易い状態であることを撮影者が分かっている場合には、撮影者が予め広角側のズーム位置にズームを設定しておき被写体を追い続けることが想定される。このような場合、撮影者はシャッタチャンスになったときにズームを広角側から所望の画角に変更する。ここで、従来は、実際に撮影する際の画角を決められない状態で、広角側のズーム位置で被写体を追っていた。つまり、撮影者はシャッタチャンスになってからズーム操作部材の操作によって画角を調整する必要があり、所望の画角を決めるまでに時間がかかってしまう。

そこで、本実施例のデジタルカメラ１００は、ＦＡズーム機能としてズームインＦＡモードでのズーム動作を可能としている。ズームインＦＡモードでは、撮影者がＦＡズーム操作スイッチを操作すると、ズームアウトすることなく撮影探索状態とすることができる。撮影者は予め広角側のズーム位置から被写体をフレーム内で追いかけたい場合（図３（Ｂ））、ＦＡズーム操作スイッチを押下する。ＦＡズーム枠制御部１２１は、メモリ１１８に記憶しているズームイン駆動量だけズームインしたときの画角を示す大きさを算出し、表示部１０９のＥＶＦの中心部にＦＡズーム枠３００を表示させる。その後はズームアウトＦＡモードと同様に、ＦＡズーム枠３００内に被写体が収まるようにフレーミングを行う（図３（Ｃ））。撮影者がＦＡズーム操作スイッチを開放してＦＡズーム終了をカメラ指示すると、ＦＡズーム枠３００が示すズーム位置となるまでズームイン動作を行う（図３（Ｄ））。本処理によって、撮影者は簡単な操作で、動いている被写体などを撮影する場合でも素早く所望の画角に変更することができる。

次に、図４を用いて、ＦＡズーム機能の処理例について説明する。Ｓ４００でＦＡズーム制御部１２２は、撮影準備状態で操作部１１７のＦＡズーム操作スイッチが押下されたか否かを判定する。ＦＡズーム操作スイッチの押下が検出されるとＦＡズーム処理を開始する。Ｓ４０１では、ＦＡズーム制御部１２２は、後述するＦＡモード選択処理を行う。Ｓ４０２に進み、Ｓ４０１で選択したＦＡモードがズームアウトＦＡモードの場合にはＳ４０３へ、そうでない場合（ズームインＦＡモードの場合）にはＳ４１１へと進む。

Ｓ４０３でＦＡズーム制御部１２２は、撮影準備状態での光学ズーム位置をＣＺ制御部１１９から取得し、電子ズーム位置を電子ズーム制御部１２０から取得する。さらに、ＦＡズーム制御部１２２は、光学ズーム位置及び電子ズーム位置のデータを各々のズームイン位置（第１のズーム位置）としてメモリ１１８に記憶する。なお、光学ズーム位置は、光学ズーム機能によって変更可能なズーム倍率に相当するズームレンズの位置を表し、電子ズーム位置は電子ズーム機能によって変更可能な画像拡大及び縮小の倍率に相当する制御位置を表す。

Ｓ４０４でＦＡズーム制御部１２２は、メモリ１１８に記憶しているズームアウト駆動量を取得する。ズームアウト駆動量は、撮影者が設定メニューからの操作によって変更可能である。この場合、操作部１１７と表示部１０９がズームアウト駆動量の設定手段および変更手段を構成する。設定メニューについては図６を用いて後述する。本実施例では、予め設定されたズームアウト駆動量に従って後述のズームアウト動作が行われるが、ＦＡズーム制御部１２２が該動作を段階的に制御する形態や、撮影者が停止操作を行うまでの間、ズームアウト動作を継続させる形態等がある。

Ｓ４０５でＦＡズーム制御部１２２は、撮影準備状態でのズーム状態が電子ズーム状態であるか否かを判定する。一般的なズーム操作では、操作部１１７のズーム操作スイッチが押下されると、光学ズーム位置がワイド端からテレ端の間である場合には、ＣＺ制御部１１９の制御下で光学ズームを駆動させる。光学ズーム位置がテレ端であって、さらに望遠方向への操作指示がなされた場合には、電子ズーム制御部１２０が電子ズームを駆動させることで超望遠撮影が可能となる。ズーム操作スイッチの操作によるズーム動作とＦＡズーム動作との整合性を取るために、ＦＡズーム動作においても、撮影準備状態でのズーム状態が電子ズーム状態の場合には電子ズームを先に駆動させる。つまり、メモリ１１８に記憶した時点のズーム位置が優先すべきズーム状態でのズーム領域内にあるか否かが判定され、本例では電子ズームが優先されるので、Ｓ４０５ではズーム位置が電子ズーム領域にあるか否かが判定される。ＦＡズーム開始時のズーム状態が電子ズーム状態であった場合には、Ｓ４０６に処理を進める。

Ｓ４０６でＦＡズーム制御部１２２は、後述するズームアウト位置の算出方法に従って、Ｓ４０３で取得した電子ズーム位置とＳ４０４で取得したズームアウト駆動量から電子ズームのズームアウト位置を算出し、電子ズーム制御部１２０に設定する。Ｓ４０７でＦＡズーム制御部１２２は、電子ズーム制御部１２０に対して、Ｓ４０６で設定した電子ズームのズームアウト位置まで変倍処理を行うように指示する。そして、電子ズーム制御部１２０は電子ズームによるズームアウト動作を行う。

Ｓ４０５にて撮影準備状態でのズーム位置が光学ズーム領域にあると判定された場合や、Ｓ４０７にて電子ズームのズームアウト動作が行われた後、Ｓ４０８に進む。Ｓ４０８でＦＡズーム制御部１２２は、さらに光学ズームによるズームアウトが必要であるか否かを判断する。つまり、電子ズームだけでは、設定したズームアウト駆動量のズーム駆動に充分でない場合、残りのズームアウト駆動量を光学ズームで補う必要がある（駆動残量の算出については後述する）。光学ズームによるズームアウトが必要と判断された場合にはＳ４０９に進み、光学ズームによるズームアウトが不要な場合にはＳ４１３に進む。

Ｓ４０９でＦＡズーム制御部１２２は、後述の算出方法に従って、光学ズーム位置とズームアウト駆動量から光学ズームのズームアウト位置を算出し、ＣＺ制御部１１９に設定する。Ｓ４１０でＦＡズーム制御部１２２は、ＣＺ制御部１１９に対して、Ｓ４０９で設定した光学ズームのズームアウト位置までズーム駆動するように指示する。ＣＺ制御部１１９はズームレンズ駆動部１１３を制御し、光学ズームのズームアウト動作を行う。そしてＳ４１３に進む。

一方、Ｓ４０１にてズームインＦＡモードが選択された場合には、Ｓ４０２にてズームアウトＦＡモードでないと判定し、Ｓ４１１へと進む。Ｓ４１１でＦＡズーム制御部１２２は、メモリ１１８に記憶しているズームイン駆動量を取得する。ズームイン駆動量は、Ｓ４０４で取得したズームアウト駆動量と同様に撮影者が設定メニューでの操作によって変更可能である。

Ｓ４１２でＦＡズーム制御部１２２は、撮影準備状態での光学ズーム位置をＣＺ制御部１１９から取得し、電子ズーム位置を電子ズーム制御部１２０から取得する。撮影準備状態での光学ズーム位置と電子ズーム位置及びズームイン駆動量から後述の算出方法に従ってズームイン位置を算出し、各々のズームイン位置（第１のズーム位置）としてメモリ１１８に記憶する。そしてＳ４１３に進む。

Ｓ４１３でＦＡズーム制御部１２２は、ズームアウト倍率もしくはズームイン倍率に応じたＦＡズーム枠の表示をＦＡズーム枠制御部１２１に指示し、被写体探索状態とする。Ｓ４１４でＦＡズーム制御部１２２は、被写体探索状態で操作部１１７のＦＡズーム操作スイッチが開放され、オフ状態になったか否かを判定する。ＦＡズーム制御部１２２は、ＦＡズーム操作スイッチがオフ状態になったことを検出するとＳ４１５以降のＦＡズーム終了動作を開始する。Ｓ４１５でＦＡズーム制御部１２２は、Ｓ４０３もしくはＳ４１２で記憶したズームイン位置のデータをメモリ１１８から読み込む。

Ｓ４１６でＦＡズーム制御部１２２は、被写体探索状態でのズーム状態が光学ズーム状態であるか否かを判定する。光学ズーム状態の場合（Ｓ４１６のｙｅｓ）、光学ズームを優先してズームインを行うためにＳ４１７に処理を進め、光学ズーム状態でない場合（電子ズーム状態の場合）（Ｓ４１６のｎｏ）、電子ズームのみでズームインを行うためにＳ４１９に処理を進める。Ｓ４１７でＦＡズーム制御部１２２は、Ｓ４１５で読み込んだズームイン位置のうち、光学ズームによるズームイン位置をＣＺ制御部１１９に設定する。Ｓ４１８でＦＡズーム制御部１２２は、ＣＺ制御部１１９に対して、Ｓ４１７で設定した光学ズームによるズームイン位置までズームレンズ１０２を駆動するように指示する。ＣＺ制御部１１９はズームレンズ駆動部１１３を制御して、光学ズームでのズームイン動作を行う。

Ｓ４１６にて被写体探索状態でのズーム位置が電子ズーム領域内であると判定された場合や、Ｓ４１８での光学ズームでズームイン動作が行われた後、Ｓ４１９に進む。Ｓ４１９でＦＡズーム制御部１２２は、さらに電子ズームによるズームインが必要か否かを判断する。電子ズームによるズームインが必要な場合にはＳ４２０に進み、電子ズームによるズームインが不要な場合には撮影準備状態にして処理を終了する。Ｓ４２０でＦＡズーム制御部１２２は、Ｓ４１５で読み込んだズームイン位置のうち、電子ズームによるズームイン位置を電子ズーム制御部１２０に設定する。Ｓ４２１でＦＡズーム制御部１２２は、電子ズーム制御部１２０に対して、Ｓ４２０で設定した電子ズームによるズームイン位置まで変倍処理を行うように指示する。電子ズーム制御部１２０は電子ズームイン動作を行い、これによってズームイン位置へと復帰する。該動作が終了すると、撮影準備状態にして処理を終了する。

次に、図５を用いて、図４のＳ４０１におけるＦＡズーム機能のモード選択処理について説明する。Ｓ５００でＦＡズーム制御部１２２は、メモリ１１８に記憶されているモード切替設定がズーム位置に応じて自動でモードを切替える自動切替モードか、撮影者が設定したモード設定によってモードを切替える手動切替モードのいずれかの判定を行う。自動切替モードである場合（Ｓ５００のｙｅｓ）にはＳ５０１へ、手動切替モードである場合（Ｓ５００のｎｏ）にはＳ５０２へ進む。

Ｓ５０１でＦＡズーム制御部１２２は、撮影準備状態での光学ズーム位置をＣＺ制御部１１９から取得し、電子ズーム位置を電子ズーム制御部１２０から取得する。ＦＡズーム制御部１２２は、取得したズーム位置がメモリ１１８に記憶されている自動切替の閾値となるズーム位置よりも望遠側（Ｓ５０１のｙｅｓ）か、広角側（Ｓ５０１のｎｏ）かの判定を行う。換言すると、焦点距離が所定値以上か否かの判定を行う。

一方、Ｓ５０２でＦＡズーム制御部１２２は、メモリ１１８に記憶されているモード設定がズームアウトＦＡモード（Ｓ５０２のｙｅｓ）か、ズームインＦＡモード（Ｓ５０２のｎｏ）かの判定を行う。

Ｓ５０１でズーム位置が自動切替の閾値となるズーム位置よりも望遠側であると判定されるか、Ｓ５０２でモード設定がズームアウトＦＡモードと判定される場合には、Ｓ５０３に進みＦＡズーム機能のモードをズームアウトＦＡモードとする。Ｓ５０１でズーム位置が自動切替の閾値となるズーム位置よりも広角側であると判定されるか、Ｓ５０２でモード設定がズームインＦＡモードと判定される場合には、Ｓ５０４に進みＦＡズーム機能のモードをズームインＦＡモードとする。本処理によって選択されたモードに応じて、図４のＳ４０３もしくはＳ４１１の処理に進む。このように、本実施例では、自動切替モードの場合、焦点距離に応じて自動切替モードか手動切替モードかの判定を行っている。

図６は、フレーミングアシストの設定メニュー画面を示している。切替モード、自動切替モードでの切替の閾値となるズーム位置（自動切替焦点距離）、及び手動切替モードで選択するＦＡモードは、撮影者が図６で示す設定メニューからの操作によって設定可能である。図６では、「モード切替」で「自動」と「手動」のいずれかを選択することで、切替モードを選択可能になっている。また、「モード切替」で「自動」を選択した場合、「自動切替焦点距離」を選択可能になる。一方、「モード切替」で「手動」を選択した場合は、「手動切替モード設定」で「アウト」と「イン」のいずれかを選択することで、ＦＡモードを撮影者が選択可能になっている。また、同メニューでは、図４のＳ４０４で取得したズームアウト駆動量やＳ４１１で取得したズームイン駆動量に対応する、「ズーム駆動量」の大きさも本メニューで「大」「中」「小」から選択可能である。ズームアウトもしくはズームインの倍率変化が大きい順に、「大」「中」「小」となっている。なお、ズームアウト駆動量とズームイン駆動量を別々に設定できるようにしてもよい。

図６（Ａ）は自動切替モードでの自動切替焦点距離が２１０ｍｍを選択している例であり、図６（Ｂ）は手動切替モードでズームアウトＦＡモードを選択している例である。設定メニューによるモード選択の形態としては、ズームアウトＦＡ／ズームインＦＡ／自動切替の３つのモードを並列的に選択できるような形態などを取ることも可能である。また、自動切替モードでのＦＡモード切替の閾値としては、焦点距離ではなく、ワイド端の焦点距離に対するズーム倍率や離散的なズーム位置を指定する形態なども取ることが可能であり、本実施例に限定されない。

次に、図７を用いて、モード切替設定が手動切替モードのときの電子ズーム及び光学ズームのズームアウト位置もしくはズームイン位置について説明する。手動切替モードの場合、撮影準備状態でのズーム位置がどの位置であっても、設定メニューで選択されているＦＡモードに従ってズームアウト動作及びズームイン動作を行う。本例では、光学ズームの焦点距離が２４乃至８４０ｍｍの範囲で光学ズーム倍率を最大３５倍とし、電子ズーム倍率を最大４倍としている。また、ズームアウト駆動量はズーム倍率に換算して１／８倍、ズームイン駆動量は８倍に設定されているとする。なお、図中の「光学ワイド端」、「光学テレ端」は光学ズーム動作におけるワイド端（焦点距離２４ｍｍ）、テレ端（焦点距離８４０ｍｍ）をそれぞれ示し、光学ズーム領域の境界を表す。「電子ワイド端」、「電子テレ端」は電子ズーム動作におけるワイド端（焦点距離８４０ｍｍ相当）、テレ端（焦点距離３３６０ｍｍ相当）をそれぞれ示し、電子ズーム領域の境界を表す。光学テレ端位置と電子ワイド端位置が一致している。なお、上記の数値は一例であり、本発明の適用は上記数値に限定されない。

図７（Ａ）は、手動切替モードでズームアウトＦＡモードを選択したときの動作例を示す図である。パターン１は、撮影準備状態でのズーム位置が、電子テレ端位置（焦点距離３３６０ｍｍ相当）の場合を示している。電子ズーム倍率は最大４倍であるため、電子ズームのズームアウト位置は電子ワイド端位置とし、残りの２倍分については光学ズームでのズームアウト動作が行われる。したがって、光学ズームによるズームアウト位置は８４０ｍｍ×（１／２倍）＝４２０ｍｍの焦点距離に対応する位置となる。

パターン２は、撮影準備状態でのズーム位置が、光学テレ端位置で焦点距離８４０ｍｍの場合を示している。撮影準備状態でのズーム状態は光学ズーム状態であるため、電子ズーム位置は電子ワイド端位置のままである。ズーム倍率１／８倍に対応するズームアウト駆動量で光学ズーム位置を変更した場合、８４０ｍｍ×（１／８倍）＝１０５ｍｍの焦点距離に対応する位置がズームアウト位置となる。

パターン３は、撮影準備状態でのズーム位置が、光学ミドル位置で焦点距離１９２ｍｍの場合を示している。このときの光学ズームのズームアウト位置は、１９２ｍｍ×（１／８倍）＝２４ｍｍの焦点距離に対応する位置（この場合、光学ワイド端位置）となる。

パターン４は、撮影準備状態でのズーム位置が、光学ミドル位置で焦点距離７２ｍｍの場合を示している。光学ズームのズームアウト位置の算出結果は、７２ｍｍ×（１／８倍）＝９ｍｍとなり、光学ワイド端位置よりも広角側の位置となる。この場合、光学ワイド端位置（焦点距離２４ｍｍ）をズームアウト位置とする。

図７（Ｂ）は、手動切替モードでズームインＦＡモードを選択したときの動作例を示す図である。パターン５は、撮影準備状態でのズーム位置が、光学ワイド端位置で焦点距離２４ｍｍの場合を示している。撮影準備状態でのズーム状態は光学ズーム状態であるため、電子ズーム位置は電子ワイド端位置のままである。ズーム倍率８倍に対応するズームイン駆動量で光学ズーム位置を変更した場合、２４ｍｍ×８倍＝１９２ｍｍの焦点距離に対応する位置がズームイン位置となる。

パターン６は、撮影準備状態でのズーム位置が、光学ミドル位置で焦点距離１０５ｍｍの場合を示している。このときの光学ズームのズームイン位置は、１０５ｍｍ×８倍＝８４０ｍｍの焦点距離に対応する位置（この場合、光学テレ端位置）となる。

パターン７は、撮影準備状態でのズーム位置が、光学ミドル位置で焦点距離４２０ｍｍの場合を示している。光学ズームのズームイン位置の算出結果は、４２０ｍｍ×８倍＝３３６０ｍｍとなり、光学テレ端位置よりも望遠側の位置となる。したがって、光学ズームのズームイン位置は光学テレ端位置とし、残りの４倍分については電子ズームでのズームイン動作が行われる。電子ズームによるズームイン位置は、８４０ｍｍ×４倍＝３３６０ｍｍの焦点距離に対応する位置（この場合、電子テレ端位置）となる。

パターン８は、撮影準備状態でのズーム位置が、電子ワイド端位置で焦点距離８４０ｍｍの場合を示している。電子ズームのズームイン位置の算出結果は、８４０ｍｍ×８倍＝６７２０ｍｍとなり、電子テレ端位置よりも望遠側の位置となる。この場合、電子テレ端位置（焦点距離３３６０ｍｍ相当）をズームイン位置とする。

次に、図８を用いて、モード切替設定が自動切替モードのときの電子ズーム及び光学ズームのズームアウト位置もしくはズームイン位置について説明する。自動切替モードの場合、撮影準備状態でのズーム位置が設定メニューで選択されている自動切替焦点距離よりも望遠側である場合はズームアウトＦＡモード、広角側である場合にはズームインＦＡモードのズーム動作を行う。本例では、図７と同様に、光学ズームの焦点距離が２４乃至８４０ｍｍの範囲で光学ズーム倍率を最大３５倍とし、電子ズーム倍率を最大４倍としている。また、ズームアウト駆動量はズーム倍率に換算して１／８倍、ズームイン駆動量は８倍に設定されているとする。また、自動切替焦点距離は２１０ｍｍとする。なお、上記の数値は一例であり、本発明の適用は上記数値に限定されない。

図８（Ａ）乃至図８（Ｃ）は、ズームアウトＦＡモードのズームアウト動作もしくはズームインＦＡモードのズームイン動作が自動切替焦点距離を跨いで行われる際の異なる実施形態を示している。したがって、撮影準備状態でのズーム位置が広角側もしくは望遠側であって、ズーム動作中に焦点距離が自動切替焦点距離を跨がないときには、図７と同様のズーム位置となる。撮影準備状態でのズーム位置が、電子テレ端位置で焦点距離３３６０ｍｍのとき（パターン９、パターン１３、パターン１７）は、図７（Ａ）のパターン１と同様のズームアウト位置となり、ズームアウトＦＡモードでの動作となる。一方、撮影準備状態でのズーム位置が、光学ワイド端位置で焦点距離２４ｍｍのとき（パターン１２、パターン１６、パターン２０）は、図７（Ｂ）のパターン５と同様のズームイン位置となり、ズームインＦＡモードでの動作となる。上記パターン以外の動作例について説明する。

図８（Ａ）は、ズームアウト動作もしくはズームイン動作で自動切替焦点距離を跨いだ場合であっても、所定のズーム駆動量だけズーム動作をさせる動作例を示す図である。

パターン１０は、撮影準備状態でのズーム位置が、光学テレ端位置で焦点距離８４０ｍｍの場合を示している。撮影準備状態でのズーム位置は、自動切替焦点距離２１０ｍｍよりも望遠側であるため、ズームアウトＦＡモードでズームアウト動作が開始される。ここで、光学ズームのズームアウト位置の算出結果は、８４０ｍｍ×（１／８倍）＝１０５ｍｍとなり、自動切替焦点距離２１０ｍｍのズーム位置よりも広角側の位置となる。しかしながら、本例では自動切替焦点距離を跨いだ場合でも、ズーム倍率１／８倍のズームアウト位置である焦点距離１０５ｍｍの位置までズームアウトさせる。つまり、図７（Ａ）のパターン２と同様のズーム位置となる。

パターン１１は、撮影準備状態でのズーム位置が、光学ミドル位置で焦点距離１０５ｍｍの場合を示している。撮影準備状態でのズーム位置は、自動切替焦点距離２１０ｍｍよりも広角側であるため、ズームインＦＡモードでズームイン動作が開始される。ここで、光学ズームのズームイン位置の算出結果は、１０５ｍｍ×８倍＝８４０ｍｍとなり、自動切替焦点距離２１０ｍｍのズーム位置よりも望遠側の位置となる。しかしながら、本例では自動切替焦点距離を跨いだ場合でも、ズーム倍率８倍のズームイン位置である焦点距離８４０ｍｍの位置までズームインさせる。つまり、ズームイン位置は図７（Ｂ）のパターン６と同様のズーム位置となる。

以上説明したように、図８（Ａ）の方法では、ＦＡモード開始時のズーム位置に応じてＦＡモードを切り替えるとともに、手動切替モードと同じ動作でズームインＦＡモード及びズームアウトＦＡモードのズーム動作を行うことができる。

一方、図８（Ｂ）は、ズームアウトＦＡモードでのズームアウト動作で被写体探索状態となるズーム位置を自動切替焦点距離までとする動作例を示す図である。

パターン１４は、撮影準備状態でのズーム位置が、光学テレ端位置で焦点距離８４０ｍｍの場合を示している。撮影準備状態でのズーム位置は、自動切替焦点距離２１０ｍｍよりも望遠側であるため、ズームアウトＦＡモードとなる。光学ズームのズームアウト位置の算出結果は、８４０ｍｍ×（１／８倍）＝１０５ｍｍとなり、自動切替焦点距離２１０ｍｍのズーム位置よりも広角側の位置となる。この場合、自動切替焦点距離２１０ｍｍのズーム位置をズームアウト位置とする。再度、被写体探索状態から撮影準備状態に変更する場合のズームイン位置は、被写体探索状態での焦点距離２１０ｍｍからズーム駆動量である８倍ズームインした位置とする。したがって、光学ズームのズームイン位置は光学テレ端位置となり、電子ズームによるズームイン位置は２１０ｍｍ×８倍＝１６８０ｍｍの焦点距離に対応する位置となる。

パターン１５は、撮影準備状態でのズーム位置が、光学ミドル位置で焦点距離１０５ｍｍの場合を示している。撮影準備状態でのズーム位置は、自動切替焦点距離２１０ｍｍよりも広角側であるため、ズームインＦＡモードとなる。本例では、ズームインＦＡモードの場合は、図８（Ａ）と同様に、ズームイン動作で自動切替焦点距離を跨いだ場合であっても所定のズーム駆動量だけズーム動作をさせる。したがって、図７（Ｂ）のパターン６と同様のズームイン位置となる。

図８（Ｂ）のように、ズームアウトＦＡモードでのズームアウト動作で被写体探索状態となるズーム位置を自動切替焦点距離までとすると、ズームアウトＦＡモードでのズームアウト動作に制限を設けることになる。そのため、必要以上にズームアウトせずに被写体探索をしたい場合に有利である。

図８（Ｃ）は、ズームインＦＡモードでのズームイン動作で被写体探索状態となるズーム位置を自動切替焦点距離までとする動作例を示す図である。

パターン１８は、撮影準備状態でのズーム位置が、光学テレ端位置で焦点距離８４０ｍｍの場合を示している。撮影準備状態でのズーム位置は、自動切替焦点距離２１０ｍｍよりも望遠側であるため、ズームアウトＦＡモードとなる。本例では、ズームアウトＦＡモードの場合は、図８（Ａ）と同様に、ズームアウト動作で自動切替焦点距離を跨いだ場合であっても所定のズーム駆動量だけズーム動作をさせる。したがって、図７（Ａ）のパターン２と同様のズームイン位置となる。

パターン１９は、撮影準備状態でのズーム位置が、光学ミドル位置で焦点距離１０５ｍｍの場合を示している。光学ズームのズームイン位置の算出結果は、１０５ｍｍ×８倍＝８４０ｍｍとなり、自動切替焦点距離のズーム位置よりも望遠側の位置となる。この場合、自動切替焦点距離２１０ｍｍのズーム位置をズームイン位置とする。

図８（Ｃ）のように、ズームインＦＡモードでのズームイン動作で被写体探索状態となるズーム位置を自動切替焦点距離までとすると、ズームインＦＡモードでのズームイン動作に制限を設けることになる。そのため、必要以上にズームインせずに被写体探索をしたい場合に有利である。なお、自動切替モードの場合に、図８（Ａ）乃至（Ｃ）のうちどの実施形態を採用するか、撮影者が選択できるようにしてもよい。

図９は、ＦＡズーム操作スイッチが押下されたときにズームアウトＦＡモード及びズームインＦＡモードのいずれのモードとなるかを、ＦＡズーム機能開始前に撮影者に知らせるための表示例を示す図である。図６の設定メニューにて手動切替モードでズームアウトＦＡモードが選択されたときには、図９（Ａ）のように、表示部１０９にズームアウトＦＡモード表示９００を表示する。一方、ズームインＦＡモードが選択されたときには、図９（Ｂ）のように、ズームインＦＡモード表示９０１を表示する。また、自動切替モードが選択された場合、撮影準備状態でのズーム位置に応じて表示が切り替わる。すなわち、自動切替焦点距離より広角側のズーム位置からズーム操作部材の操作によりズームインする場合、ズーム位置が自動切替焦点距離よりも望遠になったときに、ズームインＦＡモード表示９０１からズームアウトＦＡモード表示９００に表示が切り替わる。同様に、自動切替焦点距離より望遠側のズーム位置からズーム操作部材の操作によりズームアウトする場合、ズーム位置が自動切替焦点距離よりも広角になったときにズームアウトＦＡモード表示９００からズームインＦＡモード表示９０１に表示が切り替わる。

なお、本実施例では、被写体探索状態、すなわち図４のＳ４１４にてＦＡズーム動作の終了が判定される前のズームアウト状態で撮影者がズーム操作部材を操作することで、種々の動作が可能である。その動作例を、図１０乃至１２のフローチャートで示す。

図１０は、撮影者が被写体探索状態でズーム操作部材を操作した場合に、撮影準備状態でのズーム操作と同様にズーム駆動を行う処理例を示す。Ｓ１０００でＦＡズーム制御部１２２は、操作部１１７のＦＡズーム操作スイッチがオフ状態になった否かを判定し、該スイッチのオフ状態が判定されると被写体探索状態を終了する。ＦＡズーム操作スイッチがオン状態の場合、Ｓ１００１に進み、ＦＡズーム制御部１２２は被写体探索状態でズーム操作部材が操作されたか否かを判定する。ズーム操作部材が操作された場合にはＳ１００２に進み、該スイッチが操作されない場合にはＳ１０００に戻る。Ｓ１００２でＦＡズーム制御部１２２は、現時点でのズーム状態が電子ズーム状態であるか否かを判定する。電子ズーム状態の場合にはＳ１００３に進み、電子ズーム状態でない場合（光学ズーム状態の場合）にはＳ１００４に進む。

Ｓ１００３でＦＡズーム制御部１２２は、電子ズーム制御部１２０に制御命令を送って電子ズーム動作を行う。またＳ１００４でＦＡズーム制御部１２２は、ＣＺ制御部１１９に制御命令を送って光学ズーム動作を行う。いずれも場合も、ズーム操作部材の操作方向、つまりズームイン方向またはズームアウト方向に応じて望遠方向または広角方向への変倍動作が行われる。Ｓ１００３またはＳ１００４の後、Ｓ１００５に進み、ＦＡズーム制御部１２２は、ズーム位置が、ＦＡズーム動作の終了時にズームインさせるズームイン位置まで到達したか否かを判定する。本例では、ズーム操作部材の操作により望遠方向にズーム動作が行われた場合、ＦＡズーム動作の終了時にズームインさせるズームイン位置に到達する可能性がある。ズーム位置がズームイン位置に到達した場合、強制的にズーム操作を終了してＳ１０００に戻る。ズーム位置がズームイン位置に到達しない場合にはＳ１００６に進む。Ｓ１００６でＦＡズーム制御部１２２は、ズーム操作スイッチの押下状態によってズーム操作が終了したか否かを判定する。ズーム操作の終了と判定された場合にはＳ１０００に戻る。またズーム操作が継続していると判定された場合にはＳ１００２に戻り、ズーム動作を継続する。

図１０に示す処理によれば、被写体探索状態の画角となったにも関わらず被写体がフレームインしなかった場合に、ズーム操作部材の操作により、即座に画角を広げて被写体を探索し直したり、被写体探索状態のまま画角の範囲を狭めることが可能である。

図１１は、撮影者が被写体探索状態でズーム操作部材を操作した場合に、ズームイン位置を変更する処理例を示す。図１０との相違点は、Ｓ１１０１に続くＳ１１０２及びＳ１１０３の処理である。よって図１０と同じ処理については説明を省略し、以下に相違点を説明する。

Ｓ１１００およびＳ１１０１の処理は、図１０のＳ１０００およびＳ１００１の処理と同様である。Ｓ１１０１でズーム操作部材の操作が行われた場合、Ｓ１１０２に進み、ＦＡズーム制御部１２２は、ズーム操作部材の操作方向に従って、図４のＳ４０３又はＳ４１２でメモリ１１８に記憶したズームイン位置のデータを更新する。撮影者によるズーム操作部材の操作方向が望遠方向である間はズームイン位置のデータが望遠方向に更新され、操作方向が広角方向である間はズームイン位置のデータが広角方向に更新される。次のＳ１１０３でＦＡズーム制御部１２２は、ＦＡズーム枠制御部１２１に対してＦＡズーム枠の更新を指示する。ＦＡズーム枠制御部１２１は、Ｓ１１０２で更新したズームイン位置に応じてＦＡズーム枠の大きさを再計算し、ＦＡズーム枠のＥＶＦ表示を更新する。Ｓ１１０３の後でＳ１１０４に進み、ＦＡズーム制御部１２２は、ＦＡズーム枠が示すズームイン位置が被写体探索状態のズームアウト位置まで到達したか否かを判定する。本例では、ズーム操作部材の操作により広角方向にＦＡズーム枠の更新が行われた場合、ＦＡズーム枠が示すズームイン位置が被写体探索状態のズームアウト位置まで到達する可能性がある。ＦＡズーム枠が示すズーム位置がズームアウト位置に到達した場合、強制的にズーム操作を終了してＳ１１００に戻る。ＦＡズーム枠が示すズーム位置がズームアウト位置に到達しない場合にはＳ１１０５に進む。Ｓ１１０５の処理は図１０のＳ１００６の処理と同様である。図１１に示す処理によれば、撮影準備状態で撮影者がフレーミングを行った時点から被写体の大きさが変わった場合に、被写体探索状態のままズームインする画角を調整することができる。

図１２は、撮影者が被写体探索状態でズーム操作スイッチを操作した場合、図１０及び図１１で説明した動作を選択的に行えるようした例を示す。図１０との相違点は、Ｓ１２０１に続くＳ１２０２乃至Ｓ１２０４の処理である。よって図１０と同じステップ番号を付した処理については説明を省略し、以下に相違点を説明する。

Ｓ１２００およびＳ１２０１の処理は図１０のＳ１０００およびＳ１００１の処理と同様である。Ｓ１２０２でＦＡズーム制御部１２２は、被写体探索状態でのズーム操作モードを判別する。ズーム操作モードとしては、図１０で説明した動作を行うズーム駆動モードと、図１１で説明した動作を行うズームイン位置変更モードがある。ズーム駆動モードが選択されている場合にはＳ１２０３へ進んで図１０のＳ１００２乃至１００５の処理が実行される。ズームイン位置変更モードの場合にはＳ１２０４へ進んで図１１のＳ１１０２乃至１１０４の処理が実行される。モード設定については、操作者が設定メニューを用いてモードを設定する方法や、操作部１１７に割り当てた操作部材を用いてモードを設定する方法等が挙げられる。Ｓ１２０３のズーム駆動モード処理やＳ１２０４のズームイン位置変更モード処理の後、Ｓ１２０５に進む。Ｓ１２０５の処理は図１０のＳ１００６の処理と同様である。図１２に示す処理によれば、被写体探索状態にて撮影者がズーム駆動モードとズームイン位置変更モードを選択できるので、利便性が高まる。

以上説明したように、本実施例によれば、ズームアウトＦＡモードとズームインＦＡモードを切り替え可能な構成により、望遠状態で被写体がフレームアウトした場合でも、広角状態で被写体を追い続ける場合でも、速やかに被写体を捉えることが可能になる。

（実施例２）
以下、図１３及び図１４を参照して、本発明の第２の実施例として、第１の実施例で示したメニュー設定や焦点距離以外の種々の情報に応じてズームアウトＦＡモードとズームインＦＡモードとを変更する例について説明する。本実施例においては、ＦＡズーム操作スイッチの操作量や被写体の検知結果に基づいてモード変更を行う。本実施例と実施例１との違いは、図５乃至図８で説明したズームアウトＦＡモードとズームインＦＡモードとの判定処理やメニュー設定方法等の違いであり、それ以外の説明については同様であるため説明を省略する。

図１３は、デジタルカメラ１００の外観の（Ａ）上面、（Ｂ）背面及び（Ｃ）側面を示した図である。本実施形態においては、操作部１１７の一つであるＦＡズーム操作スイッチ１１７ａがレンズ鏡筒１０１の側面に配置されている。さらに、ＦＡズーム操作スイッチ１１７ａは、ボタンを押下した状態のまま上下方向にスライドできる構造となっており、検出素子等によりスライドされた方向が検知される。

また、操作部１１７の一つとして、撮影者がカメラにズーミングを指示するためのズーム操作部材としてのズームレバー１１７ｂが設けられている。ズーム指示操作に用いるズーム操作部材の操作量及び操作方向に基づいてシステム制御部１１４によりズーム駆動速度や駆動方向が演算され、演算結果に従ってズームレンズ１０２が光軸に沿って移動する。

次に、図１４を用いて、図４のＳ４０１で選択するＦＡズーム機能のモード選択処理について説明する。図１４（Ａ）は、ＦＡズーム操作スイッチ１１７ａの操作方向に応じてズームアウトＦＡモードとズームインＦＡモードとを変更する処理のフローチャートである。

Ｓ１４００でＦＡズーム制御部１２２は、ＦＡズーム操作スイッチ１１７ａが上方向の操作を検知したか、下方向の操作を検知したかの判定を行う。上方向である場合（Ｓ１４００のｙｅｓ）にはＳ１４０１に進みＦＡズーム機能のモードをズームアウトＦＡモードとする。下方向である場合（Ｓ１４００のｎｏ）にはＳ１４０２に進みＦＡズーム機能のモードをズームインＦＡモードとする。本処理によって選択されたモードに応じて、図４のＳ４０２の判定処理に進む。操作部材としては、ＦＡズーム操作スイッチ１１７ａのような物理的なスイッチだけでなく、表示部１０９がタッチパネルとなっている場合には、タッチパネル上に表示されたタッチスイッチをスライドさせる形態等でもよい。

図１４（Ｂ）は、撮影したい被写体の大きさに応じてズームアウトＦＡモードとズームインＦＡモードとを変更する処理のフローチャートである。本実施形態では、例えば、被写体が近寄ってくるなどで被写体がフレームアウトしやすいようなシーンでは、ズームアウトＦＡモードにてフレームアウトを防止する。一方、被写体が遠くにあるような場合には、ズームインＦＡモードにて画角合わせを容易にすること等を想定している。本例では、被写体の大きさに基づいて、被写体が近くにあるかどうかを判定する。

Ｓ１４０３でＦＡズーム制御部１２２は、被写体検出部１２３から被写体の大きさを取得し、画角に対する被写体の大きさの比率を算出する。被写体の比率が所定の比率よりも大きい場合（Ｓ１４０３のｙｅｓ）には、Ｓ１４０４に進みＦＡズーム機能のモードをズームアウトＦＡモードとする。一方、所定の比率よりも小さい場合（Ｓ１４０３のｎｏ）には、Ｓ１４０５に進みＦＡズーム機能のモードをズームインＦＡモードとする。

図１４（Ｃ）は、撮影したい被写体が画角からフレームアウトするか否かに応じてズームアウトＦＡモードとズームインＦＡモードとを変更する処理のフローチャートである。本実施形態では、例えば、動き回る被写体がフレームアウトしてしまった場合にはズームアウトＦＡモードにて被写体を再捕捉し、被写体が画角内だけで動いているような場合にはズームインＦＡモードにて画角合わせを容易にすること等を想定している。本例では、被写体の動きを検出し、その検出結果に基づいて被写体が画角からフレームアウトするか（フレームアウトしたか）を判定する。

Ｓ１４０６でＦＡズーム制御部１２２（検出手段）は、撮影者が画角合わせをしている間、被写体検出部１２３から撮像フレーム毎の画角内での被写***置を取得し、被写体の動きベクトルを算出する。被写体がフレームアウトしてしまったか、直前の動きベクトル情報から次フレームでフレームアウトしてしまうことが予測される場合（Ｓ１４０６のｙｅｓ）には、Ｓ１４０７に進みＦＡズーム機能のモードをズームアウトＦＡモードとする。一方、被写体がフレームアウトする可能性が少ない場合（Ｓ１４０６のｎｏ）には、Ｓ１４０８に進みＦＡズーム機能のモードをズームインＦＡモードとする。

なお、上述した以外にも、人物や動物などを認証する機能を用いてズームアウトＦＡモードとズームインＦＡモードを切り替えても良い。例えば、動きの激しい被写体の場合にはズームアウトＦＡモードを、動きの少ない被写体の場合にはズームインモードを選択するようにする。また、ＧＰＳ情報を用いて、撮影場所によりズームアウトＦＡモードとズームインＦＡモードを切り替えても良い。

（他の実施形態）
本発明の目的は以下のようにしても達成できる。すなわち、前述した実施形態の機能を実現するための手順が記述されたソフトウェアのプログラムコードを記録した記憶媒体を、システムまたは装置に供給する。そしてそのシステムまたは装置のコンピュータ（またはＣＰＵ、ＭＰＵ等）が記憶媒体に格納されたプログラムコードを読み出して実行する。この場合、記憶媒体から読み出されたプログラムコード自体が本発明の新規な機能を実現することになり、そのプログラムコードを記憶した記憶媒体およびプログラムは本発明を構成することになる。

また、プログラムコードを供給するための記憶媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスクなどが挙げられる。また、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷ、ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭ、ＤＶＤ−ＲＷ、ＤＶＤ−Ｒ、磁気テープ、不揮発性のメモリカード、ＲＯＭ等も用いることができる。

また、コンピュータが読み出したプログラムコードを実行可能とすることにより、前述した各実施形態の機能が実現される。さらに、そのプログラムコードの指示に基づき、コンピュータ上で稼動しているＯＳ（オペレーティングシステム）等が実際の処理の一部または全部を行い、その処理によって前述した各実施形態の機能が実現される場合も含まれる。

更に、以下の場合も含まれる。まず記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれる。その後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵ等が実際の処理の一部または全部を行う。

また、本発明はデジタルカメラのような撮影を主目的とした機器に限定されず、携帯電話、パーソナルコンピュータ（ラップトップ型、デスクトップ型、タブレット型など）、ゲーム機など、画像処理装置を内蔵もしくは外部接続する任意の機器に適用可能である。従って、本明細書における「画像処理装置」は、画像処理機能を備えた任意の電子機器を包含することが意図されている。

以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。適用するシーンとして、静止画撮影のための画角合わせ中のみでなく、動画記録中の画角合わせの際に適用しても構わない。

１００ デジタルカメラ
１０２ ズームレンズ
１０９ 表示部
１１４ システム制御部
１１６ 記録部
１１７ 操作部
１１８ メモリ
１１９ ＣＺ制御部
１２０ 電子ズーム制御部
１２１ ＦＡズーム枠制御部
１２２ ＦＡズーム制御部
１２３ 被写体検出部

Claims (18)

1. ユーザがズーム位置の変更を指示するための第１の操作手段と、
   前記第１の操作手段の操作に応じてズーム位置を制御する制御手段とを有する画像処理装置であって、
   前記制御手段は、前記第１の操作手段における第１の操作に応じて第１のズーム位置を設定し、さらに前記第１の操作手段における第２の操作に応じてズーム位置を前記第１のズーム位置に移動し、
   前記第１の操作に応じてズーム位置を広角側に移動する第１のモードと、当該第１のモードと異なる第２のモードとを切り替え可能であることを特徴とする画像処理装置。
2. 前記第１のモードにおいて、前記制御手段は、前記第１の操作に応じてズーム位置を広角側に移動するとともに、当該第１の操作が行われる前のズーム位置を前記第１のズーム位置に設定することを特徴とする請求項１に記載の画像処理装置。
3. 前記第２のモードにおいて、前記制御手段は、前記第１の操作が行われる前のズーム位置より所定のズーム倍率だけ望遠側のズーム位置を前記第１のズーム位置に設定することを特徴とする請求項１又は２に記載の画像処理装置。
4. 撮影した画像を表示する表示手段をさらに有し、
   前記制御手段は、前記第１の操作があった場合、前記画像に重畳して前記第１のズーム位置の画角を示す表示を行うよう前記表示手段を制御することを特徴とする請求項１乃至３のいずれか１項に記載の画像処理装置。
5. 前記制御手段は、前記第１のモードと前記第２のモードのいずれかを示す表示を行うよう前記表示手段を制御することを特徴とする請求項４に記載の画像処理装置。
6. 前記第２のモードにおいて、前記制御手段は、前記第１の操作に応じてズーム位置を移動しないよう制御することを特徴とする請求項１乃至５のいずれか１項に記載の画像処理装置。
7. 前記制御手段は、前記第１の操作が行われる前のズーム位置に応じて前記第１のモードと前記第２のモードを切り替えることを特徴とする請求項１乃至６のいずれか１項に記載の画像処理装置。
8. 前記制御手段は、前記第１の操作が行われる前のズーム位置が所定のズーム位置より望遠側か否かに応じて前記第１のモードと前記第２のモードを切り替えることを特徴とする請求項７に記載の画像処理装置。
9. 前記制御手段は、前記第１の操作が行われる前のズーム位置が前記所定のズーム位置より望遠側の場合、前記第１のモードに設定し、前記所定のズーム位置より広角側の場合、前記第２のモードに設定することを特徴とする請求項８に記載の画像処理装置。
10. 前記所定のズーム位置を変更可能な変更手段を有することを特徴とする請求項８又は９に記載の画像処理装置。
11. 前記第１のモードと前記第２のモードのいずれかをユーザにより設定可能とするための設定手段を有することを特徴とする請求項１乃至１０のいずれか１項に記載の画像処理装置。
12. 画像から被写体を検出する被写体検出手段を有し、
    前記制御手段は、前記被写体検出手段により検出された被写体の大きさに応じて前記第１のモードと前記第２のモードを切り替えることを特徴とする請求項１乃至１１のいずれか１項に記載の画像処理装置。
13. 被写体の動きを検出する検出手段を有し、
    前記制御手段は、前記検出手段の検出結果に応じて前記第１のモードと前記第２のモードを切り替えることを特徴とする請求項１乃至１２のいずれか１項に記載の画像処理装置。
14. ユーザがズーム位置の変更を指示するための第２の操作手段をさらに有し、
    前記第１の操作手段において記第１の操作が行われてから前記第２の操作が行われるまでの間に前記第２の操作手段が操作された場合、前記ズーム制御手段は、前記第２の操作手段の操作に応じてズーム位置を移動することを特徴とする請求項１乃至１３のいずれか１項に記載の画像処理装置。
15. ユーザがズーム位置の変更を指示するための第２の操作手段をさらに有し、
    前記第１の操作手段において前記第１の操作が行われてから前記第２の操作が行われるまでの間に前記第２の操作手段が操作された場合、前記ズーム制御手段は、前記第２の操作手段の操作に応じて前記第１のズーム位置の画角を変更することを特徴とする請求項１乃至４のいずれか１項に記載の画像処理装置。
16. ユーザがズーム位置の変更を指示するための第１の操作手段を有する画像処理装置の制御方法であって、
    前記第１の操作手段における第１の操作に応じて第１のズーム位置を設定するステップと、
    さらに前記第１の操作手段における第２の操作に応じてズーム位置を前記第１のズーム位置に移動するステップとを有し、
    前記第１の操作に応じてズーム位置を広角側に移動する第１のモードと、当該第１のモードと異なる第２のモードとを切り替え可能であることを特徴とする画像処理装置の制御方法。
17. 請求項１６に記載の画像処理装置の制御方法をコンピュータに実行させるように構成されていることを特徴とする画像処理装置の制御プログラム。
18. 請求項１７に記載の画像処理装置の制御プログラムを記憶していることを特徴とする記憶媒体。

Images