JP6700693B2 - 撮像装置及びその制御方法、プログラム、並びに記憶媒体 - Google Patents

Description

本発明は、撮影者の自分撮りが可能な撮像装置に関する。

近年、一人旅やＳＮＳの普及によりデジタルスチルカメラやデジタルビデオカメラによる自分撮りの需要が増加している。自分撮りでは、撮影者が決めた理想的な構図で撮影したいが、撮影する際に構図ズレが発生しやすい。

理想的な構図とは、撮影者の視線が撮像部（撮影レンズ）に向いた状態で、撮影者が予め決めた背景で、撮影者と背景が予め決められた位置関係の構図を表し、構図ズレとは、先に述べた理想的な構図ではない状態の構図を表している。

自分撮りでは、表示部を見ながら構図を合わせ、撮像部の方向を見て撮影を行う。この場合、表示部を見た状態では構図に対する意識が高く保持できるが、撮像部に視線を移動させた後は構図に対する意識が低下してしまうため、無意識に手や顔が動いてしまい構図ズレが発生しやすくなる。

自分撮りに関する従来技術として、特許文献１には、表示部に撮影者の映像を表示させないことで、撮影者の関心をなくすように構成された装置が記載されている。

特開２００７−１１６６０１号公報

しかしながら、上記特許文献１では、表示部に撮影者の映像を表示しないので、撮影者と背景の位置関係を含めた理想的な構図を決めることができないという課題がある。

本発明は、上記課題に鑑みてなされ、その目的は、自分撮りにおいて構図ズレを発生させずに、理想的な構図で撮影を行える技術を実現することである。

上記課題を解決し、目的を達成するために、本発明の撮像装置は、撮影光学系を通過した光束を電気信号に変換して撮像する撮像手段と、画像撮影時に決められた構図を記憶する記憶手段と、所定の撮影モードにおいて、前記記憶手段に記憶されている所定の構図に基づいて前記撮像手段により撮像された画像の構図のズレを検出する検出手段と、前記構図のズレが検出された場合、前記撮像手段により撮像された画像について前記構図のズレを補正した状態で保持する構図保持手段と、前記所定の撮影モードが終了するまで前記構図のズレを補正した状態が保持されるように前記構図保持手段を制御する制御手段と、を有し、前記構図保持手段は、前記撮像手段により撮像された画像の構図と、前記記憶手段に記憶されている構図とを比較する構図比較手段と、前記撮像された画像の構図が、前記記憶手段に記憶されている構図と一致しているか否かを判定する構図判定手段と、表示手段に表示されている画像中の要素と、前記記憶手段に記憶されている構図の中の要素とを比較する構図要素比較手段と、前記表示手段に表示されている画像中の要素が、前記記憶手段に記憶されている構図の中の要素と一致しているか否かを判定する構図要素判定手段と、を有する。

本発明によれば、自分撮りにおいて構図ズレを発生させずに、理想的な構図で撮影を行えるようになる。

従来の問題点と実施形態１の作用効果を説明する図。 実施形態１の撮像装置の構成を示すブロック図。 本実施形態の自分撮りモードにおける撮影動作を示すフローチャート。 実施形態１の防振制御を使用した構図保持機能の説明図。 実施形態１の防振制御を使用した構図保持機能の説明図。 実施形態１の防振制御を使用した構図保持機能の動作フローチャート。 本実施形態の構図保持機能を停止する際の動作フローチャート。 従来の問題点を実施形態２の作用効果を説明する図。 実施形態２の撮像装置の構成を示すブロック図。 実施形態２のオートズーム機能を使用した構図保持機能の説明図。 実施形態２のオートズーム機能を使用した構図保持機能の説明図。 実施形態２のオートズーム機能を使用した構図保持機能の動作フローチャート。 従来の問題点と実施形態３の作用効果を説明する図。 実施形態３の撮像装置の構成を示すブロック図。 実施形態３のオートズーム機能を使用した構図保持機能の説明図。 実施形態３のオートズーム機能を使用した構図保持機能の動作フローチャート。

以下に、本発明を実施するための形態について詳細に説明する。尚、以下に説明する実施の形態は、本発明を実現するための一例であり、本発明が適用される装置の構成や各種条件によって適宜修正又は変更されるべきものであり、本発明は以下の実施の形態に限定されるものではない。また、後述する各実施形態の一部を適宜組み合わせて構成しても良い。

［実施形態１］以下、本発明を、撮影者が自分自身を撮影する自分撮りが可能なデジタルスチルカメラやデジタルビデオカメラ等の撮像装置に適用した実施形態について説明する。

なお、本実施形態では、撮像装置としてデジタルカメラを想定しているが、他のカメラ付き携帯電話やその一種であるスマートフォン、タブレット端末、カメラ付きのパーソナルコンピュータ（ＰＣ）などの情報処理装置であっても良い。

＜従来の問題点と実施形態１の作用効果＞まず、図１を参照して、自分撮りを行う場合の従来の問題点と本実施形態の作用効果について説明する。

撮像装置１００は、バリアングル式の表示部１０１、撮影光学系（撮影レンズ）やイメージセンサを含む撮像部１０２及び撮影準備動作や撮影動作の開始指示を行う撮影ボタン１０３を有している。表示部１０１は、撮像された（ライブビュー）画像をリアルタイムで表示する液晶表示パネル等からなり、表示画面の表示方向と撮影光学系の光軸方向（撮影方向）とを同じ方向にすることで撮影者が自分自身を撮影する自分撮りが可能である。

撮影者１０５が撮像装置１００を用いて自分撮りを行う際には、撮像装置１００の表示部１０１と撮像部１０２と撮影者１０５とが図１（ａ）に示すような位置関係となる。撮影者１０５は、表示部１０１の画像を見ながら自分と背景等の理想的な位置関係を構図１０６として決定する。

構図１０６を決めて自分撮りするときには、図１（ａ）のように表示部１０１に向けていた撮影者の視線１０７を、図１（ｂ）の視線１０８のように撮像部１０２に移動する。

図１（ａ）では、視線１０７が表示部１０１に向いていることにより、撮影者が構図１０６を保持する意識を高いレベルで維持できていたが、図１（ｂ）のように視線１０８を撮像部１０２に移動させた後は構図１０６を保持する意識が低くなってしまう。その結果、自分撮りの際に図１（ｂ）のように構図１０９にズレが発生してしまい、撮影者は撮影画像を確認したときに初めて構図のズレに気付くことになる。

これに対して、本実施形態のように撮影者が一旦決めた構図を撮影動作が終了するまで保持可能とした場合、図１（ｃ）のように視線１１０を表示部１０１から撮像部１０２に移動させた後でも、理想的な構図１０６を保持することができる。これにより、撮影者が表示部１０１から撮像部１０２に視線を移動する前後の構図１０６と構図１１１とがほぼ同じ状態に保持されながら自分撮りを行えるようになる。

＜装置構成＞次に、図２を参照して、本実施形態の撮像装置の構成および機能の概略について説明する。

撮像部２０１は、フォーカスレンズやズームレンズ、防振レンズ、絞りを備えて構成される撮影光学系を含む。また、撮像部２０１は、シャッター、撮影光学系を通過した光束を電気信号に変換するＣＣＤもしくはＣＭＯＳ等のイメージセンサ、アナログ信号をデジタル信号に変換するＡ／Ｄ変換器を含む。

画像処理部２２０は、撮像部２０１から読み出される画像信号に対し所定の信号処理や画像処理を施して画像データを生成しメモリ部２１５に書き込む。また、画像処理部２２０では、画像データを用いて所定の演算処理を行い、得られた演算結果に基づいて撮影制御部２１４が露光制御、焦点検出制御、ホワイトバランス制御を行う。これにより、ＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＡＷＢ（オートホワイトバランス）処理が実現される。また、画像処理部２２０では、画像データを用いて所定の演算処理を行い、得られた演算結果に基づいて撮影制御部２１４が防振制御、ズーム制御を行うことにより、防振処理、ズーム処理が実現される。

操作検出部２０２は、カメラのスイッチ、ボタン及びタッチパネルその他の操作部材が操作されたことを検出し、対応する操作信号を撮影制御部２１４に通知する。

メニュー設定部２０３は、メニュー画面などを介して設定された値を撮影制御部２１４に通知する。

音声検出部２０４は、マイク等により撮影者やカメラ周辺部の音声を検出し、検出した音声信号を撮影制御部２１４に出力する。

動作検出部２０５は、カメラの動きや姿勢を検出し、検出結果を撮影制御部２１４に出力する。

顔検出部２０６は、公知のアルゴリズムにより、撮像された画像から被写体（撮影者）の顔等を検出する顔検出処理を行う。また、顔検出部２０６は、検出された顔の大きさと所定の面積の基準値とを比較し、比較結果をモード制御部２１３に通知する。

チルト検出部２０７は、自分撮りモードにおいて表示部２１９の表示画面の向きと撮像部２０１の光軸方向（撮影方向）とが同じ方向となるチルト状態であるか否かを判定し、判定結果をモード制御部２１３に通知する。する。

視線検出部２０８は、自分撮りモードにおいて撮影者の視線が撮像部２０１に向いているか、表示部２１９に向いているかを判定し、判定結果を撮影制御部２１４に通知する。

揺れ検出部２０９は、ジャイロセンサや加速度センサ等を用いてカメラの揺れや振動を検出し、揺れの方向や揺れ幅を算出して撮影制御部２１４に出力する。また、揺れ検出部２０９は、カメラの振動による上下方向や左右方向の画像の揺れを検出し、検出された画像の揺れを抑制するためのブレ補正量を算出して撮影制御部２１４に出力する。さらに、揺れ検出部２０９は、後述する構図ズレが発生した場合に、構図のズレ量を補正した状態で保持するための構図補正量を算出し、防振制御部２１８に出力する。

タイマー部２１０は、各種動作の判定に用いる時間、各種制御に用いる時間、内蔵時計の時間を計測する。

顔認証部２１１は、顔検出部２０６により検出された被写体（撮影者）の顔が、予め登録されている顔と一致するか否かを判定し、判定結果を撮影制御部２１４に通知する。

撮影指示検出部２１２は、撮影ボタン１０３が押されたか否かを検出し、例えば、撮影ボタン１０３が半押しされたことが検出された場合には撮影準備要求を、全押しされたことが検出された場合には撮影要求を撮影制御部２１４に通知する。

モード制御部２１３は、ユーザ操作や所定の条件に応じてカメラの動作モードを静止画や動画等の画像撮影モードや再生モードなどに切り替える。なお、画像撮影モードは、本実施形態の自分撮りモードを含む。

撮影制御部２１４は、撮影指示検出部２１２からの撮影準備要求を受けて、ＡＦ処理、ＡＥ処理、ＡＷＢ処理等の撮影準備動作を開始する。また、撮影制御部２１４は、撮影要求を受けて撮像部２０１からの信号読み出しから記録媒体２２１に画像データを書き込むまでの一連の撮影動作を開始する。また、撮影制御部２１４は、後述するように自分撮りモードにおける構図保持機能の起動と停止を制御する。

メモリ部２１５には、撮影制御部２１４の動作用の定数、プログラム等が記録される。ここでいう、プログラムとは、本実施形態にて後述する各種フローチャートを実行するためのプログラムのことである。また、メモリ部２１５には、撮像された画像や画像撮影時に撮影者が決めた理想的な構図が記憶される。

構図比較部２１６は、撮影準備動作時に撮像された画像の構図と、メモリ部２１５に記憶されている理想的な構図とを比較する。

構図判定部２１７は、撮影準備動作時に撮像された画像の構図が、メモリ部２１５に記憶されている理想的な構図と一致しているか否かを判定し、判定結果を撮影制御部２１４及び防振制御部２１８に出力する。

防振制御部２１８は、後述する光学防振機能又は電子防振機能により画像の揺れを防止する防振制御を行う。また、防振制御部２１８は、光学防振機能又は電子防振機能を使用して、撮影ボタン１０３の半押しにより撮影者が決めた構図を保持する、または構図ズレを補正した状態で保持する機能を有する。

表示部２１９は、液晶パネルや有機ＥＬパネルなどの表示デバイスであり、撮像された画像がメモリ部２１５を介して出力される。なお、表示部２１９には、表示部２１９に対するタッチ操作を検出可能なタッチパネルが実装されており、撮影者が表示部２１９に表示された画面を直接的に操作可能であるかのようなＧＵＩを構成することができる。

記録媒体２２１は、メモリ部２１５を介して出力される画像を記録するためのメモリカードやハードディスク等の記録媒体である。また、記録媒体２２１には、撮影制御部２１４の動作用の定数やプログラム等が格納されている。

本実施形態の撮像部２０１は、光学ズーム機能および光学防振機能を有し、画像処理部２２０は、電子ズーム機能および電子防振機能を有する。光学ズーム機能および電子ズーム機能は、ズームボタンの操作量に応じて画像を拡大／縮小する機能である。また、光学防振機能および電子防振機能は、カメラの振動による画像の揺れを防止する機能である。これらの各機能は、撮影制御部２１４による制御に応じて、同時に、交互に、或いは単独で使用されうる。

光学ズーム機能は、図示しないズームボタンの操作量に応じて、撮像部２０１のズームレンズを移動させ、撮像される被写体の光学像を拡大／縮小する機能である。また、電子ズーム機能は、ズームボタンの操作量に応じて、画像処理部２２０が、撮像部２０１で生成された画像信号の一部を切り出し、拡大した画像信号を生成する処理である。また、オートズーム機能の設定が可能である。オートズーム機能は、撮影者がタッチパネル等で画像中の被写体を指定することで、指定された被写体を画像の中央付近で所定のサイズに収めるように適切な構図を判定して、自動で光学ズーム機能又は電子ズーム機能による画像の拡大／縮小を行う機能である。

光学防振機能は、揺れ検出部２０９としての加速度センサ等から得られる加速度信号を用いて画像の揺れを抑制するためのブレ補正量を算出し、算出されたブレ補正量に応じて防振レンズを移動させることで、画像の揺れを防止する機能である。電子防振機能は、揺れ検出部２０９としての加速度センサ等から得られる加速度信号に基づいて、撮像部２０１で生成された画像信号の位置を調整することにより、画像の揺れを防止する機能である。

なお、図２に示す各部の１つ以上は、ＡＳＩＣやプログラマブルロジックアレイ（ＰＬＡ）などのハードウェアによって実現されてもよいし、ＣＰＵやＭＰＵなどのプロセッサがソフトウェアを実行することによって実現されてもよい。また、ソフトウェアとハードウェアの組み合わせによって実現されてもよい。よって、以下では、異なる機能ブロックが動作主体として記載されている場合であっても、同じハードウェアが主体として実現され得る。

＜自分撮りモードにおける撮影処理＞次に、図３を参照して、本実施形態の自分撮りモードにおける撮影処理について説明する。

なお、図３の処理は、カメラが自分撮りモードに設定されると開始され、撮影制御部２１４が記録媒体２２１から読み出したプログラムをメモリ部２１５に展開して実行することで実現される。後述する図６、７、１２、１６でも同様である。また、以下では、図示しない防振スイッチがオンされているものとする。

ステップＳ３０１では、撮影制御部２１４は、モード制御部２１３により、カメラの動作モードを自分撮りモードに設定する。自分撮りモードの設定方法は、（１）撮影者が設定する方法と、（２）モード制御部２１３が自動で設定する方法がある。

まず、（１）撮影者が自分撮りモードに設定する方法を説明する。

操作検出部２０２により所定の操作が検出されたこと、メニュー設定部２０３によりメニュー画面等を介して自分撮りモードが選択・決定されたこと、音声検出部２０４により所定の音声が検出されたこと、動作検出部２０５により撮影者がカメラを持って所定の動作をしたことのうち少なくともいずれかをトリガーとして、モード制御部２１３は撮影者により自分撮りモードの設定が指示されたと判断し、カメラの動作モードを自分撮りモードに切り替える。

次に、（２）モード制御部２１３が自動で自分撮りモードに設定する方法を説明する。

顔検出部２０６によりライブビュー画像中の被写体（撮影者）の顔の大きさが所定の面積の基準値を上回ったと判定された場合に、モード制御部２１３は撮影者が自分撮りを行おうとしていると判断し、カメラの動作モードを自分撮りモードに設定する。これは、自分撮りモードでは、撮影者とカメラの距離が、撮影者の腕の長さ以上にならないことを利用したもので、撮影者とカメラの距離に応じた顔の大きさを基準値として設定する。

また、チルト検出部２０７により表示部２１９がチルトされたことが検出された場合に、モード制御部２１３は撮影者が自分撮りを行おうとしていると判断し、カメラの動作モードを自分撮りモードに設定する。これは、自分撮りモードでは、表示部２１９の向きが撮像部２０１の撮影方向と同じ方向になるという特徴を利用したものである。

図３に戻り、ステップＳ３０２では、撮影制御部２１４は、撮影者が撮影ボタン１０３を半押しすることにより理想的な構図が決定されたと判定すると、構図保持機能を起動させる。構図保持機能を起動する方法は、（１）撮影者が起動する方法と、（２）撮影制御部２１４が自動で起動する方法がある。

まず、（１）撮影者が構図保持機能を起動する方法について説明する。

操作検出部２０２により所定の操作が検出されたこと、メニュー設定部２０３によりメニュー画面等を介して構図保持機能が選択・決定されたこと、音声検出部２０４により所定の音声が検出されたこと、動作検出部２０５により撮影者がカメラを持って所定の動作をしたことのうち少なくともいずれかをトリガーとして、撮影制御部２１４は撮影者により構図保持機能の起動が指示されたと判断し、カメラの構図保持機能を起動する。

次に、（２）撮影制御部２１４が自動で構図保持機能を起動する方法について説明する。

視線検出部２０８により撮影者の視線が撮像部２０１（撮影レンズ）から表示部２１９に移動したことが検出された場合に、撮影制御部２１４は撮影者が理想的な構図で自分撮りを行おうとしていると判断し、構図保持機能を起動する。

また、揺れ検出部２０９により撮影者の視線が表示部２１９から撮像部２０１に移動したときにカメラの揺れ幅が所定量以上変化した場合に、撮影制御部２１４は撮影者が理想的な構図で自分撮りを行おうとしていると判断し、構図保持機能を起動する。

図３に戻り、ステップＳ３０３では、撮影制御部２１４は、ステップＳ３０２で起動した構図保持機能により、撮影者により決定された構図を構図ズレを補正した状態で保持する。ここで、図４及び図５を参照して、構図保持機能について説明する。

図４は、実施形態１に係る防振制御部２１８を使用した上下左右方向に対する構図保持機能の説明図である。

図４において、４０１は撮影者により決定され、メモリ部２１５に記憶された理想的な構図を示している。

４０２、４０３、４０４、４０５は撮影者が視線を表示部２１９へ移動させたことよる上方向の構図ズレ、下方向の構図ズレ、左方向の構図ズレ、右方向の構図ズレをそれぞれ示している。構図保持機能は、構図判定部２１７により、図示のように上下左右方向に対する構図ズレが発生したと判定された場合に、光学防振機能又は電子防振機能により理想的な構図４０１に戻るように画像を上下左右方向に移動又は切り出す（以下、シフト）機能である。

図５は、実施形態１に係る防振制御部２１８を使用した構図保持機能の作用を簡易的に説明する図である。

図５において、５０１は撮影者により決定され、メモリ部２１５に記憶された理想的な構図を示している。

５０２、５０３、５０４、５０５は理想的な構図５０１に対して上方向の構図ズレ、下方向の構図ズレ、左方向の構図ズレ、右方向の構図ズレが発生していることをそれぞれ示している。

ここで、揺れ検出部２０９が、構図判定部２１７により判定された上下左右方向の構図のズレを補正するための構図補正量を算出し、防振制御部２１８がズレ量に相当する分だけ画像をシフトさせることで、理想的な構図５０１に戻し保持することが可能となる。

＜構図保持動作＞ここで、図６を参照して、図３のステップＳ３０３における構図保持動作について説明する。

ステップＳ６０１では、構図比較部２１６は、メモリ部２１５に記憶されている理想的な構図と、表示部２１９に表示されている構図とを比較する。

ステップＳ６０２では、構図判定部２１７は、ステップＳ６０１における比較の結果、構図ズレが発生しているか否か判定し、発生している場合はステップＳ６０３へ進み、発生していない場合は処理を終了し、図３のステップＳ３０４に進む。

ステップＳ６０３では、構図判定部２１７は、上方向の構図ズレが発生しているか否かを判定し、発生している場合はステップＳ６０４へ進み、発生していない場合はステップＳ６０６へ進む。

ステップＳ６０４では、撮影制御部２１４は、構図判定部２１７による判定結果を受けて、揺れ検出部２０９により上方向の構図のズレ量を補正するための構図補正量を算出し、防振制御部２１８に出力する。

ステップＳ６０５では、防振制御部２１８は、上方向の構図ズレを補正する方向に画像をシフトさせて理想的な構図を保持する制御を行い、ステップＳ６０１に戻る。

ステップＳ６０６では、構図判定部２１７は、下方向の構図ズレが発生しているか否かを判定し、発生している場合はステップＳ６０７へ進み、発生していない場合はステップＳ６０８へ進む。

ステップＳ６０７では、撮影制御部２１４は、構図判定部２１７による判定結果を受けて、揺れ検出部２０９により下方向の構図のズレ量を補正するための構図補正量を算出し、防振制御部２１８に出力する。

ステップＳ６０５では、防振制御部２１８は、下方向の構図ズレを補正する方向に画像をシフトさせて構図を保持する制御を行い、ステップＳ６０１に戻る。

ステップＳ６０８では、構図判定部２１７は、左方向の構図ズレが発生しているか否かを判定し、発生している場合はステップＳ６０９へ進み、発生していない場合はステップＳ６１０へ進む。

ステップＳ６０９では、撮影制御部２１４は、構図判定部２１７による判定結果を受けて、揺れ検出部２０９により左方向の構図のズレ量を補正するための構図補正量を算出し、防振制御部２１８に出力する。

ステップＳ６０５では、防振制御部２１８は、左方向の構図ズレを補正する方向に画像をシフトさせて構図を保持する制御を行い、ステップＳ６０１に戻る。

ステップＳ６１０では、撮影制御部２１４は、構図判定部２１７による判定結果を受けて、揺れ検出部２０９により右方向の構図のズレ量を補正するための構図補正量を算出し、防振制御部２１８に出力する。

ステップＳ６０５では、防振制御部２１８は、右方向の構図ズレを相殺する方向に画像をシフトさせて構図を保持する制御を行い、ステップＳ６０１に戻る。

図３に戻り、ステップＳ３０４では、撮影制御部２１４は、撮影指示検出部２１２により撮影ボタン１０３が全押しされたか否かを検出する。そして、全押しが検出された場合はステップＳ３０５に進み、検出されない場合はステップＳ３０３に戻り、撮影ボタン１０３が全押しされるまで構図保持機能を継続する。なお、図７で後述するように撮影ボタン１０３が全押しされずに構図保持機能が停止される場合もある。

ステップＳ３０５では、撮影制御部２１４は、撮像部２０１を制御して理想的な構図で自分撮りを実行し、その後構図保持機能を停止する。

ステップＳ３０６では、撮影制御部２１４は、モード制御部２１３により自分撮りモードを解除する。ここで、自分撮りモードの解除方法は、（１）撮影者が解除する方法と、（２）撮影制御部２１４が自動で解除する方法がある。

まず、（１）撮影者が構図保持機能を解除する方法について説明する。

操作検出部２０２により所定の操作が検出されたこと、メニュー設定部２０３によりメニュー画面等を介して自分撮りモードの解除が選択・決定されたこと、音声検出部２０４により所定の音声が検出されたこと、動作検出部２０５により撮影者がカメラを持って所定の動作をしたことのうち少なくともいずれかをトリガーとして、撮影制御部２１４は撮影者により自分撮りモードの解除が指示されたと判断し、自分撮りモードを解除する。

次に、（２）撮影制御部２１４が自動で自分撮りモードを解除する方法について説明する。

顔検出部２０６によりライブビュー画像中の被写体（撮影者）の顔の大きさが所定の面積の基準値を下回った場合に、モード制御部２１３は撮影者が自分撮りモードを解除しようとしていると判断し、自分撮りモードを解除する。

また、チルト検出部２０７により表示部２１９がチルトされた状態から元の状態に戻されたことが検出された場合に、モード制御部２１３は撮影者が自分撮りモードを解除しようとしていると判断し、自分撮りモードを解除する。

＜構図保持機能停止＞次に、図７を参照して、撮影ボタン１０３が全押しされずに構図保持機能を停止する場合について説明する。

図３のステップＳ３０５で説明したように、撮影制御部２１４は、撮像部２０１を制御して理想的な構図で自分撮りを実行した後、構図保持機能を停止する。しかしながら、撮影者により撮影ボタン１０３が全押しされなかった場合、撮影ボタン１０３を再度半押しして構図を決めたい場合、構図を決める操作中に第三者その他の被写体が構図に写り込んだ場合等にも構図保持機能は停止される。

ステップＳ７０１では、撮影制御部２１４は、撮影指示検出部２１２により撮影ボタン１０３が全押しされたか否かを判定し、全押しされた場合はステップＳ７０４へ進み、全押しされない場合はステップＳ７０２へ進む。

ステップＳ７０２では、撮影制御部２１４は、構図保持機能を停止する条件として設定されている処理を検出したか否かを判定し、検出した場合はステップＳ７０４へ進み、検出しない場合はステップＳ７０３へ進む。

ステップＳ７０３では、撮影制御部２１４は、タイマー部２１０により撮影動作が実行されないまま所定の時間が経過したか否かを判定し、所定の時間が経過した場合はステップＳ７０４へ進み、所定の時間が経過していない場合はステップＳ７０１に戻る。

ステップＳ７０４では、撮影制御部２１４は構図保持機能を停止する。ここで、構図保持機能を停止する方法は、（１）撮影者が停止する方法と、（２）撮影制御部２１４が自動で停止する方法がある。

まず、（１）撮影者が停止する方法について説明する。

操作検出部２０２により所定の操作が検出されたこと、メニュー設定部２０３によりメニュー画面等を介して構図保持機能の停止が選択・決定されたこと、音声検出部２０４により所定の音声が検出されたこと、動作検出部２０５により撮影者がカメラを持って所定の動作をしたことのうち少なくともいずれかをトリガーとして、撮影制御部２１４は撮影者により構図保持機能の停止が指示されたと判断し、カメラの構図保持機能を停止する。

次に、（２）撮影制御部２１４が自動で構図保持機能を停止する方法について説明する。

視線検出部２０８により撮影者の視線が撮像部２０１から表示部２１９に移動したことが検出された場合に、撮影制御部２１４は撮影者が理想的な構図で自分撮りを行った（又は行わなかった）と判断し、カメラの構図保持機能を停止する。

また、揺れ検出部２０９により撮影者の視線が撮像部２０１から表示部２１９に移動したことが検出され、カメラの揺れ幅が所定量以上変化した場合には、撮影制御部２１４は撮影者が理想的な構図で自分撮りを行った（又は行わなかった）と判断し、カメラの構図保持機能を停止する。

さらに顔認証部２１１により、撮像部２０１により得られた画像に含まれる顔に、予め登録されている顔と一致しないものが含まれていると判定された場合に、撮影制御部２１４は構図が保持された状態で撮像された画像に第三者が写り込んでいると判断して、カメラの構図保持機能を停止する。

以上のように、本実施形態によれば、自分撮りにおいて防振制御を使用して上下左右方向の構図ズレを発生させずに、理想的な構図で撮影を行えるようになる。

［実施形態２］
本実施形態では、オートズーム機能を使用して前後方向に対する構図ズレを補正した状態で保持する構成について説明する。

＜従来の問題点と実施形態２の作用効果＞まず、図８を参照して、自分撮りを行う場合の従来の問題点と本実施形態の作用効果について説明する。

撮像装置８００の構成は、実施形態１の撮像装置１００と同様に、バリアングル式の表示部８０１、光学系やイメージセンサを含む撮像部８０２及び撮影準備動作や撮影動作の開始指示を行う撮影ボタン８０３を有している。

また、図８（ａ）と図８（ｃ）も図１（ａ）と図１（ｃ）と同様であり、符号を８００番台で示している。

本実施形態では、図８（ｂ）のように視線８０８を撮像部８０２に移動させたことによる前後方向の構図ズレ８０９を補正する。その他の点については図１と同様であるため説明は省略する。

図９は、実施形態２の撮像装置の構成を示すブロック図であり、構成９０１〜９１７、９１９については、図１の各構成２０１〜２１７、２１９と同様である。

本実施形態では、オートズーム制御部９１８が設けられ、光学ズーム機能又は電子ズーム機能により、ライブビュー画像から理想的な構図に対応する領域を拡大／縮小又は切り出すことにより構図ズレを補正し、撮影者が決めた構図を保持する機能を実現する。

なお、本実施形態の自分撮りモードにおける撮影処理は、図３と同様であるため説明は省略する。また、撮影ボタン９０３が全押しされずに構図保持機能を停止する場合については、図７と同様であるため説明を省略する。

図１０は、実施形態２に係るオートズーム機能を使用した前後方向の構図ズレに対する構図保持機能の説明図である。

図１０において、１００１はメモリ部９１５に記憶された理想的な構図を示している。

１００２、１００３は撮影者が視線を表示部９１９へ移動させたことよる前方向の構図ズレ、後方向の構図ズレをそれぞれ示している。本実施形態の構図保持機能は、構図判定部９１７により、図示のように前後方向に対する構図ズレが発生したと判定された場合に、光学ズーム機能又は電子ズーム機能により、理想的な構図１００１に戻るように自動で画像を拡大／縮小又は切り出した画像を表示する。

図１１は、実施形態２に係るオートズーム制御を使用した構図保持機能の作用効果を簡易的に説明する図である。

図１１において、１１０１はメモリ部９１５に記憶された理想的な構図を示している。

１１０２、１１０３は理想的な構図１１０１に対して前方向の構図ズレ、後方向の構図ズレが発生していることをそれぞれ示している。前方向の構図ズレは、カメラと撮影者の位置が近いことで発生するため、オートズーム制御部９１８は、ＷＩＤＥ側にズームを行うことで理想的な構図に戻すように制御し、理想的な構図１１０１を保持することが可能となる。また、後方向の構図ズレは、カメラと撮影者の位置が遠いことで発生するため、オートズーム制御部９１８は、ＴＥＬＥ側にズームを行うことで理想的な構図に戻すように制御し、理想的な構図１１０１を保持することが可能となる。

＜構図保持動作＞ここで、図１２を参照して、図３のステップＳ３０３における構図保持動作について説明する。

なお、以下では、オートズーム機能が設定されているものとする。後述する図１６でも同様である。

ステップＳ１２０１では、構図比較部９１６は、メモリ部９１５に記憶されている理想的な構図と、表示部９１９に表示されている構図とを比較する。

ステップＳ１２０２では、構図判定部９１７は、ステップＳ１２０１における比較の結果、構図ズレが発生しているか否か判定し、発生している場合はステップＳ１２０３へ進み、発生していない場合は処理を終了し、図３のステップＳ３０４に進む。

ステップＳ１２０３では、構図判定部９１７は、前方向の構図ズレが発生しているか否かを判定し、発生している場合はステップＳ１２０４へ進み、発生していない場合はステップＳ１２０６へ進む。

ステップＳ１２０４では、撮影制御部９１４は、構図判定部９１７による判定結果を受けて、前方向の構図ズレが発生した画像から理想的な構図に対応する領域を拡大／縮小又は切り出すように、ＷＩＤＥ側にズームを行うズーム倍率を設定する。

ステップＳ１２０６では、撮影制御部９１４は、構図判定部９１７による判定結果を受けて、後方向の構図ズレが発生した画像から理想的な構図に対応する領域を拡大／縮小又は切り出すように、ＴＥＬＥ側にズームを行うズーム倍率を設定する。

ステップＳ１２０５では、オートズーム制御部９１８は、ステップＳ１２０４又はＳ１２０６で設定されたズーム倍率に基づいて、ズームレンズ又は画像処理部９２０によりズーム処理を行うことで理想的な構図を保持し、ステップＳ１２０１に戻る。

以上のように、本実施形態によれば、自分撮りにおいてオートズーム機能を使用して前後方向の構図ズレを発生させずに、理想的な構図で撮影を行えるようになる。

［実施形態３］
本実施形態では、オートズーム機能を使用して上下左右方向に対する構図ズレを補正した状態で保持する構成について説明する。

＜従来の問題点と実施形態３の作用効果＞まず、図１３を参照して、自分撮りを行う場合の従来の問題点と本実施形態の作用効果について説明する。

撮像装置１３００の構成は、実施形態１、２の撮像装置１００、８００と同様に、バリアングル式の表示部１３０１、光学系やイメージセンサを含む撮像部１３０２及び撮影準備動作や撮影動作の開始指示を行う撮影ボタン１３０３を有している。

また、図１３（ａ）、図１３（ｂ）も図１（ａ）、図１（ｂ）と同様であり、符号を１３００番台で示している。

本実施形態では、図１３（ｃ）のように視線１３１０を表示部１３０１から撮像部１３０２に移動させことにより、図１３（ｂ）の上下左右方向の構図ズレ１３０９が発生した場合であっても、光学ズーム機能又は電子ズーム機能により理想的な構図１３１１を保持しながら自分撮りを行えるようになる。その他の点については図１と同様であるため説明は省略する。

図１４は、実施形態３の撮像装置の構成を示すブロック図であり、構成１４０１〜１４２１については、図９の各構成９０１〜９２１と同様である。

本実施形態では、図９の構成に加えて、構図要素比較部１４２２と構図要素判定部１４２３が設けられている。

構図要素比較部１４２２は、表示部１４１９に表示されている構図中の各要素と、メモリ部１４１５に記憶されている理想的な構図中の対応する各要素とを比較する。

構図要素判定部１４２３は、構図要素比較部１４２２で比較した結果、表示部１４１９に表示されている構図中の特定の要素が、メモリ部１４１５に記憶されている複数の構図中の特定の要素と一致しているか否かを判定する。

なお、本実施形態の自分撮りモードにおける撮影処理は、図３と同様であるため説明は省略する。また、撮影ボタン１３０３が全押しされずに構図保持機能を停止する場合については、図７と同様であるため説明を省略する。

図１５は、実施形態３に係るオートズーム機能を使用した構図保持機能の作用を簡易的に説明する図である。

本実施形態では、実施形態１、２における撮影者が求める理想的な構図とは多少異なっているが、撮影者や背景などの要素が構図内に収まり、理想的な構図に近い状態での自分撮りが可能となる。

図１５において、１５０１はメモリ部１４１５に記憶された理想的な構図を示している。また、１５０２は、理想的な構図１５０１に含まれる３つの要素１〜３を示している。本実施形態では、理想的な構図１５０２の要素１、要素２、要素３が構図内に収まっている状態を理想的な構図であるものとする。

１５０３、１５０５、１５０７、１５０９は理想的な構図１５０１に対して上方向の構図ズレ、下方向の構図ズレ、左方向の構図ズレ、右方向の構図ズレが発生していることをそれぞれ示している。これら各方向の構図ズレに対しては、光学ズーム機能又は電子ズーム機能によりＷＩＤＥ側にズームを行うことで、各要素１〜３が構図内に収まった状態とし理想的な構図１５０１に近い構図１５０４、１５０６、１５０８、１５１０に戻すことが可能となる。

＜構図保持動作＞ここで、図１６を参照して、図３のステップＳ３０３における構図保持動作について説明する。

ステップＳ１６０１では、構図比較部１４１６は、メモリ部１４１５に記憶されている理想的な構図と、表示部１４１９に表示されている構図とを比較する。

ステップＳ１６０２では、構図判定部１４１７は、ステップＳ１６０１における比較の結果、構図ズレが発生しているか否か判定し、発生している場合はステップＳ１６０３へ進み、発生していない場合は処理を終了し、図３のステップＳ３０４に進む。

ステップＳ１６０３では、構図要素比較部１４２２は、メモリ部１４１５に記憶されている理想的な構図の各要素と、表示部１４１９に表示されている構図の各要素とを比較する。

ステップＳ１６０４では、構図要素判定部１４２３は、ステップＳ１６０３における比較の結果、構図要素が一致しているか否かを判定し、一致していない場合はステップＳ１６０５へ進み、一致している場合は処理を終了し、図３のステップＳ３０４に進む。

ステップＳ１６０５では、撮影制御部１４１４は、構図要素判定部１４２３による判定結果を受けて、構図ズレが発生した画像から理想的な構図に対応する領域を拡大／縮小又は切り出すように、ＷＩＤＥ側にズームを行うズーム倍率を設定する。

ステップＳ１６０６では、オートズーム制御部１４１８は、ステップＳ１６０５で設定されたズーム倍率に基づいて、ズームレンズ又は画像処理部１４２０によりズーム処理を行うことで理想的な構図に近い構図に戻し、ステップＳ１６０１に戻る。

以上のように、本実施形態によれば、自分撮りにおいてオートズーム制御を使用して上下左右の構図ズレを理想的な構図に近い状態に戻して撮影を行えるようになる。

なお、実施形態３において、さらに実施形態１を適用し、構図を中心に移動させる処理を行っても良い。

［その他の実施形態］
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

２０１、９０１、１４０１…撮像部、２１３、９１３、１４１３…モード制御部、２１４、９１４、１４１４…撮影制御部、２１５、９１５、１４１５…メモリ部、２１６、９１６、１４１６…構図比較部、２１７、９１７、１４１７…構図判定部

Claims (20)

1. 撮影光学系を通過した光束を電気信号に変換して撮像する撮像手段と、
   画像撮影時に決められた構図を記憶する記憶手段と、
   所定の撮影モードにおいて、前記記憶手段に記憶されている所定の構図に基づいて前記撮像手段により撮像された画像の構図のズレを検出する検出手段と、
   前記構図のズレが検出された場合、前記撮像手段により撮像された画像について前記構図のズレを補正した状態で保持する構図保持手段と、
   前記所定の撮影モードが終了するまで前記構図のズレを補正した状態が保持されるように前記構図保持手段を制御する制御手段と、を有し、
   前記構図保持手段は、
   前記撮像手段により撮像された画像の構図と、前記記憶手段に記憶されている構図とを比較する構図比較手段と、
   前記撮像された画像の構図が、前記記憶手段に記憶されている構図と一致しているか否かを判定する構図判定手段と、
   表示手段に表示されている画像中の要素と、前記記憶手段に記憶されている構図の中の要素とを比較する構図要素比較手段と、
   前記表示手段に表示されている画像中の要素が、前記記憶手段に記憶されている構図の中の要素と一致しているか否かを判定する構図要素判定手段と、を有することを特徴とする撮像装置。
2. 前記所定の撮影モードを含む複数の動作モードのいずれかに切り替えが可能なモード制御手段を更に有することを特徴とする請求項１に記載の撮像装置。
3. 前記所定の撮影モードは、撮影者が自分を撮影する自分撮りモードであることを特徴とする請求項２に記載の撮像装置。
4. 前記モード制御手段は、前記自分撮りモードにおいて撮影者の所定の第１の操作又は撮像装置の所定の第１の状態を検出した場合に前記自分撮りモードに設定することを特徴とする請求項３に記載の撮像装置。
5. 前記所定の第１の状態は、前記撮像された画像を表示する表示手段の向きと前記撮像手段の撮影方向とが同じ方向となるチルト状態であることを特徴とする請求項４に記載の撮像装置。
6. 撮影光学系を通過した光束を電気信号に変換して撮像する撮像手段と、
   画像撮影時に決められた構図を記憶する記憶手段と、
   撮影者が自分を撮影する自分撮りモードを含む複数の動作モードのいずれかに切り替えが可能なモード制御手段と、
   前記自分撮りモードにおいて、前記記憶手段に記憶されている所定の構図に基づいて前記撮像手段により撮像された画像の構図のズレを検出する検出手段と、
   前記構図のズレが検出された場合、前記撮像手段により撮像された画像について前記構図のズレを補正した状態で保持する構図保持手段と、
   前記自分撮りモードが終了するまで前記構図のズレを補正した状態が保持されるように前記構図保持手段を制御する制御手段と、を有し、
   前記モード制御手段は、撮影者の所定の第１の操作又は撮像装置の所定の第１の状態を検出した場合に前記自分撮りモードに設定し、
   前記所定の第１の状態は、前記撮像された画像を表示する表示手段の向きと前記撮像手段の撮影方向とが同じ方向となるチルト状態であり、
   前記表示手段に表示された画像中の被写体の顔の大きさが所定の面積の基準値を下回った場合、又は前記表示手段がチルトされた状態から元の状態に戻されたことが検出された場合に、前記自分撮りモードを解除することを特徴とする撮像装置。
7. 前記撮像手段により撮像された画像の構図と、前記記憶手段に記憶されている構図とを比較する構図比較手段と、
   前記撮像された画像の構図が、前記記憶手段に記憶されている構図と一致しているか否かを判定する構図判定手段と、を更に有することを特徴とする請求項６に記載の撮像装置。
8. 前記表示手段に表示されている画像中の要素と、前記記憶手段に記憶されている構図の中の要素とを比較する構図要素比較手段と、
   前記表示手段に表示されている画像中の要素が、前記記憶手段に記憶されている構図の中の要素と一致しているか否かを判定する構図要素判定手段と、を更に有することを特徴とする請求項７に記載の撮像装置。
9. 前記制御手段は、前記自分撮りモードにおいて撮影者の所定の第２の操作又は撮像装置の所定の第２の状態を検出した場合に前記構図保持手段を起動することを特徴とする請求項３、６乃至８のいずれか１項に記載の撮像装置。
10. 前記所定の第２の状態は、撮影者の視線が前記撮影光学系から前記表示手段に移動したことが検出された場合、又は撮影者の視線が前記表示手段から前記撮影光学系に移動したときの撮像装置の揺れが所定量以上変化した場合であることを特徴とする請求項９に記載の撮像装置。
11. 前記制御手段は、前記自分撮りを実行した後、前記構図保持手段を停止することを特徴とする請求項９又は１０に記載の撮像装置。
12. 前記制御手段は、前記自分撮りが実行されない状態のまま所定の処理が実行された場合又は所定の時間が経過した場合、前記構図保持手段を停止することを特徴とする請求項９又は１０に記載の撮像装置。
13. 前記所定の第１の操作は、撮影者による自分撮りモードを設定又は解除する操作が検出されたこと、所定の音声が検出されたこと、撮像装置に所定の動作をさせたことのうち少なくともいずれかであることを特徴とする請求項４乃至８、１０乃至１２のいずれか１項に記載の撮像装置。
14. 前記所定の第２の操作は、撮影者による前記構図保持手段を起動又は停止する操作が検出されたこと、所定の音声が検出されたこと、撮像装置に所定の動作をさせたことのうち少なくともいずれかであることを特徴とする請求項９乃至１２のいずれか１項に記載の撮像装置。
15. 前記構図保持手段は、防振制御を行うことで前記撮像手段により撮像された画像の上下左右方向の構図のズレを補正した状態で保持することを特徴とする請求項１乃至１４のいずれか１項に記載の撮像装置。
16. 前記構図保持手段は、オートズーム制御を行うことで前記撮像手段により撮像された画像の前後方向の構図のズレを補正した状態で保持することを特徴とする請求項１乃至１５のいずれか１項に記載の撮像装置。
17. 前記構図保持手段は、オートズーム制御を行うことで前記撮像手段により撮像された画像の上下左右方向の構図のズレを補正した状態で保持することを特徴とする請求項１乃至１６のいずれか１項に記載の撮像装置。
18. 撮影光学系を通過した光束を電気信号に変換して撮像する撮像手段と、画像撮影時に決められた構図を記憶する記憶手段と、を有する撮像装置の制御方法であって、
    所定の撮影モードにおいて、前記記憶手段に記憶されている所定の構図に基づいて前記撮像手段により撮像された画像の構図のズレを検出するステップと、
    前記構図のズレが検出された場合、前記撮像手段により撮像された画像について前記構図のズレを補正した状態で保持するステップと、
    前記所定の撮影モードが終了するまで前記構図のズレを補正した状態が保持されるように制御するステップと、を有し、
    前記保持するステップは、
    前記撮像手段により撮像された画像の構図と、前記記憶手段に記憶されている構図とを比較するステップと、
    前記撮像された画像の構図が、前記記憶手段に記憶されている構図と一致しているか否かを判定するステップと、
    表示手段に表示されている画像中の要素と、前記記憶手段に記憶されている構図の中の要素とを比較するステップと、
    前記表示手段に表示されている画像中の要素が、前記記憶手段に記憶されている構図の中の要素と一致しているか否かを判定するステップと、を有することを特徴とする制御方法。
19. 撮影光学系を通過した光束を電気信号に変換して撮像する撮像手段と、画像撮影時に決められた構図を記憶する記憶手段と、を有する撮像装置の制御方法であって、
    撮影者が自分を撮影する自分撮りモードを含む複数の動作モードのいずれかに切り替えが可能なモード制御ステップと、
    前記自分撮りモードにおいて、前記記憶手段に記憶されている所定の構図に基づいて前記撮像手段により撮像された画像の構図のズレを検出する検出ステップと、
    前記構図のズレが検出された場合、前記撮像手段により撮像された画像について前記構図のズレを補正した状態で保持する構図保持ステップと、
    前記自分撮りモードが終了するまで前記構図のズレを補正した状態が保持されるように制御する制御ステップと、を有し、
    前記モード制御ステップでは、撮影者の所定の第１の操作又は撮像装置の所定の第１の状態を検出した場合に前記自分撮りモードに設定し、
    前記所定の第１の状態は、前記撮像された画像を表示する表示手段の向きと前記撮像手段の撮影方向とが同じ方向となるチルト状態であり、
    前記表示手段に表示された画像中の被写体の顔の大きさが所定の面積の基準値を下回った場合、又は前記表示手段がチルトされた状態から元の状態に戻されたことが検出された場合に、前記自分撮りモードを解除することを特徴とする制御方法。
20. コンピュータを、請求項１乃至１７のいずれか１項に記載された撮像装置の各手段として機能させるためのプログラム。

Images