JP2022145212A - 撮像装置 - Google Patents

Abstract

【課題】手ぶれが生じる状況であっても合成画像の撮影を行い易くすることができる撮像装置を提供する。
【解決手段】撮像装置は、被写体像を撮像して、画像データを生成する撮像素子（１１０）と、撮像素子による複数回の撮像結果の画像データに基づいて、複数の撮像画像を合成した合成画像を示す画像データを生成する撮影動作を制御する制御部（１４０）と、撮像装置のぶれの状態を検出するぶれ検出部（１８４）と、情報を表示する表示部（１２０）とを備える。制御部は、合成画像の撮影動作において、撮像素子による複数回の撮像時に、ぶれ検出部によって検出された複数のぶれ状態を含むぶれ状態情報を表示するように表示部を制御する。
【選択図】図４

Description

本開示は、複数の画像を撮影して合成する機能を有する撮像装置に関する。

特許文献１は、画素ずらしを実行しながら得られる複数組の画像信号を合成して、高精細な画像を得る撮像装置を開示している。特許文献１の撮像装置では、画素ずらし用に像を変位させるための指令により、レンズを駆動する手ぶれ補正アクチュエータが制御されている。この撮像装置は、画像合成の処理時に像振れ量の大きさ判定を行い、像振れ量が所定値以上ある場合、像振れが大きいことを示す警告表示を表示部に表示する。警告表示が行われた場合、画素ずらしによる画像の合成は行われず、原画像が記録されている。

特開２００３－２７４２８１号公報

本開示は、手ぶれが生じる状況であっても合成画像の撮影を行い易くすることができる撮像装置を提供する。

本開示における撮像装置は、被写体像を撮像して、画像データを生成する撮像素子と、撮像素子による複数回の撮像結果の画像データに基づいて、複数の撮像画像を合成した合成画像を示す画像データを生成する撮影動作を制御する制御部と、撮像装置のぶれの状態を検出するぶれ検出部と、情報を表示する表示部とを備える。制御部は、合成画像の撮影動作において、撮像素子による複数回の撮像時に、ぶれ検出部によって検出された複数のぶれ状態を含むぶれ状態情報を表示するように表示部を制御する。

本開示における撮像装置によると、手ぶれが生じる状況であっても合成画像の撮影を行い易くすることができる。

本開示の実施形態１に係るデジタルカメラの構成を示すブロック図 デジタルカメラにおけるＢＩＳ処理部の構成を示すブロック図 デジタルカメラにおける手持ちハイレゾ撮影動作を例示するフローチャート 実施形態１に係るデジタルカメラにおける手ぶれ状態画面を説明するための図 実施形態１に係るデジタルカメラの撮影表示処理を例示するフローチャート 実施形態１に係るデジタルカメラの撮影表示処理を説明するための図 実施形態１に係るデジタルカメラの撮影表示処理の変形例を説明するための図 実施形態１に係るデジタルカメラのハイレゾ合成処理を例示するフローチャート ハイレゾ合成処理における合成対象の画像間の位置関係を説明した図 ハイレゾ合成処理における画像合成を説明するための図 実施形態２に係るデジタルカメラの撮影表示処理を例示するフローチャート 実施形態２に係るデジタルカメラの手ぶれ状態画面を例示する図 デジタルカメラの手ぶれ状態画面の変形例１を示す図 デジタルカメラの手ぶれ状態画面の変形例２を示す図 デジタルカメラの手ぶれ状態画面の変形例３を示す図 デジタルカメラの手ぶれ状態画面の変形例４を示す図

以下、本開示における実施の形態を、図面を適宜参照しながら説明する。ただし、詳細な説明において、従来技術および実質的に同一の構成に関する説明のうち不必要な部分は省略されることもある。これは、説明を簡単にするためである。また、以下の説明および添付の図面は、当業者が本開示を充分に理解できるよう開示されるのであって、特許請求の範囲の主題を限定することを意図されていない。

（実施形態１）
実施形態１では、撮像装置の一例として像ぶれ補正機能を有するレンズ交換式のデジタルカメラの例を説明する。

１．構成
図１は、実施形態１に係るデジタルカメラ１の構成を示すブロック図である。デジタルカメラ１は、カメラ本体１００とそれに着脱可能な交換レンズ２００とから構成される。以下の説明では、カメラ本体１００内の撮像素子を移動してぶれを補正する機能を「ＢＩＳ(Body Image Stabilizer)機能」という。また、交換レンズ２００内の補正用レンズを移動してぶれを補正する機能を「ＯＩＳ(Optical Image Stabilizer)機能」という。

１－１．カメラ本体
カメラ本体１００（撮像装置の一例）は、画像センサ１１０と、液晶モニタ１２０と、操作部１３０と、カメラ制御部１４０と、ボディマウント１５０と、カードスロット１７０とを備える。

カメラ制御部１４０は、レリーズ釦からの指示に応じて、画像センサ１１０等の構成要素を制御することでデジタルカメラ１全体の動作を制御する。カメラ制御部１４０は、垂直同期信号をタイミング発生器１１２に送信する。これと並行して、カメラ制御部１４０は、露光同期信号を生成する。カメラ制御部１４０は、生成した露光同期信号を、ボディマウント１５０及びレンズマウント２５０を介して、レンズ制御部２４０に周期的に送信する。カメラ制御部１４０は、制御動作や画像処理動作の際に、ＤＲＡＭ１４１をワークメモリとして使用する。

画像センサ１１０は、交換レンズ２００を介して入射される被写体像を撮像して画像データを生成する撮像素子の一例である。画像センサ１１０は例えばＣＣＤ、ＣＭＯＳイメージセンサまたはＮＭＯＳイメージセンサである。生成された画像データは、ＡＤコンバータ１１１でデジタル化される。デジタル化された画像データは、カメラ制御部１４０により所定の画像処理が施される。所定の画像処理とは、例えば、ガンマ補正処理、ホワイトバランス補正処理、キズ補正処理、ＹＣ変換処理、電子ズーム処理、ＪＰＥＧ圧縮処理である。

画像センサ１１０は、タイミング発生器１１２により制御されるタイミングで動作する。画像センサ１１０は、記録用の静止画像もしくは動画像または、スルー画像（即ちライブビュー画像）を生成する。スルー画像は、主に動画像であり、ユーザが静止画像の撮像のための構図を決めるために液晶モニタ１２０に表示される。

液晶モニタ１２０はスルー画像等の画像およびメニュー画面等の種々の情報を表示する。液晶モニタ１２０は、本実施形態における表示部の一例である。液晶モニタに代えて、他の種類の表示デバイス、例えば、有機ＥＬディスプレイデバイスを使用してもよい。

操作部１３０は、撮影開始を指示するためのレリーズ釦、撮影モードを設定するためのモードダイアル、及び電源スイッチ等の種々の操作部材を含む。操作部１３０は、液晶モニタ１２０に重畳して配置されたタッチパネルも含む。

カードスロット１７０は、メモリカード１７１を装着可能であり、カメラ制御部１４０からの制御に基づいてメモリカード１７１を制御する。デジタルカメラ１は、メモリカード１７１に対して画像データを格納したり、メモリカード１７１から画像データを読み出したりすることができる。

ボディマウント１５０は、交換レンズ２００のレンズマウント２５０と機械的及び電気的に接続可能である。ボディマウント１５０は、レンズマウント２５０を介して、交換レンズ２００との間で、データを送受信可能なカメラ本体１００側の通信部の一例である。ボディマウント１５０は、カメラ制御部１４０から受信した露光同期信号を、レンズマウント２５０を介してレンズ制御部２４０に送信する。また、カメラ制御部１４０から受信したその他の制御信号を、レンズマウント２５０を介してレンズ制御部２４０に送信する。また、ボディマウント１５０は、レンズマウント２５０を介してレンズ制御部２４０から受信した信号をカメラ制御部１４０に送信する。

また、カメラ本体１００は、ＢＩＳ機能を実現する構成として、カメラ本体１００のぶれを検出するジャイロセンサ１８４（ぶれ検出部）と、ジャイロセンサ１８４の検出結果に基づきぶれ補正処理を制御するＢＩＳ処理部１８３とをさらに備える。さらに、カメラ本体１００は、画像センサ１１０を移動させるセンサ駆動部１８１と、画像センサ１１０の位置を検出する位置センサ１８２とを備える。

センサ駆動部１８１は、例えば、マグネットと平板コイルとで実現可能である。センサ駆動部１８１は、その他のモータ又はアクチュエータ等を含んでもよい。位置センサ１８２は、光学系の光軸に垂直な面内における画像センサ１１０の位置を検出するセンサである。位置センサ１８２は、例えば、マグネットとホール素子で実現可能である。

ＢＩＳ処理部１８３は、ジャイロセンサ１８４からの信号及び位置センサ１８２からの信号に基づき、センサ駆動部１８１を制御して、カメラ本体１００のぶれを相殺するように画像センサ１１０を光軸に垂直な面内にシフトさせる。

１－２．交換レンズ
交換レンズ２００は、光学系と、レンズ制御部２４０と、レンズマウント２５０とを備える。光学系は、ズームレンズ２１０と、ＯＩＳ(Optical Image Stabilizer)レンズ２２０と、フォーカスレンズ２３０と、絞り２６０とを含む。

ズームレンズ２１０は、光学系で形成される被写体像の倍率を変化させるためのレンズである。ズームレンズ２１０は、１枚又は複数枚のレンズで構成される。ズームレンズ２１０は、ズーム駆動部２１１により駆動される。ズーム駆動部２１１は、ユーザが操作可能なズームリングを含む。または、ズーム駆動部２１１は、ズームレバー及びアクチュエータまたはモータを含んでもよい。ズーム駆動部２１１は、ユーザによる操作に応じてズームレンズ２１０を光学系の光軸方向に沿って移動させる。

フォーカスレンズ２３０は、光学系で画像センサ１１０上に形成される被写体像のフォーカス状態を変化させるためのレンズである。フォーカスレンズ２３０は、１枚又は複数枚のレンズで構成される。フォーカスレンズ２３０は、フォーカス駆動部２３３により駆動される。

フォーカス駆動部２３３はアクチュエータまたはモータを含み、レンズ制御部２４０の制御に基づいてフォーカスレンズ２３０を光学系の光軸に沿って移動させる。フォーカス駆動部２３３は、ＤＣモータ、ステッピングモータ、サーボモータ、または超音波モータなどで実現できる。

ＯＩＳレンズ２２０は、ＯＩＳ機能において、交換レンズ２００の光学系で形成される被写体像のぶれを補正するためのレンズ即ち補正レンズの一例である。ＯＩＳレンズ２２０は、デジタルカメラ１のぶれを相殺する方向に移動することにより、画像センサ１１０上の被写体像のぶれを小さくする。ＯＩＳレンズ２２０は１枚又は複数枚のレンズで構成される。ＯＩＳレンズ２２０はＯＩＳ駆動部２２１により駆動される。

ＯＩＳ駆動部２２１は、ＯＩＳ処理部２２３からの制御を受けて、光学系の光軸に垂直な面内でＯＩＳレンズ２２０をシフトする。ＯＩＳ駆動部２２１は、例えば、マグネットと平板コイルとで実現可能である。位置センサ２２２は、光学系の光軸に垂直な面内におけるＯＩＳレンズ２２０の位置を検出するセンサである。位置センサ２２２は、例えば、マグネットとホール素子で実現可能である。ＯＩＳ処理部２２３は、位置センサ２２２の出力及びジャイロセンサ２２４（ぶれ検出部）の出力に基づいてＯＩＳ駆動部２２１を制御する。

レンズマウント２５０は、ボディマウント１５０を介して、カメラ本体１００との間で、データを送受信可能な交換レンズ２００側の通信部の一例である。

絞り２６０は画像センサ１１０に入射される光の量を調整する。絞り２６０は、絞り駆動部２６２により駆動され、その開口の大きさが制御される。絞り駆動部２６２はモータまたはアクチュエータを含む。

ジャイロセンサ１８４または２２４は、デジタルカメラ１の単位時間あたりの角度変化すなわち角速度に基づいて、例えばヨー方向、ピッチ方向及びロール方向のうちの１つ以上のぶれ（振動）を検出する。ジャイロセンサ１８４または２２４は、検出したぶれの量（角速度）を示す角速度信号をＢＩＳ処理部１８３またはＯＩＳ処理部２２３に出力する。ジャイロセンサ１８４または２２４によって出力された角速度信号は、手ぶれやメカノイズ等に起因した幅広い周波数成分を含み得る。ジャイロセンサに代えて、デジタルカメラ１のぶれを検出できる他のセンサを使用することもできる。

カメラ制御部１４０及びレンズ制御部２４０は、ハードワイヤードな電子回路で構成してもよいし、プログラムを用いたマイクロコンピュータなどで構成してもよい。例えば、カメラ制御部１４０及びレンズ制御部２４０は、ＣＰＵ、ＭＰＵ、ＧＰＵ、ＤＳＵ、ＦＰＧＡまたはＡＳＩＣ等の各種プロセッサで実現できる。

１－３．ＢＩＳ処理部
図２を用いて、カメラ本体１００におけるＢＩＳ処理部１８３の構成を説明する。ＢＩＳ処理部１８３は、ＡＤＣ（アナログ／デジタル変換部）／ＬＰＦ（ロー・パス・フィルタ）４０５と、ＨＰＦ（ハイ・パス・フィルタ）４０６と、位相補償部４０７と、積分器４０８と、ＰＩＤ制御部４１０とを含む。

ＡＤＣ／ＬＰＦ４０５は、ジャイロセンサ１８４からの角速度信号をアナログ形式からデジタル形式へ変換する。さらに、ＡＤＣ／ＬＰＦ４０５は、ノイズを排除してデジタルカメラ１のぶれのみを抽出するために、デジタル形式に変換された角速度信号の高周波成分を遮断する。撮影者の手ぶれの周波数が１～１０Ｈｚ程度の低周波であり、この点を考慮してＬＰＦのカットオフ周波数が設定される。ノイズが問題とならない場合はＬＰＦの機能を省略することができる。

ＨＰＦ４０６は、ドリフト成分を遮断するため、ＡＤＣ／ＬＰＦ４０５から受信した信号に含まれる所定の低周波成分を遮断する。

位相補償部４０７は、ＨＰＦ４０６から受信した信号に対して、センサ駆動部１８１などに起因する位相遅れを補正する。

積分器４０８は、位相補償部４０７から入力したぶれ（振動）の角速度を示す信号を積分して、ぶれ（振動）の角度を示す信号（以下「ぶれ検出信号」という）を生成する。積分器４０８からのぶれ検出信号はＰＩＤ制御部４１０に入力される。

ＰＩＤ制御部４１０は、位置センサ１８２からの出力と、積分器４０８からの出力とに基づいて、画像センサ１１０をシフトさせるための駆動信号を生成してセンサ駆動部１８１へ出力する。センサ駆動部１８１は駆動信号に基づいて画像センサ１１０を駆動する。

ＢＩＳ処理部１８３は、カメラ制御部１４０とデータ通信可能に構成される。例えばＢＩＳ処理部１８３は、カメラ制御部１４０からの制御信号に応じて、手ぶれ補正動作の開始／終了を行う。また、ＢＩＳ処理部１８３は、手ぶれ補正動作に関する各種情報をカメラ制御部１４０に送信する。

ＯＩＳ処理部２２３は、上記のようなＢＩＳ処理部１８３と同様の構成において、例えばセンサ駆動部１８１の代わりにＯＩＳ駆動部２２１を駆動するように構成できる。また、ＯＩＳ処理部２２３は、例えばカメラ本体１００中のジャイロセンサ１８４の代わりに交換レンズ２００中のジャイロセンサ２２４の検出結果を用いて動作する。

２．動作
以上のように構成されるデジタルカメラ１の動作について説明する。

本実施形態のデジタルカメラ１は、ユーザに把持された状態において撮像を複数回行って、得られた複数の撮像画像を合成することにより、高解像度の合成画像を生成する動作モードを有する（以下「手持ちハイレゾ撮影モード」という）。デジタルカメラ１は、例えば設定メニュー等の操作部１３０のユーザ操作により、手持ちハイレゾ撮影モードに設定できる。

手持ちハイレゾ撮影モードでは、ユーザがデジタルカメラ１を把持した状態において複数回の撮像中に生じる手ぶれを利用して、１／２画素単位の位置ずれを持たせた複数の撮像画像から合成画像が生成される。この際、手ぶれが過剰に生じると、合成画像の画角が低減されたり、ひいては画像合成が失敗したりする事態が考えられる。そこで、本実施形態のデジタルカメラ１は、手持ちハイレゾ撮影モードにおける複数回の撮像中に、手ぶれの状態をユーザに可視化して、ユーザが手ぶれを抑制し易くする。本実施形態におけるデジタルカメラ１の動作の詳細を以下説明する。

２－１．手持ちハイレゾ撮影動作
本実施形態のデジタルカメラ１における手持ちハイレゾ撮影モードの動作について、図３～４を用いて説明する。

図３は、デジタルカメラ１における手持ちハイレゾ撮影動作を例示するフローチャートである。手持ちハイレゾ撮影動作は、本実施形態における合成画像の撮影動作の一例である。図３のフローチャートに示す処理は、例えば、デジタルカメラ１にライブビュー画像を示すライブビュー画面が表示された状態で開始され、カメラ制御部１４０によって実行される。

まず、カメラ制御部１４０は、例えば操作部１３０におけるユーザ操作に応じて、画像撮影を開始するための指示の入力を受け付ける（Ｓ１）。ユーザは、例えば操作部１３０におけるレリーズ釦の押下操作により、撮影指示を入力できる。

カメラ制御部１４０は、撮影指示が入力されると（Ｓ１でＹＥＳ）、１枚の合成画像を生成するための複数回の撮像を行いながら、例えば液晶モニタ１２０に手ぶれの状態を表示する処理である撮影表示処理を実行する（Ｓ２）。ステップＳ２における表示例を図４に示す。

図４は、本実施形態の撮影表示処理（Ｓ２）において複数回の撮像中における手ぶれ状態を可視化するための画面、すなわち手ぶれ状態画面の表示例を示す。ユーザは、手ぶれ状態画面を視認しながら、ステップＳ２における複数回の撮像が完了するまで、把持したデジタルカメラ１の姿勢を保持することとなる。撮影表示処理（Ｓ２）についての詳細は後述する。

次に、カメラ制御部１４０は、撮影表示処理（Ｓ２）の撮影結果として得られた複数の撮像画像の画像データに基づいて、合成画像を示す画像データを生成するハイレゾ合成処理を行う（Ｓ３）。ハイレゾ合成処理（Ｓ３）では、例えば１／２画素程度の位置ずれを有する複数枚の撮像画像間で、同じ被写体像が写る部分のデータに基づいて、合成画像の画素数が元の撮像画像の１枚あたりよりも多い高解像度の画像データが生成される。ハイレゾ合成処理（Ｓ３）の詳細については後述する。

カメラ制御部１４０は、例えばハイレゾ合成処理（Ｓ３）による合成画像の画像データをメモリカード１７１に記録して、本フローチャートに示す処理を終了する。

以上の手持ちハイレゾ撮影動作によると、デジタルカメラ１は、撮影表示処理（Ｓ２）中の手ぶれに応じて互いにずれて撮影される複数の撮像画像に基づいて、ハイレゾ合成処理（Ｓ３）を行って高解像度の合成画像を生成する。

ハイレゾ合成処理（Ｓ３）において、要求される複数の撮像画像間の位置ずれは、ユーザがデジタルカメラ１を把持していれば意図せずとも生じ得る程度の小ささと考えられる。一方、過剰な手ぶれにより複数の撮像画像間の位置ずれが大きくなり過ぎると、合成画像の画角が低減してしまう。

そこで、本実施形態のデジタルカメラ１は、合成前の撮像中に、例えば図４に示すように手ぶれ状態画面を表示して（Ｓ２）、ユーザが手ぶれを抑制することを補助する。

図４の例において、手ぶれ状態画面は、プレビュー画像２０と、プレビュー画像２０上に重畳表示されるスコープ部３０と、プロット表示される複数の手ぶれポインタ４０とを含む。プレビュー画像２０は、例えば撮影表示処理（Ｓ２）の開始直前のライブビュー画像である。スコープ部３０は、手持ちハイレゾ撮影モードの動作時における手ぶれ状態の許容範囲を示す基準領域の一例である。

各手ぶれポインタ４０は、それぞれ撮影表示処理（Ｓ２）における１つの撮像画像の手ぶれ状態を示し、各回の撮像における手ぶれ量に応じてプロットされる。図４の例において、各手ぶれポインタ４０は、それぞれ撮像された順番を示す番号を表示している。又、手ぶれポインタ４０の形状は、例えば丸状である。

ユーザは、例えば手ぶれ状態画面においてスコープ部３０に対して手ぶれポインタ４０が表示された位置に応じて、撮影画像の手ぶれ状態を認識できる。図４の例では、スコープ部３０が、同心円状に配置された２つの領域３１，３２を含む。

図４に例示するスコープ部３０において、内側の領域３１は、例えば合成画像の画質（或いは画角）が確保可能な手ぶれ量の許容範囲を示し、例えばハイレゾ合成処理（Ｓ３）におけるマージンの画素数に応じて設定される。外側の領域３２は、例えば合成画像の画質が低減されるもののハイレゾ合成処理（Ｓ３）が実行可能な手ぶれ量の許容範囲を示し、例えば上記マージンよりも多い所定の画素数（許容値）に応じて設定される。また、本例では、スコープ部３０は、手ぶれの方向の基準として十字線を領域３１に付して表示している。

２－２．撮影表示処理
本実施形態の手持ちハイレゾ撮影動作における撮影表示処理（図３のＳ２）の詳細を、図５～７を用いて説明する。

図５は、本実施形態に係るデジタルカメラ１の撮影表示処理を例示するフローチャートである。図６は、本実施形態の撮影表示処理を説明するための図である。図５のフローチャートに示す処理は、例えば手持ちハイレゾ撮影モードにおいて撮影指示が入力されたとき（図３のＳ１でＹＥＳ）に開始される。

まず、カメラ制御部１４０は、例えばライブビュー画面から手ぶれ状態画面に遷移するように液晶モニタ１２０を制御する（Ｓ１０）。例えば、カメラ制御部１４０は、手ぶれ状態画面の初期画面として、ステップＳ２直前のライブビュー画像に基づくプレビュー画像２０に、スコープ部３０を重畳表示させる（図６（Ａ）参照）。例えば、ステップＳ１０の時点では、手ぶれポインタ４０は特に表示されない。

又、カメラ制御部１４０は、例えばＢＩＳ処理部１８３による手ぶれ補正動作を開始させる（Ｓ１１）。例えば、ＢＩＳ処理部１８３（図２）は、ジャイロセンサ１８４からの信号を入力して、積分器４０８等によるぶれ検出信号を生成し始める。ＢＩＳ処理部１８３において、ＰＩＤ制御部４１０は、生成されたぶれ検出信号に応じてセンサ駆動部１８１を制御し、画像センサ１１０の位置を逐次シフトさせる。

次に、カメラ制御部１４０は、画像センサ１１０において１回の撮像のための露光を開始する（Ｓ１２）。画像センサ１１０は、予め設定された露光期間だけ入射する光を露光する。露光期間中に、ＢＩＳ処理部１８３による手ぶれ補正動作は刻々と行われる。

この際、カメラ制御部１４０は、例えばＢＩＳ処理部１８３から撮像１回あたりの手ぶれ状態に対応した手ぶれ情報を取得する（Ｓ１３）。手ぶれ情報は、例えば露光期間の開始タイミング等における手ぶれ量において、ＢＩＳ処理部１８３の手ぶれ補正動作により補正された分を除いた残り分の手ぶれ量を示す。

例えば、ＢＩＳ処理部１８３において、ジャイロセンサ１８４によって検出された角速度の積分から補正前の手ぶれ量が算出される。また、位置センサ１８２によって検出された画像センサ１１０の変位またはＰＩＤ制御部４１０によるセンサ駆動部１８１の駆動量等から、実施済みの手ぶれ補正量が得られる。カメラ制御部１４０は、こうした補正前の手ぶれ量から手ぶれ補正量を減算した演算結果を、手ぶれ情報として取得する（Ｓ１３）。

次に、カメラ制御部１４０は、例えば取得した手ぶれ情報に基づいて、液晶モニタ１２０に表示中の手ぶれ状態画面に追加で、１回分の撮像の手ぶれ状態を示す情報としての手ぶれポインタ４０をプロット表示する（Ｓ１４）。ステップＳ１４における表示の一例を図６（Ａ）に示す。ここで、表示する情報は、手ぶれ情報としたが、手ぶれ量を用いてもよく、以降の処理を手ぶれ量で行ってもよい。

図６（Ａ）は、１回目のステップＳ１４における手ぶれ状態画面の表示例を示す。カメラ制御部１４０は、例えば、１回目の撮像の手ぶれ情報を取得すると（Ｓ１３）、手ぶれ状態画面におけるスコープ部３０の中央等の基準位置に手ぶれポインタ４０を表示させる（Ｓ１４）。この際、例えば取得された手ぶれ情報が示す手ぶれ量の分だけプレビュー画像２０がシフトされてもよい。

カメラ制御部１４０は、例えば、１回の撮像分の露光を完了する（Ｓ１５）と、撮像を行った回数が所定回数に到ったか否かを判断する（Ｓ１６）。所定回数は、ハイレゾ合成処理（Ｓ３）で画像合成の対象とする撮像画像の枚数以上の回数に予め設定され、例えば１６回に設定される。

撮像回数が所定回数に到っていない場合（Ｓ１６でＮＯ）、カメラ制御部１４０は、例えばＢＩＳ処理部１８３を、手ぶれ補正動作を継続するように駆動制御して（Ｓ１７）、ステップＳ１２以降の処理を再び実行する。ステップＳ１２～Ｓ１５の繰り返しにより、複数回の撮像が行われると共に、手ぶれ状態画面のプロット表示が順次、更新される（Ｓ１４）。２回目の撮像におけるステップＳ１４の表示例を図６（Ｂ）に示す。

図６（Ｂ）では、図６（Ａ）の状態から更新された手ぶれ状態画面を例示する。例えば２回目のステップＳ１２～Ｓ１５において、カメラ制御部１４０は、手ぶれ状態画面上で１回目の手ぶれポインタ４０の位置を基準として、ステップＳ１３で取得した手ぶれ情報が示す手ぶれ量の分だけシフトした位置に、新たな手ぶれポインタ４０をプロットする（Ｓ１４）。この際、例えばプレビュー画像２０等は、特に手ぶれ量と連動せずに固定される。ユーザは、２回目の手ぶれポインタ４０がプロットされた位置が、１回目の手ぶれポインタ４０からずれた分だけ手ぶれが生じたことを把握できる。

その後の各回の撮像時も上記と同様に、カメラ制御部１４０は、基準の手ぶれポインタ４０から手ぶれ量が生じた分だけシフトした位置に新たな手ぶれポインタ４０をプロットするように逐次、手ぶれ状態画面を更新して表示させる（Ｓ１４）。これにより、手ぶれ状態画面において、各回の撮像時における手ぶれ状態が可視化された手ぶれポインタ４０のプロットが得られる（図４参照）。

撮像回数が所定回数に到ると（Ｓ１６でＹＥＳ）、カメラ制御部１４０は、例えば液晶モニタ１２０の画面表示を手ぶれ状態画面からライブビュー画面に戻して、撮影表示処理（図３のＳ２）を終了する。その後、カメラ制御部１４０は、撮影表示処理による撮像結果の画像データに基づいて、ハイレゾ合成処理（Ｓ３）を実行する。

以上の撮影表示処理（Ｓ２）によると、手持ちハイレゾ撮影動作において、合成画像を生成するための撮像を所定回数だけ実行する間に、手ぶれ状態画面において各回の撮像時における手ぶれ状態を示す手ぶれポインタ４０が逐次、プロット表示される（Ｓ１４）。

図６（Ｂ）では、２回目の撮像時の手ぶれ量が、スコープ部３０の内側の領域３１に対応するマージンを超えた場合を例示する。ユーザは、手ぶれ状態画面における手ぶれポインタ４０のプロットを視認することにより、直近の撮像画像が初回の撮像画像からずれた手ぶれ状態を容易に把握することができる。図４は、図６（Ｂ）の手ぶれポインタ４０を見たユーザが、その後に領域３１内に手ぶれポインタ４０が収まるように意識して手ぶれを抑制した場合を例示する。

上記のように、初回の撮像時から大幅な手ぶれを有する撮像画像が生じた場合であっても、ユーザはその手ぶれ状態を手ぶれポインタ４０で視認して、その後の撮像時に手ぶれを改善する方向性を容易に把握できる。このように、本実施形態の撮影表示処理（Ｓ２）における手ぶれ状態画面によると、ユーザが複数の撮像画像間における相対的な手ぶれを低減し易くでき、その結果、合成画像の画質を向上できる。

こうした手ぶれ状態画面においては、例えば複数回の撮像における各回の露光期間中に刻々と変化する手ぶれ状態を、手ぶれポインタ４０の軌跡として全て描画する表示も考えられる。しかし、この場合には、手ぶれ状態画面の表示が過度に煩雑となり、却ってユーザが手ぶれ状態を把握し難くなる事態が懸念される。これに対して、本実施形態の撮影表示処理（Ｓ２）によると、撮像毎に手ぶれポインタ４０がプロットされる間欠的な表示により（図４参照）、手持ちハイレゾ撮影モードのような撮像が複数回行われる際の手ぶれ状態を、ユーザが把握し易くすることができる。

上記のステップＳ１３において、取得される露光期間の開始タイミングに基づく手ぶれ情報が取得される例を説明した。手ぶれ情報はこれに限らず、露光期間の途中または完了タイミングに基づいてもよいし、露光期間中の複数のタイミングの手ぶれ量における各種の平均値を用いてもよい。

上記のステップＳ１４において、例えば手ぶれポインタ４０のプロット表示に加えて、手ぶれ状態に関するメッセージが手ぶれ状態画面に表示されてもよい。こうした変形例について、図７を用いて説明する。

図７では、図６（Ｂ）の後の撮像時において、手ぶれ量がスコープ部３０の外側の領域３２に対応する許容値を超えた場合の手ぶれ状態画面の表示例を示す。本変形例のカメラ制御部１４０は、ステップＳ１３で取得した手ぶれ情報が示す手ぶれ量が許容値を超えるか否かを判定してもよい。手ぶれ量が許容値を超える場合、本変形邸のカメラ制御部１４０は、ステップＳ１４において手ぶれポインタ４０のプロットと共に、図７に例示するように、過度な手ぶれ状態により画像合成が失敗する可能性を警告するメッセージ２１を表示させてもよい。

こうしたメッセージ表示によっても、ユーザは、画像合成のための複数回の撮像時における手ぶれ状態を把握し易くできる。また、図７の例と同様に、スコープ部３０の内側の領域３１を超える場合にも、デジタルカメラ１は、注意喚起などのメッセージを表示してもよい。

２－３．ハイレゾ合成処理
本実施形態におけるハイレゾ合成処理（図３のＳ３）の詳細を、図８～１０を用いて説明する。

図８は、本実施形態に係るデジタルカメラ１のハイレゾ合成処理を例示するフローチャートである。図８のフローチャートに示す処理は、例えば手持ちハイレゾ撮影動作において撮影表示処理（図３のＳ２）が完了した状態で開始される。

まず、カメラ制御部１４０は、撮影表示処理（図３のＳ２）の撮影結果に基づいて、例えば、得られた複数枚（例えば１６枚）の撮像画像の中から、合成対象として８枚の撮像画像を選出する（Ｓ２１）。ステップＳ２１の処理について、図９を用いて説明する。

図９は、ハイレゾ合成処理における合成対象の画像間の位置関係（Ｐ１～Ｐ８）を説明した図である。図９では、撮像画像の画像データにおける各色の画素５ｒ，５ｇ，５ｂの配置を例示する。赤画素５ｒ、緑画素５ｇ及び青画素５ｂは、ベイヤー配列の２次元アレイ状に配置され、画素ピッチＷの２倍の周期２Ｗを有する。

図９では、合成対象の撮像画像のうちの基準とする撮像画像（即ち基準画像）における或る位置Ｐ１（即ち基準位置）と、他の合成対象の撮像画像において基準位置Ｐ１に対応する位置Ｐ２～Ｐ８（即ち対応位置）とを例示する。基準位置Ｐ１と各対応位置Ｐ２～Ｐ８とは、各々の撮像画像において、同じ被写体像の箇所が写る場合に互いに対応付けられる。

基準位置Ｐ１及び対応位置Ｐ２～Ｐ８は、図９に示すように、画素ピッチＷの１／２倍単位で互いにずれた位置関係にある。ここで、例えば１つの対応位置Ｐ２からベイヤー配列の周期２Ｗの整数倍だけ離れた位置Ｐ２ａ，Ｐ２ｂ，Ｐ２ｃに、被写体像の上記箇所が写る場合は、それぞれ撮像画像を周期２Ｗ毎にシフトする画像データの処理によって、対応位置Ｐ２の場合と同一視できる。

以上のような位置関係（Ｐ１～Ｐ８）に基づいて、カメラ制御部１４０は、例えば１枚目の撮像画像を基準画像として、その基準位置Ｐ１に対して各対応位置Ｐ２～Ｐ８に最も近い位置関係にある撮像画像をそれぞれ選出する（Ｓ２１）。ステップＳ２１の処理には、上述したベイヤー配列の周期２Ｗに基づく同一視が適用される。

例えば、ステップＳ２１においてカメラ制御部１４０は、基準画像と他の各撮像画像を、適宜分割した領域毎に比較して、基準画像に対する各撮像画像の位置ずれを検出し、検出した位置ずれをベイヤー周期２Ｗで除算した剰余の位置ずれを算出する。カメラ制御部１４０は、算出した位置ずれが、基準位置Ｐ１と各対応位置Ｐ２～Ｐ８間の位置ずれに最も近い撮像画像をそれぞれ合成対象として選出する。

次に、カメラ制御部１４０は、例えば選出した撮像画像の画像データ間の位置ずれが、予め設定された許容値の範囲内であるか否かを判断する（Ｓ２２）。ステップＳ２２では、例えばステップＳ２１で用いた周期２Ｗの剰余の位置ずれではなく、周期２Ｗ毎のシフトまで含めた位置ずれが判断対象となる。

カメラ制御部１４０は、選出した撮像画像間の位置ずれが、許容値の範囲内であると判断すると（Ｓ２２でＹＥＳ）、選出した８枚の撮像画像を合成する処理を実行する（Ｓ２３）。ステップＳ２２の処理について、図１０を用いて説明する。

図１０は、ハイレゾ合成処理における画像合成を説明するための図である。図１０（Ａ）は、合成対象の撮像画像の画像データ５０を例示する。図１０（Ｂ）は、図１０（Ａ）の画像データ５０に基づく色別の合成データ６ｒ，６ｇ，６ｂを例示する。図１０（Ｃ）は、図１０（Ｂ）の合成データ６ｒ，６ｂに対する補完データ６ｒａ，６ｂａを例示する。図１０（Ｄ）は、図１０（Ｂ），（Ｃ）の各データ６ｒａ，６ｇ，６ｂａに基づく合成画像の画像データ６０を例示する。

例えばステップＳ２３において、カメラ制御部１４０は、まず、図１０（Ａ），（Ｂ）に示すように合成対象の画像データ５０から色別の合成データ６ｒ，６ｇ，６ｂを生成する。各色の合成データ６ｒ，６ｇ，６ｂは、例えば合成対象の各画像データ５０における赤画素５ｒ、緑画素５ｇ及び青画素５ｂ（図９参照）について、上述した位置関係（Ｐ１～Ｐ８）に応じて、各々の画素値を色別に配列して生成される。この際、同じ位置の画素値がある場合には、例えば平均値が用いられる。

上記のように得られる各色の合成データ６ｒ，６ｇ，６ｂは、例えば図１０（Ｂ）に示すように、千鳥格子状の配列となる。このため、緑色の合成データ６ｇは、ベイヤー配列と整合するが、赤色および青色の合成データ６ｒ，６ｂは、ベイヤー配列からずれることとなる。そこで、カメラ制御部１４０は、赤色および青色の合成データ６ｒ，６ｂについて、例えば互いに隣接する画素値に基づき、それぞれベイヤー配列に対応する位置の画素値を補完演算して、図１０（Ｃ）に例示するように赤色および青色の補完データ６ｒａ，６ｂａを生成する。

さらに、カメラ制御部１４０は、図１０（Ｂ）～（Ｄ）に例示するように、赤色および青色の補完データ６ｒａ，６ｂａ、並びに緑色の合成データ６ｇを組み合わせることにより、ベイヤー配列の合成画像を示す画像データ６０を生成する（Ｓ２３）。ステップＳ２３において、カメラ制御部１４０は、ＲＡＷ形式としてベイヤー配列の画像データ６０を処理結果として出力してもよいし、ベイヤー配列の画像データ６０を適宜、ＪＰＥＧ形式などの画像データに変換してもよい。

カメラ制御部１４０は、合成画像の画像データの生成（Ｓ２３）後に、本フローチャートに示す処理を終了する。

一方、カメラ制御部１４０は、例えば選出した撮像画像間の位置ずれが許容値の範囲内でないと判断すると（Ｓ２２でＮＯ）、画像合成の処理（Ｓ２３）を実行しない。この場合、カメラ制御部１４０は、例えば液晶モニタ１２０にハイレゾ合成処理が失敗したことを示すエラーのメッセージ等を表示させて（Ｓ２４）、本フローの処理を終了する。

以上のハイレゾ合成処理（図３のＳ３）によると、複数の撮像画像間の位置ずれが許容値の範囲内であれば（Ｓ２２でＹＥＳ）、合成画像を生成することができる。また、複数の撮像画像における手ぶれが小さいほど、高品位の合成画像を得ることができる。

上記のステップＳ２１では、合成対象の画像データが、撮影表示処理（Ｓ２）の撮影結果から選出される例を説明した。ステップＳ２１の処理は、特に上記に限らず、例えば、撮影表示処理（Ｓ２）の撮影結果の画像データから合成対象の画像データが生成されてもよい。例えば、カメラ制御部１４０は、上述した合成対象の位置関係（図９のＰ１～Ｐ８）に従い、撮影表示処理（Ｓ２）における複数の撮像画像間の重み付け平均等により補間処理を行って、各対応位置Ｐ２～Ｐ８に応じた合成対象の画像データを生成してもよい。

ステップＳ２１において、カメラ制御部１４０は適宜、検出される基準画像からの位置ずれに応じて、撮像画像をシフトまたは回転するように画像データの処理を行ってもよい。また、基準画像は、必ずしも１枚目の撮像画像に限らず、２枚目以降の撮像画像から選出されてもよいし、補間処理等により生成されてもよい。また、ステップＳ２１の処理においては、位置ずれが許容値の範囲内の撮像画像が適宜、優先して用いられてもよい。

３．まとめ
以上のように、本実施形態における撮像装置の一例のデジタルカメラ１は、撮像素子の一例である画像センサ１１０と、制御部の一例であるカメラ制御部１４０と、ぶれ検出部の一例であるジャイロセンサ１８４と、表示部の一例である液晶モニタ１２０とを備える。画像センサ１１０は、被写体像を撮像して、画像データを生成する。カメラ制御部１４０は、撮像素子による複数回の撮像結果の画像データに基づいて、複数の撮像画像を合成した合成画像を示す画像データを生成する撮影動作を制御する。ジャイロセンサ１８４は、デジタルカメラ１のぶれの状態を検出する。液晶モニタ１２０は、情報を表示する。カメラ制御部１４０は、手持ちハイレゾ撮影動作などの合成画像の撮影動作において、画像センサ１１０による複数回の撮像時に、ジャイロセンサ１８４によって検出された複数のぶれ状態を含むぶれ状態情報の一例として手ぶれ状態画面を表示するように液晶モニタ１２０を制御する（図４参照）。

以上のデジタルカメラ１によると、手ぶれ状態画面において複数回の撮像時における手ぶれ状態がユーザに可視化されることにより、手ぶれが生じる状況であっても合成画像の撮影を行い易くすることができる

本実施形態において、カメラ制御部１４０は、手ぶれ状態画面において、複数回の撮像のうちの各回の撮像時のぶれ状態を、別個に表示するように液晶モニタ１２０を制御する（Ｓ１２～Ｓ１６、図６参照）。これにより、ユーザにとって手ぶれ状態画面において各回の撮像時のぶれ状態を把握することを容易化できる。よって、ユーザが手ぶれを抑制し易くして、合成画像の撮影を行いやすくできる。

本実施形態において、手ぶれ状態画面は、複数回の撮像における各回の撮像時のぶれ状態に応じて配置されるポインタの一例である手ぶれポインタ４０を含む。手ぶれポインタ４０によると、簡潔な表示によりユーザが各回の撮像時のぶれ状態を把握し易くでき、合成画像の撮影を行いやすくできる。

本実施形態において、手ぶれ状態画面は、ぶれ状態の基準を示す基準領域の一例のスコープ部３０をさらに含む。カメラ制御部１４０は、複数回の撮像における各回の撮像時のぶれ状態に応じて、スコープ部３０において手ぶれポインタ４０をプロットするように液晶モニタ１２０に手ぶれ状態画面を表示させる（Ｓ１２～Ｓ１６、図６参照）。このように、合成画像の撮影動作中に順次、プロット表示される手ぶれポインタ４０により、ユーザは実行中の撮影動作における手ぶれ状態を把握し易くできる。

なお、以上のように表示の対象となる各回の撮像時のぶれ状態は、合成画像の撮像操作における毎回の撮像時のぶれ状態でなくてもよく、全ての回の撮像時のうちの一部の回を省略してもよいし、所定回数分を纏めてもよい。

本実施形態において、手ぶれ状態画面は、合成画像の撮影動作前に撮像されたプレビュー画像２０を含む。カメラ制御部１４０は、合成画像の撮影動作において、例えば初回の撮像時に、ぶれ状態に応じてプレビュー画像２０を移動させるように液晶モニタ１２０を制御してもよい。プレビュー画像２０の移動によっても、ユーザは手ぶれ状態を把握できる。

本実施形態において、カメラ制御部１４０は、複数回の撮像結果の画像データに基づいて、互いに位置ずれを有する複数の撮像画像を合成して、合成画像を示す画像データを生成する（Ｓ３）。これにより、例えば高解像度の合成画像など、１枚の撮像画像よりも高精細な合成画像を得られる。こうした適度な位置ずれを持たせた複数の撮像画像を得る際に、手ぶれ状態画面をユーザに見せることで、適度な手ぶれを得やすくできる。

本実施形態において、デジタルカメラ１は、像ぶれ補正部の一例のＢＩＳ処理部１８３及びセンサ駆動部１８１を備える。カメラ制御部１４０は、像ぶれ補正部による補正後のぶれ状態を示す手ぶれ情報を取得して、取得したぶれ状態に応じて手ぶれ状態画面を液晶モニタ１２０に表示させる（Ｓ１３～Ｓ１４）。こうしたＢＩＳ機能を用いる際も、手ぶれ状態画面は有用である。

（実施形態２）
以下、図１１～１２を参照して、本開示の実施形態２を説明する。実施形態１では、手ぶれ状態画面において複数回の撮像時の手ぶれ状態をそれぞれ表示するデジタルカメラ１を説明した。実施形態２では、過去の撮像時の手ぶれ状態の表示を適時、消去するデジタルカメラ１について説明する。

以下、実施形態１に係るデジタルカメラ１と同様の構成、動作の説明は適宜、省略して、本実施形態に係るデジタルカメラ１を説明する。

図１１は、実施形態２に係るデジタルカメラ１の撮影表示処理を例示するフローチャートである。本実施形態のデジタルカメラ１において、カメラ制御部１４０は、実施形態１の撮影表示処理（図５）のステップＳ１０～Ｓ１７を行うことに加えて、ステップＳ１４で表示した過去の手ぶれポインタ４０を次第に消去する表示制御を行う（Ｓ１８）。ステップＳ１８の表示制御について、図１２を用いて説明する。

図１２は、実施形態２に係るデジタルカメラの手ぶれ状態画面を例示する。図１２では、本実施形態の撮影表示処理における５回目の撮像時の手ぶれ状態画面の表示例を示す。本例では、液晶モニタ１２０は、カメラ制御部１４０の制御により、手ぶれ状態画面において５回目及び１回目の手ぶれポインタ４０を表示する（Ｓ１４）一方で、過去に表示した２～４回目の手ぶれポインタ４０を表示していない（Ｓ１８）。

例えばカメラ制御部１４０は、撮影表示処理における各回の撮像時（Ｓ１２～Ｓ１８）において、新たな手ぶれポインタ４０を表示させる際（Ｓ１４）、１回目の手ぶれポインタ４０を除き前回の手ぶれポインタ４０のプロット表示を順次、消去させる（Ｓ１８）。こうしたステップＳ１８の表示制御によると、手ぶれ状態画面において手ぶれポインタ４０のプロット表示を簡素化して、ユーザが現在の手ぶれ状態を分かり易くすることができる。この際、１回目の手ぶれポインタ４０の表示を残すことにより、現在の手ぶれ状態が初回の撮影時からどの程度変化したかをユーザに把握させ易くできる。

ステップＳ１８の表示制御は、特に上記に限らず、過去の手ぶれポインタ４０の表示を次第に消去する各種の表示制御であってもよい。例えば、カメラ制御部１４０は、前回の手ぶれポインタ４０のプロット表示を維持してもよく、前回よりも所定回数分、過去の手ぶれポインタ４０のプロット表示を消去してもよい（Ｓ１８）。また、カメラ制御部１４０は、過去の手ぶれポインタ４０であるほど、プロット表示の明度又は彩度といった強調表示の程度を低減したり、プロット表示の透明度を増加させたりする各種フェードアウトの表示制御を行ってもよい。また、１回目の手ぶれポインタ４０の表示は、必ずしも残さなくてもよく、適宜消去されてもよい。

以上のように、本実施形態において、カメラ制御部１４０は、合成画像の撮影動作中に、表示された手ぶれ状態画面に含まれるぶれ状態において過去のぶれ状態を次第に消去するように、液晶モニタ１２０を制御する（Ｓ１８）。これにより、手ぶれ状態画面の表示を簡素化して、ユーザが手ぶれ状態の把握をより行い易くすることができる。

（他の実施形態）
以上のように、本出願において開示する技術の例示として、実施形態１～２を説明した。しかしながら、本開示における技術は、これに限定されず、適宜、変更、置換、付加、省略などを行った実施の形態にも適用可能である。また、上記実施形態１～２で説明した各構成要素を組み合わせて、新たな実施の形態とすることも可能である。そこで、以下、他の実施形態を例示する。

上記の実施形態１～２では、それぞれ手ぶれ状態画面を例示したが、手ぶれ状態画面はこれに限定されない。手ぶれ状態画面の変形例について図１３～１６を用いて説明する。

図１３は、デジタルカメラ１の手ぶれ状態画面の変形例１を示す。上記の各実施形態では、プレビュー画像２０を含む手ぶれ状態画面を例示した。本実施形態において、手ぶれ状態画面は、例えば図１３に示すように、プレビュー画像２０を含まなくてもよい。このように、プレビュー画像２０が表示されない手ぶれ状態画面によっても、複数回の撮像時に手ぶれポインタ４０の表示が順次更新されることで、上記各実施形態と同様に、ユーザが手ぶれ状態を把握し易くすることができる。

図１４は、デジタルカメラ１の手ぶれ状態画面の変形例２を示す。本実施形態において、手ぶれ状態画面には、手ぶれポインタ４１が、撮像中の手ぶれ状態に応じて移動するように表示されてもよい。また、本実施形態の手ぶれ状態画面には、例えば１回の撮像中に動く手ぶれポインタ４１の軌跡４５が表示されてもよい。例えば、カメラ制御部１４０は、各回の撮像中（Ｓ１２～Ｓ１５）に逐次、手ぶれ情報を取得して、手ぶれ情報の変化に追従して手ぶれポインタ４０の表示位置を変更し、軌跡４５を描画させる。例えば１回の撮像を完了する毎に、カメラ制御部１４０は手ぶれポインタ４０をプロットし、完了した撮像分の軌跡４５を消去する。

以上のように、本実施形態において、カメラ制御部１４０は、合成画像の撮影動作における１回の撮像中のぶれ状態に応じて、手ぶれ状態画面のスコープ部３０上で手ぶれポインタ４０を移動させてもよい。こうした手ぶれ状態画面の表示によっても、ユーザが手ぶれ状態を把握し易くできる。

図１５は、デジタルカメラ１の手ぶれ状態画面の変形例３を示す。本実施形態の手ぶれ状態画面においては、複数回の撮像に対応して複数プロットされた手ぶれポインタ４０の間に、矢印４６等が表示されてもよい。例えば、カメラ制御部１４０は、新たな手ぶれポインタ４０をプロットする際に（Ｓ１４）、前回プロットした手ぶれポインタ４０から今回の手ぶれポインタ４０に向かう矢印４６を表示させてもよい。

図１６（Ａ），（Ｂ）は、デジタルカメラ１の手ぶれ状態画面の変形例４を示す。本実施形態の手ぶれ状態画面においては、複数回の撮像時に順次、プレビュー画像２０が、図１６（Ａ），（Ｂ）に例示するように移動されてもよい。例えば、カメラ制御部１４０は、各回の撮像時に取得される手ぶれ情報（Ｓ１３）に基づき、各回の手ぶれ量の分だけ、手ぶれ状態画面においてプレビュー画像２０を移動させてもよい。この際、新たな手ぶれポインタ４０のプロット表示（Ｓ１４）は、画面中央などの所定位置で行われ、過去にプロットされた手ぶれポインタ４０及びスコープ部３０は、プレビュー画像２０とともに移動されてもよい。

上記の各実施形態では、手ぶれ状態画面におけるスコープ部３０の一例を説明したが、スコープ部３０は特にこれに限定されない。スコープ部３０は、同心円状の２つの領域３１，３２に限らず、３つ以上の領域を含んでもよいし、１つの領域であってもよい。又、スコープ部３０の各領域３１，３２は、特に円状に限らず、矩形状又は各種の形状であってもよい。又、スコープ部３０は、特に十字線に限らない種々の方向基準を表示してもよいし、こうした方向基準を特に表示しなくてもよい。

上記の各実施形態では、手ぶれ状態画面における手ぶれポインタ４０の一例を説明したが、手ぶれポインタ４０は特にこれに限定されない。例えば、本実施形態において、手ぶれポインタ４０の番号は、特に表示されなくてもよい。又、手ぶれポインタ４０の形状は、特に丸形状に限らず、種々の形状であってもよい。例えば、手ぶれポインタ４０がプロットされる向きが、ロール方向の手ぶれに応じて設定されてもよい。

上記の各実施形態では、合成画像の撮影動作の一例として、手持ちハイレゾ撮影動作について説明したが、合成画像の撮影動作は特にこれに限定されない。例えば、本実施形態の合成画像の撮影動作は、１画素単位の位置ずれを有する撮像画像を合成対象とする、所謂リアルレゾリューション撮影動作であってもよい。例えば、図９の基準位置Ｐ１に対して画素ピッチＷ単位でずれた位置関係にある対応位置Ｐ３，Ｐ４，Ｐ５に応じた撮像画像と基準画像を合成対象としてもよい。また、この際の画像合成の処理は、ハイレゾ合成処理（Ｓ３）のように画素数を増やす代わりに、合成画像における各画素に３色の画素値を含めてもよい。こうした場合であっても、ハイレゾ合成処理の場合と同様に、撮影表示処理（Ｓ２）において手ぶれ状態画面により手ぶれを抑制し易くすることで、高品位な合成画像を得ることができる。

また、本実施形態において、合成画像の撮影動作は、位置ずれを有しない撮像画像を合成対象としてもよい。例えば、深度合成またはＨＤＲ（ハイダイナミックレンジ）合成などの画像合成のための撮影動作において、上述した撮影表示処理（Ｓ２）の手ぶれ状態画面が適用されてもよい。

また、上記の各実施形態では、合成画像の撮影動作においてＢＩＳ処理部１８３が手ぶれ補正動作を行う例を説明したが、特にこれに限定されない。例えば、合成画像の撮影動作中に、ＢＩＳ処理部１８３は手ぶれ補正動作を行わなくてもよい。また、手ぶれ補正動作に加えて、又は代えて、ＢＩＳ処理部１８３は、例えばステップＳ１７において１／２画素単位などの所定値だけ画素をずらす動作を行ってもよい。また、ＢＩＳ処理部１８３の動作に代えて、又は加えて、ＯＩＳ処理部２２３が動作してもよい。この場合、カメラ制御部１４０は、ＯＩＳ処理部２２３とのデータ通信により手ぶれ情報を取得してもよい。

また、上記の各実施形態では、表示部の一例として液晶モニタ１２０を例示した。本実施形態において、表示部は上記に限らず、液晶モニタ以外の各種モニタであってもよいし、ＥＶＦなどのビューファインダ又はその他の各種表示デバイスであってもよい。

上記の各実施形態では、撮像装置の一例としてレンズ交換式のデジタルカメラについて説明したが、本実施形態の撮像装置は、特にレンズ交換式ではないデジタルカメラであってもよい。また、本開示の思想は、デジタルカメラのみならず、ムービーカメラであってもよいし、カメラ付きの携帯電話、スマートフォン或いはＰＣのような種々の撮像機能を有する電子機器にも適用可能である。

以上のように、本開示における技術の例示として、実施の形態を説明した。そのために、添付図面および詳細な説明を提供した。

したがって、添付図面および詳細な説明に記載された構成要素の中には、課題解決のために必須な構成要素だけでなく、上記技術を例示するために、課題解決のためには必須でない構成要素も含まれ得る。そのため、それらの必須ではない構成要素が添付図面や詳細な説明に記載されていることをもって、直ちに、それらの必須ではない構成要素が必須であるとの認定をするべきではない。

また、上述の実施の形態は、本開示における技術を例示するためのものであるから、特許請求の範囲またはその均等の範囲において種々の変更、置換、付加、省略などを行うことができる。

本開示の思想は、合成画像の撮影機能を備えた撮像機能を有する電子装置（デジタルカメラやカムコーダ等の撮像装置、携帯電話、スマートフォン等）に適用することができる。

１ デジタルカメラ
１００ カメラ本体
１１０ 画像センサ
１２０ 液晶モニタ
１４０ カメラ制御部
１８３ ＢＩＳ処理部
１８４ ジャイロセンサ

Claims (8)

1. 被写体像を撮像して、画像データを生成する撮像素子と、
   前記撮像素子による複数回の撮像結果の画像データに基づいて、複数の撮像画像を合成した合成画像を示す画像データを生成する撮影動作を制御する制御部と、
   自装置のぶれの状態を検出するぶれ検出部と、
   情報を表示する表示部とを備え、
   前記制御部は、前記合成画像の撮影動作において、前記撮像素子による前記複数回の撮像時に、前記ぶれ検出部によって検出された複数のぶれ状態を含むぶれ状態情報を表示するように前記表示部を制御する
   撮像装置。
2. 前記制御部は、前記ぶれ状態情報において、前記複数回の撮像のうちの各回の撮像時のぶれ状態を、別個に表示するように前記表示部を制御する
   請求項１に記載の撮像装置。
3. 前記ぶれ状態情報は、前記複数回の撮像における各回の撮像時のぶれ状態に応じて配置されるポインタを含む
   請求項１に記載の撮像装置。
4. 前記ぶれ状態情報は、前記ぶれ状態の基準を示す基準領域をさらに含み、
   前記制御部は、前記複数回の撮像における各回の撮像時のぶれ状態に応じて、前記基準領域において前記ポインタを配置するように前記表示部に前記ぶれ状態情報を表示させる
   請求項３に記載の撮像装置。
5. 前記ぶれ状態情報は、前記合成画像の撮影動作前に撮像されたプレビュー画像を含み、
   前記制御部は、前記合成画像の撮影動作において、前記ぶれ状態に応じて前記プレビュー画像を移動させるように前記表示部を制御する
   請求項１に記載の撮像装置。
6. 前記制御部は、前記合成画像の撮影動作中に、表示されたぶれ状態情報に含まれるぶれ状態において過去のぶれ状態を次第に消去するように、前記表示部を制御する
   請求項１に記載の撮像装置。
7. 前記制御部は、前記複数回の撮像結果の画像データに基づいて、互いに位置ずれを有する複数の撮像画像を合成して、前記合成画像を示す画像データを生成する
   請求項１に記載の撮像装置。
8. 前記ぶれ検出部の検出結果に基づいて、前記撮像素子を駆動することにより像ぶれ補正を行う像ぶれ補正部をさらに備え、
   前記制御部は、前記像ぶれ補正部による補正後のぶれ状態を取得して、取得したぶれ状態に応じて前記ぶれ状態情報を前記表示部に表示させる
   請求項１に記載の撮像装置。

Images