JP2011146957A - 撮像装置、その制御方法およびプログラム - Google Patents

Abstract

【課題】 ライブビュー画像を見ながら写真の仕上がりに影響する各種パラメータを“事前に”設定できるようにし撮り直しを極力回避する。
【解決手段】 表示制御手段（５３）はライブビュー画像（６９）とともに撮影画像の画像状態とライブビュー画像内の位置とを指定するためのユーザインターフェース（６０）を表示手段（１８）に表示させ且つユーザインターフェース（６０）によって指定されたライブビュー画像内の位置が指定された画像状態となるように撮像手段による撮像の際の撮影条件の補正またはライブビュー画像に対する画像処理による補正を加える第一補正手段（５３）、シャッタレリーズに応答して撮像手段による撮像を行う際の撮影条件の補正または撮像手段から取り込まれた撮影画像の画像処理による補正に対してライブビュー画像（６９）に加えた補正と同様の補正を加える第二補正手段（５３）を備える。
【選択図】 図２

Description

本発明は、デジタルカメラ等の撮像装置、その制御方法およびプログラムに関し、特に、画像再生用の表示部を備えた撮像装置、その制御方法およびプログラムに関する。

フィルムを感光させることによって被写体像を写し取る、いわゆる銀塩カメラは古くから使用されてきたが、今日においては、ＣＣＤ等の電子撮像デバイスと、導体メモリ等の記憶デバイスとを用いて被写体像を電子的に記録する、いわゆるデジタルカメラ等の撮像装置が広く普及している。この電子記録画像は、正確には画像ファイルであり、必要に応じてそのカメラや他の画像処理装置（パーソナルコンピュータ等）の画面に表示され、あるいは、紙の上に印刷される。厳密には“写真”は、この印刷物のことをいうが、広く一般には画面に表示された画像のことも（ただし、それがカメラで撮影されたものである場合）、“写真”と表現されていることを考慮し、本明細書でも画像と写真を区別しないことにする。

デジタルカメラの利点の第一は、フィルム代がかからないことにある。つまり撮影コストが安いことにあり、第二は、その場ですぐに撮影結果を確認できることにある。この第二の利点は画像再生用の表示部を必要とするが、安価なものを除いて多くのデジタルカメラにはプレビューやレビュー用の表示部（一般的に数インチ程度の大きさの液晶表示パネル）が備えられているのが普通であるので、ほとんどのデジタルカメラは上記の第一と第二の利点を有していると言って差し支えない。

さて、かかる二つの利点を有するデジタルカメラ等の撮像装置にあっては、旧来の銀塩カメラに比べて、完成度の高い写真を容易に撮影することができる。これは、上記の第一の利点から、撮影可能な写真枚数がきわめて多い（記憶デバイスの容量によっては数千枚にも及ぶ）からであり、たとえば、ある被写体に対して露出条件等を段階的に変更したブラケット撮影をいつでも気軽に行うことができるからである。加えて、上記の第二の利点から、撮影後の画像をその場ですぐに確認できるため、気に入らなければ試行錯誤的に何度でも撮り直すことができるからである。

このように、デジタルカメラ等の撮像装置は、誰でも簡単に完成度の高い写真を撮影することができるが、それでも、撮影意図にマッチしたピント合わせ位置調整や、被写体の露出に適合した露出調整などの面倒な操作を行わなければならない点は、旧来の銀塩カメラと同じであることから、これらの調整作業を支援する様々な技術が提案されている。

たとえば、下記の特許文献１には、画像撮影直後に撮影画像を再生表示する際に、その画像の一部を拡大表示してピントの状態を確認できるようにした技術（以下、従来技術１という）が記載されている。
また、下記の特許文献２には、撮影画像の再生画面上に、任意の位置に移動可能なターゲットフレームを表示し、そのターゲットフレーム内の合焦ポイントを特定して、その特定位置に、小さなフレームを表示するようにした技術（以下、従来技術２という）が記載されている。
また、下記の特許文献３には、顔認識機能を備えた撮像装置において、所定のボタンを押すたびにそれぞれの顔を順繰りに拡大表示するようにした技術（以下、従来技術３という）が記載されている。
また、下記の特許文献４には、被写体像の輝度分布を三次元グラフで表示すると共に、コントラストの分布状態を表示するようにした技術（以下、従来技術４という）が記載されている。
また、下記の特許文献５には、手動でピント合わせ（マニュアルフォーカス）を行う際に、ライブビュー画像の被写体のエッジからフォーカスの程度を示す評価値を求め、その評価値をバーグラフで視覚的に表示するようにした技術（以下、従来技術５という）が記載されている。

特開２０００−２３６４７４号公報 特開２００４−２４２０１１号公報 特開２００７−２００２９号公報 特開２００７−１５１０３４号公報 特開２００２−２０９１３５号公報

しかしながら、上記の従来技術１〜４は、いずれも、撮影済み画像に対するピント合わせや露出条件設定の結果確認を行うものであって、要するに“事後的”な確認手段を提供しているに過ぎないから、その確認によって失敗写真であると判断され場合に撮り直しを行わなければならないという問題点がある。また、上記の従来技術５は、マニュアルフォーカスを行う際に用いられるものであるから、そのまま、ピント合わせを自動で行うもの（オートフォーカス）に適用できないという問題点がある。

具体例を説明する。今、撮影済み画像を確認したところ、露出不足の写真であったとする。この場合、一般的にはプラス側の露出補正を行って撮り直しを行うが、不適切な補正量によっては再び露出アンダーや露出オーバーとなって再度、失敗写真になるおそれがある。

ピントのズレも同様である。とりわけ、低めのシャッター速度の場合は手ブレに起因するピントズレが生じやすく、または、合焦ポイントを自動選択する撮像装置の場合には、意図しないポイントにピントが合ってしまうことがあり、いずれも失敗写真につながる。

そこで、本発明の目的は、ライブビュー画像を見ながら、写真の仕上がりに影響する各種パラメータ、たとえば、合焦ポイントの指定や露出条件（絞り値やシャッタ速度及び撮影感度等）の設定、前景や背景のボケ具合などを“事前に”設定できるようにし、もって撮り直しを極力回避できる撮像装置、その制御方法およびプログラムを提供することにある。

請求項１記載の発明は、撮像手段から継続的に出力される撮影構図確認用のライブビュー画像を表示手段に表示させる表示制御手段を備えた撮像装置において、前記表示制御手段は、前記ライブビュー画像とともに、撮影画像の画像状態と、前記ライブビュー画像内の位置とを指定するためのユーザインターフェースを前記表示手段に表示させるものであり、且つ、前記ユーザインターフェースによって指定された前記ライブビュー画像内の位置が前記指定された画像状態となるように、前記撮像手段による撮像の際の撮影条件の補正、または前記ライブビュー画像に対する画像処理による補正を加える第一補正手段と、シャッタレリーズに応答して前記撮像手段による撮像を行う際の撮影条件の補正、または前記撮像手段から取り込まれた撮影画像の画像処理による補正に対して、前記ライブビュー画像に加えた補正と同様の補正を加える第二補正手段とを備えたことを特徴とする撮像装置である。
請求項２記載の発明は、前記第一および第二補正手段は、前記ライブビュー画像内の位置が前記指定された画像状態となるように、前記撮像手段による撮像の際の撮影条件の補正を優先的に実行し、この撮影条件の補正では指定された画像状態にすることができない場合に、対象とする画像に対して画像処理による補正を施すことを特徴とする請求項１に記載の撮像装置である。
請求項３記載の発明は、前記撮影画像の画像状態は、撮影画像のボケ量に関する画像状態であり、前記第一および第二補正手段は、対象とする画像に対して前記ユーザインターフェースによって指定された位置のボケ具合を補正することを特徴とする請求項１に記載の撮像装置である。
請求項４記載の発明は、前記ユーザインターフェースによって指定される撮影画像の画像状態は、撮影画像のボケ量の絶対値、撮影画像のボケ量の変化量、または撮影画像のボケ量の変化方向のいずれかにより指定される画像状態であり、前記第一および第二補正手段は、対象とする画像に対して前記ユーザインターフェースによって指定された位置のボケ具合が、指定されたボケ量の絶対値となるような補正、または指定されたボケ量の変化量だけボケ量が変化するような補正、または指定されたボケ量の変化方向にボケ量が変化するような補正を行うことを特徴とする請求項３に記載の撮像装置である。
請求項５記載の発明は、前記第一補正手段は、前記撮像手段による撮像の際のフォーカス距離および絞り値を補正することで、前記ユーザインターフェースによって指定された位置のボケ具合が指定された状態となるように被写界深度を調整することを特徴とする請求項３に記載の撮像装置である。
請求項６記載の発明は、ボケの無い原画像をボケのある劣化画像に変換する画像変換関数を、前記撮像手段から取り込まれた撮影画像を劣化画像とした場合において推定し、この推定された画像変換関数の逆変換を行う逆画像変換関数によって前記撮影画像を変換することで復元画像を生成する復元手段を更に備え、前記第二補正手段は、対象とする画像に対してボケを低減する方向への補正を行う場合には、前記復元手段により生成された復元画像に基づいてボケ量を補正することを特徴とする請求項３乃至５のいずれかに記載の撮像装置である。
請求項７記載の発明は、前記復元手段は、前記撮像手段から取り込まれた撮影画像に対して２次元フーリエ変換または２次元離散コサイン変換を施したフーリエ変換画像に基づいて前記逆画像変換関数を推定することを特徴とする請求項６に記載の撮像装置である。
請求項８記載の発明は、前記撮像手段から取り込まれた撮影画像を複数の領域に分割し、この分割された各領域毎に、２次元フーリエ変換または２次元離散コサイン変換を施して各周波数成分の分布状態を求め、高周波成分の割合または低周波成分の割合を数値化した画質評価値を算出する画質評価手段と、前記画質評価手段により各領域毎に数値化された画質評価値を前記ライブビュー画像とともに表示する画質表示手段とを更に備えたことを特徴とする請求項１乃至７のいずれかに記載の撮像装置である。
請求項９記載の発明は、前記撮像手段から取り込まれた撮影画像内で、前記画質評価手段による画質評価値の算出対象となる位置を特定する特定手段を更に備え、前記画質評価手段は、前記特定手段により特定された位置を含む複数の領域に対して前記画質評価値を算出し、前記画質表示手段は、前記画質評価手段により各領域毎に数値化された画質評価値を、格子状に拡大して表示することを特徴とする請求項８に記載の撮像装置である。
請求項１０記載の発明は、前記画質表示手段は、各領域に対応する画質評価値を色またはパターンに変換して各格子内に表示することを特徴とする請求項９に記載の撮像装置である。
請求項１１記載の発明は、前記撮影画像の画像状態は、撮影画像の明るさに関する画像状態であり、前記第一および第二補正手段は、対象とする画像に対して前記ユーザインターフェースによって指定された位置の明るさを基準とした補正を行うことを特徴とする請求項１に記載の撮像装置である。
請求項１２記載の発明は、前記撮影画像の画像状態は、撮影画像の色温度に関する画像状態であり、前記第一および第二補正手段は、前記ユーザインターフェースによって指定された位置の色温度を基準とした色味補正を行うことを特徴とする請求項１に記載の撮像装置である。
請求項１３記載の発明は、前記ユーザインターフェースは、前記ボケ量または前記明るさを指定するためのスイッチオブジェクトを備え、該スイッチオブジェクトに対するユーザ操作に応答して、前記ボケ量または前記明るさの位置指定を行うためのマーカオブジェクトを前記ライブビュー画像上に出現させることを特徴とする請求項１乃至１２のいずれかに記載の撮像装置である。
請求項１４記載の発明は、前記マーカオブジェクトは、ユーザ操作に応じて前記ライブビュー画像上で位置を移動することを特徴とする請求項１３に記載の撮像装置である。
請求項１５記載の発明は、撮像手段から継続的に出力される撮影構図確認用のライブビュー画像を表示手段に表示させる表示制御工程を含む、撮像装置の制御方法において、前記表示制御工程は、前記ライブビュー画像とともに、撮影画像の画像状態と、前記ライブビュー画像内の位置とを指定するためのユーザインターフェースを前記表示手段に表示させる処理を含み、且つ、前記ユーザインターフェースによって指定された前記ライブビュー画像内の位置が前記指定された画像状態となるように、前記撮像手段による撮像の際の撮影条件の補正、または前記ライブビュー画像に対する画像処理による補正を加える第一補正工程と、シャッタレリーズに応答して前記撮像手段による撮像を行う際の撮影条件の補正、または前記撮像手段から取り込まれた撮影画像の画像処理による補正に対して、前記ライブビュー画像に加えた補正と同様の補正を加える第二補正工程とを含むことを特徴とする、撮像装置の制御方法である。
請求項１６記載の発明は、撮像装置のコンピュータに、撮像手段から継続的に出力される撮影構図確認用のライブビュー画像を表示手段に表示させる表示制御手段を実現させるためのプログラムであって、前記表示制御手段は、前記ライブビュー画像とともに、撮影画像の画像状態と、前記ライブビュー画像内の位置とを指定するためのユーザインターフェースを前記表示手段に表示させるものであり、且つ、前記ユーザインターフェースによって指定された前記ライブビュー画像内の位置が前記指定された画像状態となるように、前記撮像手段による撮像の際の撮影条件の補正、または前記ライブビュー画像に対する画像処理による補正を加える第一補正手段と、シャッタレリーズに応答して前記撮像手段による撮像を行う際の撮影条件の補正、または前記撮像手段から取り込まれた撮影画像の画像処理による補正に対して、前記ライブビュー画像に加えた補正と同様の補正を加える第二補正手段とを実現させるためのプログラムである。

本発明によれば、ライブビュー画像を見ながら、写真の仕上がりに影響する各種パラメータ、たとえば、合焦ポイントの指定や露出条件（絞り値やシャッタ速度及び撮影感度等）の設定、前景や背景のボケ具合などを“事前に”設定することができ、もって撮り直しを極力回避できる撮像装置、その制御方法およびプログラムを提供することができる。

デジタルカメラ１の正面図及び背面図である。 デジタルカメラの内部ブロック構成図である。 従来公知の撮影モードと再生モードの状態遷移図である。 本実施形態の特徴的事項を示す概念的な構成図である。 インターフェース画面の一例を示す図である。 インターフェース画面６０の直感的操作を示す図である。 露出補正の概念図である。 色温度と画像との関係を示す図である。 中央制御部５３のＣＰＵ５３ａで実行される制御プログラムの要部フローを示す図である。 ボケのある劣化画像からボケの無い原画像を復元する場合の概念図である。 ボケの調節結果を確認する為のいくつかのユーザインターフェース例を示す図である。

以下、本発明の実施形態を、デジタルカメラへの適用を例にして、図面を参照しながら説明する。

図１は、デジタルカメラ１の正面図及び背面図である。この図において、デジタルカメラ１は、たとえば、箱状薄形のカメラボディ２の前面に沈胴式のレンズ鏡筒３や、ストロボ発光窓４、光学式ファインダ前面窓５及びマイク用集音穴６などを配置すると共に、カメラボディ２の上面に電源スイッチ７及びシャッターボタン８などを配置しており、さらに、カメラボディ２の背面に光学式ファインダ後面窓９、スピーカ用拡声穴１０、撮影モード／再生モード切り換えスイッチ１１、ズーム操作兼再生表示モード切替スイッチ１２、ＭＥＮＵボタン１３、上下左右方向移動ボタン１４、ＳＥＴボタン１５、ＤＩＳＰボタン１６、タッチパネル１７及び液晶パネル１８などを配置し、加えて、カメラボディ２の底面に不図示の三脚固定用ネジ穴部及び蓋１９を設け、この蓋１９の内部にバッテリ２０とカード型メモリまたはカード型ハードディスクなどの大容量記憶デバイス２１とを着脱可能な状態で実装している。また、カメラボディ２の任意位置（図では背面から見た右側面の上部位置）に横方向の深穴２２が穿設されており、この深穴２２に、タッチパネル１７を操作するためのスタイラスペン２３を収容できるようになっている。

図２は、デジタルカメラの内部ブロック構成図である。この図において、デジタルカメラ１は、レンズ鏡筒３に収められた撮影レンズ２４やズームレンズ２５、フォーカスレンズ２６及び絞り機構２７などを含む光学系２８と、この光学系２８を介して取り込まれた被写体２９の像を撮像するＣＣＤやＣＭＯＳ等の二次元イメージセンサを含む撮像部３０と、被写体２９までの距離を測定するコントラストＡＦ方式やハイブリッドＡＦ方式などの測距部３１と、撮像部３０から出力される画像信号に所要の画像処理（ガンマ補正等）を施す画像処理部３２と、光学系２８の絞り機構２７を駆動する絞り駆動部３３と、光学系２８のフォーカスレンズ２６を駆動するフォーカス駆動部３４と、光学系２８のズームレンズ２５を駆動するズーム駆動部３５と、各種キーやスイッチ及びボタン類（シャッターボタン８、撮影モード／再生モード切り換えスイッチ１１、ズーム操作兼再生表示モード切替スイッチ１２、ＭＥＮＵボタン１３、上下左右方向移動ボタン１４、ＳＥＴボタン１５、ＤＩＳＰボタン１６等）を含む操作部３６と、マイク用集音穴６の裏側に取り付けられたマイクロホン３７やスピーカ用拡声穴１０の裏側に取り付けられたスピーカ３８を含む音声処理部３９と、ストロボ発光窓４の裏側に取り付けられたストロボ発光部４０及びストロボ駆動部４１と、液晶パネル１８を駆動する液晶駆動部４２と、タッチパネル１７のタッチ座標を取り込むタッチ座標入力部４３と、大容量記憶デバイス２１のデータ入出力を制御するデバイスデータ入出力部４４と、デジタルカメラ１の姿勢を検出する姿勢検出部４５と、不図示のＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ：全地球測位システム）衛星からの信号を受信してデジタルカメラ１の位置情報（少なくとも緯度経度の座標情報）を検出するＧＰＳ受信部４６と、必要に応じてパーソナルコンピュータ等の外部機器４７との間のデータ入出力を仲介する外部入出力部４８と、充電可能な電池４９やその電池４９の充電部５０及び商用電源からの充電用外部端子５１を含みデジタルカメラ１の各部の動作に必要な電力を発生する電源部５２と、中央制御部５３とを備える。

中央制御部５３は、コンピュータ（以下、ＣＰＵ）５３ａ、不揮発性メモリ（以下、ＲＯＭ）５３ｂ、揮発性メモリ（以下、ＲＡＭ）５３ｃ及び書き換え可能型不揮発性メモリ（以下、ＰＲＯＭ）５３ｄを備えており、ＲＯＭ５３ｂに予め格納されている制御プログラムやＰＲＯＭ５３ｄに予め又は任意に書き込まれるデータをＲＡＭ５３ｃにロードしてＣＰＵ５３ａで実行することにより、つまり、プログラム制御方式によって、このデジタルカメラ１の各部の動作を統括制御するものであるが、この方式（プログラム制御方式）に限定されない。その機能の全て又は一部をハードロジックで実現してもよい。

図示のデジタルカメラ１は、操作部３６の撮影モード／再生モード切り換えスイッチ１１が「撮影」位置にあるときに撮影モード（静止画又は動画撮影モード）で動作し、「再生」位置にあるときに再生モードで動作する。

静止画又は動画撮影モードを選択した場合、撮像部３０から周期的（毎秒数十フレーム）に出力される画像信号が、画像処理部３２と中央制御部５３及び液晶駆動部４２を経て液晶パネル１８に出力され、構図確認用のライブビュー画像（スルー画像ともいう）として継続的に表示される。一般的に撮影者は、ライブビュー画像を見ながら所望の構図になるように撮影方向や撮像部３０の画角（ズームレンズ２５のズーム量）を調節し、所望の構図が得られたときにレリーズ操作（シャッターボタン８の押し下げ操作）を行う。また、このとき、必要に応じ、撮影シーンに適合した撮影プログラム（いわゆるベストショット）の選択や適切と思われる露出補正などをレリーズ操作前に行うこともある。

そして、レリーズ操作に応答して、フォーカスレンズ２６のＡＦ（自動焦点）処理や絞り機構２７のＡＥ（自動露出）処理などが実行され、撮像部３０から高画質の画像信号が取り出される。この画像信号は、画像処理部３２と中央制御部５３及びデバイスデータ入出力部４４を経て大容量記憶デバイス２１に送られ、撮影済み画像として大容量記憶デバイス２１に記録保存される。この撮影済み画像は、撮像部３０から取り出された高画質、高解像度の画像信号に相当する生画像（ＲＡＷ画像）であってもよいが、生画像はサイズが大きく、大容量記憶デバイス２１の記憶容量を圧迫するので、ユーザーが記録時の画像サイズ（解像度）を任意に指定し、この指定された画像サイズ（解像度）となるように、生画像の画素を間引いたり複数画素の加算などを行っている。また、解像度を下げること無く画像サイズを低減させるためには、たとえば、ＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）等の汎用圧縮技術を用いて圧縮した画像を撮影済み画像として記録することが望ましい。

一方、再生モードを選択した場合は、たとえば、直近に撮影された画像を大容量記憶デバイス２１から読み出して液晶パネル１８に表示するか、あるいは、撮影済み画像の縮小画像を大容量記憶デバイス２１から読み出して液晶パネル１８に一覧表示し、その一覧の中からユーザ操作によって選択された画像（ユーザが再生を希望する画像）の元画像を大容量記憶デバイス２１から読み出して液晶パネル１８に表示する。なお、液晶パネル１８の表示解像度は、撮像部３０による撮像時の解像度よりも低く、一般的な用途で撮影記録する場合の記録時の解像度よりも低くなっているため、撮影記録された画像を表示する場合には、画素を間引いたり複数画素の加算などを行って表示部の解像度に合わせてから表示を行う。後述するライブビュー画像を表示する場合も同様である。

以上の撮影モードと再生モードの動作は、従来公知のものである。
図３は、従来公知の撮影モードと再生モードの状態遷移図である。この図において、デジタルカメラ１の電源がオンになると状態Ｐ１（動作モード判定状態）に至り、この状態Ｐ１で撮影モード／再生モード切り換えスイッチ１１の現在位置を判定し、その判定結果に従い、状態Ｐ２（撮影モード状態）または状態Ｐ３（再生モード状態）のいずれかに遷移する。

状態Ｐ２では、液晶パネル１８でライブビュー画像の継続的表示が行われるとともに、ユーザ操作に基づく各種撮影パラメータ設定、たとえば、ズーム倍率の調整（状態Ｐ４）や、撮影プログラム（例：ポートレイト撮影用、風景撮影用、スポーツシーン撮影用、室内撮影用、夜景撮影用・・・・）の選択（状態Ｐ５）、および、露出補正（状態Ｐ６）などが行われる。必要な撮影パラメータの設定を完了し、且つ、所望の構図が得られた場合、撮影者によるシャッタレリーズに応答して状態Ｐ７（画像記録状態）から状態Ｐ８（確認用画像の表示状態）へと遷移し、状態Ｐ１を経て再び状態Ｐ２に復帰する。

通常、撮影後の画像確認は状態Ｐ８で行われるが、一般的に状態Ｐ８の時間は数秒程度と短時間であることから、じっくりと時間をかけて撮影済み画像の評価を行いたい場合は、撮影モード／再生モード切り換えスイッチ１１を「撮影」から「再生」へと切り替え、状態Ｐ３（再生モード状態）へと遷移させることによって時間をかけた画像の評価を行う。

さて、この画像評価の結果、意図した仕上がりになっていないと判断された場合は、撮影モード／再生モード切り換えスイッチ１１を「再生」から「撮影」へと切り替え、再び状態Ｐ２へと遷移させて上記の撮影動作をもう一度繰り返す。つまり、画像の「撮り直し」を行うことになる。

冒頭で説明したとおり、デジタルカメラは、コストを気にせずに何枚でも写真を撮影できるという利点がある。したがって、上記の「撮り直し」それ自体に特段の不都合はない。気にいった仕上がりが得られるまで、何度でも撮り直しを行えばよい。しかしながら、このような撮り直しの手法は試行錯誤的なものであって、あまりスマートとはいえない。

そこで、本実施形態では、本番の撮影前に、写真の仕上がりに影響する各種撮影パラメータを事前設定できるようにし、以て、試行錯誤的な撮り直しを極力行わないようにすることができるスマートな撮影支援技術を提供する。

図４は、本実施形態の特徴的事項を示す概念的な構成図である。この図において、中央制御部５３は、プログラム制御方式によって機能的に実現されたいくつかのブロック部、具体的には、撮影パラメータ設定インターフェース部５４、ボケ補正部５５、露出補正部５６、ボケ調整画像処理部５７、色温度補正部５８、フォーカスポイント設定部５９などを含む。

撮影パラメータ設定インターフェース部５４は、ライブビュー画像を表示中の液晶パネル１８に、本番撮影前に設定することが望ましい各種撮影パラメータ、たとえば、（１）前景や背景のボカシ具合（以下、ボケという）、（２）写真の明るさを適正露出にするのか、それともアンダー気味（ローキー）やオーバー気味（ハイキー）にするのかを示す露出補正、（３）写真の色調を示す色温度（いわゆるホワイトバランスのことで、たとえば、早朝は青味がかった高い温度、夕景は赤味がかった低い温度・・・・）、さらには、フォーカスポイントの位置などを総合的に設定する為の直感的なインターフェース画面を表示する。

図５は、インターフェース画面の一例を示す図である。この図において、インターフェース画面６０は、ライブビュー画像表示領域６１の周囲（図では右側と下側）に適宜に配列された複数のスイッチオブジェクト（タッチパネル１８のタッチ操作または操作部３６の上下左右方向移動ボタン１４によるカーソル移動とＳＥＴボタン１５の押し下げ操作のいずれかに応答してオンになるもの）を有する。たとえば、右側に上下に並べられた三つのスイッチオブジェクト６２〜６４は、上から順にそれぞれ「ボケ大」、「ボケ中」、「ボケ小」のタイトルが付けられており、以下、各々をボケ大スイッチ６２、ボケ中スイッチ６３およびボケ小スイッチ６４ということにする。

また、下側に左右に並べられた四つのスイッチオブジェクト６５〜６８は、左から順にそれぞれ「黒基準」、「白基準」、「フォーカス」、「色温度」のタイトルが付けられており、以下、各々を黒基準スイッチ６５、白基準スイッチ６６、フォーカススイッチ６７および色温度スイッチ６８ということにする。なお、色温度スイッチ６８のタイトルの両側には各々左右に向いた三角記号が付けられており、この色温度スイッチ６８は、左端や右端を択一的に操作することにより、設定値（ここでは色温度）を線形的または所定量ずつ段階的に減少または増加させることができる、いわゆるシーソー形式のスイッチオブジェクトである。

ここで、図示のインターフェース画面６０における“直感的操作”について説明する。
図６は、インターフェース画面６０の直感的操作を示す図である。この図において、（ａ）はライブビュー画像６９の一例である。このライブビュー画像６９がインターフェース画面６０のライブビュー画像表示領域６１に映し出されるようになっている。ちなみに、ライブビュー画像６９には横長の崖からカーテン状に流れ落ちる滝、その滝下の淀み、および、滝上の木々などが被写体として映しこまれている。なお、（ｂ）はライブビュー画像６９が映し出された状態のインターフェース画面６０を示しているが、この図（ｂ）では、作図の都合上、ライブビュー画像６９を単純化した線画で表している。

（ｂ）において、インターフェース画面６０のライブビュー画像６９の上に、いくつかのマーカオブジェクト（図案化された指標；以下、単にマーカという）が表示されている。二重丸マーカはそれぞれ大中小のボケマーカ６２ａ、６３ａ、６４ａ、二つの菱形マーカはそれぞれ黒基準マーカ６５ａと白基準マーカ６６ａ、さらに、クロス十字状マーカはフォーカスポイントマーカ６７ａである。

なお、ボケマーカ６２ａ、６３ａ、６４ａの二重丸の大きさは大中小と異なっており、それらによって「ボケ大」、「ボケ中」および「ボケ小」を現している。また、黒基準マーカ６５ａと白基準マーカ６６ａの違いは菱形枠内の色にあり、黒基準マーカ６５ａは黒（または黒をイメージさせる色調）、白基準マーカ６６ａは白（または白をイメージさせる色調）になっている。

このようにデザインされたボケマーカ６２ａ、６３ａ、６４ａや黒基準マーカ６５ａ及び白基準マーカ６６ａは、マーカの形や大きさおよび色などにより、そのマーカが“ボケ”に関するものであるのか、または、黒基準や白基準といった“露出補正”に関するものであるのかを直感的に知ることができる。なお、クロス十字状のフォーカスポイントマーカ６７ａについては、そのクロス位置によってフォーカスポイントを表すことが公知であるものの、直感的なマーカスタイルであることに相違はない。

以上のとおり、本実施形態のマーカ６２ａ、６３ａ、６４ａ、６５ａ、６６ａ、６７ａは、いずれもそれらのマーカの意味を直感的に知ることができるように適切にデザインされたものであるが、これらのデザインに限定されないことは当然である。すなわち、図示のマーカ６２ａ、６３ａ、６４ａ、６５ａ、６６ａ、６７ａは、「それらのマーカの意味を直感的に知ることができる」ことを意図して図案化されたものであって、単なる一例にすぎないものであり、この目的（それらのマーカの意味を直感的に知ることができる）に沿うものであれば他のデザインであってももちろんかまわない。

各マーカの使い方を説明すると、まず、三種類のボケマーカ６２ａ、６３ａ、６４ａは、それぞれ対応するスイッチオブジェクト６２、６３、６４を操作した時に、インターフェース画面６０のライブビュー画像６９の上に出現する。出現の初期位置は、好ましくは、対応するスイッチオブジェクト６２、６３、６４の近くである。たとえば、ボケ大スイッチ６２を操作したときに、そのボケ大スイッチ６２の直ぐ隣にボケ大用のマーカ６２ａを表示すれば、ボケ大スイッチ６２とボケ大用のマーカ６２ａとの関係を直感的に知ることができるから好ましい。他のスイッチ６３、６４とマーカ６３ａ、６４ａについても同様である。

撮影者は、タッチパネル１８や上下左右方向移動ボタン１４を操作して、所望の位置にボケ大用のマーカ６２ａを移動させ、決定操作（タッチパネル１８へのダブルタッチ操作またはＳＥＴボタン１５の操作）を行う。ここで、“所望の位置”とは、前景や背景に大きなボケを与えたい位置（または場所）のことである。この位置は、ボケ中の場合は中程度のボケを与えたい位置（または場所）となり、あるいは、ボケ小の場合は小さなボケを与えたい位置（または場所）となる。なお、ボケの大中小を与える位置はそれぞれ一か所ずつであってもよいし、複数個所ずつであってもよい。

なお、上記操作例では、スイッチオブジェクトの操作によって所望のマーカを表示させた後に、この表示されたマーカを移動させることで、所望の位置に対して所望の画像状態を指定できるようにしたが、スイッチ操作が行われた段階ではマーカを表示させずに、タッチパネル上へのタッチ操作が行われた後に、タッチ操作が行われた位置にマーカを表示させるようにしてもよい。

また、上記操作例では、スイッチオブジェクトやマーカを、ボケの大中小であるボケ量の絶対値に対応させて設けたが、スイッチオブジェクトやマーカを、ボケを増加、ボケを減少などのボケ量の変化方向に対応させて設け、これらマーカにより指定された位置のボケ量を、その位置における現在のボケ量に対して増加または減少させるようにしてもよい。また、スイッチオブジェクトやマーカを、ボケを１レベル増加、ボケを３レベル減少など、ボケ量の変化量に対応させて設け、指定された位置のボケ量を指定された量だけ増加または減少させるようにしてもよい。

一般的な撮影手法の場合、ボケの調節はレンズの絞り値で行われている。絞りを開けばボケが大きくなり、絞り込めばボケが小さくなるからである。本実施形態においても、この絞り調整によってボケの大中小をコントロールしてもよい。つまり、ボケの大中小マーク６２ａ、６３ａ、６４ａの位置を検出し、それらの位置のボケ量が適正（ボケ大マーク６２の位置にあっては大きなボケ、ボケ中マーク６２ｂの位置の位置にあっては中程度のボケ、ボケ小マーク６２ｃの位置にあっては小さなボケ）となるようにレンズの絞りを自動調整するようにしてもよい。

しかし、絞りは露出補正とも関係するので、単純に絞り値＝ボケ量とすることはできない。一般的にボケの調整よりも露出補正が優先するからであり、まずは露出補正量（絞り値の補正量）を決め、その後、余裕があれはボケに適合した絞り値に微調整するという手順を踏むからである。このように、実際問題としてみた場合、ボケの調整に絞り値を用いることは適当とはいえない。このため、本実施形態では、絞りを用いず、画像処理によってボケの大中小をコントロールすることとした。ただし、これは実用に即することを意図したからであり、ボケの調整に「絞り値」を用いてもかまわないことはもちろんである。なお、画像処理によるボケの調整手法については後述する。

また、上記操作例では、１または複数のマーカで指定される位置の画像状態が指定された状態となるように撮影条件や画像処理の内容を決定したが、画像内のメイン被写体に対するフォーカスを維持した状態で（メイン被写体のボケが無い状態で）、マーカで指定される各部の画像状態だけを調整するようにしてもよい。また、この場合において、メイン被写体を人物の顔とし、公知である顔検出技術により検出された人物の顔部分をメイン被写体としてフォーカスを維持するようにしてもよい。

本実施形態のインターフェース画面６０によれば、ライブビュー画像６９の中の任意位置のボケ量を加減したいときには、その位置に、ボケの大中小マーク６２ａ、６３ａ、６４ａのいずれかを置くだけでよく、簡単で、しかも直感性に優れたボケ設定用のインターフェースを提供することができる。

次に、黒基準マーカ６５ａと白基準マーカ６６ａも、それぞれ対応するスイッチオブジェクト６５、６６を操作した時に、インターフェース画面６０のライブビュー画像６９の上に出現する。出現の初期位置は、前記のボケマーカ６２ａ、６３ａ、６４ａと同様に、好ましくは、対応するスイッチオブジェクト６５、６６の近くである。たとえば、黒基準スイッチ６５を操作したときに、その黒基準スイッチ６５の直ぐ上に黒基準マーカ６５ａを表示すれば、黒基準スイッチ６５と黒基準マーカ６５ａとの関係を直感的に知ることができるから好ましい。他のスイッチ６６とマーカ６６ａについても同様である。

黒基準マーカ６５ａと白基準マーカ６６ａは、それぞれライブビュー画像６９の中で、どの部分を露出の黒基準（暗部基準ともいう）とするのか、または白基準（明部基準ともいう）とするのかを指定するためのものであり、この指定は、撮影者の希望（写真の仕上がり期待）によって任意に行われる。たとえば、暗目の仕上がり（いわゆるローキー基調または単にローキー）を期待する場合は、ライブビュー画像６９の中の暗部に黒基準マーカ６５ａを合わせ、あるいは、明る目の仕上がり（いわゆるハイキー基調または単にハイキー）を期待する場合は、ライブビュー画像６９の中の明部に白基準マーカ６６ａを合わせる。もしくは、暗部から明部までをまんべんなく再現した、いわゆる適正露出の仕上がりを期待する場合は、ライブビュー画像６９の中の暗部に黒基準マーカ６５ａを合わせるとともに、ライブビュー画像６９の中の明部に白基準マーカ６６ａを合わせる。

なお、一般的に“暗部”や“明部”は画像内の最も暗い部分や明るい部分のことをいうが、撮影意図によっては必ずしもそうといえないことがある。たとえば、最暗部よりも若干明るい部分を暗部としたり、また、最明部よりも若干暗い部分を明部としたりすることもある。いずれにせよ、露出補正における暗部基準や明部基準の指定はもっぱら撮影者の主観による。

図７は、露出補正の概念図である。この図において、ヒストグラム７０は、ライブビュー画像６９の画素値の明るさ分布を示すものであり、横軸の左側が暗、右側が明で、且つ、グラフ７１の高さが横軸の各位置における画素の量になっている。

図中の（ａ）は適性露出の場合のヒストグラム７０、（ｂ）はローキーの場合のヒストグラム７０、（ｃ）はハイキーの場合のヒストグラム７０である。すなわち、（ａ）のヒストグラム７０はライブビュー画像６９の中の暗部に黒基準マーカ６５ａを合わせるとともに、ライブビュー画像６９の中の明部に白基準マーカ６６ａを合わせたときのものである。このときのヒストグラム７０は暗部や命部の欠けがなく、暗い部分から明るい部分までがまんべんなく再現されているので適正露出である。

これに対して、（ｂ）のヒストグラム７０はライブビュー画像６９の中の暗部に黒基準マーカ６５ａを合わせたときのものであり、暗部を基準にマイナス方向の露出補正が行われたものである。つまり、黒基準マーカ６５ａによって指定された明るさ（この図では暗部）が基準となるように、矢印７２で示す左方向に適量だけグラフ７１を移動させたものである。このようなマイナス補正は、画像を暗くするローキー基調の補正であり、たとえば、静寂やしっとり感、あるいは、重さなどを表現するのに多用される撮影技法である。

同様に、（ｃ）のヒストグラム７０はライブビュー画像６９の中の明部に白基準マーカ６６ａを合わせたときのものであり、明部を基準にプラス方向の露出補正が行われたものである。つまり、白基準マーカ６６ａによって指定された明るさ（この図では明部）が基準となるように、矢印７３で示す右方向に適量だけグラフ７１を移動させたものである。このようなプラス補正は、画像を明るくするハイキー基調の補正であり、たとえば、軽快さや若さなどを表現するのに多用される撮影技法である。

なお、これらの図においては、ヒストグラム７０の両端を黒基準、白基準としているが、これは露出補正の典型例を示しているにすぎない。前記のとおり、露出補正における暗部基準や明部基準の指定はもっぱら撮影者の主観によるものであるから、ヒストグラム７０の両端から内側に入った適当な位置（撮影者によって任意に指定された位置）をそれぞれ黒基準、白基準としてもかまわない。

従来から行われている露出補正の方法は、カメラボディに設けられた露出補正ボタンや、液晶パネル１８に表示される露出補正ボタンを操作するというものであり、これらのボタン操作によって、マイナス方向への露出補正（図７（ｂ）相当）を行ったり、あるいは、プラス方向への露出補正（図７（ｃ）相当）を行ったりするというものであるが、多くの撮影者は、そのような面倒なボタン操作による露出補正を全く行っていないことも事実である。その理由は必ずしも明確ではないものの、どのぐらいの補正量で且つどの方向（プラス／マイナス）へ補正すべきなのかが即座に分からないことが大きな要因であると考えられる。

この点において、本実施形態のインターフェース画面６０によれば、ライブビュー画像６９の中の任意の明るさ部分に黒基準マーカ６５ａや白基準マーカ６６ａを置くだけで、図７の（ａ）に示す適性露出や、同（ｂ）に示すローキー基調、または、同（ｃ）に示すハイキー基調を自在に得ることができ、しかも、その間、まったく露出補正量や方向（プラス／マイナス）を意識しなくてもよいから、誰でも容易に使いこなすことができる直感性に優れた露出補正用のインターフェースを提供することができる。

次に、色温度スイッチ６８は、カラー画像の色温度を増減調整するためのものであり、色温度スイッチ６８の右側を操作すると色温度が上昇し、左側を操作すると色温度が下降する。

一般的に黒い物体を熱していくと温度が低い時は暗いオレンジ色であり、温度が高くなるにつれて黄色みを帯びた白になり、さらに高くなると青みがかった白になる。このように、白という色を黒体の温度で表現することができ、この温度のことを色温度といい、単位はＫ（ケルビン）である。たとえば、晴天天空光は１２０００Ｋ〜１８０００Ｋ、快晴北向空は１００００Ｋ〜１２０００Ｋ、もやの多い空は８０００Ｋ〜１００００Ｋ、全雲天空光は６５００Ｋ〜７０００Ｋ、平均昼光は５０００Ｋ〜６０００Ｋ、朝夕の野外は４４００Ｋ〜５４００Ｋ、日の出日の入り前後は３６００Ｋ〜４０００Ｋ、蛍光灯は４２００Ｋ〜６５００Ｋ、電球色は２８００Ｋ２８００Ｋ前後、写真用タングステンは２８００Ｋ〜３４００Ｋ、タングステンライトは２６００Ｋ〜２８００Ｋである。温度が高くなるほど青味が強くなり、低くなるほど赤味が強くなる。

さて、写真撮影時の光源の色温度については、たとえば、スタジオ撮影ライトで３２００Ｋ、ストロボライトで６０００Ｋ、太陽光線で５５００Ｋ・・・・等々という一般的な標準値が設定されており、カメラのオートホワイトバランス機能によって撮影環境に適合した色温度補正が行われるようになっているものの、とりわけ、各種の光源が混在した多灯撮影環境下ではオートホワイトバランスが誤動作することがあり、意図しない色調になってしまうことがしばしば発生する。

このような場合、撮影者によるホワイトバランスのマニュアル調整が欠かせない。このため、多くのカメラには「ストロボ」や「太陽光」、「白熱電球」、「蛍光灯」などといった色温度を選択できる補正ボタンが備えられているが、これらのボタン操作による色温度補正は正確さに欠ける。「ストロボ」や「太陽光」、「白熱電球」、「蛍光灯」などの選択項目は、大雑把に光源種別を分けたものにすぎず、実際の撮影場面における色温度は、たとえば、同じ太陽光であっても時間帯によって異なり、また、蛍光灯なども昼光色や白色光など様々な波長の光（色温度が異なる光）を発するものも存在するからである。

これに対して、本実施形態のインターフェース画面６０によれば、ライブビュー画像６９を見ながら色温度スイッチ６８を操作するだけでよく、たとえば、ライブビュー画像６９の青味を強めたければ色温度スイッチ６８の右側を操作し、あるいは、赤味を強めたければ色温度スイッチ６８の左側を操作するだけでよい。画像を確認しながらリアルタイムに色温度を調節できるので、その場の光源の色温度を知る必要がなく、また、色温度スイッチ６８の操作回数によって微妙な色味調整も容易に行うことができるから、誰でも容易に使いこなすことができる直感性に優れた色温度補正用のインターフェースを提供することができる。

図８は、色温度と画像との関係を示す図である。この図において、代表的に示す三枚の画像６９ａ〜６９ｃは、それぞれ左から順に、（ａ）色温度を低めに設定した赤味強調の画像６９ａ、（ｂ）適度な色温度の画像６９ｂ、（ｃ）色温度を高めに設定した青味強調の画像６９ｃである。なお。出願図面に色をつけられないため、便宜的にハッチングで色を表現している。

一般的な成功写真としては（ｂ）の適度な色温度の画像６９ｂであるが、撮影者の意図により、（ａ）の赤味の強い画像６９ａや、（ｃ）の青味の強い画像６９ｃも成功写真と看做されることがある。（ａ）の赤味の強い画像６９ａでは暖かさなどを表現でき、（ｃ）の青味の強い画像６９ｃでは鋭さや清涼感などを表現できるからである。通常、このような色味が異なる写真を得ようとした場合は、ホワイトバランスを意図的に変えたり（たとえば、太陽光の下で「白熱電球」を選択したり）、あるいは、色温度直接入力方式のカメラの場合であれば、所望の色温度を入力したりしなければならず、結構面倒であったが、本実施形態のインターフェース画面６０によれば、ライブビュー画像６９を見ながら色温度スイッチ６８を操作するだけでよいので、誰でも容易に希望の色味の写真を得ることができる。

次に、本実施形態の動作を説明する。
図９は、中央制御部５３のＣＰＵ５３ａで実行される制御プログラムの要部フローを示す図である。この図において、デジタルカメラ１の電源をオンにすると、まず、撮影モード／再生モード切り換えスイッチ１１の切り替え位置から現在の動作モードを判定し（ステップＳ１）、「再生モード」が判定された場合は、不図示の再生モード処理に進み、「撮影モード」が判定された場合は、ライブビュー画像の取得（ステップＳ２）およびインターフェース画面６０（図５参照）の表示（ステップＳ３）に進む。

そして、インターフェース画面６０の各スイッチオブジェクト（ボケ大スイッチ６２、ボケ中スイッチ６３、ボケ小スイッチ６４、黒基準スイッチ６５、白基準スイッチ６６、フォーカススイッチ６７および色温度スイッチ６８）に対する撮影者の操作有無を判定し（ステップＳ４）、各々の操作種別に対応した処理を実行する。

すなわち、ボケ大スイッチ６２、ボケ中スイッチ６３またはボケ小スイッチ６４が操作された場合は、ボケ大中小制御（ステップＳ５）を実行し、黒基準スイッチ６５または白基準スイッチ６６が操作された場合は、露出補正制御（ステップＳ６）を実行し、フォーカススイッチ６７が操作された場合は、フォーカスポイント制御（ステップＳ７）を実行し、色温度スイッチ６８が操作された場合は、ホワイトバランス制御（ステップＳ８）を実行する。

また、インターフェース画面６０で所定の撮影準備完了操作（たとえば、不図示の撮影準備完了ボタン操作）が行われた場合は、シャッタレリーズ操作があるまで待機し（ステップＳ９）、シャッタレリーズ操作が行われた場合は、画像を撮影してその画像を大容量記憶デバイス６１に保存（ステップＳ１０）した後、確認用画像を液晶パネル１８に所定時間表示し（ステップＳ１１）、再び、ステップＳ１に復帰するが、このとき、撮影画像を大容量記憶デバイス６１に保存（ステップＳ１０）する前、または、保存した後に、その撮影画像に対して所要の補正を行う。

ここで、“所要の補正”とは、前記のライブビュー画像６９に対して行われた補正と同じものである。つまり、ライブビュー画像６９に対してボケの大中小補正が行われていた場合は、この撮影画像に対しても同様のボケの大中小補正を行い、また、ライブビュー画像６９に対して色温度補正が行われていた場合は、この撮影画像に対しても同様の色温度補正を行う。ただし、ライブビュー画像６９に対して露出補正が行われていた場合は、すでにシャッタレリーズ時の本番撮影段階で同様の露出補正（ライブビュー画像６９に対して行われた露出補正と同様のもの）が行われているため、この露出補正については、ステップＳ１０の段階における上記の“所要の補正”には含まれない。

＜ボケ大中小制御＞
先にも述べたとおり、本実施形態におけるボケ大中小制御は、画像処理によって行うことも可能である。画像のボケ効果を調整するための画像処理手法としては様々なものが知られており、画像のボケを増加させる方向の画像補正処理に関しては、各種画像ぼかしフィルターなどが一般的に知られているため、ここでの詳細な説明は省略するが、いずれの方法を用いてもよい。

また、画像のボケを低減させる方向の画像補正処理に関しても、シャープネスフィルタなどとして一般的に知られており、特に、ボケのある劣化画像からボケの無い原画像を復元する際の再現性の高い方法もいくつか知られている。
ボケのある劣化画像からボケの無い原画像を復元する場合の再現性の高い方法の概略を以下に説明する。ただし、これらの技術自体は周知であるため、詳細説明は省略する。

図１０は、ボケのある劣化画像からボケの無い原画像を復元する場合の概念図である。この図において、画像７４の座標（ｘ、ｙ）における画素の輝度をｇ［ｘ、ｙ］としたとき、基本的に、ボケのある劣化画像ｇ（ｘ，ｙ）とボケの無い原画像ｉ（ｘ，ｙ）は、ｇ（ｘ，ｙ）＝ｐ（ｘ，ｙ）＊ｉ（ｘ，ｙ）の関係で表される。ここで、ｐ（ｘ，ｙ）は、ＰＳＦ（点像分布関数あるいは点広がり関数）などの画像変換関数であり、「＊」は、コンボリューションｊ（畳み込み積分）を表す。

このｐ（ｘ．ｙ）を求めることができれば、ｐ（ｘ，ｙ）の逆関数により、ボケのある劣化画像ｇ（ｘ，ｙ）からボケの無い原画像ｉ（ｘ，ｙ）を復元することができる。

ｐ（ｘ，ｙ）を推定する方法としては、たとえば、ＰＳＦ（Ｐｏｉｎｔ Ｓｐｒｅａｄ Ｆｕｎｃｔｉｏｎ／点像分布関数、点広がり関数）法を利用することができる。このＰＳＦ法では劣化画像（ボケを調整する対象画像）に対してフーリエ変換（ＦＦＴ）と離散フーリエ変換（ＤＦＴ）を適用してフーリエ変換画像を求め、そのフーリエ変換画像の形状などからブレやボケのない一般画像、一方向の直線ブレを含む直線ブレ画像、直線ブレと焦点ボケを含む複合画像、焦点ボケのみのボケ画像を取り出し、それらの画像に対して、直線ブレや焦点ボケの度合い推定と評価を行ってＰＳＦ関数を推定する。さらに、このＰＳＦ関数の逆関数に基づいてボケやブレを補正した画像の復元処理を行っているが、その間に用いられる演算パラメータを適宜に調節することにより、ボケの大きさ制御（大中小の制御）を自由に行うことができる。

その他、１枚の画像に基づいて画像変換関数であるｐ（ｘ，ｙ）を推定する方法としては、ゼロクロス法、ハフ変換法（Ｈｏｕｇｈ変換法）、逆フィルタ法なども知られており、また、複数の画像に基づいて画像変換関数であるｐ（ｘ，ｙ）を推定する方法としては、レンチュキラーレンズなどの複数の小レンズを配置した撮像部で撮影された複数画像を利用して画像のボケを補正する技術なども知られているが、いずれの方法を用いることも可能である。

なお、既述のとおり、ボケの調節は、このような画像処理よりも、撮像手段による撮像を行う際の撮影条件による補正を優先して実行する。この撮影条件による補正は、フォーカスレンズを移動させることによるフォーカス距離を調整したり、光学レンズの絞り値（絞り機構２７の開き量）を調整して被写界深度を加減し、これによってボケの大きさを調節してもよい。被写界深度以外の背景や前景の部分をぼかすことができるからである。本発明の思想は、インターフェース画面６０を用いて直感的なボケ調整を行わしめることにあり、したがって、ボケ調整の手法は問わない。画像処理によるものであってもよく、絞り値調整によるものであってもよく、あるいは、それらを併用したものであってもよい。

なお、前述したように、撮像または記録時の画像の解像度と比べて表示部の解像度が低いため、通常のライブビュー画像を見ただけでは、実際に撮像または記録される画像の微妙なボケ具合を確認することができない。そのため、ボケの調整を行う前の段階で、撮影画像のどの部分がどの程度ボケでいるかを詳細に確認したり、ボケの調整を行った後のボケの調節結果を詳細に確認する為に、次のようなユーザインターフェースを備えていてもよい。

図１１は、ボケの調節結果を確認する為のいくつかのユーザインターフェース例を示す図である。この図において、（ａ）はライブビュー画像７５と、そのライブビュー画像７５に重畳表示されるフォーカスポイント７６の拡大表示領域７７とを示している。この拡大表示領域７７は、単純にフォーカスポイント７６に囲まれた部分画像を拡大表示するものであってもよいが、たとえば、以下の例のようにすることが好ましい。

（ｂ）は第一の例を示し、この例では、拡大表示領域７７を細かな升目に分割して各升目を所定の画質評価値で埋めている。第一の例における画質評価値は、ライブビュー画像７５に対応する撮影画像を構成する画素（または複数画素）ごとの周波数成分を表す数値であり、たとえば、ライブビュー画像７５に対応する撮影画像を複数の領域（１画素単位または複数画素単位）に分割し、この分割された各領域毎に、２次元フーリエ変換や２次元離散コサイン変換を施して各周波数成分の分布状態を求め、高周波成分の割合または低周波成分の割合を数値化したものである。一般的に画素（または複数画素）ごとの周波数成分は、ボケの度合いに相関する性質（ボケが大きいほど低くなる／ボケが小さいほど高くなる）性質があるので、この（ｂ）のようなインターフェースを用いることにより、数値化された画質評価値を目視確認するだけで、どの程度のボケに調節されたのかを定量的に把握することができるので好ましい。なお、（ｂ）において、数値化された画質評価値と一緒に、フォーカスポイント７６の拡大画像を重畳表示するようにしてもよい。実際の画像とボケの具合を比較対照できるのでさらに好ましい。

（ｃ）は第二の例を示しており、上記の第一の例との相違は、数値化された画質評価値の代わりに、色分けまたはパターン分けされた画質評価値を用いることにある。すなわち、第一の例における画質評価値（数値化されたもの）の値を色分けしたり、または、塗りつぶしパターン分けしたりしたものであり、このようにすると、どの程度のボケに調節されたのかを“直感的”に把握できるのでより好ましい。なお、この第二の例においても、色分けまたはパターン分けされた画質評価値と一緒に、フォーカスポイント７６の拡大画像を重畳表示するようにしてもよい。

＜露出補正制御＞
露出補正制御処理は、インターフェース画面６０を用いて直感的に指定された黒基準または白基準もしくはその双方に適合した露出補正量を決定するための処理であり、その具体的手法も問わないが、たとえば、絞り値を変更することによって所望の露出補正量を決定する態様であってもよく、または、シャッタ速度を変更することによって所望の露出補正量を決定する態様であってもよい。もしくは、撮影感度（ＩＳＯ感度）を変更することによって所望の露出補正量を決定する態様であってよい。さらに、それらを併用したものであってもよい。

＜フォーカスポイント制御＞
フォーカスポイント制御処理は、フォーカスマーカ６７ａの十字クロス部分に焦点を合わせる処理を行うものであり、たとえば、当該部分までの距離を測距部３１で測り、その測定結果に基づいてフォーカス駆動部３４を駆動し、光学系のフォーカスレンズの前後位置を調節するものであってもよい。

＜ホワイトバランス制御＞
ホワイトバランス制御処理は、インターフェース画面６０を用いて直感的に指定された色温度に適合したホワイトバランス補正量を決定するための処理であり、たとえば、当該ホワイトバランス補正が画像処理部３２で行われているものとすれば、この画像処理部３２に対し、インターフェース画面６０を用いて直感的に指定された色温度の値またはそれに相関する値を与え、その目標値になるように、画像処理部３２でホワイトバランスの補正を行わせるようにしてもよい。

以上のとおり、本実施形態によれば、（ア）ライブビュー画像内の任意場所に対するボケの大中小指定、（イ）ライブビュー画像内の任意明るさ部分を黒基準や白基準とした露出補正指定、および、（ウ）ライブビュー画像を見ながらの色温度補正指定など写真の仕上がりに影響する各種パラメータを「撮影本番前」に撮影者に簡単、かつ、総合的に設定させることができる直感的に優れたインターフェースを提供することができるから、取り直しを極力回避できるスマートな撮影支援技術を提供できるという特有の効果が得られる。

１ デジタルカメラ（撮像装置）
１８ 液晶パネル（表示手段）
３０ 撮像部（撮像手段）
５３ 中央制御部（表示制御手段、第一補正手段、第二補正手段、復元手段、画質評価手段、画質表示手段、特定手段）
６０ インターフェース画面（ユーザインターフェース）
６２ ボケ大スイッチ（スイッチオブジェクト）
６３ ボケ中スイッチ（スイッチオブジェクト）
６４ ボケ小スイッチ（スイッチオブジェクト）
６５ 黒基準スイッチ（スイッチオブジェクト）
６６ 白基準スイッチ（スイッチオブジェクト）
６７ フォーカススイッチ（スイッチオブジェクト）
６８ 色温度スイッチ（スイッチオブジェクト）
６２ａ ボケマーカ（マーカオブジェクト）
６３ａ ボケマーカ（マーカオブジェクト）
６４ａ ボケマーカ（マーカオブジェクト）
６５ａ 黒基準マーカ（マーカオブジェクト）
６６ａ 白基準マーカ（マーカオブジェクト）
６９ ライブビュー画像

Claims (16)

1. 撮像手段から継続的に出力される撮影構図確認用のライブビュー画像を表示手段に表示させる表示制御手段を備えた撮像装置において、
   前記表示制御手段は、前記ライブビュー画像とともに、撮影画像の画像状態と、前記ライブビュー画像内の位置とを指定するためのユーザインターフェースを前記表示手段に表示させるものであり、
   且つ、前記ユーザインターフェースによって指定された前記ライブビュー画像内の位置が前記指定された画像状態となるように、前記撮像手段による撮像の際の撮影条件の補正、または前記ライブビュー画像に対する画像処理による補正を加える第一補正手段と、
   シャッタレリーズに応答して前記撮像手段による撮像を行う際の撮影条件の補正、または前記撮像手段から取り込まれた撮影画像の画像処理による補正に対して、前記ライブビュー画像に加えた補正と同様の補正を加える第二補正手段と
   を備えたことを特徴とする撮像装置。
2. 前記第一および第二補正手段は、前記ライブビュー画像内の位置が前記指定された画像状態となるように、前記撮像手段による撮像の際の撮影条件の補正を優先的に実行し、この撮影条件の補正では指定された画像状態にすることができない場合に、対象とする画像に対して画像処理による補正を施すことを特徴とする請求項１に記載の撮像装置。
3. 前記撮影画像の画像状態は、撮影画像のボケ量に関する画像状態であり、前記第一および第二補正手段は、対象とする画像に対して前記ユーザインターフェースによって指定された位置のボケ具合を補正することを特徴とする請求項１に記載の撮像装置。
4. 前記ユーザインターフェースによって指定される撮影画像の画像状態は、撮影画像のボケ量の絶対値、撮影画像のボケ量の変化量、または撮影画像のボケ量の変化方向のいずれかにより指定される画像状態であり、
   前記第一および第二補正手段は、対象とする画像に対して前記ユーザインターフェースによって指定された位置のボケ具合が、指定されたボケ量の絶対値となるような補正、または指定されたボケ量の変化量だけボケ量が変化するような補正、または指定されたボケ量の変化方向にボケ量が変化するような補正を行うことを特徴とする請求項３に記載の撮像装置。
5. 前記第一補正手段は、前記撮像手段による撮像の際のフォーカス距離および絞り値を補正することで、前記ユーザインターフェースによって指定された位置のボケ具合が指定された状態となるように被写界深度を調整することを特徴とする請求項３に記載の撮像装置。
6. ボケの無い原画像をボケのある劣化画像に変換する画像変換関数を、前記撮像手段から取り込まれた撮影画像を劣化画像とした場合において推定し、この推定された画像変換関数の逆変換を行う逆画像変換関数によって前記撮影画像を変換することで復元画像を生成する復元手段を更に備え、
   前記第二補正手段は、対象とする画像に対してボケを低減する方向への補正を行う場合には、前記復元手段により生成された復元画像に基づいてボケ量を補正することを特徴とする請求項３乃至５のいずれかに記載の撮像装置。
7. 前記復元手段は、前記撮像手段から取り込まれた撮影画像に対して２次元フーリエ変換または２次元離散コサイン変換を施したフーリエ変換画像に基づいて前記逆画像変換関数を推定することを特徴とする請求項６に記載の撮像装置。
8. 前記撮像手段から取り込まれた撮影画像を複数の領域に分割し、この分割された各領域毎に、２次元フーリエ変換または２次元離散コサイン変換を施して各周波数成分の分布状態を求め、高周波成分の割合または低周波成分の割合を数値化した画質評価値を算出する画質評価手段と、
   前記画質評価手段により各領域毎に数値化された画質評価値を前記ライブビュー画像とともに表示する画質表示手段とを更に備えたことを特徴とする請求項１乃至７のいずれかに記載の撮像装置。
9. 前記撮像手段から取り込まれた撮影画像内で、前記画質評価手段による画質評価値の算出対象となる位置を特定する特定手段を更に備え、
   前記画質評価手段は、前記特定手段により特定された位置を含む複数の領域に対して前記画質評価値を算出し、
   前記画質表示手段は、前記画質評価手段により各領域毎に数値化された画質評価値を、格子状に拡大して表示することを特徴とする請求項８に記載の撮像装置。
10. 前記画質表示手段は、各領域に対応する画質評価値を色またはパターンに変換して各格子内に表示することを特徴とする請求項９に記載の撮像装置。
11. 前記撮影画像の画像状態は、撮影画像の明るさに関する画像状態であり、前記第一および第二補正手段は、対象とする画像に対して前記ユーザインターフェースによって指定された位置の明るさを基準とした補正を行うことを特徴とする請求項１に記載の撮像装置。
12. 前記撮影画像の画像状態は、撮影画像の色温度に関する画像状態であり、前記第一および第二補正手段は、前記ユーザインターフェースによって指定された位置の色温度を基準とした色味補正を行うことを特徴とする請求項１に記載の撮像装置。
13. 前記ユーザインターフェースは、前記ボケ量または前記明るさを指定するためのスイッチオブジェクトを備え、該スイッチオブジェクトに対するユーザ操作に応答して、前記ボケ量または前記明るさの位置指定を行うためのマーカオブジェクトを前記ライブビュー画像上に出現させることを特徴とする請求項１乃至１２のいずれかに記載の撮像装置。
14. 前記マーカオブジェクトは、ユーザ操作に応じて前記ライブビュー画像上で位置を移動することを特徴とする請求項１３に記載の撮像装置。
15. 撮像手段から継続的に出力される撮影構図確認用のライブビュー画像を表示手段に表示させる表示制御工程を含む、撮像装置の制御方法において、
    前記表示制御工程は、前記ライブビュー画像とともに、撮影画像の画像状態と、前記ライブビュー画像内の位置とを指定するためのユーザインターフェースを前記表示手段に表示させる処理を含み、
    且つ、前記ユーザインターフェースによって指定された前記ライブビュー画像内の位置が前記指定された画像状態となるように、前記撮像手段による撮像の際の撮影条件の補正、または前記ライブビュー画像に対する画像処理による補正を加える第一補正工程と、
    シャッタレリーズに応答して前記撮像手段による撮像を行う際の撮影条件の補正、または前記撮像手段から取り込まれた撮影画像の画像処理による補正に対して、前記ライブビュー画像に加えた補正と同様の補正を加える第二補正工程と
    を含むことを特徴とする、撮像装置の制御方法。
16. 撮像装置のコンピュータに、
    撮像手段から継続的に出力される撮影構図確認用のライブビュー画像を表示手段に表示させる表示制御手段を実現させるためのプログラムであって、
    前記表示制御手段は、前記ライブビュー画像とともに、撮影画像の画像状態と、前記ライブビュー画像内の位置とを指定するためのユーザインターフェースを前記表示手段に表示させるものであり、
    且つ、前記ユーザインターフェースによって指定された前記ライブビュー画像内の位置が前記指定された画像状態となるように、前記撮像手段による撮像の際の撮影条件の補正、または前記ライブビュー画像に対する画像処理による補正を加える第一補正手段と、
    シャッタレリーズに応答して前記撮像手段による撮像を行う際の撮影条件の補正、または前記撮像手段から取り込まれた撮影画像の画像処理による補正に対して、前記ライブビュー画像に加えた補正と同様の補正を加える第二補正手段と
    を実現させるためのプログラム。

Images