JP2015231193A - 撮像装置、撮像装置の制御方法、プログラム、および、記憶媒体 - Google Patents

Abstract

【課題】より効果的に画像回復処理を実行可能な撮像装置を提供する。【解決手段】撮像装置は、画像回復処理のための絞り値とシャッタースピードとの関係を記憶する記憶手段と、撮影条件および記憶手段に記憶された関係に基づいて、絞り値およびシャッタースピードを設定する制御手段と、設定された絞り値およびシャッタースピードで、撮像光学系を介して形成された光学像を光電変換して画像を出力する撮像手段とを有する。【選択図】図１

Description

本発明は、撮影画像の劣化を補正して高精細化する撮像装置に関する。

撮像光学系により撮影された被写体は、撮像光学系で発生する回折や収差等の影響により、１点から発生した光が１点に収束することができなくなるため微小な広がりを持つこととなる。このような微小な広がりを持った分布をＰＳＦ（点像強度分布関数）と呼ぶ。撮像光学系の影響のため、撮影された画像は、撮影画像にＰＳＦが畳み込まれて形成されることになり、画像がぼけて解像度が劣化する。

近年、撮影画像を電子データとして保持することが一般的になり、画像処理によって光学系による画像劣化を補正する画像回復処理が提案されるようになった。しかし、手振れで撮影画像が劣化した場合や撮像光学系の収差が大きい場合、画像回復処理を効果的に行うこと困難である。また、ノイズが発生し易い高いＩＳＯ感度で撮影した場合にも、画像回復処理によってノイズ増幅が顕著になり、高精細な画像を取得することは難しい。

特許文献１には、手振れによる画質劣化を抑えるため、手振れ補正を実施している場合にシャッタースピードを速くする構成が開示されている。

特開２００７−１９９７３号公報

しかしながら、撮像装置に画像回復処理機能を搭載しても、ユーザは画像回復処理をより効果的に実行するための条件（画像回復処理の効果を発揮するための撮影条件）を知らないため、意図的に画像補正を考慮した高品位な撮影画像を取得することは困難である。

この点に関し、特許文献１は、画像回復処理をより効果的に実行するための、撮像装置の焦点距離、Ｆ値、被写体距離などの撮影条件、および、シャッタースピードを考慮していない。すなわち特許文献１には、より効果的に画像回復処理を実行するための構成について記載されていない。

そこで本発明は、より効果的に画像回復処理を実行可能な撮像装置、撮像装置の制御方法、プログラム、および、記憶媒体を提供する。

本発明の一側面としての撮像装置は、画像回復処理のための絞り値とシャッタースピードとの関係を記憶する記憶手段と、撮影条件および前記記憶手段に記憶された前記関係に基づいて、前記絞り値および前記シャッタースピードを設定する制御手段と、設定された前記絞り値および前記シャッタースピードで、撮像光学系を介して形成された光学像を光電変換して画像を出力する撮像手段とを有する。

本発明の他の側面としての撮像装置の制御方法は、画像回復処理のための絞り値とシャッタースピードとの関係を記憶する記憶手段を参照し、撮影条件および該記憶手段に記憶された該関係に基づいて、該絞り値および該シャッタースピードを設定するステップと、設定された前記絞り値および前記シャッタースピードで、撮像光学系を介して形成された光学像を光電変換して画像を出力するステップとを有する。

本発明の他の側面としてのプログラムは、画像回復処理のための絞り値とシャッタースピードとの関係を記憶する記憶手段を参照し、撮影条件および該記憶手段に記憶された該関係に基づいて、該絞り値および該シャッタースピードを設定するステップと、設定された前記絞り値および前記シャッタースピードで、撮像光学系を介して形成された光学像を光電変換して画像を出力するステップと、をコンピュータに実行させるように構成されている。

本発明の他の側面としての記憶媒体は、前記プログラムを記憶している。

本発明の他の目的及び特徴は、以下の実施例において説明される。

本発明によれば、より効果的に画像回復処理を実行可能な撮像装置、撮像装置の制御方法、プログラム、および、記憶媒体を提供することができる。

実施例１における撮像装置の動作を示すフローチャートである。 実施例１における画像回復条件テーブルである。 実施例１における通常撮影モードおよび画像回復モードで用いられるプログラム線図である。 実施例２において、Ｆ値が小さい場合の像高別のＭＴＦの一例を示す図である。 実施例２において、Ｆ値が大きい場合の像高別のＭＴＦの一例を示す図である。 実施例２において、ＭＴＦの０落ちが発生しない領域決定の一例を示す図である。 実施例３における撮像装置のブロック図である。

以下、本発明の実施例について、図面を参照しながら詳細に説明する。
まず、本実施例における画像処理方法（画像回復処理）の概略について説明する。実空間（ｘ，ｙ）上で、光学系による劣化を受ける前の画像をｆ（ｘ，ｙ）、ＰＳＦ（点像強度分布関数）をｈ（ｘ，ｙ）、劣化した画像をｇ（ｘ，ｙ）とすると、これらは以下の式（１）のように表される。

ｇ（ｘ，ｙ）＝∫∫ｆ（Ｘ，Ｙ）＊ｈ（ｘ−Ｘ，ｙ−Ｙ）ｄＸｄＹ… （１）
式（１）にフーリエ変換を施し、実空間（ｘ，ｙ）から周波数空間（ｕ，ｖ）への変換を行うと、以下の式（２）の関係が成立する。

Ｇ（ｕ，ｖ）＝Ｆ（ｕ，ｖ）＊Ｈ（ｕ，ｖ） … （２）
ここで、Ｆ（ｕ，ｖ）はｆ（ｘ，ｙ）のフーリエ変換、Ｇ（ｕ，ｖ）はｇ（ｘ，ｙ）のフーリエ変換、Ｈ（ｕ，ｖ）はｈ（ｘ，ｙ）のフーリエ変換である。このため、以下の式（３）が成立する。

Ｆ（ｕ，ｖ）＝Ｇ（ｕ，ｖ）／Ｈ（ｕ，ｖ） … （３）
式（３）は、周波数空間上で、劣化画像ｇ（ｘ，ｙ）のフーリエ変換Ｇ（ｕ，ｖ）を点像強度分布関数ｈ（ｘ，ｙ）のフーリエ変換Ｈ（ｕ，ｖ）で割ると、劣化を受ける前の画像ｆ（ｘ，ｙ）のフーリエ変換Ｆ（ｕ，ｖ）が得られることを意味している。従って、Ｆ（ｕ，ｖ）にフーリエ逆変換を施せば、劣化をうける前の画像ｆ（ｘ，ｙ）を得ることができる。

しかしながら、実際に、このような処理を行って劣化を受ける前の画像を得ようとすると、撮像素子によって生じたノイズが増幅し、また画像上に、細かい線状の信号または縞模様などの所謂リンギングを発生させる可能性が高くなる。このため、単純な逆特性で除算することにより良好な画像を得ることは困難である。

そこで、ノイズ増幅を抑制するための画像回復方法として、以下の式（４）で表されるウィナーフィルタＷ（ｕ，ｖ）を用いることが知られている。

Ｗ（ｕ，ｖ）＝１／Ｈ（ｕ，ｖ）＊｜Ｈ（ｕ，ｖ）｜^２／（｜Ｈ（ｕ，ｖ）^２＋Γ） … （４）
ここで、Ｈ（ｕ，ｖ）は光学伝達関数（ＯＴＦ：Ｏｐｔｉｃａｌ Ｔｒａｎｓｆｅｒ Ｆｕｎｃｔｉｏｎ）であり、Γはノイズの増幅量を低減するための定数である。

式（４）を、劣化画像ｇ（ｘ，ｙ）のフーリエ変換Ｇ（ｕ，ｖ）に乗算すれば、光学系の回折や収差により発生したＰＳＦの位相成分を０にし、振幅成分の周波数特性を増幅することで、高解像度かつ良好な画像を得ることができる。すなわち、ウィナーフィルタを用いた画像回復処理により回復された画像の周波数空間情報をＲ（ｕ，ｖ）とすると、以下の式（５）が成り立つ。

Ｒ（ｕ，ｖ）＝Ｇ（ｕ，ｖ）＊Ｗ（ｕ，ｖ） … （５）
このような画像回復処理は、ＯＴＦであるＨ（ｕ，ｖ）を割り戻す方法であるから、撮像光学系の収差が余りにも大きい撮影条件で撮影した場合、Ｈ（ｕ，ｖ）が０に近い値をとる点が多くなり（所謂「０落ち」の問題が生じ）、良好な画像処理を行うことが難しい。同様に、手振れで取得画像が著しく劣化した場合においても、良好な画像処理を行うことが難しい。また、ノイズが発生し易い高いＩＳＯ感度で撮影した場合にも、回復処理によってノイズ増幅が顕著になり、高精細な画像を取得することが困難になる。

式（５）において、｜Ｒ（ｕ，ｖ）｜が大きいほど画像回復処理後に高解像度の画像を取得できることになる。一般に、撮像光学系の光学特性は、撮影時の条件（撮影条件）に応じて変化する。このため、Ｈ（ｕ，ｖ）が０に近い値をとる点が多くなるような撮影条件では、リンギングなどの発生で画像に影響を与えないように、増幅率を抑えた処理を行うこととなる。従って、撮影条件によっては、｜Ｒ（ｕ，ｖ）｜があまり大きくならない。このとことは、換言すると、撮影条件によってリンギングなどの弊害を考慮して｜Ｒ（ｕ，ｖ）｜を制御することを意味する。

デジタルカメラで撮影した画像に画像回復処理を施す場合、理想的な回復処理は、撮像素子のナイキスト周波数以下の全帯域において、回復処理後のＯＴＦが全て１となるような処理を施すことである。しかし、このような理想的な回復処理を施すと、前述のように、撮影条件によってはＯＴＦの値が０近傍の値となる周波数帯域が存在し、その点の増幅率が異常に大きくなってしまう。このような場合、回復処理後の画像にリンギングなどの弊害を引き起こしやすくなり、かえって画像を劣化させてしまう。すなわち、理想的な回復処理は、撮像光学系、撮像素子などの製造誤差や、撮影時の外乱要件、撮像素子によって発生するノイズ等を考慮すると、現実的には困難である。従って、ＯＴＦの値が０近傍の周波数帯域には、大きな増幅率が発生しない様に抑えることが必要となる。このようなＯＴＦの値が０近傍の値であることを、以後、周波数０落ちと称する。以下の各実施例は、このような問題を解決するように構成される。

まず、図１を参照して、本発明の実施例１における撮影動作について説明する。図１は、本実施例における撮像装置の動作（撮影動作）を示すフローチャートであり、画像回復処理に好適な撮影条件を自動的に設定する際のフローを示している。図１の各ステップは、例えば、撮像装置７００の制御手段（システムコントローラ７１０）、画像処理手段（画像処理部７０４）、撮像手段（撮像素子７０２）、および、記憶手段（記憶部７０８）により実行される。

まずステップＳ１０１において、システムコントローラ７１０は、撮影モードとして画像回復モードが選択されたか否かを判定する。すなわちユーザは、撮影を開始する前に、画像回復処理を行う画像回復モード、または、画像回復処理を行わない通常撮影モードのいずれの撮影モードで撮影するかを選択する。本実施例において、例えばユーザが撮像装置７００の操作手段（表示部７０５上に表示されたＧＵＩなど）を操作することにより、画像回復モードまたは通常撮影モードから一つの撮影モードが選択される。なお本実施例において、画像回復モードおよび通常撮影モードに加えて、他の撮影モードを選択可能に構成することもできる。

ステップＳ１０１にて画像回復モードが選択された場合、ステップＳ１０２において、システムコントローラ７１０は撮影モードを画像回復モードに設定する。そしてステップＳ１０２においてユーザが撮影ボタンを半押しすると、ステップＳ１０３において、システムコントローラ７１０は、撮影ボタンの半押し状態における撮像光学系の焦点距離情報および被写体距離情報（または撮影距離情報）を取得する。

続いてステップＳ１０４において、システムコントローラ７１０は、画像回復条件テーブルを参照する。画像回復条件テーブルは、焦点距離（焦点距離情報）、被写体距離（被写体距離情報）、および、Ｆ値（絞り値）の関係を示すテーブルである。画像回復条件テーブルの詳細については後述する。そしてステップＳ１０５において、システムコントローラ７１０は、画像回復条件テーブルに基づいて、取得した焦点距離情報および被写体距離情報に対応するＦ値情報（絞り値情報）を取得する。そしてシステムコントローラ７１０は、取得したＦ値情報（Ｆ値）を撮影の際におけるＦ値（絞り値）として設定する。

続いてステップＳ１０６において、システムコントローラ７１０は、画像回復モード用に撮像装置の記憶部７０８に保持されているプログラム線図を用いてシャッタースピードを決定する。プログラム線図は、画像撮影モード用のＥｖ値（露出値または被写体輝度）、Ｆ値、および、シャッタースピードの関係を示しており、その詳細については後述する。

続いてステップＳ１０７において、システムコントローラ７１０は、撮像素子７０２を制御して撮影を行う。そしてステップＳ１０８において、システムコントローラ７１０は画像処理部７０４を制御し、撮影画像に対して画像回復処理を施し、最終的な画像を取得する。続いてステップＳ１１４において、システムコントローラ７１０は、画像処理部７０４で処理された画像（最終的な画像）を表示部７０５に表示させ、または、画像記録媒体７０９に記録させる（画像出力）。なお本実施例において、画像回復処理は撮像装置の内部（画像処理部７０４）で行っているが、これに限定されるものではなく、別途コンピュータ上のソフトウエアを用いて画像回復処理を実行してもよい。

一方、ステップＳ１０１にて通常撮影モードが選択された場合、ステップＳ１０９において、システムコントローラ７１０は撮影モードを通常撮影モードに設定する。そしてステップＳ１１０においてユーザが撮影ボタンを半押しすると、システムコントローラ７１０は、ステップＳ１１１においてＦ値（絞り値）を設定し、ステップＳ１１２においてシャッタースピードを設定する。このときシステムコントローラ７１０は、一般的な絞り優先モードまたはシャッタースピード優先モードで、Ｆ値（絞り値）およびシャッタースピードを決定する。続いてステップＳ１１３において、システムコントローラ７１０は、撮像素子７０２を制御して撮影を行う。そしてステップＳ１１４において、システムコントローラ７１０は、撮影画像を表示部７０５に表示させ、または、画像記録媒体７０９に記録させる（画像出力）。

次に、図２を参照して、本実施例における画像回復条件テーブルについて説明する。図２は、画像回復条件テーブルの一例である。図２に示されるように、画像回復条件テーブルは、Ｆ値が焦点距離（焦点距離情報）と被写体距離（被写体距離情報）との組み合わせにより一意に決定されるテーブルである。この画像回復条件テーブルは、撮像光学系に固有のものであり、予め画像回復処理の効果が好適に発揮される撮影条件となるように組み合わせが決定されている。画像回復処理の効果が好適に発揮されるような撮影条件とは、以下の３つの条件を満たすことである。第一の条件は、撮像光学系の光学伝達関数（ＯＴＦ）が撮像素子のナイキスト周波数付近まで残っている（ＯＴＦが０以上を維持する）ことである。第二の条件は、撮影時の手振れが小さいことである。第三の条件は、画像に大きなノイズが乗らないような低いＩＳＯ感度で撮影することである。以下、前述の三つの条件を満たした際の効果について説明する。

まず、第一の条件および第二の条件を満たすことにより、ＯＴＦに周波数０落ちが発生しない、すなわち、ナイキスト周波数以下の全帯域においてＯＴＦの絶対値（ＭＴＦ値）が０より大きくなる。このため、リンギングなどの弊害を発生させずに、撮影画像に対して適切な増幅率で回復処理を施すことが可能となる。さらに第三の条件を満たすことにより、撮影画像に発生するノイズが小さくなり、回復処理によりノイズが増幅されたとしてもノイズ量としては大きくならない。このように、三つの条件を満たすことにより、リンギングやノイズなどの発生や増幅による弊害を抑制しつつ良好な回復処理を行うことが可能となる。

従って、これらの３つの条件を満たすように、焦点距離および被写体距離の組み合わせに対応するＦ値を決定する。第一の条件を満たすには、撮像光学系の収差が大きくなりすぎない撮影条件を（自動的に）設定する必要がある。ここで、ユーザが任意の被写体を撮影する場合、被写体距離および焦点距離はユーザが決定する。そのため、ユーザが決定した被写体距離および焦点距離に対して、収差が大きくなりすぎないＦ値が設定されるように画像回復条件テーブルを準備する。

また、例えば非常に近い位置にある被写体を撮影すると、ピント面に対する奥行き方向の微小変位が光学特性に大きな変化を与える場合がある。このような場合、効果的に回復処理を実行可能な領域が小さくなる。従って、収差量に加えて被写界深度を考慮して、最適なＦ値を決定することが好ましい。特にＦ値について、以下のような特性が知られている。すなわち被写体距離が近いと、撮像光学系の横倍率と物体側Ｆ値および像側Ｆ値との関係から、物体側Ｆ値が小さくなり、被写界深度が浅くなる。一方、被写体距離が遠いと、物体側Ｆ値が大きくなり、被写界深度が深くなる。

このため、絞りは、被写体距離が無限遠の場合に開放に設定され、至近側に近づくにつれて除々に絞っていくことが好ましい。ただし、絞りを小さく絞りすぎると、十分な露光量を得るためにシャッタースピードを遅くすることや、ＩＳＯ感度を高く設定することが必要となる。この結果、手振れやノイズに弱くなる。従って、前述の第一の条件および第二の条件の両方を満たすには、Ｆ値は開放から例えばＦ８程度までの間に設定されることが好ましい。

このような観点において、図２（ａ）は画像回復処理時に最も効果を体感可能な撮影条件の一例を示す画像回復条件テーブルであり、図２（ｂ）は被写界深度を優先した画像回復条件テーブルである。このように画像回復条件テーブルは、ユーザに推奨する撮影条件の組み合わせを表すものであり、撮像装置の中に効果別に複数種類の画像回復条件テーブルを保持しておくことが好ましい。

次に、図３を参照して、第一の条件および第二の条件を満たしながら、更に第三の条件を満たす手法について説明する。図３は、通常撮影モードおよび画像回復モードで用いられるプログラム線図である。プログラム線図は、被写体輝度を表すＥｖ値（露出値）に応じて、Ｆ値およびシャッタースピードを一意に決定するように設計される。

図３（ａ）は、通常撮影モードで用いられるプログラム線図の一例を示している。一方、図３（ｂ）、（ｃ）は、画像回復モードで用いられるプログラム線図の一例を示している。図３（ｂ）は、通常撮影モード用のプログラム線図である図３（ａ）と比較して、同一のＥｖ値に関し、Ｆ値を小さくしてシャッタースピードを速くするようにシフト（変更）したプログラム線図である。本実施例では、図２に示される画像回復条件テーブルから取得したＦ値を用い、通常撮影モードと比較してシャッタースピードを高速に設定する。このため、手振れによる画像劣化が抑制され、ＩＳＯ感度が低下し、ノイズを低減することができる。これにより、周波数情報が欠落して画像回復効果が著しく低下することやノイズ成分の増幅による画質の劣化を低減することが可能となる。

図３（ｃ）は、Ｅｖ値１〜１８の範囲内でのみ作動するように設定された、図３（ｂ）と比較してシャッタースピードをより高速化したプログラム線図である。図３（ｃ）のプログラム線図では、絞り値もＦ８までに制限されている。これにより、撮影後の画像回復処理の効果を最大に発揮させるようなプログラム線図となっている。本実施例では、画像回復モード用のプログラム線図として、通常撮影モード用のプログラム線図（図３（ａ））を単純にシフトさせたもの（図３（ｂ））、および、Ｅｖ値を制限してシャッタースピードをより高速化させたもの（図３（ｃ））を示している。ただし本実施例はこれらに限定されるものではなく、画像回復モード用のプログラム線図として他のプログラム線図を用いてもよい。

次に、本発明の実施例２について説明する。本実施例は、図２に示される画像回復条件テーブルの作成方法について詳述する。

画像回復処理において、理想的な回復は、撮像素子の全周波数にわたるＯＴＦを１にすることである。しかしながら、一般的な撮像光学系のＯＴＦは、その焦点距離、Ｆ値、被写体距離、および、像高位置に応じて変動し、撮影条件によってはＯＴＦにおいて周波数０落ちが発生する場合がある。ＯＴＦの周波数０落ちの原因は、主に、収差や手振れによって引き起こされる。このような場合、絞りを絞ってＦ値を大きくすることにより、Ｆ値に依存する収差である球面収差やコマ収差などを低減させることができる。また、被写界深度を深くすることにより、手振れの影響を軽減し、ＯＴＦの絶対値（変調伝達関数：ＭＴＦ）を上昇させることができる。一方、Ｆ値を大きくしすぎると、被写界深度は深くなるものの、シャッタースピードを遅くする必要があり、逆に手振れに弱くなる。このため、設定可能なＦ値を、例えばＦ８などの所定のＦ値以下に制限することが好ましい。

一般的に、撮像光学系により取得された光学像（ＰＳＦ）の周波数特性（ＯＴＦ）は、撮像面の中心で最も良好であり、周辺になるにつれて劣化する。

図４は、画像回復条件テーブルを作成するためのＦ値が小さい場合における像高別のＭＴＦの一例を示す図であり、被写体距離１００ｃｍ、焦点距離１８ｍｍ、Ｆ２．８のときの撮像光学系の光学特性の評価位置およびＭＴＦを示している。ここで、ＭＴＦはＯＴＦの絶対値である。図４（ａ）は、撮像面上の光学特性の評価位置を示す。また、図４（ａ）中の点（ｂ）、点（ｃ）、点（ｄ）の位置におけるＭＴＦを、図４（ｂ）、図４（ｃ）、図４（ｄ）にそれぞれ示す。図４（ｂ）〜（ｄ）において、実線はメリディオナル方向の特性を示し、破線はサジタル方向の特性を示す。また図４（ｂ）〜（ｄ）において、縦軸はＭＴＦを示し、横軸は周波数（０〜ナイキスト周波数）を示す。

ここで、各位置のＯＴＦの絶対値であるＭＴＦと画像回復処理との関係について説明する。図４（ｂ）に示されるように、中心像高（撮像面の中心）では、ＭＴＦが十分に残っている（ナイキスト周波数に至るまで全ての周波数帯域でＭＴＦが０以上である）ため、画像回復処理を効果的に行うことができる。ただし、図４（ｂ）のような中心像高においては、画像回復処理を行わずに十分に高精細な画像を取得することが可能である。

一方、図４（ｃ）に示されるように、撮像光学系の５割〜６割程度の位置（撮像面の中心と最周辺との間の位置）では、ＭＴＦは撮像素子のナイキスト周波数の近傍で応答が０になるような特性を有する。このため、画像回復前の性能がそれほど良くはなく、画像のボケが生じる。このような位置の画像に回復処理を施すと、ナイキスト周波数の近傍の周波数帯域では、ほとんど回復効果はないが、低周波からナイキスト周波数の中間程度の帯域については十分に回復することができる。

また、図４（ｄ）に示されるように、撮像面の最周辺の位置では、ＭＴＦは全体的に低く、さらに低周波領域での応答が０近傍の値をとっている。このような場合、回復処理を施してもＭＴＦを微小量しか上昇させることができない。このため、回復処理を施しても回復前の画像との差異がほとんど感じられない。

このように、図４に示されるように、被写体距離１００ｃｍ、焦点距離１８ｍｍの場合、Ｆ値２．８で撮影するのは画像回復処理の効果を最大限に発揮可能な撮影条件ではない。

図５は、画像回復条件テーブルを作成するためのＦ値が大きい場合における像高別のＭＴＦの一例を示す図であり、Ｆ４のときの光学特性の評価位置およびＭＴＦを示している。図５において、撮像光学系の焦点距離および被写体距離は図４の場合と同じである。

図５（ｂ）に示されるように、中心像高（撮像面の中心）では、Ｆ２．８の場合（図４（ｂ））と比較して、顕著な変化はないが、もともと周波数空間の全域で良好なＭＴＦを有している。このため、画像回復処理で増幅可能な量が小さく、差異を感じることはほとんどない。一方、図５（ｃ）は、図４（ｃ）と比較すると、ナイキスト周波数の近傍まで０．２程度の周波数応答が残っており、全周波数帯域を十分に増幅することが可能である。また図５（ｄ）は、図４（ｄ）と比較すると、ナイキスト周波数付近では０近傍の値をとっているが、中間の周波数においては十分な応答があるため、この帯域で回復効果を出すことができる。

前述の方法は、撮影画像の全像高にわたってＭＴＦの周波数０落ちを発生させないような条件におけるＦ値の決定方法であるが、このような条件でＦ値を決定すると、特定の撮像光学系においてはＦ値が大きくなりすぎる場合がある。このような場合、条件を緩和し、特定の像高範囲でＭＴＦの周波数０落ちが発生しないようにすればよい。

続いて、図６を参照して、画像回復条件テーブルを作成する際に、ＭＴＦの０落ちが発生しない領域を決定する方法について説明する。図６は、画像回復条件テーブルを作成するための、ＭＴＦの０落ちが発生しない領域決定の一例を示す図である。図６には、撮像光学系のイメージサークルの最大半径Ｒ＿ｍａｘ、および、ＭＴＦ値が０よりも大きい値を示す（ＭＴＦの０落ちが発生しない）最大像高半径Ｒ＿ｔａｒｇｅｔが示している。例えば、撮像光学系の８割程度まで良好な回復処理が行えればよい場合、Ｒ＿ｔａｒｇｅｔ／Ｒ＿ｍａｘ≦０．８においてＭＴＦの０落ちを発生させないようなＦ値を決定すればよい。比率は、設計者の意図に応じて予め決定しておくことができ、または、撮影時にユーザが決定してもよい。

次に、図７を参照して、本発明の実施例３における撮像装置について説明する。図７は、本実施例における撮像装置７００のブロック図である。撮像装置７００は、図１を参照して説明した実施例１の撮影方法（画像処理方法）を実行可能である。

撮像装置７００において、被写体（不図示）は、絞り７０１ａ（または遮光部材）およびフォーカスレンズ７０１ｂを含む撮像光学系７０１を介して撮像素子７０２に結像する。絞り値（Ｆ値）は、絞り７０１ａまたは遮光部材により決定される。撮像素子７０２（撮像手段）は、撮像光学系７０１を介して形成された被写体像（光学像）を光電変換して画像（撮影画像）を出力する。撮像素子７０２から出力された撮影画像（結像光）は、電気信号に変換され、Ａ／Ｄ変換器７０３に出力される。Ａ／Ｄ変換器７０３は、撮像素子７０２から入力された電気信号（アナログ信号）をデジタル信号に変換し、デジタル信号を画像処理部７０４に出力する。

画像処理部７０４は、所定の処理と併せて、図１を参照して説明した撮影方法における画像処理（画像回復処理）を実行する。まず画像処理部７０４は、状態検知部７０７から撮像装置７００の撮影条件（撮影条件情報）を取得する。撮像条件情報は、絞り値（Ｆ値）、撮影距離（被写体距離）、ズームレンズにおける焦点距離などを含む。状態検知部７０７は、システムコントローラ７１０から直接に撮像条件情報を取得可能であり、また、例えば撮像光学系７０１に関する撮像条件情報を撮像光学系制御部７０６から取得することもできる。記憶部７０８（記憶手段）は、撮影条件ごと（焦点距離、Ｆ値、撮影距離、像高、撮像素子７０２の画素サイズ、撮像光学系７０１の識別情報などの組み合わせごと）に、光学伝達関数情報（ＯＴＦ情報）を記憶している。

画像処理部７０４で処理された出力画像（回復画像）は、画像記録媒体７０９に所定のフォーマットで記録される。表示部７０５には、本実施例における画像処理後の画像に表示用の所定の処理を行った画像が表示される。また表示部７０５は、高速表示のために簡易的な処理を行った画像を表示してもよい。また表示部７０５は、ユーザが画像回復モードまたは通常撮影モードを選択するためのＧＵＩを表示する。表示部７０５のＧＵＩを介して、ユーザにより画像回復モードが選択されると、システムコントローラ７１０は、図１を参照して説明した画像処理方法を実行するように画像処理部７０４を制御する。

撮像素子７０２は、撮像光学系７０１を介して形成された光学像を光電変換して画像（撮影画像）を出力する。このときシステムコントローラ７１０は、撮像光学系制御部７０６または状態検知部７０７から、シャッターボタン半押し時の、撮像光学系７０１の識別情報、撮影時の焦点距離、撮影距離、像高、および、撮像素子７０２の画素サイズなどの撮影条件を取得する。またシステムコントローラ７１０は、画像回復条件テーブルを参照してＦ値（絞り値）を取得し、絞り値を制御する。Ａ／Ｄ変換器７０３は、撮像素子７０２から出力される光学像に対応したアナログ信号をデジタル信号に変換する。

画像処理部７０４は、画像回復条件テーブルを参照して決定された撮影条件におけるＯＴＦ情報に基づいて画像回復フィルタを生成し、撮影画像に画像回復処理を施して、画像回復処理済みの画像を出力する。画像処理部７０４には、撮影条件情報が付加された撮影画像を記録するための画像記録媒体７０９が接続されている。画像記録媒体７０９に記録された撮影画像の撮影時における撮影条件に対応するＯＴＦ情報は、前述のように記憶部７０８に記憶されている。システムコントローラ７１０は、ＣＰＵやＭＰＵなどにより構成され、撮像装置全体の制御を司る。

本実施例において、撮像光学系７０１（レンズ装置）は、撮像装置７００（撮像装置本体）と一体的に構成されているが、これに限定されるものではない。撮像光学系７０１は、一眼レフカメラなどの撮像装置本体に対して着脱可能に構成された交換レンズであってもよい。

［その他の実施形態］
本発明は、以下の処理を実行することによっても実現される。すなわち、上述した実施形態の機能を実現するソフトウエア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（又はＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。この場合、撮像装置の制御方法の手順が記述されたコンピュータで実行可能なプログラムおよびそのプログラムを記憶した記憶媒体（図７の記憶媒体７１１）は本発明を構成する。

このように各実施例において、記憶手段（記憶部７０８）は、画像回復処理のための絞り値とシャッタースピードとの関係を記憶する。制御手段（システムコントローラ７１０）は、撮影条件および記憶手段に記憶された関係に基づいて、絞り値およびシャッタースピードを設定する。撮像手段（撮像素子７０２）は、設定された絞り値およびシャッタースピードで、撮像光学系７０１を介して形成された光学像を光電変換して画像を出力する。

好ましくは、制御手段は、通常撮影モードおよび画像回復モードを含む撮影モードから一つのモードを選択的に設定可能である。そして、画像回復モードの際に用いられるシャッタースピードは、通常撮影モードの際に用いられるシャッタースピードよりも速くなるように設定されている。また好ましくは、画像回復モードの際に用いられる絞り値は、通常撮影モードの際に用いられる絞り値よりも小さくなるように設定されている。

好ましくは、記憶手段は、撮影条件としての被写体距離および焦点距離の組み合わせに関連付けて、絞り値を記憶している。より好ましくは、絞り値として、第１の被写体距離に対して第１の絞り値が設定されており、第１の被写体距離よりも短い第２の被写体距離に対して、第１の絞り値よりも大きい第２の絞り値が設定されている。すなわち絞り値は、被写体距離が短くなるにつれて大きくなるように設定されている。

好ましくは、記憶手段は、被写体距離、焦点距離、および、絞り値の関係を示すテーブル（画像回復条件テーブル）と、露出値（Ｅｖ値）、絞り値、および、シャッタースピードの関係を示すプログラム線図とを記憶している。そして制御手段は、テーブルを参照して、被写体距離および焦点距離に基づいて絞り値を決定する。また制御手段は、プログラム線図を参照して、絞り値および露出値に基づいてシャッタースピードを決定する。より好ましくは、記憶手段は、露出値の範囲を所定の範囲（例えば、Ｅｖ値≦１８）に制限した第２のプログラム線図（例えば図３（ｃ））を記憶している。そして制御手段は、露出値が所定の範囲にある場合、例えば図３（ｂ）のプログラム線図に代えて、第２のプログラム線図を参照してシャッタースピードを決定する。

好ましくは、絞り値は、所定の像高範囲においてＭＴＦ値が０より大きい値を示すように設定されている。例えば、撮像光学系のイメージサークルの最大半径Ｒ＿ｍａｘと、ＭＴＦ値が０より大きい値を示す最大像高半径Ｒ＿ｔａｒｇｅｔとの関係は、Ｒ＿ｔａｒｇｅｔ／Ｒ＿ｍａｘ≦０．８を満たす。

各実施例によれば、より効果的に画像回復処理を実行可能な撮像装置、撮像装置の制御方法、プログラム、および、記憶媒体を提供することができる。また、小型でありながら高精細な画像を取得可能な撮像装置を提供することができる。

以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。

７００ 撮像装置
７０２ 撮像素子
７１０ システムコントローラ

Claims (13)

1. 画像回復処理のための絞り値とシャッタースピードとの関係を記憶する記憶手段と、
   撮影条件および前記記憶手段に記憶された前記関係に基づいて、前記絞り値および前記シャッタースピードを設定する制御手段と、
   設定された前記絞り値および前記シャッタースピードで、撮像光学系を介して形成された光学像を光電変換して画像を出力する撮像手段と、を有することを特徴とする撮像装置。
2. 前記制御手段は、通常撮影モードおよび画像回復モードを含む撮影モードから一つのモードを選択的に設定可能であり、
   前記画像回復モードの際に用いられる前記シャッタースピードは、前記通常撮影モードの際に用いられる前記シャッタースピードよりも速くなるように設定されていることを特徴とする請求項１に記載の撮像装置。
3. 前記画像回復モードの際に用いられる前記絞り値は、前記通常撮影モードの際に用いられる前記絞り値よりも小さくなるように設定されていることを特徴とする請求項２に記載の撮像装置。
4. 前記記憶手段は、前記撮影条件としての被写体距離および焦点距離の組み合わせに関連付けて、前記絞り値を記憶していることを特徴とする請求項１乃至３のいずれか１項に記載の撮像装置。
5. 前記絞り値として、
   第１の被写体距離に対して第１の絞り値が設定されており、
   前記第１の被写体距離よりも短い第２の被写体距離に対して、前記第１の絞り値よりも大きい第２の絞り値が設定されている、ことを特徴とする請求項４に記載の撮像装置。
6. 前記記憶手段は、
   前記被写体距離、前記焦点距離、および、前記絞り値の関係を示すテーブルと、
   露出値、前記絞り値、および、前記シャッタースピードの関係を示すプログラム線図と、を記憶しており、
   前記制御手段は、
   前記テーブルを参照して、前記被写体距離および前記焦点距離に基づいて前記絞り値を決定し、
   前記プログラム線図を参照して、前記絞り値および前記露出値に基づいて前記シャッタースピードを決定する、ことを特徴とする請求項４または５に記載の撮像装置。
7. 前記記憶手段は、前記露出値の範囲を所定の範囲に制限した第２のプログラム線図を記憶しており、
   前記制御手段は、前記露出値が前記所定の範囲にある場合、前記第２のプログラム線図を参照して前記シャッタースピードを決定することを特徴とする請求項６に記載の撮像装置。
8. 前記絞り値は、所定の像高範囲においてＭＴＦ値が０より大きい値を示すように設定されていることを特徴とする請求項１乃至７のいずれか１項に記載の撮像装置。
9. 前記撮像光学系のイメージサークルの最大半径をＲ＿ｍａｘ、前記ＭＴＦ値が０より大きい値を示す最大像高半径をＲ＿ｔａｒｇｅｔとするとき、
   Ｒ＿ｔａｒｇｅｔ／Ｒ＿ｍａｘ≦０．８
   を満たすことを特徴とする請求項８に記載の撮像装置。
10. 前記撮像手段から出力された前記画像に対して前記画像回復処理を行う画像処理手段を更に有することを特徴とする請求項１乃至９のいずれか１項に記載の撮像装置。
11. 画像回復処理のための絞り値とシャッタースピードとの関係を記憶する記憶手段を参照し、撮影条件および該記憶手段に記憶された該関係に基づいて、該絞り値および該シャッタースピードを設定するステップと、
    設定された前記絞り値および前記シャッタースピードで、撮像光学系を介して形成された光学像を光電変換して画像を出力するステップと、を有することを特徴とする撮像装置の制御方法。
12. 画像回復処理のための絞り値とシャッタースピードとの関係を記憶する記憶手段を参照し、撮影条件および該記憶手段に記憶された該関係に基づいて、該絞り値および該シャッタースピードを設定するステップと、
    設定された前記絞り値および前記シャッタースピードで、撮像光学系を介して形成された光学像を光電変換して画像を出力するステップと、をコンピュータに実行させるように構成されていることを特徴とするプログラム。
13. 請求項１２に記載のプログラムを記憶していることを特徴とする記憶媒体。