JP3361619B2 - 電子カメラの合焦位置検出装置 - Google Patents
電子カメラの合焦位置検出装置Info
- Publication number
- JP3361619B2 JP3361619B2 JP13429694A JP13429694A JP3361619B2 JP 3361619 B2 JP3361619 B2 JP 3361619B2 JP 13429694 A JP13429694 A JP 13429694A JP 13429694 A JP13429694 A JP 13429694A JP 3361619 B2 JP3361619 B2 JP 3361619B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- focus position
- low frequency
- lens
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Automatic Focus Adjustment (AREA)
Description
検出する技術に関する。
絞り等の光学撮像系を介してCCD等の固体撮像素子に
結像させ、該撮像素子により光電変換されて出力される
電気画像信号を、記録媒体に記録するように構成された
電子カメラが実用化されている。
を撮像レンズを介して固体撮像素子に結像させ、その撮
像素子で光電変換して得られた電気画像信号を処理して
外部に出力する。これらのカメラの自動合焦位置検出
(AF) の方法の1つとして、画像復元の技術を応用し
たものが開発されている (特開平4−1980) 。この
AFは、本質的にパララックス (視差) が存在せず、ま
た、被写体深度が浅い場合や遠方の被写体でも精度良く
焦点を合わせられる。しかも、専用のセンサを設ける必
要もない。その上1回の撮像で合焦位置の推測ができ
る。
まず、合焦評価値の算出方法を示す。線形システムにお
いて、インパルス応答g (x) がシフトインバリアント
な場合は、入力f (x) に対するシステム出力c (x)
は以下のようにコンボリューションで表せる。 c (x) =f (τ) ・g (x−τ) dτ (1) この関係は、フーリエ空間においては、フーリエ変数を
用いて表すと以下のような積の形になる。
は、このようなシフトインバリアントな線形システムと
して通常取り扱われる。よって、インパルス応答、即
ち、点像分布関数g (x) が分かっているならば、フー
リエ空間において、 H (u) =1/G (u) (3) で表せるインバースフィルタを (2) 式のC (u) に乗
じれば、F (u) 即ちf(x) が求められる。
適用でき、その場合 (2) 式は以下のようになる。 C (u,v) =F (u,v) ・G (u,v) (4) 以上の理論を用い、具体的な合焦位置検出方法を以下に
述べる。図7は、この従来例を示すブロック図である。
事前にレンズ等の光学系の焦点及び焦点からある刻みで
レンズを移動させたときの各レンズ位置でのGi (u,
v) (gi (x,y) をフーリエ変換したもの) を求
め、記憶しておく。
y) ]を取り込み、この画像データc (x,y) をフー
リエ変換する[C (u,v) ]。その後、各レンズ位置
でのGi (u,v) で割り、フーリエ逆変換を施し、各
レンズ位置での復元画像データfi (x,y) を求め
る。このfi (x,y) のマイナスの値の合計 (エラー
値Ei) を算出する。このエラー値を比較し、合焦位置
の検出を行い、フォーカスレンズを駆動し、フォーカス
調整を行う。
Fの動作を行う場合、画像を取り込んだ後にフーリエ変
換を施し、割り算を行い、その後フーリエ逆変換を行い
復元画像データを求め、その後焦点評価値を求めるの
で、計算量が多くなり、迅速なAFができない。本発明
は、上記の事情に鑑みなされたもので、合焦位置の検出
をより迅速に行えるようにした電子カメラの合焦位置検
出装置を提供することを目的とする。
子カメラの合焦位置検出装置は、レンズ位置を変えたと
きの各レンズ位置における画像復元用のデータを記憶す
る画像復元用データ記憶手段と、1画面分又はその一部
の撮像データを前記画像復元用データ記憶手段に記憶さ
れた画像復元用データに基づいて前記複数点のレンズ位
置毎に復元される画像中の低周波成分を復元処理途中で
抽出する復元画像低周波成分抽出手段と、該抽出された
復元画像中の低周波成分からレンズ位置毎の評価値を求
め、各評価値を比較して合焦位置を推測する合焦位置推
測手段と、を含んで構成したことを特徴とする。
撮像系の点像分布関数又はそれを変換処理して得られる
関数の算出式、または焦点位置及びその前後のレンズ位
置で複数点実験的に求めたデータ値を画像復元用データ
として記憶する構成としてもよい。また、前記復元画像
低周波成分抽出手段は、前記画像復元用データに基づい
てフーリエ変換を施して行われる画像復元処理の途中で
復元画像に対してフーリエ変換されたデータから復元画
像における低周波成分を抽出する構成としてもよい。
画像中の低周波成分のレベル値を画像全体の総レベル値
で正規化したものを評価値とする構成としてもよい。ま
た、前記合焦位置推測手段は、復元画像中の低周波成分
のうち、直流成分のみを評価値として使用する構成とし
てもよい。
その一部の撮像データを画像復元用データ記憶手段に記
憶された画像復元用データを用いてレンズ位置毎に画像
復元処理を行う途中で、復元画像中に含まれる低周波成
分を抽出する。そして、レンズが合焦位置にあるときの
復元画像は、ノイズ (高周波成分) が少なくなる結果、
低周波成分が最も多くなることにより、合焦位置推測手
段が前記抽出された復元画像中の低周波成分からレンズ
位置毎の評価値を求め、各評価値を比較して合焦位置を
推測する。
点像分布関数又はそれを変換処理して得られる関数の算
出式を用いればよく、または焦点位置及びその前後のレ
ンズ位置で複数点実験的に求めたデータ値を用いてもよ
い。また、具体的には前記復元画像低周波成分抽出手段
は、前記画像復元用データに基づいてフーリエ変換を施
して行われる画像復元処理の途中で復元画像に対してフ
ーリエ変換されたデータから復元画像における低周波成
分を抽出することにより、逆フーリエ変換を施して復元
画像を得る前に低周波成分を抽出することができる。
ル値を画像全体の総レベル値で正規化したものを評価値
とすることにより、低周波成分の発生割合として評価で
きるから精度の高い評価を行える。また、画像復元処理
上、撮像時のレンズ位置における復元画像中に含まれる
低周波成分は最大となるので、この最大の低周波成分の
レベル値に対して各レンズ位置の復元画像中の低周波成
分のレベル値を正規化して評価値とすることができ、こ
の場合には画像全体のデータについて演算を行う必要が
ないので、迅速な合焦位置推測を行える。
中の低周波成分のうち、直流成分のみを評価値として使
用すれば、演算量を減らすことができ、迅速な合焦位置
推測を行える。
発明に係る電子カメラの合焦位置検出装置の実施例のハ
ードウエアの構成を示す。図において、撮像レンズ1,
フォーカスレンズ2,絞り3等を備えた光学撮像系を介
して得られた被写体の光画像は、撮像手段としての固体
撮像素子例えばCCD4上に結像される。前記フォーカ
スレンズ2及び絞り3は、レンズ駆動回路5及びアイリ
ス駆動回路6により夫々駆動される。前記CCD4では
結像された光画像を光電変換して電荷量に変換し、CC
D駆動回路7からの転送パルスによってアナログ電気画
像信号として出力する。出力されたアナログ電気画像信
号は、CDS (相関二重サンプリング回路) でノイズを
軽減され、AGC(増幅回路) で増幅され (CDS/A
GC8) 、A/D変換器9でデジタル画像信号に変換さ
れた後、プロセス回路10に出力される。前記プロセス回
路10では、デジタル電気画像信号は輝度信号と色差信号
又は色信号等の画像信号 (ビデオ信号) に変換され、圧
縮回路11、デジタルAF評価器12に出力される。前記圧
縮回路11では、前記画像信号 (ビデオ信号) の符号化,
量子化を行い、データ量を減らし、記録回路13を介して
記録媒体例えばPCカード14に記録する。尚、本実施例
ではプロセス処理後のビデオ信号を圧縮しているが、A
/D変換器9直後の信号等を圧縮する構成であってもよ
い。デジタルAF評価器12はプロセス回路10で作成され
た信号 (例えば輝度信号) を用い、合焦位置の検出の計
算を行う。この結果を用い、合焦位置にフォーカスレン
ズを駆動する。尚、本実施例ではプロセス処理後の信号
を用いて合焦位置の検出を行う構成であってもよいし、
プロセス回路の処理中の信号を用いる構成であってもよ
い。メインCPU15は、前記諸回路の制御を行う。ま
た、メインCPUで圧縮やAF評価を行う構成としても
よい。
取込み、その画像のデータを用い、レンズ位置毎に合焦
評価値を求め、該合焦評価値が示すレンズ位置にフォー
カスレンズ2をレンズ駆動回路5を介して駆動して、合
焦位置を得るという方法を用いる。以下に具体的な合焦
評価値の算出方法を示す。従来例で既述したように、イ
ンパルス応答、即ち、点像分布関数g (x) が分かって
いる場合は、入力をf (x) 、それに対するシステム出
力をc (x) とすれば、フーリエ空間においては、 F (u) =C (u) /G (u) という関係が成り立つ。ここで、F (u) はf (x)
を、G (u) はg (x) を、C (u) はc (x) を夫々
フーリエ変換したものである。
適用でき、その場合は以下に示すようになる。 C (u,v) =F (u,v) ・G (u,v) 以上の理論を用い、具体的な合焦位置検出方法を以下に
述べる。図3がこの実施例を示すブロック図である。ま
ず、事前にレンズ等の光学系の焦点及び焦点からある刻
みでレンズを移動させたときの各レンズ位置での点像分
布回数gi (x,y) (i=1,・・n) を求める。
それをフーリエ変換したGi ( u,v) を求め、RO
M等の記憶手段に記憶しておく。このときGi ( u,
v) の逆数Hi ( u,v) を記憶させる構成としても
よい。レンズ一体型カメラのときはカメラ製造時にデー
タを書き込めばよい。そうでないときは、レンズ交換の
度にデータを求め、記憶すればよい。また、レンズ1つ
1つにEEPROM等の記憶手段を付け、レンズ製造時
等に予めレンズデータを記憶させる構成とする。ここで
は、各レンズ位置でのデータを記憶する構成としている
が、算出式などを記憶しておき、その都度各々のレンズ
位置でのデータを算出する構成としてもよい。
[c (x,y) ]。この画像データc (x,y) をフー
リエ変換する[C (u,v) ]。その後、各レンズ位置
でのGi ( u,v) で割る。ここでフーリエ逆変換を
施せば、各レンズ位置での復元画像データfi ( x,
y) が求められる。Fi ( u,v) を求めるとき、G
i ( u,v) で割るのではなく、Hi (u,v) を掛
けるなどの他の方法を用いる構成としてもよい。このF
i (u,v) から合焦位置の評価値 (以下合焦評価値と
いう) を求める。Fi (u,v) は復元画像データfi
(x,y) をフーリエ変換したものなので、復元画像を
周波数分解したものとしても考えられる。焦点位置でな
いGi (u,v) を用いると、復元画像に含まれる低周
波成分は非常に少なくなるので、これを用いて合焦評価
値を求める。
i (u,v) を図4に示すような形のデータだとする。
このとき画像の水平方向に関しては左にいけば低周波成
分を表し、垂直方向に関しては上にいけば低周波成分を
表すものとする。よってこのデータの左上のデータ (図
4の太枠の部分) の絶対値の合計を全体のデータの絶対
値の合計で正規化してやれば、復元画像データ中の低周
波成分の割合が求まる。復元画像は低周波成分が多いほ
ど正しい焦点位置で復元されたことになるので(高周波
成分はノイズに埋もれてしまう) 、このデータ (合焦評
価値) が最も大きくなる値の焦点位置を合焦位置とす
る。
よそ図5のようになる (図はレンズが合焦位置からプラ
ス方向に0.5 mmずれている例) 。これを比較することに
より、今のレンズ位置が合焦位置からどの位離れている
かがすぐ分かる。こうして合焦位置を推測し、フォーカ
スレンズを合焦位置に移動する。但し、注意しなければ
ならないのは、レンズ位置からの距離が0のところで
は、当該レンズ位置が合焦位置からずれていようがいま
いが、合焦評価値が大きな値をとってしまうことであ
る。これは画像復元上なってしまうことなので、レンズ
からの距離が0のところ以外のところで合焦評価値に大
きい値があれば、その位置が真の合焦位置と判断するよ
うにする。他の位置に大きい値の合焦評価値がなけれ
ば、現在のレンズ位置が正しい合焦位置であると判断す
るようにする。
周波成分の和を画像全体のデータの合計で正規化したも
のを用いたが、別の実施例としては、レンズからの距離
が0のときの低周波成分で、夫々のレンズの位置での低
周波成分のデータを正規化し、合焦評価値を求める方法
がある。この方法を用いると、画像全体のデータについ
て演算を行う必要がなくなるので、迅速な合焦位置検出
ができる。
の和を用いたが、直流成分のみを用いる構成を示す。1
つの実施例としては、直流成分 (図4の一番左上のデー
タ)の値を全体のデータの絶対値の合計で正規化し、合
焦評価値を求める方法である。別の実施例としては、全
体のデータのピーク値で直流成分のデータを正規化し、
合焦評価値を求める方法である。これらの方法を用いる
ことで、演算量を減らすことが可能となる。ここで、若
し直流成分にマイナスの値が出てきたら、そのレンズ位
置は合焦位置でないと判断する構成としてもよい。
にフーリエ逆変換を施す必要がなくなり、迅速な合焦位
置検出が可能となる。上述した方法を実現するための、
デジタルAF評価器の内部構成の例を図6に示す。評価
回路は演算回路21、RAM22、ROM23等で実現でき
る。ROM23は各レンズ位置での点像分布関数を記憶し
ておくところである。RAM22は取り込んだ画像を一時
的に蓄えておくところである。演算回路21は上述したよ
うな計算を行う回路である。演算回路21の演算速度が取
り込む画像のスピードに対して充分早いならば、RAM
22は必要としない。また、ROM23もCPU15内のRO
Mで代用できるのであれば、専用のものはいらない。R
AM22に関しても同様であり、何かで代用できるのであ
れば専用のものは必要としない。また、エアフローメー
タ回路で上述した処理をする構成としたが、それらの一
部、又は全てを別の回路 (他の処理に用いているもの)
を流用したり、CPUなどでソフト的に処理を行っても
よい。
合焦位置を推測したが、測距エリア(合焦位置推測に用
いるデータの範囲) を縮小する構成としてもよい。そう
することにより、目的以外の被写体に合焦することもな
くなる。また、フーリエ変換は、測距エリア全体を1つ
のエリアとして施してもよいし、測距エリアをいくつか
のエリアに分けて施してもよい。分けて施した方が処理
速度の上で向上を期待できる。
ば、撮像データからレンズ位置毎の画像復元を行う途中
で復元画像中の低周波成分を抽出し、それによって合焦
位置を評価して推測することにより、復元画像データか
ら評価するより短時間で精度良く合焦位置を推測するこ
とができ、より早く、より正確にAF動作を行えるもの
である。
点像分布関数又はそれを変換処理して得られる関数の算
出式、または焦点位置及びその前後のレンズ位置で複数
点実験的に求めたデータ値を用いることで、精度のよい
画像復元処理を行える。また、具体的には復元画像に対
してフーリエ変換されたデータから復元画像における低
周波成分を抽出することにより、逆フーリエ変換を施し
て復元画像を得る前に低周波成分を抽出することができ
る。
ル値を画像全体の総レベル値で正規化したものを評価値
とすることにより、低周波成分の発生割合として評価で
きるから精度の高い評価を行える。また、撮像時のレン
ズ位置における復元画像中に含まれる低周波成分のレベ
ル値に対して各レンズ位置の復元画像中の低周波成分の
レベル値を正規化して評価値とすることにより、画像全
体のデータについて演算を行う必要なく、迅速な合焦位
置推測を行える。
流成分のみを評価値として使用する構成とすることによ
り、演算量を減らすことができ、迅速な合焦位置推測を
行える。
実施例のハードウエアの構成を示すブロック図。
図。
分解の一例を示す図。
すグラフ。
を示すブロック図
Claims (6)
- 【請求項1】被写体の光画像を撮像レンズを介して撮像
素子に結像させ、該撮像素子により光電変換された電気
画像信号を処理して外部に出力し、又は記録手段に記録
する構成の電子カメラにおいて、 レンズ位置を変えたときの各レンズ位置における画像復
元用のデータを記憶する画像復元用データ記憶手段と、 1画面分又はその一部の撮像データを前記画像復元用デ
ータ記憶手段に記憶された画像復元用データに基づいて
前記複数点のレンズ位置毎に復元される画像中の低周波
成分を抽出する復元画像低周波成分抽出手段と、 該抽出された復元画像中の低周波成分からレンズ位置毎
の評価値を求め、各評価値を比較して合焦位置を推測す
る合焦位置推測手段と、 を含んで構成したことを特徴とする電子カメラの合焦位
置検出装置。 - 【請求項2】前記画像復元用データ記憶手段は、撮像系
の点像分布関数又はそれを変換処理して得られる関数の
算出式、または焦点位置及びその前後のレンズ位置で複
数点実験的に求めたデータ値を画像復元用データとして
記憶することを特徴とする請求項1に記載の電子カメラ
の合焦位置検出装置。 - 【請求項3】前記復元画像低周波成分抽出手段は、前記
画像復元用データに基づいてフーリエ変換を施して行わ
れる画像復元処理の途中で復元画像に対してフーリエ変
換されたデータから復元画像における低周波成分を抽出
することを特徴とする請求項1又は請求項2に記載の電
子カメラの合焦位置検出装置。 - 【請求項4】前記合焦位置推測手段は、前記復元画像中
の低周波成分のレベル値を画像全体の総レベル値で正規
化したものを評価値とすることを特徴とする請求項1〜
請求項3のいずれか1つに記載の電子カメラの合焦位置
検出装置。 - 【請求項5】前記合焦位置推測手段は、前記復元画像中
の低周波成分のレベル値を撮像時のレンズ位置における
復元画像中に含まれる低周波成分のレベル値で正規化し
たものを評価値とすることを特徴とする請求項1〜請求
項3のいずれか1つに記載の電子カメラの合焦位置検出
装置。 - 【請求項6】前記合焦位置推測手段は、復元画像中の低
周波成分のうち、直流成分のみを評価値として使用する
ことを特徴とする請求項1〜請求項5のいずれか1つに
記載の電子カメラの合焦位置検出装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP13429694A JP3361619B2 (ja) | 1994-06-16 | 1994-06-16 | 電子カメラの合焦位置検出装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP13429694A JP3361619B2 (ja) | 1994-06-16 | 1994-06-16 | 電子カメラの合焦位置検出装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH089231A JPH089231A (ja) | 1996-01-12 |
JP3361619B2 true JP3361619B2 (ja) | 2003-01-07 |
Family
ID=15124973
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP13429694A Expired - Fee Related JP3361619B2 (ja) | 1994-06-16 | 1994-06-16 | 電子カメラの合焦位置検出装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3361619B2 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006003803A (ja) * | 2004-06-21 | 2006-01-05 | Olympus Corp | 合焦情報取得装置及び合焦情報取得方法 |
JP4581600B2 (ja) | 2004-09-28 | 2010-11-17 | ブラザー工業株式会社 | インクジェットプリンタ用ヘッド |
JP5338113B2 (ja) * | 2008-03-28 | 2013-11-13 | 株式会社ニコン | 相関演算装置、焦点検出装置および撮像装置 |
JP5866493B2 (ja) * | 2013-11-19 | 2016-02-17 | パナソニックIpマネジメント株式会社 | 撮像装置 |
-
1994
- 1994-06-16 JP JP13429694A patent/JP3361619B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JPH089231A (ja) | 1996-01-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP0488723B1 (en) | Movement vector detection apparatus | |
JP4582423B2 (ja) | 撮像装置、画像処理装置、撮像方法、及び画像処理方法 | |
JP4665718B2 (ja) | 撮影装置 | |
JP4571617B2 (ja) | 撮像装置及び撮像方法 | |
JP6124720B2 (ja) | 撮像装置、画像処理方法及び画像処理プログラム | |
JP3732665B2 (ja) | 自動焦点制御装置及びその合焦動作決定方法 | |
JP4250583B2 (ja) | 画像撮像装置及び画像復元方法 | |
JP5144724B2 (ja) | 撮像装置、画像処理装置、撮像方法、及び画像処理方法 | |
JP3709294B2 (ja) | 自動焦点検出装置 | |
US8928799B2 (en) | Imaging device and imaging method to perform autofocus operation to a subject | |
JP2957800B2 (ja) | 自動焦点調節装置 | |
US10462352B2 (en) | Focus detection apparatus and image pickup apparatus | |
US8243154B2 (en) | Image processing apparatus, digital camera, and recording medium | |
JP2003319407A (ja) | 撮像装置 | |
JP3361619B2 (ja) | 電子カメラの合焦位置検出装置 | |
JP4668863B2 (ja) | 撮像装置 | |
JP4972902B2 (ja) | 撮像装置および撮像方法 | |
JP2019083580A (ja) | 画像処理装置、画像処理方法、プログラム | |
JP2009171341A (ja) | ぶれ補正装置及び撮像装置 | |
JPH06181532A (ja) | 電子カメラの合焦位置検出装置 | |
JP2008028924A (ja) | 撮像装置及び撮像装置の制御方法 | |
JPH07209576A (ja) | 光学的検出装置およびフォーカス制御装置 | |
KR100819807B1 (ko) | 촬상 장치 및 촬상 방법 | |
KR100850468B1 (ko) | 촬상장치, 촬상방법 및 그 방법을 실현시키는 컴퓨터프로그램을 기록한 저장 매체 | |
JPH05199443A (ja) | 電子カメラの合焦位置検出装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081018 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081018 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091018 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091018 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101018 Year of fee payment: 8 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111018 Year of fee payment: 9 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121018 Year of fee payment: 10 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131018 Year of fee payment: 11 |
|
LAPS | Cancellation because of no payment of annual fees |