JP2014032311A - Distance measuring device, imaging apparatus having the same, control method for imaging device, and control program - Google Patents
Distance measuring device, imaging apparatus having the same, control method for imaging device, and control program Download PDFInfo
- Publication number
- JP2014032311A JP2014032311A JP2012172938A JP2012172938A JP2014032311A JP 2014032311 A JP2014032311 A JP 2014032311A JP 2012172938 A JP2012172938 A JP 2012172938A JP 2012172938 A JP2012172938 A JP 2012172938A JP 2014032311 A JP2014032311 A JP 2014032311A
- Authority
- JP
- Japan
- Prior art keywords
- pixel
- distance measuring
- pupil
- focus evaluation
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Focusing (AREA)
- Automatic Focus Adjustment (AREA)
- Studio Devices (AREA)
Abstract
Description
本発明は、デジタルカメラに代表される撮像装置に関し、特にオートフォーカス（以下ＡＦ）に関する。 The present invention relates to an imaging apparatus typified by a digital camera, and more particularly to autofocus (hereinafter referred to as AF).
従来、ピント調整のためのＡＦ装置として、一眼レフカメラではいわゆる位相差ＡＦを備えた装置が、コンパクトカメラではコントラストＡＦを備えた装置が多く使用されている。これらのＡＦ装置の特徴として、位相差ＡＦは高速なピント調整が可能、コントラストＡＦは厳密なピント合わせが可能という点があげられる。 Conventionally, as an AF device for focus adjustment, a single-lens reflex camera uses a device equipped with so-called phase difference AF, and a compact camera uses a device equipped with contrast AF. A feature of these AF devices is that phase difference AF enables high-speed focus adjustment, and contrast AF enables strict focus adjustment.
さらに近年では、撮像面で位相差ＡＦ可能なセンサが多く提案されている。 In recent years, many sensors capable of phase difference AF on the imaging surface have been proposed.
例えば、特許文献１では、撮像面で位相差ＡＦ可能な構造を備えたセンサを利用した撮像装置において、ＡＦに適した読み出し方法と撮像に適した読み出し方法を備えることが開示されている。特許文献２では、撮像面で位相差ＡＦ可能な構造を備えたセンサを利用した撮像装置において、ＡＦ優先および画質優先といった各モードに応じた読み出し方法を備えることが開示されている。特許文献３では、瞳を多分割して取得した信号から生成した像に基いてＡＦを行うことが開示されている。
For example, Patent Document 1 discloses that an imaging apparatus using a sensor having a structure capable of phase difference AF on an imaging surface includes a readout method suitable for AF and a readout method suitable for imaging.
しかしながら、上述の特許文献に開示された従来技術では、位相差ＡＦと像の再構成によるコントラストＡＦ（詳細は後述する）の双方を行う装置を考えた場合に不都合が生じる。すなわち特許文献１では、加算読み出しを行っているために像の再構成によるコントラストＡＦを行うことが出来ない。特許文献２では、位相差ＡＦの読み出し比率は適切となるが、コントラストＡＦを考えた場合には必ずしも適切な画素を選択できない場合がある。特許文献３では複数のＡＦ評価手段を想定していないので、位相差ＡＦおよびコントラストＡＦの双方に適した読み出しが出来ない場合がある。
However, the conventional techniques disclosed in the above-mentioned patent documents have inconveniences when considering an apparatus that performs both phase difference AF and contrast AF by image reconstruction (details will be described later). That is, in Patent Document 1, since addition reading is performed, contrast AF cannot be performed by image reconstruction. In
そこで、本発明の目的は、位相差ＡＦと像の再構成によるコントラストＡＦの双方を行う撮像装置において、各ＡＦに適切な画素選択構成を備えたオートフォーカス装置を提供することである。 SUMMARY OF THE INVENTION An object of the present invention is to provide an autofocus device having an appropriate pixel selection configuration for each AF in an imaging device that performs both phase difference AF and contrast AF by image reconstruction.
上記課題を解決するため、本発明によれば、画素へ入射する被写体光を撮影光学系の特定の瞳領域のみに制限する瞳分割手段を備えた撮像素子から出力される画素信号を取得して異なる測距方法に従ってピント評価を行なう測距装置は、測距方法に従って、瞳分割手段で分割される複数の瞳領域の各領域に対応する画素を選択する第１の画素選択モードと、複数の瞳領域の所定の異なる２つに対応する画素だけを選択する第２の画素選択モードを選択して設定し、設定された画素選択モードで選択される画素から出力される画素信号を取得し、取得された画素信号に基づいて、測距方法に従ったピント評価を行なう。 In order to solve the above-described problem, according to the present invention, a pixel signal output from an image pickup device including a pupil dividing unit that restricts subject light incident on a pixel to only a specific pupil region of a photographing optical system is obtained. A distance measuring device that performs focus evaluation according to different distance measuring methods includes a first pixel selection mode for selecting pixels corresponding to each of a plurality of pupil regions divided by the pupil dividing unit according to the distance measuring method; Selecting and setting a second pixel selection mode for selecting only pixels corresponding to two different predetermined pupil regions, obtaining a pixel signal output from the pixel selected in the set pixel selection mode, Based on the acquired pixel signal, focus evaluation according to the distance measuring method is performed.
本発明の目的は、位相差ＡＦと像の再構成によるコントラストＡＦの双方を行うような撮像装置において、適切な画素選択構成により上記２つのＡＦを行うオートフォーカス装置を実現することが可能となる。 An object of the present invention is to realize an autofocus device that performs the above two AFs with an appropriate pixel selection configuration in an imaging device that performs both phase difference AF and contrast AF by image reconstruction. .
以下に、本発明の好ましい実施の形態を、添付の図面を参照して詳細に説明する。 Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings.
以下、図１乃至図７を参照して、本発明の第１の実施例を説明する。本実施例は、本発明のオートフォーカス装置をデジタルカメラである撮像装置に適用した例である。 Hereinafter, a first embodiment of the present invention will be described with reference to FIGS. The present embodiment is an example in which the autofocus device of the present invention is applied to an imaging device which is a digital camera.
図１（ａ）は本実施例に係わる撮像装置であるデジタルカメラの中央断面図である。本デジタルカメラは、カメラユニットとこれに着脱式に装着可能なカメラユニットから構成されている。しかし、本発明が適用可能な撮像装置は、図１の構成に限るものではなく、レンズユニットとカメラユニットが一体化された構成であってもよい。 FIG. 1A is a central sectional view of a digital camera which is an image pickup apparatus according to the present embodiment. This digital camera includes a camera unit and a camera unit that can be detachably attached to the camera unit. However, the imaging apparatus to which the present invention is applicable is not limited to the configuration shown in FIG. 1, and may be a configuration in which a lens unit and a camera unit are integrated.
図１（ｂ）は図１（ａ）のデジタルカメラの構成を示すブロック図である。図１（ａ）および図１（ｂ）で同一の符号が付してあるものはそれぞれ対応している。 FIG. 1B is a block diagram showing the configuration of the digital camera shown in FIG. In FIG. 1 (a) and FIG. 1 (b), the same reference numerals correspond to each other.
図１（ａ）において、１はカメラユニットを、２はカメラユニット１に着脱式に装着可能なレンズユニットを、３は撮影光学系を形成するレンズを、４は撮影光学系の光軸を、６は撮像素子を示す。また、９は背面表示装置を、１１はカメラユニット１とレンズユニット２の電気接点を、１２はレンズユニット２に設けられたレンズシステム制御部を、１４はクイックリターン機構を、１６はカメラユニット１に設けられたファインダ表示部をそれぞれ示す。
In FIG. 1A, 1 is a camera unit, 2 is a lens unit that can be detachably attached to the
図１（ｂ）を参照すると、カメラ１およびレンズ２からなるカメラシステムは、撮像系、画像処理系、記録再生系、制御系を有する。撮像系は、撮影光学系３ 、撮像素子６を含み、画像処理系は、画像処理部７を含む。また、記録再生系は、メモリ部８、表示部９を含み、制御系は、カメラシステム制御部５、操作検出部１０、およびレンズシステム制御部１２、レンズ駆動手段１３を含む。レンズ駆動部１３は、焦点レンズ、ブレ補正レンズ、絞りなどを駆動することができる。
Referring to FIG. 1B, a camera system including a camera 1 and a
撮像系は、物体(被写体)からの光を(被写体光)、撮影光学系３を介して撮像素子６の撮像面に結像する光学処理系である。撮像素子６表面にはマイクロレンズが格子状に配置してあり、いわゆるマイクロレンズアレイ（以下 ＭＬＡ）を形成している。ＭＬＡは本実施例において、瞳分割手段を構成する。ＭＬＡの機能や配置の詳細については図２を用いて後述する。後述するように、撮像素子６からピント評価量／適当な露光量が得られるので、この信号に基づいて適切に撮影光学系３が調整されることで、適切な光量の被写体光を撮像素子６に露光するとともに、撮像素子６近傍で被写体像が結像する。
The imaging system is an optical processing system that images light from an object (subject) (subject light) and forms an image on the imaging surface of the
画像処理部７は、内部にＡ／Ｄ変換器、ホワイトバランス回路、ガンマ補正回路、補間演算回路等を有しており、記録用の画像を生成することができる。また、本発明に係わる像シフト、像生成、コントラスト評価、相関計算等の処理を行う構成とすることも可能である。本実施例ではこれらの要素はカメラシステム制御内に配置する場合を想定して記載する。
The
メモリ部８は実際の記憶部に加えて記録に必要な処理回路を備えている。メモリ部は、記録部へ出力を行うとともに、表示部９に出力する像を生成、保存する。また、メモリ部８は、予め定められた所定の方法を用いて画像、動画、音声などの圧縮処理を行う。
The
カメラシステム制御部５は撮像の際のタイミング信号などを生成し、外部操作に応動して撮像系、画像処理系、記録再生系をそれぞれ制御する。例えば、不図示のスイッチの操作による撮影条件の設定やシャッターレリーズ釦の押下を操作検出部１０が検出して、撮像素子６の駆動、画像処理部７の動作、メモリ部８の圧縮処理などを制御する。さらに表示部９によって液晶モニタ等に情報表示を行う情報表示装置の各セグメントの状態を制御する。
The camera
制御系の光学系の調整動作について説明する。カメラシステム制御部５には画像処理部７が接続されており、撮像素子６からの信号に基づいて適切な焦点位置、絞り位置を求める。カメラシステム制御部５は、電気接点１１を介してレンズシステム制御部１２に指令を送出し、レンズシステム制御部１２は指令を受信してレンズ駆動手段１３を適切に制御する。さらにレンズシステム制御部１２には不図示の手ぶれ検出センサが接続されており、手ぶれ補正を行うモードにおいては、手ぶれ検出センサの信号を元にレンズ駆動手段１３を介してブレ補正レンズを適切に制御する。
The adjustment operation of the optical system of the control system will be described. An
また、カメラシステム制御部５は、本発明の特徴である画素選択の制御を行う制御部。カメラシステム制御部５による制御は、当該制御部に含まれるＣＰＵが図示しないメモリに記憶されている制御プログラムをロードして実行することによって実現される。
The camera
図２は、本実施例における撮影光学系の要部を説明する図である。同図において、図１と同じ部分は同じ符号を付して示す。 FIG. 2 is a diagram for explaining a main part of the photographing optical system in the present embodiment. In the figure, the same parts as those in FIG.
本発明を適用するためには、いわゆる光線空間情報等といわれる光線の位置に加えて角度の情報を取得する必要がある。本実施例では、角度情報の取得のために撮影光学系３の結像面近傍にＭＬＡを配置するとともに、ＭＬＡを構成する１つのレンズに対して複数の画素（光電変換部）を対応させている。
In order to apply the present invention, it is necessary to acquire angle information in addition to the position of light rays, so-called light space information. In the present embodiment, an MLA is arranged in the vicinity of the imaging plane of the photographing
図２（ａ）は撮像素子６とＭＬＡ２００の関係模式的に示す図である。図２（ｂ）は撮像素子の画素とＭＬＡの対応を示す模式図である。図２（ｃ）はＭＬＡによってＭＬＡ下に設けられた画素が特定の瞳領域と対応づけられることを示す図である。
FIG. 2A is a diagram schematically showing the relationship between the
図２（ａ）に示すように撮像素子６上にはＭＬＡ２００が設けられており、ＭＬＡ２００の前側主点は撮影光学系３の結像面近傍になるように配置されている。図２（ａ）は撮像装置の横からと、正面からＭＬＡ２００を見た状態を示しており、撮像装置正面から見るとＭＬＡ２００のレンズが撮像素子６上の画素を覆うように配置されている。なお、図２（ａ）ではＭＬＡを構成する各マイクロレンズを見やすくするために、大きく記載したが、実際には各マイクロレンズは画素の数倍程度の大きさしかない。実際の大きさについては図２（ｂ）を用いて説明する。
As shown in FIG. 2A, the
図２（ｂ）は図２（ａ）の装置正面からの図を一部拡大した図である。図２（ｂ）に示す格子状の枠は、撮像素子６の各画素を示している。一方ＭＬＡ２００を構成する各マイクロレンズは太い円２２０ａ，２２０ｂ，２２０ｃ，２２０ｄで示した。図２（ｂ）から明らかなようにマイクロレンズ１つに対して複数の画素が割り当てられており、図２（ｂ）の例では、５行x５列＝２５個の画素が１つのマイクロレンズに対して設けられている。すなわち各マイクロレンズの大きさは画素の大きさの５倍x５倍の大きさである。
FIG. 2B is a partially enlarged view from the front of the apparatus of FIG. A grid-like frame shown in FIG. 2B indicates each pixel of the
図２（ｃ）は撮像素子６を、マイクロレンズ光軸を含みセンサの長手方向が図の横方向になるように切断した図である。図２（ｃ）の２２１、２２２、２２３、２２４、２２５は撮像素子６の画素（１つの光電変換部）を示している。一方図２（ｃ）の上方に示した図は撮影光学系３の射出瞳面を示している。実際には、図２（ｃ）の下方に示したセンサの図と方向を合わせると、射出瞳面は図２（ｃ）の紙面垂直方向になるが、説明のために投影方向を変化させている。また、図２（ｃ）においては説明を簡単にするために、１次元の投影／信号処理について説明する。実際の装置においては、これを容易に２次元に拡張することができる。
FIG. 2C is a diagram in which the
図２（ｃ）の画素２２１、２２２、２２３、２２４、２２５は図２（ｂ）の２２１ａ、２２２ａ、２２３ａ、２２４ａ、２２５ａとそれぞれ対応する位置関係にある。図２（ｃ）に示すように、マイクロレンズ２００によって各画素は撮影光学系３の射出瞳面上の特定の領域と共役になるように設計されている。図２（ｃ）の例では画素２２１と領域２３１が、画素２２２と領域２３２が、画素２２３と領域２３３が、画素２２４と領域２３４が、画素２２５と領域２３５がそれぞれ対応している。すなわち画素２２１には撮影光学系３の射出瞳面上の領域２３１を通過した光束のみが入射する。他の画素も同様である。結果として、瞳面上での通過領域と撮像素子６上の位置関係から角度の情報を取得することが可能となる。
ここで後ほどの説明を簡単にするために記号を導入する。図２（ｃ）に示すように、撮像素子６の画素ピッチをΔx、角度分解能をΔθとする。さらに角度の分割数をNθ（図２の例ではNθ=５）とする。画素ピッチは撮像素子６の形状によって決定され、Δθは光線の角度を取得する範囲と角度分割数Nθで決定される。すなわち、物理的な構造（撮像素子６およびＭＬＡ２００の構造）のみによってこれらのパラメータは決定される。
Here, symbols are introduced to simplify the explanation later. As shown in FIG. 2C, it is assumed that the pixel pitch of the
本実施例に示した撮影光学系を利用して、撮像素子６の信号からピント評価値を得る処理について図３、図４、図５及び図６を用いて説明する。
Processing for obtaining a focus evaluation value from a signal from the
図３は図１に示す本実施例に係わる撮像装置の測距動作を説明するためのフローチャートである。図３（ａ）はピント評価値を得る測距動作の全体を、図３（ｂ）は現像動作を、図３（ｃ）は像シフト動作を、図３（ｄ）は像生成動作のフローチャートをそれぞれ示す。また、図３（ｅ）はコントラスト評価動作を、図３（ｆ）は相関計算動作のフローチャートをそれぞれ示す。 FIG. 3 is a flowchart for explaining the distance measuring operation of the imaging apparatus according to the present embodiment shown in FIG. 3A is a flowchart of the entire distance measuring operation for obtaining a focus evaluation value, FIG. 3B is a developing operation, FIG. 3C is an image shifting operation, and FIG. 3D is a flowchart of an image generating operation. Respectively. FIG. 3 (e) shows a contrast evaluation operation, and FIG. 3 (f) shows a flowchart of a correlation calculation operation.
まず、本実施例に係わる撮像装置全体の動作を簡単に説明する。 First, the operation of the entire imaging apparatus according to the present embodiment will be briefly described.
図１（ｂ）に示した操作検出部１０がユーザによる図示しない電源スイッチの操作（ＯＮ／ＯＦＦ）を検出する。その後、撮像装置はユーザによる操作からの割り込みを待つ状態に移行する。ユーザのレリーズ操作や動画撮影開始動作を検知すると、必要に応じて図３（ａ）で示すＡＦ動作（測距動作）を実施する。
The
次に本発明に係わるＡＦ動作について図３を参照して説明する。 Next, the AF operation according to the present invention will be described with reference to FIG.
ステップＳ３０１は測距動作の開始を示している。例としては、静止画撮影時のレリース操作の１段目の検出や動画撮影時における適当な間隔での測距動作などが該当する。 Step S301 indicates the start of the distance measuring operation. Examples include detection of the first stage of the release operation during still image shooting and distance measurement operation at an appropriate interval during moving image shooting.
ステップＳ３０２では測距動作の条件を決定する。ここで言う条件とは、測距の方法（位相差ＡＦ／コントラストＡＦ）のみならず、距離計算をおこなう測距点、測距枠の大きさ、ＡＦの評価値を得る間隔や点数、コントラストＡＦにおけるフィルタの帯域の設定など図３で説明する各部の設定を含む。また、後述する画素選択モードでの間引き率をここで設定するようにしてもよい。これらの値は、撮影状態（静止画か動画か）、光学系の状態（焦点距離）、ユーザ操作の状況（最初の測距動作か既に被写体を捉えている状態での継続的な測距動作か）等、撮像装置の撮影条件を取得して（撮影条件取得手段）適宜設定される。 In step S302, conditions for the distance measuring operation are determined. The conditions here include not only the distance measurement method (phase difference AF / contrast AF), but also the distance measurement point for which distance calculation is performed, the size of the distance measurement frame, the interval and the number of points for obtaining the AF evaluation value, and the contrast AF. 3 includes setting of each unit described in FIG. 3, such as setting of a filter band. Further, a thinning rate in a pixel selection mode described later may be set here. These values are the shooting state (still image or moving image), optical system state (focal length), user operation status (initial distance measurement operation or continuous distance measurement operation with the subject already captured) Or the like) is set as appropriate by acquiring the imaging conditions of the imaging apparatus (imaging condition acquisition means).
ステップＳ３０３では、決定された条件に基づいて位相差ＡＦでの測距動作を行うか、コントラストＡＦでの測距動作を行うかの判断がなされる。コントラストＡＦの場合にはＳ３０４に、位相差ＡＦの場合にはＳ３１０に進む。 In step S303, it is determined whether to perform a distance measurement operation using phase difference AF or a distance measurement operation using contrast AF based on the determined condition. In the case of contrast AF, the process proceeds to S304, and in the case of phase difference AF, the process proceeds to S310.
コントラストＡＦを行うステップＳ３０４では、カメラシステム制御部５によって第１の画素選択モードが選択されて設定される。この時、第１の画素選択モードでは、一定周期ですべての瞳領域に対応する画素を選択するように画素を選ぶ。より具体的な選択については図６（ａ）を用いて後述する。
In step S304 for performing contrast AF, the
ステップＳ３０５ではステップＳ３０４で選択された第１の画素選択モードに対応する画素を撮像素子６から読み出す（画素信号取得）。またステップＳ３０２で設定された測距点情報をもとに、それぞれの測距点に対応できる範囲の情報を読み出す。 In step S305, the pixel corresponding to the first pixel selection mode selected in step S304 is read from the image sensor 6 (acquisition of pixel signal). In addition, based on the distance measuring point information set in step S302, information on a range that can correspond to each distance measuring point is read.
ステップＳ３０６からステップＳ３１１はループを形成しており、ステップＳ３０２で設定されたそれぞれの測距点でのＡＦ演算を行う。 Steps S306 to S311 form a loop, and AF calculation is performed at each distance measuring point set in step S302.
ステップＳ３０７からステップＳ３１０はループを形成しており、ステップＳ３０２で設定された条件（適当な現像位置）に合わせて各現像面でのピント評価を行う。ここでのピント評価はいわゆるコントラストに基づくものであるが、信号の読み出しはステップＳ３０５でのみ行われている。すなわち、光線情報を利用して像を再構成することで信号を取得した面（撮像面）ではない面での像が得られるので、一度の信号の読み出しで異なる現像位置での像に対してコントラストＡＦが行われる。 Steps S307 to S310 form a loop, and focus evaluation on each development surface is performed in accordance with the condition (appropriate development position) set in step S302. The focus evaluation here is based on so-called contrast, but the signal is read only in step S305. That is, by reconstructing an image using light information, an image on a surface other than the surface (imaging surface) from which the signal was acquired can be obtained. Contrast AF is performed.
ステップＳ３０８は現像ルーチンを呼び出し、設定された現像面での像を生成する。現像ルーチンによる現像動作の詳細については図３（ｂ）を用いて後述する。 In step S308, a development routine is called to generate an image on the set development surface. Details of the developing operation by the developing routine will be described later with reference to FIG.
ステップＳ３０９ではコントラスト評価ルーチンを呼び出し、ステップＳ３０８で得られた像のコントラスト値からピント評価値を得る。コントラスト評価ルーチンによるコントラスト評価動作の詳細については図３（ｅ）を用いて後述する。 In step S309, a contrast evaluation routine is called, and a focus evaluation value is obtained from the contrast value of the image obtained in step S308. Details of the contrast evaluation operation by the contrast evaluation routine will be described later with reference to FIG.
ステップＳ３１２では各現像面のピント評価値からピント評価値が最良となる現像面（コントラストが最大となる現像面）を選択して現在のピント面との差をピントの評価値として出力する。 In step S312, the development surface with the best focus evaluation value (the development surface with the highest contrast) is selected from the focus evaluation values of the development surfaces, and the difference from the current focus surface is output as the focus evaluation value.
一方、位相差ＡＦを行うステップＳ３１３では、カメラシステム制御部５によって第２の画素選択モードが指示される。この時、第２の画素選択モードでは、特定の２つの瞳領域に対応する画素を選択するように画素を選ぶ。より具体的な選択については図６（ｂ）を用いて後述する。
On the other hand, in step S313 in which the phase difference AF is performed, the second pixel selection mode is instructed by the camera
ステップＳ３１４ではステップＳ３１３で選択された第２の画素選択モードに対応する画素を撮像素子６から読み出す。またステップＳ３０２で設定された測距点情報をもとに、それぞれの測距点に対応できる範囲の情報を読み出す。
In step S314, the pixel corresponding to the second pixel selection mode selected in step S313 is read from the
ステップＳ３１５からステップＳ３１９はループを形成しており、ステップＳ３０２で設定されたそれぞれの測距点でのＡＦ演算を行う。 Steps S315 to S319 form a loop, and AF calculation is performed at each distance measuring point set in step S302.
ステップＳ３１６からステップＳ３１８はループを形成しており、ステップＳ３０２で設定された条件（適当な位相の計算範囲や視野長など）に合わせて各位相差でのピント評価を行う。 Steps S316 to S318 form a loop, and focus evaluation is performed at each phase difference in accordance with the conditions (appropriate phase calculation range, visual field length, etc.) set in step S302.
ステップＳ３１７は相関計算ルーチンを呼び出し、各位相差でのピント評価値を得る。相関計算ルーチンによる相関計算動作の詳細については図３（ｆ）を用いて後述する。 In step S317, a correlation calculation routine is called to obtain a focus evaluation value at each phase difference. Details of the correlation calculation operation by the correlation calculation routine will be described later with reference to FIG.
ステップＳ３２０では各位相差でのピント評価値からピント評価値が最良となる位相差（＝いわゆるＡ像とＢ像が一致する位相差）を計算した後、基線長の換算を行いピントの評価値として出力する。 In step S320, after calculating the phase difference (= the phase difference at which the A and B images match) from the focus evaluation value at each phase difference, the base line length is converted to obtain the focus evaluation value. Output.
ステップＳ３２１では各測距点のピント情報（各測距点でのピント評価値やその微分値等）や過去のピント情報、さらには別のセンサの情報をもとにピントを合わせるべき主被写体を判断してＡＦシステム全体としてのピント評価値を決定する。 In step S321, the main subject to be focused on based on the focus information (focus evaluation value at each distance measurement point and its differential value, etc.), past focus information, and information from another sensor in step S321. Judgment is made and a focus evaluation value for the entire AF system is determined.
ステップＳ３２２で測距動作を終了する。 In step S322, the distance measuring operation is terminated.
図３（ａ）を用いて説明した様に、ステップＳ３０６からステップＳ３１２で第１のピント評価手段を、ステップＳ３１５からステップＳ３２０で第２のピント評価手段をそれぞれ形成している。 As described with reference to FIG. 3A, the first focus evaluation unit is formed in steps S306 to S312 and the second focus evaluation unit is formed in steps S315 to S320.
図３（ｂ）を用いて現像ルーチンによる現像動作を説明する。 The developing operation by the developing routine will be described with reference to FIG.
ステップＳ３２６は現像動作の開始を示している。 Step S326 indicates the start of the developing operation.
ステップＳ３２７は像シフトルーチンを呼び出し、取得した像を通過した瞳情報（入射角度の情報）をもとに、現像面に適した量だけシフトさせる。ここで、現像面とは、本ルーチンの呼び出し元でのステップＳ３０７からステップＳ３１０で設定されるピント評価面のこと称する。現像面において像の再構成が行なわれる。像シフトルーチンによる像シフト動作の詳細については図３（ｃ）を用いて後述する。 In step S327, an image shift routine is called, and the image is shifted by an amount suitable for the development surface based on pupil information (incident angle information) that has passed through the acquired image. Here, the development surface refers to the focus evaluation surface set in steps S307 to S310 at the caller of this routine. Image reconstruction is performed on the development surface. Details of the image shift operation by the image shift routine will be described later with reference to FIG.
ステップＳ３２８は像生成ルーチンを呼び出し、ステップＳ３２７でシフトさせた像を重ね合わせる（即ち、画素信号を加算する）ことで現像面での像を得る。これによりいわゆる現像がなされる。像生成ルーチンによる像生成動作の詳細については図３（ｄ）を用いて後述する。 In step S328, an image generation routine is called and the image shifted in step S327 is superimposed (that is, pixel signals are added) to obtain an image on the development surface. Thereby, so-called development is performed. Details of the image generation operation by the image generation routine will be described later with reference to FIG.
本実施例においては、像のシフトと加算によって現像を行う方法を例示したが、光線情報を利用して、像を取得した面とは異なる面での像を生成(再構成)する方法であればどのような方法でも利用することが可能である。 In the present embodiment, the method of performing development by shifting and adding the image is illustrated, but it is possible to generate (reconstruct) an image on a surface different from the surface from which the image is acquired by using light ray information. Any method can be used.
図３（ｃ）を用いて像シフトルーチンによる像シフト動作について説明する。 The image shift operation by the image shift routine will be described with reference to FIG.
ステップＳ３３１は像シフト動作の開始を示している。 Step S331 indicates the start of the image shift operation.
ステップＳ３３２からステップＳ３３５はループを形成している。ステップＳ３３２では瞳分割数に応じた数だけループ計算が実行される。例えば、図２に示した例では、５ｘ５＝２５個に分割されていたので、２５個のそれぞれの瞳位置に応じた計算がなされる。図４を用いて後述するように、像の再構成を考えると同じ再構成面であっても入射角度が異なると像をシフトさせる量が異なる。これを適切に反映させるためのループである。 Steps S332 to S335 form a loop. In step S332, loop calculation is executed by the number corresponding to the number of pupil divisions. For example, in the example shown in FIG. 2, since it is divided into 5 × 5 = 25, calculation according to each of the 25 pupil positions is performed. As will be described later with reference to FIG. 4, when image reconstruction is considered, even if the reconstruction plane is the same, the amount of image shift is different when the incident angle is different. This is a loop for appropriately reflecting this.
ステップＳ３３３では各画素とそれに対応する瞳領域の情報をもとに、評価位置を行っている現像面での各瞳領域での像シフト量を計算する。図２を用いて説明した様に、瞳分割手段として動作するマイクロレンズアレイ２００と画素の対応は固定的であり、撮影状態によって変化することは無い。この撮像素子６の各画素とＭＬＡ２００との対応関係がカメラユニット１に記憶されており、各画素がどの瞳領域の光線を受光しているかが分かるのでこれを像シフト量の算出に用いている。
In step S333, the image shift amount in each pupil region on the developing surface where the evaluation position is performed is calculated based on the information on each pixel and the corresponding pupil region. As described with reference to FIG. 2, the correspondence between the
ステップＳ３３４では同じ瞳領域を通過した光束（＝同じ入射角の光束）を受光した画素の信号をシフトさせる。同じ入射角の光線を得ている画素は例えば図２（ｂ）の２２５ａと２２５ｂが該当する。このような画素がＭＬＡ２００を構成するマイクロレンズの数だけ存在している。
In step S334, the signal of the pixel that receives the light beam that has passed through the same pupil region (= the light beam having the same incident angle) is shifted. For example,
像シフト動作については、図４および図５を用いてさらに説明する（後述）。 The image shift operation will be further described with reference to FIGS. 4 and 5 (described later).
ステップＳ３３６において、呼び出し元のステップＳ３２７に戻る。 In step S336, the process returns to the caller step S327.
図３（ｄ）を用いて像生成手段の動作の詳細を説明する。ステップＳ３４１は像生成手段の動作開始を示している。 Details of the operation of the image generating means will be described with reference to FIG. Step S341 indicates the start of the operation of the image generating means.
ステップＳ３４２では、ステップＳ３４５での加算のための領域のデータを初期化（０で埋める）する。この時のデータ領域の大きさはＭＬＡ２００の数量あれば良く、データの諧調は元のデータの諧調と瞳分割数の積を格納できるだけあれば都合がよい。例えば元のデータが8bitで25分割の場合、13bit （> 8bit + log225）あればデータの桁あふれを考慮する必要が無い。
In step S342, the area data for addition in step S345 is initialized (filled with 0). The size of the data area at this time may be the number of
ステップＳ３４３からステップＳ３４７はループを形成している。ステップＳ３４３ではＭＬＡ２００を構成するマイクロレンズの数に応じてループ計算が実行される。例えば、図２に示した例では、元の撮像素子の画素数÷25（瞳分割数）がマイクロレンズの数となる。
Steps S343 to S347 form a loop. In step S343, loop calculation is executed according to the number of microlenses constituting the
ステップＳ３４４からステップＳ３４６はループを形成している。ステップＳ３４４では、瞳分割数に応じた数だけループ計算が実行される。例えば、図２に示した例では、５ｘ５＝２５個に分割されていたので、２５個のそれぞれの瞳位置からの光束がステップＳ３４５で加算される。シフト量が画素の整数倍でない場合は、加算Ｓ３４５において、適当に内分されながら加算される。例えば、重なっている面積に応じて適当に加算すればよい。
像生成手段は、後において図４および図５を用いてさらに説明する。
ステップＳ３４８において、像生成ルーチンの呼び出し元のステップＳ３２８に戻る。
Steps S344 to S346 form a loop. In step S344, the loop calculation is executed by the number corresponding to the number of pupil divisions. For example, in the example shown in FIG. 2, since it is divided into 5 × 5 = 25, the luminous fluxes from the 25 pupil positions are added in step S345. If the shift amount is not an integral multiple of the pixel, the addition is performed while being appropriately divided in addition S345. For example, it may be added appropriately according to the overlapping area.
The image generating means will be further described later with reference to FIGS.
In step S348, the process returns to step S328 of the caller of the image generation routine.
図３（ｅ）を用いてコントラスト評価ルーチンによるコントラスト評価動作の詳細を説明する。 Details of the contrast evaluation operation by the contrast evaluation routine will be described with reference to FIG.
ステップＳ３５１はコントラスト評価動作の開始を示している。 Step S351 indicates the start of the contrast evaluation operation.
ステップＳ３５２では、コントラスト評価を行う評価枠の大きさを設定する。評価枠の大きさの設定は、小さすぎると被写体の局所的な特徴のみを評価することになり評価値が不安定になる場合があり、大きすぎると狙った被写体にピントを合わせにくくなる。撮影光学系の焦点距離などに応じて適宜設定すれば良い。 In step S352, the size of an evaluation frame for performing contrast evaluation is set. If the size of the evaluation frame is too small, only the local characteristics of the subject are evaluated, and the evaluation value may become unstable. If it is too large, it is difficult to focus on the target subject. What is necessary is just to set suitably according to the focal distance etc. of an imaging optical system.
ステップＳ３５３からステップＳ３５７はループを形成している。このループは評価枠の大きさに対応したループになっており、本実施例ではコントラスト評価は１方向で行いその他の方向は加算される。つまり、被写体枠内の２次元的な広がりを持つ画像の特定の方向の１次元信号でコントラスト評価を行う（後述）とともに、ステップＳ３５３からステップＳ３５７のループにより他の方向の加算がなされ、被写体枠に対応する評価値を得る。 Steps S353 to S357 form a loop. This loop is a loop corresponding to the size of the evaluation frame. In this embodiment, the contrast evaluation is performed in one direction and the other directions are added. That is, contrast evaluation is performed with a one-dimensional signal in a specific direction of an image having a two-dimensional spread within the subject frame (described later), and addition in the other direction is performed by a loop from step S353 to step S357. An evaluation value corresponding to is obtained.
ステップＳ３５４は帯域通過フィルタ（ＢＰＦ）であり、コントラスト評価を行うのに適した周波数帯の信号を選択的に取り出す。ここでいう周波数とはいわゆる空間周波数（時間方向の一般的な周波数とは異なる）に対応しており、被写体像の明暗信号の細かさに対応している。
ステップＳ３５５はステップＳ３５４の出力に対してピークホールドを行う。
Step S354 is a band pass filter (BPF), which selectively extracts signals in a frequency band suitable for performing contrast evaluation. The frequency here corresponds to a so-called spatial frequency (different from a general frequency in the time direction), and corresponds to the fineness of the light and dark signals of the subject image.
In step S355, peak hold is performed on the output of step S354.
ステップＳ３５６はステップＳ３５５の出力を積分する。ステップＳ３５４からステップＳ３５６の演算によって被写体像に含まれる特定の周波数帯の信号の大まかなコントラスト値（良い近似値）を簡易な計算で得ることが可能となる。 Step S356 integrates the output of step S355. By calculating from step S354 to step S356, it is possible to obtain a rough contrast value (good approximate value) of a signal in a specific frequency band included in the subject image by simple calculation.
ステップＳ３５８で積分値をコントラストの評価値として設定する。 In step S358, the integral value is set as the contrast evaluation value.
ステップＳ３５９で本コントラスト評価ルーチンの呼び出し元のステップＳ３０９に戻る。 In step S359, the process returns to step S309 of the caller of the contrast evaluation routine.
図３（ｆ）を用いて相関評価ルーチンによる相関評価動作の詳細を説明する。ステップＳ３６１は相関評価動作の開始を示している。 Details of the correlation evaluation operation by the correlation evaluation routine will be described with reference to FIG. Step S361 indicates the start of the correlation evaluation operation.
ステップＳ３６２では、コントラスト評価を行う評価枠の大きさを設定する。評価枠の大きさの決定方法はコントラストＡＦの時と同様に決定すれば良い。 In step S362, the size of an evaluation frame for performing contrast evaluation is set. The method for determining the size of the evaluation frame may be determined in the same manner as in contrast AF.
ステップＳ３６３からステップＳ３６５はループを形成している。このループは評価画素数（評価枠の大きさに対応する）に対応したループになっている。 Steps S363 to S365 form a loop. This loop is a loop corresponding to the number of evaluation pixels (corresponding to the size of the evaluation frame).
ステップＳ３６４はいわゆる相関を計算する。ここでの相関はＡ像とＢ像の差の絶対値を加算している。実際にはステップＳ３６３からステップＳ３６５のループによって加算が実行される。ここでは相関計算方法の一例としてＡ像とＢ像の差の絶対値を用いたが、別の相関計算方法も活用することも可能である。 Step S364 calculates a so-called correlation. The correlation here is the addition of the absolute value of the difference between the A and B images. Actually, the addition is executed by the loop from step S363 to step S365. Here, the absolute value of the difference between the A image and the B image is used as an example of the correlation calculation method, but another correlation calculation method can also be used.
ステップＳ３６６でステップＳ３６４において計算された相関値を評価値として設定する。 In step S366, the correlation value calculated in step S364 is set as an evaluation value.
ステップＳ３６７で、相関評価ルーチンの呼び出し元のステップＳ３１７に戻る。 In step S367, the process returns to step S317 of the caller of the correlation evaluation routine.
次に図４を用いて像シフトおよび像生成を模式的に示し、像の再構成によるコントラスト計算の有用性について述べる。 Next, image shift and image generation are schematically shown in FIG. 4, and the usefulness of contrast calculation by image reconstruction will be described.
図４（ａ）、（ｂ）、（ｃ）において、図４（ｂ）は実際に撮像素子６が存在して画像を取得した面を、図４（ａ）は図４ｂ）よりも物体側の再構成面（再構成面１とする）をそれぞれ示す。また、図４（ｃ）は図４（ｂ）よりも物体側から遠い側の再構成面（再構成面２とする）を示している。
4 (a), 4 (b), and 4 (c), FIG. 4 (b) shows the surface where the
図４（ｂ）において、X1,i、X2,i、X3,i、X4,i、X5,i、はそれぞれ瞳領域１、２、３、４、５を通過してマイクロレンズXiに入射して得られた画像データを示している。すなわち、添え字のうち前半は通過する瞳領域を、後半は画素の番号を示している。また、図４においても説明を簡単にするためにデータを１次元的な広がりしかもたないものとして記述している。物理的な位置との関係においては、X1,iは図２（ｃ）の２２１領域から得られるデータを、X2,iは図２（ｃ）の２２２領域から得られるデータを、以下添え字の３、４、５は領域２２３、２２４、２２５に対応していることを示している。
In FIG. 4B, X 1, i , X 2, i , X 3, i , X 4, i , X 5, i pass through the pupil regions 1, 2, 3, 4, 5 respectively and are microscopic. It shows the image data obtained by entering the lens X i. That is, of the subscripts, the first half indicates the passing pupil region, and the second half indicates the pixel number. Also, in FIG. 4, data is described as having only a one-dimensional spread for the sake of simplicity. In relation to the physical position, X1 , i is the data obtained from the
取得面での画像を生成するためには、図４（ｂ）にあるように、マイクロレンズXiに入射したデータを加算すればよい。具体的には、Si = X1,I + X2,i + X3,i + X4,i + X5,iでXiに入射した光の角度方向の積分値を得ることができる。これにより通常のカメラと同様の像が生成される。 In order to generate an image on the acquisition plane, data incident on the microlens X i may be added as shown in FIG. Specifically, the integrated value in the angular direction of the light incident on X i can be obtained with S i = X 1, I + X 2, i + X 3, i + X 4, i + X 5, i . As a result, an image similar to that of a normal camera is generated.
次に再構成面１での像の生成方法を考える。図２で説明したように、本実施例の撮影光学系は、各画素に入射する光束を特定の瞳領域に限定しているために、入射角度が既知である。この角度に沿って再構成面での各画素の位置を再構成する。具体的にはX1,iのように瞳領域の添え字が１のものは図４（ｄ）において４１に示すような角度で入射しているとする。以下瞳領域の添え字２，３，４，５はそれぞれ４２，４３，４４，４５に対応しているとする。この時再構成面１でのマイクロレンズXiに入射した光束は、取得面においては、Xi-2からXi+2に分散して入射していることになる。より具体的には、X1,i-2、X2,i-1、X3,i、X4,i+1、X5,i+2に分散している。Xiに限らず再構成面１での像を復元するためには、入射角度に応じて像をシフトさせて加算すれば良いことが分かる。再構成面１での像を生成するためには、瞳領域の添え字が１のものは右に２画素シフト、瞳領域の添え字が２のものは右に１画素シフト、瞳領域の添え字が３のものはシフトなしとする。また、瞳領域の添え字が４のものは左に１画素シフト、瞳領域の添え字が５のものは左に２画素シフトする。これにより入射角度に応じたシフトを与えることができる。その後図４（ａ）の縦方向に加算することで再構成面１でのデータを得ることができる。具体的には、Si = X1,i-2 + X2,i-1 + X3,i + X4,i+1 + X5,i+2で再構成面１において、Xiに入射した光の角度方向の積分値を得ることができる。これにより再構成面での画像が得られた。
Next, a method for generating an image on the reconstruction plane 1 will be considered. As described with reference to FIG. 2, the imaging optical system of the present embodiment limits the luminous flux incident on each pixel to a specific pupil region, so the incident angle is known. The position of each pixel on the reconstruction plane is reconstructed along this angle. Specifically, it is assumed that a pupil region with a subscript of 1 such as X1 , i is incident at an angle as indicated by 41 in FIG. Hereinafter, it is assumed that the
ここで、再構成面１において、Xiに輝点があったとすると、取得面においてはX1,i-2、X2,i-1、X3,i、X4,i+1、X5,i+2に分散していわゆるボケ状態にある。しかしながら、上述した再構成面１での像を生成すると、再びXiに輝点が生成されコントラストの高い像が得られる。すなわち像を再構成してコントラストを計算することで、いわゆるコントラストＡＦを行うことが可能となる。
Here, in the reconstruction plane 1, if you had bright spots X i, the
また、図４（ｃ）から分かるように、再構成面２においても再構成面と全く同様に像を生成することができる。ただ、再構成面を配置する方向が異なるので（物体に対して反対側）シフトさせる方向を反転させれば良いだけである。
Further, as can be seen from FIG. 4C, an image can be generated on the
図２、図３および図４を用いて説明した様に、画像を１度しか読みださずに、像を再構成してコントラストを行うことでコントラスト評価値を得ることは可能であるが、この時のボケの再現状態に着目する。 As described with reference to FIGS. 2, 3, and 4, it is possible to obtain a contrast evaluation value by reconstructing an image and performing contrast without reading the image only once. Attention is paid to the reproduction state of blur at this time.
すなわち図４（ａ）の説明において、“再構成面１において、Xiに輝点があったとすると取得面においてはX1,i-2、X2,i-1、X3,i、X4,i+1、X5,i+2に分散していわゆるボケ状態にある。”と説明したが、ボケを正確に表現するためには各瞳領域の情報が必要になる。極端な例として、１つの瞳領域しか用いない場合は、像の再構成によってはボケが再現されないことになる。これはコントラストＡＦを行う場合は広い瞳領域の情報を選択することに対応する。
That is, in the description of FIG. 4 (a), in the "reconstruction plane 1, X 1, i-2 is the acquisition surface that there was a bright spot in the X i, X 2, i- 1,
一方で、位相差ＡＦを行う場合は、基線長を安定させるために特定の２つの瞳領域に対応する情報を選択することが好ましい。 On the other hand, when performing phase difference AF, it is preferable to select information corresponding to two specific pupil regions in order to stabilize the baseline length.
図５を用いて画像の現像（再構成）をさらに説明する。本実施例では、ＡＦモードに応じて画素選択モードを決定し、決定された画素選択モードに従って撮像素子６から画素信号を読み出している（Ｓ３０５、Ｓ３１４）。本実施例のＡＦ動作では、画素信号の読み出しはこれ一回であり、コントラストＡＦ動作において評価値を得るために生成（現像）される再構成画像は、上記一回の読み出しで得られた画素信号から所定の方法で生成される。
Image development (reconstruction) will be further described with reference to FIG. In this embodiment, the pixel selection mode is determined according to the AF mode, and the pixel signal is read from the
図３及び４を用いて説明した様に、いわゆる現像においては像をシフトさせた後に加算を行っている。本実施例の測距動作に適した画素信号を得るためには、適当な間引きを行いながら加算を実施する。なお、間引きの必要性については後述する。図５は、画素を間引き率１／２で間引きながら読み出した画素信号からコントラストＡＦのための像の再構成処理を行っている様子を示す。図５（ａ）は撮像素子がある面での像の再構成を（図４（ｂ）に対応）、図５（ｂ）は図５（ａ）よりも物体側にある面での再構成を（図４（ａ）に対応）それぞれ示している。なお、本実施例の場合、図５の例で読み出される画素は、ＡＦモードに対応した画素選択モード（Ｓ３０４）で選択される画素である。 As described with reference to FIGS. 3 and 4, in so-called development, addition is performed after the image is shifted. In order to obtain a pixel signal suitable for the distance measuring operation of this embodiment, addition is performed while performing appropriate thinning. The necessity for thinning will be described later. FIG. 5 shows a state in which image reconstruction processing for contrast AF is performed from pixel signals read out while thinning out pixels at a thinning rate of 1/2. 5A shows the reconstruction of an image on the surface where the image sensor is present (corresponding to FIG. 4B), and FIG. 5B shows the reconstruction on the surface closer to the object side than FIG. 5A. (Corresponding to FIG. 4A), respectively. In the case of the present embodiment, the pixels read out in the example of FIG. 5 are pixels selected in the pixel selection mode (S304) corresponding to the AF mode.
図５（ａ）の例では１／２に画素を間引きながらすべての瞳領域を含むように再構成像の１画素を形成するので（Nθ個加算すれば良い）、２つのマイクロレンズに対して選択された画素を加算して再構成画像の１画素の信号を生成する。すなわち一番左のマイクロレンズ下の画素２２１，２２３，２２５に対応する信号を、その隣のマイクロレンズ下の画素２２２，２２４に対応する信号と加算してコントラストＡＦ評価を行う像の１画素とする。以下、図５（ａ）に示したようにそれぞれ２つのマイクロレンズに対応する画素の光電変換信号を選択して加算していけば良い。図５では、加算後の信号（コントラストＡＦ評価を行う像の１画素）を加算１、加算２、という形で図示した。
In the example of FIG. 5A, since one pixel of the reconstructed image is formed so as to include all pupil regions while thinning out the pixels to 1/2 (N θ may be added), for two microlenses The selected pixels are added to generate a signal for one pixel of the reconstructed image. That is, a signal corresponding to the
図５（ｂ）の再構成においては、図４に示したようにシフトさせながら加算を行う。すなわち画素２２１に対応する信号は図５（ｂ）において図５（ａ）に較べて２つ右の加算ポイントに、画素２２に対応する信号は図５（ｂ）において１つ右の加算ポイントに連結する。また、画素２２３に対応する信号は図５（ｂ）において図５（ａ）と同じ加算ポイントに、画素２２４に対応する信号は図５（ｂ）において１つ左の加算ポイントに、画素２２５に対応する信号は図５（ｂ）において２つ左の加算ポイントに連結する。これにより、再構成像を得ることが出来る。
In the reconstruction shown in FIG. 5B, addition is performed while shifting as shown in FIG. That is, the signal corresponding to the
図６を用いて本発明に係わる画素選択構成を説明する。 A pixel selection configuration according to the present invention will be described with reference to FIG.
図６（ａ）はコントラストＡＦに適した読み出し方法（すなわち第１の画素選択）を、図６（ｂ）は位相差ＡＦに適した読み出し方法（すなわち第２の画素選択）をそれぞれ示す。図６（ｃ）はコントラストＡＦに適した読み出し位置を２次元的に示す図である。図６（ｄ）は位相差ＡＦに適した読み出し位置を２次元的に示す図である。 FIG. 6A shows a reading method suitable for contrast AF (ie, first pixel selection), and FIG. 6B shows a reading method suitable for phase difference AF (ie, second pixel selection). FIG. 6C is a diagram two-dimensionally showing a reading position suitable for contrast AF. FIG. 6D is a diagram two-dimensionally showing a reading position suitable for the phase difference AF.
図６において、図２と同じ部分は同じ符号を付して示す。 6, the same parts as those in FIG. 2 are denoted by the same reference numerals.
図６（ａ）のコントラストＡＦに適した画素選択においては、前述した様に全ての瞳領域に対応するために、ここでは４個に１個の割合で画素を選択するようにしている。この画素選択ピッチは角度の分割数Nθと互いに素になるように、例えば適宜設定すればよい。この設定はカメラユニットの操作検出部１０を介して設定するようにしてもよいし、カメラシステム制御部５に設定機能を持たせてもよい。この場合、測距動作では、Ｓ３０２において設定情報を取得し、それに基づいて画素選択を設定する。なお、後述するように、画素選択ピッチは測距精度を維持できる範囲で設定されることが必要である。
In the pixel selection suitable for the contrast AF in FIG. 6A, in order to correspond to all the pupil regions as described above, the pixels are selected at a rate of 1 in 4 here. The pixel selecting pitch so that the prime to the angle of the division number N theta, for example may be set as appropriate. This setting may be set via the
このようにすることで図６の例では４つのマイクロレンズ下にある画素で１つの周期ですべての瞳領域の信号を取得できる。さらに具体的には図６（ａ）の例では、一番左のマイクロレンズに対応して画素２２１，２２５に対応する画素信号（図６の信号では１，５と記載している）を選択する。その次のマイクロレンズに対しては画素２２４に対応する信号（図６の信号では４と記載している）を、その次のマイクロレンズに対しては画素２２３に対応する信号を（図６の信号では３と記載している）を選択する。さらにその次のマイクロレンズに対しては画素２２２に対応する信号（図６の信号では２と記載している）を選択し、この４つのマイクロレンズでコントラスト評価用の１画素を形成するように加算がなされる。
In this way, in the example of FIG. 6, the signals of all the pupil regions can be acquired with one cycle with the pixels under the four microlenses. More specifically, in the example of FIG. 6A, the pixel signals corresponding to the
図６（ａ）では１次元で説明を行ったが、これは容易に２次元に拡張できる。図６（ｃ）は具体的に２次元的な広がりをもった面でコントラストＡＦに適した画素選択を示した図である。 Although FIG. 6A has been described in one dimension, this can be easily extended to two dimensions. FIG. 6C is a diagram specifically showing pixel selection suitable for contrast AF on a plane having a two-dimensional spread.
図６（ｃ）において黒く塗った画素は選択される画素を示しており、横方向には図６（ａ）で示したように４個に１個の画素を選択するようにするとともに、縦方向には４ラインにつき１ラインを１画素ずつ横にずらしながら選択している。このようにすることで、領域６０で図示した４ｘ４のマイクロレンズに対して５ｘ５＝２５の瞳領域に対応する画素が選択されていることが分かる。
In FIG. 6C, pixels painted in black indicate selected pixels, and in the horizontal direction, one pixel is selected out of four as shown in FIG. In the direction, one line is selected for every four lines while shifting one pixel at a time. By doing so, it can be seen that the pixels corresponding to the pupil region of 5 × 5 = 25 are selected for the 4 × 4 microlens illustrated in the
図６（ａ）および図６（ｃ）に示したように、第１の画素選択モードでは一定周期ですべての瞳領域に対応する画素が含まれるように画素が選択される。 As shown in FIGS. 6A and 6C, in the first pixel selection mode, pixels are selected so that pixels corresponding to all pupil regions are included at a constant period.
図６（ｂ）の位相差ＡＦに適した画素選択においては、特定の２つの瞳領域に対応する画素のみを選択する。さらに具体的には図６（ｂ）の例では一番左のマイクロレンズ下から画素２２２，２２４に対応する信号が（図６の信号では２，４と記載している）、その２つ隣りのマイクロレンズ下からも同じく画素２２２，２２４に対応する信号が選択される。さらに２つ隣りのマイクロレンズ下からも同じく画素２２２，２２４に対応する信号が選択される。このように画素２２２に対応する画素のみを並べて位相差計算におけるＡ像を形成し、同様に画素２２４に対応する画素のみを並べて位相差計算におけるＢ像を形成する。この２つの像から図３（ｆ）に示したように相関を計算することで最も相関が良くなる位相差を求める。さらにはここで選択した画素、さらには対応する瞳領域の情報からいわゆる三角測量の原理によって被写体までの距離を求めることが可能となる。
In pixel selection suitable for the phase difference AF in FIG. 6B, only pixels corresponding to two specific pupil regions are selected. More specifically, in the example of FIG. 6B, signals corresponding to the
図６（ｂ）では１次元で説明を行ったが、これは容易に２次元に拡張できる。図６（ｄ）は具体的に２次元的な広がりをもった面で位相差ＡＦに適した画素の選択位置を示した図である。 Although FIG. 6B has been described in one dimension, this can be easily extended to two dimensions. FIG. 6D is a diagram showing pixel selection positions suitable for phase difference AF on a surface having a two-dimensional spread.
図６（ｄ）において黒く塗った画素は選択される画素を示している。横方向には図６（ｂ）で示したように、２つのマイクロレンズに１対（２個）の画素を選択するとともに、縦方向には図６（ｂ）で選択されるマイクロレンズが交互になるようにマイクロレンズの位置をずらしながら画素を選択している。 In FIG. 6D, pixels painted in black indicate selected pixels. As shown in FIG. 6B in the horizontal direction, a pair of (two) pixels are selected for the two microlenses, and the microlenses selected in FIG. 6B are alternately arranged in the vertical direction. The pixels are selected while shifting the position of the microlens so that
図６（ｂ）および図６（ｄ）に示したように、第２の画素選択モードでは特定の２つの瞳領域に対応する画素を選択するように画素が決定される。 As shown in FIGS. 6B and 6D, in the second pixel selection mode, pixels are determined so as to select pixels corresponding to two specific pupil regions.
ここまで図６を用いて説明してきたように、いわゆる測距動作においては、撮像素子６のすべての画素を選択していない。これは画素の読み出しおよび処理には一定の時間がかかるため、測距精度を維持できる範囲の間引き率で画素の間引きを行なっているためである。この間引き動作により適当な測距精度を維持しながら測距動作を高速化して、軽快な応答を実現している。
As described so far with reference to FIG. 6, in the so-called ranging operation, not all the pixels of the
図７を用いて本実施例に適用可能な別の光学系の例について説明する。図７は物体（被写体）からの光線が撮像素子６上に結像する状態を模式的に示した図である。同図において、図１及び図２と同じ部分は同じ符号を付して示す。
An example of another optical system applicable to this embodiment will be described with reference to FIG. FIG. 7 is a diagram schematically showing a state in which light rays from an object (subject) form an image on the
図７（ａ）は図２で説明した光学系と対応しており、撮影光学系３の結像面近傍にＭＬＡ２００を配置した例である。図７（ｂ）は撮影光学系３の結像面よりも物体寄りにＭＬＡ２００を配置した例である。図７（ｃ）は撮影光学系３の結像面よりも物体から遠い側にＭＬＡ２００を配置した例である。
FIG. 7A corresponds to the optical system described in FIG. 2, and is an example in which the
図７において、６は撮像素子を、２００はＭＬＡを、２３１から２３５は図で用いた瞳領域を、７１は物体平面を、７１ａ，７１ｂは物体上の適当な点を、７２は撮影光学系の瞳平面を示す。また、２２０ｅ、２２０ｆ、２２０ｇ，２２０ｈ，２２０ｉ，２２０ｊ，２２０ｋ，２２０ｌ，２２０ｍはＭＬＡ２００上の特定のマイクロレンズをそれぞれ示している。図７（ｂ）および（ｃ）に示した６ａは仮想的な撮像素子を、２００ａは仮想的なＭＬＡを示している。これらは、図７（ａ）との対応関係を明確にするために参考に示した。また、物体上の点７１ａから出て瞳平面上の領域２３１および２３３を通過する光束を実線で、物体上の点７１ｂから出て瞳平面上の領域２３１および２３３を通過する光束を破線で図示した。
In FIG. 7, 6 is an image sensor, 200 is an MLA, 231 to 235 are pupil regions used in the figure, 71 is an object plane, 71a and 71b are appropriate points on the object, and 72 is a photographing optical system. The pupil plane is shown. Also, 220e, 220f, 220g, 220h, 220i, 220j, 220k, 220l, and 220m indicate specific microlenses on the
図７（ａ）の例では、図２でも説明したように、撮影光学系３の結像面近傍にＭＬＡ２００を配置することで、撮像素子６と撮影光学系の瞳平面７２が共役の関係にある。さらに、物体平面７１とＭＬＡ２００が共役の関係にある。このため物体上の点７１ａから出た光束はマイクロレンズ２２０ｅに、７１ｂを出た光束はマイクロレンズ２２０ｆに到達し、領域２３１から２３５それぞれを通過した光束はマイクロレンズ下に設けられたそれぞれ対応する画素に到達する。
In the example of FIG. 7A, as described with reference to FIG. 2, the
図７（ｂ）の例では、マイクロレンズアレイ２００で撮影光学系３からの光束を結像させ、その結像面に撮像素子６を設ける。このように配置することで、物体平面７１と撮像素子６は共役の関係にある。物体上の点７１ａから出で瞳平面上の領域２３１を通過した光束はマイクロレンズ２２０ｇに到達し、物体上の点７１ａから出で瞳平面上の領域２３３を通過した光束はマイクロレンズ２２０ｈに到達する。物体上の点７１ｂから出で瞳平面上の領域２３１を通過した光束はマイクロレンズ２２０ｈに到達し、物体上の点７１ｂから出で瞳平面上の領域２３３を通過した光束はマイクロレンズ２２０ｉに到達する。各マイクロレンズを通過した光束は、マイクロレンズ下に設けられたそれぞれ対応する画素に到達する。このように物体上の点と、瞳平面上の通過領域によって、異なる位置にそれぞれ結像する。これらを、仮想的な撮像面６ａ上の位置に並べなおせば、図７（ａ）と同様の情報（再構成画像)）を得ることができる。すなわち、通過した瞳領域（入射角度）と撮像素子上の位置の情報を得ることができる。
In the example of FIG. 7B, the light beam from the photographing
図７（ｃ）の例では、マイクロレンズアレイ２００で撮影光学系３からの光束を再結像させ（一度結像した光束が拡散する状態にあるものを結像させるので再結像と呼んでいる）、その結像面に撮像素子６を設ける。このように配置することで、物体平面７１と撮像素子６は共役の関係にある。物体上の点７１ａから出で瞳平面上の領域２３１を通過した光束はマイクロレンズ２２０ｌに到達し、物体上の点７１ａから出で瞳平面上の領域２３３を通過した光束はマイクロレンズ２２０ｊに到達する。物体上の点７１ｂから出で瞳平面上の領域２３１を通過した光束はマイクロレンズ２２０ｍに到達し、物体上の点７１ｂから出で瞳平面上の領域２３３を通過した光束はマイクロレンズ２２０ｌに到達する。各マイクロレンズを通過した光束は、マイクロレンズ下に設けられたそれぞれ対応する画素に到達する。図７（ｂ）と同様に、仮想的な撮像面６ａ上の位置に並べなおせば、図７（ａ）と同様の情報を得ることができる。すなわち、通過した瞳領域（入射角度）と撮像素子上の位置の情報を得ることができる。
In the example of FIG. 7C, the
なお、図７ではＭＬＡ（位相変調素子）を瞳分割手段として用いて、位置情報と角度情報を取得可能な例を示したが、位置情報と角度情報（瞳の通過領域を制限することと等価）を取得可能なものであれば他の光学構成も利用可能である。例えば、適当なパターンを施したマスク（ゲイン変調素子）を撮影光学系の光路中に挿入する方法も利用できる。 Although FIG. 7 shows an example in which the position information and the angle information can be acquired using the MLA (phase modulation element) as the pupil dividing means, the position information and the angle information (equivalent to restricting the passing region of the pupil). Other optical configurations can be used as long as they can acquire the above. For example, a method of inserting a mask (gain modulation element) with an appropriate pattern into the optical path of the photographing optical system can be used.
また上述した本発明の第１の実施例によれば、位相差ＡＦと像の再構成によるコントラストＡＦの双方を行う撮像装置において、各ＡＦに適切な画素選択を備えたオートフォーカス装置を実現することが可能となる。 In addition, according to the first embodiment of the present invention described above, in the imaging apparatus that performs both the phase difference AF and the contrast AF based on the image reconstruction, an autofocus apparatus having appropriate pixel selection for each AF is realized. It becomes possible.
なお、本実施例においてはＡＦ動作を撮像装置の撮影予備動作（エイミングやフレーミングと呼ばれる動作）で行う場合を中心に記載をした。しかし、本実施例に係わる撮像装置の信号には視差信号が含まれているので、撮像後にピント状態を変化させながら像を得ることが出来るので、このような撮影後のピント合わせ（リフォーカス）においても本発明は適用可能である。 In the present embodiment, the case where the AF operation is performed by the photographing preliminary operation (operation called aiming or framing) of the imaging apparatus is mainly described. However, since the signal of the imaging apparatus according to the present embodiment includes a parallax signal, an image can be obtained while changing the focus state after imaging. The present invention is also applicable.
また、撮像装置でリフォーカスを行う場合は背面表示部９上にタッチセンサを設けておき、ユーザーの指示した被写体に対してリフォーカスを行うことなどが考えられる。この時の動作を高速化するためにも本発明のオートフォーカス構成を利用することが可能である。 In addition, when performing refocusing with an imaging apparatus, a touch sensor may be provided on the rear display unit 9 to perform refocusing on a subject instructed by the user. In order to speed up the operation at this time, the autofocus configuration of the present invention can be used.
さらには、別途の情報処理装置（例えばＰＣやスマートフォン）等においても上記と同等のタッチパネルやポインタでのクリック等に対応してリフォーカスを行うことなどが考えられる。この場合にもリフォーカス動作を高速化するために本発明のオートフォーカス構成を利用することが可能である。 Furthermore, it is conceivable to perform refocusing in response to a touch panel equivalent to the above or a click with a pointer in a separate information processing apparatus (for example, a PC or a smartphone). In this case as well, the autofocus configuration of the present invention can be used to speed up the refocusing operation.
以上に説明したように、本実施例によれば、瞳分割手段を備えた撮像手段の構造に応じて適切に位相差ＡＦとコントラストＡＦを使い分けることが可能な撮像装置を提供するこができる。結果として、高速かつピント精度の高いＡＦを行うことを可能にした撮像装置を提供することが可能となる。 As described above, according to the present embodiment, it is possible to provide an imaging apparatus capable of appropriately using the phase difference AF and the contrast AF according to the structure of the imaging unit including the pupil dividing unit. As a result, it is possible to provide an imaging apparatus capable of performing AF with high speed and high focus accuracy.
前述した本発明の実施形態における画像符号化装置を構成する各手段、並びに画像符号化方法の各工程は、ＣＰＵのＲＡＭやＲＯＭなどに記憶されたプログラムが動作することによって実現できる。このプログラム及び前記プログラムを記憶したコンピュータ読み取り可能な記憶媒体は本発明に含まれる。 Each means constituting the image encoding device and each step of the image encoding method in the embodiment of the present invention described above can be realized by operating a program stored in a RAM or ROM of a CPU. This program and a computer-readable storage medium storing the program are included in the present invention.
また、本発明は、例えば、システム、装置、方法、プログラムもしくは記憶媒体等としての実施形態も可能であり、具体的には、複数の機器から構成されるシステムに適用してもよいし、また、一つの機器からなる装置に適用してもよい。 In addition, the present invention can be implemented as, for example, a system, apparatus, method, program, storage medium, or the like. Specifically, the present invention may be applied to a system including a plurality of devices. The present invention may be applied to an apparatus composed of a single device.
なお、本発明は、前述した実施形態の機能を実現するソフトウェアのプログラム（実施形態では図３に示すフローチャートに対応したプログラム）を、システムまたは装置に直接、または遠隔から供給する場合も含む。そして、そのシステムまたは装置のコンピュータが前記供給されたプログラムコードを読み出して実行することによっても達成される場合を含む。 The present invention includes a case where a software program (in the embodiment, a program corresponding to the flowchart shown in FIG. 3) for realizing the functions of the above-described embodiments is directly or remotely supplied to a system or apparatus. This includes the case where the system or the computer of the apparatus is also achieved by reading and executing the supplied program code.
したがって、本発明の機能処理をコンピュータで実現するために、前記コンピュータにインストールされるプログラムコード自体も本発明を実現するものである。つまり、本発明は、本発明の機能処理を実現するためのコンピュータプログラム自体も含まれる。その場合、プログラムの機能を有していれば、オブジェクトコード、インタプリタにより実行されるプログラム、ＯＳに供給するスクリプトデータ等の形態であってもよい。 Accordingly, since the functions of the present invention are implemented by computer, the program code installed in the computer also implements the present invention. In other words, the present invention includes a computer program itself for realizing the functional processing of the present invention. In that case, as long as it has the function of a program, it may be in the form of object code, a program executed by an interpreter, script data supplied to the OS, and the like.
プログラムを供給するための記憶媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスクなどがある。さらに、ＭＯ、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷ、磁気テープ、不揮発性のメモリカード、ＲＯＭ、ＤＶＤ（ＤＶＤ−ＲＯＭ、ＤＶＤ−Ｒ）などもある。 Examples of the storage medium for supplying the program include a flexible disk, a hard disk, an optical disk, and a magneto-optical disk. Further, there are MO, CD-ROM, CD-R, CD-RW, magnetic tape, nonvolatile memory card, ROM, DVD (DVD-ROM, DVD-R) and the like.
その他、プログラムの供給方法としては、クライアントコンピュータのブラウザを用いてインターネットのホームページに接続する方法がある。そして、前記ホームページから本発明のコンピュータプログラムそのもの、もしくは圧縮され自動インストール機能を含むファイルをハードディスク等の記憶媒体にダウンロードすることによっても供給できる。 As another program supply method, there is a method of connecting to a homepage on the Internet using a browser of a client computer. It can also be supplied by downloading the computer program itself of the present invention or a compressed file including an automatic installation function from a homepage to a storage medium such as a hard disk.
また、本発明のプログラムを構成するプログラムコードを複数のファイルに分割し、それぞれのファイルを異なるホームページからダウンロードすることによっても実現可能である。つまり、本発明の機能処理をコンピュータで実現するためのプログラムファイルを複数のユーザに対してダウンロードさせるＷＷＷサーバも、本発明に含まれるものである。 It can also be realized by dividing the program code constituting the program of the present invention into a plurality of files and downloading each file from a different homepage. That is, a WWW server that allows a plurality of users to download a program file for realizing the functional processing of the present invention on a computer is also included in the present invention.
また、その他の方法として、本発明のプログラムを暗号化してＣＤ−ＲＯＭ等の記憶媒体に格納してユーザに配布し、所定の条件をクリアしたユーザに対し、インターネットを介してホームページから暗号化を解く鍵情報をダウンロードさせる。そして、その鍵情報を使用することにより暗号化されたプログラムを実行してコンピュータにインストールさせて実現することも可能である。 As another method, the program of the present invention is encrypted, stored in a storage medium such as a CD-ROM, distributed to users, and encrypted from a homepage via the Internet to users who have cleared predetermined conditions. Download the key information to be solved. It is also possible to execute the encrypted program by using the key information and install the program on a computer.
また、コンピュータが、読み出したプログラムを実行することによって、前述した実施形態の機能が実現される。さらに、そのプログラムの指示に基づき、コンピュータ上で稼動しているＯＳなどが、実際の処理の一部または全部を行い、その処理によっても前述した実施形態の機能が実現され得る。 Further, the functions of the above-described embodiments are realized by the computer executing the read program. Furthermore, based on the instructions of the program, an OS or the like running on the computer performs part or all of the actual processing, and the functions of the above-described embodiments can be realized by the processing.
さらに、その他の方法として、まず記憶媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれる。そして、そのプログラムの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行い、その処理によっても前述した実施形態の機能が実現される。 As another method, a program read from a storage medium is first written in a memory provided in a function expansion board inserted into the computer or a function expansion unit connected to the computer. Then, based on the instructions of the program, the CPU or the like provided in the function expansion board or function expansion unit performs part or all of the actual processing, and the functions of the above-described embodiments are also realized by the processing.
以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。 As mentioned above, although preferable embodiment of this invention was described, this invention is not limited to these embodiment, A various deformation | transformation and change are possible within the range of the summary.
Claims (14)
測距方法に従って、前記瞳分割手段で分割される複数の瞳領域の各領域に対応する画素を選択する第１の画素選択モードと、前記複数の瞳領域の所定の異なる２つに対応する画素だけを選択する第２の画素選択モードを選択して設定する画素選択手段と、
前記設定された画素選択モードで選択される画素から出力される画素信号を取得する画素信号取得手段と、
前記取得された画素信号に基づいて、前記測距方法に従ったピント評価を行なうピント評価手段と、を備えることを特徴とする測距装置。 In a distance measuring apparatus that obtains a pixel signal output from an image sensor having a pupil dividing unit that restricts subject light incident on a pixel to a specific pupil region of a photographing optical system and performs focus evaluation according to a different distance measuring method.
A first pixel selection mode for selecting a pixel corresponding to each of the plurality of pupil regions divided by the pupil dividing unit according to a distance measuring method; and a pixel corresponding to two different predetermined ones of the plurality of pupil regions Pixel selection means for selecting and setting a second pixel selection mode for selecting only,
Pixel signal acquisition means for acquiring a pixel signal output from a pixel selected in the set pixel selection mode;
A distance measuring apparatus comprising: a focus evaluating unit that performs a focus evaluation according to the distance measuring method based on the acquired pixel signal.
前記画素選択手段は、前記撮影条件に基づいて前記測距方法を決定し、当該決定した測距方法に従って画素選択モードを設定することを特徴とする請求項１乃至４のいずれか一項に記載の測距装置。 It further comprises a shooting condition acquisition means for acquiring a shooting condition, and the shooting condition includes at least information of the distance measuring method, a distance measuring point, and a distance measuring frame,
The said pixel selection means determines the said ranging method based on the said imaging | photography condition, and sets a pixel selection mode according to the determined ranging method, The Claim 1 thru | or 4 characterized by the above-mentioned. Ranging device.
測距方法に従って、前記瞳分割手段で分割される複数の瞳領域の各領域に対応する画素を選択する第１の画素選択モードと、前記複数の瞳領域の所定の異なる２つに対応する画素だけを選択する第２の画素選択モードを選択して設定する画素選択ステップと、
前記設定された画素選択モードで選択される画素から出力される画素信号を取得する画素信号取得ステップと、
前記取得された画素信号に基づいて、前記測距方法に従ったピント評価を行うピント評価ステップと、
を備えることを特徴とするピント評価方法。 In a focus evaluation method for acquiring a pixel signal output from an image pickup device including a pupil dividing unit that restricts subject light incident on a pixel to a specific pupil region of a photographing optical system and performing focus evaluation according to a different distance measuring method.
A first pixel selection mode for selecting a pixel corresponding to each of the plurality of pupil regions divided by the pupil dividing unit according to a distance measuring method; and a pixel corresponding to two different predetermined ones of the plurality of pupil regions A pixel selection step of selecting and setting a second pixel selection mode for selecting only;
A pixel signal acquisition step of acquiring a pixel signal output from a pixel selected in the set pixel selection mode;
A focus evaluation step for performing focus evaluation according to the distance measuring method based on the acquired pixel signal;
A focus evaluation method comprising:
コンピュータを、
測距方法に従って、前記瞳分割手段で分割される複数の瞳領域の各領域に対応する画素を選択する第１の画素選択モードと、前記複数の瞳領域の所定の異なる２つに対応する画素だけを選択する第２の画素選択モードを選択して設定する画素選択手段、
前記設定された画素選択モードで選択される画素から出力される画素信号を取得する画素信号取得手段、
前記取得された画素信号に基づいて、前記測距方法に従ったピント評価を行うピント評価手段、
として機能させるためのプログラム。 Controls a distance measuring device that obtains pixel signals output from an image sensor equipped with a pupil dividing means that restricts subject light incident on a pixel to a specific pupil region of the photographing optical system and performs focus evaluation according to different distance measuring methods. In the program to
Computer
A first pixel selection mode for selecting a pixel corresponding to each of the plurality of pupil regions divided by the pupil dividing unit according to a distance measuring method; and a pixel corresponding to two different predetermined ones of the plurality of pupil regions Pixel selection means for selecting and setting a second pixel selection mode for selecting only,
Pixel signal acquisition means for acquiring a pixel signal output from a pixel selected in the set pixel selection mode;
Focus evaluation means for performing focus evaluation according to the distance measuring method based on the acquired pixel signal,
Program to function as.
撮像素子と、
前記撮像素子の画素へ入射する被写体光を前記撮影光学系の特定の瞳領域に制限する瞳分割手段と、
請求項１乃至８のいずれか一項に記載の測距装置と、
前記測距装置のピント評価に従って、前記撮影光学系を駆動する駆動手段と、
撮影条件に従って、前記撮影光学系および測距装置を制御して被写体の撮影を行う制御手段と、
を備えることを特徴とする撮像装置。 Photographic optics,
An image sensor;
Pupil dividing means for limiting subject light incident on the pixels of the image sensor to a specific pupil region of the photographing optical system;
A distance measuring device according to any one of claims 1 to 8,
Driving means for driving the photographing optical system according to the focus evaluation of the distance measuring device;
Control means for controlling the photographing optical system and the distance measuring device to photograph a subject according to photographing conditions;
An imaging apparatus comprising:
前記撮影条件は、少なくとも前記測距方法、測距点、測距枠の情報を含むことを特徴とする請求項１３に記載の撮像装置。 Setting means for setting the shooting conditions;
The imaging apparatus according to claim 13, wherein the imaging condition includes at least information on the distance measurement method, a distance measurement point, and a distance measurement frame.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012172938A JP6188290B2 (en) | 2012-08-03 | 2012-08-03 | Ranging device, imaging device, focus evaluation method, program, and storage medium |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012172938A JP6188290B2 (en) | 2012-08-03 | 2012-08-03 | Ranging device, imaging device, focus evaluation method, program, and storage medium |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2014032311A true JP2014032311A (en) | 2014-02-20 |
| JP2014032311A5 JP2014032311A5 (en) | 2015-09-17 |
| JP6188290B2 JP6188290B2 (en) | 2017-08-30 |
Family
ID=50282174
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2012172938A Expired - Fee Related JP6188290B2 (en) | 2012-08-03 | 2012-08-03 | Ranging device, imaging device, focus evaluation method, program, and storage medium |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6188290B2 (en) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2015158736A (en) * | 2014-02-21 | 2015-09-03 | キヤノン株式会社 | image processing apparatus, control method, program, and recording medium |
| JP2015200826A (en) * | 2014-04-09 | 2015-11-12 | キヤノン株式会社 | Focus adjustment device, image-capturing device, and focus adjustment method |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007004471A (en) * | 2005-06-23 | 2007-01-11 | Nikon Corp | Image synthesis method and image pickup apparatus |
| JP2007065330A (en) * | 2005-08-31 | 2007-03-15 | Canon Inc | Camera |
| JP2009258610A (en) * | 2008-03-17 | 2009-11-05 | Ricoh Co Ltd | Focal length detecting device, imaging apparatus, imaging method, camera, focusing device, and focusing method |
| JP2010066155A (en) * | 2008-09-11 | 2010-03-25 | Nikon Corp | Profile measuring apparatus |
| JP2010282085A (en) * | 2009-06-05 | 2010-12-16 | Canon Inc | Imaging apparatus |
| JP2012053315A (en) * | 2010-09-02 | 2012-03-15 | Canon Inc | Automatic focus adjustment device and imaging apparatus |
-
2012
- 2012-08-03 JP JP2012172938A patent/JP6188290B2/en not_active Expired - Fee Related
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007004471A (en) * | 2005-06-23 | 2007-01-11 | Nikon Corp | Image synthesis method and image pickup apparatus |
| JP2007065330A (en) * | 2005-08-31 | 2007-03-15 | Canon Inc | Camera |
| JP2009258610A (en) * | 2008-03-17 | 2009-11-05 | Ricoh Co Ltd | Focal length detecting device, imaging apparatus, imaging method, camera, focusing device, and focusing method |
| JP2010066155A (en) * | 2008-09-11 | 2010-03-25 | Nikon Corp | Profile measuring apparatus |
| JP2010282085A (en) * | 2009-06-05 | 2010-12-16 | Canon Inc | Imaging apparatus |
| JP2012053315A (en) * | 2010-09-02 | 2012-03-15 | Canon Inc | Automatic focus adjustment device and imaging apparatus |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2015158736A (en) * | 2014-02-21 | 2015-09-03 | キヤノン株式会社 | image processing apparatus, control method, program, and recording medium |
| JP2015200826A (en) * | 2014-04-09 | 2015-11-12 | キヤノン株式会社 | Focus adjustment device, image-capturing device, and focus adjustment method |
Also Published As
| Publication number | Publication date |
|---|---|
| JP6188290B2 (en) | 2017-08-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6000520B2 (en) | Imaging apparatus and control method and program thereof | |
| JP5914192B2 (en) | Imaging apparatus and control method thereof | |
| JP6021306B2 (en) | Imaging apparatus and control method thereof | |
| JP6335434B2 (en) | Imaging apparatus, control method thereof, and program | |
| JP6397281B2 (en) | Imaging apparatus, control method thereof, and program | |
| JP5943596B2 (en) | Imaging device | |
| JP6220148B2 (en) | Imaging apparatus and control method thereof | |
| JP2009175680A (en) | Light receiving device, focal point detecting device and imaging device | |
| JP2006279546A (en) | Electronic camera, image processing program, and image processing method | |
| JP6120547B2 (en) | Image processing apparatus, image processing method and program, and imaging apparatus including image processing apparatus | |
| JP6188290B2 (en) | Ranging device, imaging device, focus evaluation method, program, and storage medium | |
| JP6198395B2 (en) | Imaging apparatus and control method thereof | |
| JP6400152B2 (en) | REPRODUCTION DEVICE, IMAGING DEVICE, AND REPRODUCTION DEVICE CONTROL METHOD | |
| JP5893412B2 (en) | Imaging apparatus and control method thereof | |
| JP6157290B2 (en) | REPRODUCTION DEVICE, REPRODUCTION DEVICE CONTROL METHOD, AND PROGRAM | |
| JP5968081B2 (en) | Imaging apparatus and control method thereof | |
| JP6188531B2 (en) | Imaging apparatus, control method thereof, and program | |
| JP6046922B2 (en) | FOCUS DETECTION DEVICE, IMAGING DEVICE, CONTROL METHOD, PROGRAM, AND RECORDING MEDIUM | |
| JP6039958B2 (en) | Image processing apparatus, imaging apparatus, control method, and program | |
| JP2016220016A (en) | Image processing apparatus, imaging apparatus, image processing method, and program | |
| JP6016567B2 (en) | Correlation calculation device, imaging device, correlation calculation method, program, and storage medium | |
| JP6320250B2 (en) | Image recording apparatus and method, and program | |
| JP2015025960A (en) | Focus detection system, focus detection method, program, and image capturing device | |
| JP6144880B2 (en) | Display device, display method, and imaging device including the display device | |
| JP6377225B2 (en) | Image processing apparatus, control method therefor, and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150803 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150803 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160531 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160602 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160729 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20161227 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170222 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170704 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170801 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 6188290 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| LAPS | Cancellation because of no payment of annual fees |