JP2021166411A - Imaging device, imaging system, method of driving imaging device, and method of driving imaging system - Google Patents
Imaging device, imaging system, method of driving imaging device, and method of driving imaging system Download PDFInfo
- Publication number
- JP2021166411A JP2021166411A JP2021116663A JP2021116663A JP2021166411A JP 2021166411 A JP2021166411 A JP 2021166411A JP 2021116663 A JP2021116663 A JP 2021116663A JP 2021116663 A JP2021116663 A JP 2021116663A JP 2021166411 A JP2021166411 A JP 2021166411A
- Authority
- JP
- Japan
- Prior art keywords
- signal
- output
- pixels
- pixel
- digital
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Transforming Light Signals Into Electric Signals (AREA)
- Focusing (AREA)
- Automatic Focus Adjustment (AREA)
- Studio Devices (AREA)
- Solid State Image Pick-Up Elements (AREA)
Abstract
Description
本発明は、複数の光電変換部を含む画素を複数有する撮像装置、撮像システムに関するものである。 The present invention relates to an image pickup apparatus and an image pickup system having a plurality of pixels including a plurality of photoelectric conversion units.
複数の光電変換部を含む画素を複数有し、一方の光電変換部に基づく信号と、他方の光電変換部の一部の光電変換部に基づく信号とを出力する撮像装置が知られている。この少なくとも2つの信号を用いた形態として、例えば位相差検出方式の焦点検出を行う焦点検出方法が提案されている。このような焦点検出方法に利用可能な信号を出力する撮像装置の一例として、1対の光電変換部を、2次元に配列したマイクロレンズアレイのマイクロレンズ毎に設けたものがある。特許文献1には、1つのマイクロレンズを介して光が入射される1対の光電変換部が出力する信号の加算、非加算を1対の光電変換部を有する画素単位で任意に行うことのできる撮像装置が提案されている。
An imaging device is known that has a plurality of pixels including a plurality of photoelectric conversion units and outputs a signal based on one photoelectric conversion unit and a signal based on a part of the photoelectric conversion units of the other photoelectric conversion unit. As a form using these at least two signals, for example, a focus detection method for performing focus detection by a phase difference detection method has been proposed. As an example of an imaging device that outputs a signal that can be used in such a focus detection method, there is a device in which a pair of photoelectric conversion units are provided for each microlens of a two-dimensionally arranged microlens array. In
また、特許文献2には、測距用の画素と撮像用の画素とを有する撮像装置が、静止画撮影モード、間引きモード、測距モードの3種類の読み出し方法で動作することが記載されている。静止画撮影モードでは、測距用の画素と撮像用の画素の画素信号が撮像装置から出力されるが、測距用の画素からの画素信号はその後の信号処理で使用せず、撮像用の画素信号のみを使用する。測距モードは、静止画撮影モードとは逆に、撮像用の画素からの画素信号をその後の信号処理で使用せず、測距用の画素からの画素信号を使用する形態である。間引きモードは、撮像装置から画素信号を出力させる際に、撮像用の画素からのみ画素信号を出力させ、測距用の画素からは画素信号を出力させない形態である。
Further,
特許文献1に記載の撮像装置では複数の光電変換部に基づく信号である画像取得用信号を得ると共に、位相差検出方式の焦点検出を行うための信号であり、一部の光電変換部に基づく信号である焦点検出用信号を高速に得る検討が充分になされていなかった。
The image pickup apparatus described in
特許文献2に記載の撮像装置では、画像取得用信号を得るためには静止画撮影モードと間引きモードの一方で動作を行い、焦点検出用信号を得るためには測距モードで動作を行うことが必要だった。よって、画像取得用信号と焦点検出用信号とを得るためには、複数回、固体撮像素子の画素を走査して画素信号を出力させる必要があった。
The image pickup apparatus described in
従って、特許文献1,2ともに、撮像装置から複数の光電変換部のうちの一部の光電変換部に基づく信号を高速に得ると共に、複数の光電変換部に基づく信号を得る検討が充分では無かった。
Therefore, in both
本発明は上記の課題を解決するために為されたものであり、一の態様は、行列状に配された複数の画素を有し、前記複数の画素の各々が、信号電荷を生成する複数の光電変換部を含むとともに、前記信号電荷に基づいた信号を出力する撮像装置であって、1フレーム期間内に、前記複数の画素の少なくとも一部の前記画素の各々は、各々が有するm個(mは整数)の前記光電変換部のうち、前記m個よりも少ないn個(nは整数)の前記光電変換部の前記信号電荷に基づいた第1の信号を出力し、前記1フレーム期間内に、前記複数の画素の各々が、各々が有する前記m個の前記光電変換部の前記信号電荷に基づいた第2の信号を出力し、前記撮像装置の出力する、前記第1の信号に基づく信号の個数が、前記撮像装置の出力する、前記第2の信号に基づく信号の個数よりも少ないことを特徴とする撮像装置である。 The present invention has been made to solve the above problems, and one embodiment has a plurality of pixels arranged in a matrix, and each of the plurality of pixels generates a signal charge. An imaging device that includes the photoelectric conversion unit of the above and outputs a signal based on the signal charge, and within one frame period, each of the at least a part of the plurality of pixels has m pieces of each. Among the photoelectric conversion units (m is an integer), n less than m (n is an integer), the first signal based on the signal charge of the photoelectric conversion unit is output, and the one frame period Within, each of the plurality of pixels outputs a second signal based on the signal charge of the m photoelectric conversion units each of the plurality of pixels, and outputs the second signal to the first signal output by the image pickup apparatus. The imaging device is characterized in that the number of based signals is smaller than the number of signals based on the second signal output by the imaging device.
また、一の態様は、撮像装置と、前記撮像装置から出力される信号に基づく信号を出力する焦点検出用信号処理部と、を有する撮像システムであって、前記撮像装置は、行列状に配された複数の画素を有し、前記複数の画素の各々が、信号電荷を生成する光電変換部を複数含み、さらに、前記撮像装置が前記複数の画素から前記信号を出力させる垂直走査回路を有し、1フレーム期間内に、前記複数の画素の少なくとも一部の前記画素の各々が、各々が有するm個(mは整数)の前記光電変換部のうち、前記m個よりも少ないn個(nは整数)の前記光電変換部の前記信号電荷に基づいた第1の信号を出力し、前記1フレーム期間内に、前記複数の画素の各々が、各々が有する前記m個の前記光電変換部の前記信号電荷に基づいた第2の信号を出力し、前記撮像装置が、前記複数の画素の前記第2の信号に基づく信号と、前記第1の信号に基づく信号とをそれぞれを前記焦点検出用信号処理部に出力し、前記焦点検出用信号処理部が、前記焦点検出用信号処理部に出力された、前記複数の画素の前記第1の信号に基づく前記信号のうち、前記複数の画素の一部の前記画素の前記第1の信号に基づく前記信号を出力し、前記複数の画素の他の前記画素の前記第1の信号に基づく前記信号を出力しないことを特徴とする撮像システムである。 Further, one embodiment is an imaging system including an imaging device and a focus detection signal processing unit that outputs a signal based on a signal output from the imaging device, and the imaging devices are arranged in a matrix. Each of the plurality of pixels includes a plurality of photoelectric conversion units that generate signal charges, and the imaging device has a vertical scanning circuit that outputs the signal from the plurality of pixels. Then, within one frame period, each of the at least a part of the plurality of pixels has n (m) of the photoelectric conversion units (m is an integer), which is less than m (m). A first signal based on the signal charge of the photoelectric conversion unit (n is an integer) is output, and within the one frame period, each of the plurality of pixels has m of the photoelectric conversion units. The second signal based on the signal charge is output, and the imaging device detects the focus of the signal based on the second signal of the plurality of pixels and the signal based on the first signal. Of the signals based on the first signal of the plurality of pixels output to the focus detection signal processing unit and output to the focus detection signal processing unit, the plurality of pixels An imaging system characterized in that the signal based on the first signal of a part of the pixels is output, and the signal based on the first signal of the other pixels of the plurality of pixels is not output. be.
また、一の態様は、行列状に配された複数の画素を有し、前記複数の画素の各々が、信号電荷を生成する光電変換部を複数含む撮像装置の駆動方法であって、前記駆動方法は、1フレーム期間内に、前記複数の画素の少なくとも一部の前記画素の各々に、各々が有するm個(mは整数)の前記光電変換部のうち、前記m個よりも少ないn個(nは整数)の前記光電変換部の前記信号電荷に基づいた第1の信号を出力させ、前記1フレーム期間内に、前記複数の画素の各々に、各々が有する前記m個の前記光電変換部の前記信号電荷に基づいた第2の信号を出力させ、前記第1の信号に基づく信号の個数を、前記第2の信号に基づく信号の個数よりも少なくして、前記第1の信号に基づく前記信号と前記第2の信号に基づく前記信号とを前記撮像装置に出力させることを特徴とする撮像装置の駆動方法である。 Further, one aspect is a method of driving an image pickup apparatus having a plurality of pixels arranged in a matrix, each of which includes a plurality of photoelectric conversion units that generate signal charges. The method is that, within one frame period, n of the m (m is an integer) photoelectric conversion units each of at least a part of the plurality of pixels have less than m. A first signal based on the signal charge of the photoelectric conversion unit (n is an integer) is output, and within the one frame period, each of the plurality of pixels has the m said photoelectric conversion. A second signal based on the signal charge of the unit is output, and the number of signals based on the first signal is made smaller than the number of signals based on the second signal to obtain the first signal. It is a driving method of an image pickup apparatus characterized by causing the image pickup apparatus to output the said signal based on the said signal and the said signal based on the second signal.
また、一の態様は、撮像装置と、前記撮像装置から出力される信号の信号処理を行う撮像システムの駆動方法であって、前記撮像装置は、行列状に配された複数の画素を有し、前記複数の画素の各々が、信号電荷を生成する光電変換部を複数含み、さらに、前記撮像装置が、マイクロレンズを複数有するレンズアレイを有し、1つの前記マイクロレンズで集光された光が前記画素の有する複数の前記光電変換部に入射し、前記駆動方法は、1フレーム期間内に、前記複数の画素の少なくとも一部の前記画素の各々に、各々が有するm個(mは整数)の前記光電変換部のうち、前記m個よりも少ないn個(nは整数)の前記光電変換部の前記信号電荷に基づいた第1の信号を出力させ、前記1フレーム期間内に、前記複数の画素の各々に、各々が有する前記m個の前記光電変換部の前記信号電荷に基づいた第2の信号を出力させ、前記第1の信号に基づく信号の個数を、前記第2の信号に基づく信号の個数よりも少なくして、前記第1の信号に基づく前記信号と前記第2の信号に基づく前記信号とを前記撮像装置に出力させ、前記信号処理が、前記画素の前記第1の信号に基づく前記信号と、前記画素の前記第2の信号に基づく前記信号との差分である差分信号を得て、前記差分信号と、前記画素の前記第1の信号に基づく前記信号とによって、焦点検出を行い、前記画素の前記第2の信号に基づく前記信号によって画像を形成する処理であることを特徴とする撮像システムの駆動方法である。 Further, one aspect is a method of driving an image pickup device and an image pickup system that performs signal processing of a signal output from the image pickup device, and the image pickup device has a plurality of pixels arranged in a matrix. Each of the plurality of pixels includes a plurality of photoelectric conversion units that generate signal charges, and the imaging device has a lens array having a plurality of microlenses, and the light focused by the one microlens. Is incident on the plurality of photoelectric conversion units of the pixels, and the driving method is such that each of the pixels of at least a part of the plurality of pixels has m (m is an integer) within one frame period. ), The first signal based on the signal charge of n (n is an integer) of the photoelectric conversion units, which is less than m, is output, and the first signal is output within the one frame period. Each of the plurality of pixels is made to output a second signal based on the signal charge of the mth photoelectric conversion unit, and the number of signals based on the first signal is calculated as the second signal. The number of signals based on the first signal is less than the number of signals based on the above, and the signal based on the first signal and the signal based on the second signal are output to the image pickup apparatus, and the signal processing is performed by the first of the pixels. A difference signal, which is a difference between the signal based on the signal of the above and the signal based on the second signal of the pixel, is obtained, and the difference signal and the signal based on the first signal of the pixel are used. This is a method for driving an imaging system, which is a process of performing focus detection and forming an image by the signal based on the second signal of the pixel.
また、一の態様は、撮像装置と、前記撮像装置から出力される信号の信号処理を行う撮像システムの駆動方法であって、前記撮像装置は、行列状に配された複数の画素を有し、前記複数の画素の各々が、信号電荷を生成する光電変換部を複数含み、さらに、前記撮像装置はマイクロレンズを複数有するレンズアレイを有し、1つの前記マイクロレンズで集光された光が前記画素の有する複数の前記光電変換部に入射し、1フレーム期間内に、前記複数の画素の各々に、各々が有するm個(mは整数)の前記光電変換部のうち、前記m個よりも少ないn個(nは整数)の前記光電変換部の前記信号電荷に基づいた第1の信号を出力させ、前記1フレーム期間内に、前記複数の画素の各々に、各々が有する前記m個の前記光電変換部の前記信号電荷に基づいた第2の信号を出力させ、前記撮像装置に、前記第1の信号に基づく前記信号と前記第2の信号に基づく前記信号とを出力させ、前記信号処理が、前記撮像装置から出力した、前記複数の画素の前記第1の信号に基づく前記信号のうち、前記複数の画素の一部の前記画素の前記第1の信号に基づく前記信号を出力させ、前記複数の画素の他の前記画素の前記第1の信号に基づく前記信号を出力させない処理であることを特徴とする撮像システムの駆動方法である。 Further, one aspect is a method of driving an image pickup device and an image pickup system that performs signal processing of a signal output from the image pickup device, and the image pickup device has a plurality of pixels arranged in a matrix. Each of the plurality of pixels includes a plurality of photoelectric conversion units that generate signal charges, and the imaging device has a lens array having a plurality of microlenses, and the light focused by one microlens is emitted. Among the m (m is an integer) of the photoelectric conversion units each of the plurality of pixels, each of the m (m is an integer) incident on the plurality of photoelectric conversion units of the pixels, and within one frame period, from the m of the photoelectric conversion units. The first signal based on the signal charge of the photoelectric conversion unit having a small number of n (n is an integer) is output, and within the one frame period, each of the plurality of pixels has the m of each. A second signal based on the signal charge of the photoelectric conversion unit is output, and the imaging device is made to output the signal based on the first signal and the signal based on the second signal. The signal processing outputs the signal based on the first signal of the pixel, which is a part of the plurality of pixels, among the signals based on the first signal of the plurality of pixels output from the imaging device. This is a method for driving an imaging system, which is a process of not outputting the signal based on the first signal of the other pixels of the plurality of pixels.
本発明は、複数の光電変換部の一部の光電変換部に基づく信号を高速に得ると共に、複数の光電変換部に基づく信号を得ることができる撮像装置、撮像システムを提供することができる。 The present invention can provide an imaging device and an imaging system capable of obtaining signals based on a part of photoelectric conversion units of a plurality of photoelectric conversion units at high speed and obtaining signals based on a plurality of photoelectric conversion units.
[実施例1]
以下、図面を参照しながら本実施例の撮像装置について説明する。
[Example 1]
Hereinafter, the imaging apparatus of this embodiment will be described with reference to the drawings.
本実施例の撮像装置に設けられた画素は、位相差検出方式による焦点検出のための焦点検出用信号の基となる信号と、撮像のための信号である画像取得用信号の基となる信号を出力する。例えば、ライン状またはクロス状に配置された、複数の画素から焦点検出用信号の基となる信号が出力される。撮像装置は、画素から出力される焦点検出用信号の基となる信号と画像取得用信号の基となる信号を処理して焦点検出用信号、画像取得用信号を出力する。撮像装置から出力された焦点検出用信号に基づいて、入射光の相互の位相差を検出することができる。この検出された位相差に基づいて焦点検出を行うことができる。 The pixels provided in the image pickup apparatus of this embodiment are a signal that is a basis of a focus detection signal for focus detection by a phase difference detection method and a signal that is a basis of an image acquisition signal that is a signal for imaging. Is output. For example, a signal that is a base of a focus detection signal is output from a plurality of pixels arranged in a line shape or a cross shape. The image pickup apparatus processes the signal that is the basis of the focus detection signal output from the pixel and the signal that is the basis of the image acquisition signal, and outputs the focus detection signal and the image acquisition signal. The mutual phase difference of the incident light can be detected based on the focus detection signal output from the image pickup apparatus. Focus detection can be performed based on the detected phase difference.
図1(a)に、本実施例の撮像装置における、画素が出力する信号(以下、画素信号と表記する)の読み出し方の一例を示す。本実施例の画素の各々は、後述するように、複数の光電変換部を有している。複数の光電変換部の一方の信号電荷に基づいて出力される画素信号をA信号と表記する。また、複数の光電変換部の信号電荷に基づいて出力される画素信号をA+B信号と表記する。A信号は焦点を検出するための信号である焦点検出用信号の基となる信号である。A+B信号は画像取得用信号の基となる信号である。A+B信号は画素が出力する第2の信号であり、A信号は画素が出力する第1の信号である。 FIG. 1A shows an example of how to read a signal output by a pixel (hereinafter referred to as a pixel signal) in the image pickup apparatus of this embodiment. Each of the pixels of this embodiment has a plurality of photoelectric conversion units, as will be described later. A pixel signal output based on the signal charge of one of a plurality of photoelectric conversion units is referred to as an A signal. Further, a pixel signal output based on the signal charges of a plurality of photoelectric conversion units is referred to as an A + B signal. The A signal is a signal that is the basis of a focus detection signal, which is a signal for detecting a focus. The A + B signal is a signal that is the basis of the image acquisition signal. The A + B signal is the second signal output by the pixel, and the A signal is the first signal output by the pixel.
図1(a)〜(c)は、画素が複数行、複数列配された形態を模式的に表している。図1(a)は、一部の行において全ての画素がA信号を出力する形態である。また、AとA+Bとが併記された領域の画素はA信号を出力した後、A+B信号を出力する。A+Bと記された領域の画素は、A+B信号の出力を行うが、A信号の出力は行わない。 1 (a) to 1 (c) schematically show a form in which a plurality of rows and a plurality of columns of pixels are arranged. FIG. 1A shows a form in which all pixels output an A signal in some rows. Further, the pixels in the region where A and A + B are written together output the A signal and then the A + B signal. The pixels in the area marked A + B output the A + B signal, but do not output the A signal.
図2に、図1(a)に示した撮像装置の一部である4行4列の画素を抜き出すとともに、画素からの信号を処理する信号処理回路と水平走査回路とを合わせて示した模式図を示す。図2の画素は、4行×4列を基本単位としたベイヤー配列で配置されている。以下、複数行、複数列の画素が配列された領域を画素部と表記する。図2では、画素に設けられているカラーフィルター22の色であるR(赤)、G(緑)、B(青)を括弧書きで示し、その下段に出力する信号を記している。つまり、図2の上から数えて1行目、左から数えて1列目の画素は緑のカラーフィルターを有しており、A信号とA+B信号とを時分割で出力することを示している。図2において、図の上から数えて1行目L1、2行目L2の全ての画素はA信号と、A+B信号を時分割で出力する。図の上から数えて3行目L3、4行目L4の全ての画素は、A信号は出力せず、A+B信号のみを出力する。尚、以下特に断りのない限りは、本明細書を通じてX行目(Xは自然数)と表記する際は全て図の上から数えたものとして表す。同様に、Y列目(Yは自然数)と表記する際についても、特に断りのない限り本明細書を通じて図の左から数えたものとして表す。複数列配された画素の各列に信号処理回路101が設けられており、水平走査回路14からの信号に基づいて各画素から画素信号を読み出し、読み出した信号を撮像装置の外部に出力する。図2に示した撮像装置の例では、水平走査回路14が行列状に画素100が配された画素領域を挟んで2つ設けられている。信号処理回路101は1列おきに同一の水平走査回路14に電気的に接続されている。この構成にすることにより、例えば1列目と2列目に設けられた信号処理回路を2つの水平走査回路14のそれぞれが選択することにより、1列目と2列目の画素100のそれぞれから画素信号を同時に出力させることができる。
FIG. 2 shows a schematic diagram in which pixels of 4 rows and 4 columns, which are a part of the image pickup apparatus shown in FIG. 1A, are extracted, and a signal processing circuit for processing signals from the pixels and a horizontal scanning circuit are combined. The figure is shown. The pixels in FIG. 2 are arranged in a Bayer array with 4 rows × 4 columns as a basic unit. Hereinafter, the area in which the pixels of a plurality of rows and a plurality of columns are arranged is referred to as a pixel portion. In FIG. 2, the colors R (red), G (green), and B (blue) of the
図3(a)は本実施例に関する撮像装置の上面模式図である。画素100は、第1の光電変換部である第1のフォトダイオード1、第2の光電変換部である第2のフォトダイオード51、フォトダイオード1、51に電気的に接続された画素内読み出し回路部10を含んでいる。以下では、1つの画素100が有するフォトダイオード1とフォトダイオード51とをまとめて表す際は、受光部と表記する。1つのマイクロレンズ23は、1つの受光部を覆うように配され、光束を受光部に集光する。つまり、1つのマイクロレンズは1つの受光部に対応して設けられている。また、1つのマイクロレンズによって集光された光は、1つのマイクロレンズに対応して設けられた画素100が有する複数の光電変換部に入射する。本実施例の撮像装置は、複数のマイクロレンズを有するマイクロレンズアレイを有する。
FIG. 3A is a schematic top view of the image pickup apparatus according to this embodiment. The
次に、図3(b)に、図3(a)でα−βの直線で示した部分のうち、2つの画素100の断面を示す。カラーフィルター22はマイクロレンズ23とフォトダイオード1、51との間に設けられている。
Next, FIG. 3 (b) shows a cross section of two
図4は本実施例の撮像装置のうち、2行2列の画素100と、2列の信号処理回路101を抜き出して模式的に表した模式図である。2は垂直走査回路であり、タイミングジェネレータ12(以下、TG12と表記する)からのタイミング信号に基づいて画素を行ごとに選択して、画素から画素信号を出力させる垂直走査回路である。
FIG. 4 is a schematic diagram schematically showing the
次に画素100について説明する。
Next, the
画素100は、転送MOSトランジスタ20、50、リセットMOSトランジスタ4、増幅MOSトランジスタ5、選択MOSトランジスタ6を有する。フォトダイオード1、51では光が入射すると、光電変換により信号電荷が生じる。転送MOSトランジスタ20のゲートに、図6を用いて後述する垂直走査回路2が供給する転送パルスφT1をHighレベル(以降、Hレベルと表記する。同様に、LowレベルをLレベルと表記する。)として、フォトダイオード1が保持する信号電荷を増幅MOSトランジスタ5の入力ノードに転送する。同様に、転送MOSトランジスタ50のゲートに、垂直走査回路2が供給する転送パルスφT2をHレベルとして、フォトダイオード51が有する信号電荷を増幅MOSトランジスタ5の入力ノードに転送する。リセットMOSトランジスタ4のゲートに垂直走査回路2が供給するリセットパルスφRをHレベルとすると、増幅MOSトランジスタ5の入力ノードの電位がリセットされる。増幅MOSトランジスタ5は、入力ノードに転送された信号電荷に基づいて、電気信号を選択MOSトランジスタ6に出力する。選択MOSトランジスタ6は、増幅MOSトランジスタ5が出力した信号を、垂直走査回路2からゲートに供給される選択パルスφSELがHレベルの時に垂直信号線7に出力する。
The
フォトダイオード1からの信号電荷が転送された増幅MOSトランジスタ5の入力ノードの電位に基づいて、垂直信号線7に出力される信号が前述したA信号に相当する。また、フォトダイオード51からの信号電荷が転送された増幅MOSトランジスタ5の入力ノードの電位に基づいて、垂直信号線7に出力される信号がB信号である。また、転送パルスφT1、φT2を共にHレベルとして、フォトダイオード1、51のそれぞれに蓄積された信号電荷を増幅MOSトランジスタ5の入力ノードに転送する。この時の増幅MOSトランジスタ5の入力ノードの電位に基づいて垂直信号線7に出力される信号が前述したA+B信号に相当する。本実施例では、B信号、すなわち、フォトダイオード51において光電変換を行って保持した信号電荷のみが増幅MOSトランジスタ5の入力ノードに転送されて垂直信号線7に出力される信号については、画素100からの出力動作を行わない。B信号に相当する信号は、画像取得用信号と焦点検出用信号との差分処理を、後述するデジタル信号処理回路が行うことによって取得する。このB信号もA信号と同様に焦点検出に用いられる焦点検出用信号の基となる信号である。以上が画素100についての説明である。
The signal output to the
次に、信号処理回路101について説明する。C0はクランプ容量である。8はオペアンプであり、クランプ容量C0を介して画素100から出力される画素信号を増幅して出力する。オペアンプ8の帰還経路にはフィードバック容量C1、C2がそれぞれスイッチSW2、SW3とともに設けられている。オペアンプ8の出力端子には、フィードバック容量C1、C2のうち、オペアンプ8の出力端子と入力端子とに対して導通状態にあるスイッチSW2、SW3と直列に接続されたフィードバック容量の容量値の総和Cf_totalとクランプ容量C0の容量比による反転ゲインが発生する。
Next, the
オペアンプ8から出力された信号は、クランプ容量C3を介して、比較回路9に入力される。比較回路9はランプ信号発生回路10から、時間に依存して電圧値が変化するランプ信号VRAMPがクランプ容量C4を介して供給される。比較回路9は、ランプ信号VRAMPとクランプ容量C3を介してオペアンプ8から出力される信号との比較を行い、比較結果に基づく信号であるラッチ信号LATをカウンタ回路11に出力する。つまり、ランプ信号VRAMPとオペアンプ8から出力される信号との大小関係が逆転した時に、比較回路9が出力するラッチ信号LATの信号レベルが変化する。カウンタ回路11にはTG12からクロックパルス信号CLKが出力されている。カウンタ回路11は、ランプ信号発生回路10が時間に依存したランプ信号VRAMPの電圧値の変化を開始してから比較回路9からラッチ信号LATが変化するまでの間、クロックパルス信号CLKを計数したカウント信号を生成する。比較回路9から出力されるラッチ信号LATが変化した時、クロックパルス信号CLKの計数を終了するとともに、ラッチ信号LATが変化した時のカウント信号を保持する。信号保持部であるメモリ13はランプ信号VRAMPを変化させる期間が終了すると、カウンタ回路11に保持されたカウント信号の取り込みを行い、カウント信号を保持する。水平走査回路14はTG12からのタイミング信号に基づいて各列のメモリ13を順次選択し、各列のメモリ13が保持したカウント信号を転送する。この水平走査回路14によって出力された信号が、撮像装置の出力する出力信号SIGOUTである。本実施例の出力信号SIGOUTは、後述するデジタルN信号、デジタルA信号、デジタルA+B信号である。すなわち、出力信号SIGOUTは、画素信号に基づく信号である。また、デジタルA+B信号は第2の信号に基づく信号であり、デジタルA信号は第1の信号に基づく信号である。本実施例では、第2の信号に基づく信号は画像取得用信号であり、第1の信号に基づく信号は焦点検出用信号である。尚、ランプ信号VRAMPは、比較回路9においてアナログ信号と比較される参照信号の一例である。
The signal output from the
次に、図5に、カウンタ回路11とメモリ13の構成の一例を示す。カウンタ回路11は、TG12から供給されるクロックパルス信号CLKに基づいて、nビットのカウント信号CKnを生成し、メモリ13に出力する。カウンタ回路11とメモリ13との間にはnビットのカウント信号を伝送するカウント信号伝送線がn本設けられている。本実施例の撮像装置は、後述するが、相関二重サンプリング(以下、CDS(Correlated Double Sampling)と表記する。)を行う。よって、画素100のノイズレベルの信号であるN信号と、受光部が光電変換して生じた信号電荷が転送された増幅MOSトランジスタ5の入力ノードの電位に基づいて出力されるS信号とが画素100から出力される。S信号は、本実施例ではA信号とA+B信号である。従って、画素100からは1フレーム期間内に、N信号、A信号、A+B信号の3つの信号が出力される。なお、1フレーム期間とは、後述する図7(b)で示した垂直同期信号VDが1度Hレベルとなった後、次にHレベルとなるまでの期間である。本実施例では、アナログ信号であるN信号、A信号、A+B信号のそれぞれが画素100から出力される都度、デジタル信号に変換する動作を行う。このため、メモリ13はデジタル信号値を保持するメモリ部をそれぞれの信号に対応して3つ設けている。即ち、メモリ部M1はN信号に基づくデジタルN信号、メモリ部M2はA信号に基づくデジタルA信号、メモリ部M3はA+B信号に基づくデジタルA+B信号を保持する。すなわち、メモリ部M1はノイズレベルの信号値であるデジタル信号が入力されるNメモリである。また、メモリ部M2は、画素の一部の光電変換部に基づく前記画素信号に基づく信号を保持するS1メモリである。また、メモリ部M3は、画素の複数の光電変換部に基づく画素信号に基づく信号を保持するS2メモリである。メモリ13にはN信号線15とS信号線16とが電気的に接続されており、N信号線15にはメモリ部M1からデジタルN信号、S信号線16にはメモリ部M2,M3のそれぞれからデジタルA信号と、A+B信号に基づくデジタルA+B信号とが時分割で出力される。
Next, FIG. 5 shows an example of the configuration of the
次に図6に、図2に例示した撮像装置のうち、1行目の画素100が行う動作のタイミングを示す。スイッチパルスφSW1は、スイッチSW1のオン、オフを切り替えるパルスであり、Hレベルの時にスイッチSW1がオンとなる。V1はオペアンプ8の出力を表している。SIGOUTは水平走査回路14が各列のメモリ13を選択し、各メモリ部からカウント信号を出力させるタイミングを示している。以下では、φSW2およびφSW3の少なくとも一方がハイレベルである、つまり、クランプ容量C0の容量値との比で信号を増幅するものとする。
Next, FIG. 6 shows the timing of the operation performed by the
時刻t11において、リセットパルスφRはHレベルとし、増幅MOSトランジスタ5の入力ノードをリセットレベルの電位とする。また、選択パルスφSELをHレベルとする。これにより、増幅MOSトランジスタ5の入力ノードがリセットレベルの電位である時の画素信号が垂直信号線7に出力される。スイッチパルスφSW1、φCをHレベルとする。スイッチパルスφCがHレベルとなる事により、スイッチSW4とスイッチSW5がオンとなる。スイッチパルスφSW1をHレベルとして、オペアンプ8の出力端子と入力端子とをショートさせることにより、オペアンプ8のリセットを行う。スイッチパルスφCをHレベルとすることによりクランプ容量C4のリセットを行う。また、時刻t11において、選択パルスφSELをHレベルとし、増幅MOSトランジスタ5の入力ノードのリセットレベルの電位に基づいて垂直信号線7に画素信号が出力される。
At time t11, the reset pulse φR is set to H level, and the input node of the
時刻t12において、リセットパルスφR、スイッチパルスφSW1、φCをLレベルとする。クランプ容量C0,C3,C4には、スイッチパルスφSW1、φCがLレベルとなるときの電位がそれぞれ保持される。リセットパルスφRがHレベルからLレベルに遷移する時、リセットMOSトランジスタ4で生じるチャージインジェクションによって増幅MOSトランジスタ5の入力ノードの電位が変化する。これにより、垂直信号線7に出力される画素信号の信号レベルも変化する。この時刻t12において出力される画素信号を、以下N信号と表記する。同様に受光部が入射光を光電変換した信号電荷を保持した増幅MOSトランジスタ5の入力ノードの電位に基づいて垂直信号線7に出力される画素信号をS信号と以下表記する。オペアンプ8はクランプ容量C0を介して与えられた信号を増幅してクランプ容量C3に出力する。クランプ容量C3に与えられる信号は、クランプ容量C0を介して画素100から出力された信号を増幅した信号に、オペアンプ8のオフセット信号Voffが重畳されている。比較回路9には、クランプ容量C3を介してオペアンプ8が出力した信号が与えられる。
At time t12, the reset pulse φR, the switch pulse φSW1, and φC are set to the L level. The clamp capacitances C0, C3, and C4 hold the potentials when the switch pulses φSW1 and φC reach the L level, respectively. When the reset pulse φR transitions from the H level to the L level, the potential of the input node of the
時刻t13において、ランプ信号発生回路10はランプ信号VRAMPの変化を開始する。比較回路9はクランプ容量C3を介してオペアンプ8から出力された信号と、ランプ信号発生回路10から供給されるランプ信号VRAMPとの比較動作を開始する。また、カウンタ回路11は、ランプ信号発生回路10がランプ信号VRAMPの変化を開始すると同時にクロックパルス信号CLKの計数を開始し、計数結果であるカウント信号をメモリ13に出力する。
At time t13, the lamp
例えば、クランプ容量C3を介してオペアンプ8から出力されている信号と、ランプ信号VRAMPとの大小関係が、時刻t14で逆転したとする。すると、比較回路9はラッチ信号LATを出力する。このラッチ信号LATが出力されたカウンタ回路11は、カウント信号のメモリ13への出力を停止する。メモリ13はこの時刻t14でのカウント信号を保持する。ランプ信号発生回路10は時刻t15でランプ信号VRAMPを変化させるのを終了する。後述するS信号をデジタル信号に変換する場合に比して、このN信号をデジタル信号に変換する場合はランプ信号VRAMPを変化させる時間を短縮している。これは一般的に、N信号はノイズ成分やオフセット成分が主であるために、N信号の信号範囲が、S信号の信号範囲に比して狭いことによるものである。したがって、ランプ信号VRAMPを変化させる時間を短いものとすることができる。このようにすることによって、1行の画素が出力する画素信号の変換動作に掛かる時間を短縮することができる。
For example, it is assumed that the magnitude relationship between the signal output from the
この時刻t13から時刻t15までにおいて行われる比較回路9、カウンタ回路11、メモリ13の動作によって、オペアンプ8からクランプ容量C3を介して出力されたアナログ信号が、デジタル信号に変換される。時刻t13から時刻t15までにおいて行う、比較回路9、カウンタ回路11、メモリ13が行う動作を総称して、以下N変換と表記する。このN変換によってメモリ13に保持されたデジタル信号がデジタルN信号である。
By the operation of the
時刻t16において、転送パルスφT1をHレベルとする。これにより、フォトダイオード1において光電変換により生じた信号電荷が増幅MOSトランジスタ5の入力ノードに転送される。よって、垂直信号線7には、S信号の一つであるA信号が出力される(本実施例では、S信号としてA信号とA+B信号が時分割で出力される)。A信号をクランプ容量C0に画素100から出力させた後、転送パルスφT1をLレベルとする。オペアンプ8は、画素100からクランプ容量C0を介して出力されるA信号を増幅し、クランプ容量C3を介して比較回路9に出力する。
At time t16, the transfer pulse φT1 is set to the H level. As a result, the signal charge generated by the photoelectric conversion in the
時刻t17において、ランプ信号発生回路10はランプ信号VRAMPの変化を開始する。さらに、比較回路9はオペアンプ8からクランプ容量C3を介して出力された信号とランプ信号VRAMPとの比較動作を開始する。さらに、カウンタ回路11も先のN信号の場合と同様に、ランプ信号VRAMPが信号レベルの変化を開始すると同時にクロックパルス信号CLKの計数を開始する。
At time t17, the lamp
例えば、時刻t18において、オペアンプ8からクランプ容量C3を介して出力されたA信号とランプ信号VRAMPとの大小関係が逆転したとする。すると、比較回路9はカウンタ回路11にラッチ信号LATを出力する。このラッチ信号LATが出力されたカウンタ回路11は、カウント信号のメモリ13への出力を停止する。メモリ13はこの時刻t14でのカウント信号を保持する。ランプ信号発生回路10は時刻t19でランプ信号VRAMPを変化させるのを終了する。
For example, at time t18, it is assumed that the magnitude relationship between the A signal output from the
この時刻t17から時刻t19までにおいて行われる比較回路9、カウンタ回路11、メモリ13の動作によって、オペアンプ8からクランプ容量C3を介して出力されたアナログ信号が、デジタル信号に変換される。時刻t17から時刻t19までにおいて行う、比較回路9、カウンタ回路11、メモリ13が行う動作を総称して、以下A変換と表記する。このA変換によってメモリ13に保持されたデジタル信号がデジタルA信号である。
By the operation of the
次に、時刻t20において、N信号線15にデジタルN信号と、S信号線16にデジタルA信号とをメモリ13から撮像装置の外部に転送する。撮像装置の外部とは、例えば後述するデジタル信号処理回路がある。本実施例ではデジタルN信号、デジタルA信号の撮像装置の外部への転送をこの時刻t20としているが、時刻t21の転送パルスφT2と順番が前後しても差し支えない。後述するA+B変換が終了する時刻t24までにデジタルA信号、デジタルN信号の転送が終了することが好ましい。これにより、後述するデジタルA+B信号、デジタルN信号の転送がA+B変換終了後すぐに行うことができる。
Next, at time t20, the digital N signal is transferred to the
次に、時刻t21において、転送パルスφT2をHレベルとする。これにより、フォトダイオード51において光電変換により生じた信号電荷が増幅MOSトランジスタ5の入力ノードに転送される。すでに増幅MOSトランジスタ5の入力ノードには、フォトダイオード1からの信号電荷が保持されている。従って、転送パルスφT2をHレベルとすることにより、FD領域にはフォトダイオード1、51の両方からの信号電荷が保持される。垂直信号線7には、このフォトダイオード1、51の両方の信号電荷が転送された増幅MOSトランジスタ5の入力ノードの電位に基づく信号、すなわちA+B信号が出力される。従って、オペアンプ8には、クランプ容量C0を介して画素100から出力されたA+B信号を増幅して出力した信号を、クランプ容量C3を介して比較回路9に出力する。
Next, at time t21, the transfer pulse φT2 is set to the H level. As a result, the signal charge generated by the photoelectric conversion in the
時刻t22において、ランプ信号発生回路10はランプ信号VRAMPの変化を開始する。さらに、比較回路9はオペアンプ8からクランプ容量C3を介して出力された信号とランプ信号VRAMPとの比較動作を開始する。さらに、カウンタ回路11も先のN信号の場合と同様に、ランプ信号VRAMPが信号レベルの変化を開始すると同時にクロックパルス信号CLKの計数を開始する。
At time t22, the lamp
例えば、時刻t23において、オペアンプ8からクランプ容量C3を介して出力された信号とランプ信号VRAMPとの大小関係が逆転したとする。すると、比較回路9からカウンタ回路11にラッチ信号LATが出力される。このラッチ信号LATが出力されたカウンタ回路11は、カウント信号のメモリ13への出力を停止する。メモリ13はこの時刻t23でのカウント信号を保持する。ランプ信号発生回路10は時刻t24でランプ信号VRAMPを変化させるのを終了する。
For example, at time t23, it is assumed that the magnitude relationship between the signal output from the
この時刻t22から時刻t24までにおいて行われる比較回路9、カウンタ回路11、メモリ13の動作によって、アナログ信号である、オペアンプ8からクランプ容量C3を介して出力された信号がデジタル信号に変換される。時刻t22から時刻t24までにおいて行う、比較回路9、カウンタ回路11、メモリ13が行う動作を総称して、以下A+B変換と表記する。このA+B変換によってメモリ13に保持されたデジタル信号がデジタルA+B信号である。
By the operation of the
次に、時刻t25において、N信号線15にN変換によって得たデジタルN信号と、S信号線16にA+B変換によって得たデジタルA+B信号とをメモリ13から撮像装置の外部に転送する。この撮像装置の外部とは、例えば図16に例示した撮像システムの出力信号処理部155の一例であるデジタル信号処理回路である。このデジタル信号処理回路は、デジタルA信号とデジタルN信号との差分、デジタルA+B信号とデジタルN信号との差分を得る処理や、デジタルA+B信号とデジタルA信号との差分を演算して、デジタルB信号を得る処理などを行う。デジタルB信号とは、増幅MOSトランジスタ5の入力ノードでフォトダイオード1とフォトダイオード51との信号電荷を合わせず、フォトダイオード51のみが保持する信号電荷を増幅MOSトランジスタ5の入力ノードが保持した時に出力されるB信号を、A変換と同様にデジタル信号に変換した場合に得られると想定されるデジタル信号である。デジタル信号処理回路は、デジタルA信号とデジタルB信号とを用いて、位相差検出方式の焦点検出を行うことができる。また、各画素から出力されるA+B信号をA+B変換したデジタルA+B信号を用いて、画像を形成することができる。また、デジタルA信号、デジタルA+B信号に重畳されている画素100、オペアンプ8などから生じるノイズレベルの信号については、デジタル信号処理回路がデジタルN信号をデジタルA信号とデジタルA+B信号のそれぞれから差し引くことによって低減することができる。
Next, at time t25, the digital N signal obtained by N conversion to the
これまで、図2で示した撮像装置の1行目の画素100の画素信号を読み出す動作について説明したが、2行目の画素についても同様の動作とすることができる。
Up to now, the operation of reading the pixel signal of the
次に、図2で示した撮像装置の3行目の画素100の画素信号を読み出す動作について図7(a)を参照しながら説明する。
Next, the operation of reading out the pixel signal of the
3行目の画素100の画素信号を読み出す場合についてもN変換にかかる動作は1行目の画素100の画素信号の読み出し動作で説明したものと同様とすることができる。即ち、3行目の画素100の画素信号を読み出す場合の時刻t31、t32、t33、t34、t35のそれぞれでの動作は、1行目の画素信号を読み出す場合の時刻t11、t12、t13、t14、t15のそれぞれでの動作と同様とすることができる。
In the case of reading the pixel signal of the
3行目の画素100は、先の1行目の画素100の画素信号の読み出し動作において述べた、時刻t16におけるA信号の転送動作、および、時刻t17から時刻t19のA変換の動作は行わない。また、A変換を行わないため、時刻t20におけるデジタルA信号とデジタルN信号を転送する動作についても行わない。
The
3行目の画素100については、A+B信号を画素100が出力し、信号処理回路101によってデジタルA+B信号を得る動作を行う。
Regarding the
3行目の画素100がA+B信号を出力する動作であるが、まず時刻t36において転送パルスφT1、φT2をともにHレベルとする。これにより、フォトダイオード1と、フォトダイオード51とにおいて光電変換によって生じた信号電荷が増幅MOSトランジスタ5の入力ノードに転送される。これによりフォトダイオード1とフォトダイオード51とから転送された信号電荷を保持した増幅MOSトランジスタ5の入力ノードの電位に基づいた信号、すなわちA+B信号が画素100から垂直信号線7に出力される。以降、A+B信号をデジタル信号に変換するA+B変換に関わる動作は、1行目の画素100の画素信号を読み出す場合のA+B変換を行う動作と同様とすることができる。すなわち、3行目の画素100の画素信号をA+B変換する場合の時刻t37、t38、t39における動作は、1行目の画素100の画素信号をA+B変換する場合の時刻t22、t23、t24における動作と同様とすることができる。
In the operation in which the
時刻t40で行う、A+B変換によって得られたデジタルA+B信号をメモリ13から転送する動作についても、1行目の画素100からの画素信号を読み出す場合の時刻t25における動作と同様とすることができる。
The operation of transferring the digital A + B signal obtained by the A + B conversion from the
このように、3行目の画素100の画素信号を読み出す場合は、A信号の読み出し動作を行わず、A+B信号のみの読み出し動作を行う。従って、A信号の読み出し動作、A変換を行う動作を行わないため、これらの動作に掛かる時間を短縮することができる。即ち、3行目の画素100の画素信号を読み出す場合は、1行目の画素100の画素信号を読み出す場合における、時刻t16から時刻t19までの期間を短縮することができる。従って、撮像装置の全行の画素100においてA信号およびA+B信号を読み出す動作を行う場合に比べて、A信号の出力を行わない画素100を有することにより、アナログデジタル変換動作に関わる期間を短縮することができる。また、A信号の出力を行わない画素100を有することで、1フレーム期間で複数列のメモリ13がデジタルA信号を出力する回数が減る。よって、撮像装置からデジタル信号を読み出す時間を短縮することができる。
In this way, when reading out the pixel signal of the
図7(b)は、垂直同期信号VD、画素部の各行に与えられる選択パルスφSELの合計期間であるφSEL−T、複数列のメモリ13から出力される期間であるSIGOUT―Tを表したタイミング図である。垂直同期信号VDをHレベルとした後、垂直走査回路2は各行の画素100に対応する選択パルスφSELを順次Hレベルとする。水平走査回路14は各列の信号処理回路101からデジタル信号を順次出力させる。先述したように、垂直同期信号VDがHレベルとなってから、次にHレベルとなるまでの期間が1フレームである。この1フレーム期間内に、撮像装置から画素信号に基づく信号であるデジタルN信号、デジタルA信号、デジタルA+B信号が出力される。
FIG. 7B shows timings representing the vertical synchronization signal VD, φSEL-T which is the total period of the selection pulse φSEL given to each row of the pixel portion, and SIGOUT-T which is the period output from the
A信号とB信号とを読み出す場合には、画素100がA信号の出力を行った後、リセットパルスφRをもう一度HレベルとしてLレベルとし、増幅MOSトランジスタ5の入力ノードの電位をリセットしてから転送パルスφT2をHレベルとする必要がある。即ち、リセットパルスφRを図6で説明した動作タイミング図において、時刻t19から時刻t21までの間にHレベルとし、さらにLレベルに戻す動作が必要となる。本実施例では、リセットパルスφRをHレベルとするのは時刻t11から時刻t12までの期間とすることができるので、より高速に画素信号の出力動作を行うことができる。
When reading the A signal and the B signal, after the
本実施例では、1行目の画素100からN信号、A信号、A+B信号を出力させてから、2行目の画素100からN信号、A信号、A+B信号を出力させている。この形態と、1行目、2行目の画素100からN信号、A信号を出力させ、次に1行目〜4行目の画素100から順次A+B信号を出力させる形態(以下、この形態を参考形態と表記する)と比較する。参考形態では、1行目の画素100からN信号を出力させてから1行面の画素100のA+B信号を得るまでに、1、2行目のA信号を読み出す期間が存在する。従って、本実施例の形態に比して参考形態では、1行目のN信号を読み出してから1行目のA+B信号を出力させるまでの期間が長くなる。これにより、1行目の画素100がN信号を出力した時のノイズレベルから、1行目の画素100がA+B信号を出力する時のノイズレベルとの差が生じやすくなる。すなわち、A+B信号へのランダムノイズの影響が大きくなる。従って、参考形態は本実施例の形態に比して画質および測距精度が低下しやすくなる。本実施例の形態では、例えば1行目の画素100のN信号を出力した後、他の行の画素100からの読み出し動作に移る前に1行目の画素100からのA+B信号を得る。このため、参考形態に比してA+B信号へのランダムノイズの影響を抑制することができ、画質および測距精度を向上させることができる。また、参考形態ではA+B信号に加えてA信号を出力する画素100を含む行は、A信号の出力と、A+B信号の出力とで2度垂直走査を行う。本実施例の形態では、1度の垂直走査で1行の画素100からA信号とA+B信号との出力を行う。これにより、本実施例の形態は参考形態に比して垂直走査に関わる時間を短縮することができる。
In this embodiment, the N signal, the A signal, and the A + B signal are output from the
本実施例では、1行目の画素信号を読み出す場合において、デジタルA信号、デジタルN信号の転送に関わる時間が、A+B変換におけるランプ信号VRAMPが変化する時間よりも短い例を記載した。しかし、デジタルA信号、デジタルN信号の転送に関わる時間が、A+B変換におけるランプ信号VRAMPが変化する時間よりも、時間Tだけ長い形態であってもよい。この形態では、3行目の画素信号を読み出す際、A信号の読み出し動作、A変換を行う動作に関わる期間に加えて、この時間Tの期間も短縮することができる。 In this embodiment, an example is described in which the time involved in the transfer of the digital A signal and the digital N signal is shorter than the time during which the lamp signal VRAMP in the A + B conversion changes when the pixel signal in the first line is read. However, the time involved in the transfer of the digital A signal and the digital N signal may be longer by the time T than the time when the lamp signal VRAMP in the A + B conversion changes. In this embodiment, when reading the pixel signal of the third row, the period of this time T can be shortened in addition to the period related to the operation of reading the A signal and the operation of performing the A conversion.
本実施例は、それぞれの信号処理回路101にカウンタ回路11が含まれている形態を示した。別の形態として、カウンタ回路11が信号処理回路101とは別に設けられていて、各列の信号処理回路101に共通してカウント信号CKnを出力する、いわゆる共通カウンタ型のアナログデジタル変換回路であっても良い。図8に共通カウンタ型のアナログデジタル変換回路の一例を示す。カウンタ回路11にはTG12からクロックパルス信号CLKが供給されている。カウンタ回路11は、クロックパルス信号CLKに基づいてnビットのカウント信号CKnを生成する。カウンタ回路11は、各列のメモリ13に共通してカウント信号CKnを出力する。メモリ13は、比較回路9からラッチ信号LATが出力された時に、カウンタ回路11から出力されているカウント信号CKnの取り込みを行う。この取り込まれたカウント信号CKnがメモリ13の保持するデジタル信号である。このような共通カウンタ型のアナログデジタル変換回路においても、本実施例を好適に実施することができる。
In this embodiment, each
また、本実施例では、画素100が2個の光電変換部に基づく信号であるA+B信号と、1個の光電変換部に基づく信号であるA信号とを出力する形態を基に説明した。本実施例はこの形態に限定されるものではない。つまり、複数の画素の各々が有するm個(mは整数)の光電変換部に基づいた第1の画素信号を出力する。そして、この第1の画素信号を出力した複数の画素のうちの一部の画素が、m個よりも少ないn個(nは整数)の光電変換部に基づいた第2の画素信号をさらに出力する形態であれば好適に実施することができる。この形態であれば、全行の画素において第1の画素信号および第2の画素信号を読み出す動作を行う場合に比べて、第1の画素信号の出力を行わない画素を有することにより、アナログデジタル変換動作に関わる期間を短縮することができる。また、1フレーム期間で複数列のメモリ13が第1の画素信号に基づくデジタル信号を出力する回数が減る。よって、撮像装置からのデジタル信号を読み出す時間を短縮することができる。また、m個の光電変換部は、1つの画素100が有する光電変換部の数よりも少ない数であっても良い。つまり、本実施例の撮像装置は、1つの画素100が有する光電変換部の数がj個(jは整数)であるとすると、j≧m>nの関係にある形態であれば良い。
Further, in this embodiment, the description has been made based on a mode in which the
また、本実施例では、図7(b)のように1フレーム期間は、垂直同期信号VDが1度Hレベルとなった後、次にHレベルとなるまでの期間である形態を説明した。他の形態として、例えばインターレース方式の信号出力形態のように、偶数行の画素100から画素信号を出力させるフィールドと、奇数行の画素100から画素信号を出力させるフィールドとを1フレーム期間が有する形態であってもよい。つまり、1フレーム期間に、垂直走査回路2が複数の画素100の選択を複数のフィールドに分割して行う形態であっても良い。さらに言えば、必ずしも偶数行、奇数行とでフィールドを分ける必要はなく、ある行については第1のフィールド、他の行については第2のフィールドで画素信号を出力させる形態であっても良い。
Further, in this embodiment, as shown in FIG. 7B, the mode in which the one-frame period is the period from when the vertical synchronization signal VD reaches the H level once to the next H level has been described. As another form, for example, as in the interlaced signal output form, one frame period has a field for outputting a pixel signal from
[実施例2]
本実施例の一つは、実施例1で例示した撮像装置において、図1(b)のように、A信号とA+B信号とを出力する画素100とA+B信号のみを出力する画素100のそれぞれが、画素部のすべての行に含まれている形態である。
[Example 2]
In one of the present embodiments, in the image pickup apparatus exemplified in the first embodiment, as shown in FIG. 1B, each of the
本実施例における水平走査回路14は、各列のメモリ13を順に走査する動作以外に、複数列のメモリ13からデジタル信号を転送させるメモリ13を選択して転送させることができるデコーダである。
The
図9(a)は、図1(b)に例示した撮像装置の一部の画素100を抜き出して模式的に示したものである。図9(a)に示した全画素からA信号とA+B信号が出力される。ただし、1行目、2行目ともに、2列目、3列目の画素が出力したA信号とA+B信号を利用し、1列目、4列目が出力したA信号は使用せず、A+B信号のみを利用する。
FIG. 9A is a schematic representation of a part of the
1行目の画素100から画素信号を読み出す動作について、実施例1と異なる点を中心に説明する。
The operation of reading the pixel signal from the
本実施例における、画素100、信号処理回路101の動作は、実施例1で説明した、図2で例示した撮像装置の1行目の動作、即ち図6に例示した動作と同様のものとすることができる。このように動作させることにより、本実施例の撮像装置では、画素100から画素信号が転送されるすべてのメモリ13にN信号、A信号、A+B信号が保持される。
The operation of the
図9(b)は、本実施例の水平走査回路であるデコーダ14が転送する信号を模式的に示したものである。メモリ13−1〜13−4のそれぞれには図9(a)で例示した撮像装置の1列目〜4列目のそれぞれの画素100の画素信号に基づいたデジタル信号が保持されている。以下、1列目のメモリ13−1が保持しているデジタル信号については、デジタルN信号は、N1、デジタルA信号はA1、デジタルA+B信号についてはA1+B1と、各デジタル信号を図の左から数えた列番号を付して表記する。2列目から4列目についても同様である。
FIG. 9B schematically shows a signal transferred by the
デコーダ14はまず、2列目のメモリ13−2を選択し、メモリ13−2からN2とA2をデジタル信号処理回路に出力させる。デジタル信号処理回路は出力されたN2とA2の差分信号である、(A2−N2)を取得する。続いて、3列目のメモリ13−3を選択し、メモリ13−3からN3とA3をデジタル信号処理回路に出力させる。デジタル信号処理回路は、2列目のメモリ13−2の場合と同様に、N3とA3との差分信号である、(A3−N3)を取得する。
First, the
続いて、デコーダ14は、各列のメモリ13−1〜13−4を順に選択してデジタルA+B信号をデジタル信号処理回路に出力させる。つまり、1列目のメモリ13−1を選択し、メモリ13−1からN1とA1+B1をデジタル信号処理回路に出力させる。デジタル信号処理回路はN1とA1+B1との差分信号である、(A1+B1−N1)を取得する。2列目〜4列目のメモリ13−2〜13−4についても同様の動作を行う。また、デジタル信号処理回路についても1列目のメモリ13−1からN1とA1が出力された場合と同様の動作を行う。これにより、差分信号(A2+B2−N2)、(A3+B3−N3)、(A4+B4−N4)をそれぞれ取得する。
Subsequently, the
引き続いてデジタル信号処理回路は、2列目のメモリ13−2からN2toA2を出力させて得た差分信号(A2−N2)と、N2,A2+B2を出力させて得た差分信号(A2+B2−N2)との差分を取得する。即ち、(A2+B2−N2)―(A2−N2)の処理を行い、B2を取得する。3列目のメモリ13−3についても同様の処理を行い、B3を取得する。よって、1行目の2列目、3列目の画素100が出力した画素信号に基づいて、A2とB2、および、A3とB3を得ることができる。このA2とB2、および、A3とB3を用いて位相差検出方式の焦点検出を行うことができる。これまで1行目の画素100についての動作を説明したが、同様の動作を2行目の画素100についても同様の動作とすることができる。
Subsequently, the digital signal processing circuit includes a difference signal (A2-N2) obtained by outputting N2toA2 from the memory 13-2 in the second row and a difference signal (A2 + B2-N2) obtained by outputting N2, A2 + B2. Get the difference between. That is, the processing of (A2 + B2-N2)-(A2-N2) is performed to acquire B2. The same process is performed for the memory 13-3 in the third column to acquire B3. Therefore, A2 and B2, and A3 and B3 can be obtained based on the pixel signals output by the
本実施例では、1列目と4列目のメモリ13−1、13−4からN1とA1,および、N4とA4とを出力させる動作を行っていない。従って、このN1とA1、および、N4とA4とを出力させるのに要する時間を本実施例では短縮することができる。従って、A+B信号を得つつ、A信号を得る動作を高速に行うことができる。 In this embodiment, the operations of outputting N1 and A1 and N4 and A4 from the memories 13-1 and 13-4 in the first and fourth rows are not performed. Therefore, the time required to output N1 and A1 and N4 and A4 can be shortened in this embodiment. Therefore, it is possible to perform the operation of obtaining the A signal at high speed while obtaining the A + B signal.
次に本実施例の別の一つである、図1(c)に例示した撮像装置について説明する。これは、撮像装置の複数行、複数列の画素のうち、一部の領域に含まれる画素がA信号とA+B信号とを出力するように動作する形態である。即ち、図1(b)に例示した撮像装置に対し、A信号を出力しない行を含む形態である。 Next, another image pickup apparatus illustrated in FIG. 1 (c), which is another one of the present embodiment, will be described. This is a mode in which the pixels included in a part of the pixels of the plurality of rows and the plurality of columns of the image pickup apparatus operate so as to output the A signal and the A + B signal. That is, the image pickup apparatus illustrated in FIG. 1B includes a line that does not output the A signal.
図1(c)に例示した撮像装置について、A信号を出力しない行の画素100からの画素信号を読み出す動作は、実施例1において図7を参照しながら説明した動作と同様として、N変換とA+B変換を行うことができる。
Regarding the image pickup apparatus illustrated in FIG. 1 (c), the operation of reading the pixel signal from the
また、A信号も出力する行の画素100からの画素信号の読み出し動作は、本実施例でこれまで説明した通りの動作とすることができる。即ち、実施例1で図6を参照しながら説明した動作によりN変換、A変換、A+B変換を行う。さらに、図9(b)を参照しながら説明した通り、A信号も出力する画素100からの画素信号に基づくデジタルA信号、デジタルN信号を保持するメモリ13からそれぞれのデジタル信号をデジタル信号処理回路に出力させる。その後、デジタルA+B信号を保持しているメモリ13から、デジタルN信号とデジタルA+B信号とをデジタル信号処理回路に出力させる。これにより、デジタル信号処理回路は、デジタルA信号を出力した列についてはデジタルB信号を求めて位相差検出方式の焦点検出を行うとともに、デジタルA+B信号を用いて画像の形成を行う。
Further, the operation of reading the pixel signal from the
図1(c)に例示した撮像装置の場合では、A信号を出力しない行の画素100の画素信号の読み出し動作においては、A変換を行わないため、A変換に関わる時間を短縮することができる。また、A信号も出力する行についても、図1(b)で例示した撮像装置の場合と同様に、デジタルA信号のデジタル信号処理回路への出力を行わない列を含む。よって、デジタルA信号のメモリ13からデジタル信号処理回路への出力に関わる時間を短縮することができる。従って、A+B信号を得つつ、A信号を得る動作を高速に行うことができる。
In the case of the image pickup apparatus illustrated in FIG. 1C, since the A conversion is not performed in the pixel signal reading operation of the
本実施例では、図1(b)、図1(c)のようにA信号およびA+B信号を出力するように動作する形態について説明した。しかし、本実施例はこれに限定されず、例えば、カラーフィルター22の色に応じてA信号を出力する画素100を選択しても良い。例えば、図2で例示した撮像装置において、G(緑)のカラーフィルター22を有する画素100がA信号を出力する画素とする場合には、1行目および3行目は1列目と3列目、2行目及び4行目は2列目と4列目の画素100がA信号を出力する。このA信号の出力動作についても、本実施例および実施例1で図6を参照しながら説明した動作に基づいて行うことができる。また、メモリが保持したデジタル信号の読み出しについては、本実施例で図9(b)を参照しながら説明したように動作させればよい。このように動作させることで、カラーフィルター22の色に応じてA信号も出力する画素100を選択する場合にも、A+B信号を得つつ、A信号を得る動作を高速に行うことができる。
In this embodiment, a mode in which the A signal and the A + B signal are output as shown in FIGS. 1 (b) and 1 (c) has been described. However, this embodiment is not limited to this, and for example, the
また、実施例1、実施例2で説明した図1(a)〜(c)のA信号を出力する画素100の配置は、TG12によって可変的に設定することができる。他の形態として、撮像装置の外部からのシリアル通信などによって撮像装置に供給される設定情報に基づいて設定しても良い。この撮像装置の外部とは、例えば後述する図16に例示した撮像システムの全体制御・演算部1510が挙げられる。また、A信号を出力する画素100の配置は、例えば光学的基線長や、使用する測距点に基づいて設定すれば良い。
Further, the arrangement of the
また、本実施例では、画素100が2個の光電変換部に基づく信号であるA+B信号と、1個の光電変換部に基づく信号であるA信号とを出力する形態を基に説明した。本実施例はこの形態に限定されるものではない。つまり、1フレーム期間内に、複数の画素の各々は、各々が有するm個(mは整数)の光電変換部の信号電荷に基づいた第2の信号を出力する。そして、複数の画素の少なくとも一部の画素の各々は、各々が有するm個よりも少ないn個(nは整数)の光電変換部の信号電荷に基づいた第1の信号をさらに出力する。撮像装置は、この1フレーム期間内に、複数の画素の第2の信号に基づく信号を出力し、複数の画素の一部の画素の第1の信号に基づく信号をさらに出力する。この形態であれば好適に実施することができる。この形態であれば、全画素からの第2の信号と第1の信号とのそれぞれに基づく信号をそれぞれ撮像装置が出力する場合に比べて、第1の信号に基づく信号の出力に関わる期間を短縮することができる。よって、撮像装置からのデジタル信号を読み出す時間を短縮することができる。
Further, in this embodiment, the description has been made based on a mode in which the
また、本実施例では、水平走査回路14がデコーダであり、一部のメモリ13からA信号を出力する形態を説明した。他の形態として、図10で例示したように、1行の画素100に対してフォトダイオード1に複数の転送パルスφT1−1、φT1−2が垂直走査回路2から与えられる構成としても良い。すなわち、1行の画素100のうち、A信号、A+B信号を出力する画素100については転送パルスφT1−1をHレベルとし、その後、転送パルスφT2をHレベルとする。一方、A+B信号のみを出力させる画素100については、φT1−1をHレベルとせず、転送パルスφT2がHレベルとなっている期間に転送パルスφT1−2をHレベルとすれば良い。また、別の形態として、転送パルスφT1を複数設ける代わりに、1行の画素を選択する選択パルスφSELを、1行の画素100について複数の選択パルスφSEL−1、φSEL−2のいずれかを与える形態であっても良い。つまり、A信号、A+B信号を出力する画素については、転送パルスφT1、φT2がHレベルの期間にHレベルとなる選択パルスφSEL−1を与える。そして、A+B信号のみを出力する画素100については、転送パルスφT1の期間にはLレベルであり、転送パルスφT2がHレベルの時にHレベルとなる選択パルスφSEL−2を与える形態であっても良い。これらの形態は、或る行の画素100から、m個の光電変換部の信号電荷に基づく信号と、m個よりも少ないn個の光電変換部の信号電荷に基づく信号とを出力させる期間に、同じ行の別の画素から、n個の光電変換部の信号電荷に基づく信号を出力させず、m個の光電変換部の前記信号電荷に基づく前記信号を出力させる垂直走査回路を有する形態である。
Further, in this embodiment, a mode in which the
[実施例3]
本実施例に係る撮像装置の等価回路を図11に例示する。本実施例の撮像装置は、画素100に含まれるフォトダイオード1とフォトダイオード51とがそれぞれ別の増幅MOSトランジスタ5−1、5−2の入力ノードに信号電荷を転送する形態である。実施例1の画素は、2つのフォトダイオードが1つの増幅MOSトランジスタ5の入力ノードに電気的に接続され、1つの増幅MOSトランジスタ5によって垂直信号線7に画素信号が出力されていた。これに対し、本実施例では、垂直信号線にA信号を出力する画素とB信号を出力する画素とが設けられている。即ち、同一のマイクロレンズを透過した光を受ける2つのフォトダイオードは、互いに異なる増幅MOSトランジスタを介して互いに異なる垂直信号線に画素信号を出力する。このA画素とB画素とのそれぞれに電気的に接続された垂直信号線7−1,7−2はノードAで電気的に接続されている。このノードAで電気的に接続された垂直信号線に画素信号を出力するA画素とB画素とによって、A+B信号を出力する1つの画素が構成される。
[Example 3]
An equivalent circuit of the image pickup apparatus according to this embodiment is illustrated in FIG. In the imaging device of this embodiment, the
さらに、本実施例では、実施例1で例示した撮像装置が有していたオペアンプ8を有していない形態である。オペアンプ8については本実施例においても、画素100から出力される画素信号を増幅させる場合には、実施例1で説明した撮像装置と同様に比較回路9の前段に設けることができる。
Further, in this embodiment, the
以下、図11を参照しながら説明する。尚、図4に例示した撮像装置で示した構成と同じ機能を奏するものについては、図4で付した符号と同じ符号を図11でも付している。また、A画素とB画素とがそれぞれ同じ機能を奏するものを有している場合には枝番を付して示している。例えば、増幅MOSトランジスタはA画素については5−1、B画素については5−2として付している。以下、リセットMOSトランジスタ4、選択MOSトランジスタ6、垂直信号線7、クランプ容量C0についても同様である。リセットMOSトランジスタ4−1,4−2は共通のリセットパルスφRが供給される。また、転送MOSトランジスタ20、50についても共通の転送パルスφT1が供給される。また、選択MOSトランジスタ6−1,6−2についても、共通の選択パルスφSELが供給される。
Hereinafter, description will be made with reference to FIG. For those having the same functions as those shown in the image pickup apparatus illustrated in FIG. 4, the same reference numerals as those given in FIG. 4 are also given in FIG. 11. Further, when the A pixel and the B pixel each have the same function, they are indicated by a branch number. For example, the amplification MOS transistor is attached as 5-1 for the A pixel and 5-2 for the B pixel. Hereinafter, the same applies to the
A画素とB画素のそれぞれが有する選択MOSトランジスタ6−1、6−2はそれぞれが垂直信号線7−1、7−2に電気的に接続されている。垂直信号線7−1、7−2はノードAで電気的に接続されている。また、垂直信号線7−2は、スイッチSW6が設けられている。このスイッチSW6は、B画素からのB信号の、クランプ容量C0−2を介して比較回路9への出力を行う否かを切り替えるスイッチである。すなわち、スイッチSW6がオンである時には、B信号がクランプ容量C0−2を介して比較回路9に出力され、スイッチSW6がオフである時には比較回路にB信号は出力されない。尚、本実施例ではノードAから比較回路9に至る信号線を垂直信号線7と呼び、A画素、B画素のそれぞれに電気的に接続された垂直信号線7−1,7−2と区別する。
The selective MOS transistors 6-1 and 6-2 of the A pixel and the B pixel are electrically connected to the vertical signal lines 7-1 and 7-2, respectively. The vertical signal lines 7-1 and 7-2 are electrically connected at node A. Further, the vertical signal line 7-2 is provided with a switch SW6. This switch SW6 is a switch for switching whether or not to output the B signal from the B pixel to the
以下では、図1(a)を用いて説明した実施例1と同様に、一部の行において全ての画素がA信号とA+B信号とを出力する形態を説明する。また、図1(a)においてAとA+Bとを併記した領域の画素は、A信号を出力した後、A+B信号を出力する。図1(a)においてA+Bのみを記した領域の画素は、A信号を出力せずに、A+B信号の出力を行う。 Hereinafter, as in the case of the first embodiment described with reference to FIG. 1A, a mode in which all the pixels output the A signal and the A + B signal in some rows will be described. Further, the pixels in the region in which A and A + B are written together in FIG. 1A output the A signal and then the A + B signal. In FIG. 1A, the pixels in the region where only A + B is shown output the A + B signal without outputting the A signal.
次に、図12(a)に図11に例示した撮像装置のうち、A信号とA+B信号とを出力する行の動作タイミングの一例を示す。図12(a)中に示したスイッチパルスφS1は、図11で例示したスイッチSW6のオン、オフを切り替えるパルス信号である。φS1がHレベルの時にスイッチSW6はオンであり、φS1がLレベルの時にスイッチSW6はオフである。 Next, FIG. 12A shows an example of the operation timing of the line that outputs the A signal and the A + B signal among the imaging devices illustrated in FIG. The switch pulse φS1 shown in FIG. 12A is a pulse signal for switching on / off of the switch SW6 illustrated in FIG. The switch SW6 is on when φS1 is H level, and the switch SW6 is off when φS1 is L level.
時刻t60において、リセットパルスφRをHレベルとする。また、時刻t60において、選択パルスφSEL、スイッチパルスφC、φS1をHレベルとする。この動作により、増幅MOSトランジスタ5−1、5−2の入力ノード、クランプ容量C0−1、C0−2、C4の電荷がリセットされる。 At time t60, the reset pulse φR is set to H level. Further, at time t60, the selection pulse φSEL, the switch pulse φC, and φS1 are set to the H level. By this operation, the charges of the input nodes of the amplification MOS transistors 5-1 and 5-2 and the clamp capacitances C0-1, C0-2 and C4 are reset.
時刻t61において、リセットパルスφR、スイッチパルスφCをLレベルとする。スイッチパルスφS1は引き続きHレベルのままである。 At time t61, the reset pulse φR and the switch pulse φC are set to the L level. The switch pulse φS1 remains at the H level.
時刻t62からN変換を行う。ランプ信号発生回路10はランプ信号VRAMPの変化を開始する。比較回路9は垂直信号線7にクランプ容量C0−1、C0−2を介して与えられたN信号と、ランプ信号発生回路10から供給されるランプ信号VRAMPとの比較動作を開始する。また、カウンタ回路11は、ランプ信号発生回路10がランプ信号VRAMPの変化を開始すると同時にクロックパルス信号CLKの計数を開始し、計数結果であるカウント信号をメモリ13に出力する。
N conversion is performed from time t62. The lamp
例えば、ノードAに出力されたN信号と、ランプ信号VRAMPとの大小関係が、時刻t63に逆転したとする。すると、比較回路9が出力するラッチ信号LATが変化する。このラッチ信号LATが変化すると、カウンタ回路11はカウント信号のメモリ13への出力を停止する。メモリ13はこの時刻t63でのカウント信号を保持する。ランプ信号発生回路10は時刻t64でランプ信号VRAMPを変化させるのを終了する。また、スイッチパルスφS1は時刻t64にLレベルとする。
For example, it is assumed that the magnitude relationship between the N signal output to the node A and the lamp signal VRAMP is reversed at time t63. Then, the latch signal LAT output by the
時刻t65において、転送パルスφT1をHレベルとする。フォトダイオード1から増幅MOSトランジスタ5−1、フォトダイオード51から増幅MOSトランジスタ5−2のそれぞれの入力ノードに信号電荷が転送される。これにより垂直信号線7−1にはA信号、垂直信号線7−2にはB信号が出力される。スイッチパルスφS1はLレベルであるので、ノードAにはA信号が出力される。
At time t65, the transfer pulse φT1 is set to the H level. The signal charge is transferred from the
時刻t66からA変換を行う。ランプ信号発生回路10はランプ信号VRAMPの変化を開始する。比較回路9は垂直信号線7に出力されたA信号とランプ信号VRAMPとの比較動作を開始する。さらに、カウンタ回路11も先のN信号の場合と同様に、ランプ信号VRAMPが信号レベルの変化を開始すると同時にクロックパルス信号CLKの計数を開始する。
A conversion is performed from the time t66. The lamp
例えば、ノードAに出力されたA信号とランプ信号VRAMPとの大小関係が、時刻t67に逆転したとする。すると、比較回路9が出力するラッチ信号LATが変化する。このラッチ信号LATが変化すると、カウンタ回路11はカウント信号のメモリ13への出力を停止する。メモリ13はこの時刻t14でのカウント信号を保持する。ランプ信号発生回路10は時刻t68でランプ信号VRAMPを変化させるのを終了する。
For example, it is assumed that the magnitude relationship between the A signal output to the node A and the lamp signal VRAMP is reversed at time t67. Then, the latch signal LAT output by the
時刻t68にランプ信号VRAMPの変化が終了した後、先のN変換とA変換によって得たデジタルN信号とデジタルA信号とをデジタル信号処理部に転送する。本実施例ではこのデジタルN信号、デジタルA信号のデジタル信号処理部への転送を時刻t70としているが、時刻t69のスイッチパルスφS1と順番が前後しても差し支えない。後述するA+B変換が終了する時刻t73までにデジタルA信号、デジタルN信号の転送が終了することが好ましい。これにより、後述するデジタルA+B信号、デジタルN信号の転送がA+B変換終了後すぐに行うことができる。 After the change of the lamp signal VRAMP is completed at time t68, the digital N signal and the digital A signal obtained by the previous N conversion and A conversion are transferred to the digital signal processing unit. In this embodiment, the transfer of the digital N signal and the digital A signal to the digital signal processing unit is set at time t70, but the order may be different from that of the switch pulse φS1 at time t69. It is preferable that the transfer of the digital A signal and the digital N signal is completed by the time t73 when the A + B conversion described later is completed. As a result, the transfer of the digital A + B signal and the digital N signal, which will be described later, can be performed immediately after the completion of the A + B conversion.
時刻t69において、スイッチパルスφS1をHレベルにする。これにより、ノードAにはA+B信号が出力される。 At time t69, the switch pulse φS1 is set to H level. As a result, the A + B signal is output to the node A.
時刻t71において、A+B変換を開始する。ランプ信号発生回路10はランプ信号VRAMPの変化を開始する。さらに、比較回路9は垂直信号線7に出力されたA+B信号とランプ信号VRAMPとの比較動作を開始する。さらに、カウンタ回路11も先のN信号の場合と同様に、ランプ信号VRAMPが信号レベルの変化を開始すると同時にクロックパルス信号CLKの計数を開始する。
At time t71, A + B conversion is started. The lamp
例えば、垂直信号線7に出力されたA+B信号とランプ信号VRAMPとの大小関係が、時刻t72に逆転したとする。すると、比較回路9からカウンタ回路11にラッチ信号LATが出力される。このラッチ信号LATが出力されたカウンタ回路11は、カウント信号のメモリ13への出力を停止する。メモリ13はこの時刻t72でのカウント信号を保持する。ランプ信号発生回路10は時刻t73でランプ信号VRAMPを変化させるのを終了する。
For example, it is assumed that the magnitude relationship between the A + B signal output to the
時刻t74に、デジタルA+B信号とデジタルN信号とをデジタル信号処理回路に転送する。 At time t74, the digital A + B signal and the digital N signal are transferred to the digital signal processing circuit.
次に、図12(b)に、図11に例示した撮像装置のうち、A信号を出力しない行の動作タイミングの一例を例示する。 Next, FIG. 12B exemplifies an example of the operation timing of the line that does not output the A signal among the imaging devices illustrated in FIG.
時刻t80、t81、t82、t83のそれぞれは、A信号およびA+B信号を出力する行の動作タイミングで説明した時刻t60、t61、t62、t63のそれぞれと同様の動作とすることができる。 Each of the times t80, t81, t82, and t83 can have the same operation as each of the times t60, t61, t62, and t63 described in the operation timing of the line that outputs the A signal and the A + B signal.
時刻t84において、N変換におけるランプ信号VRAMPの変化を終了する。先のA信号およびA+B信号を出力する行の動作においては、スイッチパルスφS1をここでLレベルとしたが、A信号を出力しない行については引き続きHレベルとする。 At time t84, the change of the lamp signal VRAMP in the N conversion ends. In the operation of the line that outputs the A signal and the A + B signal, the switch pulse φS1 is set to the L level here, but the line that does not output the A signal is set to the H level.
時刻t85における動作は、先のA信号およびA+B信号を出力する行の動作タイミングにおける時刻t65と同様である。転送パルスφT1をHレベルとすることにより、増幅MOSトランジスタ5−1、5−2のそれぞれの入力ノードに、フォトダイオード1、51のそれぞれからの信号電荷が転送される。スイッチパルスφS1はHレベルであるので、垂直信号線7にはA+B信号が出力される。
The operation at the time t85 is the same as the operation at the time t65 at the operation timing of the line that outputs the A signal and the A + B signal. By setting the transfer pulse φT1 to the H level, the signal charges from the
時刻t86、t87、t88、t89のそれぞれにおける動作は、先のA信号およびA+B信号を出力する行の動作タイミングで説明した時刻t71、t72、t73、t74のそれぞれと同様の動作とすることができる。 The operation at each of the times t86, t87, t88, and t89 can be the same as the operation at each of the times t71, t72, t73, and t74 described in the operation timing of the line that outputs the A signal and the A + B signal. ..
A信号を出力しない行の動作は、実施例1で述べたのと同様に、A変換に関わる動作を行う時間、即ちA信号を出力する画素を含む行の動作タイミングの時刻t66〜t68の時間を短縮することができる。 The operation of the line that does not output the A signal is the time for performing the operation related to the A conversion, that is, the time of the operation timing of the line including the pixel that outputs the A signal, t66 to t68, as described in the first embodiment. Can be shortened.
本実施例の撮像装置は、A信号の出力を行わない画素100を有する。これにより、撮像装置の全行の画素100がA信号およびA+B信号を出力する動作を行う場合に比べて、1フレーム期間内の撮像装置からのデジタル信号を出力する時間を短縮することができる。
The image pickup apparatus of this embodiment has
本実施例は図1(a)のように、一部の行において全ての画素がA信号およびA+B信号を出力する形態について説明した。本実施例は図1(a)の読み出し方に限定されず、図1(b)、図1(c)に例示した形態であっても、水平走査回路14としてデコーダを用いて実施することができる。その際には、本実施例で説明したA信号およびA+B信号を出力する行の動作タイミングを図1(b)、(c)で例示した撮像装置の全行において行う。メモリ13に保持されたデジタルN信号、デジタルA信号、デジタルA+B信号については、実施例2と同様の動作で読み出せばよい。
In this embodiment, as shown in FIG. 1A, a mode in which all pixels output an A signal and an A + B signal in some rows has been described. This embodiment is not limited to the reading method of FIG. 1 (a), and even in the modes illustrated in FIGS. 1 (b) and 1 (c), it can be carried out by using a decoder as the
本実施例の撮像装置においても、A+B信号を得つつ、A信号を得る動作を高速に行うことができる。 Also in the image pickup apparatus of this embodiment, the operation of obtaining the A signal can be performed at high speed while obtaining the A + B signal.
[実施例4]
本実施例は、垂直信号線7のそれぞれに比較回路9、カウンタ回路11を有しておらず、メモリ13は画素100から出力される画素信号に基づいて、デジタル信号ではなく、アナログ信号である電圧値を保持する形態である。
[Example 4]
In this embodiment, the
図13は本実施例に関する撮像装置の構成の一例を示したものである。尚、図4に例示した撮像装置と同じ機能を奏する者については、図4に付した符号と同じ符号を図13でも付している。 FIG. 13 shows an example of the configuration of the imaging device according to this embodiment. For a person who performs the same function as the imaging device illustrated in FIG. 4, the same reference numerals as those given in FIG. 4 are given in FIG. 13.
本実施例の画素100、オペアンプ8については、実施例1と同様の画素100、オペアンプ8を用いることができる。
As for the
容量C_N1、C_N2はともにオペアンプ8がN信号を増幅して出力した信号VNを保持する信号保持容量である。また、容量C_A、C_ABは、それぞれオペアンプ8がA信号、A+B信号をそれぞれ増幅した信号VA,VABを保持する信号保持容量である。本実施例の信号保持部は信号保持容量信号C_A、C_N1、C_N2、C_ABである。信号VA、VN、VABのそれぞれにはオペアンプ8が有するオフセット信号Voffが重畳されている。
Both the capacitances C_N1 and C_N2 are signal holding capacitances for holding the signal VN output by the
信号保持容量C_A、C_N1、C_N2、C_ABのそれぞれは、オペアンプ8からスイッチ61,62,63、64のそれぞれを介して各信号が出力される。スイッチ61,64のゲートにはそれぞれTG12から信号書き込み信号φT_A、φT_ABが供給される。また、スイッチ62、63のゲートにはTG12から信号書き込み信号φT_Nが供給される。スイッチ61、62、63、64は、それぞれのスイッチに供給される信号書き込み信号がHレベルであるとオンとなる。すなわちスイッチ61,62,63、64がオンの時に、それぞれ各信号保持容量C_A、C_N1、C_N2、C_ABに各信号が書き込まれる。信号保持容量C_N1、C_N2はそれぞれ画素が有するノイズレベルの信号が保持されるNメモリである。Nメモリは画素の有するノイズレベルの信号を保持する第1のメモリである。また、信号保持容量C_Aは、画素の一部の光電変換部に基づく画素信号に基づいた信号を保持するS1メモリである。S1メモリは、焦点検出用信号を保持する第2のメモリである。また、信号保持容量C_ABは、画素の複数の光電変換部に基づく画素信号に基づいた信号を保持するS2メモリである。S2メモリは画像取得用信号を保持する第3のメモリである。
Each of the signal holding capacitances C_A, C_N1, C_N2, and C_AB is output from the
さらに信号保持容量C_N1、C_N2は、それぞれスイッチ66、67を介してN信号線15に電気的に接続されている。また、信号保持容量C_A、C_ABのそれぞれは、スイッチ65、68のそれぞれを介して、S信号線16に電気的に接続されている。スイッチ65、66のゲートには、水平走査回路14から水平選択信号φH1nが供給される。スイッチ67,68のゲートには水平走査回路14から水平選択信号φH2nが供給される。水平選択信号φH1nがHレベルとなると、スイッチ65、66がオンとなり、信号保持容量C_Aから信号VAがS信号線16に出力され、信号保持容量C_N1から信号VNがN信号線15に出力される。水平選択信号φ1nがオンとなることによって、スイッチ65、66が共にオンとなるため、信号VA、VNは同期してそれぞれS信号線16、N信号線15に出力される。同様に、水平選択信号φH2nがHレベルとなると、スイッチ67、68がオンとなり、信号保持容量C_N2から信号VNがN信号線15に出力され、信号保持容量C_ABから信号VABがS信号線16に出力される。水平選択信号φH2nがオンとなることによって、スイッチ67、68が共にオンとなるため、信号VN、VABは同期してそれぞれN信号線15、S信号線16に出力される。
Further, the signal holding capacitances C_N1 and C_N2 are electrically connected to the
N信号線15、S信号線16は差動アンプ71に電気的に接続されている。差動アンプ71はN信号線15とS信号線16とが伝送するそれぞれの信号の差分を出力する。つまり、水平選択信号φH1nがHレベルとなり、S信号線16に信号VA、N信号線に信号VNが出力される場合では、差動アンプ71は信号VAから信号VNを差し引いた信号、すなわちVA−VNを出力する。同様に、水平選択信号φH2nがHレベルとなり、S信号線16に信号VAB、N信号線15に信号VNが出力される場合では、差動アンプ71は信号VABから信号VNを差し引いた信号、すなわちVAB−VNを出力する。本実施例における焦点検出用信号はVAであり、画像取得用信号はVABである。即ち、本実施例の撮像装置からは1フレーム期間内に焦点検出用信号、画像取得用信号の各々から信号VNが差し引かれた信号がそれぞれ出力される。
The
N信号線15、S信号線16のそれぞれには、リセットスイッチ69,70が電気的に接続されている。リセットスイッチ69、70にはTG12から水平リセットパルスφHcが供給される。リセットスイッチ69、70のドレインにはドレイン電圧Vddが供給されている。N信号線15、S信号線16のそれぞれが信号を差動アンプ71に出力した後、水平リセットパルスφHcをHレベルとしてリセットスイッチ69、70をオンとし、N信号線15、S信号線16の電位をリセットする。尚、図13では図示を省略しているが、N信号線15、S信号線16にはそれぞれ容量が電気的に接続されている。N信号線15に電気的に接続された容量の容量値をCH1とする。例えば信号保持容量C_N1の保持した信号は、信号保持容量C_N1の保持した信号値に、C_N1/(C_N1+CH1)を乗算した信号が差動アンプ71に出力される。S信号線16に電気的に接続された容量の容量値をCH2とする。例えば信号保持容量C_Aの保持した信号は、信号保持容量C_Aの保持した信号値に、C_A/(C_A+CH1)を乗算した信号が差動アンプ71に出力される。水平リセットパルスφHcをHレベルとしてリセットスイッチ69、70をオンとすると、容量CH1、CH2の電荷がリセットされる。
Reset switches 69 and 70 are electrically connected to the
次に、図14に、図13に例示した撮像装置において、A信号を出力する画素を含む行の動作タイミングの一例を示す。本実施例におけるA信号を出力する画素は図1(a)のように配置されている。 Next, FIG. 14 shows an example of the operation timing of the row including the pixel that outputs the A signal in the image pickup apparatus illustrated in FIG. The pixels that output the A signal in this embodiment are arranged as shown in FIG. 1 (a).
時刻t90において、リセットパルスφRをHレベルとする。また、選択パルスφSELをHレベルとする。これにより、垂直信号線7にはN信号が出力される。また、スイッチパルスφSW1をHレベルとする。これにより、N信号はクランプ容量C0に保持される。また、N信号に基づく信号が増幅され、さらにオペアンプ8のオフセット信号Voffが重畳された信号VNが出力される。信号書き込み信号φT_Nもまた、Hレベルとする。これにより、信号保持容量C_N1、C_N2に信号VNの書き込みが行われる。時刻t91にリセットパルスφR、スイッチパルスφSW1をLレベルとする。
At time t90, the reset pulse φR is set to H level. Further, the selection pulse φSEL is set to H level. As a result, an N signal is output to the
時刻t92に信号読み出しスイッチφT_NをLレベルとする。信号読み出しスイッチφT_NをLレベルにするのは、リセットパルスφRをLレベルとした後とすることが好ましい。これは、リセットパルスφRをLレベルとすることによってリセットMOSトランジスタで生じるチャージインジェクションにより、増幅MOSトランジスタ5の入力ノードの電位が変化するためである。この変化後の増幅MOSトランジスタ5の入力ノードの電位に基づく信号を信号保持容量C_N1、C_N2に保持させることが好ましい。信号保持容量C_N1、C_N2には、この時刻t92においてオペアンプ8から出力された信号VNが保持される。
At time t92, the signal read switch φT_N is set to L level. It is preferable that the signal read switch φT_N is set to the L level after the reset pulse φR is set to the L level. This is because the potential of the input node of the
時刻t93において、転送パルスφT1をHレベルとする。これにより、フォトダイオード1に保持された信号電荷が増幅MOSトランジスタ5の入力ノードに転送され、画素100からA信号が出力される。また、信号書き込み信号φT_AをHレベルとする。これにより、信号保持容量C_Aにはクランプ容量C0を介して出力されたA信号に基づいて、オペアンプ8が増幅して出力した信号VAが書き込まれる。
At time t93, the transfer pulse φT1 is set to the H level. As a result, the signal charge held in the
時刻t94において、転送パルスφT1をLレベルとする。 At time t94, the transfer pulse φT1 is set to the L level.
時刻t95において、信号書き込み信号φT_AをLレベルとし、信号VAが信号保持容量C_Aに保持される。信号書き込み信号φT_AをLレベルとした後、水平選択信号φH1nをHレベルとして、信号保持容量C_A、C_N1からそれぞれ信号VA、VNをS信号線16、N信号線15に出力させる。信号保持容量C_A、C_N1からのそれぞれの信号VA,VNの出力を終えた後、水平選択信号φH1nをLレベルとする。また、水平選択信号φH1nをLレベルとした後、N信号線15、S信号線16の電位をリセットするため、水平リセットパルスφHcをHレベルとする。N信号線15、S信号線16の電位をリセットした後、水平リセットパルスφHcをLレベルとする。尚、図14の動作タイミング図では示していないが、複数列の信号保持容量C_A,C_N1から信号VA、VNを出力させるため、水平リセットパルスφHcをLレベルとする。次に信号VA,VNを出力させる列の水平選択信号φH1nをHレベルとして、順次信号をS信号線16、N信号線15に出力させる。同様に、水平リセットパルスφHcについても、1列の信号VN、VSのN信号、S信号の出力が終わる都度、N信号線15、S信号線16の電位をリセットするためにHレベルとする。N信号線15、S信号線16の電位がリセットされると水平リセットパルスφHcをLレベルとする。以降、焦点検出画素から信号が出力された信号保持容量C_A,C_N1について、同様に水平選択信号φH1n、水平リセットパルスφHcの供給動作を順次繰り返して信号VA,VNを出力させる。
At time t95, the signal writing signal φT_A is set to the L level, and the signal VA is held in the signal holding capacitance C_A. After the signal writing signal φT_A is set to L level, the horizontal selection signal φH1n is set to H level, and the signals VA and VN are output from the signal holding capacitances C_A and C_N1 to the
時刻t96において、転送パルスφT2をHレベルとする。これにより、画素100からはA+B信号が出力される。また、信号書き込み信号φT_ABをHレベルとする。これにより、クランプ容量C0を介して出力されたA+B信号に基づいて、オペアンプ8が増幅して出力した信号VABが信号保持容量C_ABに書き込まれる。
At time t96, the transfer pulse φT2 is set to H level. As a result, the A + B signal is output from the
時刻t97において、転送パルスφT2をLレベルとする。 At time t97, the transfer pulse φT2 is set to the L level.
時刻t98において、信号書き込み信号φT_ABをLレベルとし、信号VABが信号保持容量C_ABに保持される。信号書き込み信号φT_ABをLレベルとした後、水平選択信号φH2nをHレベルとして、信号保持容量C_AB、C_N2からそれぞれ信号VAB、VNをS信号線16、N信号線15に出力させる。信号保持容量C_AB、C_N2からのそれぞれの信号VAB,VNの出力を終えた後、水平選択信号φH2nをLレベルとする。また、水平選択信号φH2nをLレベルとした後、N信号線15、S信号線16の電位をリセットするため、水平リセットパルスφHcをHレベルとする。N信号線15、S信号線16の電位をリセットした後、水平リセットパルスφHcをLレベルとする。尚、図14の動作タイミング図では示していないが、複数列の信号保持容量C_AB,C_N2から信号VAB、VNを出力させるため、水平リセットパルスφHcをLレベルとする。次に信号VAB,VNを出力させる列の水平選択信号φH2nをHレベルとして、順次信号をN信号線15、S信号線16に出力させる。同様に、水平リセットパルスφHcについても、1列の信号VN、VABのN信号、S信号の出力が終わる都度、N信号線15、S信号線16の電位をリセットするためにHレベルとする。N信号線15、S信号線16の電位がリセットされると水平リセットパルスφHcをLレベルとする。以降、画素の各列から信号が出力された信号保持容量C_AB,C_N2について、同様に水平選択信号φH2n、水平リセットパルスφHcの供給動作を順次繰り返して信号VAB,VNを出力させる。
At time t98, the signal writing signal φT_AB is set to the L level, and the signal VAB is held in the signal holding capacitance C_AB. After the signal writing signal φT_AB is set to L level, the horizontal selection signal φH2n is set to H level, and the signals VAB and VN are output from the signal holding capacitances C_AB and C_N2 to the
時刻t99において、選択パルスφSELをLレベルとする。 At time t99, the selection pulse φSEL is set to the L level.
以上、これまでA信号を出力する画素を含む行の動作タイミングについて説明した。次に、A信号を出力する画素を含まない行の動作タイミングについて説明する。 So far, the operation timing of the line including the pixel that outputs the A signal has been described. Next, the operation timing of the line that does not include the pixel that outputs the A signal will be described.
図15は、A信号を出力する画素を含まない行の動作タイミングの一例を示したものである。時刻t110、t111、t112のそれぞれにおける動作については、A信号を出力する画素を含む行の動作タイミングにおける時刻t90、t91、t92と同様とすることができる。 FIG. 15 shows an example of the operation timing of the line not including the pixel that outputs the A signal. The operation at each of the times t110, t111, and t112 can be the same as the operations at the times t90, t91, and t92 at the operation timing of the line including the pixel that outputs the A signal.
時刻t113において、転送パルスφT1,φT2をHレベルとする。これにより、垂直信号線7には画素100からA+B信号が出力される。また、信号書き込み信号φT_ABをHレベルとする。これにより、クランプ容量C0を介して出力されたA+B信号に基づいて、オペアンプ8が増幅して出力した信号VABが信号保持容量C_ABに書き込まれる。
At time t113, the transfer pulses φT1 and φT2 are set to H level. As a result, the A + B signal is output from the
時刻t114において、転送パルスφT1、φT2をLレベルとする。 At time t114, the transfer pulses φT1 and φT2 are set to the L level.
時刻t115において、信号書き込み信号φT_ABをLレベルとする。これにより、信号保持容量C_ABには信号VABが保持される。信号書き込み信号φT_ABをLレベルとした後、水平選択信号φH2nをHレベルとする。信号保持容量C_N2には、時刻t112において、図14で説明したA信号を出力する画素を含む行の動作タイミングでの時刻t92と同様に、信号VNが保持されている。従って、N信号線15には信号VN、S信号線16には信号VABがそれぞれ出力される。N信号線15、S信号線16に信号VN,VABのそれぞれの出力した後、水平選択信号φH2nをLレベルとし、その後、水平リセットパルスφHcをHレベルとしてN信号線15、S信号線16の電位をリセットする。尚、図15の動作タイミング図では示していないが、複数列の信号保持容量C_AB,C_N2から信号VAB、VNを出力させるため、水平リセットパルスφHcをLレベルとする。次に信号VAB,VNを出力させる列の水平選択信号φH2nをHレベルとして、順次信号をN信号線15、S信号線16に出力させる。同様に、水平リセットパルスφHcについても、1列の信号VN、VABのN信号、S信号の出力が終わる都度、N信号線15、S信号線16の電位をリセットするためにHレベルとする。N信号線15、S信号線16の電位がリセットされると水平リセットパルスφHcをLレベルとする。以降、画素の各列から信号が出力された信号保持容量C_AB,C_N2について、同様に水平選択信号φH2n、水平リセットパルスφHcの供給動作を順次繰り返して信号VAB,VNを出力させる。
At time t115, the signal writing signal φT_AB is set to the L level. As a result, the signal VAB is held in the signal holding capacitance C_AB. After the signal writing signal φT_AB is set to L level, the horizontal selection signal φH2n is set to H level. The signal holding capacitance C_N2 holds the signal VN at the time t112, as at the time t92 at the operation timing of the line including the pixel that outputs the A signal described with reference to FIG. Therefore, the signal VN is output to the
以上、説明したように、A信号を出力する画素を含まない行の動作においては、A信号を出力する画素を含む行の動作での、画素100からA信号を出力させる動作、信号保持容量C_Aに信号VAを保持させる動作を省くことができる。即ち、A信号を出力する画素を含む行における動作の時刻t93〜t95の期間を短縮することができる。撮像装置の全行の画素100においてA信号およびA+B信号を読み出す動作を行う場合に比べて、A信号の出力を行わない画素100を有することにより、1フレーム期間内の撮像装置から信号を読み出す時間を短縮することができる。従って、A+B信号を得つつ、A信号を得る動作を高速に行うことができる。
As described above, in the operation of the line not including the pixel for outputting the A signal, the operation of outputting the A signal from the
これまで、A信号を出力する画素が図1(a)のように配置された形態を基に説明した。本実施例では、図1(b)のようにA信号を出力する画素が配置された形態についても、水平走査回路14をデコーダとすることで、実施例2と同様に、1フレーム期間内の撮像装置から信号を読み出す時間を短縮することができる。図1(b)のようにA信号を出力する画素が配された形態では、水平選択信号φH1nの動作を除いて、本実施例で図14を参照しながら説明した動作と同様とすることができる。水平選択信号φH1nは、A信号を出力する画素として動作させる画素を有する列のみHレベルとし、そのほかの列はLレベルとする。本実施例の固体撮像では、信号保持容量C_A,C_N1から信号VA、VNを出力しない列を有する。これにより、全列の信号保持容量C_A、C_N1から信号VA、VNを出力させる場合に比べて、1フレーム期間内の、S信号線16、N信号線15に信号を出力する時間を短縮することができる。従って、A+B信号を得つつ、A信号を得る動作を高速に行うことができる。
So far, the description has been made based on the form in which the pixels that output the A signal are arranged as shown in FIG. 1 (a). In this embodiment, even in the form in which the pixels for outputting the A signal are arranged as shown in FIG. 1B, by using the
また、図1(c)のようにA信号を出力する画素が配置された形態についても、実施例2で述べたのと同様に、水平走査回路14をデコーダとすることで、1フレーム期間内の撮像装置から信号を読み出す時間を短縮することができる。A信号を出力する画素を含む行については、水平選択信号φH1nの動作を除いて、本実施例で図14を参照しながら説明した動作と同様とすることができる。また、A信号を出力する画素を含まない行については、本実施例で図15を参照しながら説明した動作と同様とすることができる。A信号を出力する画素を含む行では、本実施例で先の図1(b)を参照しながら説明したのと同様に、水平選択信号φH1nは、A信号を出力する画素として動作させる画素を有する列のみHレベルとし、そのほかの列はLレベルとする。よって、信号保持容量C_A,C_N1から信号VA、VNを出力しない列が存在する。これにより、全列の信号保持容量C_A、C_N1から信号VA、VNを出力させる場合に比べて、画素1行当たりのS信号線16、N信号線15に信号を出力する時間を短縮することができる。また、図1(c)の撮像装置は、A信号を出力する画素を含まない行を有する。よって、本実施例で先の図1(a)を参照しながら説明した通り、A信号を出力する画素を含む行の動作での、画素100からA信号を出力させる動作と、信号保持容量C_Aに信号VAを保持させる動作を省くことができる。従って、図1(c)のようにA信号を出力する画素を配置した形態であっても、実施例2と同様に、1フレーム期間内の撮像装置から信号を読み出す時間を短縮することができる。従って、A+B信号を得つつ、A信号を得る動作を高速に行うことができる。
Further, also in the form in which the pixels for outputting the A signal are arranged as shown in FIG. 1C, the
本実施例では、画素100の一例としてフォトダイオード1とフォトダイオード51の面積が異なる形態を説明した。本実施例はこの形態に限定されるものではなく、フォトダイオード1、51の面積を同じとしても良い。
In this embodiment, as an example of the
[実施例5]
これまで焦点検出用信号を出力する撮像装置について述べた。本実施例は別の形態の撮像装置である。
[Example 5]
So far, an image pickup device that outputs a focus detection signal has been described. This embodiment is another form of an imaging device.
画素100、垂直走査回路2、信号処理回路101の等価回路は実施例1で説明した図4と同様とすることができる。水平走査回路14については、A信号を出力させる画素100が図1(b),(c)のように配される場合には実施例2と同様にデコーダとすれば良い。A信号を出力する画素100が図1(a)のように配される場合には水平走査回路14は実施例1と同様とすることができる。
The equivalent circuit of the
実施例1の撮像装置では、1つのマイクロレンズ23が1つの画素100の受光部に光を集光するように配されていた。本実施例はマイクロレンズ23の配置には特に限定されない。例えば、1つのマイクロレンズ23が複数の画素100の受光部に光を集光するように配されていても良い。また、マイクロレンズ23を有さない撮像装置の形態であっても良い。
In the image pickup apparatus of the first embodiment, one
本実施例においても、1フレーム期間内に複数の画素100からA+B信号が出力され、さらにA+B信号を出力した複数の画素100の一部の画素100のA信号が使用される。A信号を出力する画素100の配置は、これまでの実施例1〜4で述べたのと同様に図1(a)〜(c)で例示したようなレイアウトとすることができる。図1(a)のレイアウトでA信号を使用する画素100を配した場合には、実施例1で図6、図7を参照しながら述べた動作タイミング図と同様の動作とすることができる。図1(b)、(c)のレイアウトでA信号を使用する画素100を配した場合には、実施例2で図6、図9(a)、(b)を参照しながら説明した動作タイミングと同様とすることができる。
Also in this embodiment, A + B signals are output from the plurality of
実施例1、2で述べたのと同様に、本実施例の撮像装置からは複数の画素100からのA+B信号に基づくデジタルA+B信号と、A+B信号を出力した複数の画素100の一部の画素100のA信号に基づくデジタルA信号とが出力される。撮像装置から出力されたデジタルA信号、デジタルA+B信号は、例えば図16に例示した撮像システムの出力信号処理部155の一例であるデジタル信号処理回路に出力される。デジタル信号処理回路は、デジタルA+B信号とデジタルA信号との差分を演算して、デジタルB信号を得る処理などを行う。
Similar to those described in Examples 1 and 2, the digital A + B signal based on the A + B signal from the plurality of
本実施例の撮像装置の1フレームの信号出力で得られる画像は、A信号を使用する画素100の配された領域が、他の領域に比して高解像度で表現できる。A信号を使用する画素100の領域については、撮像装置からデジタルA信号が出力され、デジタル信号処理回路でデジタルA+B信号とデジタルA信号との差分処理が行われてデジタルB信号が得られる。よって、A信号を使用する画素100が配された領域については、デジタルA信号と、デジタルB信号とを得る。従って、A信号を使用しない領域(デジタルA+B信号を使用する領域)よりも、A信号を使用する領域(デジタルA信号、デジタルB信号のそれぞれを使用する領域)では、デジタルA信号とデジタルB信号を得る分、高解像度となる。
In the image obtained by the signal output of one frame of the image pickup apparatus of this embodiment, the area where the
1フレームの撮像動作によって得られる画像において高解像度で表現したい領域に配された画素100についてはA信号とA+B信号とを出力し、他の領域の画素100はA+B信号を出力する。撮像装置の信号出力に関わる動作は実施例1または実施例2と同様であるから、全画素のA信号、A+B信号を使用する形態に比して、本実施例の撮像装置は1フレーム期間内の撮像装置からの信号読み出しに要する時間を短縮することができる。
In the image obtained by the imaging operation of one frame, the A signal and the A + B signal are output for the
本実施例では、光電変換信号としてA信号とA+B信号とを出力する画素100を説明した。本実施例はこの形態に限定されず、さらに別のフォトダイオードを有し、このフォトダイオードで生成する信号電荷に基づいたC信号を出力する画素100を有していても良い。この形態では、得たい解像度によって画素100から出力させる信号を変えればよい。例えば、全画素からA+B信号を出力させ、高解像度で表示したい領域に含まれる一部の画素100からさらにC信号を出力させる形態がある。また、全画素からA+B+C信号を出力させて、高解像度で表示したい領域に含まれる一部の画素100からA信号、B信号、A+B信号、B+C信号、A+C信号のいずれかの信号を出力させる形態でもよい。このような形態であっても、全画素から2つの光電変換信号を出力させる形態に比べて、全画素から1つの光電変換信号を出力させ、一部の画素から別の光電変換信号を出力させる形態であれば、1フレーム期間内の撮像装置からの信号読み出しに要する時間を短縮することができる。
In this embodiment, the
[実施例6]
これまでに述べた撮像装置を撮像システムに適用した場合の実施例について述べる。撮像システムとして、デジタルスチルカメラやデジタルカムコーダーや監視カメラなどがあげられる。図16に、撮像システムの例としてデジタルスチルカメラに撮像装置を適用した場合の模式図を示す。
[Example 6]
Examples of cases where the image pickup apparatus described above is applied to an image pickup system will be described. Examples of the imaging system include a digital still camera, a digital camcorder, and a surveillance camera. FIG. 16 shows a schematic diagram when an imaging device is applied to a digital still camera as an example of an imaging system.
図16において、151はレンズの保護のためのバリア、152は被写体の光学像を撮像装置154に結像させるレンズ、153はレンズ152を通った光量を可変にするための絞りである。レンズ152、絞り153は撮像装置154に光を導く光学系である。155は撮像装置154より出力される出力信号の処理を行う出力信号処理部である。
In FIG. 16, 151 is a barrier for protecting the lens, 152 is a lens for forming an optical image of a subject on the
撮像装置154からの出力信号が実施例4のようにアナログ信号である場合には、出力信号処理部155は、アナログ信号処理部、アナログデジタル変換部とデジタル信号処理部とを有する形態とする。撮像装置154からの出力信号をアナログ信号処理部が各種の補正を行って、アナログデジタル変換部に信号を出力する。アナログ信号処理部から出力された信号をアナログデジタル変換部がデジタル信号に変換し、デジタル信号処理部に出力する。デジタル信号処理部は必要に応じて各種の補正、圧縮を行ったうえで信号を出力する。尚、実施例4における撮像装置154では、一部の画素がA+B信号の出力を行うものの、A信号を出力しない場合を例示した。従って、1フレーム期間内に撮像装置154から出力される焦点検出用信号のデータ量は、全画素がA信号を出力する場合に比べて少なくなる。従って、出力信号処理部155についてもアナログデジタル変換の処理時間が短くなるため、信号処理を高速化することができる効果を有している。
When the output signal from the
一方、撮像装置154が先に示した実施例1〜3のように、デジタル信号を出力する場合には、出力信号処理部155はデジタル信号処理部を有する。デジタル信号処理部は、撮像装置154から出力されるデジタルA信号、デジタルA+B信号のそれぞれからデジタルN信号を差し引く差分処理やデジタルA+B信号からデジタルA信号を差し引いてデジタルB信号を得る差分処理を行う。また、出力信号処理部155はその他、必要に応じて各種の補正、圧縮を行って信号を出力する動作を行う。尚、実施例1〜3の撮像装置154では、A+B信号の出力を行うものの、A信号を出力しない画素を有していた。従って、1フレーム期間内に撮像装置154から出力される焦点検出用信号のデータ量は、全画素がA信号を出力する場合に比べて少なくなる。よって、撮像装置154がデジタル信号を出力する場合においても、信号処理を行うデータ量が少なくなるため、信号処理を高速化することができる効果を有している。
On the other hand, when the
そして、図16において、156は画像データを一時的に記憶する為のバッファメモリ部、158は記録媒体に記録または読み出しを行うためのインターフェース部、159は撮像データの記録または読み出しを行う為の半導体メモリ等の着脱可能な記録媒体である。157は外部コンピュータ等と通信する為のインターフェース部である。1510は各種演算とデジタルスチルカメラ全体を制御する全体制御・演算部、1511は撮像装置154、出力信号処理部155に、各種タイミング信号を出力するタイミング発生部である。ここで、タイミング信号などは外部から入力されてもよく、撮像システムは少なくとも撮像装置154と、撮像装置154から出力された出力信号を処理する出力信号処理部155とを有すればよい。
In FIG. 16, 156 is a buffer memory unit for temporarily storing image data, 158 is an interface unit for recording or reading on a recording medium, and 159 is a semiconductor for recording or reading imaging data. It is a removable recording medium such as a memory. Reference numeral 157 is an interface unit for communicating with an external computer or the like.
出力信号処理部155が行う、デジタル信号A+B信号からデジタルA信号を差し引く処理、あるいは、信号VAB−VNから信号VA−VNを差し引く処理は、共に同じ画素から出力された信号同士で行われる。すなわち、画素が出力したA信号に基づく焦点検出用信号と、A信号を出力した画素と同じ画素が出力したA+B信号に基づく画像取得用信号とで差分処理が行われる。これにより、画素のB信号に基づく信号が得られ、この信号とA信号に基づく信号との信号値を比較することにより、位相差検出方式の焦点検出が行われる。
The process of subtracting the digital A signal from the digital signal A + B signal or the process of subtracting the signal VA-VN from the signal VAB-VN, which are performed by the output
以上のように、本実施例の撮像システムは、撮像装置154を適用して撮像動作を行うことが可能である。本実施例の撮像システムに、実施例1〜4に例示した撮像装置を適用することにより、撮像装置154から出力される焦点検出用信号に基づいた位相差検出式の焦点検出動作と、画像取得用信号に基づいた画像の形成とを行うことができる。
As described above, the image pickup system of this embodiment can perform the image pickup operation by applying the
[実施例7]
本実施例の撮像システムについて、図17を参照しながら説明する。実施例6で説明した撮像システムとは異なる点を中心に説明する。図17に例示した撮像システムは、実施例6で説明した撮像システムに対し、撮像装置154から出力される焦点検出用信号を処理する焦点検出用信号処理部1512が設けられている。そして、焦点検出用信号処理部1512から信号が出力信号処理部155に出力される形態である。
[Example 7]
The imaging system of this embodiment will be described with reference to FIG. The points different from the imaging system described in the sixth embodiment will be mainly described. The image pickup system illustrated in FIG. 17 is provided with a focus detection
本実施例の撮像装置154は全画素がA信号を出力する画素として動作する。すなわち、撮像装置154の全画素からA信号とA+B信号とがそれぞれ出力される。従って、全画素からの画素信号に基づく、焦点検出用信号と画像取得用信号とが撮像装置154から出力される。撮像装置154がアナログデジタル変換回路を有し、デジタル信号を出力する場合には、焦点検出用信号はデジタルA信号であり、画像取得用信号はデジタルA+B信号である。撮像装置154からデジタル信号の焦点検出用信号、画像取得用信号が出力される場合の回路構成は、実施例1で例示した図4のような構成でも良いが、この構成には限定されない。つまり、画素100がA信号とA+B信号とを時分割で出力し、メモリ13にはこれらの信号に基づくデジタルA信号、デジタルA+B信号が保持されると共に水平走査回路14によって各メモリ13から順次デジタル信号が出力される形態であれば良い。撮像装置154からアナログ信号が出力される場合には、焦点検出用信号は信号VAであり、画像取得用信号はVABである。撮像装置154からアナログ信号の焦点検出用信号、画像取得用信号が出力される場合の回路構成について、実施例6で例示した図13のような回路構成でも良いが、この構成に限定されない。つまり、画素100がA信号とA+B信号とを時分割で出力し、信号保持容量にこれらの信号に基づく信号VA,VABが保持され、水平走査回路14によって各信号保持容量から信号VA,VABが出力される形態であれば良い。撮像装置154からアナログ信号が出力される形態では、出力信号処理部155は、アナログ信号処理部、アナログデジタル変換部とデジタル信号処理部とを有する形態とする。撮像装置154からの出力信号をアナログ信号処理部が各種の補正を行って、アナログデジタル変換部に信号を出力する。アナログ信号処理部から出力された信号をアナログデジタル変換部がデジタル信号に変換し、デジタル信号処理部に出力する。デジタル信号処理部は必要に応じて各種の補正、圧縮を行ったうえで信号を出力する。
The
焦点検出用信号処理部1512は、撮像装置154から出力される全画素のA信号に基づく焦点検出用信号のうち、一部の画素からのA信号に基づく焦点検出用信号を出力信号処理部155に出力する。また、他の一部の画素からのA信号に基づく焦点検出用信号は破棄する処理を行う。
The focus detection
一方、撮像装置154から出力された画像取得用信号については、焦点検出用信号処理部1512は処理を行わず、そのまま出力信号処理部155に出力される。
On the other hand, the image acquisition signal output from the
出力信号処理部155には、撮像装置154の一部の画素からのA信号に基づく焦点検出用信号と、全画素からのA+B信号に基づく画像取得用信号が入力される。出力信号処理部155は全画素からのA信号に基づく焦点検出用信号が入力される場合に比べて、焦点検出用信号処理部1512が一部の画素のみからのA信号に基づく焦点検出信号を出力信号処理部155に出力するため、出力信号処理部155に入力される焦点検出用信号のデータ量が少なくなる。従って、出力信号処理部155は全画素のA信号に基づく焦点検出用信号が入力される場合に比べて高速に信号処理を行うことができる。
A focus detection signal based on the A signal from some pixels of the
よって、本実施例の撮像システムは、撮像装置154から出力される焦点検出用信号のうち、一部の画素からのA信号に基づく焦点検出信号を出力信号処理部155に出力する焦点検出用信号処理部を有することにより、高速に信号処理を行うことができる。
Therefore, the imaging system of this embodiment outputs a focus detection signal based on the A signal from some pixels among the focus detection signals output from the
[実施例8]
図面を参照しながら、本実施例の撮像装置について説明する。
[Example 8]
The imaging apparatus of this embodiment will be described with reference to the drawings.
図18(a)は本実施例の撮像装置の構成の一例を示した模式図である。 FIG. 18A is a schematic view showing an example of the configuration of the image pickup apparatus of this embodiment.
図18(a)では、画素100が持つ2つのフォトダイオード1、51を、2つの長方形を用いて模式的に表している。また、図18(a)では、図4と同じ機能を有する部材については、図4で付した符号と同じ符号を図18(a)でも付している。また、図18では、垂直信号線7、比較回路9、カウンタ回路11、メモリ13については、図の左から数えて何列目に位置しているかを表す枝番を付している。水平走査回路14は、水平転送部141と水平走査部142を有している。また、図18(a)に記載の撮像装置は、カウンタ制御部30を有している。メモリ13には、TGから信号mtxが与えられる。
In FIG. 18A, the two
図18(b)は、本実施例の1列のカウンタ回路11、メモリ13の構成を示した図である。カウンタ回路11はビット信号c[0]〜c[11]の12ビットのデジタル信号を出力する形態として示している。カウンタ制御部30が出力する信号deがHレベルであって、信号seがLレベルの期間では、ビット信号c[1]〜c[11]の信号値がクロック信号clkに応じて変化する。一方、信号deがLレベルであって、信号seがHレベルの期間では、ビット信号c[0]〜c[11]の信号値がクロック信号clkに応じて変化する。ビット信号c[1]はビット信号c[0]の信号値が変化する場合は、ビット信号c[0]を2分周した信号となる。よって、信号deがHレベルであって、信号seがLレベルの場合のカウンタ回路11の単位時間当たりのカウント数は、信号deがLレベルであって、信号seがHレベルの場合の2倍となる。以下、信号deがHレベルであって、信号seがLレベルの場合のカウンタ回路11のカウント動作をダブルカウント動作、信号deがLレベルであって、信号seがHレベルの場合のカウンタ回路11のカウント動作をシングルカウント動作と表記する。
FIG. 18B is a diagram showing the configuration of the one-
次に図19を参照しながら、図18(a)に示した撮像装置の動作について説明する。本実施例の比較回路9は、比較結果信号として、信号coをカウンタ制御部30に出力する。本実施例の比較回路9は、ランプ信号VRAMPの電位よりも垂直信号線7の電位の方が大きい場合には、Hレベルの信号を出力する。ランプ信号VRAMPの電位よりも垂直信号線7の電位の方が小さい場合には、Lレベルの信号を出力する。
Next, the operation of the image pickup apparatus shown in FIG. 18A will be described with reference to FIG. The
図19に示した符号は、それぞれ図18(a)に示した符号と対応している。本実施例では、信号de3、de4は共に全期間Lレベルとしている。 The reference numerals shown in FIG. 19 correspond to the reference numerals shown in FIG. 18A, respectively. In this embodiment, the signals de3 and de4 are both set to L level for the entire period.
A変換期間について説明する。A変換期間に先立って、1行目の画素100からはA信号が比較回路9に出力されている。
A conversion period will be described. Prior to the A conversion period, the A signal is output to the
まず、カウンタ制御部は信号aeをHレベルとする。その後、比較回路9−1、9−2、9−3、9−4はランプ信号VRAMPと垂直信号線7−1、7−2、7−3、7−4の電位との比較動作をそれぞれ開始する。比較回路9−1、9−3の比較結果信号co1、co3が共にHレベルの時には、カウンタ制御部30が出力する信号se1はLレベル、信号de1はHレベルである。この時、カウンタ回路11−1はダブルカウント動作にてクロック信号clkをカウントする。また、比較回路9−2、9−4の比較結果信号co2、co4が共にHレベルの時には、カウンタ制御部30が出力する信号se2はLレベル、信号de2はHレベルである。この時、カウンタ回路11−2はダブルカウント動作にてクロック信号clkをカウントする。また、比較回路9−3、9−4の比較結果信号co3、co4の信号レベルに関わらず、信号aeがHレベルの期間は、信号se3はLレベルである。信号de3もLレベルであるため、カウンタ回路11−3はクロック信号clkのカウント動作を行わない。また、比較回路9−4の比較結果信号co4の信号レベルに関わらず、信号aeがHレベルの期間は、信号se4はLレベルである。信号de4もLレベルであるため、カウンタ回路11−4はクロック信号clkのカウント動作を行わない。
First, the counter control unit sets the signal ae to H level. After that, the comparison circuits 9-1, 9-2, 9-3, and 9-4 perform a comparison operation between the lamp signal VRAMP and the potentials of the vertical signal lines 7-1, 7-2, 7-3, and 7-4, respectively. Start. When the comparison result signals co1 and co3 of the comparison circuits 9-1 and 9-3 are both at H level, the signal se1 output by the
次に、比較回路9−2の比較結果信号co2がHレベルからLレベルに変化したとする。これにより、信号se2はLレベルからHレベルに変化し、信号de2はHレベルからLレベルに変化する。よって、カウンタ回路11−2はダブルカウント動作からシングルカウント動作に移行して、クロック信号clkをカウントする。 Next, it is assumed that the comparison result signal co2 of the comparison circuit 9-2 changes from the H level to the L level. As a result, the signal se2 changes from the L level to the H level, and the signal de2 changes from the H level to the L level. Therefore, the counter circuit 11-2 shifts from the double count operation to the single count operation and counts the clock signal clk.
続いて、比較回路9−3の比較結果信号co3がHレベルからLレベルに変化したとする。これにより、信号de1はHレベルからLレベルに変化し、信号se1はLレベルからHレベルに変化する。よって、カウンタ回路11−1はダブルカウント動作からシングルカウント動作に移行して、クロック信号clkをカウントする。 Subsequently, it is assumed that the comparison result signal co3 of the comparison circuit 9-3 changes from the H level to the L level. As a result, the signal de1 changes from the H level to the L level, and the signal se1 changes from the L level to the H level. Therefore, the counter circuit 11-1 shifts from the double count operation to the single count operation and counts the clock signal clk.
続いて、比較回路9−4の比較結果信号co4がHレベルからLレベルに変化したとする。これにより、信号se2がHレベルからLレベルに変化するため、カウンタ回路11−2はクロック信号clkのカウント動作を停止し、この時点でのカウント信号値を保持する。 Subsequently, it is assumed that the comparison result signal co4 of the comparison circuit 9-4 changes from the H level to the L level. As a result, the signal se2 changes from the H level to the L level, so that the counter circuit 11-2 stops the counting operation of the clock signal clk and holds the counting signal value at this point.
続いて、比較回路9−1の比較結果信号co1がHレベルからLレベルに変化する。これにより、信号se1がHレベルからLレベルに変化する。よって、カウンタ回路11−1はクロック信号clkのカウントを停止し、この時点でのカウント信号値を保持する。 Subsequently, the comparison result signal co1 of the comparison circuit 9-1 changes from the H level to the L level. As a result, the signal se1 changes from the H level to the L level. Therefore, the counter circuit 11-1 stops counting the clock signal clk and holds the count signal value at this point.
カウンタ回路11−1が保持したカウント信号値は、1列目の画素100のA信号と3列目の画素100のA信号とを加算した信号に基づくデジタル信号である。このデジタル信号を、デジタルA1+A3信号と表記する。カウンタ回路11−2が保持したカウント信号は、2列目の画素100のA信号と、4列目の画素100のA信号とを加算した信号に基づくデジタル信号である。このデジタル信号をデジタルA2+A4信号と表記する。
The count signal value held by the counter circuit 11-1 is a digital signal based on a signal obtained by adding the A signal of the
次に、TGは信号mtxをHレベルとする。これにより、カウンタ回路11が保持したカウント信号をメモリ13が保持する。メモリ13−1はデジタルA1+A3信号を保持する。メモリ13−2はデジタルA2+A4信号を保持する。メモリ13−3、13−4は、0の信号値を保持する。水平転送部141は水平走査部142からの信号に基づいて、順次、各列のメモリ13が保持したデジタル信号をDSP80に出力させる。他の形態として、このメモリ13からDSP80へのデジタル信号の出力動作は、水平転送部141が、0の信号値を保持したメモリ13をスキップする。そして、複数のA信号を加算した信号に基づくデジタル信号を保持したメモリ13のみからデジタル信号を出力させるようにしても良い。
Next, TG sets the signal mtx to H level. As a result, the
続いて、A+B変換期間について説明する。A+B変換期間に先立って、1行目の画素100からはA+B信号が比較回路9に出力されている。
Next, the A + B conversion period will be described. Prior to the A + B conversion period, the A + B signal is output to the
まず、信号aeはLレベルのままとする。また、カウンタ回路11−1、11−2、11−3、11−4のカウント信号を初期値にリセットする。 First, the signal ae is left at the L level. Further, the count signals of the counter circuits 11-1, 11-2, 11-3, and 11-4 are reset to the initial values.
その後、比較回路9−1、9−2、9−3、9−4はランプ信号VRAMPと垂直信号線7−1、7−2、7−3、7−4の電位との比較動作をそれぞれ開始する。A+B変換期間では、信号aeがLレベルのため、信号de1、de2はA+B変換期間の間、Lレベルである。これにより、カウンタ回路11−1は、比較結果信号co1がHレベルからLレベルになるまでの期間、クロック信号clkをシングルカウント動作でカウントする。カウンタ回路11−2、11−3、11−4についても同様に、それぞれ、比較結果信号co2、co3、co4がHレベルからLレベルになるまでの期間、クロック信号clkをシングルカウント動作でカウントする。これにより、カウンタ回路11−1は、1列目の画素100が出力したA+B信号に基づくデジタル(A+B)1信号を保持する。同様に、カウンタ回路11−2、11−3、11−4は、デジタル(A+B)2信号、デジタル(A+B)3信号、デジタル(A+B)4信号を保持する。その後、TGは信号mtxをHレベルとして、メモリ13−1、13−2、13−3−、13−4がそれぞれデジタル(A+B)1信号、デジタル(A+B)2信号、デジタル(A+B)3信号、デジタル(A+B)4信号を保持する。水平転送部141は水平走査部142からの信号に基づいて、順次、各列のメモリ13が保持したデジタル信号をDSP80に出力させる。
After that, the comparison circuits 9-1, 9-2, 9-3, and 9-4 perform a comparison operation between the lamp signal VRAMP and the potentials of the vertical signal lines 7-1, 7-2, 7-3, and 7-4, respectively. Start. Since the signal ae is at the L level in the A + B conversion period, the signals de1 and de2 are at the L level during the A + B conversion period. As a result, the counter circuit 11-1 counts the clock signal clk in a single count operation during the period from the comparison result signal co1 to the L level. Similarly for the counter circuits 11-2, 11-3, and 11-4, the clock signal clk is counted by a single count operation during the period from the comparison result signals co2, co3, and co4 to the H level to the L level, respectively. .. As a result, the counter circuit 11-1 holds a digital (A +
本実施例のメモリ13が保持するデジタルA信号は、複数列のA信号を加算した信号に基づくデジタル信号である。よって、デジタルA+B信号に比して、デジタルA信号を保持するメモリ13の数が少なくなるため、DSP80に出力されるデジタルA信号の信号量はデジタルA+B信号の比して少なくなる。よって、本実施例の撮像装置においても、1フレーム期間に出力されるデジタルA信号の信号量は、デジタルA+B信号の信号量よりも少ない。これにより、全列のメモリ13がデジタルA信号を保持する形態に比して、デジタルA信号を保持した全メモリ13からデジタルA信号をDSP80に出力させる期間を短縮することができる。また、デジタルA信号の信号量が減ることにより、DSP80の信号処理の負荷を減らすことができる。
The digital A signal held by the
本実施例の形態を、図3(a)、図3(b)に示したように、A信号を焦点検出用信号として用いる場合について説明する。焦点検出用信号であるA信号は画像取得用信号であるA+B信号に比して、求められる信号の精度が低い場合がある。このような場合に、本実施例のように、複数列のA信号をした信号に基づくデジタルA信号を得る形態を好適に実施することができる。 A case where the A signal is used as the focus detection signal will be described with reference to the embodiment of this embodiment as shown in FIGS. 3 (a) and 3 (b). The A signal, which is a focus detection signal, may have a lower accuracy of the required signal than the A + B signal, which is an image acquisition signal. In such a case, as in the present embodiment, a mode of obtaining a digital A signal based on a signal having a plurality of rows of A signals can be preferably implemented.
[実施例9]
本実施例の撮像装置について、図面を参照しながら実施例8と異なる点を中心に説明する。本実施例では、画素100からA信号とB信号が異なる垂直信号線7に出力される形態である。
[Example 9]
The image pickup apparatus of this embodiment will be described focusing on the points different from those of the eighth embodiment with reference to the drawings. In this embodiment, the A signal and the B signal are output from the
図20(a)は本実施例の画素の構成の一例である。図20(a)では、図4に示した部材と同じ機能を有する部材については、図4で付した符号と同じ符号を付して表している。図4に示した画素では、転送MOSトランジスタ20が転送パルスφT1、転送MOSトランジスタ50が転送パルスφT2によって制御される形態として示した。図20(a)では、転送MOSトランジスタ20、50が共に同じ転送パルスφTによって制御される形態としている。また、図4では、フォトダイオード1、51のそれぞれが生成した信号電荷が増幅MOSトランジスタ5に転送される形態として示した。図20(a)では、フォトダイオード1で生成した信号電荷が転送MOSトランジスタ20を介して増幅MOSトランジスタ5−1に転送される。また、フォトダイオード51で生成した信号電荷が転送MOSトランジスタ50を介して増幅MOSトランジスタ5−2に転送される。増幅MOSトランジスタ5−1、5−2はそれぞれの入力ノードに転送された信号電荷に基づく信号を、選択MOSトランジスタ6−1、6−2を介して垂直信号線7−11、7−12に出力する。フォトダイオード1が生成した信号電荷に基づいて垂直信号線7−11に出力される信号がA信号である。また、フォトダイオード51が生成した信号電荷に基づいて垂直信号線7−12に出力される信号がB信号である。
FIG. 20A is an example of the pixel configuration of this embodiment. In FIG. 20A, members having the same functions as the members shown in FIG. 4 are designated by the same reference numerals as those assigned in FIG. In the pixels shown in FIG. 4, the
図20(b)は、本実施例の撮像装置の構成の一例を示した図である。図20(b)では、図18(a)に示した部材と同じ機能を有する部材については、図18(a)で付した符号と同じ符号を付して表している。1列目の画素100から垂直信号線7−11に出力されたA信号(以下、A1信号)は比較回路9−11に出力される。同様に、垂直信号線7−12に出力されたB信号(以下、B1信号)は、比較回路9−12に出力される。2列目の画素100から垂直信号線7−21に出力されたA信号(以下、A2信号)は、比較回路9−21に出力される。また、2列目の画素100から垂直信号線7−22に出力されたB信号(以下、B2信号)は、比較回路9−22に出力される。3列目の画素100から垂直信号線7−31に出力されたA信号(以下、A3信号)は、比較回路9−31に出力される。また、3列目の画素100から垂直信号線7−32に出力されたB信号(以下、B3信号)は、比較回路9−32に出力される。比較回路9のそれぞれは、垂直信号線7に出力された信号とランプ信号VRAMPとを比較した比較結果信号coをそれぞれカウンタ制御部30に出力する。
FIG. 20B is a diagram showing an example of the configuration of the image pickup apparatus of this embodiment. In FIG. 20 (b), the members having the same functions as the members shown in FIG. 18 (a) are designated by the same reference numerals as those assigned in FIG. 18 (a). The A signal (hereinafter, A1 signal) output from the
次に、図21を参照しながら、図20(b)に示した撮像装置のカウンタ回路11−1〜11−3の動作について説明する。図21に示した動作は、カウンタ回路11−1がA1+B1信号、カウンタ回路11−2がA1+A3信号、カウンタ回路11−3がA2+B2信号、カウンタ回路11−5がA3+B3信号を生成する形態である。 Next, the operation of the counter circuits 11-1 to 11-3 of the image pickup apparatus shown in FIG. 20B will be described with reference to FIG. 21. The operation shown in FIG. 21 is such that the counter circuit 11-1 generates an A1 + B1 signal, the counter circuit 11-2 generates an A1 + A3 signal, the counter circuit 11-3 generates an A2 + B2 signal, and the counter circuit 11-5 generates an A3 + B3 signal.
まず、比較結果信号co1〜co5は全てHレベルとなっている。この時、信号se1、se2、se3はLレベルであり、信号de1、de2、de3はHレベルである。カウンタ回路11−1、11−2、11−3はそれぞれ、ダブルカウント動作でクロック信号clkを計数する。 First, the comparison result signals co1 to co5 are all at the H level. At this time, the signals se1, se2, and se3 are at the L level, and the signals de1, de2, and de3 are at the H level. The counter circuits 11-1, 11-2, and 11-3 each count the clock signal clk in a double count operation.
次に、比較結果信号co3がHレベルからLレベルに変化する。これにより、信号se3がLレベルからHレベルに変化する。また、信号de3がHレベルからLレベルに変化する。これにより、カウンタ回路11−3は、シングルカウント動作でクロック信号clkを計数する。 Next, the comparison result signal co3 changes from the H level to the L level. As a result, the signal se3 changes from the L level to the H level. Further, the signal de3 changes from the H level to the L level. As a result, the counter circuit 11-3 counts the clock signal clk in a single count operation.
次に、比較結果信号co2がHレベルからLレベルに変化する。これにより、信号se1がLレベルからHレベルに変化する。また、信号de1がHレベルからLレベルに変化する。これにより、カウンタ回路11−1はシングルカウント動作でクロック信号clkを計数する。 Next, the comparison result signal co2 changes from the H level to the L level. As a result, the signal se1 changes from the L level to the H level. Further, the signal de1 changes from the H level to the L level. As a result, the counter circuit 11-1 counts the clock signal clk in a single count operation.
次に、比較結果信号co4がHレベルからLレベルに変化する。これにより、信号se3がHレベルからLレベルに変化する。よって、カウンタ回路11−3はこの時点でのカウント信号を保持する。この保持したカウント信号が、A2+B2信号に基づくデジタルA2+B2信号である。 Next, the comparison result signal co4 changes from the H level to the L level. As a result, the signal se3 changes from the H level to the L level. Therefore, the counter circuit 11-3 holds the count signal at this point. The held count signal is a digital A2 + B2 signal based on the A2 + B2 signal.
次に、比較結果信号co1がHレベルからLレベルに変化する。これにより、信号se1がHレベルからLレベルに変化する。よって、カウンタ回路11−1はこの時点でのカウント信号を保持する。この保持したカウント信号が、A1+B1信号に基づくデジタルA1+B1信号である。 Next, the comparison result signal co1 changes from the H level to the L level. As a result, the signal se1 changes from the H level to the L level. Therefore, the counter circuit 11-1 holds the count signal at this point. The held count signal is a digital A1 + B1 signal based on the A1 + B1 signal.
次に、比較結果信号co5がHレベルからLレベルに変化する。これにより、信号se2がHレベルからLレベルに変化する。 Next, the comparison result signal co5 changes from the H level to the L level. As a result, the signal se2 changes from the H level to the L level.
次に、TGは信号mtxをHレベルとする。これにより、カウンタ回路11−1、11−2、11−3が保持したデジタル信号がそれぞれメモリ13−1、13−2、13−3に出力される。 Next, TG sets the signal mtx to H level. As a result, the digital signals held by the counter circuits 11-1, 11-2, and 11-3 are output to the memories 13-1, 13-2, and 13-3, respectively.
本実施例のメモリ13が保持するデジタルA信号は、複数列のA信号を加算した信号に基づくデジタル信号である。よって、デジタルA+B信号に比して、デジタルA信号を保持するメモリ13の数が少なくなるため、DSP80に出力されるデジタルA信号の信号量はデジタルA+B信号の信号量に比して少なくなる。よって、本実施例の撮像装置においても、実施例8で述べた効果と同様の効果を得ることができる。
The digital A signal held by the
[実施例10]
本実施例の撮像装置について、図面を参照しながら説明する。本実施例の撮像装置はDSP80が複数列のデジタルA信号を加算して出力する形態である。
[Example 10]
The imaging apparatus of this embodiment will be described with reference to the drawings. The image pickup apparatus of this embodiment has a mode in which the
図22(a)は本実施例の撮像装置の構成の一例を示した図である。1列目の画素100の出力したA信号、A+B信号は、それぞれ比較回路9−1に出力される。比較回路9−1、カウンタ回路11−1、メモリ13−1はA変換期間、A+B変換期間でデジタルA信号、デジタルA+B信号をそれぞれ生成する。他の列の信号処理回路も同様に、デジタルA信号、デジタルA+B信号をそれぞれ生成する。水平転送部141は、水平走査部142の信号に基づいて、各列のメモリ13からデジタルA信号、デジタルA+B信号をそれぞれDSP80に出力させる。
FIG. 22A is a diagram showing an example of the configuration of the image pickup apparatus of this embodiment. The A signal and the A + B signal output by the
図22(b)は、本実施例のDSP80が出力する信号を表した図である。入力信号とは、水平転送部141によって各列のメモリ13からDSP80に出力される信号を表している。出力信号は、DSP80が出力する信号である。まず、1列目から順に各メモリ13からデジタルA信号がDSP80に出力される。DSP80は、複数列のデジタルA信号を加算した信号を出力する。図22(b)では、1列目と3列目のメモリ13が保持したデジタルA信号を加算したデジタル信号を出力する。以降、同様に、2列目と4列目、5列目と7列目、のデジタルA信号を加算したデジタル信号を出力する。
FIG. 22B is a diagram showing a signal output by the
水平転送部141が各メモリ13からDSP80にデジタルA信号を出力させた後、水平転送部141は各メモリ13からDSP80にデジタルA+B信号を出力させる。
After the
DSP80は、各列から出力されたデジタルA+B信号を順次出力する。
The
2行目の画素100のA信号、A+B信号に基づくデジタルA信号、デジタルA+B信号についても、DSP80は1行目の画素のA信号、A+B信号に基づくデジタルA信号、デジタルA+B信号と同様の処理とすることができる。
Regarding the A signal of the
これにより、撮像装置から出力されるデジタルA信号の信号量を、デジタルA+B信号の信号量よりも少なくすることができる。これにより、実施例2の撮像装置と同様の効果を得ることができる。 As a result, the signal amount of the digital A signal output from the image pickup apparatus can be made smaller than the signal amount of the digital A + B signal. As a result, the same effect as that of the image pickup apparatus of the second embodiment can be obtained.
また、本実施例では、複数列のデジタルA信号をDSP80が加算する形態を示した。他の形態として、図23(a)に示すように、複数行のA信号に基づくデジタルA信号を加算する形態としても良い。図23(a)では、水平転送部141が各列のメモリ13から1行目の画素100のA信号に基づくデジタルA信号をDSP80に出力させる。DSP80は、各デジタルA信号を保持する。そして、水平転送部141が各列のメモリ13から1行目の画素100のA+B信号に基づくデジタルA+B信号をDSP80に出力させる。DSP80は、各列のデジタルA+B信号を出力する。次に、水平転送部141が各列のメモリ13から2行目の画素100のA信号に基づくデジタルA信号をDSP80に出力させる。DSP80は、2行目の画素100のA信号に基づくデジタルA信号と、保持していた1行目の画素100のA信号に基づくデジタルA信号と、を加算した信号を出力する。次に、水平転送部141が各列のメモリ13から2行目の画素100のA+B信号に基づくデジタルA+B信号をDSP80に出力させる。DSP80は、各列のデジタルA+B信号を出力する。
Further, in this embodiment, a mode in which the DSP80 adds a plurality of rows of digital A signals is shown. As another form, as shown in FIG. 23A, a digital A signal based on a plurality of lines of A signals may be added. In FIG. 23A, the
よって、図23(a)の形態においても、図22(b)に述べた形態と同様の効果を得ることができる。 Therefore, even in the form of FIG. 23 (a), the same effect as that of the form described in FIG. 22 (b) can be obtained.
また、他の形態として、図23(b)のように、1行目の画素100のA+B信号に基づくデジタルA+B信号がDSP80に出力されてから、DSP80が複数のデジタルA信号を加算した信号を出力する形態であっても良い。
Further, as another form, as shown in FIG. 23B, after the digital A + B signal based on the A + B signal of the
本実施例では撮像装置がDSP80を有する形態としたが、DSP80は、撮像装置の外部に設けられた出力信号処理部の形態であっても良い。
In this embodiment, the imaging device has a
[実施例11]
本実施例の撮像装置について、実施例10と異なる点を中心に説明する。
[Example 11]
The image pickup apparatus of this embodiment will be described focusing on the points different from those of the tenth embodiment.
図24(a)は本実施例の撮像装置の構成の一例を示した図である。本実施例では、水平転送部141を水平転送部141−1、141−2の複数とし、複数チャンネルで各列のメモリ13からデジタル信号をDSP80に出力させる形態である。
FIG. 24A is a diagram showing an example of the configuration of the image pickup apparatus of this embodiment. In this embodiment, the
図24(b)は、図24(a)に示した撮像装置において、DSP80に出力されるデジタル信号と、DSP80が出力するデジタル信号と、を表した図である。
FIG. 24B is a diagram showing a digital signal output to the
図24(b)に示した入力信号1は、水平転送部141−1によって各列のメモリ13からDSP80に出力されるデジタル信号を表している。また、入力信号2は、水平転送部141−2によって各列のメモリ13からDSP80に出力されるデジタル信号を表している。出力信号は、DSP80が出力するデジタル信号を表している。
The
入力信号1と入力信号2として、まず各列のメモリ13から1行目の画素100のA信号に基づくデジタルA信号がDSP80に出力される。DSP80は、入力信号1と入力信号2のデジタルA信号を加算した信号を出力する。次に、入力信号1として、各列のメモリ13から1行目の画素100のA+B信号に基づくデジタルA+B信号がDSP80に出力される。DSP80はデジタルA+B信号を出力する。2行目の画素100のA信号に基づくデジタルA信号についても、DSP80は入力信号1と入力信号2のデジタルA信号を加算した信号を出力する。図24(b)では、2行目の画素100のA信号に基づくデジタルA信号については、各列のメモリ13からデジタルA信号がDSP80に出力された後に、DSP80が複数のデジタルA信号を加算した信号を出力する形態を示した。他の形態として、1行目の画素100のA信号に基づくデジタルA信号と同様に、各列のメモリ13からDSP80にデジタルA信号が出力されるのと並行して、DSP80が複数のデジタルA信号を加算した信号を出力する形態であっても良い。
As the
本実施例の撮像装置においても、実施例10と同様の効果を得ることができる。また、本実施例によれば、DSP80にデジタルA信号が出力されるのとほぼ同時に、DSP80が複数のデジタルA信号を加算した信号を出力できる。よって、メモリ13からデジタル信号がDSP80に出力されてから、DSP80がデジタル信号の出力を終えるまでの期間を実施例10の図23(a)、図23(b)のいずれの形態に比しても短縮することができる。
In the image pickup apparatus of this embodiment, the same effect as that of the tenth embodiment can be obtained. Further, according to this embodiment, the
本実施例では撮像装置がDSP80を有する形態としたが、DSP80は、撮像装置の外部に出力信号処理部が設けられた形態であっても良い。
In this embodiment, the imaging device has a
[実施例12]
本実施例の撮像装置を図25(a)に示す。本実施例の撮像装置は、図20(b)に示したように、A信号とB信号とが異なる垂直信号線7に出力される形態である。図25(a)に示した撮像装置では、1列目の画素100からA信号が比較回路9−11に出力され、B信号が比較回路9−12に出力される。比較回路9−11はA信号とランプ信号VRAMPとを比較し、比較結果信号に基づいてカウンタ回路11−11がカウント信号を保持する。このカウント信号がデジタルA信号である。同様に、比較回路9−12はA+B信号とランプ信号VRAMPとを比較し、比較結果信号に基づいてカウンタ回路11−12がカウント信号を保持する。このカウント信号がデジタルB信号である。メモリ13−11、13−12はそれぞれカウンタ回路11−11、11−12が保持したデジタルA信号、デジタルB信号を保持する。他の列についても、奇数列のメモリ13がデジタルA信号、偶数列のメモリ13がデジタルB信号を保持する。
[Example 12]
The image pickup apparatus of this embodiment is shown in FIG. 25 (a). As shown in FIG. 20B, the image pickup apparatus of this embodiment has a form in which the A signal and the B signal are output to different vertical signal lines 7. In the image pickup apparatus shown in FIG. 25 (a), the A signal is output to the comparison circuit 9-11 from the
図25(b)は、図25(a)に示した撮像装置において、DSP80に出力されるデジタル信号と、DSP80が出力するデジタル信号と、を表した図である。
FIG. 25 (b) is a diagram showing a digital signal output to the
まず、水平転送部141は各列のメモリ13からデジタルA信号およびデジタルB信号をDSP80に出力する。DSP80は、同じ画素100に基づくデジタルA信号、デジタルB信号を加算したデジタルA+B信号を出力する。
First, the
DSP80は各列の画素100のデジタルA信号、デジタルB信号を出力した後、DSP80は、複数列のメモリ13のデジタルA信号を加算した信号を出力する。
After the
これにより、撮像装置から出力されるデジタルA信号の信号量を、デジタルA+B信号の信号量よりも少なくすることができる。これにより、実施例2の撮像装置と同様の効果を得ることができる。 As a result, the signal amount of the digital A signal output from the image pickup apparatus can be made smaller than the signal amount of the digital A + B signal. As a result, the same effect as that of the image pickup apparatus of the second embodiment can be obtained.
他の形態として、図25(a)に示した撮像装置において、水平転送部141が図24(a)のように、複数設けられている形態であっても良い。この形態の場合においても、図26(a)に示すように、DSP80がデジタルA+B信号を出力した後、DSP80が複数のデジタルA信号を加算した信号を出力する形態とすることができる。また、図26(b)に示す形態としても良い。つまり、DSP80が1行目と2行目の画素100のA信号、B信号に基づくデジタルA+B信号を出力する。その後、DSP80が1行目の画素100のA信号に基づくデジタルA信号と、2行目の画素100のA信号に基づくデジタルA信号と、を加算した信号を出力する。この形態であっても、実施例2の撮像装置と同様の効果を得ることができる。
As another form, in the image pickup apparatus shown in FIG. 25 (a), a plurality of
本実施例では撮像装置がDSP80を有する形態としたが、DSP80は、撮像装置の外部に設けられた出力信号処理部の形態であっても良い。
In this embodiment, the imaging device has a
[実施例13]
本実施例の撮像装置について、実施例12と異なる点を中心に説明する。
[Example 13]
The image pickup apparatus of this embodiment will be described focusing on the points different from those of the twelfth embodiment.
図27(a)は本実施例の撮像装置の構成の一例を示した図である。本実施例の撮像装置は、水平転送部141を水平転送部141−1、141−2、141−3、141−4の4つとした構成である。その他の構成については、図25(a)に示した撮像装置と同様とすることができる。本実施例の撮像装置は水平転送部141−1、141−2、141−3、141−4を有することにより、メモリ13−11、13−12、13−21、13−22からDSP80に同時にデジタル信号を出力させることができる。つまり、メモリ13からDSP80に4チャンネルでデジタル信号を出力させることができる。一方で、本実施例のDSP80は3チャンネルでの出力としている。
FIG. 27A is a diagram showing an example of the configuration of the image pickup apparatus of this embodiment. The image pickup apparatus of this embodiment has a configuration in which the
次に、図27(b)を参照しながら、図27(a)に示した撮像装置の動作の一例を説明する。 Next, an example of the operation of the image pickup apparatus shown in FIG. 27 (a) will be described with reference to FIG. 27 (b).
図27(b)に示した入力信号1〜4はそれぞれ、水平転送部141−1〜141−4がメモリ13からDSP80に出力するデジタル信号を示している。また、図27(b)に示した出力信号1〜3はDSP80が出力するデジタル信号を示している。
The input signals 1 to 4 shown in FIG. 27B indicate digital signals output from the
まず、入力信号1、入力信号3として、1行目の画素100のA信号に基づくデジタルA信号がDSP80に出力される。また、入力信号2、入力信号4として、1行目の画素100のB信号に基づくデジタルA+B信号がDSP80に出力される。DSP80は出力信号1、出力信号2として、1行目の同じ画素100のA信号とB信号に基づくデジタルA信号とデジタルB信号とを加算したデジタルA+B信号を出力する。また、DSP80は出力信号3として、画素100のA信号に基づくデジタルA信号同士を加算した信号を出力する。以降、2行目、3行目の画素100のA信号、B信号についても、1行目の画素100のA信号、B信号と同様の処理とすることができる。
First, as the
本実施例の撮像装置では、DSP80から出力されるデジタルA信号の信号量は、全列のメモリ13のデジタルA信号を出力する形態よりも少ない。よって、実施例12の撮像装置と同様の効果を得ることができる。また、メモリ13からDSP80に4チャンネルでデジタルA信号が出力される。これにより、メモリ13からDSP80にデジタルA信号が出力されるのとほぼ同時に、DSP80が複数列のデジタルA信号を加算した信号を出力することができる。よって、メモリ13からDSP80に1チャンネルでデジタルA信号が出力される形態に比して、本実施例の撮像装置は、メモリ13からDSP80にデジタルA信号が出力されてから、DSP80が複数のデジタルA信号を加算した信号の出力を終えるまでの期間を短縮することができる。また、DSP80は同時に入力されるデジタル信号を加算して出力するため、DSP80内の、一時的にデジタル信号を保持するメモリを実施例12の形態に比して少なくすることができる。
In the image pickup apparatus of this embodiment, the amount of the digital A signal output from the
本実施例では撮像装置がDSP80を有する形態としたが、DSP80は、撮像装置の外部に設けられた出力信号処理部の形態であっても良い。
In this embodiment, the imaging device has a
尚、実施例8〜13では、画素100の出力するA信号、B信号、A+B信号が比較回路9に出力される形態を示した。この形態に限定されるものではなく、画素100と比較回路9との間の電気的経路に、実施例1のようにオペアンプ8を設けた形態としても良い。
In Examples 8 to 13, the A signal, the B signal, and the A + B signal output by the
[実施例14]
本実施例の撮像装置について、実施例10と異なる点を中心に説明する。図28(a)は本実施例の撮像装置の構成の一例である。画素100の出力するA信号、A+B信号はオペアンプ8に出力される。オペアンプ8は、A信号、A+B信号を増幅して比較回路9に出力する。
[Example 14]
The image pickup apparatus of this embodiment will be described focusing on the points different from those of the tenth embodiment. FIG. 28A is an example of the configuration of the image pickup apparatus of this embodiment. The A signal and A + B signal output by the
本実施例では、画素100の各列に、カウンタ回路11が2つ設けられている。1列目の画素100の設けられた列に対応して、カウンタ回路11−11、11−12が設けられている。カウンタ回路11−11は、複数行の画素100のデジタルA信号を加算したデジタル信号を生成するカウンタ回路である。カウンタ回路11−12は、デジタルA+B信号を生成するカウンタ回路である。本実施例では、水平転送部141がカウンタ回路11からデジタル信号をDSP80に出力させる形態としている。
In this embodiment, two
図28(b)を参照しながら、図28(a)に示した撮像装置のカウンタ回路11−11、11−12の動作を中心に説明する。カウンタ回路11−11、11−12のカウント動作において、カウント値を増加させるか減少させるかは、TG12によって制御される。
The operation of the counter circuits 11-11 and 11-12 of the image pickup apparatus shown in FIG. 28 (a) will be mainly described with reference to FIG. 28 (b). In the counting operation of the counter circuits 11-11 and 11-12, whether to increase or decrease the count value is controlled by the
1行目の画素100のN変換においては、カウンタ回路11−11、11−12は初期値からカウント値が減少する方向でカウント動作を行う。そして、A変換では、カウンタ回路11−11がN変換で保持したカウント値から増加する方向でカウント動作を行う。このA変換でカウンタ回路11−11が保持したデジタルA信号は、A信号からN信号を差し引いた信号に基づくデジタル信号である。
In the N conversion of the
A+B変換では、カウンタ回路11−12が、N変換で保持したカウント値から増加する方向でカウント動作を行う。このA+B変換でカウンタ回路11−12が保持したデジタルA+B信号は、A+B信号からN信号を差し引いた信号に基づくデジタル信号である。水平転送部141は、カウンタ回路11−12からデジタルA+B信号をDSP80に出力させる。そして、TG12はカウンタ回路11−12のカウント値をリセットする。
In the A + B conversion, the counter circuit 11-12 performs the counting operation in the direction of increasing from the count value held in the N conversion. The digital A + B signal held by the counter circuit 11-12 in this A + B conversion is a digital signal based on the signal obtained by subtracting the N signal from the A + B signal. The
次に、2行目の画素100のN変換を行う。カウンタ回路11−11は、先の1行目の画素100のA信号に基づくデジタルA信号のカウント値から減少する方向でカウント動作を行う。カウンタ回路11−12はリセットされたカウント値から減少する方向でカウント動作を行う。
Next, N conversion of the
そして、2行目の画素100のA変換では、カウンタ回路11−11は、2行目の画素100のN変換で保持したカウント値から増加する方向でカウント動作を行う。このA変換でカウンタ回路11−11が保持したデジタルA信号は、1行目の画素100と2行目の画素100のそれぞれの、A信号からN信号を差し引いた信号同士を加算した信号に基づくデジタル信号である。
Then, in the A conversion of the
次に、2行目の画素100のA+B変換では、カウンタ回路11−12は2行目の画素100のN変換で保持したカウント値から増加する方向でカウント動作を行う。このA+B変換でカウンタ回路11−12が保持したデジタルA+B信号は、2行目の画素100のA+B信号からN信号を差し引いた信号に基づくデジタル信号である。
Next, in the A + B conversion of the
続いて、水平転送部141は、カウンタ11−11、11−12からそれぞれデジタル信号をDSP80に出力させる。
Subsequently, the
本実施例の撮像装置では、カウンタ回路11が複数行の画素100のA信号を加算した信号に基づくデジタル信号を生成する形態である。これにより、カウンタ回路11が各行の画素100のデジタルA信号を生成する形態に比して、カウンタ回路11からデジタルA信号をDSP80に出力させる期間を短縮することができる。また、カウンタ回路11が各行の画素100のデジタルA信号を生成する形態に比して、DSP80に出力されるデジタルA信号の信号量が減少する。これにより、DSP80の信号処理の負荷を低減することができる。
In the image pickup apparatus of this embodiment, the
[実施例15]
本実施例の撮像装置について、図面を参照しながら説明する。
[Example 15]
The imaging apparatus of this embodiment will be described with reference to the drawings.
図29(a)は、本実施例の撮像装置の構成の一例を示した図である。本実施例の撮像装置は、実施例4の撮像装置のように、各列の信号処理回路がアナログ信号であるA信号、A+B信号を保持する形態である。図29(a)に示すように、各列に、A信号を保持するメモリC_A、A+B信号を保持するメモリC_ABが設けられている。水平走査回路14が信号φC_A、φC_ABをHレベルとすると、メモリC_A、C_ABからA信号、A+B信号がS信号線16に信号SIGOUTとして出力される。各メモリは、たとえば容量素子とスイッチから成るサンプルホールド回路で構成される。S信号線16には、容量CHの一方のノードが電気的に接続され、容量CHの他方のノードはグラウンド電位GNDが与えられている。
FIG. 29A is a diagram showing an example of the configuration of the image pickup apparatus of this embodiment. The image pickup apparatus of this embodiment has a form in which the signal processing circuits in each row hold the A signal and the A + B signal, which are analog signals, like the image pickup apparatus of the fourth embodiment. As shown in FIG. 29A, a memory C_A for holding the A signal and a memory C_AB for holding the A + B signal are provided in each row. When the
図29(b)は図29(a)に示した撮像装置の動作の一例を示した図である。 FIG. 29B is a diagram showing an example of the operation of the image pickup apparatus shown in FIG. 29A.
まず、水平走査回路14は、信号φC_AB1〜6を順次Hレベルとして、各列のメモリC_ABから、A+B信号を順次出力させる。
First, the
そして、水平走査回路14は、信号φC_A1、φC_A2、φC_A3を同時にHレベルとする。これにより、メモリC_A1、C_A2、C_A3のそれぞれが保持していたA信号がS信号線16に同時に出力される。メモリC_A1、C_A2、C_A3のそれぞれの容量素子の容量値をC1、C2、C3とする。信号SIGOUTは、メモリC_A1、C_A2、C_A3の信号の和に、(C1+C2+C3)/(C1+C2+C3+CH)を乗じた値の信号となる。つまり、メモリC_A1、C_A2、C_A3のそれぞれが保持したA信号同士を加算した信号に基づく信号が出力される。
Then, the
次に、水平走査回路14は、信号φC_A4、φC_A5、φC_A6を同時にHレベルとする。これにより、メモリC_A4、C_A5、C_A6のそれぞれが保持していたA信号が同時に出力される。これにより、出力される信号SIGOUTは、メモリC_A4、C_A5、C_A6のそれぞれが保持したA信号同士が加算された信号が出力される。
Next, the
本実施例では、複数のメモリC_Aが保持したA信号を加算して出力する。これにより、各列のメモリC_AからそれぞれA信号を信号SIGOUTとして出力させる形態に比して、A信号をメモリC_Aから出力させる期間を短縮することができる。また、各列のメモリC_AからそれぞれA信号を信号SIGOUTとして出力させる形態に比してA信号の信号量が減少するため、撮像装置の外部に設けられたAD変換部の負荷を減らすことができる。 In this embodiment, the A signals held by the plurality of memories C_A are added and output. As a result, the period for outputting the A signal from the memory C_A can be shortened as compared with the form in which the A signal is output from the memory C_A in each column as the signal SIGOUT. Further, since the signal amount of the A signal is reduced as compared with the form in which the A signal is output as the signal SIGOUT from the memory C_A of each column, the load of the AD conversion unit provided outside the image pickup apparatus can be reduced. ..
本実施例では、3列のメモリC_AのA信号を加算する形態について説明したが、複数列のメモリC_AのA信号を加算する形態であれば良い。 In this embodiment, the mode in which the A signal of the memory C_A in the three columns is added has been described, but any form may be used as long as the A signal in the memory C_A in a plurality of columns is added.
[実施例16]
本実施例の撮像装置について、図面を参照しながら説明する。
[Example 16]
The imaging apparatus of this embodiment will be described with reference to the drawings.
図30(a)は、本実施例の撮像装置の構成の一例を示した図である。図30(a)では、図29(a)と同じ機能を有する部材については、図29(a)で付した符号と同一の符号を付して表している。図30(a)の撮像装置は、オペアンプ18−1,18−2が複数列の画素100のA信号を加算した信号を増幅してAD変換部40−3、40−7にそれぞれ出力する形態である。AD変換部40の構成は、図5、図8に示したいずれの形態であっても良い。
FIG. 30A is a diagram showing an example of the configuration of the image pickup apparatus of this embodiment. In FIG. 30A, the members having the same functions as those in FIG. 29A are designated by the same reference numerals as those in FIG. 29A. In the image pickup apparatus shown in FIG. 30A, the operational amplifiers 18-1 and 18-2 amplify the signal obtained by adding the A signals of the
オペアンプ8−1、8−2、8−3、8−4、8−5、8−6はそれぞれ、各列の画素100のA+B信号を増幅した信号をAD変換部40に出力する。
The operational amplifiers 8-1, 8-2, 8-3, 8-4, 8-5, and 8-6 each output a signal obtained by amplifying the A + B signal of the
図30(b)は、図30(a)に示したオペアンプ18の構成の一例について、詳細を示した図である。n列目、n+1列目、n+2列目の画素100のA信号がそれぞれ、信号PSH−AをHレベルとすることで導通するスイッチと、容量素子とを介して、差動増幅器の反転入力ノードに出力される構成としている。差動増幅器からAD変換部40に3列の画素100のA信号を加算した信号に基づく信号が出力される。
FIG. 30B is a diagram showing details of an example of the configuration of the
図30(c)は、オペアンプ18の構成の他の一例について、詳細を示した図である。n列目、n+1列目、n+2列目の画素100のA信号がそれぞれ、容量素子と、信号PSH−AをHレベルとすることで導通するスイッチとを介して、差動増幅器の反転入力ノードに出力される構成としている。図30(c)に示したオペアンプ18の構成であっても、差動増幅器からAD変換部40に3列の画素100のA信号を加算した信号に基づく信号が出力される。図30(b)、図30(c)のいずれのオペアンプ18も、信号PC0RをHレベルとすると帰還容量の電荷がリセットされる。これをオペアンプ18のリセットと表記する。
FIG. 30C is a diagram showing details of another example of the configuration of the
図31は、図30(b)あるいは図30(c)に示したオペアンプ18の動作を中心に示した図である。まず、垂直走査回路2は、1行目の画素100を選択する信号φSELをHレベルとする。その後、図30(a)では不図示のTG12が、信号PSH―AをHレベルとする。そして、垂直走査回路2は、1行目の画素100の信号φRをLレベルとする。そして、TG12は、信号PC0RをLレベルとし、オペアンプ18のリセットを解除する。この時にオペアンプ18がAD変換部40に出力する信号をN変換として、AD変換部40がデジタルN信号に変換する。
FIG. 31 is a diagram mainly showing the operation of the
その後、垂直走査回路2は、信号φT1をHレベルとする。これにより、画素100からA信号が出力される。信号PSH−AがHレベルのため、オペアンプ18は複数列の画素100のA信号を加算した信号を増幅してAD変換部40に出力する。その後、TG12は信号PSH−AをLレベルとする。
After that, the
そして、垂直走査回路2は、信号φT1、φT2をHレベルとする。これにより、1行目の各画素100からA+B信号がオペアンプ8に出力される。
Then, the
続いて、オペアンプ18から信号が出力されるAD変換部40は、A変換として、オペアンプ18から出力される信号をデジタルA信号に変換する。
Subsequently, the AD conversion unit 40, which outputs a signal from the
そして、オペアンプ8から信号が出力されるAD変換部40は、A+B変換として、オペアンプ8から出力される信号をデジタルA+B信号に変換する。
Then, the AD conversion unit 40, which outputs a signal from the
その後、水平走査回路14は各列のAD変換部40から、生成したデジタル信号を順次SIGOUTとして出力させる。
After that, the
本実施例の撮像装置では、複数列のA信号を加算した信号に基づく信号がAD変換部40に出力される。これにより、各列のA信号に基づく信号をAD変換部40がAD変換する形態に比して、AD変換期間を短縮することができる。また、各列のA信号に基づく信号をAD変換部40がAD変換する形態に比して、デジタルA信号の信号量が減少するため、図30(a)では不図示のDSP80の信号処理の負荷を低減することができる。 In the image pickup apparatus of this embodiment, a signal based on a signal obtained by adding a plurality of rows of A signals is output to the AD conversion unit 40. As a result, the AD conversion period can be shortened as compared with the form in which the AD conversion unit 40 AD-converts the signal based on the A signal in each column. Further, since the signal amount of the digital A signal is reduced as compared with the form in which the AD conversion unit 40 AD-converts the signal based on the A signal in each column, the signal processing of the DSP 80 (not shown in FIG. 30A) is performed. The load can be reduced.
本実施例では、オペアンプ18が3列の画素100のA信号を加算した信号に基づく信号をAD変換部40に出力する形態について説明した。本実施例はこの形態に限定されるものではなく、オペアンプ18が、複数列の画素100のA信号を加算した信号に基づく信号を出力する形態であれば良い。
In this embodiment, a mode in which the
また、本実施例では、オペアンプ8、18の出力する信号が各列のAD変換部40でデジタル信号に変換される形態を示したが、この形態に限定されるものではない。例えば、図13に示したように、各列からオペアンプ8、18の出力する信号がアナログ信号として出力される形態であっても良い。この形態の場合には、各列からA信号を増幅した信号が出力される形態に比して、A信号を増幅した信号を出力する列数が減少する。これにより、1フレーム期間において、各列からA信号を増幅した信号が出力される形態に比して、A信号を増幅した信号を出力する出力期間を短縮することができる。
Further, in this embodiment, the form in which the signals output by the
これまでに述べた各実施例の撮像装置は他の実施例と適宜組み合わせて実施しても良い。 The imaging apparatus of each embodiment described so far may be implemented in combination with other embodiments as appropriate.
1、51 光電変換部
2 垂直走査回路
4 リセットMOSトランジスタ
5 増幅MOSトランジスタ
6 選択MOSトランジスタ
7 垂直信号線
8 オペアンプ
9 比較回路
10 ランプ発生回路
11 カウンタ回路
12 TG
13 メモリ
14 水平走査回路
20,50 転送MOSトランジスタ
21 FD領域
10 画素内読み出し回路部
22 カラーフィルター
23 マイクロレンズ
100 画素
101 信号読み出し回路
1, 51
13
本発明は上記の課題を解決するために為されたものであり、一の態様は、複数の画素と、アナログデジタル変換回路と、マイクロレンズとを有する撮像装置であって、前記画素は、信号電荷を生成する複数の光電変換部を含むとともに、前記信号電荷に基づく信号を出力し、前記マイクロレンズは、前記複数の光電変換部に対応して配され、前記画素は、前記複数の光電変換部の一部の光電変換部の前記信号電荷に基づいた第1の信号を出力し、前記画素は、前記複数の光電変換部の少なくとも他の一部の光電変換部の前記信号電荷に基づいた第2の信号を出力し、前記アナログデジタル変換回路は、前記第1の信号に基づく信号と、前記第2の信号に基づく信号のそれぞれをデジタル信号に変換することを特徴とする撮像装置である。
The present invention has been made to solve the above problems, one aspect is an imaging device including a pixel of multiple, and analog-to-digital converter, and a micro-lens, the pixel A plurality of photoelectric conversion units that generate signal charges are included, and a signal based on the signal charges is output. The microlenses are arranged corresponding to the plurality of photoelectric conversion units, and the pixels are the plurality of photoelectric conversion units. A first signal based on the signal charge of a part of the photoelectric conversion unit of the conversion unit is output, and the pixel is based on the signal charge of at least some other photoelectric conversion unit of the plurality of photoelectric conversion units. The analog-digital conversion circuit is an imaging device that outputs a second signal and converts each of a signal based on the first signal and a signal based on the second signal into digital signals. be.
Claims (15)
前記複数の画素の各々が、
信号電荷を生成する複数の光電変換部を含むとともに、前記信号電荷に基づいた信号を出力する撮像装置であって、
1フレーム期間内に、
前記複数の画素の少なくとも一部の前記画素の各々は、各々が有するm個(mは整数)の前記光電変換部のうち、前記m個よりも少ないn個(nは整数)の前記光電変換部の前記信号電荷に基づいた第1の信号を出力し、
前記1フレーム期間内に、
前記複数の画素の各々が、各々が有する前記m個の前記光電変換部の前記信号電荷に基づいた第2の信号を出力し、
前記撮像装置の出力する、前記第1の信号に基づく信号の個数が、
前記撮像装置の出力する、前記第2の信号に基づく信号の個数よりも少ないことを特徴とする撮像装置。 It has multiple pixels arranged in a matrix and has multiple pixels.
Each of the plurality of pixels
An imaging device that includes a plurality of photoelectric conversion units that generate signal charges and outputs a signal based on the signal charges.
Within one frame period
Each of the pixels, which is at least a part of the plurality of pixels, has n (n is an integer) of the photoelectric conversion units having m (m is an integer), which is less than m. Outputs a first signal based on the signal charge of the unit,
Within the one frame period
Each of the plurality of pixels outputs a second signal based on the signal charge of the mth photoelectric conversion unit each of the plurality of pixels.
The number of signals based on the first signal output by the image pickup apparatus is
An imaging device characterized in that the number of signals output by the imaging device is less than the number of signals based on the second signal.
一の前記増幅回路が、
前記複数の画素の前記第1の信号同士を加算した信号を増幅した前記信号を一の前記信号保持部に出力し、
前記一の増幅回路とは別の増幅回路が、前記第2の信号を増幅した、前記第2の信号に基づく前記信号を前記一の信号保持部とは別の前記信号保持部に出力することを特徴とする請求項1に記載の撮像装置。 The image pickup apparatus further includes a plurality of signal holding units and a plurality of amplifier circuits.
One of the amplifier circuits
The signal obtained by amplifying the signal obtained by adding the first signals of the plurality of pixels to each other is output to one signal holding unit.
An amplifier circuit different from the one amplifier circuit amplifies the second signal and outputs the signal based on the second signal to the signal holding unit different from the one signal holding unit. The imaging apparatus according to claim 1.
前記第1の信号に基づく前記信号を保持した前記複数の信号保持部が同時に前記信号を出力することによって、前記撮像装置が、前記同時に出力された信号を加算した信号を出力することを特徴とする請求項1に記載の撮像装置。 It has a plurality of signal holding units, each of which holds the signal based on the first signal.
The plurality of signal holding units holding the signal based on the first signal simultaneously output the signal, so that the imaging device outputs a signal obtained by adding the signals output at the same time. The imaging device according to claim 1.
前記水平走査回路が、
前記複数の信号保持部から前記第2の信号に基づく前記信号を出力し、さらに、
前記複数の信号保持部の一部の前記信号保持部から前記第1の信号に基づく前記信号を出力することを特徴とする請求項1に記載の撮像装置。 It has a plurality of signal holding units for holding the signal based on the first signal and the signal based on the second signal, and a horizontal scanning circuit.
The horizontal scanning circuit
The signal based on the second signal is output from the plurality of signal holding units, and further
The imaging device according to claim 1, wherein the signal based on the first signal is output from a part of the signal holding units of the plurality of signal holding units.
前記アナログ信号をデジタル信号に変換して出力する複数のアナログデジタル変換回路をさらに有し、
前記複数のアナログデジタル変換回路のそれぞれが、
前記第1の信号を前記第1の信号に基づく前記信号であるデジタル信号に変換し、
前記第2の信号を前記第2の信号に基づく前記信号であるデジタル信号に変換する
ことを特徴とする請求項1に記載の撮像装置。 The first signal and the second signal output by the plurality of pixels are analog signals.
It further has a plurality of analog-to-digital conversion circuits that convert the analog signal into a digital signal and output it.
Each of the plurality of analog-to-digital conversion circuits
The first signal is converted into a digital signal which is the signal based on the first signal, and the signal is converted into a digital signal.
The imaging device according to claim 1, wherein the second signal is converted into a digital signal which is the signal based on the second signal.
前記信号処理部が、前記画素の前記第1の信号に基づくデジタル信号と、別の前記画素の前記第1の信号に基づくデジタル信号と、を加算した信号を出力し、
前記信号処理部が、前記画素の前記第2の信号に基づくデジタル信号と、前記別の画素の前記第2の信号に基づくデジタル信号と、をそれぞれ出力することを特徴とする請求項5に記載の撮像装置。 The imaging device further includes a signal processing unit that processes the digital signal generated by the plurality of analog-to-digital conversion circuits.
The signal processing unit outputs a signal obtained by adding a digital signal based on the first signal of the pixel and a digital signal based on the first signal of another pixel.
The fifth aspect of claim 5, wherein the signal processing unit outputs a digital signal based on the second signal of the pixel and a digital signal based on the second signal of the other pixel, respectively. Imaging device.
参照信号と前記アナログ信号とを比較した結果を示す比較結果信号を出力する比較回路と、
クロック信号を計数するカウンタ回路と、を有し、
前記複数の画素が前記第1の信号を順次、同一の前記アナログデジタル変換回路に出力し、
前記複数の画素の一の画素の前記第1の信号と前記参照信号との比較結果を示す比較結果信号に基づいてクロック信号を計数した信号と、前記複数の画素の前記一の画素とは別の画素の前記第1の信号と前記参照信号との比較結果を示す比較結果信号に基づいてクロック信号を計数した信号と、を加算した信号を前記カウンタ回路が生成することを特徴とする請求項5に記載の撮像装置。 The analog-to-digital conversion circuit
A comparison circuit that outputs a comparison result signal showing the result of comparing the reference signal and the analog signal, and a comparison circuit.
It has a counter circuit that counts clock signals, and
The plurality of pixels sequentially output the first signal to the same analog-to-digital conversion circuit.
The signal obtained by counting the clock signal based on the comparison result signal indicating the comparison result between the first signal of one pixel of the plurality of pixels and the reference signal is different from the one pixel of the plurality of pixels. The counter circuit is characterized in that the counter circuit generates a signal obtained by adding a signal obtained by counting a clock signal based on a comparison result signal indicating a comparison result between the first signal of the pixel and the reference signal. 5. The imaging device according to 5.
参照信号と前記アナログ信号とを比較した結果を示す比較結果信号を出力する比較回路と、
クロック信号を計数するカウンタ回路と、を有し、
前記撮像装置が、カウンタ制御部をさらに有し、
複数の前記比較回路の各々が、前記参照信号と、互いに異なる前記画素の前記第1の信号とを比較した結果を示す前記比較結果信号を出力し、
前記カウンタ制御部が、前記複数の比較回路の前記比較結果信号に基づいて、前記カウンタ回路の前記クロック信号の計数を制御することによって、前記アナログデジタル変換回路が、前記互いに異なる画素の前記第1の信号を加算した信号に基づくデジタル信号を生成することを特徴とする請求項5に記載の撮像装置。 Each of the plurality of analog-to-digital conversion circuits
A comparison circuit that outputs a comparison result signal showing the result of comparing the reference signal and the analog signal, and a comparison circuit.
It has a counter circuit that counts clock signals, and
The imaging device further includes a counter control unit.
Each of the plurality of comparison circuits outputs the comparison result signal indicating the result of comparing the reference signal with the first signal of the pixel different from each other.
The counter control unit controls the counting of the clock signal of the counter circuit based on the comparison result signal of the plurality of comparison circuits, so that the analog-to-digital conversion circuit has the first pixel different from each other. The imaging apparatus according to claim 5, wherein a digital signal based on a signal obtained by adding the signals of the above is generated.
前記複数のアナログデジタル変換回路の各々は、前記複数の画素が設けられた列に対応して設けられ、
前記カウンタ制御部が、前記複数の比較回路の前記比較結果信号に基づいて、前記カウンタ回路の前記クロック信号の計数を制御することによって、前記アナログデジタル変換回路が、互いに異なる列の画素の前記第1の信号を加算した信号に基づくデジタル信号を生成することを特徴とする請求項8に記載の撮像装置。 The plurality of pixels are provided in a matrix, and the plurality of pixels are provided in a matrix.
Each of the plurality of analog-to-digital conversion circuits is provided corresponding to the row in which the plurality of pixels are provided.
The counter control unit controls the counting of the clock signals of the counter circuits based on the comparison result signals of the plurality of comparison circuits, so that the analog-to-digital conversion circuits have the pixels in different rows. The imaging device according to claim 8, wherein a digital signal based on a signal obtained by adding the signals of 1 is generated.
マイクロレンズを複数有するマイクロレンズアレイをさらに有し、
1つの前記マイクロレンズは、前記画素の複数の前記光電変換部に光を集光させて入射させることを特徴とする請求項1〜9のいずれかに記載の撮像装置。 The image pickup device
Further having a microlens array with a plurality of microlenses,
The imaging device according to any one of claims 1 to 9, wherein one microlens condenses light on a plurality of photoelectric conversion units of the pixel and causes the light to be incident on the plurality of photoelectric conversion units.
前記撮像装置に光を集光する光学系と、出力信号処理部と、を有する撮像システムであって、
前記複数の画素の一部の前記画素である第1の画素が有する前記n個の前記光電変換部の前記信号電荷に基づいた前記第1の信号に基づく前記信号が前記撮像装置から前記出力信号処理部に出力され、
前記第2の信号に基づく前記信号が前記撮像装置から前記出力信号処理部に出力され、前記出力信号処理部が、
前記第1の画素の前記第1の信号に基づく前記信号と、前記第1の画素の前記第2の信号に基づく前記信号と、の差分である差分信号を得て、前記差分信号と前記第1の画素の前記第1の信号に基づく前記信号とによって焦点検出を行い、
さらに、前記出力信号処理部が、前記複数の画素の前記第2の信号に基づく前記信号によって画像を形成することを特徴とする撮像システム。 The imaging device according to claim 10,
An imaging system including an optical system that collects light on the imaging device and an output signal processing unit.
The signal based on the first signal based on the signal charge of the n photoelectric conversion units of the first pixel which is a part of the plurality of pixels is the output signal from the image pickup apparatus. Output to the processing unit
The signal based on the second signal is output from the image pickup apparatus to the output signal processing unit, and the output signal processing unit receives the output signal processing unit.
A difference signal, which is a difference between the signal based on the first signal of the first pixel and the signal based on the second signal of the first pixel, is obtained, and the difference signal and the first signal are obtained. Focus detection is performed by the signal based on the first signal of one pixel, and the focus is detected.
Further, an imaging system in which the output signal processing unit forms an image with the signal based on the second signal of the plurality of pixels.
前記撮像装置は、行列状に配された複数の画素を有し、
前記複数の画素の各々が、信号電荷を生成する光電変換部を複数含み、
1フレーム期間内に、前記複数の画素の少なくとも一部の前記画素の各々が、各々が有するm個(mは整数)の前記光電変換部のうち、前記m個よりも少ないn個(nは整数)の前記光電変換部の前記信号電荷に基づいた第1の信号を出力し、
前記1フレーム期間内に、前記複数の画素の各々が、各々が有する前記m個の前記光電変換部の前記信号電荷に基づいた第2の信号を出力し、
前記撮像装置が、前記複数の画素の前記第2の信号に基づく信号と、前記第1の信号に基づく信号とをそれぞれを前記焦点検出用信号処理部に出力し、
前記焦点検出用信号処理部が、前記焦点検出用信号処理部に出力された、前記複数の画素の前記第1の信号に基づく前記信号のうち、前記複数の画素の一部の前記画素の前記第1の信号に基づく前記信号を出力し、前記複数の画素の他の前記画素の前記第1の信号に基づく前記信号を出力しないことを特徴とする撮像システム。 An imaging system including an imaging device and a focus detection signal processing unit.
The image pickup apparatus has a plurality of pixels arranged in a matrix and has a plurality of pixels.
Each of the plurality of pixels includes a plurality of photoelectric conversion units that generate signal charges.
Within one frame period, each of the at least a part of the plurality of pixels has n (n) less than the m of the m (m is an integer) photoelectric conversion unit each of the pixels has. A first signal based on the signal charge of the photoelectric conversion unit (integer) is output.
Within the one frame period, each of the plurality of pixels outputs a second signal based on the signal charge of the mth photoelectric conversion unit each of the plurality of pixels.
The image pickup apparatus outputs a signal based on the second signal of the plurality of pixels and a signal based on the first signal to the focus detection signal processing unit.
Among the signals based on the first signal of the plurality of pixels output to the focus detection signal processing unit by the focus detection signal processing unit, the said pixel of a part of the plurality of pixels. An imaging system characterized in that the signal based on the first signal is output and the signal based on the first signal of the other pixels of the plurality of pixels is not output.
前記複数の画素の各々が、信号電荷を生成する光電変換部を複数含む撮像装置の駆動方法であって、
前記駆動方法は、
1フレーム期間内に、前記複数の画素の少なくとも一部の前記画素の各々に、各々が有するm個(mは整数)の前記光電変換部のうち、前記m個よりも少ないn個(nは整数)の前記光電変換部の前記信号電荷に基づいた第1の信号を出力させ、
前記1フレーム期間内に、前記複数の画素の各々に、各々が有する前記m個の前記光電変換部の前記信号電荷に基づいた第2の信号を出力させ、
前記第1の信号に基づく信号の個数を、前記第2の信号に基づく信号の個数よりも少なくして、前記第1の信号に基づく前記信号と前記第2の信号に基づく前記信号とを前記撮像装置に出力させることを特徴とする撮像装置の駆動方法。 It has multiple pixels arranged in a matrix and has multiple pixels.
Each of the plurality of pixels is a method for driving an imaging device including a plurality of photoelectric conversion units that generate signal charges.
The driving method is
Within one frame period, n (n) of the m (m is an integer) photoelectric conversion units each of at least a part of the plurality of pixels have less than m. A first signal based on the signal charge of the photoelectric conversion unit (integer) is output.
Within the one frame period, each of the plurality of pixels is made to output a second signal based on the signal charge of the mth photoelectric conversion unit each of the plurality of pixels.
The number of signals based on the first signal is made smaller than the number of signals based on the second signal, and the signal based on the first signal and the signal based on the second signal are described as described above. A method of driving an imaging device, which comprises outputting to an imaging device.
前記撮像装置は、行列状に配された複数の画素を有し、
前記複数の画素の各々が、信号電荷を生成する光電変換部を複数含み、
さらに、前記撮像装置が、マイクロレンズを複数有するレンズアレイを有し、
1つの前記マイクロレンズで集光された光が前記画素の有する複数の前記光電変換部に入射し、
前記駆動方法は、
1フレーム期間内に、前記複数の画素の少なくとも一部の前記画素の各々に、各々が有するm個(mは整数)の前記光電変換部のうち、前記m個よりも少ないn個(nは整数)の前記光電変換部の前記信号電荷に基づいた第1の信号を出力させ、
前記1フレーム期間内に、前記複数の画素の各々に、各々が有する前記m個の前記光電変換部の前記信号電荷に基づいた第2の信号を出力させ、
前記第1の信号に基づく信号の個数を、前記第2の信号に基づく信号の個数よりも少なくして、前記第1の信号に基づく前記信号と前記第2の信号に基づく前記信号とを前記撮像装置に出力させ、
前記信号処理が、
前記画素の前記第1の信号に基づく前記信号と、前記画素の前記第2の信号に基づく前記信号との差分である差分信号を得て、前記差分信号と、前記画素の前記第1の信号に基づく前記信号とによって焦点検出を行い、前記画素の前記第2の信号に基づく前記信号によって画像を形成する処理であることを特徴とする撮像システムの駆動方法。 It is a driving method of an imaging system having an imaging device and performing signal processing of a signal output from the imaging device.
The image pickup apparatus has a plurality of pixels arranged in a matrix and has a plurality of pixels.
Each of the plurality of pixels includes a plurality of photoelectric conversion units that generate signal charges.
Further, the image pickup apparatus has a lens array having a plurality of microlenses.
The light collected by one microlens is incident on the plurality of photoelectric conversion units of the pixel, and the light is incident on the photoelectric conversion unit.
The driving method is
Within one frame period, n (n) of the m (m is an integer) photoelectric conversion units each of at least a part of the plurality of pixels have less than m. A first signal based on the signal charge of the photoelectric conversion unit (integer) is output.
Within the one frame period, each of the plurality of pixels is made to output a second signal based on the signal charge of the mth photoelectric conversion unit each of the plurality of pixels.
The number of signals based on the first signal is made smaller than the number of signals based on the second signal, and the signal based on the first signal and the signal based on the second signal are described as described above. Output to the image pickup device
The signal processing
A difference signal, which is a difference between the signal based on the first signal of the pixel and the signal based on the second signal of the pixel, is obtained, and the difference signal and the first signal of the pixel are obtained. A method for driving an imaging system, which comprises performing focus detection with the signal based on the above and forming an image with the signal based on the second signal of the pixel.
前記撮像装置は、行列状に配された複数の画素を有し、
前記複数の画素の各々が、信号電荷を生成する光電変換部を複数含み、
さらに、前記撮像装置はマイクロレンズを複数有するレンズアレイを有し、
1つの前記マイクロレンズで集光された光が前記画素の有する複数の前記光電変換部に入射し、
1フレーム期間内に、前記複数の画素の各々に、各々が有するm個(mは整数)の前記光電変換部のうち、前記m個よりも少ないn個(nは整数)の前記光電変換部の前記信号電荷に基づいた第1の信号を出力させ、
前記1フレーム期間内に、前記複数の画素の各々に、各々が有する前記m個の前記光電変換部の前記信号電荷に基づいた第2の信号を出力させ、
前記撮像装置に、前記第1の信号に基づく前記信号と前記第2の信号に基づく前記信号とを出力させ、
前記信号処理が、
前記撮像装置から出力した、前記複数の画素の前記第1の信号に基づく前記信号のうち、前記複数の画素の一部の前記画素の前記第1の信号に基づく前記信号を出力させ、前記複数の画素の他の前記画素の前記第1の信号に基づく前記信号を出力させない処理であることを特徴とする撮像システムの駆動方法。 It is a driving method of an imaging system having an imaging device and performing signal processing of a signal output from the imaging device.
The image pickup apparatus has a plurality of pixels arranged in a matrix and has a plurality of pixels.
Each of the plurality of pixels includes a plurality of photoelectric conversion units that generate signal charges.
Further, the imaging device has a lens array having a plurality of microlenses.
The light collected by one microlens is incident on the plurality of photoelectric conversion units of the pixel, and the light is incident on the photoelectric conversion unit.
Within one frame period, n (n is an integer) of the m (m is an integer) photoelectric conversion units each of the plurality of pixels have less than m of the photoelectric conversion units. To output a first signal based on the signal charge of
Within the one frame period, each of the plurality of pixels is made to output a second signal based on the signal charge of the mth photoelectric conversion unit each of the plurality of pixels.
The imaging device is made to output the signal based on the first signal and the signal based on the second signal.
The signal processing
Among the signals based on the first signal of the plurality of pixels output from the image pickup apparatus, the signal based on the first signal of some of the pixels of the plurality of pixels is output, and the plurality of signals are output. A method for driving an imaging system, which is a process of not outputting the signal based on the first signal of the other pixels of the pixel.
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012045653 | 2012-03-01 | ||
JP2012045653 | 2012-03-01 | ||
JP2020036419A JP2020109980A (en) | 2012-03-01 | 2020-03-04 | Imaging apparatus, imaging system, driving method of imaging apparatus, and driving method of imaging system |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020036419A Division JP2020109980A (en) | 2012-03-01 | 2020-03-04 | Imaging apparatus, imaging system, driving method of imaging apparatus, and driving method of imaging system |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2021166411A true JP2021166411A (en) | 2021-10-14 |
Family
ID=56102839
Family Applications (5)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016033276A Active JP6091674B2 (en) | 2012-03-01 | 2016-02-24 | Imaging device, imaging system, driving method of imaging device, and driving method of imaging system |
JP2017021541A Active JP6305585B2 (en) | 2012-03-01 | 2017-02-08 | Imaging device, imaging system, driving method of imaging device, and driving method of imaging system |
JP2018040030A Active JP6672356B2 (en) | 2012-03-01 | 2018-03-06 | Imaging apparatus, imaging system, driving method of imaging apparatus, and driving method of imaging system |
JP2020036419A Ceased JP2020109980A (en) | 2012-03-01 | 2020-03-04 | Imaging apparatus, imaging system, driving method of imaging apparatus, and driving method of imaging system |
JP2021116663A Pending JP2021166411A (en) | 2012-03-01 | 2021-07-14 | Imaging device, imaging system, method of driving imaging device, and method of driving imaging system |
Family Applications Before (4)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016033276A Active JP6091674B2 (en) | 2012-03-01 | 2016-02-24 | Imaging device, imaging system, driving method of imaging device, and driving method of imaging system |
JP2017021541A Active JP6305585B2 (en) | 2012-03-01 | 2017-02-08 | Imaging device, imaging system, driving method of imaging device, and driving method of imaging system |
JP2018040030A Active JP6672356B2 (en) | 2012-03-01 | 2018-03-06 | Imaging apparatus, imaging system, driving method of imaging apparatus, and driving method of imaging system |
JP2020036419A Ceased JP2020109980A (en) | 2012-03-01 | 2020-03-04 | Imaging apparatus, imaging system, driving method of imaging apparatus, and driving method of imaging system |
Country Status (1)
Country | Link |
---|---|
JP (5) | JP6091674B2 (en) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7113368B2 (en) * | 2017-07-03 | 2022-08-05 | パナソニックIpマネジメント株式会社 | Imaging device and camera system |
JP2019140528A (en) | 2018-02-09 | 2019-08-22 | ソニーセミコンダクタソリューションズ株式会社 | Imaging apparatus and electronic apparatus |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002131623A (en) * | 2000-10-24 | 2002-05-09 | Canon Inc | Imaging apparatus and system |
JP2010109677A (en) * | 2008-10-30 | 2010-05-13 | Sony Corp | Solid-state imaging apparatus, imaging apparatus, pixel drive voltage optimization apparatus, and pixel drive voltage optimization method |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3977062B2 (en) * | 2001-11-21 | 2007-09-19 | キヤノン株式会社 | Imaging apparatus and focus adjustment method |
JP2004319837A (en) * | 2003-04-17 | 2004-11-11 | Canon Inc | Solid-state imaging apparatus |
JP4434797B2 (en) * | 2004-03-19 | 2010-03-17 | オリンパス株式会社 | Imaging device and imaging apparatus |
JP4426885B2 (en) * | 2004-03-23 | 2010-03-03 | オリンパス株式会社 | Solid-state imaging device |
JP4497022B2 (en) * | 2005-04-26 | 2010-07-07 | ソニー株式会社 | Solid-state imaging device, driving method of solid-state imaging device, and imaging device |
JP2009130582A (en) * | 2007-11-22 | 2009-06-11 | Nikon Corp | Solid-state imaging apparatus, and electronic camera |
JP5272634B2 (en) * | 2008-06-20 | 2013-08-28 | ソニー株式会社 | Solid-state imaging device, signal processing method for solid-state imaging device, and imaging device |
JP5241355B2 (en) * | 2008-07-10 | 2013-07-17 | キヤノン株式会社 | Imaging apparatus and control method thereof |
JP2010107662A (en) * | 2008-10-29 | 2010-05-13 | Panasonic Corp | Imaging apparatus, range-finding device and range-finding method |
JP2010250007A (en) * | 2009-04-14 | 2010-11-04 | Olympus Corp | Image capturing apparatus |
JP5269735B2 (en) * | 2009-10-08 | 2013-08-21 | 株式会社東芝 | Solid-state imaging device |
JP5742313B2 (en) * | 2011-03-10 | 2015-07-01 | 株式会社ニコン | Imaging device |
-
2016
- 2016-02-24 JP JP2016033276A patent/JP6091674B2/en active Active
-
2017
- 2017-02-08 JP JP2017021541A patent/JP6305585B2/en active Active
-
2018
- 2018-03-06 JP JP2018040030A patent/JP6672356B2/en active Active
-
2020
- 2020-03-04 JP JP2020036419A patent/JP2020109980A/en not_active Ceased
-
2021
- 2021-07-14 JP JP2021116663A patent/JP2021166411A/en active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002131623A (en) * | 2000-10-24 | 2002-05-09 | Canon Inc | Imaging apparatus and system |
JP2010109677A (en) * | 2008-10-30 | 2010-05-13 | Sony Corp | Solid-state imaging apparatus, imaging apparatus, pixel drive voltage optimization apparatus, and pixel drive voltage optimization method |
Also Published As
Publication number | Publication date |
---|---|
JP6305585B2 (en) | 2018-04-04 |
JP2020109980A (en) | 2020-07-16 |
JP2016105649A (en) | 2016-06-09 |
JP6091674B2 (en) | 2017-03-08 |
JP6672356B2 (en) | 2020-03-25 |
JP2018093540A (en) | 2018-06-14 |
JP2017092989A (en) | 2017-05-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5893572B2 (en) | Imaging device, imaging system, and driving method of imaging device | |
US11758305B2 (en) | Comparator, ad converter, solid-state imaging device, electronic apparatus, and method of controlling comparator | |
JP6482186B2 (en) | Imaging apparatus and driving method thereof | |
JP6041500B2 (en) | Imaging device, imaging system, driving method of imaging device, and driving method of imaging system | |
JP6735582B2 (en) | Imaging device, driving method thereof, and imaging device | |
CN109845243B (en) | Imaging device | |
JP6124717B2 (en) | Image sensor, focus detection device | |
JP2016012903A (en) | Imaging element, imaging method, and electronic equipment | |
WO2013129646A1 (en) | A/d conversion circuit, and solid-state image pickup apparatus | |
JP2013211832A (en) | Imaging device, imaging system, and driving method of imaging device | |
JP6406977B2 (en) | Photoelectric conversion device, imaging system | |
CN111133750B (en) | Image sensor and image pickup apparatus | |
JP2021166411A (en) | Imaging device, imaging system, method of driving imaging device, and method of driving imaging system | |
JP2021182763A (en) | Image pick-up device and imaging apparatus | |
JP2017216626A (en) | Image pickup device and its control method and imaging apparatus and its control method | |
JP6237726B2 (en) | Imaging device and imaging apparatus | |
JP5786762B2 (en) | A / D conversion circuit and solid-state imaging device | |
JP2018061116A (en) | Imaging apparatus, control method for imaging apparatus, program, and storage medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210813 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210813 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220727 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220823 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20230314 |