JP2021166411A - Imaging device, imaging system, method of driving imaging device, and method of driving imaging system - Google Patents

Imaging device, imaging system, method of driving imaging device, and method of driving imaging system Download PDF

Info

Publication number
JP2021166411A
JP2021166411A JP2021116663A JP2021116663A JP2021166411A JP 2021166411 A JP2021166411 A JP 2021166411A JP 2021116663 A JP2021116663 A JP 2021116663A JP 2021116663 A JP2021116663 A JP 2021116663A JP 2021166411 A JP2021166411 A JP 2021166411A
Authority
JP
Japan
Prior art keywords
signal
output
pixels
pixel
digital
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2021116663A
Other languages
Japanese (ja)
Inventor
誠二 橋本
Seiji Hashimoto
篤 古林
Atsushi Furubayashi
建 鈴木
Ken Suzuki
一博 園田
Kazuhiro Sonoda
大介 吉田
Daisuke Yoshida
洋史 戸塚
Yoji Totsuka
隆 武藤
Takashi Muto
靖司 松野
Yasushi Matsuno
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of JP2021166411A publication Critical patent/JP2021166411A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Transforming Light Signals Into Electric Signals (AREA)
  • Focusing (AREA)
  • Automatic Focus Adjustment (AREA)
  • Studio Devices (AREA)
  • Solid State Image Pick-Up Elements (AREA)

Abstract

To provide an imaging device and an imaging system that can obtain signals based upon some of a plurality of photoelectric conversion parts fast and signals based upon the plurality of photoelectric conversion parts according to the present invention since an imaging device which has a plurality of pixels including a plurality of photoelectric conversion parts and outputs signals based upon one photoelectric conversion part and a signal based upon some of other photoelectric conversion part was not sufficiently examined before about faster operation.SOLUTION: Pixels output a first signal based upon signal charges of some of a plurality of photoelectric conversion parts and a second signal based upon signal charges of the plurality of photoelectric conversion parts are output by pixels, and the signals are output from an imaging device and an imaging system such that the number of signals based upon the first signal is less than the number of signals based upon the second signal.SELECTED DRAWING: Figure 1

Description

本発明は、複数の光電変換部を含む画素を複数有する撮像装置、撮像システムに関するものである。 The present invention relates to an image pickup apparatus and an image pickup system having a plurality of pixels including a plurality of photoelectric conversion units.

複数の光電変換部を含む画素を複数有し、一方の光電変換部に基づく信号と、他方の光電変換部の一部の光電変換部に基づく信号とを出力する撮像装置が知られている。この少なくとも2つの信号を用いた形態として、例えば位相差検出方式の焦点検出を行う焦点検出方法が提案されている。このような焦点検出方法に利用可能な信号を出力する撮像装置の一例として、1対の光電変換部を、2次元に配列したマイクロレンズアレイのマイクロレンズ毎に設けたものがある。特許文献1には、1つのマイクロレンズを介して光が入射される1対の光電変換部が出力する信号の加算、非加算を1対の光電変換部を有する画素単位で任意に行うことのできる撮像装置が提案されている。 An imaging device is known that has a plurality of pixels including a plurality of photoelectric conversion units and outputs a signal based on one photoelectric conversion unit and a signal based on a part of the photoelectric conversion units of the other photoelectric conversion unit. As a form using these at least two signals, for example, a focus detection method for performing focus detection by a phase difference detection method has been proposed. As an example of an imaging device that outputs a signal that can be used in such a focus detection method, there is a device in which a pair of photoelectric conversion units are provided for each microlens of a two-dimensionally arranged microlens array. In Patent Document 1, the addition and non-addition of signals output by a pair of photoelectric conversion units in which light is incident through one microlens are arbitrarily performed for each pixel having a pair of photoelectric conversion units. An imaging device capable of this has been proposed.

また、特許文献2には、測距用の画素と撮像用の画素とを有する撮像装置が、静止画撮影モード、間引きモード、測距モードの3種類の読み出し方法で動作することが記載されている。静止画撮影モードでは、測距用の画素と撮像用の画素の画素信号が撮像装置から出力されるが、測距用の画素からの画素信号はその後の信号処理で使用せず、撮像用の画素信号のみを使用する。測距モードは、静止画撮影モードとは逆に、撮像用の画素からの画素信号をその後の信号処理で使用せず、測距用の画素からの画素信号を使用する形態である。間引きモードは、撮像装置から画素信号を出力させる際に、撮像用の画素からのみ画素信号を出力させ、測距用の画素からは画素信号を出力させない形態である。 Further, Patent Document 2 describes that an image pickup apparatus having pixels for distance measurement and pixels for imaging operates in three types of reading methods: still image shooting mode, thinning mode, and distance measurement mode. There is. In the still image shooting mode, the pixel signals of the distance measuring pixel and the imaging pixel are output from the imaging device, but the pixel signal from the distance measuring pixel is not used in the subsequent signal processing and is used for imaging. Use only pixel signals. Contrary to the still image shooting mode, the distance measurement mode is a mode in which the pixel signal from the image pickup pixel is not used in the subsequent signal processing, but the pixel signal from the distance measurement pixel is used. In the thinning mode, when the pixel signal is output from the image pickup apparatus, the pixel signal is output only from the image pickup pixel, and the pixel signal is not output from the distance measuring pixel.

特開2001−83407号公報Japanese Unexamined Patent Publication No. 2001-83407 特開2000−156823号公報Japanese Unexamined Patent Publication No. 2000-156823

特許文献1に記載の撮像装置では複数の光電変換部に基づく信号である画像取得用信号を得ると共に、位相差検出方式の焦点検出を行うための信号であり、一部の光電変換部に基づく信号である焦点検出用信号を高速に得る検討が充分になされていなかった。 The image pickup apparatus described in Patent Document 1 is a signal for obtaining an image acquisition signal which is a signal based on a plurality of photoelectric conversion units and for performing focus detection of a phase difference detection method, and is based on a part of the photoelectric conversion units. Sufficient studies have not been made to obtain a focus detection signal, which is a signal, at high speed.

特許文献2に記載の撮像装置では、画像取得用信号を得るためには静止画撮影モードと間引きモードの一方で動作を行い、焦点検出用信号を得るためには測距モードで動作を行うことが必要だった。よって、画像取得用信号と焦点検出用信号とを得るためには、複数回、固体撮像素子の画素を走査して画素信号を出力させる必要があった。 The image pickup apparatus described in Patent Document 2 operates in one of the still image shooting mode and the thinning mode in order to obtain an image acquisition signal, and operates in the distance measurement mode in order to obtain a focus detection signal. Was needed. Therefore, in order to obtain the image acquisition signal and the focus detection signal, it is necessary to scan the pixels of the solid-state image sensor a plurality of times to output the pixel signal.

従って、特許文献1,2ともに、撮像装置から複数の光電変換部のうちの一部の光電変換部に基づく信号を高速に得ると共に、複数の光電変換部に基づく信号を得る検討が充分では無かった。 Therefore, in both Patent Documents 1 and 2, it is not sufficient to study to obtain a signal based on a part of the photoelectric conversion units from the image pickup apparatus at high speed and to obtain a signal based on the plurality of photoelectric conversion units. rice field.

本発明は上記の課題を解決するために為されたものであり、一の態様は、行列状に配された複数の画素を有し、前記複数の画素の各々が、信号電荷を生成する複数の光電変換部を含むとともに、前記信号電荷に基づいた信号を出力する撮像装置であって、1フレーム期間内に、前記複数の画素の少なくとも一部の前記画素の各々は、各々が有するm個(mは整数)の前記光電変換部のうち、前記m個よりも少ないn個(nは整数)の前記光電変換部の前記信号電荷に基づいた第1の信号を出力し、前記1フレーム期間内に、前記複数の画素の各々が、各々が有する前記m個の前記光電変換部の前記信号電荷に基づいた第2の信号を出力し、前記撮像装置の出力する、前記第1の信号に基づく信号の個数が、前記撮像装置の出力する、前記第2の信号に基づく信号の個数よりも少ないことを特徴とする撮像装置である。 The present invention has been made to solve the above problems, and one embodiment has a plurality of pixels arranged in a matrix, and each of the plurality of pixels generates a signal charge. An imaging device that includes the photoelectric conversion unit of the above and outputs a signal based on the signal charge, and within one frame period, each of the at least a part of the plurality of pixels has m pieces of each. Among the photoelectric conversion units (m is an integer), n less than m (n is an integer), the first signal based on the signal charge of the photoelectric conversion unit is output, and the one frame period Within, each of the plurality of pixels outputs a second signal based on the signal charge of the m photoelectric conversion units each of the plurality of pixels, and outputs the second signal to the first signal output by the image pickup apparatus. The imaging device is characterized in that the number of based signals is smaller than the number of signals based on the second signal output by the imaging device.

また、一の態様は、撮像装置と、前記撮像装置から出力される信号に基づく信号を出力する焦点検出用信号処理部と、を有する撮像システムであって、前記撮像装置は、行列状に配された複数の画素を有し、前記複数の画素の各々が、信号電荷を生成する光電変換部を複数含み、さらに、前記撮像装置が前記複数の画素から前記信号を出力させる垂直走査回路を有し、1フレーム期間内に、前記複数の画素の少なくとも一部の前記画素の各々が、各々が有するm個(mは整数)の前記光電変換部のうち、前記m個よりも少ないn個(nは整数)の前記光電変換部の前記信号電荷に基づいた第1の信号を出力し、前記1フレーム期間内に、前記複数の画素の各々が、各々が有する前記m個の前記光電変換部の前記信号電荷に基づいた第2の信号を出力し、前記撮像装置が、前記複数の画素の前記第2の信号に基づく信号と、前記第1の信号に基づく信号とをそれぞれを前記焦点検出用信号処理部に出力し、前記焦点検出用信号処理部が、前記焦点検出用信号処理部に出力された、前記複数の画素の前記第1の信号に基づく前記信号のうち、前記複数の画素の一部の前記画素の前記第1の信号に基づく前記信号を出力し、前記複数の画素の他の前記画素の前記第1の信号に基づく前記信号を出力しないことを特徴とする撮像システムである。 Further, one embodiment is an imaging system including an imaging device and a focus detection signal processing unit that outputs a signal based on a signal output from the imaging device, and the imaging devices are arranged in a matrix. Each of the plurality of pixels includes a plurality of photoelectric conversion units that generate signal charges, and the imaging device has a vertical scanning circuit that outputs the signal from the plurality of pixels. Then, within one frame period, each of the at least a part of the plurality of pixels has n (m) of the photoelectric conversion units (m is an integer), which is less than m (m). A first signal based on the signal charge of the photoelectric conversion unit (n is an integer) is output, and within the one frame period, each of the plurality of pixels has m of the photoelectric conversion units. The second signal based on the signal charge is output, and the imaging device detects the focus of the signal based on the second signal of the plurality of pixels and the signal based on the first signal. Of the signals based on the first signal of the plurality of pixels output to the focus detection signal processing unit and output to the focus detection signal processing unit, the plurality of pixels An imaging system characterized in that the signal based on the first signal of a part of the pixels is output, and the signal based on the first signal of the other pixels of the plurality of pixels is not output. be.

また、一の態様は、行列状に配された複数の画素を有し、前記複数の画素の各々が、信号電荷を生成する光電変換部を複数含む撮像装置の駆動方法であって、前記駆動方法は、1フレーム期間内に、前記複数の画素の少なくとも一部の前記画素の各々に、各々が有するm個(mは整数)の前記光電変換部のうち、前記m個よりも少ないn個(nは整数)の前記光電変換部の前記信号電荷に基づいた第1の信号を出力させ、前記1フレーム期間内に、前記複数の画素の各々に、各々が有する前記m個の前記光電変換部の前記信号電荷に基づいた第2の信号を出力させ、前記第1の信号に基づく信号の個数を、前記第2の信号に基づく信号の個数よりも少なくして、前記第1の信号に基づく前記信号と前記第2の信号に基づく前記信号とを前記撮像装置に出力させることを特徴とする撮像装置の駆動方法である。 Further, one aspect is a method of driving an image pickup apparatus having a plurality of pixels arranged in a matrix, each of which includes a plurality of photoelectric conversion units that generate signal charges. The method is that, within one frame period, n of the m (m is an integer) photoelectric conversion units each of at least a part of the plurality of pixels have less than m. A first signal based on the signal charge of the photoelectric conversion unit (n is an integer) is output, and within the one frame period, each of the plurality of pixels has the m said photoelectric conversion. A second signal based on the signal charge of the unit is output, and the number of signals based on the first signal is made smaller than the number of signals based on the second signal to obtain the first signal. It is a driving method of an image pickup apparatus characterized by causing the image pickup apparatus to output the said signal based on the said signal and the said signal based on the second signal.

また、一の態様は、撮像装置と、前記撮像装置から出力される信号の信号処理を行う撮像システムの駆動方法であって、前記撮像装置は、行列状に配された複数の画素を有し、前記複数の画素の各々が、信号電荷を生成する光電変換部を複数含み、さらに、前記撮像装置が、マイクロレンズを複数有するレンズアレイを有し、1つの前記マイクロレンズで集光された光が前記画素の有する複数の前記光電変換部に入射し、前記駆動方法は、1フレーム期間内に、前記複数の画素の少なくとも一部の前記画素の各々に、各々が有するm個(mは整数)の前記光電変換部のうち、前記m個よりも少ないn個(nは整数)の前記光電変換部の前記信号電荷に基づいた第1の信号を出力させ、前記1フレーム期間内に、前記複数の画素の各々に、各々が有する前記m個の前記光電変換部の前記信号電荷に基づいた第2の信号を出力させ、前記第1の信号に基づく信号の個数を、前記第2の信号に基づく信号の個数よりも少なくして、前記第1の信号に基づく前記信号と前記第2の信号に基づく前記信号とを前記撮像装置に出力させ、前記信号処理が、前記画素の前記第1の信号に基づく前記信号と、前記画素の前記第2の信号に基づく前記信号との差分である差分信号を得て、前記差分信号と、前記画素の前記第1の信号に基づく前記信号とによって、焦点検出を行い、前記画素の前記第2の信号に基づく前記信号によって画像を形成する処理であることを特徴とする撮像システムの駆動方法である。 Further, one aspect is a method of driving an image pickup device and an image pickup system that performs signal processing of a signal output from the image pickup device, and the image pickup device has a plurality of pixels arranged in a matrix. Each of the plurality of pixels includes a plurality of photoelectric conversion units that generate signal charges, and the imaging device has a lens array having a plurality of microlenses, and the light focused by the one microlens. Is incident on the plurality of photoelectric conversion units of the pixels, and the driving method is such that each of the pixels of at least a part of the plurality of pixels has m (m is an integer) within one frame period. ), The first signal based on the signal charge of n (n is an integer) of the photoelectric conversion units, which is less than m, is output, and the first signal is output within the one frame period. Each of the plurality of pixels is made to output a second signal based on the signal charge of the mth photoelectric conversion unit, and the number of signals based on the first signal is calculated as the second signal. The number of signals based on the first signal is less than the number of signals based on the above, and the signal based on the first signal and the signal based on the second signal are output to the image pickup apparatus, and the signal processing is performed by the first of the pixels. A difference signal, which is a difference between the signal based on the signal of the above and the signal based on the second signal of the pixel, is obtained, and the difference signal and the signal based on the first signal of the pixel are used. This is a method for driving an imaging system, which is a process of performing focus detection and forming an image by the signal based on the second signal of the pixel.

また、一の態様は、撮像装置と、前記撮像装置から出力される信号の信号処理を行う撮像システムの駆動方法であって、前記撮像装置は、行列状に配された複数の画素を有し、前記複数の画素の各々が、信号電荷を生成する光電変換部を複数含み、さらに、前記撮像装置はマイクロレンズを複数有するレンズアレイを有し、1つの前記マイクロレンズで集光された光が前記画素の有する複数の前記光電変換部に入射し、1フレーム期間内に、前記複数の画素の各々に、各々が有するm個(mは整数)の前記光電変換部のうち、前記m個よりも少ないn個(nは整数)の前記光電変換部の前記信号電荷に基づいた第1の信号を出力させ、前記1フレーム期間内に、前記複数の画素の各々に、各々が有する前記m個の前記光電変換部の前記信号電荷に基づいた第2の信号を出力させ、前記撮像装置に、前記第1の信号に基づく前記信号と前記第2の信号に基づく前記信号とを出力させ、前記信号処理が、前記撮像装置から出力した、前記複数の画素の前記第1の信号に基づく前記信号のうち、前記複数の画素の一部の前記画素の前記第1の信号に基づく前記信号を出力させ、前記複数の画素の他の前記画素の前記第1の信号に基づく前記信号を出力させない処理であることを特徴とする撮像システムの駆動方法である。 Further, one aspect is a method of driving an image pickup device and an image pickup system that performs signal processing of a signal output from the image pickup device, and the image pickup device has a plurality of pixels arranged in a matrix. Each of the plurality of pixels includes a plurality of photoelectric conversion units that generate signal charges, and the imaging device has a lens array having a plurality of microlenses, and the light focused by one microlens is emitted. Among the m (m is an integer) of the photoelectric conversion units each of the plurality of pixels, each of the m (m is an integer) incident on the plurality of photoelectric conversion units of the pixels, and within one frame period, from the m of the photoelectric conversion units. The first signal based on the signal charge of the photoelectric conversion unit having a small number of n (n is an integer) is output, and within the one frame period, each of the plurality of pixels has the m of each. A second signal based on the signal charge of the photoelectric conversion unit is output, and the imaging device is made to output the signal based on the first signal and the signal based on the second signal. The signal processing outputs the signal based on the first signal of the pixel, which is a part of the plurality of pixels, among the signals based on the first signal of the plurality of pixels output from the imaging device. This is a method for driving an imaging system, which is a process of not outputting the signal based on the first signal of the other pixels of the plurality of pixels.

本発明は、複数の光電変換部の一部の光電変換部に基づく信号を高速に得ると共に、複数の光電変換部に基づく信号を得ることができる撮像装置、撮像システムを提供することができる。 The present invention can provide an imaging device and an imaging system capable of obtaining signals based on a part of photoelectric conversion units of a plurality of photoelectric conversion units at high speed and obtaining signals based on a plurality of photoelectric conversion units.

焦点検出画素として動作させる画素の配置例を示した模式図。The schematic diagram which showed the arrangement example of the pixel to operate as a focus detection pixel. 撮像装置に関する画素部と信号処理回路とを例示した模式図。The schematic diagram which illustrated the pixel part and the signal processing circuit which concerns on an image pickup apparatus. 撮像装置の画素部に関する配置例を示した図。The figure which showed the arrangement example about the pixel part of an image pickup apparatus. 撮像装置に関する模式図。The schematic diagram about the image pickup apparatus. 撮像装置のアナログデジタル変換回路の一例を示した模式図。The schematic diagram which showed an example of the analog-to-digital conversion circuit of an image pickup apparatus. 撮像装置に関する動作タイミングを表した図。The figure which showed the operation timing about an image pickup apparatus. 撮像装置に関する他の一例の動作タイミングを表した図。The figure which showed the operation timing of another example concerning an image pickup apparatus. 撮像装置のアナログデジタル変換回路の別の一例を示した模式図。The schematic diagram which showed another example of the analog-to-digital conversion circuit of an image pickup apparatus. 他の一例の撮像装置に関する画素部と信号処理回路とを例示した模式図。The schematic diagram which illustrated the pixel part and the signal processing circuit concerning the image pickup apparatus of another example. 他の一例の撮像装置に関する画素部を例示した模式図。The schematic diagram which illustrated the pixel part with respect to the image pickup apparatus of another example. 他の一例の撮像装置に関する模式図。The schematic diagram about the image pickup apparatus of another example. 他の一例の撮像装置に関する動作タイミングを表した図。The figure which showed the operation timing about the image pickup apparatus of another example. 他の一例の撮像装置に関する模式図。The schematic diagram about the image pickup apparatus of another example. 他の一例の撮像装置に関する動作タイミングを表した図。The figure which showed the operation timing about the image pickup apparatus of another example. 他の一例の撮像装置に関する動作タイミングを表した図。The figure which showed the operation timing about the image pickup apparatus of another example. 撮像システムに関する模式図。Schematic diagram of an imaging system. 他の一例の撮像システムに関する模式図。The schematic diagram about the image pickup system of another example. 他の一例の撮像装置と、カウンタ回路に関する模式図。The schematic diagram about another example image pickup apparatus and a counter circuit. 他の一例の撮像装置に関する動作タイミングを表した図。The figure which showed the operation timing about the image pickup apparatus of another example. 他の一例の画素部と、他の一例の撮像装置の模式図。The schematic diagram of the pixel part of another example and the image pickup apparatus of another example. 他の一例の撮像装置に関する動作タイミングを表した図。The figure which showed the operation timing about the image pickup apparatus of another example. 他の一例の撮像装置の模式図と、他の一例の撮像装置に関する動作タイミングを表した図。The schematic diagram of the image pickup apparatus of another example, and the figure which showed the operation timing with respect to the image pickup apparatus of another example. 他の一例の撮像装置に関する動作タイミングを表した図。The figure which showed the operation timing about the image pickup apparatus of another example. 他の一例の撮像装置の模式図と、他の一例の撮像装置に関する動作タイミングを表した図。The schematic diagram of the image pickup apparatus of another example, and the figure which showed the operation timing with respect to the image pickup apparatus of another example. 他の一例の撮像装置の模式図と、他の一例の撮像装置に関する動作タイミングを表した図。The schematic diagram of the image pickup apparatus of another example, and the figure which showed the operation timing with respect to the image pickup apparatus of another example. 他の一例の撮像装置に関する動作タイミングを表した図。The figure which showed the operation timing about the image pickup apparatus of another example. 他の一例の撮像装置の模式図と、他の一例の撮像装置に関する動作タイミングを表した図。The schematic diagram of the image pickup apparatus of another example, and the figure which showed the operation timing with respect to the image pickup apparatus of another example. 他の一例の撮像装置の模式図と、他の一例の撮像装置に関する動作タイミングを表した図。The schematic diagram of the image pickup apparatus of another example, and the figure which showed the operation timing with respect to the image pickup apparatus of another example. 他の一例の撮像装置の模式図と、他の一例の撮像装置に関する動作タイミングを表した図。The schematic diagram of the image pickup apparatus of another example, and the figure which showed the operation timing with respect to the image pickup apparatus of another example. 他の一例の撮像装置の模式図と、他の一例の増幅回路の模式図。A schematic diagram of an image pickup device of another example and a schematic diagram of an amplifier circuit of another example. 他の一例の撮像装置に関する動作タイミングを表した図。The figure which showed the operation timing about the image pickup apparatus of another example.

[実施例1]
以下、図面を参照しながら本実施例の撮像装置について説明する。
[Example 1]
Hereinafter, the imaging apparatus of this embodiment will be described with reference to the drawings.

本実施例の撮像装置に設けられた画素は、位相差検出方式による焦点検出のための焦点検出用信号の基となる信号と、撮像のための信号である画像取得用信号の基となる信号を出力する。例えば、ライン状またはクロス状に配置された、複数の画素から焦点検出用信号の基となる信号が出力される。撮像装置は、画素から出力される焦点検出用信号の基となる信号と画像取得用信号の基となる信号を処理して焦点検出用信号、画像取得用信号を出力する。撮像装置から出力された焦点検出用信号に基づいて、入射光の相互の位相差を検出することができる。この検出された位相差に基づいて焦点検出を行うことができる。 The pixels provided in the image pickup apparatus of this embodiment are a signal that is a basis of a focus detection signal for focus detection by a phase difference detection method and a signal that is a basis of an image acquisition signal that is a signal for imaging. Is output. For example, a signal that is a base of a focus detection signal is output from a plurality of pixels arranged in a line shape or a cross shape. The image pickup apparatus processes the signal that is the basis of the focus detection signal output from the pixel and the signal that is the basis of the image acquisition signal, and outputs the focus detection signal and the image acquisition signal. The mutual phase difference of the incident light can be detected based on the focus detection signal output from the image pickup apparatus. Focus detection can be performed based on the detected phase difference.

図1(a)に、本実施例の撮像装置における、画素が出力する信号(以下、画素信号と表記する)の読み出し方の一例を示す。本実施例の画素の各々は、後述するように、複数の光電変換部を有している。複数の光電変換部の一方の信号電荷に基づいて出力される画素信号をA信号と表記する。また、複数の光電変換部の信号電荷に基づいて出力される画素信号をA+B信号と表記する。A信号は焦点を検出するための信号である焦点検出用信号の基となる信号である。A+B信号は画像取得用信号の基となる信号である。A+B信号は画素が出力する第2の信号であり、A信号は画素が出力する第1の信号である。 FIG. 1A shows an example of how to read a signal output by a pixel (hereinafter referred to as a pixel signal) in the image pickup apparatus of this embodiment. Each of the pixels of this embodiment has a plurality of photoelectric conversion units, as will be described later. A pixel signal output based on the signal charge of one of a plurality of photoelectric conversion units is referred to as an A signal. Further, a pixel signal output based on the signal charges of a plurality of photoelectric conversion units is referred to as an A + B signal. The A signal is a signal that is the basis of a focus detection signal, which is a signal for detecting a focus. The A + B signal is a signal that is the basis of the image acquisition signal. The A + B signal is the second signal output by the pixel, and the A signal is the first signal output by the pixel.

図1(a)〜(c)は、画素が複数行、複数列配された形態を模式的に表している。図1(a)は、一部の行において全ての画素がA信号を出力する形態である。また、AとA+Bとが併記された領域の画素はA信号を出力した後、A+B信号を出力する。A+Bと記された領域の画素は、A+B信号の出力を行うが、A信号の出力は行わない。 1 (a) to 1 (c) schematically show a form in which a plurality of rows and a plurality of columns of pixels are arranged. FIG. 1A shows a form in which all pixels output an A signal in some rows. Further, the pixels in the region where A and A + B are written together output the A signal and then the A + B signal. The pixels in the area marked A + B output the A + B signal, but do not output the A signal.

図2に、図1(a)に示した撮像装置の一部である4行4列の画素を抜き出すとともに、画素からの信号を処理する信号処理回路と水平走査回路とを合わせて示した模式図を示す。図2の画素は、4行×4列を基本単位としたベイヤー配列で配置されている。以下、複数行、複数列の画素が配列された領域を画素部と表記する。図2では、画素に設けられているカラーフィルター22の色であるR(赤)、G(緑)、B(青)を括弧書きで示し、その下段に出力する信号を記している。つまり、図2の上から数えて1行目、左から数えて1列目の画素は緑のカラーフィルターを有しており、A信号とA+B信号とを時分割で出力することを示している。図2において、図の上から数えて1行目L1、2行目L2の全ての画素はA信号と、A+B信号を時分割で出力する。図の上から数えて3行目L3、4行目L4の全ての画素は、A信号は出力せず、A+B信号のみを出力する。尚、以下特に断りのない限りは、本明細書を通じてX行目(Xは自然数)と表記する際は全て図の上から数えたものとして表す。同様に、Y列目(Yは自然数)と表記する際についても、特に断りのない限り本明細書を通じて図の左から数えたものとして表す。複数列配された画素の各列に信号処理回路101が設けられており、水平走査回路14からの信号に基づいて各画素から画素信号を読み出し、読み出した信号を撮像装置の外部に出力する。図2に示した撮像装置の例では、水平走査回路14が行列状に画素100が配された画素領域を挟んで2つ設けられている。信号処理回路101は1列おきに同一の水平走査回路14に電気的に接続されている。この構成にすることにより、例えば1列目と2列目に設けられた信号処理回路を2つの水平走査回路14のそれぞれが選択することにより、1列目と2列目の画素100のそれぞれから画素信号を同時に出力させることができる。 FIG. 2 shows a schematic diagram in which pixels of 4 rows and 4 columns, which are a part of the image pickup apparatus shown in FIG. 1A, are extracted, and a signal processing circuit for processing signals from the pixels and a horizontal scanning circuit are combined. The figure is shown. The pixels in FIG. 2 are arranged in a Bayer array with 4 rows × 4 columns as a basic unit. Hereinafter, the area in which the pixels of a plurality of rows and a plurality of columns are arranged is referred to as a pixel portion. In FIG. 2, the colors R (red), G (green), and B (blue) of the color filter 22 provided on the pixel are shown in parentheses, and the signal to be output is shown in the lower row thereof. That is, the pixels in the first row counting from the top of FIG. 2 and the first column counting from the left have a green color filter, indicating that the A signal and the A + B signal are output in a time division manner. .. In FIG. 2, all the pixels in the first row L1 and the second row L2 counting from the top of the figure output the A signal and the A + B signal in a time division manner. All the pixels in the 3rd row L3 and the 4th row L4 counting from the top of the figure do not output the A signal, but output only the A + B signal. Unless otherwise specified below, when the line X (X is a natural number) is expressed throughout the present specification, it is represented as counting from the top of the figure. Similarly, the Y-th column (Y is a natural number) is also referred to as being counted from the left side of the figure throughout the present specification unless otherwise specified. A signal processing circuit 101 is provided in each row of the pixels arranged in a plurality of rows, and a pixel signal is read from each pixel based on the signal from the horizontal scanning circuit 14, and the read signal is output to the outside of the image pickup apparatus. In the example of the image pickup apparatus shown in FIG. 2, two horizontal scanning circuits 14 are provided so as to sandwich a pixel region in which the pixels 100 are arranged in a matrix. The signal processing circuit 101 is electrically connected to the same horizontal scanning circuit 14 every other row. With this configuration, for example, by selecting the signal processing circuits provided in the first and second rows by each of the two horizontal scanning circuits 14, the pixels 100 in the first and second rows can be selected. The pixel signals can be output at the same time.

図3(a)は本実施例に関する撮像装置の上面模式図である。画素100は、第1の光電変換部である第1のフォトダイオード1、第2の光電変換部である第2のフォトダイオード51、フォトダイオード1、51に電気的に接続された画素内読み出し回路部10を含んでいる。以下では、1つの画素100が有するフォトダイオード1とフォトダイオード51とをまとめて表す際は、受光部と表記する。1つのマイクロレンズ23は、1つの受光部を覆うように配され、光束を受光部に集光する。つまり、1つのマイクロレンズは1つの受光部に対応して設けられている。また、1つのマイクロレンズによって集光された光は、1つのマイクロレンズに対応して設けられた画素100が有する複数の光電変換部に入射する。本実施例の撮像装置は、複数のマイクロレンズを有するマイクロレンズアレイを有する。 FIG. 3A is a schematic top view of the image pickup apparatus according to this embodiment. The pixel 100 is an in-pixel readout circuit electrically connected to a first photodiode 1, which is a first photoelectric conversion unit, a second photodiode 51, which is a second photoelectric conversion unit, and photodiodes 1, 51. Includes part 10. In the following, when the photodiode 1 and the photodiode 51 of one pixel 100 are collectively represented, they are referred to as a light receiving unit. One microlens 23 is arranged so as to cover one light receiving portion, and collects a light beam on the light receiving portion. That is, one microlens is provided corresponding to one light receiving portion. Further, the light collected by one microlens is incident on a plurality of photoelectric conversion units included in the pixels 100 provided corresponding to one microlens. The imaging device of this embodiment has a microlens array having a plurality of microlenses.

次に、図3(b)に、図3(a)でα−βの直線で示した部分のうち、2つの画素100の断面を示す。カラーフィルター22はマイクロレンズ23とフォトダイオード1、51との間に設けられている。 Next, FIG. 3 (b) shows a cross section of two pixels 100 among the portions shown by the straight lines of α-β in FIG. 3 (a). The color filter 22 is provided between the microlens 23 and the photodiodes 1 and 51.

図4は本実施例の撮像装置のうち、2行2列の画素100と、2列の信号処理回路101を抜き出して模式的に表した模式図である。2は垂直走査回路であり、タイミングジェネレータ12(以下、TG12と表記する)からのタイミング信号に基づいて画素を行ごとに選択して、画素から画素信号を出力させる垂直走査回路である。 FIG. 4 is a schematic diagram schematically showing the pixel 100 of 2 rows and 2 columns and the signal processing circuit 101 of 2 columns extracted from the image pickup apparatus of this embodiment. Reference numeral 2 denotes a vertical scanning circuit, which is a vertical scanning circuit that selects pixels line by line based on a timing signal from a timing generator 12 (hereinafter referred to as TG12) and outputs a pixel signal from the pixels.

次に画素100について説明する。 Next, the pixel 100 will be described.

画素100は、転送MOSトランジスタ20、50、リセットMOSトランジスタ4、増幅MOSトランジスタ5、選択MOSトランジスタ6を有する。フォトダイオード1、51では光が入射すると、光電変換により信号電荷が生じる。転送MOSトランジスタ20のゲートに、図6を用いて後述する垂直走査回路2が供給する転送パルスφT1をHighレベル(以降、Hレベルと表記する。同様に、LowレベルをLレベルと表記する。)として、フォトダイオード1が保持する信号電荷を増幅MOSトランジスタ5の入力ノードに転送する。同様に、転送MOSトランジスタ50のゲートに、垂直走査回路2が供給する転送パルスφT2をHレベルとして、フォトダイオード51が有する信号電荷を増幅MOSトランジスタ5の入力ノードに転送する。リセットMOSトランジスタ4のゲートに垂直走査回路2が供給するリセットパルスφRをHレベルとすると、増幅MOSトランジスタ5の入力ノードの電位がリセットされる。増幅MOSトランジスタ5は、入力ノードに転送された信号電荷に基づいて、電気信号を選択MOSトランジスタ6に出力する。選択MOSトランジスタ6は、増幅MOSトランジスタ5が出力した信号を、垂直走査回路2からゲートに供給される選択パルスφSELがHレベルの時に垂直信号線7に出力する。 The pixel 100 includes transfer MOS transistors 20 and 50, a reset MOS transistor 4, an amplification MOS transistor 5, and a selection MOS transistor 6. When light is incident on the photodiodes 1 and 51, a signal charge is generated by photoelectric conversion. The transfer pulse φT1 supplied to the gate of the transfer MOS transistor 20 by the vertical scanning circuit 2 described later with reference to FIG. 6 is referred to as High level (hereinafter, referred to as H level. Similarly, Low level is referred to as L level). As a result, the signal charge held by the photodiode 1 is transferred to the input node of the amplification MOS transistor 5. Similarly, the signal charge of the photodiode 51 is transferred to the input node of the amplification MOS transistor 5 with the transfer pulse φT2 supplied by the vertical scanning circuit 2 as the H level at the gate of the transfer MOS transistor 50. When the reset pulse φR supplied by the vertical scanning circuit 2 to the gate of the reset MOS transistor 4 is set to H level, the potential of the input node of the amplification MOS transistor 5 is reset. The amplification MOS transistor 5 outputs an electric signal to the selection MOS transistor 6 based on the signal charge transferred to the input node. The selection MOS transistor 6 outputs the signal output by the amplification MOS transistor 5 to the vertical signal line 7 when the selection pulse φSEL supplied from the vertical scanning circuit 2 to the gate is at H level.

フォトダイオード1からの信号電荷が転送された増幅MOSトランジスタ5の入力ノードの電位に基づいて、垂直信号線7に出力される信号が前述したA信号に相当する。また、フォトダイオード51からの信号電荷が転送された増幅MOSトランジスタ5の入力ノードの電位に基づいて、垂直信号線7に出力される信号がB信号である。また、転送パルスφT1、φT2を共にHレベルとして、フォトダイオード1、51のそれぞれに蓄積された信号電荷を増幅MOSトランジスタ5の入力ノードに転送する。この時の増幅MOSトランジスタ5の入力ノードの電位に基づいて垂直信号線7に出力される信号が前述したA+B信号に相当する。本実施例では、B信号、すなわち、フォトダイオード51において光電変換を行って保持した信号電荷のみが増幅MOSトランジスタ5の入力ノードに転送されて垂直信号線7に出力される信号については、画素100からの出力動作を行わない。B信号に相当する信号は、画像取得用信号と焦点検出用信号との差分処理を、後述するデジタル信号処理回路が行うことによって取得する。このB信号もA信号と同様に焦点検出に用いられる焦点検出用信号の基となる信号である。以上が画素100についての説明である。 The signal output to the vertical signal line 7 corresponds to the above-mentioned A signal based on the potential of the input node of the amplification MOS transistor 5 to which the signal charge from the photodiode 1 is transferred. Further, the signal output to the vertical signal line 7 is the B signal based on the potential of the input node of the amplification MOS transistor 5 to which the signal charge from the photodiode 51 is transferred. Further, the transfer pulses φT1 and φT2 are both set to H level, and the signal charges accumulated in the photodiodes 1 and 51 are transferred to the input node of the amplification MOS transistor 5. The signal output to the vertical signal line 7 based on the potential of the input node of the amplification MOS transistor 5 at this time corresponds to the above-mentioned A + B signal. In this embodiment, the B signal, that is, only the signal charge held by performing photoelectric conversion in the photodiode 51 is transferred to the input node of the amplification MOS transistor 5 and output to the vertical signal line 7 with respect to the pixel 100. Does not output from. The signal corresponding to the B signal is acquired by performing the difference processing between the image acquisition signal and the focus detection signal by a digital signal processing circuit described later. Like the A signal, this B signal is also a signal that is the basis of the focus detection signal used for focus detection. The above is the description of the pixel 100.

次に、信号処理回路101について説明する。C0はクランプ容量である。8はオペアンプであり、クランプ容量C0を介して画素100から出力される画素信号を増幅して出力する。オペアンプ8の帰還経路にはフィードバック容量C1、C2がそれぞれスイッチSW2、SW3とともに設けられている。オペアンプ8の出力端子には、フィードバック容量C1、C2のうち、オペアンプ8の出力端子と入力端子とに対して導通状態にあるスイッチSW2、SW3と直列に接続されたフィードバック容量の容量値の総和Cf_totalとクランプ容量C0の容量比による反転ゲインが発生する。 Next, the signal processing circuit 101 will be described. C0 is the clamp capacity. Reference numeral 8 denotes an operational amplifier, which amplifies and outputs a pixel signal output from the pixel 100 via the clamp capacitance C0. Feedback capacitances C1 and C2 are provided together with switches SW2 and SW3 in the feedback path of the operational amplifier 8, respectively. Of the feedback capacitances C1 and C2, the output terminal of the operational amplifier 8 is the sum of the capacitance values of the feedback capacitances connected in series with the switches SW2 and SW3 which are in a conductive state with respect to the output terminal and the input terminal of the operational amplifier 8 Cf_total. And the inverting gain is generated by the capacitance ratio of the clamp capacitance C0.

オペアンプ8から出力された信号は、クランプ容量C3を介して、比較回路9に入力される。比較回路9はランプ信号発生回路10から、時間に依存して電圧値が変化するランプ信号VRAMPがクランプ容量C4を介して供給される。比較回路9は、ランプ信号VRAMPとクランプ容量C3を介してオペアンプ8から出力される信号との比較を行い、比較結果に基づく信号であるラッチ信号LATをカウンタ回路11に出力する。つまり、ランプ信号VRAMPとオペアンプ8から出力される信号との大小関係が逆転した時に、比較回路9が出力するラッチ信号LATの信号レベルが変化する。カウンタ回路11にはTG12からクロックパルス信号CLKが出力されている。カウンタ回路11は、ランプ信号発生回路10が時間に依存したランプ信号VRAMPの電圧値の変化を開始してから比較回路9からラッチ信号LATが変化するまでの間、クロックパルス信号CLKを計数したカウント信号を生成する。比較回路9から出力されるラッチ信号LATが変化した時、クロックパルス信号CLKの計数を終了するとともに、ラッチ信号LATが変化した時のカウント信号を保持する。信号保持部であるメモリ13はランプ信号VRAMPを変化させる期間が終了すると、カウンタ回路11に保持されたカウント信号の取り込みを行い、カウント信号を保持する。水平走査回路14はTG12からのタイミング信号に基づいて各列のメモリ13を順次選択し、各列のメモリ13が保持したカウント信号を転送する。この水平走査回路14によって出力された信号が、撮像装置の出力する出力信号SIGOUTである。本実施例の出力信号SIGOUTは、後述するデジタルN信号、デジタルA信号、デジタルA+B信号である。すなわち、出力信号SIGOUTは、画素信号に基づく信号である。また、デジタルA+B信号は第2の信号に基づく信号であり、デジタルA信号は第1の信号に基づく信号である。本実施例では、第2の信号に基づく信号は画像取得用信号であり、第1の信号に基づく信号は焦点検出用信号である。尚、ランプ信号VRAMPは、比較回路9においてアナログ信号と比較される参照信号の一例である。 The signal output from the operational amplifier 8 is input to the comparison circuit 9 via the clamp capacitance C3. In the comparison circuit 9, the lamp signal VRAMP whose voltage value changes depending on the time is supplied from the lamp signal generation circuit 10 via the clamp capacitance C4. The comparison circuit 9 compares the lamp signal VRAMP with the signal output from the operational amplifier 8 via the clamp capacitance C3, and outputs the latch signal LAT, which is a signal based on the comparison result, to the counter circuit 11. That is, when the magnitude relationship between the lamp signal VRAMP and the signal output from the operational amplifier 8 is reversed, the signal level of the latch signal LAT output by the comparison circuit 9 changes. A clock pulse signal CLK is output from the TG 12 to the counter circuit 11. The counter circuit 11 counts the clock pulse signal CLK from the time when the lamp signal generation circuit 10 starts changing the voltage value of the lamp signal VRAMP depending on the time until the latch signal LAT changes from the comparison circuit 9. Generate a signal. When the latch signal LAT output from the comparison circuit 9 changes, the counting of the clock pulse signal CLK is terminated, and the count signal when the latch signal LAT changes is held. When the period for changing the lamp signal VRAMP ends, the memory 13 which is the signal holding unit takes in the count signal held in the counter circuit 11 and holds the count signal. The horizontal scanning circuit 14 sequentially selects the memory 13 in each column based on the timing signal from the TG 12, and transfers the count signal held by the memory 13 in each column. The signal output by the horizontal scanning circuit 14 is the output signal SIGOUT output by the image pickup apparatus. The output signal SIGOUT of this embodiment is a digital N signal, a digital A signal, and a digital A + B signal, which will be described later. That is, the output signal SIGOUT is a signal based on the pixel signal. Further, the digital A + B signal is a signal based on the second signal, and the digital A signal is a signal based on the first signal. In this embodiment, the signal based on the second signal is an image acquisition signal, and the signal based on the first signal is a focus detection signal. The lamp signal VRAMP is an example of a reference signal to be compared with an analog signal in the comparison circuit 9.

次に、図5に、カウンタ回路11とメモリ13の構成の一例を示す。カウンタ回路11は、TG12から供給されるクロックパルス信号CLKに基づいて、nビットのカウント信号CKnを生成し、メモリ13に出力する。カウンタ回路11とメモリ13との間にはnビットのカウント信号を伝送するカウント信号伝送線がn本設けられている。本実施例の撮像装置は、後述するが、相関二重サンプリング(以下、CDS(Correlated Double Sampling)と表記する。)を行う。よって、画素100のノイズレベルの信号であるN信号と、受光部が光電変換して生じた信号電荷が転送された増幅MOSトランジスタ5の入力ノードの電位に基づいて出力されるS信号とが画素100から出力される。S信号は、本実施例ではA信号とA+B信号である。従って、画素100からは1フレーム期間内に、N信号、A信号、A+B信号の3つの信号が出力される。なお、1フレーム期間とは、後述する図7(b)で示した垂直同期信号VDが1度Hレベルとなった後、次にHレベルとなるまでの期間である。本実施例では、アナログ信号であるN信号、A信号、A+B信号のそれぞれが画素100から出力される都度、デジタル信号に変換する動作を行う。このため、メモリ13はデジタル信号値を保持するメモリ部をそれぞれの信号に対応して3つ設けている。即ち、メモリ部M1はN信号に基づくデジタルN信号、メモリ部M2はA信号に基づくデジタルA信号、メモリ部M3はA+B信号に基づくデジタルA+B信号を保持する。すなわち、メモリ部M1はノイズレベルの信号値であるデジタル信号が入力されるNメモリである。また、メモリ部M2は、画素の一部の光電変換部に基づく前記画素信号に基づく信号を保持するS1メモリである。また、メモリ部M3は、画素の複数の光電変換部に基づく画素信号に基づく信号を保持するS2メモリである。メモリ13にはN信号線15とS信号線16とが電気的に接続されており、N信号線15にはメモリ部M1からデジタルN信号、S信号線16にはメモリ部M2,M3のそれぞれからデジタルA信号と、A+B信号に基づくデジタルA+B信号とが時分割で出力される。 Next, FIG. 5 shows an example of the configuration of the counter circuit 11 and the memory 13. The counter circuit 11 generates an n-bit count signal CKn based on the clock pulse signal CLK supplied from the TG 12, and outputs the n-bit count signal CKn to the memory 13. N count signal transmission lines for transmitting an n-bit count signal are provided between the counter circuit 11 and the memory 13. As will be described later, the imaging apparatus of this embodiment performs correlated double sampling (hereinafter referred to as CDS (Correlated Double Sampling)). Therefore, the N signal, which is the noise level signal of the pixel 100, and the S signal, which is output based on the potential of the input node of the amplification MOS transistor 5 to which the signal charge generated by the photoelectric conversion of the light receiving unit, are transferred, are pixels. It is output from 100. The S signal is an A signal and an A + B signal in this embodiment. Therefore, three signals, an N signal, an A signal, and an A + B signal, are output from the pixel 100 within one frame period. The one-frame period is a period from when the vertical synchronization signal VD shown in FIG. 7B described later reaches the H level once and then reaches the H level next time. In this embodiment, each time each of the analog signals N signal, A signal, and A + B signal is output from the pixel 100, the operation of converting into a digital signal is performed. Therefore, the memory 13 is provided with three memory units for holding digital signal values corresponding to each signal. That is, the memory unit M1 holds a digital N signal based on the N signal, the memory unit M2 holds a digital A signal based on the A signal, and the memory unit M3 holds a digital A + B signal based on the A + B signal. That is, the memory unit M1 is an N memory to which a digital signal which is a signal value of a noise level is input. Further, the memory unit M2 is an S1 memory that holds a signal based on the pixel signal based on a part of the pixel photoelectric conversion unit. Further, the memory unit M3 is an S2 memory that holds a signal based on a pixel signal based on a plurality of photoelectric conversion units of the pixel. The N signal line 15 and the S signal line 16 are electrically connected to the memory 13, the N signal line 15 is connected to the digital N signal from the memory unit M1, and the S signal line 16 is connected to the memory units M2 and M3, respectively. A digital A signal and a digital A + B signal based on the A + B signal are output in time division.

次に図6に、図2に例示した撮像装置のうち、1行目の画素100が行う動作のタイミングを示す。スイッチパルスφSW1は、スイッチSW1のオン、オフを切り替えるパルスであり、Hレベルの時にスイッチSW1がオンとなる。V1はオペアンプ8の出力を表している。SIGOUTは水平走査回路14が各列のメモリ13を選択し、各メモリ部からカウント信号を出力させるタイミングを示している。以下では、φSW2およびφSW3の少なくとも一方がハイレベルである、つまり、クランプ容量C0の容量値との比で信号を増幅するものとする。 Next, FIG. 6 shows the timing of the operation performed by the pixel 100 in the first row among the imaging devices illustrated in FIG. The switch pulse φSW1 is a pulse for switching the switch SW1 on and off, and the switch SW1 is turned on at the H level. V1 represents the output of the operational amplifier 8. SIGOUT indicates the timing at which the horizontal scanning circuit 14 selects the memory 13 in each row and outputs a count signal from each memory unit. In the following, it is assumed that at least one of φSW2 and φSW3 has a high level, that is, the signal is amplified by the ratio to the capacitance value of the clamp capacitance C0.

時刻t11において、リセットパルスφRはHレベルとし、増幅MOSトランジスタ5の入力ノードをリセットレベルの電位とする。また、選択パルスφSELをHレベルとする。これにより、増幅MOSトランジスタ5の入力ノードがリセットレベルの電位である時の画素信号が垂直信号線7に出力される。スイッチパルスφSW1、φCをHレベルとする。スイッチパルスφCがHレベルとなる事により、スイッチSW4とスイッチSW5がオンとなる。スイッチパルスφSW1をHレベルとして、オペアンプ8の出力端子と入力端子とをショートさせることにより、オペアンプ8のリセットを行う。スイッチパルスφCをHレベルとすることによりクランプ容量C4のリセットを行う。また、時刻t11において、選択パルスφSELをHレベルとし、増幅MOSトランジスタ5の入力ノードのリセットレベルの電位に基づいて垂直信号線7に画素信号が出力される。 At time t11, the reset pulse φR is set to H level, and the input node of the amplification MOS transistor 5 is set to the potential of reset level. Further, the selection pulse φSEL is set to H level. As a result, the pixel signal when the input node of the amplification MOS transistor 5 is at the reset level potential is output to the vertical signal line 7. Let the switch pulses φSW1 and φC be the H level. When the switch pulse φC becomes H level, the switch SW4 and the switch SW5 are turned on. The operational amplifier 8 is reset by short-circuiting the output terminal and the input terminal of the operational amplifier 8 with the switch pulse φSW1 as the H level. The clamp capacitance C4 is reset by setting the switch pulse φC to the H level. Further, at time t11, the selection pulse φSEL is set to H level, and a pixel signal is output to the vertical signal line 7 based on the potential of the reset level of the input node of the amplification MOS transistor 5.

時刻t12において、リセットパルスφR、スイッチパルスφSW1、φCをLレベルとする。クランプ容量C0,C3,C4には、スイッチパルスφSW1、φCがLレベルとなるときの電位がそれぞれ保持される。リセットパルスφRがHレベルからLレベルに遷移する時、リセットMOSトランジスタ4で生じるチャージインジェクションによって増幅MOSトランジスタ5の入力ノードの電位が変化する。これにより、垂直信号線7に出力される画素信号の信号レベルも変化する。この時刻t12において出力される画素信号を、以下N信号と表記する。同様に受光部が入射光を光電変換した信号電荷を保持した増幅MOSトランジスタ5の入力ノードの電位に基づいて垂直信号線7に出力される画素信号をS信号と以下表記する。オペアンプ8はクランプ容量C0を介して与えられた信号を増幅してクランプ容量C3に出力する。クランプ容量C3に与えられる信号は、クランプ容量C0を介して画素100から出力された信号を増幅した信号に、オペアンプ8のオフセット信号Voffが重畳されている。比較回路9には、クランプ容量C3を介してオペアンプ8が出力した信号が与えられる。 At time t12, the reset pulse φR, the switch pulse φSW1, and φC are set to the L level. The clamp capacitances C0, C3, and C4 hold the potentials when the switch pulses φSW1 and φC reach the L level, respectively. When the reset pulse φR transitions from the H level to the L level, the potential of the input node of the amplification MOS transistor 5 changes due to the charge injection generated in the reset MOS transistor 4. As a result, the signal level of the pixel signal output to the vertical signal line 7 also changes. The pixel signal output at this time t12 is hereinafter referred to as an N signal. Similarly, the pixel signal output to the vertical signal line 7 based on the potential of the input node of the amplification MOS transistor 5 in which the light receiving unit holds the signal charge obtained by photoelectrically converting the incident light is hereinafter referred to as S signal. The operational amplifier 8 amplifies the signal given via the clamp capacitance C0 and outputs the signal to the clamp capacitance C3. As for the signal given to the clamp capacitance C3, the offset signal Voff of the operational amplifier 8 is superimposed on the signal obtained by amplifying the signal output from the pixel 100 via the clamp capacitance C0. The signal output by the operational amplifier 8 is given to the comparison circuit 9 via the clamp capacitance C3.

時刻t13において、ランプ信号発生回路10はランプ信号VRAMPの変化を開始する。比較回路9はクランプ容量C3を介してオペアンプ8から出力された信号と、ランプ信号発生回路10から供給されるランプ信号VRAMPとの比較動作を開始する。また、カウンタ回路11は、ランプ信号発生回路10がランプ信号VRAMPの変化を開始すると同時にクロックパルス信号CLKの計数を開始し、計数結果であるカウント信号をメモリ13に出力する。 At time t13, the lamp signal generation circuit 10 starts changing the lamp signal VRAMP. The comparison circuit 9 starts a comparison operation between the signal output from the operational amplifier 8 via the clamp capacitance C3 and the lamp signal VRAMP supplied from the lamp signal generation circuit 10. Further, the counter circuit 11 starts counting the clock pulse signal CLK at the same time when the lamp signal generation circuit 10 starts changing the lamp signal VRAMP, and outputs the count signal which is the counting result to the memory 13.

例えば、クランプ容量C3を介してオペアンプ8から出力されている信号と、ランプ信号VRAMPとの大小関係が、時刻t14で逆転したとする。すると、比較回路9はラッチ信号LATを出力する。このラッチ信号LATが出力されたカウンタ回路11は、カウント信号のメモリ13への出力を停止する。メモリ13はこの時刻t14でのカウント信号を保持する。ランプ信号発生回路10は時刻t15でランプ信号VRAMPを変化させるのを終了する。後述するS信号をデジタル信号に変換する場合に比して、このN信号をデジタル信号に変換する場合はランプ信号VRAMPを変化させる時間を短縮している。これは一般的に、N信号はノイズ成分やオフセット成分が主であるために、N信号の信号範囲が、S信号の信号範囲に比して狭いことによるものである。したがって、ランプ信号VRAMPを変化させる時間を短いものとすることができる。このようにすることによって、1行の画素が出力する画素信号の変換動作に掛かる時間を短縮することができる。 For example, it is assumed that the magnitude relationship between the signal output from the operational amplifier 8 via the clamp capacitance C3 and the lamp signal VRAMP is reversed at time t14. Then, the comparison circuit 9 outputs the latch signal LAT. The counter circuit 11 to which the latch signal LAT is output stops outputting the count signal to the memory 13. The memory 13 holds the count signal at this time t14. The lamp signal generation circuit 10 ends changing the lamp signal VRAMP at time t15. Compared with the case of converting the S signal described later into a digital signal, the time for changing the lamp signal VRAMP is shortened when the N signal is converted into a digital signal. This is because, in general, the N signal is mainly composed of noise components and offset components, so that the signal range of the N signal is narrower than the signal range of the S signal. Therefore, the time for changing the lamp signal VRAMP can be shortened. By doing so, it is possible to shorten the time required for the conversion operation of the pixel signal output by the pixels of one line.

この時刻t13から時刻t15までにおいて行われる比較回路9、カウンタ回路11、メモリ13の動作によって、オペアンプ8からクランプ容量C3を介して出力されたアナログ信号が、デジタル信号に変換される。時刻t13から時刻t15までにおいて行う、比較回路9、カウンタ回路11、メモリ13が行う動作を総称して、以下N変換と表記する。このN変換によってメモリ13に保持されたデジタル信号がデジタルN信号である。 By the operation of the comparison circuit 9, the counter circuit 11, and the memory 13 performed from the time t13 to the time t15, the analog signal output from the operational amplifier 8 via the clamp capacitance C3 is converted into a digital signal. The operations performed by the comparison circuit 9, the counter circuit 11, and the memory 13 performed from the time t13 to the time t15 are collectively referred to as N conversion below. The digital signal held in the memory 13 by this N conversion is a digital N signal.

時刻t16において、転送パルスφT1をHレベルとする。これにより、フォトダイオード1において光電変換により生じた信号電荷が増幅MOSトランジスタ5の入力ノードに転送される。よって、垂直信号線7には、S信号の一つであるA信号が出力される(本実施例では、S信号としてA信号とA+B信号が時分割で出力される)。A信号をクランプ容量C0に画素100から出力させた後、転送パルスφT1をLレベルとする。オペアンプ8は、画素100からクランプ容量C0を介して出力されるA信号を増幅し、クランプ容量C3を介して比較回路9に出力する。 At time t16, the transfer pulse φT1 is set to the H level. As a result, the signal charge generated by the photoelectric conversion in the photodiode 1 is transferred to the input node of the amplification MOS transistor 5. Therefore, the A signal, which is one of the S signals, is output to the vertical signal line 7 (in this embodiment, the A signal and the A + B signal are output in a time division manner as the S signal). After the A signal is output from the pixel 100 to the clamp capacitance C0, the transfer pulse φT1 is set to the L level. The operational amplifier 8 amplifies the A signal output from the pixel 100 via the clamp capacitance C0 and outputs it to the comparison circuit 9 via the clamp capacitance C3.

時刻t17において、ランプ信号発生回路10はランプ信号VRAMPの変化を開始する。さらに、比較回路9はオペアンプ8からクランプ容量C3を介して出力された信号とランプ信号VRAMPとの比較動作を開始する。さらに、カウンタ回路11も先のN信号の場合と同様に、ランプ信号VRAMPが信号レベルの変化を開始すると同時にクロックパルス信号CLKの計数を開始する。 At time t17, the lamp signal generation circuit 10 starts changing the lamp signal VRAMP. Further, the comparison circuit 9 starts a comparison operation between the signal output from the operational amplifier 8 via the clamp capacitance C3 and the lamp signal VRAMP. Further, the counter circuit 11 also starts counting the clock pulse signal CLK at the same time when the lamp signal VRAMP starts changing the signal level, as in the case of the N signal described above.

例えば、時刻t18において、オペアンプ8からクランプ容量C3を介して出力されたA信号とランプ信号VRAMPとの大小関係が逆転したとする。すると、比較回路9はカウンタ回路11にラッチ信号LATを出力する。このラッチ信号LATが出力されたカウンタ回路11は、カウント信号のメモリ13への出力を停止する。メモリ13はこの時刻t14でのカウント信号を保持する。ランプ信号発生回路10は時刻t19でランプ信号VRAMPを変化させるのを終了する。 For example, at time t18, it is assumed that the magnitude relationship between the A signal output from the operational amplifier 8 via the clamp capacitance C3 and the lamp signal VRAMP is reversed. Then, the comparison circuit 9 outputs the latch signal LAT to the counter circuit 11. The counter circuit 11 to which the latch signal LAT is output stops outputting the count signal to the memory 13. The memory 13 holds the count signal at this time t14. The lamp signal generation circuit 10 ends changing the lamp signal VRAMP at time t19.

この時刻t17から時刻t19までにおいて行われる比較回路9、カウンタ回路11、メモリ13の動作によって、オペアンプ8からクランプ容量C3を介して出力されたアナログ信号が、デジタル信号に変換される。時刻t17から時刻t19までにおいて行う、比較回路9、カウンタ回路11、メモリ13が行う動作を総称して、以下A変換と表記する。このA変換によってメモリ13に保持されたデジタル信号がデジタルA信号である。 By the operation of the comparison circuit 9, the counter circuit 11, and the memory 13 performed from the time t17 to the time t19, the analog signal output from the operational amplifier 8 via the clamp capacitance C3 is converted into a digital signal. The operations performed by the comparison circuit 9, the counter circuit 11, and the memory 13 performed from the time t17 to the time t19 are collectively referred to as A conversion. The digital signal held in the memory 13 by this A conversion is a digital A signal.

次に、時刻t20において、N信号線15にデジタルN信号と、S信号線16にデジタルA信号とをメモリ13から撮像装置の外部に転送する。撮像装置の外部とは、例えば後述するデジタル信号処理回路がある。本実施例ではデジタルN信号、デジタルA信号の撮像装置の外部への転送をこの時刻t20としているが、時刻t21の転送パルスφT2と順番が前後しても差し支えない。後述するA+B変換が終了する時刻t24までにデジタルA信号、デジタルN信号の転送が終了することが好ましい。これにより、後述するデジタルA+B信号、デジタルN信号の転送がA+B変換終了後すぐに行うことができる。 Next, at time t20, the digital N signal is transferred to the N signal line 15 and the digital A signal is transferred to the S signal line 16 from the memory 13 to the outside of the image pickup apparatus. The outside of the image pickup apparatus includes, for example, a digital signal processing circuit described later. In this embodiment, the transfer of the digital N signal and the digital A signal to the outside of the image pickup apparatus is set at this time t20, but the order may be different from that of the transfer pulse φT2 at time t21. It is preferable that the transfer of the digital A signal and the digital N signal is completed by the time t24 when the A + B conversion described later is completed. As a result, the transfer of the digital A + B signal and the digital N signal, which will be described later, can be performed immediately after the completion of the A + B conversion.

次に、時刻t21において、転送パルスφT2をHレベルとする。これにより、フォトダイオード51において光電変換により生じた信号電荷が増幅MOSトランジスタ5の入力ノードに転送される。すでに増幅MOSトランジスタ5の入力ノードには、フォトダイオード1からの信号電荷が保持されている。従って、転送パルスφT2をHレベルとすることにより、FD領域にはフォトダイオード1、51の両方からの信号電荷が保持される。垂直信号線7には、このフォトダイオード1、51の両方の信号電荷が転送された増幅MOSトランジスタ5の入力ノードの電位に基づく信号、すなわちA+B信号が出力される。従って、オペアンプ8には、クランプ容量C0を介して画素100から出力されたA+B信号を増幅して出力した信号を、クランプ容量C3を介して比較回路9に出力する。 Next, at time t21, the transfer pulse φT2 is set to the H level. As a result, the signal charge generated by the photoelectric conversion in the photodiode 51 is transferred to the input node of the amplification MOS transistor 5. The signal charge from the photodiode 1 is already held in the input node of the amplification MOS transistor 5. Therefore, by setting the transfer pulse φT2 to the H level, the signal charges from both the photodiodes 1 and 51 are held in the FD region. A signal based on the potential of the input node of the amplification MOS transistor 5 to which the signal charges of both the photodiodes 1 and 51 are transferred, that is, an A + B signal is output to the vertical signal line 7. Therefore, the operational amplifier 8 amplifies the A + B signal output from the pixel 100 via the clamp capacitance C0, and outputs the output signal to the comparison circuit 9 via the clamp capacitance C3.

時刻t22において、ランプ信号発生回路10はランプ信号VRAMPの変化を開始する。さらに、比較回路9はオペアンプ8からクランプ容量C3を介して出力された信号とランプ信号VRAMPとの比較動作を開始する。さらに、カウンタ回路11も先のN信号の場合と同様に、ランプ信号VRAMPが信号レベルの変化を開始すると同時にクロックパルス信号CLKの計数を開始する。 At time t22, the lamp signal generation circuit 10 starts changing the lamp signal VRAMP. Further, the comparison circuit 9 starts a comparison operation between the signal output from the operational amplifier 8 via the clamp capacitance C3 and the lamp signal VRAMP. Further, the counter circuit 11 also starts counting the clock pulse signal CLK at the same time when the lamp signal VRAMP starts changing the signal level, as in the case of the N signal described above.

例えば、時刻t23において、オペアンプ8からクランプ容量C3を介して出力された信号とランプ信号VRAMPとの大小関係が逆転したとする。すると、比較回路9からカウンタ回路11にラッチ信号LATが出力される。このラッチ信号LATが出力されたカウンタ回路11は、カウント信号のメモリ13への出力を停止する。メモリ13はこの時刻t23でのカウント信号を保持する。ランプ信号発生回路10は時刻t24でランプ信号VRAMPを変化させるのを終了する。 For example, at time t23, it is assumed that the magnitude relationship between the signal output from the operational amplifier 8 via the clamp capacitance C3 and the lamp signal VRAMP is reversed. Then, the latch signal LAT is output from the comparison circuit 9 to the counter circuit 11. The counter circuit 11 to which the latch signal LAT is output stops outputting the count signal to the memory 13. The memory 13 holds the count signal at this time t23. The lamp signal generation circuit 10 ends changing the lamp signal VRAMP at time t24.

この時刻t22から時刻t24までにおいて行われる比較回路9、カウンタ回路11、メモリ13の動作によって、アナログ信号である、オペアンプ8からクランプ容量C3を介して出力された信号がデジタル信号に変換される。時刻t22から時刻t24までにおいて行う、比較回路9、カウンタ回路11、メモリ13が行う動作を総称して、以下A+B変換と表記する。このA+B変換によってメモリ13に保持されたデジタル信号がデジタルA+B信号である。 By the operation of the comparison circuit 9, the counter circuit 11, and the memory 13 performed from the time t22 to the time t24, the signal output from the operational amplifier 8 via the clamp capacitance C3, which is an analog signal, is converted into a digital signal. The operations performed by the comparison circuit 9, the counter circuit 11, and the memory 13 performed from the time t22 to the time t24 are collectively referred to as A + B conversion. The digital signal held in the memory 13 by this A + B conversion is a digital A + B signal.

次に、時刻t25において、N信号線15にN変換によって得たデジタルN信号と、S信号線16にA+B変換によって得たデジタルA+B信号とをメモリ13から撮像装置の外部に転送する。この撮像装置の外部とは、例えば図16に例示した撮像システムの出力信号処理部155の一例であるデジタル信号処理回路である。このデジタル信号処理回路は、デジタルA信号とデジタルN信号との差分、デジタルA+B信号とデジタルN信号との差分を得る処理や、デジタルA+B信号とデジタルA信号との差分を演算して、デジタルB信号を得る処理などを行う。デジタルB信号とは、増幅MOSトランジスタ5の入力ノードでフォトダイオード1とフォトダイオード51との信号電荷を合わせず、フォトダイオード51のみが保持する信号電荷を増幅MOSトランジスタ5の入力ノードが保持した時に出力されるB信号を、A変換と同様にデジタル信号に変換した場合に得られると想定されるデジタル信号である。デジタル信号処理回路は、デジタルA信号とデジタルB信号とを用いて、位相差検出方式の焦点検出を行うことができる。また、各画素から出力されるA+B信号をA+B変換したデジタルA+B信号を用いて、画像を形成することができる。また、デジタルA信号、デジタルA+B信号に重畳されている画素100、オペアンプ8などから生じるノイズレベルの信号については、デジタル信号処理回路がデジタルN信号をデジタルA信号とデジタルA+B信号のそれぞれから差し引くことによって低減することができる。 Next, at time t25, the digital N signal obtained by N conversion to the N signal line 15 and the digital A + B signal obtained by A + B conversion to the S signal line 16 are transferred from the memory 13 to the outside of the image pickup apparatus. The outside of this imaging device is, for example, a digital signal processing circuit which is an example of the output signal processing unit 155 of the imaging system illustrated in FIG. This digital signal processing circuit calculates the difference between the digital A signal and the digital N signal, the process of obtaining the difference between the digital A + B signal and the digital N signal, and the difference between the digital A + B signal and the digital A signal, and digital B. Performs processing such as obtaining a signal. The digital B signal is when the input node of the amplification MOS transistor 5 holds the signal charge held only by the photodiode 51 without matching the signal charges of the photodiode 1 and the photodiode 51 at the input node of the amplification MOS transistor 5. It is a digital signal that is assumed to be obtained when the output B signal is converted into a digital signal in the same manner as the A conversion. The digital signal processing circuit can perform the focus detection of the phase difference detection method by using the digital A signal and the digital B signal. Further, an image can be formed by using a digital A + B signal obtained by converting the A + B signal output from each pixel into A + B. Further, for the noise level signal generated from the digital A signal, the pixel 100 superimposed on the digital A + B signal, the operational amplifier 8, etc., the digital signal processing circuit subtracts the digital N signal from each of the digital A signal and the digital A + B signal. Can be reduced by

これまで、図2で示した撮像装置の1行目の画素100の画素信号を読み出す動作について説明したが、2行目の画素についても同様の動作とすることができる。 Up to now, the operation of reading the pixel signal of the pixel 100 in the first row of the image pickup apparatus shown in FIG. 2 has been described, but the same operation can be performed for the pixel in the second row.

次に、図2で示した撮像装置の3行目の画素100の画素信号を読み出す動作について図7(a)を参照しながら説明する。 Next, the operation of reading out the pixel signal of the pixel 100 in the third row of the image pickup apparatus shown in FIG. 2 will be described with reference to FIG. 7A.

3行目の画素100の画素信号を読み出す場合についてもN変換にかかる動作は1行目の画素100の画素信号の読み出し動作で説明したものと同様とすることができる。即ち、3行目の画素100の画素信号を読み出す場合の時刻t31、t32、t33、t34、t35のそれぞれでの動作は、1行目の画素信号を読み出す場合の時刻t11、t12、t13、t14、t15のそれぞれでの動作と同様とすることができる。 In the case of reading the pixel signal of the pixel 100 of the third row, the operation related to the N conversion can be the same as that described in the operation of reading the pixel signal of the pixel 100 of the first row. That is, the operation at each of the times t31, t32, t33, t34, and t35 when reading the pixel signal of the pixel 100 in the third row is the time t11, t12, t13, t14 when reading the pixel signal in the first line. , T15 can be the same as the operation at each.

3行目の画素100は、先の1行目の画素100の画素信号の読み出し動作において述べた、時刻t16におけるA信号の転送動作、および、時刻t17から時刻t19のA変換の動作は行わない。また、A変換を行わないため、時刻t20におけるデジタルA信号とデジタルN信号を転送する動作についても行わない。 The pixel 100 in the third row does not perform the A signal transfer operation at time t16 and the A conversion operation from time t17 to time t19 described in the pixel signal reading operation of the pixel 100 in the first row. .. Further, since the A conversion is not performed, the operation of transferring the digital A signal and the digital N signal at the time t20 is also not performed.

3行目の画素100については、A+B信号を画素100が出力し、信号処理回路101によってデジタルA+B信号を得る動作を行う。 Regarding the pixel 100 on the third row, the pixel 100 outputs the A + B signal, and the signal processing circuit 101 performs an operation of obtaining a digital A + B signal.

3行目の画素100がA+B信号を出力する動作であるが、まず時刻t36において転送パルスφT1、φT2をともにHレベルとする。これにより、フォトダイオード1と、フォトダイオード51とにおいて光電変換によって生じた信号電荷が増幅MOSトランジスタ5の入力ノードに転送される。これによりフォトダイオード1とフォトダイオード51とから転送された信号電荷を保持した増幅MOSトランジスタ5の入力ノードの電位に基づいた信号、すなわちA+B信号が画素100から垂直信号線7に出力される。以降、A+B信号をデジタル信号に変換するA+B変換に関わる動作は、1行目の画素100の画素信号を読み出す場合のA+B変換を行う動作と同様とすることができる。すなわち、3行目の画素100の画素信号をA+B変換する場合の時刻t37、t38、t39における動作は、1行目の画素100の画素信号をA+B変換する場合の時刻t22、t23、t24における動作と同様とすることができる。 In the operation in which the pixel 100 on the third line outputs the A + B signal, first, at time t36, both the transfer pulses φT1 and φT2 are set to H level. As a result, the signal charges generated by the photoelectric conversion in the photodiode 1 and the photodiode 51 are transferred to the input node of the amplification MOS transistor 5. As a result, a signal based on the potential of the input node of the amplification MOS transistor 5 holding the signal charge transferred from the photodiode 1 and the photodiode 51, that is, an A + B signal is output from the pixel 100 to the vertical signal line 7. Hereinafter, the operation related to the A + B conversion for converting the A + B signal into the digital signal can be the same as the operation for performing the A + B conversion when reading the pixel signal of the pixel 100 in the first row. That is, the operation at times t37, t38, and t39 when the pixel signal of the pixel 100 of the third row is A + B converted is the operation at times t22, t23, and t24 when the pixel signal of the pixel 100 of the first row is A + B converted. Can be similar to.

時刻t40で行う、A+B変換によって得られたデジタルA+B信号をメモリ13から転送する動作についても、1行目の画素100からの画素信号を読み出す場合の時刻t25における動作と同様とすることができる。 The operation of transferring the digital A + B signal obtained by the A + B conversion from the memory 13 performed at time t40 can be the same as the operation at time t25 when reading the pixel signal from the pixel 100 of the first row.

このように、3行目の画素100の画素信号を読み出す場合は、A信号の読み出し動作を行わず、A+B信号のみの読み出し動作を行う。従って、A信号の読み出し動作、A変換を行う動作を行わないため、これらの動作に掛かる時間を短縮することができる。即ち、3行目の画素100の画素信号を読み出す場合は、1行目の画素100の画素信号を読み出す場合における、時刻t16から時刻t19までの期間を短縮することができる。従って、撮像装置の全行の画素100においてA信号およびA+B信号を読み出す動作を行う場合に比べて、A信号の出力を行わない画素100を有することにより、アナログデジタル変換動作に関わる期間を短縮することができる。また、A信号の出力を行わない画素100を有することで、1フレーム期間で複数列のメモリ13がデジタルA信号を出力する回数が減る。よって、撮像装置からデジタル信号を読み出す時間を短縮することができる。 In this way, when reading out the pixel signal of the pixel 100 in the third row, the reading operation of only the A + B signal is performed without the reading operation of the A signal. Therefore, since the A signal reading operation and the A conversion operation are not performed, the time required for these operations can be shortened. That is, when the pixel signal of the pixel 100 in the third row is read, the period from the time t16 to the time t19 in the case of reading the pixel signal of the pixel 100 in the first row can be shortened. Therefore, as compared with the case where the A signal and the A + B signal are read out from the pixels 100 in all the rows of the image pickup apparatus, the period related to the analog-to-digital conversion operation is shortened by having the pixels 100 that do not output the A signal. be able to. Further, by having the pixel 100 that does not output the A signal, the number of times that the memory 13 in a plurality of columns outputs the digital A signal in one frame period is reduced. Therefore, the time for reading the digital signal from the image pickup apparatus can be shortened.

図7(b)は、垂直同期信号VD、画素部の各行に与えられる選択パルスφSELの合計期間であるφSEL−T、複数列のメモリ13から出力される期間であるSIGOUT―Tを表したタイミング図である。垂直同期信号VDをHレベルとした後、垂直走査回路2は各行の画素100に対応する選択パルスφSELを順次Hレベルとする。水平走査回路14は各列の信号処理回路101からデジタル信号を順次出力させる。先述したように、垂直同期信号VDがHレベルとなってから、次にHレベルとなるまでの期間が1フレームである。この1フレーム期間内に、撮像装置から画素信号に基づく信号であるデジタルN信号、デジタルA信号、デジタルA+B信号が出力される。 FIG. 7B shows timings representing the vertical synchronization signal VD, φSEL-T which is the total period of the selection pulse φSEL given to each row of the pixel portion, and SIGOUT-T which is the period output from the memory 13 of the plurality of columns. It is a figure. After setting the vertical synchronization signal VD to H level, the vertical scanning circuit 2 sequentially sets the selection pulse φSEL corresponding to the pixel 100 in each row to H level. The horizontal scanning circuit 14 sequentially outputs digital signals from the signal processing circuits 101 in each row. As described above, the period from when the vertical synchronization signal VD reaches the H level to when it reaches the next H level is one frame. Within this one frame period, the digital N signal, the digital A signal, and the digital A + B signal, which are signals based on the pixel signal, are output from the image pickup apparatus.

A信号とB信号とを読み出す場合には、画素100がA信号の出力を行った後、リセットパルスφRをもう一度HレベルとしてLレベルとし、増幅MOSトランジスタ5の入力ノードの電位をリセットしてから転送パルスφT2をHレベルとする必要がある。即ち、リセットパルスφRを図6で説明した動作タイミング図において、時刻t19から時刻t21までの間にHレベルとし、さらにLレベルに戻す動作が必要となる。本実施例では、リセットパルスφRをHレベルとするのは時刻t11から時刻t12までの期間とすることができるので、より高速に画素信号の出力動作を行うことができる。 When reading the A signal and the B signal, after the pixel 100 outputs the A signal, the reset pulse φR is set to the L level again as the H level, and the potential of the input node of the amplification MOS transistor 5 is reset. It is necessary to set the transfer pulse φT2 to H level. That is, in the operation timing diagram described with reference to FIG. 6, the reset pulse φR needs to be set to the H level between the time t19 and the time t21, and further returned to the L level. In this embodiment, the reset pulse φR can be set to the H level during the period from time t11 to time t12, so that the pixel signal output operation can be performed at a higher speed.

本実施例では、1行目の画素100からN信号、A信号、A+B信号を出力させてから、2行目の画素100からN信号、A信号、A+B信号を出力させている。この形態と、1行目、2行目の画素100からN信号、A信号を出力させ、次に1行目〜4行目の画素100から順次A+B信号を出力させる形態(以下、この形態を参考形態と表記する)と比較する。参考形態では、1行目の画素100からN信号を出力させてから1行面の画素100のA+B信号を得るまでに、1、2行目のA信号を読み出す期間が存在する。従って、本実施例の形態に比して参考形態では、1行目のN信号を読み出してから1行目のA+B信号を出力させるまでの期間が長くなる。これにより、1行目の画素100がN信号を出力した時のノイズレベルから、1行目の画素100がA+B信号を出力する時のノイズレベルとの差が生じやすくなる。すなわち、A+B信号へのランダムノイズの影響が大きくなる。従って、参考形態は本実施例の形態に比して画質および測距精度が低下しやすくなる。本実施例の形態では、例えば1行目の画素100のN信号を出力した後、他の行の画素100からの読み出し動作に移る前に1行目の画素100からのA+B信号を得る。このため、参考形態に比してA+B信号へのランダムノイズの影響を抑制することができ、画質および測距精度を向上させることができる。また、参考形態ではA+B信号に加えてA信号を出力する画素100を含む行は、A信号の出力と、A+B信号の出力とで2度垂直走査を行う。本実施例の形態では、1度の垂直走査で1行の画素100からA信号とA+B信号との出力を行う。これにより、本実施例の形態は参考形態に比して垂直走査に関わる時間を短縮することができる。 In this embodiment, the N signal, the A signal, and the A + B signal are output from the pixel 100 in the first row, and then the N signal, the A signal, and the A + B signal are output from the pixel 100 in the second row. This form and the form in which the N signal and the A signal are output from the pixels 100 in the first and second lines, and then the A + B signal is sequentially output from the pixels 100 in the first to fourth lines (hereinafter, this form is referred to as this form. It is referred to as a reference form). In the reference embodiment, there is a period in which the A signal in the first and second rows is read from the time when the N signal is output from the pixel 100 in the first row to the time when the A + B signal of the pixel 100 in the first row is obtained. Therefore, in the reference embodiment, the period from reading the N signal in the first line to outputting the A + B signal in the first line is longer than in the embodiment of the present embodiment. As a result, the noise level when the pixel 100 in the first row outputs the N signal is likely to be different from the noise level when the pixel 100 in the first row outputs the A + B signal. That is, the influence of random noise on the A + B signal becomes large. Therefore, in the reference embodiment, the image quality and the distance measurement accuracy are likely to be deteriorated as compared with the embodiment of the present embodiment. In the embodiment of the present embodiment, for example, after outputting the N signal of the pixel 100 in the first row, the A + B signal from the pixel 100 in the first row is obtained before moving to the reading operation from the pixel 100 in the other row. Therefore, the influence of random noise on the A + B signal can be suppressed as compared with the reference form, and the image quality and the distance measurement accuracy can be improved. Further, in the reference mode, the line including the pixel 100 that outputs the A signal in addition to the A + B signal is vertically scanned twice by the output of the A signal and the output of the A + B signal. In the embodiment of this embodiment, the A signal and the A + B signal are output from the pixels 100 in one line in one vertical scan. As a result, the embodiment of this embodiment can shorten the time involved in vertical scanning as compared with the reference embodiment.

本実施例では、1行目の画素信号を読み出す場合において、デジタルA信号、デジタルN信号の転送に関わる時間が、A+B変換におけるランプ信号VRAMPが変化する時間よりも短い例を記載した。しかし、デジタルA信号、デジタルN信号の転送に関わる時間が、A+B変換におけるランプ信号VRAMPが変化する時間よりも、時間Tだけ長い形態であってもよい。この形態では、3行目の画素信号を読み出す際、A信号の読み出し動作、A変換を行う動作に関わる期間に加えて、この時間Tの期間も短縮することができる。 In this embodiment, an example is described in which the time involved in the transfer of the digital A signal and the digital N signal is shorter than the time during which the lamp signal VRAMP in the A + B conversion changes when the pixel signal in the first line is read. However, the time involved in the transfer of the digital A signal and the digital N signal may be longer by the time T than the time when the lamp signal VRAMP in the A + B conversion changes. In this embodiment, when reading the pixel signal of the third row, the period of this time T can be shortened in addition to the period related to the operation of reading the A signal and the operation of performing the A conversion.

本実施例は、それぞれの信号処理回路101にカウンタ回路11が含まれている形態を示した。別の形態として、カウンタ回路11が信号処理回路101とは別に設けられていて、各列の信号処理回路101に共通してカウント信号CKnを出力する、いわゆる共通カウンタ型のアナログデジタル変換回路であっても良い。図8に共通カウンタ型のアナログデジタル変換回路の一例を示す。カウンタ回路11にはTG12からクロックパルス信号CLKが供給されている。カウンタ回路11は、クロックパルス信号CLKに基づいてnビットのカウント信号CKnを生成する。カウンタ回路11は、各列のメモリ13に共通してカウント信号CKnを出力する。メモリ13は、比較回路9からラッチ信号LATが出力された時に、カウンタ回路11から出力されているカウント信号CKnの取り込みを行う。この取り込まれたカウント信号CKnがメモリ13の保持するデジタル信号である。このような共通カウンタ型のアナログデジタル変換回路においても、本実施例を好適に実施することができる。 In this embodiment, each signal processing circuit 101 includes a counter circuit 11. As another form, the counter circuit 11 is provided separately from the signal processing circuit 101, and is a so-called common counter type analog-to-digital conversion circuit that outputs a count signal CKn in common to the signal processing circuits 101 of each row. You may. FIG. 8 shows an example of a common counter type analog-to-digital conversion circuit. A clock pulse signal CLK is supplied to the counter circuit 11 from the TG 12. The counter circuit 11 generates an n-bit count signal CKn based on the clock pulse signal CLK. The counter circuit 11 outputs a count signal CKn in common to the memory 13 in each column. The memory 13 takes in the count signal CKn output from the counter circuit 11 when the latch signal LAT is output from the comparison circuit 9. The captured count signal CKn is a digital signal held by the memory 13. Even in such a common counter type analog-to-digital conversion circuit, this embodiment can be preferably carried out.

また、本実施例では、画素100が2個の光電変換部に基づく信号であるA+B信号と、1個の光電変換部に基づく信号であるA信号とを出力する形態を基に説明した。本実施例はこの形態に限定されるものではない。つまり、複数の画素の各々が有するm個(mは整数)の光電変換部に基づいた第1の画素信号を出力する。そして、この第1の画素信号を出力した複数の画素のうちの一部の画素が、m個よりも少ないn個(nは整数)の光電変換部に基づいた第2の画素信号をさらに出力する形態であれば好適に実施することができる。この形態であれば、全行の画素において第1の画素信号および第2の画素信号を読み出す動作を行う場合に比べて、第1の画素信号の出力を行わない画素を有することにより、アナログデジタル変換動作に関わる期間を短縮することができる。また、1フレーム期間で複数列のメモリ13が第1の画素信号に基づくデジタル信号を出力する回数が減る。よって、撮像装置からのデジタル信号を読み出す時間を短縮することができる。また、m個の光電変換部は、1つの画素100が有する光電変換部の数よりも少ない数であっても良い。つまり、本実施例の撮像装置は、1つの画素100が有する光電変換部の数がj個(jは整数)であるとすると、j≧m>nの関係にある形態であれば良い。 Further, in this embodiment, the description has been made based on a mode in which the pixel 100 outputs an A + B signal which is a signal based on two photoelectric conversion units and an A signal which is a signal based on one photoelectric conversion unit. The present embodiment is not limited to this embodiment. That is, the first pixel signal based on the m (m is an integer) photoelectric conversion unit of each of the plurality of pixels is output. Then, some of the plurality of pixels that output the first pixel signal further output a second pixel signal based on n (n is an integer) photoelectric conversion unit, which is less than m. Any form can be preferably carried out. In this form, as compared with the case where the first pixel signal and the second pixel signal are read out from the pixels in all rows, by having the pixels that do not output the first pixel signal, the analog digital The period involved in the conversion operation can be shortened. Further, the number of times that the plurality of rows of memories 13 output a digital signal based on the first pixel signal is reduced in one frame period. Therefore, the time for reading the digital signal from the image pickup apparatus can be shortened. Further, the number of m photoelectric conversion units may be smaller than the number of photoelectric conversion units possessed by one pixel 100. That is, assuming that the number of photoelectric conversion units of one pixel 100 is j (j is an integer), the image pickup apparatus of this embodiment may have a form in which j ≧ m> n.

また、本実施例では、図7(b)のように1フレーム期間は、垂直同期信号VDが1度Hレベルとなった後、次にHレベルとなるまでの期間である形態を説明した。他の形態として、例えばインターレース方式の信号出力形態のように、偶数行の画素100から画素信号を出力させるフィールドと、奇数行の画素100から画素信号を出力させるフィールドとを1フレーム期間が有する形態であってもよい。つまり、1フレーム期間に、垂直走査回路2が複数の画素100の選択を複数のフィールドに分割して行う形態であっても良い。さらに言えば、必ずしも偶数行、奇数行とでフィールドを分ける必要はなく、ある行については第1のフィールド、他の行については第2のフィールドで画素信号を出力させる形態であっても良い。 Further, in this embodiment, as shown in FIG. 7B, the mode in which the one-frame period is the period from when the vertical synchronization signal VD reaches the H level once to the next H level has been described. As another form, for example, as in the interlaced signal output form, one frame period has a field for outputting a pixel signal from pixels 100 in even-numbered rows and a field for outputting pixel signals from pixels 100 in odd-numbered rows. It may be. That is, the vertical scanning circuit 2 may divide the selection of the plurality of pixels 100 into a plurality of fields in one frame period. Furthermore, it is not always necessary to separate the fields into even-numbered rows and odd-numbered rows, and the pixel signal may be output in the first field for one row and in the second field for the other rows.

[実施例2]
本実施例の一つは、実施例1で例示した撮像装置において、図1(b)のように、A信号とA+B信号とを出力する画素100とA+B信号のみを出力する画素100のそれぞれが、画素部のすべての行に含まれている形態である。
[Example 2]
In one of the present embodiments, in the image pickup apparatus exemplified in the first embodiment, as shown in FIG. 1B, each of the pixel 100 that outputs the A signal and the A + B signal and the pixel 100 that outputs only the A + B signal , It is a form included in all the lines of the pixel part.

本実施例における水平走査回路14は、各列のメモリ13を順に走査する動作以外に、複数列のメモリ13からデジタル信号を転送させるメモリ13を選択して転送させることができるデコーダである。 The horizontal scanning circuit 14 in this embodiment is a decoder that can select and transfer a memory 13 for transferring a digital signal from a plurality of columns of memory 13 in addition to the operation of sequentially scanning the memory 13 in each column.

図9(a)は、図1(b)に例示した撮像装置の一部の画素100を抜き出して模式的に示したものである。図9(a)に示した全画素からA信号とA+B信号が出力される。ただし、1行目、2行目ともに、2列目、3列目の画素が出力したA信号とA+B信号を利用し、1列目、4列目が出力したA信号は使用せず、A+B信号のみを利用する。 FIG. 9A is a schematic representation of a part of the pixels 100 of the image pickup apparatus illustrated in FIG. 1B. A signal and A + B signal are output from all the pixels shown in FIG. 9A. However, both the 1st and 2nd rows use the A signal and A + B signal output by the pixels in the 2nd and 3rd columns, and do not use the A signal output by the 1st and 4th columns, but A + B. Use only signals.

1行目の画素100から画素信号を読み出す動作について、実施例1と異なる点を中心に説明する。 The operation of reading the pixel signal from the pixel 100 on the first row will be described focusing on the points different from those of the first embodiment.

本実施例における、画素100、信号処理回路101の動作は、実施例1で説明した、図2で例示した撮像装置の1行目の動作、即ち図6に例示した動作と同様のものとすることができる。このように動作させることにより、本実施例の撮像装置では、画素100から画素信号が転送されるすべてのメモリ13にN信号、A信号、A+B信号が保持される。 The operation of the pixel 100 and the signal processing circuit 101 in this embodiment is the same as the operation of the first line of the image pickup apparatus illustrated in FIG. 2 described in the first embodiment, that is, the operation illustrated in FIG. be able to. By operating in this way, in the image pickup apparatus of this embodiment, the N signal, the A signal, and the A + B signal are held in all the memories 13 to which the pixel signal is transferred from the pixel 100.

図9(b)は、本実施例の水平走査回路であるデコーダ14が転送する信号を模式的に示したものである。メモリ13−1〜13−4のそれぞれには図9(a)で例示した撮像装置の1列目〜4列目のそれぞれの画素100の画素信号に基づいたデジタル信号が保持されている。以下、1列目のメモリ13−1が保持しているデジタル信号については、デジタルN信号は、N1、デジタルA信号はA1、デジタルA+B信号についてはA1+B1と、各デジタル信号を図の左から数えた列番号を付して表記する。2列目から4列目についても同様である。 FIG. 9B schematically shows a signal transferred by the decoder 14 which is the horizontal scanning circuit of this embodiment. Each of the memories 13-1 to 13-4 holds a digital signal based on the pixel signal of each pixel 100 in the first to fourth rows of the image pickup apparatus illustrated in FIG. 9A. Hereinafter, the digital signals held by the memory 13-1 in the first row are counted as N1 for the digital N signal, A1 for the digital A signal, and A1 + B1 for the digital A + B signal, and each digital signal is counted from the left of the figure. Notation with a column number. The same applies to the second to fourth columns.

デコーダ14はまず、2列目のメモリ13−2を選択し、メモリ13−2からN2とA2をデジタル信号処理回路に出力させる。デジタル信号処理回路は出力されたN2とA2の差分信号である、(A2−N2)を取得する。続いて、3列目のメモリ13−3を選択し、メモリ13−3からN3とA3をデジタル信号処理回路に出力させる。デジタル信号処理回路は、2列目のメモリ13−2の場合と同様に、N3とA3との差分信号である、(A3−N3)を取得する。 First, the decoder 14 selects the memory 13-2 in the second row, and outputs N2 and A2 from the memory 13-2 to the digital signal processing circuit. The digital signal processing circuit acquires (A2-N2), which is the difference signal between the output N2 and A2. Subsequently, the memory 13-3 in the third row is selected, and N3 and A3 are output from the memory 13-3 to the digital signal processing circuit. The digital signal processing circuit acquires (A3-N3), which is a difference signal between N3 and A3, as in the case of the memory 13-2 in the second row.

続いて、デコーダ14は、各列のメモリ13−1〜13−4を順に選択してデジタルA+B信号をデジタル信号処理回路に出力させる。つまり、1列目のメモリ13−1を選択し、メモリ13−1からN1とA1+B1をデジタル信号処理回路に出力させる。デジタル信号処理回路はN1とA1+B1との差分信号である、(A1+B1−N1)を取得する。2列目〜4列目のメモリ13−2〜13−4についても同様の動作を行う。また、デジタル信号処理回路についても1列目のメモリ13−1からN1とA1が出力された場合と同様の動作を行う。これにより、差分信号(A2+B2−N2)、(A3+B3−N3)、(A4+B4−N4)をそれぞれ取得する。 Subsequently, the decoder 14 sequentially selects the memories 13-1 to 13-4 in each column to output the digital A + B signal to the digital signal processing circuit. That is, the memory 13-1 in the first row is selected, and N1 and A1 + B1 are output from the memory 13-1 to the digital signal processing circuit. The digital signal processing circuit acquires (A1 + B1-N1), which is a difference signal between N1 and A1 + B1. The same operation is performed for the memories 13-2 to 13-4 in the second to fourth rows. Further, the digital signal processing circuit also operates in the same manner as when N1 and A1 are output from the memory 13-1 in the first row. As a result, the difference signals (A2 + B2-N2), (A3 + B3-N3), and (A4 + B4-N4) are acquired, respectively.

引き続いてデジタル信号処理回路は、2列目のメモリ13−2からN2toA2を出力させて得た差分信号(A2−N2)と、N2,A2+B2を出力させて得た差分信号(A2+B2−N2)との差分を取得する。即ち、(A2+B2−N2)―(A2−N2)の処理を行い、B2を取得する。3列目のメモリ13−3についても同様の処理を行い、B3を取得する。よって、1行目の2列目、3列目の画素100が出力した画素信号に基づいて、A2とB2、および、A3とB3を得ることができる。このA2とB2、および、A3とB3を用いて位相差検出方式の焦点検出を行うことができる。これまで1行目の画素100についての動作を説明したが、同様の動作を2行目の画素100についても同様の動作とすることができる。 Subsequently, the digital signal processing circuit includes a difference signal (A2-N2) obtained by outputting N2toA2 from the memory 13-2 in the second row and a difference signal (A2 + B2-N2) obtained by outputting N2, A2 + B2. Get the difference between. That is, the processing of (A2 + B2-N2)-(A2-N2) is performed to acquire B2. The same process is performed for the memory 13-3 in the third column to acquire B3. Therefore, A2 and B2, and A3 and B3 can be obtained based on the pixel signals output by the pixels 100 in the second and third columns of the first row. The focus detection of the phase difference detection method can be performed using the A2 and B2, and the A3 and B3. Although the operation for the pixel 100 in the first row has been described so far, the same operation can be performed for the pixel 100 in the second row.

本実施例では、1列目と4列目のメモリ13−1、13−4からN1とA1,および、N4とA4とを出力させる動作を行っていない。従って、このN1とA1、および、N4とA4とを出力させるのに要する時間を本実施例では短縮することができる。従って、A+B信号を得つつ、A信号を得る動作を高速に行うことができる。 In this embodiment, the operations of outputting N1 and A1 and N4 and A4 from the memories 13-1 and 13-4 in the first and fourth rows are not performed. Therefore, the time required to output N1 and A1 and N4 and A4 can be shortened in this embodiment. Therefore, it is possible to perform the operation of obtaining the A signal at high speed while obtaining the A + B signal.

次に本実施例の別の一つである、図1(c)に例示した撮像装置について説明する。これは、撮像装置の複数行、複数列の画素のうち、一部の領域に含まれる画素がA信号とA+B信号とを出力するように動作する形態である。即ち、図1(b)に例示した撮像装置に対し、A信号を出力しない行を含む形態である。 Next, another image pickup apparatus illustrated in FIG. 1 (c), which is another one of the present embodiment, will be described. This is a mode in which the pixels included in a part of the pixels of the plurality of rows and the plurality of columns of the image pickup apparatus operate so as to output the A signal and the A + B signal. That is, the image pickup apparatus illustrated in FIG. 1B includes a line that does not output the A signal.

図1(c)に例示した撮像装置について、A信号を出力しない行の画素100からの画素信号を読み出す動作は、実施例1において図7を参照しながら説明した動作と同様として、N変換とA+B変換を行うことができる。 Regarding the image pickup apparatus illustrated in FIG. 1 (c), the operation of reading the pixel signal from the pixel 100 in the row that does not output the A signal is the same as the operation described with reference to FIG. 7 in the first embodiment, and is the same as the operation of N conversion. A + B conversion can be performed.

また、A信号も出力する行の画素100からの画素信号の読み出し動作は、本実施例でこれまで説明した通りの動作とすることができる。即ち、実施例1で図6を参照しながら説明した動作によりN変換、A変換、A+B変換を行う。さらに、図9(b)を参照しながら説明した通り、A信号も出力する画素100からの画素信号に基づくデジタルA信号、デジタルN信号を保持するメモリ13からそれぞれのデジタル信号をデジタル信号処理回路に出力させる。その後、デジタルA+B信号を保持しているメモリ13から、デジタルN信号とデジタルA+B信号とをデジタル信号処理回路に出力させる。これにより、デジタル信号処理回路は、デジタルA信号を出力した列についてはデジタルB信号を求めて位相差検出方式の焦点検出を行うとともに、デジタルA+B信号を用いて画像の形成を行う。 Further, the operation of reading the pixel signal from the pixel 100 in the row that also outputs the A signal can be the operation as described so far in this embodiment. That is, N conversion, A conversion, and A + B conversion are performed by the operation described with reference to FIG. 6 in Example 1. Further, as described with reference to FIG. 9B, a digital signal processing circuit processes each digital signal from the memory 13 holding the digital A signal and the digital N signal based on the pixel signal from the pixel 100 that also outputs the A signal. To output. After that, the digital N signal and the digital A + B signal are output to the digital signal processing circuit from the memory 13 holding the digital A + B signal. As a result, the digital signal processing circuit obtains the digital B signal for the row in which the digital A signal is output, performs focus detection by the phase difference detection method, and forms an image using the digital A + B signal.

図1(c)に例示した撮像装置の場合では、A信号を出力しない行の画素100の画素信号の読み出し動作においては、A変換を行わないため、A変換に関わる時間を短縮することができる。また、A信号も出力する行についても、図1(b)で例示した撮像装置の場合と同様に、デジタルA信号のデジタル信号処理回路への出力を行わない列を含む。よって、デジタルA信号のメモリ13からデジタル信号処理回路への出力に関わる時間を短縮することができる。従って、A+B信号を得つつ、A信号を得る動作を高速に行うことができる。 In the case of the image pickup apparatus illustrated in FIG. 1C, since the A conversion is not performed in the pixel signal reading operation of the pixel 100 in the row that does not output the A signal, the time related to the A conversion can be shortened. .. Further, the row that also outputs the A signal includes a column that does not output the digital A signal to the digital signal processing circuit, as in the case of the image pickup apparatus illustrated in FIG. 1 (b). Therefore, the time related to the output of the digital A signal from the memory 13 to the digital signal processing circuit can be shortened. Therefore, it is possible to perform the operation of obtaining the A signal at high speed while obtaining the A + B signal.

本実施例では、図1(b)、図1(c)のようにA信号およびA+B信号を出力するように動作する形態について説明した。しかし、本実施例はこれに限定されず、例えば、カラーフィルター22の色に応じてA信号を出力する画素100を選択しても良い。例えば、図2で例示した撮像装置において、G(緑)のカラーフィルター22を有する画素100がA信号を出力する画素とする場合には、1行目および3行目は1列目と3列目、2行目及び4行目は2列目と4列目の画素100がA信号を出力する。このA信号の出力動作についても、本実施例および実施例1で図6を参照しながら説明した動作に基づいて行うことができる。また、メモリが保持したデジタル信号の読み出しについては、本実施例で図9(b)を参照しながら説明したように動作させればよい。このように動作させることで、カラーフィルター22の色に応じてA信号も出力する画素100を選択する場合にも、A+B信号を得つつ、A信号を得る動作を高速に行うことができる。 In this embodiment, a mode in which the A signal and the A + B signal are output as shown in FIGS. 1 (b) and 1 (c) has been described. However, this embodiment is not limited to this, and for example, the pixel 100 that outputs the A signal may be selected according to the color of the color filter 22. For example, in the image pickup apparatus illustrated in FIG. 2, when the pixel 100 having the G (green) color filter 22 is a pixel that outputs the A signal, the first and third rows are the first and third columns. In the second and fourth rows, the pixels 100 in the second and fourth columns output the A signal. The output operation of the A signal can also be performed based on the operation described with reference to FIG. 6 in the present embodiment and the first embodiment. Further, the reading of the digital signal held by the memory may be operated as described with reference to FIG. 9B in this embodiment. By operating in this way, even when the pixel 100 that also outputs the A signal is selected according to the color of the color filter 22, the operation of obtaining the A signal can be performed at high speed while obtaining the A + B signal.

また、実施例1、実施例2で説明した図1(a)〜(c)のA信号を出力する画素100の配置は、TG12によって可変的に設定することができる。他の形態として、撮像装置の外部からのシリアル通信などによって撮像装置に供給される設定情報に基づいて設定しても良い。この撮像装置の外部とは、例えば後述する図16に例示した撮像システムの全体制御・演算部1510が挙げられる。また、A信号を出力する画素100の配置は、例えば光学的基線長や、使用する測距点に基づいて設定すれば良い。 Further, the arrangement of the pixels 100 that output the A signal of FIGS. 1 (a) to 1 (c) described in the first and second embodiments can be variably set by the TG 12. As another form, the setting may be made based on the setting information supplied to the image pickup apparatus by serial communication from the outside of the image pickup apparatus or the like. Examples of the outside of the image pickup apparatus include the overall control / calculation unit 1510 of the image pickup system illustrated in FIG. 16 described later. Further, the arrangement of the pixels 100 that output the A signal may be set based on, for example, the optical baseline length or the AF point to be used.

また、本実施例では、画素100が2個の光電変換部に基づく信号であるA+B信号と、1個の光電変換部に基づく信号であるA信号とを出力する形態を基に説明した。本実施例はこの形態に限定されるものではない。つまり、1フレーム期間内に、複数の画素の各々は、各々が有するm個(mは整数)の光電変換部の信号電荷に基づいた第2の信号を出力する。そして、複数の画素の少なくとも一部の画素の各々は、各々が有するm個よりも少ないn個(nは整数)の光電変換部の信号電荷に基づいた第1の信号をさらに出力する。撮像装置は、この1フレーム期間内に、複数の画素の第2の信号に基づく信号を出力し、複数の画素の一部の画素の第1の信号に基づく信号をさらに出力する。この形態であれば好適に実施することができる。この形態であれば、全画素からの第2の信号と第1の信号とのそれぞれに基づく信号をそれぞれ撮像装置が出力する場合に比べて、第1の信号に基づく信号の出力に関わる期間を短縮することができる。よって、撮像装置からのデジタル信号を読み出す時間を短縮することができる。 Further, in this embodiment, the description has been made based on a mode in which the pixel 100 outputs an A + B signal which is a signal based on two photoelectric conversion units and an A signal which is a signal based on one photoelectric conversion unit. The present embodiment is not limited to this embodiment. That is, within one frame period, each of the plurality of pixels outputs a second signal based on the signal charge of the m (m is an integer) photoelectric conversion unit possessed by each of the plurality of pixels. Then, each of at least a part of the plurality of pixels further outputs a first signal based on the signal charge of n (n is an integer) photoelectric conversion unit, which is less than m of each pixel. The image pickup apparatus outputs a signal based on the second signal of the plurality of pixels within this one frame period, and further outputs a signal based on the first signal of some pixels of the plurality of pixels. This form can be preferably carried out. In this embodiment, the period related to the output of the signal based on the first signal is longer than that in the case where the image pickup apparatus outputs the signals based on the second signal and the first signal from all the pixels. Can be shortened. Therefore, the time for reading the digital signal from the image pickup apparatus can be shortened.

また、本実施例では、水平走査回路14がデコーダであり、一部のメモリ13からA信号を出力する形態を説明した。他の形態として、図10で例示したように、1行の画素100に対してフォトダイオード1に複数の転送パルスφT1−1、φT1−2が垂直走査回路2から与えられる構成としても良い。すなわち、1行の画素100のうち、A信号、A+B信号を出力する画素100については転送パルスφT1−1をHレベルとし、その後、転送パルスφT2をHレベルとする。一方、A+B信号のみを出力させる画素100については、φT1−1をHレベルとせず、転送パルスφT2がHレベルとなっている期間に転送パルスφT1−2をHレベルとすれば良い。また、別の形態として、転送パルスφT1を複数設ける代わりに、1行の画素を選択する選択パルスφSELを、1行の画素100について複数の選択パルスφSEL−1、φSEL−2のいずれかを与える形態であっても良い。つまり、A信号、A+B信号を出力する画素については、転送パルスφT1、φT2がHレベルの期間にHレベルとなる選択パルスφSEL−1を与える。そして、A+B信号のみを出力する画素100については、転送パルスφT1の期間にはLレベルであり、転送パルスφT2がHレベルの時にHレベルとなる選択パルスφSEL−2を与える形態であっても良い。これらの形態は、或る行の画素100から、m個の光電変換部の信号電荷に基づく信号と、m個よりも少ないn個の光電変換部の信号電荷に基づく信号とを出力させる期間に、同じ行の別の画素から、n個の光電変換部の信号電荷に基づく信号を出力させず、m個の光電変換部の前記信号電荷に基づく前記信号を出力させる垂直走査回路を有する形態である。 Further, in this embodiment, a mode in which the horizontal scanning circuit 14 is a decoder and an A signal is output from a part of the memory 13 has been described. As another embodiment, as illustrated in FIG. 10, a plurality of transfer pulses φT1-1 and φT1-2 may be given to the photodiode 1 from the vertical scanning circuit 2 for one row of pixels 100. That is, among the pixels 100 in one line, the transfer pulse φT1-1 is set to the H level for the pixel 100 that outputs the A signal and the A + B signal, and then the transfer pulse φT2 is set to the H level. On the other hand, for the pixel 100 that outputs only the A + B signal, the transfer pulse φT1-2 may be set to the H level while the transfer pulse φT2 is at the H level instead of setting φT1-1 to the H level. Further, as another form, instead of providing a plurality of transfer pulses φT1, a selection pulse φSEL for selecting a pixel in one line is given, and one of a plurality of selection pulses φSEL-1 and φSEL-2 is given for the pixel 100 in one line. It may be in the form. That is, for the pixels that output the A signal and the A + B signal, the selection pulse φSEL-1 in which the transfer pulses φT1 and φT2 become the H level during the period of the H level is given. Then, the pixel 100 that outputs only the A + B signal may be in a form of giving a selection pulse φSEL-2 which is L level during the period of the transfer pulse φT1 and becomes H level when the transfer pulse φT2 is H level. .. These forms are used during a period in which a signal based on the signal charges of m photoelectric conversion units and a signal based on the signal charges of n less than m photoelectric conversion units are output from the pixel 100 in a certain row. In the form of having a vertical scanning circuit that does not output a signal based on the signal charge of n photoelectric conversion units but outputs the signal based on the signal charge of m photoelectric conversion units from another pixel in the same row. be.

[実施例3]
本実施例に係る撮像装置の等価回路を図11に例示する。本実施例の撮像装置は、画素100に含まれるフォトダイオード1とフォトダイオード51とがそれぞれ別の増幅MOSトランジスタ5−1、5−2の入力ノードに信号電荷を転送する形態である。実施例1の画素は、2つのフォトダイオードが1つの増幅MOSトランジスタ5の入力ノードに電気的に接続され、1つの増幅MOSトランジスタ5によって垂直信号線7に画素信号が出力されていた。これに対し、本実施例では、垂直信号線にA信号を出力する画素とB信号を出力する画素とが設けられている。即ち、同一のマイクロレンズを透過した光を受ける2つのフォトダイオードは、互いに異なる増幅MOSトランジスタを介して互いに異なる垂直信号線に画素信号を出力する。このA画素とB画素とのそれぞれに電気的に接続された垂直信号線7−1,7−2はノードAで電気的に接続されている。このノードAで電気的に接続された垂直信号線に画素信号を出力するA画素とB画素とによって、A+B信号を出力する1つの画素が構成される。
[Example 3]
An equivalent circuit of the image pickup apparatus according to this embodiment is illustrated in FIG. In the imaging device of this embodiment, the photodiode 1 and the photodiode 51 included in the pixel 100 transfer the signal charge to the input nodes of the different amplification MOS transistors 5-1 and 5-2, respectively. In the pixels of the first embodiment, two photodiodes were electrically connected to an input node of one amplification MOS transistor 5, and a pixel signal was output to a vertical signal line 7 by one amplification MOS transistor 5. On the other hand, in this embodiment, a pixel that outputs an A signal and a pixel that outputs a B signal are provided on the vertical signal line. That is, the two photodiodes that receive the light transmitted through the same microlens output pixel signals to different vertical signal lines via different amplification MOS transistors. The vertical signal lines 7-1 and 7-2 electrically connected to the A pixel and the B pixel, respectively, are electrically connected at the node A. A pixel that outputs a pixel signal to a vertical signal line electrically connected by this node A and a pixel B constitute one pixel that outputs an A + B signal.

さらに、本実施例では、実施例1で例示した撮像装置が有していたオペアンプ8を有していない形態である。オペアンプ8については本実施例においても、画素100から出力される画素信号を増幅させる場合には、実施例1で説明した撮像装置と同様に比較回路9の前段に設けることができる。 Further, in this embodiment, the operational amplifier 8 that the image pickup apparatus illustrated in the first embodiment has is not provided. In the present embodiment as well, the operational amplifier 8 can be provided in front of the comparison circuit 9 in the same manner as the imaging device described in the first embodiment when amplifying the pixel signal output from the pixel 100.

以下、図11を参照しながら説明する。尚、図4に例示した撮像装置で示した構成と同じ機能を奏するものについては、図4で付した符号と同じ符号を図11でも付している。また、A画素とB画素とがそれぞれ同じ機能を奏するものを有している場合には枝番を付して示している。例えば、増幅MOSトランジスタはA画素については5−1、B画素については5−2として付している。以下、リセットMOSトランジスタ4、選択MOSトランジスタ6、垂直信号線7、クランプ容量C0についても同様である。リセットMOSトランジスタ4−1,4−2は共通のリセットパルスφRが供給される。また、転送MOSトランジスタ20、50についても共通の転送パルスφT1が供給される。また、選択MOSトランジスタ6−1,6−2についても、共通の選択パルスφSELが供給される。 Hereinafter, description will be made with reference to FIG. For those having the same functions as those shown in the image pickup apparatus illustrated in FIG. 4, the same reference numerals as those given in FIG. 4 are also given in FIG. 11. Further, when the A pixel and the B pixel each have the same function, they are indicated by a branch number. For example, the amplification MOS transistor is attached as 5-1 for the A pixel and 5-2 for the B pixel. Hereinafter, the same applies to the reset MOS transistor 4, the selective MOS transistor 6, the vertical signal line 7, and the clamp capacitance C0. A common reset pulse φR is supplied to the reset MOS transistors 4-1 and 4-2. Further, a common transfer pulse φT1 is also supplied to the transfer MOS transistors 20 and 50. Further, the common selection pulse φSEL is also supplied to the selection MOS transistors 6-1 and 6-2.

A画素とB画素のそれぞれが有する選択MOSトランジスタ6−1、6−2はそれぞれが垂直信号線7−1、7−2に電気的に接続されている。垂直信号線7−1、7−2はノードAで電気的に接続されている。また、垂直信号線7−2は、スイッチSW6が設けられている。このスイッチSW6は、B画素からのB信号の、クランプ容量C0−2を介して比較回路9への出力を行う否かを切り替えるスイッチである。すなわち、スイッチSW6がオンである時には、B信号がクランプ容量C0−2を介して比較回路9に出力され、スイッチSW6がオフである時には比較回路にB信号は出力されない。尚、本実施例ではノードAから比較回路9に至る信号線を垂直信号線7と呼び、A画素、B画素のそれぞれに電気的に接続された垂直信号線7−1,7−2と区別する。 The selective MOS transistors 6-1 and 6-2 of the A pixel and the B pixel are electrically connected to the vertical signal lines 7-1 and 7-2, respectively. The vertical signal lines 7-1 and 7-2 are electrically connected at node A. Further, the vertical signal line 7-2 is provided with a switch SW6. This switch SW6 is a switch for switching whether or not to output the B signal from the B pixel to the comparison circuit 9 via the clamp capacitance C0-2. That is, when the switch SW6 is on, the B signal is output to the comparison circuit 9 via the clamp capacitance C0-2, and when the switch SW6 is off, the B signal is not output to the comparison circuit. In this embodiment, the signal line from the node A to the comparison circuit 9 is called a vertical signal line 7, and is distinguished from the vertical signal lines 7-1 and 7-2 electrically connected to the A pixel and the B pixel, respectively. do.

以下では、図1(a)を用いて説明した実施例1と同様に、一部の行において全ての画素がA信号とA+B信号とを出力する形態を説明する。また、図1(a)においてAとA+Bとを併記した領域の画素は、A信号を出力した後、A+B信号を出力する。図1(a)においてA+Bのみを記した領域の画素は、A信号を出力せずに、A+B信号の出力を行う。 Hereinafter, as in the case of the first embodiment described with reference to FIG. 1A, a mode in which all the pixels output the A signal and the A + B signal in some rows will be described. Further, the pixels in the region in which A and A + B are written together in FIG. 1A output the A signal and then the A + B signal. In FIG. 1A, the pixels in the region where only A + B is shown output the A + B signal without outputting the A signal.

次に、図12(a)に図11に例示した撮像装置のうち、A信号とA+B信号とを出力する行の動作タイミングの一例を示す。図12(a)中に示したスイッチパルスφS1は、図11で例示したスイッチSW6のオン、オフを切り替えるパルス信号である。φS1がHレベルの時にスイッチSW6はオンであり、φS1がLレベルの時にスイッチSW6はオフである。 Next, FIG. 12A shows an example of the operation timing of the line that outputs the A signal and the A + B signal among the imaging devices illustrated in FIG. The switch pulse φS1 shown in FIG. 12A is a pulse signal for switching on / off of the switch SW6 illustrated in FIG. The switch SW6 is on when φS1 is H level, and the switch SW6 is off when φS1 is L level.

時刻t60において、リセットパルスφRをHレベルとする。また、時刻t60において、選択パルスφSEL、スイッチパルスφC、φS1をHレベルとする。この動作により、増幅MOSトランジスタ5−1、5−2の入力ノード、クランプ容量C0−1、C0−2、C4の電荷がリセットされる。 At time t60, the reset pulse φR is set to H level. Further, at time t60, the selection pulse φSEL, the switch pulse φC, and φS1 are set to the H level. By this operation, the charges of the input nodes of the amplification MOS transistors 5-1 and 5-2 and the clamp capacitances C0-1, C0-2 and C4 are reset.

時刻t61において、リセットパルスφR、スイッチパルスφCをLレベルとする。スイッチパルスφS1は引き続きHレベルのままである。 At time t61, the reset pulse φR and the switch pulse φC are set to the L level. The switch pulse φS1 remains at the H level.

時刻t62からN変換を行う。ランプ信号発生回路10はランプ信号VRAMPの変化を開始する。比較回路9は垂直信号線7にクランプ容量C0−1、C0−2を介して与えられたN信号と、ランプ信号発生回路10から供給されるランプ信号VRAMPとの比較動作を開始する。また、カウンタ回路11は、ランプ信号発生回路10がランプ信号VRAMPの変化を開始すると同時にクロックパルス信号CLKの計数を開始し、計数結果であるカウント信号をメモリ13に出力する。 N conversion is performed from time t62. The lamp signal generation circuit 10 starts changing the lamp signal VRAMP. The comparison circuit 9 starts a comparison operation between the N signal given to the vertical signal line 7 via the clamp capacitances C0-1 and C0-2 and the lamp signal VRAMP supplied from the lamp signal generation circuit 10. Further, the counter circuit 11 starts counting the clock pulse signal CLK at the same time when the lamp signal generation circuit 10 starts changing the lamp signal VRAMP, and outputs the count signal which is the counting result to the memory 13.

例えば、ノードAに出力されたN信号と、ランプ信号VRAMPとの大小関係が、時刻t63に逆転したとする。すると、比較回路9が出力するラッチ信号LATが変化する。このラッチ信号LATが変化すると、カウンタ回路11はカウント信号のメモリ13への出力を停止する。メモリ13はこの時刻t63でのカウント信号を保持する。ランプ信号発生回路10は時刻t64でランプ信号VRAMPを変化させるのを終了する。また、スイッチパルスφS1は時刻t64にLレベルとする。 For example, it is assumed that the magnitude relationship between the N signal output to the node A and the lamp signal VRAMP is reversed at time t63. Then, the latch signal LAT output by the comparison circuit 9 changes. When the latch signal LAT changes, the counter circuit 11 stops outputting the count signal to the memory 13. The memory 13 holds the count signal at this time t63. The lamp signal generation circuit 10 ends changing the lamp signal VRAMP at time t64. Further, the switch pulse φS1 is set to the L level at time t64.

時刻t65において、転送パルスφT1をHレベルとする。フォトダイオード1から増幅MOSトランジスタ5−1、フォトダイオード51から増幅MOSトランジスタ5−2のそれぞれの入力ノードに信号電荷が転送される。これにより垂直信号線7−1にはA信号、垂直信号線7−2にはB信号が出力される。スイッチパルスφS1はLレベルであるので、ノードAにはA信号が出力される。 At time t65, the transfer pulse φT1 is set to the H level. The signal charge is transferred from the photodiode 1 to the amplification MOS transistor 5-1 and from the photodiode 51 to the respective input nodes of the amplification MOS transistor 5-2. As a result, the A signal is output to the vertical signal line 7-1 and the B signal is output to the vertical signal line 7-2. Since the switch pulse φS1 is at the L level, the A signal is output to the node A.

時刻t66からA変換を行う。ランプ信号発生回路10はランプ信号VRAMPの変化を開始する。比較回路9は垂直信号線7に出力されたA信号とランプ信号VRAMPとの比較動作を開始する。さらに、カウンタ回路11も先のN信号の場合と同様に、ランプ信号VRAMPが信号レベルの変化を開始すると同時にクロックパルス信号CLKの計数を開始する。 A conversion is performed from the time t66. The lamp signal generation circuit 10 starts changing the lamp signal VRAMP. The comparison circuit 9 starts a comparison operation between the A signal output to the vertical signal line 7 and the lamp signal VRAMP. Further, the counter circuit 11 also starts counting the clock pulse signal CLK at the same time when the lamp signal VRAMP starts changing the signal level, as in the case of the N signal described above.

例えば、ノードAに出力されたA信号とランプ信号VRAMPとの大小関係が、時刻t67に逆転したとする。すると、比較回路9が出力するラッチ信号LATが変化する。このラッチ信号LATが変化すると、カウンタ回路11はカウント信号のメモリ13への出力を停止する。メモリ13はこの時刻t14でのカウント信号を保持する。ランプ信号発生回路10は時刻t68でランプ信号VRAMPを変化させるのを終了する。 For example, it is assumed that the magnitude relationship between the A signal output to the node A and the lamp signal VRAMP is reversed at time t67. Then, the latch signal LAT output by the comparison circuit 9 changes. When the latch signal LAT changes, the counter circuit 11 stops outputting the count signal to the memory 13. The memory 13 holds the count signal at this time t14. The lamp signal generation circuit 10 ends changing the lamp signal VRAMP at time t68.

時刻t68にランプ信号VRAMPの変化が終了した後、先のN変換とA変換によって得たデジタルN信号とデジタルA信号とをデジタル信号処理部に転送する。本実施例ではこのデジタルN信号、デジタルA信号のデジタル信号処理部への転送を時刻t70としているが、時刻t69のスイッチパルスφS1と順番が前後しても差し支えない。後述するA+B変換が終了する時刻t73までにデジタルA信号、デジタルN信号の転送が終了することが好ましい。これにより、後述するデジタルA+B信号、デジタルN信号の転送がA+B変換終了後すぐに行うことができる。 After the change of the lamp signal VRAMP is completed at time t68, the digital N signal and the digital A signal obtained by the previous N conversion and A conversion are transferred to the digital signal processing unit. In this embodiment, the transfer of the digital N signal and the digital A signal to the digital signal processing unit is set at time t70, but the order may be different from that of the switch pulse φS1 at time t69. It is preferable that the transfer of the digital A signal and the digital N signal is completed by the time t73 when the A + B conversion described later is completed. As a result, the transfer of the digital A + B signal and the digital N signal, which will be described later, can be performed immediately after the completion of the A + B conversion.

時刻t69において、スイッチパルスφS1をHレベルにする。これにより、ノードAにはA+B信号が出力される。 At time t69, the switch pulse φS1 is set to H level. As a result, the A + B signal is output to the node A.

時刻t71において、A+B変換を開始する。ランプ信号発生回路10はランプ信号VRAMPの変化を開始する。さらに、比較回路9は垂直信号線7に出力されたA+B信号とランプ信号VRAMPとの比較動作を開始する。さらに、カウンタ回路11も先のN信号の場合と同様に、ランプ信号VRAMPが信号レベルの変化を開始すると同時にクロックパルス信号CLKの計数を開始する。 At time t71, A + B conversion is started. The lamp signal generation circuit 10 starts changing the lamp signal VRAMP. Further, the comparison circuit 9 starts a comparison operation between the A + B signal output to the vertical signal line 7 and the lamp signal VRAMP. Further, the counter circuit 11 also starts counting the clock pulse signal CLK at the same time when the lamp signal VRAMP starts changing the signal level, as in the case of the N signal described above.

例えば、垂直信号線7に出力されたA+B信号とランプ信号VRAMPとの大小関係が、時刻t72に逆転したとする。すると、比較回路9からカウンタ回路11にラッチ信号LATが出力される。このラッチ信号LATが出力されたカウンタ回路11は、カウント信号のメモリ13への出力を停止する。メモリ13はこの時刻t72でのカウント信号を保持する。ランプ信号発生回路10は時刻t73でランプ信号VRAMPを変化させるのを終了する。 For example, it is assumed that the magnitude relationship between the A + B signal output to the vertical signal line 7 and the lamp signal VRAMP is reversed at time t72. Then, the latch signal LAT is output from the comparison circuit 9 to the counter circuit 11. The counter circuit 11 to which the latch signal LAT is output stops outputting the count signal to the memory 13. The memory 13 holds the count signal at this time t72. The lamp signal generation circuit 10 ends changing the lamp signal VRAMP at time t73.

時刻t74に、デジタルA+B信号とデジタルN信号とをデジタル信号処理回路に転送する。 At time t74, the digital A + B signal and the digital N signal are transferred to the digital signal processing circuit.

次に、図12(b)に、図11に例示した撮像装置のうち、A信号を出力しない行の動作タイミングの一例を例示する。 Next, FIG. 12B exemplifies an example of the operation timing of the line that does not output the A signal among the imaging devices illustrated in FIG.

時刻t80、t81、t82、t83のそれぞれは、A信号およびA+B信号を出力する行の動作タイミングで説明した時刻t60、t61、t62、t63のそれぞれと同様の動作とすることができる。 Each of the times t80, t81, t82, and t83 can have the same operation as each of the times t60, t61, t62, and t63 described in the operation timing of the line that outputs the A signal and the A + B signal.

時刻t84において、N変換におけるランプ信号VRAMPの変化を終了する。先のA信号およびA+B信号を出力する行の動作においては、スイッチパルスφS1をここでLレベルとしたが、A信号を出力しない行については引き続きHレベルとする。 At time t84, the change of the lamp signal VRAMP in the N conversion ends. In the operation of the line that outputs the A signal and the A + B signal, the switch pulse φS1 is set to the L level here, but the line that does not output the A signal is set to the H level.

時刻t85における動作は、先のA信号およびA+B信号を出力する行の動作タイミングにおける時刻t65と同様である。転送パルスφT1をHレベルとすることにより、増幅MOSトランジスタ5−1、5−2のそれぞれの入力ノードに、フォトダイオード1、51のそれぞれからの信号電荷が転送される。スイッチパルスφS1はHレベルであるので、垂直信号線7にはA+B信号が出力される。 The operation at the time t85 is the same as the operation at the time t65 at the operation timing of the line that outputs the A signal and the A + B signal. By setting the transfer pulse φT1 to the H level, the signal charges from the photodiodes 1 and 51 are transferred to the input nodes of the amplification MOS transistors 5-1 and 5-2. Since the switch pulse φS1 is H level, an A + B signal is output to the vertical signal line 7.

時刻t86、t87、t88、t89のそれぞれにおける動作は、先のA信号およびA+B信号を出力する行の動作タイミングで説明した時刻t71、t72、t73、t74のそれぞれと同様の動作とすることができる。 The operation at each of the times t86, t87, t88, and t89 can be the same as the operation at each of the times t71, t72, t73, and t74 described in the operation timing of the line that outputs the A signal and the A + B signal. ..

A信号を出力しない行の動作は、実施例1で述べたのと同様に、A変換に関わる動作を行う時間、即ちA信号を出力する画素を含む行の動作タイミングの時刻t66〜t68の時間を短縮することができる。 The operation of the line that does not output the A signal is the time for performing the operation related to the A conversion, that is, the time of the operation timing of the line including the pixel that outputs the A signal, t66 to t68, as described in the first embodiment. Can be shortened.

本実施例の撮像装置は、A信号の出力を行わない画素100を有する。これにより、撮像装置の全行の画素100がA信号およびA+B信号を出力する動作を行う場合に比べて、1フレーム期間内の撮像装置からのデジタル信号を出力する時間を短縮することができる。 The image pickup apparatus of this embodiment has pixels 100 that do not output the A signal. As a result, the time for outputting the digital signal from the image pickup device within one frame period can be shortened as compared with the case where the pixels 100 in all lines of the image pickup apparatus output the A signal and the A + B signal.

本実施例は図1(a)のように、一部の行において全ての画素がA信号およびA+B信号を出力する形態について説明した。本実施例は図1(a)の読み出し方に限定されず、図1(b)、図1(c)に例示した形態であっても、水平走査回路14としてデコーダを用いて実施することができる。その際には、本実施例で説明したA信号およびA+B信号を出力する行の動作タイミングを図1(b)、(c)で例示した撮像装置の全行において行う。メモリ13に保持されたデジタルN信号、デジタルA信号、デジタルA+B信号については、実施例2と同様の動作で読み出せばよい。 In this embodiment, as shown in FIG. 1A, a mode in which all pixels output an A signal and an A + B signal in some rows has been described. This embodiment is not limited to the reading method of FIG. 1 (a), and even in the modes illustrated in FIGS. 1 (b) and 1 (c), it can be carried out by using a decoder as the horizontal scanning circuit 14. can. In that case, the operation timing of the rows that output the A signal and the A + B signal described in this embodiment is performed in all the rows of the imaging apparatus illustrated in FIGS. 1 (b) and 1 (c). The digital N signal, the digital A signal, and the digital A + B signal held in the memory 13 may be read out in the same operation as in the second embodiment.

本実施例の撮像装置においても、A+B信号を得つつ、A信号を得る動作を高速に行うことができる。 Also in the image pickup apparatus of this embodiment, the operation of obtaining the A signal can be performed at high speed while obtaining the A + B signal.

[実施例4]
本実施例は、垂直信号線7のそれぞれに比較回路9、カウンタ回路11を有しておらず、メモリ13は画素100から出力される画素信号に基づいて、デジタル信号ではなく、アナログ信号である電圧値を保持する形態である。
[Example 4]
In this embodiment, the comparison circuit 9 and the counter circuit 11 are not provided in each of the vertical signal lines 7, and the memory 13 is not a digital signal but an analog signal based on the pixel signal output from the pixel 100. It is a form that holds the voltage value.

図13は本実施例に関する撮像装置の構成の一例を示したものである。尚、図4に例示した撮像装置と同じ機能を奏する者については、図4に付した符号と同じ符号を図13でも付している。 FIG. 13 shows an example of the configuration of the imaging device according to this embodiment. For a person who performs the same function as the imaging device illustrated in FIG. 4, the same reference numerals as those given in FIG. 4 are given in FIG. 13.

本実施例の画素100、オペアンプ8については、実施例1と同様の画素100、オペアンプ8を用いることができる。 As for the pixel 100 and the operational amplifier 8 of this embodiment, the same pixel 100 and the operational amplifier 8 as in the first embodiment can be used.

容量C_N1、C_N2はともにオペアンプ8がN信号を増幅して出力した信号VNを保持する信号保持容量である。また、容量C_A、C_ABは、それぞれオペアンプ8がA信号、A+B信号をそれぞれ増幅した信号VA,VABを保持する信号保持容量である。本実施例の信号保持部は信号保持容量信号C_A、C_N1、C_N2、C_ABである。信号VA、VN、VABのそれぞれにはオペアンプ8が有するオフセット信号Voffが重畳されている。 Both the capacitances C_N1 and C_N2 are signal holding capacitances for holding the signal VN output by the operational amplifier 8 amplifying the N signal. Further, the capacitances C_A and C_AB are signal holding capacitances in which the operational amplifier 8 holds the signals VA and VAB, which are amplified A signal and A + B signal, respectively. The signal holding units of this embodiment are signal holding capacitance signals C_A, C_N1, C_N2, and C_AB. The offset signal Voff of the operational amplifier 8 is superimposed on each of the signals VA, VN, and VAB.

信号保持容量C_A、C_N1、C_N2、C_ABのそれぞれは、オペアンプ8からスイッチ61,62,63、64のそれぞれを介して各信号が出力される。スイッチ61,64のゲートにはそれぞれTG12から信号書き込み信号φT_A、φT_ABが供給される。また、スイッチ62、63のゲートにはTG12から信号書き込み信号φT_Nが供給される。スイッチ61、62、63、64は、それぞれのスイッチに供給される信号書き込み信号がHレベルであるとオンとなる。すなわちスイッチ61,62,63、64がオンの時に、それぞれ各信号保持容量C_A、C_N1、C_N2、C_ABに各信号が書き込まれる。信号保持容量C_N1、C_N2はそれぞれ画素が有するノイズレベルの信号が保持されるNメモリである。Nメモリは画素の有するノイズレベルの信号を保持する第1のメモリである。また、信号保持容量C_Aは、画素の一部の光電変換部に基づく画素信号に基づいた信号を保持するS1メモリである。S1メモリは、焦点検出用信号を保持する第2のメモリである。また、信号保持容量C_ABは、画素の複数の光電変換部に基づく画素信号に基づいた信号を保持するS2メモリである。S2メモリは画像取得用信号を保持する第3のメモリである。 Each of the signal holding capacitances C_A, C_N1, C_N2, and C_AB is output from the operational amplifier 8 via the switches 61, 62, 63, and 64, respectively. Signal write signals φT_A and φT_AB are supplied from TG12 to the gates of switches 61 and 64, respectively. Further, a signal writing signal φT_N is supplied from the TG 12 to the gates of the switches 62 and 63. The switches 61, 62, 63, and 64 are turned on when the signal writing signal supplied to each switch is H level. That is, when the switches 61, 62, 63, and 64 are on, each signal is written to each signal holding capacitance C_A, C_N1, C_N2, and C_AB, respectively. The signal holding capacitances C_N1 and C_N2 are N memories in which the noise level signals of the pixels are held, respectively. The N memory is the first memory that holds the noise level signal of the pixel. Further, the signal holding capacitance C_A is an S1 memory that holds a signal based on a pixel signal based on a part of the pixel photoelectric conversion unit. The S1 memory is a second memory that holds a focus detection signal. Further, the signal holding capacity C_AB is an S2 memory that holds a signal based on a pixel signal based on a plurality of photoelectric conversion units of the pixel. The S2 memory is a third memory that holds an image acquisition signal.

さらに信号保持容量C_N1、C_N2は、それぞれスイッチ66、67を介してN信号線15に電気的に接続されている。また、信号保持容量C_A、C_ABのそれぞれは、スイッチ65、68のそれぞれを介して、S信号線16に電気的に接続されている。スイッチ65、66のゲートには、水平走査回路14から水平選択信号φH1nが供給される。スイッチ67,68のゲートには水平走査回路14から水平選択信号φH2nが供給される。水平選択信号φH1nがHレベルとなると、スイッチ65、66がオンとなり、信号保持容量C_Aから信号VAがS信号線16に出力され、信号保持容量C_N1から信号VNがN信号線15に出力される。水平選択信号φ1nがオンとなることによって、スイッチ65、66が共にオンとなるため、信号VA、VNは同期してそれぞれS信号線16、N信号線15に出力される。同様に、水平選択信号φH2nがHレベルとなると、スイッチ67、68がオンとなり、信号保持容量C_N2から信号VNがN信号線15に出力され、信号保持容量C_ABから信号VABがS信号線16に出力される。水平選択信号φH2nがオンとなることによって、スイッチ67、68が共にオンとなるため、信号VN、VABは同期してそれぞれN信号線15、S信号線16に出力される。 Further, the signal holding capacitances C_N1 and C_N2 are electrically connected to the N signal line 15 via switches 66 and 67, respectively. Further, each of the signal holding capacitances C_A and C_AB is electrically connected to the S signal line 16 via the switches 65 and 68, respectively. A horizontal selection signal φH1n is supplied from the horizontal scanning circuit 14 to the gates of the switches 65 and 66. A horizontal selection signal φH2n is supplied from the horizontal scanning circuit 14 to the gates of the switches 67 and 68. When the horizontal selection signal φH1n reaches the H level, the switches 65 and 66 are turned on, the signal VA is output from the signal holding capacitance C_A to the S signal line 16, and the signal VN is output from the signal holding capacitance C_N1 to the N signal line 15. .. Since the switches 65 and 66 are both turned on when the horizontal selection signal φ1n is turned on, the signals VA and VN are synchronously output to the S signal line 16 and the N signal line 15, respectively. Similarly, when the horizontal selection signal φH2n reaches the H level, the switches 67 and 68 are turned on, the signal VN is output from the signal holding capacity C_N2 to the N signal line 15, and the signal VAB is changed to the S signal line 16 from the signal holding capacity C_AB. It is output. Since the switches 67 and 68 are both turned on when the horizontal selection signal φH2n is turned on, the signals VN and VAB are synchronously output to the N signal line 15 and the S signal line 16, respectively.

N信号線15、S信号線16は差動アンプ71に電気的に接続されている。差動アンプ71はN信号線15とS信号線16とが伝送するそれぞれの信号の差分を出力する。つまり、水平選択信号φH1nがHレベルとなり、S信号線16に信号VA、N信号線に信号VNが出力される場合では、差動アンプ71は信号VAから信号VNを差し引いた信号、すなわちVA−VNを出力する。同様に、水平選択信号φH2nがHレベルとなり、S信号線16に信号VAB、N信号線15に信号VNが出力される場合では、差動アンプ71は信号VABから信号VNを差し引いた信号、すなわちVAB−VNを出力する。本実施例における焦点検出用信号はVAであり、画像取得用信号はVABである。即ち、本実施例の撮像装置からは1フレーム期間内に焦点検出用信号、画像取得用信号の各々から信号VNが差し引かれた信号がそれぞれ出力される。 The N signal line 15 and the S signal line 16 are electrically connected to the differential amplifier 71. The differential amplifier 71 outputs the difference between the signals transmitted by the N signal line 15 and the S signal line 16. That is, when the horizontal selection signal φH1n becomes the H level and the signal VA is output to the S signal line 16 and the signal VN is output to the N signal line, the differential amplifier 71 is a signal obtained by subtracting the signal VN from the signal VA, that is, VA-. Output VN. Similarly, when the horizontal selection signal φH2n becomes the H level and the signal VAB is output to the S signal line 16 and the signal VN is output to the N signal line 15, the differential amplifier 71 is a signal obtained by subtracting the signal VN from the signal VAB, that is, Outputs VAB-VN. The focus detection signal in this embodiment is VA, and the image acquisition signal is VAB. That is, the image pickup apparatus of this embodiment outputs a signal obtained by subtracting the signal VN from each of the focus detection signal and the image acquisition signal within one frame period.

N信号線15、S信号線16のそれぞれには、リセットスイッチ69,70が電気的に接続されている。リセットスイッチ69、70にはTG12から水平リセットパルスφHcが供給される。リセットスイッチ69、70のドレインにはドレイン電圧Vddが供給されている。N信号線15、S信号線16のそれぞれが信号を差動アンプ71に出力した後、水平リセットパルスφHcをHレベルとしてリセットスイッチ69、70をオンとし、N信号線15、S信号線16の電位をリセットする。尚、図13では図示を省略しているが、N信号線15、S信号線16にはそれぞれ容量が電気的に接続されている。N信号線15に電気的に接続された容量の容量値をCH1とする。例えば信号保持容量C_N1の保持した信号は、信号保持容量C_N1の保持した信号値に、C_N1/(C_N1+CH1)を乗算した信号が差動アンプ71に出力される。S信号線16に電気的に接続された容量の容量値をCH2とする。例えば信号保持容量C_Aの保持した信号は、信号保持容量C_Aの保持した信号値に、C_A/(C_A+CH1)を乗算した信号が差動アンプ71に出力される。水平リセットパルスφHcをHレベルとしてリセットスイッチ69、70をオンとすると、容量CH1、CH2の電荷がリセットされる。 Reset switches 69 and 70 are electrically connected to the N signal line 15 and the S signal line 16, respectively. A horizontal reset pulse φHc is supplied from the TG 12 to the reset switches 69 and 70. A drain voltage Vdd is supplied to the drains of the reset switches 69 and 70. After each of the N signal line 15 and the S signal line 16 outputs a signal to the differential amplifier 71, the reset switches 69 and 70 are turned on with the horizontal reset pulse φHc as the H level, and the N signal line 15 and the S signal line 16 are turned on. Reset the potential. Although not shown in FIG. 13, the capacitances are electrically connected to the N signal line 15 and the S signal line 16, respectively. Let CH1 be the capacitance value of the capacitance electrically connected to the N signal line 15. For example, as for the signal held by the signal holding capacitance C_N1, a signal obtained by multiplying the signal value held by the signal holding capacitance C_N1 by C_N1 / (C_N1 + CH1) is output to the differential amplifier 71. Let CH2 be the capacitance value of the capacitance electrically connected to the S signal line 16. For example, as for the signal held by the signal holding capacitance C_A, the signal obtained by multiplying the signal value held by the signal holding capacitance C_A by C_A / (C_A + CH1) is output to the differential amplifier 71. When the reset switches 69 and 70 are turned on with the horizontal reset pulse φHc as the H level, the charges of the capacitances CH1 and CH2 are reset.

次に、図14に、図13に例示した撮像装置において、A信号を出力する画素を含む行の動作タイミングの一例を示す。本実施例におけるA信号を出力する画素は図1(a)のように配置されている。 Next, FIG. 14 shows an example of the operation timing of the row including the pixel that outputs the A signal in the image pickup apparatus illustrated in FIG. The pixels that output the A signal in this embodiment are arranged as shown in FIG. 1 (a).

時刻t90において、リセットパルスφRをHレベルとする。また、選択パルスφSELをHレベルとする。これにより、垂直信号線7にはN信号が出力される。また、スイッチパルスφSW1をHレベルとする。これにより、N信号はクランプ容量C0に保持される。また、N信号に基づく信号が増幅され、さらにオペアンプ8のオフセット信号Voffが重畳された信号VNが出力される。信号書き込み信号φT_Nもまた、Hレベルとする。これにより、信号保持容量C_N1、C_N2に信号VNの書き込みが行われる。時刻t91にリセットパルスφR、スイッチパルスφSW1をLレベルとする。 At time t90, the reset pulse φR is set to H level. Further, the selection pulse φSEL is set to H level. As a result, an N signal is output to the vertical signal line 7. Further, the switch pulse φSW1 is set to H level. As a result, the N signal is held in the clamp capacitance C0. Further, the signal based on the N signal is amplified, and the signal VN on which the offset signal Voff of the operational amplifier 8 is superimposed is output. The signal writing signal φT_N is also set to H level. As a result, the signal VN is written to the signal holding capacitances C_N1 and C_N2. At time t91, the reset pulse φR and the switch pulse φSW1 are set to the L level.

時刻t92に信号読み出しスイッチφT_NをLレベルとする。信号読み出しスイッチφT_NをLレベルにするのは、リセットパルスφRをLレベルとした後とすることが好ましい。これは、リセットパルスφRをLレベルとすることによってリセットMOSトランジスタで生じるチャージインジェクションにより、増幅MOSトランジスタ5の入力ノードの電位が変化するためである。この変化後の増幅MOSトランジスタ5の入力ノードの電位に基づく信号を信号保持容量C_N1、C_N2に保持させることが好ましい。信号保持容量C_N1、C_N2には、この時刻t92においてオペアンプ8から出力された信号VNが保持される。 At time t92, the signal read switch φT_N is set to L level. It is preferable that the signal read switch φT_N is set to the L level after the reset pulse φR is set to the L level. This is because the potential of the input node of the amplification MOS transistor 5 changes due to the charge injection generated in the reset MOS transistor by setting the reset pulse φR to the L level. It is preferable that the signal holding capacitances C_N1 and C_N2 hold the signal based on the potential of the input node of the amplified MOS transistor 5 after this change. The signal holding capacitances C_N1 and C_N2 hold the signal VN output from the operational amplifier 8 at this time t92.

時刻t93において、転送パルスφT1をHレベルとする。これにより、フォトダイオード1に保持された信号電荷が増幅MOSトランジスタ5の入力ノードに転送され、画素100からA信号が出力される。また、信号書き込み信号φT_AをHレベルとする。これにより、信号保持容量C_Aにはクランプ容量C0を介して出力されたA信号に基づいて、オペアンプ8が増幅して出力した信号VAが書き込まれる。 At time t93, the transfer pulse φT1 is set to the H level. As a result, the signal charge held in the photodiode 1 is transferred to the input node of the amplification MOS transistor 5, and the A signal is output from the pixel 100. Further, the signal writing signal φT_A is set to H level. As a result, the signal VA amplified and output by the operational amplifier 8 is written in the signal holding capacitance C_A based on the A signal output via the clamp capacitance C0.

時刻t94において、転送パルスφT1をLレベルとする。 At time t94, the transfer pulse φT1 is set to the L level.

時刻t95において、信号書き込み信号φT_AをLレベルとし、信号VAが信号保持容量C_Aに保持される。信号書き込み信号φT_AをLレベルとした後、水平選択信号φH1nをHレベルとして、信号保持容量C_A、C_N1からそれぞれ信号VA、VNをS信号線16、N信号線15に出力させる。信号保持容量C_A、C_N1からのそれぞれの信号VA,VNの出力を終えた後、水平選択信号φH1nをLレベルとする。また、水平選択信号φH1nをLレベルとした後、N信号線15、S信号線16の電位をリセットするため、水平リセットパルスφHcをHレベルとする。N信号線15、S信号線16の電位をリセットした後、水平リセットパルスφHcをLレベルとする。尚、図14の動作タイミング図では示していないが、複数列の信号保持容量C_A,C_N1から信号VA、VNを出力させるため、水平リセットパルスφHcをLレベルとする。次に信号VA,VNを出力させる列の水平選択信号φH1nをHレベルとして、順次信号をS信号線16、N信号線15に出力させる。同様に、水平リセットパルスφHcについても、1列の信号VN、VSのN信号、S信号の出力が終わる都度、N信号線15、S信号線16の電位をリセットするためにHレベルとする。N信号線15、S信号線16の電位がリセットされると水平リセットパルスφHcをLレベルとする。以降、焦点検出画素から信号が出力された信号保持容量C_A,C_N1について、同様に水平選択信号φH1n、水平リセットパルスφHcの供給動作を順次繰り返して信号VA,VNを出力させる。 At time t95, the signal writing signal φT_A is set to the L level, and the signal VA is held in the signal holding capacitance C_A. After the signal writing signal φT_A is set to L level, the horizontal selection signal φH1n is set to H level, and the signals VA and VN are output from the signal holding capacitances C_A and C_N1 to the S signal line 16 and the N signal line 15, respectively. After the output of the respective signals VA and VN from the signal holding capacitances C_A and C_N1 is completed, the horizontal selection signal φH1n is set to the L level. Further, after the horizontal selection signal φH1n is set to the L level, the horizontal reset pulse φHc is set to the H level in order to reset the potentials of the N signal line 15 and the S signal line 16. After resetting the potentials of the N signal line 15 and the S signal line 16, the horizontal reset pulse φHc is set to the L level. Although not shown in the operation timing diagram of FIG. 14, the horizontal reset pulse φHc is set to the L level in order to output the signals VA and VN from the signal holding capacities C_A and C_N1 of a plurality of rows. Next, the horizontal selection signal φH1n in the column for outputting the signals VA and VN is set to the H level, and the signals are sequentially output to the S signal line 16 and the N signal line 15. Similarly, the horizontal reset pulse φHc is also set to H level in order to reset the potentials of the N signal line 15 and the S signal line 16 each time the output of the signal VN of one row, the N signal of VS, and the S signal ends. When the potentials of the N signal line 15 and the S signal line 16 are reset, the horizontal reset pulse φHc is set to the L level. After that, for the signal holding capacitances C_A and C_N1 in which signals are output from the focus detection pixels, the supply operations of the horizontal selection signal φH1n and the horizontal reset pulse φHc are sequentially repeated to output the signals VA and VN.

時刻t96において、転送パルスφT2をHレベルとする。これにより、画素100からはA+B信号が出力される。また、信号書き込み信号φT_ABをHレベルとする。これにより、クランプ容量C0を介して出力されたA+B信号に基づいて、オペアンプ8が増幅して出力した信号VABが信号保持容量C_ABに書き込まれる。 At time t96, the transfer pulse φT2 is set to H level. As a result, the A + B signal is output from the pixel 100. Further, the signal writing signal φT_AB is set to H level. As a result, the signal VAB amplified and output by the operational amplifier 8 is written to the signal holding capacitance C_AB based on the A + B signal output via the clamp capacitance C0.

時刻t97において、転送パルスφT2をLレベルとする。 At time t97, the transfer pulse φT2 is set to the L level.

時刻t98において、信号書き込み信号φT_ABをLレベルとし、信号VABが信号保持容量C_ABに保持される。信号書き込み信号φT_ABをLレベルとした後、水平選択信号φH2nをHレベルとして、信号保持容量C_AB、C_N2からそれぞれ信号VAB、VNをS信号線16、N信号線15に出力させる。信号保持容量C_AB、C_N2からのそれぞれの信号VAB,VNの出力を終えた後、水平選択信号φH2nをLレベルとする。また、水平選択信号φH2nをLレベルとした後、N信号線15、S信号線16の電位をリセットするため、水平リセットパルスφHcをHレベルとする。N信号線15、S信号線16の電位をリセットした後、水平リセットパルスφHcをLレベルとする。尚、図14の動作タイミング図では示していないが、複数列の信号保持容量C_AB,C_N2から信号VAB、VNを出力させるため、水平リセットパルスφHcをLレベルとする。次に信号VAB,VNを出力させる列の水平選択信号φH2nをHレベルとして、順次信号をN信号線15、S信号線16に出力させる。同様に、水平リセットパルスφHcについても、1列の信号VN、VABのN信号、S信号の出力が終わる都度、N信号線15、S信号線16の電位をリセットするためにHレベルとする。N信号線15、S信号線16の電位がリセットされると水平リセットパルスφHcをLレベルとする。以降、画素の各列から信号が出力された信号保持容量C_AB,C_N2について、同様に水平選択信号φH2n、水平リセットパルスφHcの供給動作を順次繰り返して信号VAB,VNを出力させる。 At time t98, the signal writing signal φT_AB is set to the L level, and the signal VAB is held in the signal holding capacitance C_AB. After the signal writing signal φT_AB is set to L level, the horizontal selection signal φH2n is set to H level, and the signals VAB and VN are output from the signal holding capacitances C_AB and C_N2 to the S signal line 16 and the N signal line 15, respectively. After the output of the respective signals VAB and VN from the signal holding capacitances C_AB and C_N2 is completed, the horizontal selection signal φH2n is set to the L level. Further, after the horizontal selection signal φH2n is set to the L level, the horizontal reset pulse φHc is set to the H level in order to reset the potentials of the N signal line 15 and the S signal line 16. After resetting the potentials of the N signal line 15 and the S signal line 16, the horizontal reset pulse φHc is set to the L level. Although not shown in the operation timing diagram of FIG. 14, the horizontal reset pulse φHc is set to the L level in order to output the signals VAB and VN from the signal holding capacities C_AB and C_N2 of a plurality of rows. Next, the horizontal selection signal φH2n in the column for outputting the signals VAB and VN is set to the H level, and the signals are sequentially output to the N signal line 15 and the S signal line 16. Similarly, the horizontal reset pulse φHc is also set to H level in order to reset the potentials of the N signal line 15 and the S signal line 16 each time the output of the signal VN of one row, the N signal of VAB, and the S signal ends. When the potentials of the N signal line 15 and the S signal line 16 are reset, the horizontal reset pulse φHc is set to the L level. After that, for the signal holding capacitances C_AB and C_N2 in which signals are output from each row of pixels, the supply operations of the horizontal selection signal φH2n and the horizontal reset pulse φHc are sequentially repeated to output the signals VAB and VN.

時刻t99において、選択パルスφSELをLレベルとする。 At time t99, the selection pulse φSEL is set to the L level.

以上、これまでA信号を出力する画素を含む行の動作タイミングについて説明した。次に、A信号を出力する画素を含まない行の動作タイミングについて説明する。 So far, the operation timing of the line including the pixel that outputs the A signal has been described. Next, the operation timing of the line that does not include the pixel that outputs the A signal will be described.

図15は、A信号を出力する画素を含まない行の動作タイミングの一例を示したものである。時刻t110、t111、t112のそれぞれにおける動作については、A信号を出力する画素を含む行の動作タイミングにおける時刻t90、t91、t92と同様とすることができる。 FIG. 15 shows an example of the operation timing of the line not including the pixel that outputs the A signal. The operation at each of the times t110, t111, and t112 can be the same as the operations at the times t90, t91, and t92 at the operation timing of the line including the pixel that outputs the A signal.

時刻t113において、転送パルスφT1,φT2をHレベルとする。これにより、垂直信号線7には画素100からA+B信号が出力される。また、信号書き込み信号φT_ABをHレベルとする。これにより、クランプ容量C0を介して出力されたA+B信号に基づいて、オペアンプ8が増幅して出力した信号VABが信号保持容量C_ABに書き込まれる。 At time t113, the transfer pulses φT1 and φT2 are set to H level. As a result, the A + B signal is output from the pixel 100 to the vertical signal line 7. Further, the signal writing signal φT_AB is set to H level. As a result, the signal VAB amplified and output by the operational amplifier 8 is written to the signal holding capacitance C_AB based on the A + B signal output via the clamp capacitance C0.

時刻t114において、転送パルスφT1、φT2をLレベルとする。 At time t114, the transfer pulses φT1 and φT2 are set to the L level.

時刻t115において、信号書き込み信号φT_ABをLレベルとする。これにより、信号保持容量C_ABには信号VABが保持される。信号書き込み信号φT_ABをLレベルとした後、水平選択信号φH2nをHレベルとする。信号保持容量C_N2には、時刻t112において、図14で説明したA信号を出力する画素を含む行の動作タイミングでの時刻t92と同様に、信号VNが保持されている。従って、N信号線15には信号VN、S信号線16には信号VABがそれぞれ出力される。N信号線15、S信号線16に信号VN,VABのそれぞれの出力した後、水平選択信号φH2nをLレベルとし、その後、水平リセットパルスφHcをHレベルとしてN信号線15、S信号線16の電位をリセットする。尚、図15の動作タイミング図では示していないが、複数列の信号保持容量C_AB,C_N2から信号VAB、VNを出力させるため、水平リセットパルスφHcをLレベルとする。次に信号VAB,VNを出力させる列の水平選択信号φH2nをHレベルとして、順次信号をN信号線15、S信号線16に出力させる。同様に、水平リセットパルスφHcについても、1列の信号VN、VABのN信号、S信号の出力が終わる都度、N信号線15、S信号線16の電位をリセットするためにHレベルとする。N信号線15、S信号線16の電位がリセットされると水平リセットパルスφHcをLレベルとする。以降、画素の各列から信号が出力された信号保持容量C_AB,C_N2について、同様に水平選択信号φH2n、水平リセットパルスφHcの供給動作を順次繰り返して信号VAB,VNを出力させる。 At time t115, the signal writing signal φT_AB is set to the L level. As a result, the signal VAB is held in the signal holding capacitance C_AB. After the signal writing signal φT_AB is set to L level, the horizontal selection signal φH2n is set to H level. The signal holding capacitance C_N2 holds the signal VN at the time t112, as at the time t92 at the operation timing of the line including the pixel that outputs the A signal described with reference to FIG. Therefore, the signal VN is output to the N signal line 15 and the signal VAB is output to the S signal line 16. After the signals VN and VAB are output to the N signal line 15 and the S signal line 16, the horizontal selection signal φH2n is set to the L level, and then the horizontal reset pulse φHc is set to the H level of the N signal line 15 and the S signal line 16. Reset the potential. Although not shown in the operation timing diagram of FIG. 15, the horizontal reset pulse φHc is set to the L level in order to output the signals VAB and VN from the signal holding capacities C_AB and C_N2 of a plurality of rows. Next, the horizontal selection signal φH2n in the column for outputting the signals VAB and VN is set to the H level, and the signals are sequentially output to the N signal line 15 and the S signal line 16. Similarly, the horizontal reset pulse φHc is also set to H level in order to reset the potentials of the N signal line 15 and the S signal line 16 each time the output of the signal VN of one row, the N signal of VAB, and the S signal ends. When the potentials of the N signal line 15 and the S signal line 16 are reset, the horizontal reset pulse φHc is set to the L level. After that, for the signal holding capacitances C_AB and C_N2 in which signals are output from each row of pixels, the supply operations of the horizontal selection signal φH2n and the horizontal reset pulse φHc are sequentially repeated to output the signals VAB and VN.

以上、説明したように、A信号を出力する画素を含まない行の動作においては、A信号を出力する画素を含む行の動作での、画素100からA信号を出力させる動作、信号保持容量C_Aに信号VAを保持させる動作を省くことができる。即ち、A信号を出力する画素を含む行における動作の時刻t93〜t95の期間を短縮することができる。撮像装置の全行の画素100においてA信号およびA+B信号を読み出す動作を行う場合に比べて、A信号の出力を行わない画素100を有することにより、1フレーム期間内の撮像装置から信号を読み出す時間を短縮することができる。従って、A+B信号を得つつ、A信号を得る動作を高速に行うことができる。 As described above, in the operation of the line not including the pixel for outputting the A signal, the operation of outputting the A signal from the pixel 100 in the operation of the line including the pixel for outputting the A signal, the signal holding capacity C_A. It is possible to omit the operation of holding the signal VA. That is, the period of the operation time t93 to t95 in the line including the pixel that outputs the A signal can be shortened. Compared to the case where the A signal and the A + B signal are read out from the pixels 100 in all the rows of the image pickup device, the time required to read the signal from the image pickup device within one frame period by having the pixel 100 that does not output the A signal. Can be shortened. Therefore, it is possible to perform the operation of obtaining the A signal at high speed while obtaining the A + B signal.

これまで、A信号を出力する画素が図1(a)のように配置された形態を基に説明した。本実施例では、図1(b)のようにA信号を出力する画素が配置された形態についても、水平走査回路14をデコーダとすることで、実施例2と同様に、1フレーム期間内の撮像装置から信号を読み出す時間を短縮することができる。図1(b)のようにA信号を出力する画素が配された形態では、水平選択信号φH1nの動作を除いて、本実施例で図14を参照しながら説明した動作と同様とすることができる。水平選択信号φH1nは、A信号を出力する画素として動作させる画素を有する列のみHレベルとし、そのほかの列はLレベルとする。本実施例の固体撮像では、信号保持容量C_A,C_N1から信号VA、VNを出力しない列を有する。これにより、全列の信号保持容量C_A、C_N1から信号VA、VNを出力させる場合に比べて、1フレーム期間内の、S信号線16、N信号線15に信号を出力する時間を短縮することができる。従って、A+B信号を得つつ、A信号を得る動作を高速に行うことができる。 So far, the description has been made based on the form in which the pixels that output the A signal are arranged as shown in FIG. 1 (a). In this embodiment, even in the form in which the pixels for outputting the A signal are arranged as shown in FIG. 1B, by using the horizontal scanning circuit 14 as the decoder, the same as in the second embodiment, within one frame period. The time for reading a signal from the image pickup device can be shortened. In the form in which the pixels for outputting the A signal are arranged as shown in FIG. 1 (b), the operation may be the same as the operation described with reference to FIG. 14 in this embodiment except for the operation of the horizontal selection signal φH1n. can. The horizontal selection signal φH1n is set to H level only in the column having a pixel that operates as a pixel that outputs the A signal, and is set to L level in the other columns. In the solid-state imaging of this embodiment, there is a row in which signals VA and VN are not output from the signal holding capacitances C_A and C_N1. As a result, the time for outputting signals to the S signal line 16 and the N signal line 15 within one frame period is shortened as compared with the case where the signals VA and VN are output from the signal holding capacities C_A and C_N1 of all rows. Can be done. Therefore, it is possible to perform the operation of obtaining the A signal at high speed while obtaining the A + B signal.

また、図1(c)のようにA信号を出力する画素が配置された形態についても、実施例2で述べたのと同様に、水平走査回路14をデコーダとすることで、1フレーム期間内の撮像装置から信号を読み出す時間を短縮することができる。A信号を出力する画素を含む行については、水平選択信号φH1nの動作を除いて、本実施例で図14を参照しながら説明した動作と同様とすることができる。また、A信号を出力する画素を含まない行については、本実施例で図15を参照しながら説明した動作と同様とすることができる。A信号を出力する画素を含む行では、本実施例で先の図1(b)を参照しながら説明したのと同様に、水平選択信号φH1nは、A信号を出力する画素として動作させる画素を有する列のみHレベルとし、そのほかの列はLレベルとする。よって、信号保持容量C_A,C_N1から信号VA、VNを出力しない列が存在する。これにより、全列の信号保持容量C_A、C_N1から信号VA、VNを出力させる場合に比べて、画素1行当たりのS信号線16、N信号線15に信号を出力する時間を短縮することができる。また、図1(c)の撮像装置は、A信号を出力する画素を含まない行を有する。よって、本実施例で先の図1(a)を参照しながら説明した通り、A信号を出力する画素を含む行の動作での、画素100からA信号を出力させる動作と、信号保持容量C_Aに信号VAを保持させる動作を省くことができる。従って、図1(c)のようにA信号を出力する画素を配置した形態であっても、実施例2と同様に、1フレーム期間内の撮像装置から信号を読み出す時間を短縮することができる。従って、A+B信号を得つつ、A信号を得る動作を高速に行うことができる。 Further, also in the form in which the pixels for outputting the A signal are arranged as shown in FIG. 1C, the horizontal scanning circuit 14 is used as the decoder in the same manner as described in the second embodiment within one frame period. It is possible to shorten the time for reading a signal from the image pickup device of. The row including the pixel that outputs the A signal can be the same as the operation described with reference to FIG. 14 in this embodiment except for the operation of the horizontal selection signal φH1n. Further, the line that does not include the pixel that outputs the A signal can be the same as the operation described with reference to FIG. 15 in this embodiment. In the line including the pixel that outputs the A signal, the horizontal selection signal φH1n is a pixel that operates as a pixel that outputs the A signal, as described with reference to FIG. 1 (b) in this embodiment. Only the column to have is set to H level, and the other columns are set to L level. Therefore, there is a column in which the signals VA and VN are not output from the signal holding capacitances C_A and C_N1. As a result, the time for outputting signals to the S signal lines 16 and N signal lines 15 per pixel line can be shortened as compared with the case where the signals VA and VN are output from the signal holding capacities C_A and C_N1 in all columns. can. Further, the image pickup apparatus of FIG. 1C has a row that does not include a pixel that outputs an A signal. Therefore, as described in this embodiment with reference to FIG. 1A, the operation of outputting the A signal from the pixel 100 and the signal holding capacity C_A in the operation of the row including the pixel that outputs the A signal. It is possible to omit the operation of holding the signal VA. Therefore, even in the form in which the pixels that output the A signal are arranged as shown in FIG. 1C, the time for reading the signal from the image pickup apparatus within one frame period can be shortened as in the second embodiment. .. Therefore, it is possible to perform the operation of obtaining the A signal at high speed while obtaining the A + B signal.

本実施例では、画素100の一例としてフォトダイオード1とフォトダイオード51の面積が異なる形態を説明した。本実施例はこの形態に限定されるものではなく、フォトダイオード1、51の面積を同じとしても良い。 In this embodiment, as an example of the pixel 100, a mode in which the areas of the photodiode 1 and the photodiode 51 are different has been described. This embodiment is not limited to this embodiment, and the areas of the photodiodes 1 and 51 may be the same.

[実施例5]
これまで焦点検出用信号を出力する撮像装置について述べた。本実施例は別の形態の撮像装置である。
[Example 5]
So far, an image pickup device that outputs a focus detection signal has been described. This embodiment is another form of an imaging device.

画素100、垂直走査回路2、信号処理回路101の等価回路は実施例1で説明した図4と同様とすることができる。水平走査回路14については、A信号を出力させる画素100が図1(b),(c)のように配される場合には実施例2と同様にデコーダとすれば良い。A信号を出力する画素100が図1(a)のように配される場合には水平走査回路14は実施例1と同様とすることができる。 The equivalent circuit of the pixel 100, the vertical scanning circuit 2, and the signal processing circuit 101 can be the same as in FIG. 4 described in the first embodiment. Regarding the horizontal scanning circuit 14, when the pixels 100 for outputting the A signal are arranged as shown in FIGS. 1 (b) and 1 (c), a decoder may be used as in the second embodiment. When the pixels 100 that output the A signal are arranged as shown in FIG. 1A, the horizontal scanning circuit 14 can be the same as in the first embodiment.

実施例1の撮像装置では、1つのマイクロレンズ23が1つの画素100の受光部に光を集光するように配されていた。本実施例はマイクロレンズ23の配置には特に限定されない。例えば、1つのマイクロレンズ23が複数の画素100の受光部に光を集光するように配されていても良い。また、マイクロレンズ23を有さない撮像装置の形態であっても良い。 In the image pickup apparatus of the first embodiment, one microlens 23 is arranged so as to collect light on a light receiving portion of one pixel 100. This embodiment is not particularly limited to the arrangement of the microlens 23. For example, one microlens 23 may be arranged so as to collect light on the light receiving portions of the plurality of pixels 100. Further, it may be in the form of an imaging device that does not have the microlens 23.

本実施例においても、1フレーム期間内に複数の画素100からA+B信号が出力され、さらにA+B信号を出力した複数の画素100の一部の画素100のA信号が使用される。A信号を出力する画素100の配置は、これまでの実施例1〜4で述べたのと同様に図1(a)〜(c)で例示したようなレイアウトとすることができる。図1(a)のレイアウトでA信号を使用する画素100を配した場合には、実施例1で図6、図7を参照しながら述べた動作タイミング図と同様の動作とすることができる。図1(b)、(c)のレイアウトでA信号を使用する画素100を配した場合には、実施例2で図6、図9(a)、(b)を参照しながら説明した動作タイミングと同様とすることができる。 Also in this embodiment, A + B signals are output from the plurality of pixels 100 within one frame period, and the A signals of some pixels 100 of the plurality of pixels 100 that output the A + B signals are used. The arrangement of the pixels 100 that output the A signal can be the layout as illustrated in FIGS. 1 (a) to 1 (c) in the same manner as described in Examples 1 to 4 so far. When the pixels 100 that use the A signal are arranged in the layout of FIG. 1A, the operation can be the same as the operation timing diagram described with reference to FIGS. 6 and 7 in the first embodiment. When the pixel 100 using the A signal is arranged in the layout of FIGS. 1 (b) and 1 (c), the operation timing described with reference to FIGS. 6 and 9 (a) and 9 (b) in the second embodiment. Can be similar to.

実施例1、2で述べたのと同様に、本実施例の撮像装置からは複数の画素100からのA+B信号に基づくデジタルA+B信号と、A+B信号を出力した複数の画素100の一部の画素100のA信号に基づくデジタルA信号とが出力される。撮像装置から出力されたデジタルA信号、デジタルA+B信号は、例えば図16に例示した撮像システムの出力信号処理部155の一例であるデジタル信号処理回路に出力される。デジタル信号処理回路は、デジタルA+B信号とデジタルA信号との差分を演算して、デジタルB信号を得る処理などを行う。 Similar to those described in Examples 1 and 2, the digital A + B signal based on the A + B signal from the plurality of pixels 100 and a part of the pixels of the plurality of pixels 100 that output the A + B signal from the image pickup apparatus of the present embodiment. A digital A signal based on 100 A signals is output. The digital A signal and the digital A + B signal output from the imaging device are output to, for example, a digital signal processing circuit which is an example of the output signal processing unit 155 of the imaging system illustrated in FIG. The digital signal processing circuit calculates the difference between the digital A + B signal and the digital A signal to obtain the digital B signal and the like.

本実施例の撮像装置の1フレームの信号出力で得られる画像は、A信号を使用する画素100の配された領域が、他の領域に比して高解像度で表現できる。A信号を使用する画素100の領域については、撮像装置からデジタルA信号が出力され、デジタル信号処理回路でデジタルA+B信号とデジタルA信号との差分処理が行われてデジタルB信号が得られる。よって、A信号を使用する画素100が配された領域については、デジタルA信号と、デジタルB信号とを得る。従って、A信号を使用しない領域(デジタルA+B信号を使用する領域)よりも、A信号を使用する領域(デジタルA信号、デジタルB信号のそれぞれを使用する領域)では、デジタルA信号とデジタルB信号を得る分、高解像度となる。 In the image obtained by the signal output of one frame of the image pickup apparatus of this embodiment, the area where the pixels 100 using the A signal are arranged can be expressed with a higher resolution than the other areas. For the region of the pixel 100 in which the A signal is used, the digital A signal is output from the image pickup apparatus, and the digital signal processing circuit performs difference processing between the digital A + B signal and the digital A signal to obtain the digital B signal. Therefore, a digital A signal and a digital B signal are obtained in the region where the pixels 100 that use the A signal are arranged. Therefore, the digital A signal and the digital B signal are in the area where the A signal is used (the area where each of the digital A signal and the digital B signal is used) than in the area where the A signal is not used (the area where the digital A + B signal is used). The higher the resolution, the higher the resolution.

1フレームの撮像動作によって得られる画像において高解像度で表現したい領域に配された画素100についてはA信号とA+B信号とを出力し、他の領域の画素100はA+B信号を出力する。撮像装置の信号出力に関わる動作は実施例1または実施例2と同様であるから、全画素のA信号、A+B信号を使用する形態に比して、本実施例の撮像装置は1フレーム期間内の撮像装置からの信号読み出しに要する時間を短縮することができる。 In the image obtained by the imaging operation of one frame, the A signal and the A + B signal are output for the pixel 100 arranged in the region to be expressed with high resolution, and the pixel 100 in the other region outputs the A + B signal. Since the operation related to the signal output of the image pickup apparatus is the same as that of the first embodiment or the second embodiment, the image pickup apparatus of this embodiment is within one frame period as compared with the embodiment in which the A signal and the A + B signal of all pixels are used. It is possible to shorten the time required for reading the signal from the image pickup device.

本実施例では、光電変換信号としてA信号とA+B信号とを出力する画素100を説明した。本実施例はこの形態に限定されず、さらに別のフォトダイオードを有し、このフォトダイオードで生成する信号電荷に基づいたC信号を出力する画素100を有していても良い。この形態では、得たい解像度によって画素100から出力させる信号を変えればよい。例えば、全画素からA+B信号を出力させ、高解像度で表示したい領域に含まれる一部の画素100からさらにC信号を出力させる形態がある。また、全画素からA+B+C信号を出力させて、高解像度で表示したい領域に含まれる一部の画素100からA信号、B信号、A+B信号、B+C信号、A+C信号のいずれかの信号を出力させる形態でもよい。このような形態であっても、全画素から2つの光電変換信号を出力させる形態に比べて、全画素から1つの光電変換信号を出力させ、一部の画素から別の光電変換信号を出力させる形態であれば、1フレーム期間内の撮像装置からの信号読み出しに要する時間を短縮することができる。 In this embodiment, the pixel 100 that outputs the A signal and the A + B signal as the photoelectric conversion signal has been described. The present embodiment is not limited to this embodiment, and may further have another photodiode, and may have a pixel 100 that outputs a C signal based on the signal charge generated by the photodiode. In this form, the signal output from the pixel 100 may be changed according to the desired resolution. For example, there is a form in which the A + B signal is output from all the pixels, and the C signal is further output from a part of the pixels 100 included in the area to be displayed with high resolution. Further, a form in which an A + B + C signal is output from all the pixels, and any one of the A signal, the B signal, the A + B signal, the B + C signal, and the A + C signal is output from a part of the pixels 100 included in the area to be displayed with high resolution. But it may be. Even in such a form, one photoelectric conversion signal is output from all the pixels and another photoelectric conversion signal is output from some pixels, as compared with the form in which two photoelectric conversion signals are output from all the pixels. In the form, the time required for reading a signal from the image pickup device within one frame period can be shortened.

[実施例6]
これまでに述べた撮像装置を撮像システムに適用した場合の実施例について述べる。撮像システムとして、デジタルスチルカメラやデジタルカムコーダーや監視カメラなどがあげられる。図16に、撮像システムの例としてデジタルスチルカメラに撮像装置を適用した場合の模式図を示す。
[Example 6]
Examples of cases where the image pickup apparatus described above is applied to an image pickup system will be described. Examples of the imaging system include a digital still camera, a digital camcorder, and a surveillance camera. FIG. 16 shows a schematic diagram when an imaging device is applied to a digital still camera as an example of an imaging system.

図16において、151はレンズの保護のためのバリア、152は被写体の光学像を撮像装置154に結像させるレンズ、153はレンズ152を通った光量を可変にするための絞りである。レンズ152、絞り153は撮像装置154に光を導く光学系である。155は撮像装置154より出力される出力信号の処理を行う出力信号処理部である。 In FIG. 16, 151 is a barrier for protecting the lens, 152 is a lens for forming an optical image of a subject on the image pickup apparatus 154, and 153 is a diaphragm for changing the amount of light passing through the lens 152. The lens 152 and the aperture 153 are optical systems that guide light to the image pickup apparatus 154. Reference numeral 155 is an output signal processing unit that processes an output signal output from the image pickup apparatus 154.

撮像装置154からの出力信号が実施例4のようにアナログ信号である場合には、出力信号処理部155は、アナログ信号処理部、アナログデジタル変換部とデジタル信号処理部とを有する形態とする。撮像装置154からの出力信号をアナログ信号処理部が各種の補正を行って、アナログデジタル変換部に信号を出力する。アナログ信号処理部から出力された信号をアナログデジタル変換部がデジタル信号に変換し、デジタル信号処理部に出力する。デジタル信号処理部は必要に応じて各種の補正、圧縮を行ったうえで信号を出力する。尚、実施例4における撮像装置154では、一部の画素がA+B信号の出力を行うものの、A信号を出力しない場合を例示した。従って、1フレーム期間内に撮像装置154から出力される焦点検出用信号のデータ量は、全画素がA信号を出力する場合に比べて少なくなる。従って、出力信号処理部155についてもアナログデジタル変換の処理時間が短くなるため、信号処理を高速化することができる効果を有している。 When the output signal from the image pickup apparatus 154 is an analog signal as in the fourth embodiment, the output signal processing unit 155 has an analog signal processing unit, an analog digital conversion unit, and a digital signal processing unit. The analog signal processing unit performs various corrections on the output signal from the image pickup apparatus 154, and outputs the signal to the analog-to-digital conversion unit. The analog-digital conversion unit converts the signal output from the analog signal processing unit into a digital signal and outputs it to the digital signal processing unit. The digital signal processing unit outputs a signal after performing various corrections and compressions as necessary. In addition, in the image pickup apparatus 154 in Example 4, the case where some pixels output the A + B signal but not the A signal is illustrated. Therefore, the amount of data of the focus detection signal output from the image pickup apparatus 154 within one frame period is smaller than that in the case where all the pixels output the A signal. Therefore, the output signal processing unit 155 also has the effect of speeding up the signal processing because the processing time of the analog-to-digital conversion is shortened.

一方、撮像装置154が先に示した実施例1〜3のように、デジタル信号を出力する場合には、出力信号処理部155はデジタル信号処理部を有する。デジタル信号処理部は、撮像装置154から出力されるデジタルA信号、デジタルA+B信号のそれぞれからデジタルN信号を差し引く差分処理やデジタルA+B信号からデジタルA信号を差し引いてデジタルB信号を得る差分処理を行う。また、出力信号処理部155はその他、必要に応じて各種の補正、圧縮を行って信号を出力する動作を行う。尚、実施例1〜3の撮像装置154では、A+B信号の出力を行うものの、A信号を出力しない画素を有していた。従って、1フレーム期間内に撮像装置154から出力される焦点検出用信号のデータ量は、全画素がA信号を出力する場合に比べて少なくなる。よって、撮像装置154がデジタル信号を出力する場合においても、信号処理を行うデータ量が少なくなるため、信号処理を高速化することができる効果を有している。 On the other hand, when the image pickup apparatus 154 outputs a digital signal as in the first to third embodiments shown above, the output signal processing unit 155 has a digital signal processing unit. The digital signal processing unit performs difference processing in which the digital N signal is subtracted from each of the digital A signal and the digital A + B signal output from the image pickup apparatus 154, and difference processing in which the digital A signal is subtracted from the digital A + B signal to obtain the digital B signal. .. In addition, the output signal processing unit 155 also performs various corrections and compressions as necessary to output a signal. The imaging devices 154 of Examples 1 to 3 had pixels that output A + B signals but did not output A signals. Therefore, the amount of data of the focus detection signal output from the image pickup apparatus 154 within one frame period is smaller than that in the case where all the pixels output the A signal. Therefore, even when the image pickup apparatus 154 outputs a digital signal, the amount of data for signal processing is reduced, which has the effect of speeding up the signal processing.

そして、図16において、156は画像データを一時的に記憶する為のバッファメモリ部、158は記録媒体に記録または読み出しを行うためのインターフェース部、159は撮像データの記録または読み出しを行う為の半導体メモリ等の着脱可能な記録媒体である。157は外部コンピュータ等と通信する為のインターフェース部である。1510は各種演算とデジタルスチルカメラ全体を制御する全体制御・演算部、1511は撮像装置154、出力信号処理部155に、各種タイミング信号を出力するタイミング発生部である。ここで、タイミング信号などは外部から入力されてもよく、撮像システムは少なくとも撮像装置154と、撮像装置154から出力された出力信号を処理する出力信号処理部155とを有すればよい。 In FIG. 16, 156 is a buffer memory unit for temporarily storing image data, 158 is an interface unit for recording or reading on a recording medium, and 159 is a semiconductor for recording or reading imaging data. It is a removable recording medium such as a memory. Reference numeral 157 is an interface unit for communicating with an external computer or the like. Reference numeral 1510 is an overall control / calculation unit that controls various operations and the entire digital still camera, and 1511 is a timing generation unit that outputs various timing signals to the image pickup device 154 and the output signal processing unit 155. Here, a timing signal or the like may be input from the outside, and the imaging system may have at least an imaging device 154 and an output signal processing unit 155 that processes an output signal output from the imaging device 154.

出力信号処理部155が行う、デジタル信号A+B信号からデジタルA信号を差し引く処理、あるいは、信号VAB−VNから信号VA−VNを差し引く処理は、共に同じ画素から出力された信号同士で行われる。すなわち、画素が出力したA信号に基づく焦点検出用信号と、A信号を出力した画素と同じ画素が出力したA+B信号に基づく画像取得用信号とで差分処理が行われる。これにより、画素のB信号に基づく信号が得られ、この信号とA信号に基づく信号との信号値を比較することにより、位相差検出方式の焦点検出が行われる。 The process of subtracting the digital A signal from the digital signal A + B signal or the process of subtracting the signal VA-VN from the signal VAB-VN, which are performed by the output signal processing unit 155, are both performed by signals output from the same pixel. That is, the difference processing is performed between the focus detection signal based on the A signal output by the pixel and the image acquisition signal based on the A + B signal output by the same pixel as the pixel that outputs the A signal. As a result, a signal based on the B signal of the pixel is obtained, and the focus detection of the phase difference detection method is performed by comparing the signal values of this signal and the signal based on the A signal.

以上のように、本実施例の撮像システムは、撮像装置154を適用して撮像動作を行うことが可能である。本実施例の撮像システムに、実施例1〜4に例示した撮像装置を適用することにより、撮像装置154から出力される焦点検出用信号に基づいた位相差検出式の焦点検出動作と、画像取得用信号に基づいた画像の形成とを行うことができる。 As described above, the image pickup system of this embodiment can perform the image pickup operation by applying the image pickup apparatus 154. By applying the imaging devices illustrated in Examples 1 to 4 to the imaging system of this embodiment, a phase difference detection type focus detection operation based on a focus detection signal output from the imaging device 154 and image acquisition It is possible to form an image based on the signal.

[実施例7]
本実施例の撮像システムについて、図17を参照しながら説明する。実施例6で説明した撮像システムとは異なる点を中心に説明する。図17に例示した撮像システムは、実施例6で説明した撮像システムに対し、撮像装置154から出力される焦点検出用信号を処理する焦点検出用信号処理部1512が設けられている。そして、焦点検出用信号処理部1512から信号が出力信号処理部155に出力される形態である。
[Example 7]
The imaging system of this embodiment will be described with reference to FIG. The points different from the imaging system described in the sixth embodiment will be mainly described. The image pickup system illustrated in FIG. 17 is provided with a focus detection signal processing unit 1512 that processes a focus detection signal output from the image pickup device 154 with respect to the image pickup system described in the sixth embodiment. Then, the signal is output from the focus detection signal processing unit 1512 to the output signal processing unit 155.

本実施例の撮像装置154は全画素がA信号を出力する画素として動作する。すなわち、撮像装置154の全画素からA信号とA+B信号とがそれぞれ出力される。従って、全画素からの画素信号に基づく、焦点検出用信号と画像取得用信号とが撮像装置154から出力される。撮像装置154がアナログデジタル変換回路を有し、デジタル信号を出力する場合には、焦点検出用信号はデジタルA信号であり、画像取得用信号はデジタルA+B信号である。撮像装置154からデジタル信号の焦点検出用信号、画像取得用信号が出力される場合の回路構成は、実施例1で例示した図4のような構成でも良いが、この構成には限定されない。つまり、画素100がA信号とA+B信号とを時分割で出力し、メモリ13にはこれらの信号に基づくデジタルA信号、デジタルA+B信号が保持されると共に水平走査回路14によって各メモリ13から順次デジタル信号が出力される形態であれば良い。撮像装置154からアナログ信号が出力される場合には、焦点検出用信号は信号VAであり、画像取得用信号はVABである。撮像装置154からアナログ信号の焦点検出用信号、画像取得用信号が出力される場合の回路構成について、実施例6で例示した図13のような回路構成でも良いが、この構成に限定されない。つまり、画素100がA信号とA+B信号とを時分割で出力し、信号保持容量にこれらの信号に基づく信号VA,VABが保持され、水平走査回路14によって各信号保持容量から信号VA,VABが出力される形態であれば良い。撮像装置154からアナログ信号が出力される形態では、出力信号処理部155は、アナログ信号処理部、アナログデジタル変換部とデジタル信号処理部とを有する形態とする。撮像装置154からの出力信号をアナログ信号処理部が各種の補正を行って、アナログデジタル変換部に信号を出力する。アナログ信号処理部から出力された信号をアナログデジタル変換部がデジタル信号に変換し、デジタル信号処理部に出力する。デジタル信号処理部は必要に応じて各種の補正、圧縮を行ったうえで信号を出力する。 The image pickup apparatus 154 of this embodiment operates as pixels in which all the pixels output the A signal. That is, the A signal and the A + B signal are output from all the pixels of the image pickup apparatus 154, respectively. Therefore, the focus detection signal and the image acquisition signal based on the pixel signals from all the pixels are output from the image pickup apparatus 154. When the image pickup apparatus 154 has an analog-to-digital conversion circuit and outputs a digital signal, the focus detection signal is a digital A signal and the image acquisition signal is a digital A + B signal. The circuit configuration when the focus detection signal and the image acquisition signal of the digital signal are output from the image pickup apparatus 154 may be the configuration as shown in FIG. 4 illustrated in the first embodiment, but is not limited to this configuration. That is, the pixel 100 outputs the A signal and the A + B signal in a time division manner, and the memory 13 holds the digital A signal and the digital A + B signal based on these signals, and the horizontal scanning circuit 14 sequentially digitalizes from each memory 13. Any form may be used as long as the signal is output. When the analog signal is output from the image pickup apparatus 154, the focus detection signal is the signal VA and the image acquisition signal is the VAB. Regarding the circuit configuration when the focus detection signal and the image acquisition signal of the analog signal are output from the image pickup apparatus 154, the circuit configuration as shown in FIG. 13 illustrated in the sixth embodiment may be used, but the circuit configuration is not limited to this. That is, the pixel 100 outputs the A signal and the A + B signal in a time division manner, the signals VA and VAB based on these signals are held in the signal holding capacitance, and the signals VA and VAB are generated from each signal holding capacitance by the horizontal scanning circuit 14. Any form may be used as it is output. In the form in which the analog signal is output from the image pickup apparatus 154, the output signal processing unit 155 has an analog signal processing unit, an analog digital conversion unit, and a digital signal processing unit. The analog signal processing unit performs various corrections on the output signal from the image pickup apparatus 154, and outputs the signal to the analog-to-digital conversion unit. The analog-digital conversion unit converts the signal output from the analog signal processing unit into a digital signal and outputs it to the digital signal processing unit. The digital signal processing unit outputs a signal after performing various corrections and compressions as necessary.

焦点検出用信号処理部1512は、撮像装置154から出力される全画素のA信号に基づく焦点検出用信号のうち、一部の画素からのA信号に基づく焦点検出用信号を出力信号処理部155に出力する。また、他の一部の画素からのA信号に基づく焦点検出用信号は破棄する処理を行う。 The focus detection signal processing unit 1512 outputs a focus detection signal based on the A signal from some of the pixels among the focus detection signals output from the image pickup apparatus 154 based on the A signals of all pixels. Output to. Further, the focus detection signal based on the A signal from some other pixels is discarded.

一方、撮像装置154から出力された画像取得用信号については、焦点検出用信号処理部1512は処理を行わず、そのまま出力信号処理部155に出力される。 On the other hand, the image acquisition signal output from the image pickup apparatus 154 is not processed by the focus detection signal processing unit 1512 and is output to the output signal processing unit 155 as it is.

出力信号処理部155には、撮像装置154の一部の画素からのA信号に基づく焦点検出用信号と、全画素からのA+B信号に基づく画像取得用信号が入力される。出力信号処理部155は全画素からのA信号に基づく焦点検出用信号が入力される場合に比べて、焦点検出用信号処理部1512が一部の画素のみからのA信号に基づく焦点検出信号を出力信号処理部155に出力するため、出力信号処理部155に入力される焦点検出用信号のデータ量が少なくなる。従って、出力信号処理部155は全画素のA信号に基づく焦点検出用信号が入力される場合に比べて高速に信号処理を行うことができる。 A focus detection signal based on the A signal from some pixels of the image pickup apparatus 154 and an image acquisition signal based on the A + B signal from all the pixels are input to the output signal processing unit 155. Compared to the case where the focus detection signal based on the A signal from all the pixels is input to the output signal processing unit 155, the focus detection signal processing unit 1512 outputs the focus detection signal based on the A signal from only some pixels. Since the output is output to the output signal processing unit 155, the amount of data of the focus detection signal input to the output signal processing unit 155 is reduced. Therefore, the output signal processing unit 155 can perform signal processing at a higher speed than when a focus detection signal based on the A signal of all pixels is input.

よって、本実施例の撮像システムは、撮像装置154から出力される焦点検出用信号のうち、一部の画素からのA信号に基づく焦点検出信号を出力信号処理部155に出力する焦点検出用信号処理部を有することにより、高速に信号処理を行うことができる。 Therefore, the imaging system of this embodiment outputs a focus detection signal based on the A signal from some pixels among the focus detection signals output from the image pickup apparatus 154 to the output signal processing unit 155. By having a processing unit, signal processing can be performed at high speed.

[実施例8]
図面を参照しながら、本実施例の撮像装置について説明する。
[Example 8]
The imaging apparatus of this embodiment will be described with reference to the drawings.

図18(a)は本実施例の撮像装置の構成の一例を示した模式図である。 FIG. 18A is a schematic view showing an example of the configuration of the image pickup apparatus of this embodiment.

図18(a)では、画素100が持つ2つのフォトダイオード1、51を、2つの長方形を用いて模式的に表している。また、図18(a)では、図4と同じ機能を有する部材については、図4で付した符号と同じ符号を図18(a)でも付している。また、図18では、垂直信号線7、比較回路9、カウンタ回路11、メモリ13については、図の左から数えて何列目に位置しているかを表す枝番を付している。水平走査回路14は、水平転送部141と水平走査部142を有している。また、図18(a)に記載の撮像装置は、カウンタ制御部30を有している。メモリ13には、TGから信号mtxが与えられる。 In FIG. 18A, the two photodiodes 1 and 51 of the pixel 100 are schematically represented by using two rectangles. Further, in FIG. 18A, with respect to the member having the same function as that of FIG. 4, the same reference numerals as those given in FIG. 4 are attached in FIG. 18A. Further, in FIG. 18, the vertical signal line 7, the comparison circuit 9, the counter circuit 11, and the memory 13 are numbered according to the column number of the vertical signal line 7, the counter circuit 11, and the memory 13. The horizontal scanning circuit 14 has a horizontal transfer unit 141 and a horizontal scanning unit 142. Further, the image pickup apparatus shown in FIG. 18A has a counter control unit 30. A signal mtx is given to the memory 13 from the TG.

図18(b)は、本実施例の1列のカウンタ回路11、メモリ13の構成を示した図である。カウンタ回路11はビット信号c[0]〜c[11]の12ビットのデジタル信号を出力する形態として示している。カウンタ制御部30が出力する信号deがHレベルであって、信号seがLレベルの期間では、ビット信号c[1]〜c[11]の信号値がクロック信号clkに応じて変化する。一方、信号deがLレベルであって、信号seがHレベルの期間では、ビット信号c[0]〜c[11]の信号値がクロック信号clkに応じて変化する。ビット信号c[1]はビット信号c[0]の信号値が変化する場合は、ビット信号c[0]を2分周した信号となる。よって、信号deがHレベルであって、信号seがLレベルの場合のカウンタ回路11の単位時間当たりのカウント数は、信号deがLレベルであって、信号seがHレベルの場合の2倍となる。以下、信号deがHレベルであって、信号seがLレベルの場合のカウンタ回路11のカウント動作をダブルカウント動作、信号deがLレベルであって、信号seがHレベルの場合のカウンタ回路11のカウント動作をシングルカウント動作と表記する。 FIG. 18B is a diagram showing the configuration of the one-row counter circuit 11 and the memory 13 of this embodiment. The counter circuit 11 is shown as a form of outputting a 12-bit digital signal of bit signals c [0] to c [11]. During the period when the signal de output by the counter control unit 30 is H level and the signal se is L level, the signal values of the bit signals c [1] to c [11] change according to the clock signal clk. On the other hand, during the period when the signal de is at the L level and the signal se is at the H level, the signal values of the bit signals c [0] to c [11] change according to the clock signal clk. When the signal value of the bit signal c [0] changes, the bit signal c [1] becomes a signal obtained by dividing the bit signal c [0] by two. Therefore, when the signal de is H level and the signal se is L level, the number of counts per unit time of the counter circuit 11 is twice that when the signal de is L level and the signal se is H level. It becomes. Hereinafter, the counter circuit 11 when the signal de is H level and the signal se is L level is double-counted, and the counter circuit 11 when the signal de is L level and the signal se is H level. The counting operation of is referred to as a single counting operation.

次に図19を参照しながら、図18(a)に示した撮像装置の動作について説明する。本実施例の比較回路9は、比較結果信号として、信号coをカウンタ制御部30に出力する。本実施例の比較回路9は、ランプ信号VRAMPの電位よりも垂直信号線7の電位の方が大きい場合には、Hレベルの信号を出力する。ランプ信号VRAMPの電位よりも垂直信号線7の電位の方が小さい場合には、Lレベルの信号を出力する。 Next, the operation of the image pickup apparatus shown in FIG. 18A will be described with reference to FIG. The comparison circuit 9 of this embodiment outputs the signal co to the counter control unit 30 as the comparison result signal. The comparison circuit 9 of this embodiment outputs an H level signal when the potential of the vertical signal line 7 is larger than the potential of the lamp signal VRAMP. When the potential of the vertical signal line 7 is smaller than the potential of the lamp signal VRAMP, an L level signal is output.

図19に示した符号は、それぞれ図18(a)に示した符号と対応している。本実施例では、信号de3、de4は共に全期間Lレベルとしている。 The reference numerals shown in FIG. 19 correspond to the reference numerals shown in FIG. 18A, respectively. In this embodiment, the signals de3 and de4 are both set to L level for the entire period.

A変換期間について説明する。A変換期間に先立って、1行目の画素100からはA信号が比較回路9に出力されている。 A conversion period will be described. Prior to the A conversion period, the A signal is output to the comparison circuit 9 from the pixel 100 in the first row.

まず、カウンタ制御部は信号aeをHレベルとする。その後、比較回路9−1、9−2、9−3、9−4はランプ信号VRAMPと垂直信号線7−1、7−2、7−3、7−4の電位との比較動作をそれぞれ開始する。比較回路9−1、9−3の比較結果信号co1、co3が共にHレベルの時には、カウンタ制御部30が出力する信号se1はLレベル、信号de1はHレベルである。この時、カウンタ回路11−1はダブルカウント動作にてクロック信号clkをカウントする。また、比較回路9−2、9−4の比較結果信号co2、co4が共にHレベルの時には、カウンタ制御部30が出力する信号se2はLレベル、信号de2はHレベルである。この時、カウンタ回路11−2はダブルカウント動作にてクロック信号clkをカウントする。また、比較回路9−3、9−4の比較結果信号co3、co4の信号レベルに関わらず、信号aeがHレベルの期間は、信号se3はLレベルである。信号de3もLレベルであるため、カウンタ回路11−3はクロック信号clkのカウント動作を行わない。また、比較回路9−4の比較結果信号co4の信号レベルに関わらず、信号aeがHレベルの期間は、信号se4はLレベルである。信号de4もLレベルであるため、カウンタ回路11−4はクロック信号clkのカウント動作を行わない。 First, the counter control unit sets the signal ae to H level. After that, the comparison circuits 9-1, 9-2, 9-3, and 9-4 perform a comparison operation between the lamp signal VRAMP and the potentials of the vertical signal lines 7-1, 7-2, 7-3, and 7-4, respectively. Start. When the comparison result signals co1 and co3 of the comparison circuits 9-1 and 9-3 are both at H level, the signal se1 output by the counter control unit 30 is at L level and the signal de1 is at H level. At this time, the counter circuit 11-1 counts the clock signal clk by a double count operation. When the comparison result signals co2 and co4 of the comparison circuits 9-2 and 9-4 are both at H level, the signal se2 output by the counter control unit 30 is at L level and the signal de2 is at H level. At this time, the counter circuit 11-2 counts the clock signal clk by a double count operation. Further, regardless of the signal levels of the comparison result signals co3 and co4 of the comparison circuits 9-3 and 9-4, the signal se3 is the L level during the period when the signal ae is the H level. Since the signal de3 is also at the L level, the counter circuit 11-3 does not count the clock signal clk. Further, regardless of the signal level of the comparison result signal co4 of the comparison circuit 9-4, the signal se4 is the L level during the period when the signal ae is the H level. Since the signal de4 is also at the L level, the counter circuit 11-4 does not count the clock signal clk.

次に、比較回路9−2の比較結果信号co2がHレベルからLレベルに変化したとする。これにより、信号se2はLレベルからHレベルに変化し、信号de2はHレベルからLレベルに変化する。よって、カウンタ回路11−2はダブルカウント動作からシングルカウント動作に移行して、クロック信号clkをカウントする。 Next, it is assumed that the comparison result signal co2 of the comparison circuit 9-2 changes from the H level to the L level. As a result, the signal se2 changes from the L level to the H level, and the signal de2 changes from the H level to the L level. Therefore, the counter circuit 11-2 shifts from the double count operation to the single count operation and counts the clock signal clk.

続いて、比較回路9−3の比較結果信号co3がHレベルからLレベルに変化したとする。これにより、信号de1はHレベルからLレベルに変化し、信号se1はLレベルからHレベルに変化する。よって、カウンタ回路11−1はダブルカウント動作からシングルカウント動作に移行して、クロック信号clkをカウントする。 Subsequently, it is assumed that the comparison result signal co3 of the comparison circuit 9-3 changes from the H level to the L level. As a result, the signal de1 changes from the H level to the L level, and the signal se1 changes from the L level to the H level. Therefore, the counter circuit 11-1 shifts from the double count operation to the single count operation and counts the clock signal clk.

続いて、比較回路9−4の比較結果信号co4がHレベルからLレベルに変化したとする。これにより、信号se2がHレベルからLレベルに変化するため、カウンタ回路11−2はクロック信号clkのカウント動作を停止し、この時点でのカウント信号値を保持する。 Subsequently, it is assumed that the comparison result signal co4 of the comparison circuit 9-4 changes from the H level to the L level. As a result, the signal se2 changes from the H level to the L level, so that the counter circuit 11-2 stops the counting operation of the clock signal clk and holds the counting signal value at this point.

続いて、比較回路9−1の比較結果信号co1がHレベルからLレベルに変化する。これにより、信号se1がHレベルからLレベルに変化する。よって、カウンタ回路11−1はクロック信号clkのカウントを停止し、この時点でのカウント信号値を保持する。 Subsequently, the comparison result signal co1 of the comparison circuit 9-1 changes from the H level to the L level. As a result, the signal se1 changes from the H level to the L level. Therefore, the counter circuit 11-1 stops counting the clock signal clk and holds the count signal value at this point.

カウンタ回路11−1が保持したカウント信号値は、1列目の画素100のA信号と3列目の画素100のA信号とを加算した信号に基づくデジタル信号である。このデジタル信号を、デジタルA1+A3信号と表記する。カウンタ回路11−2が保持したカウント信号は、2列目の画素100のA信号と、4列目の画素100のA信号とを加算した信号に基づくデジタル信号である。このデジタル信号をデジタルA2+A4信号と表記する。 The count signal value held by the counter circuit 11-1 is a digital signal based on a signal obtained by adding the A signal of the pixel 100 in the first row and the A signal of the pixel 100 in the third row. This digital signal is referred to as a digital A1 + A3 signal. The count signal held by the counter circuit 11-2 is a digital signal based on a signal obtained by adding the A signal of the pixel 100 in the second row and the A signal of the pixel 100 in the fourth row. This digital signal is referred to as a digital A2 + A4 signal.

次に、TGは信号mtxをHレベルとする。これにより、カウンタ回路11が保持したカウント信号をメモリ13が保持する。メモリ13−1はデジタルA1+A3信号を保持する。メモリ13−2はデジタルA2+A4信号を保持する。メモリ13−3、13−4は、0の信号値を保持する。水平転送部141は水平走査部142からの信号に基づいて、順次、各列のメモリ13が保持したデジタル信号をDSP80に出力させる。他の形態として、このメモリ13からDSP80へのデジタル信号の出力動作は、水平転送部141が、0の信号値を保持したメモリ13をスキップする。そして、複数のA信号を加算した信号に基づくデジタル信号を保持したメモリ13のみからデジタル信号を出力させるようにしても良い。 Next, TG sets the signal mtx to H level. As a result, the memory 13 holds the count signal held by the counter circuit 11. Memory 13-1 holds a digital A1 + A3 signal. Memory 13-2 holds a digital A2 + A4 signal. The memories 13-3 and 13-4 hold a signal value of 0. Based on the signal from the horizontal scanning unit 142, the horizontal transfer unit 141 sequentially outputs the digital signal held by the memory 13 in each row to the DSP 80. As another form, in the output operation of the digital signal from the memory 13 to the DSP 80, the horizontal transfer unit 141 skips the memory 13 holding the signal value of 0. Then, the digital signal may be output only from the memory 13 that holds the digital signal based on the signal obtained by adding the plurality of A signals.

続いて、A+B変換期間について説明する。A+B変換期間に先立って、1行目の画素100からはA+B信号が比較回路9に出力されている。 Next, the A + B conversion period will be described. Prior to the A + B conversion period, the A + B signal is output to the comparison circuit 9 from the pixel 100 in the first row.

まず、信号aeはLレベルのままとする。また、カウンタ回路11−1、11−2、11−3、11−4のカウント信号を初期値にリセットする。 First, the signal ae is left at the L level. Further, the count signals of the counter circuits 11-1, 11-2, 11-3, and 11-4 are reset to the initial values.

その後、比較回路9−1、9−2、9−3、9−4はランプ信号VRAMPと垂直信号線7−1、7−2、7−3、7−4の電位との比較動作をそれぞれ開始する。A+B変換期間では、信号aeがLレベルのため、信号de1、de2はA+B変換期間の間、Lレベルである。これにより、カウンタ回路11−1は、比較結果信号co1がHレベルからLレベルになるまでの期間、クロック信号clkをシングルカウント動作でカウントする。カウンタ回路11−2、11−3、11−4についても同様に、それぞれ、比較結果信号co2、co3、co4がHレベルからLレベルになるまでの期間、クロック信号clkをシングルカウント動作でカウントする。これにより、カウンタ回路11−1は、1列目の画素100が出力したA+B信号に基づくデジタル(A+B)1信号を保持する。同様に、カウンタ回路11−2、11−3、11−4は、デジタル(A+B)2信号、デジタル(A+B)3信号、デジタル(A+B)4信号を保持する。その後、TGは信号mtxをHレベルとして、メモリ13−1、13−2、13−3−、13−4がそれぞれデジタル(A+B)1信号、デジタル(A+B)2信号、デジタル(A+B)3信号、デジタル(A+B)4信号を保持する。水平転送部141は水平走査部142からの信号に基づいて、順次、各列のメモリ13が保持したデジタル信号をDSP80に出力させる。 After that, the comparison circuits 9-1, 9-2, 9-3, and 9-4 perform a comparison operation between the lamp signal VRAMP and the potentials of the vertical signal lines 7-1, 7-2, 7-3, and 7-4, respectively. Start. Since the signal ae is at the L level in the A + B conversion period, the signals de1 and de2 are at the L level during the A + B conversion period. As a result, the counter circuit 11-1 counts the clock signal clk in a single count operation during the period from the comparison result signal co1 to the L level. Similarly for the counter circuits 11-2, 11-3, and 11-4, the clock signal clk is counted by a single count operation during the period from the comparison result signals co2, co3, and co4 to the H level to the L level, respectively. .. As a result, the counter circuit 11-1 holds a digital (A + B) 1 signal based on the A + B signal output by the pixel 100 in the first row. Similarly, the counter circuits 11-2, 11-3, 11-4 hold two digital (A + B) signals, three digital (A + B) signals, and four digital (A + B) signals. After that, the TG sets the signal mtx as the H level, and the memories 13-1, 13-2, 13-3-, and 13-4 have one digital (A + B) signal, two digital (A + B) signals, and three digital (A + B) signals, respectively. , Holds 4 digital (A + B) signals. Based on the signal from the horizontal scanning unit 142, the horizontal transfer unit 141 sequentially outputs the digital signal held by the memory 13 in each row to the DSP 80.

本実施例のメモリ13が保持するデジタルA信号は、複数列のA信号を加算した信号に基づくデジタル信号である。よって、デジタルA+B信号に比して、デジタルA信号を保持するメモリ13の数が少なくなるため、DSP80に出力されるデジタルA信号の信号量はデジタルA+B信号の比して少なくなる。よって、本実施例の撮像装置においても、1フレーム期間に出力されるデジタルA信号の信号量は、デジタルA+B信号の信号量よりも少ない。これにより、全列のメモリ13がデジタルA信号を保持する形態に比して、デジタルA信号を保持した全メモリ13からデジタルA信号をDSP80に出力させる期間を短縮することができる。また、デジタルA信号の信号量が減ることにより、DSP80の信号処理の負荷を減らすことができる。 The digital A signal held by the memory 13 of this embodiment is a digital signal based on a signal obtained by adding a plurality of rows of A signals. Therefore, since the number of memories 13 holding the digital A signal is smaller than that of the digital A + B signal, the signal amount of the digital A signal output to the DSP 80 is smaller than that of the digital A + B signal. Therefore, even in the image pickup apparatus of this embodiment, the signal amount of the digital A signal output in one frame period is smaller than the signal amount of the digital A + B signal. As a result, the period for outputting the digital A signal to the DSP 80 from all the memories 13 holding the digital A signal can be shortened as compared with the form in which the memories 13 in all rows hold the digital A signal. Further, by reducing the signal amount of the digital A signal, the signal processing load of the DSP 80 can be reduced.

本実施例の形態を、図3(a)、図3(b)に示したように、A信号を焦点検出用信号として用いる場合について説明する。焦点検出用信号であるA信号は画像取得用信号であるA+B信号に比して、求められる信号の精度が低い場合がある。このような場合に、本実施例のように、複数列のA信号をした信号に基づくデジタルA信号を得る形態を好適に実施することができる。 A case where the A signal is used as the focus detection signal will be described with reference to the embodiment of this embodiment as shown in FIGS. 3 (a) and 3 (b). The A signal, which is a focus detection signal, may have a lower accuracy of the required signal than the A + B signal, which is an image acquisition signal. In such a case, as in the present embodiment, a mode of obtaining a digital A signal based on a signal having a plurality of rows of A signals can be preferably implemented.

[実施例9]
本実施例の撮像装置について、図面を参照しながら実施例8と異なる点を中心に説明する。本実施例では、画素100からA信号とB信号が異なる垂直信号線7に出力される形態である。
[Example 9]
The image pickup apparatus of this embodiment will be described focusing on the points different from those of the eighth embodiment with reference to the drawings. In this embodiment, the A signal and the B signal are output from the pixel 100 to different vertical signal lines 7.

図20(a)は本実施例の画素の構成の一例である。図20(a)では、図4に示した部材と同じ機能を有する部材については、図4で付した符号と同じ符号を付して表している。図4に示した画素では、転送MOSトランジスタ20が転送パルスφT1、転送MOSトランジスタ50が転送パルスφT2によって制御される形態として示した。図20(a)では、転送MOSトランジスタ20、50が共に同じ転送パルスφTによって制御される形態としている。また、図4では、フォトダイオード1、51のそれぞれが生成した信号電荷が増幅MOSトランジスタ5に転送される形態として示した。図20(a)では、フォトダイオード1で生成した信号電荷が転送MOSトランジスタ20を介して増幅MOSトランジスタ5−1に転送される。また、フォトダイオード51で生成した信号電荷が転送MOSトランジスタ50を介して増幅MOSトランジスタ5−2に転送される。増幅MOSトランジスタ5−1、5−2はそれぞれの入力ノードに転送された信号電荷に基づく信号を、選択MOSトランジスタ6−1、6−2を介して垂直信号線7−11、7−12に出力する。フォトダイオード1が生成した信号電荷に基づいて垂直信号線7−11に出力される信号がA信号である。また、フォトダイオード51が生成した信号電荷に基づいて垂直信号線7−12に出力される信号がB信号である。 FIG. 20A is an example of the pixel configuration of this embodiment. In FIG. 20A, members having the same functions as the members shown in FIG. 4 are designated by the same reference numerals as those assigned in FIG. In the pixels shown in FIG. 4, the transfer MOS transistor 20 is controlled by the transfer pulse φT1 and the transfer MOS transistor 50 is controlled by the transfer pulse φT2. In FIG. 20A, the transfer MOS transistors 20 and 50 are both controlled by the same transfer pulse φT. Further, in FIG. 4, the signal charges generated by the photodiodes 1 and 51 are transferred to the amplification MOS transistor 5. In FIG. 20A, the signal charge generated by the photodiode 1 is transferred to the amplification MOS transistor 5-1 via the transfer MOS transistor 20. Further, the signal charge generated by the photodiode 51 is transferred to the amplification MOS transistor 5-2 via the transfer MOS transistor 50. The amplification MOS transistors 5-1 and 5-2 transfer the signal based on the signal charge transferred to the respective input nodes to the vertical signal lines 7-11 and 7-12 via the selection MOS transistors 6-1 and 6-2. Output. The signal output to the vertical signal line 7-11 based on the signal charge generated by the photodiode 1 is the A signal. Further, the signal output to the vertical signal line 7-12 based on the signal charge generated by the photodiode 51 is the B signal.

図20(b)は、本実施例の撮像装置の構成の一例を示した図である。図20(b)では、図18(a)に示した部材と同じ機能を有する部材については、図18(a)で付した符号と同じ符号を付して表している。1列目の画素100から垂直信号線7−11に出力されたA信号(以下、A1信号)は比較回路9−11に出力される。同様に、垂直信号線7−12に出力されたB信号(以下、B1信号)は、比較回路9−12に出力される。2列目の画素100から垂直信号線7−21に出力されたA信号(以下、A2信号)は、比較回路9−21に出力される。また、2列目の画素100から垂直信号線7−22に出力されたB信号(以下、B2信号)は、比較回路9−22に出力される。3列目の画素100から垂直信号線7−31に出力されたA信号(以下、A3信号)は、比較回路9−31に出力される。また、3列目の画素100から垂直信号線7−32に出力されたB信号(以下、B3信号)は、比較回路9−32に出力される。比較回路9のそれぞれは、垂直信号線7に出力された信号とランプ信号VRAMPとを比較した比較結果信号coをそれぞれカウンタ制御部30に出力する。 FIG. 20B is a diagram showing an example of the configuration of the image pickup apparatus of this embodiment. In FIG. 20 (b), the members having the same functions as the members shown in FIG. 18 (a) are designated by the same reference numerals as those assigned in FIG. 18 (a). The A signal (hereinafter, A1 signal) output from the pixel 100 in the first row to the vertical signal line 7-11 is output to the comparison circuit 9-11. Similarly, the B signal (hereinafter, B1 signal) output to the vertical signal line 7-12 is output to the comparison circuit 9-12. The A signal (hereinafter, A2 signal) output from the pixel 100 in the second row to the vertical signal line 7-21 is output to the comparison circuit 9-21. Further, the B signal (hereinafter, B2 signal) output from the pixel 100 in the second row to the vertical signal line 7-22 is output to the comparison circuit 9-22. The A signal (hereinafter referred to as A3 signal) output from the pixel 100 in the third row to the vertical signal line 7-31 is output to the comparison circuit 9-31. Further, the B signal (hereinafter, B3 signal) output from the pixel 100 in the third row to the vertical signal line 7-32 is output to the comparison circuit 9-32. Each of the comparison circuits 9 outputs a comparison result signal co comparing the signal output to the vertical signal line 7 and the lamp signal VRAMP to the counter control unit 30, respectively.

次に、図21を参照しながら、図20(b)に示した撮像装置のカウンタ回路11−1〜11−3の動作について説明する。図21に示した動作は、カウンタ回路11−1がA1+B1信号、カウンタ回路11−2がA1+A3信号、カウンタ回路11−3がA2+B2信号、カウンタ回路11−5がA3+B3信号を生成する形態である。 Next, the operation of the counter circuits 11-1 to 11-3 of the image pickup apparatus shown in FIG. 20B will be described with reference to FIG. 21. The operation shown in FIG. 21 is such that the counter circuit 11-1 generates an A1 + B1 signal, the counter circuit 11-2 generates an A1 + A3 signal, the counter circuit 11-3 generates an A2 + B2 signal, and the counter circuit 11-5 generates an A3 + B3 signal.

まず、比較結果信号co1〜co5は全てHレベルとなっている。この時、信号se1、se2、se3はLレベルであり、信号de1、de2、de3はHレベルである。カウンタ回路11−1、11−2、11−3はそれぞれ、ダブルカウント動作でクロック信号clkを計数する。 First, the comparison result signals co1 to co5 are all at the H level. At this time, the signals se1, se2, and se3 are at the L level, and the signals de1, de2, and de3 are at the H level. The counter circuits 11-1, 11-2, and 11-3 each count the clock signal clk in a double count operation.

次に、比較結果信号co3がHレベルからLレベルに変化する。これにより、信号se3がLレベルからHレベルに変化する。また、信号de3がHレベルからLレベルに変化する。これにより、カウンタ回路11−3は、シングルカウント動作でクロック信号clkを計数する。 Next, the comparison result signal co3 changes from the H level to the L level. As a result, the signal se3 changes from the L level to the H level. Further, the signal de3 changes from the H level to the L level. As a result, the counter circuit 11-3 counts the clock signal clk in a single count operation.

次に、比較結果信号co2がHレベルからLレベルに変化する。これにより、信号se1がLレベルからHレベルに変化する。また、信号de1がHレベルからLレベルに変化する。これにより、カウンタ回路11−1はシングルカウント動作でクロック信号clkを計数する。 Next, the comparison result signal co2 changes from the H level to the L level. As a result, the signal se1 changes from the L level to the H level. Further, the signal de1 changes from the H level to the L level. As a result, the counter circuit 11-1 counts the clock signal clk in a single count operation.

次に、比較結果信号co4がHレベルからLレベルに変化する。これにより、信号se3がHレベルからLレベルに変化する。よって、カウンタ回路11−3はこの時点でのカウント信号を保持する。この保持したカウント信号が、A2+B2信号に基づくデジタルA2+B2信号である。 Next, the comparison result signal co4 changes from the H level to the L level. As a result, the signal se3 changes from the H level to the L level. Therefore, the counter circuit 11-3 holds the count signal at this point. The held count signal is a digital A2 + B2 signal based on the A2 + B2 signal.

次に、比較結果信号co1がHレベルからLレベルに変化する。これにより、信号se1がHレベルからLレベルに変化する。よって、カウンタ回路11−1はこの時点でのカウント信号を保持する。この保持したカウント信号が、A1+B1信号に基づくデジタルA1+B1信号である。 Next, the comparison result signal co1 changes from the H level to the L level. As a result, the signal se1 changes from the H level to the L level. Therefore, the counter circuit 11-1 holds the count signal at this point. The held count signal is a digital A1 + B1 signal based on the A1 + B1 signal.

次に、比較結果信号co5がHレベルからLレベルに変化する。これにより、信号se2がHレベルからLレベルに変化する。 Next, the comparison result signal co5 changes from the H level to the L level. As a result, the signal se2 changes from the H level to the L level.

次に、TGは信号mtxをHレベルとする。これにより、カウンタ回路11−1、11−2、11−3が保持したデジタル信号がそれぞれメモリ13−1、13−2、13−3に出力される。 Next, TG sets the signal mtx to H level. As a result, the digital signals held by the counter circuits 11-1, 11-2, and 11-3 are output to the memories 13-1, 13-2, and 13-3, respectively.

本実施例のメモリ13が保持するデジタルA信号は、複数列のA信号を加算した信号に基づくデジタル信号である。よって、デジタルA+B信号に比して、デジタルA信号を保持するメモリ13の数が少なくなるため、DSP80に出力されるデジタルA信号の信号量はデジタルA+B信号の信号量に比して少なくなる。よって、本実施例の撮像装置においても、実施例8で述べた効果と同様の効果を得ることができる。 The digital A signal held by the memory 13 of this embodiment is a digital signal based on a signal obtained by adding a plurality of rows of A signals. Therefore, since the number of memories 13 holding the digital A signal is smaller than that of the digital A + B signal, the signal amount of the digital A signal output to the DSP 80 is smaller than the signal amount of the digital A + B signal. Therefore, even in the image pickup apparatus of this embodiment, the same effect as that described in Example 8 can be obtained.

[実施例10]
本実施例の撮像装置について、図面を参照しながら説明する。本実施例の撮像装置はDSP80が複数列のデジタルA信号を加算して出力する形態である。
[Example 10]
The imaging apparatus of this embodiment will be described with reference to the drawings. The image pickup apparatus of this embodiment has a mode in which the DSP 80 adds and outputs a plurality of rows of digital A signals.

図22(a)は本実施例の撮像装置の構成の一例を示した図である。1列目の画素100の出力したA信号、A+B信号は、それぞれ比較回路9−1に出力される。比較回路9−1、カウンタ回路11−1、メモリ13−1はA変換期間、A+B変換期間でデジタルA信号、デジタルA+B信号をそれぞれ生成する。他の列の信号処理回路も同様に、デジタルA信号、デジタルA+B信号をそれぞれ生成する。水平転送部141は、水平走査部142の信号に基づいて、各列のメモリ13からデジタルA信号、デジタルA+B信号をそれぞれDSP80に出力させる。 FIG. 22A is a diagram showing an example of the configuration of the image pickup apparatus of this embodiment. The A signal and the A + B signal output by the pixel 100 in the first row are output to the comparison circuit 9-1, respectively. The comparison circuit 9-1, the counter circuit 11-1, and the memory 13-1 generate a digital A signal and a digital A + B signal in the A conversion period and the A + B conversion period, respectively. Similarly, the signal processing circuits in the other rows also generate digital A signals and digital A + B signals, respectively. The horizontal transfer unit 141 causes the DSP 80 to output a digital A signal and a digital A + B signal from the memory 13 in each row based on the signal of the horizontal scanning unit 142.

図22(b)は、本実施例のDSP80が出力する信号を表した図である。入力信号とは、水平転送部141によって各列のメモリ13からDSP80に出力される信号を表している。出力信号は、DSP80が出力する信号である。まず、1列目から順に各メモリ13からデジタルA信号がDSP80に出力される。DSP80は、複数列のデジタルA信号を加算した信号を出力する。図22(b)では、1列目と3列目のメモリ13が保持したデジタルA信号を加算したデジタル信号を出力する。以降、同様に、2列目と4列目、5列目と7列目、のデジタルA信号を加算したデジタル信号を出力する。 FIG. 22B is a diagram showing a signal output by the DSP 80 of this embodiment. The input signal represents a signal output from the memory 13 in each column to the DSP 80 by the horizontal transfer unit 141. The output signal is a signal output by the DSP 80. First, the digital A signal is output to the DSP 80 from each memory 13 in order from the first row. The DSP 80 outputs a signal obtained by adding a plurality of rows of digital A signals. In FIG. 22B, a digital signal obtained by adding the digital A signals held by the memories 13 in the first and third rows is output. After that, similarly, the digital signal obtained by adding the digital A signals of the second row, the fourth row, the fifth row and the seventh row is output.

水平転送部141が各メモリ13からDSP80にデジタルA信号を出力させた後、水平転送部141は各メモリ13からDSP80にデジタルA+B信号を出力させる。 After the horizontal transfer unit 141 outputs a digital A signal from each memory 13 to the DSP 80, the horizontal transfer unit 141 causes each memory 13 to output a digital A + B signal to the DSP 80.

DSP80は、各列から出力されたデジタルA+B信号を順次出力する。 The DSP 80 sequentially outputs the digital A + B signals output from each column.

2行目の画素100のA信号、A+B信号に基づくデジタルA信号、デジタルA+B信号についても、DSP80は1行目の画素のA信号、A+B信号に基づくデジタルA信号、デジタルA+B信号と同様の処理とすることができる。 Regarding the A signal of the second row pixel 100, the digital A signal based on the A + B signal, and the digital A + B signal, the DSP 80 processes the same as the A signal of the first row pixel, the digital A signal based on the A + B signal, and the digital A + B signal. Can be.

これにより、撮像装置から出力されるデジタルA信号の信号量を、デジタルA+B信号の信号量よりも少なくすることができる。これにより、実施例2の撮像装置と同様の効果を得ることができる。 As a result, the signal amount of the digital A signal output from the image pickup apparatus can be made smaller than the signal amount of the digital A + B signal. As a result, the same effect as that of the image pickup apparatus of the second embodiment can be obtained.

また、本実施例では、複数列のデジタルA信号をDSP80が加算する形態を示した。他の形態として、図23(a)に示すように、複数行のA信号に基づくデジタルA信号を加算する形態としても良い。図23(a)では、水平転送部141が各列のメモリ13から1行目の画素100のA信号に基づくデジタルA信号をDSP80に出力させる。DSP80は、各デジタルA信号を保持する。そして、水平転送部141が各列のメモリ13から1行目の画素100のA+B信号に基づくデジタルA+B信号をDSP80に出力させる。DSP80は、各列のデジタルA+B信号を出力する。次に、水平転送部141が各列のメモリ13から2行目の画素100のA信号に基づくデジタルA信号をDSP80に出力させる。DSP80は、2行目の画素100のA信号に基づくデジタルA信号と、保持していた1行目の画素100のA信号に基づくデジタルA信号と、を加算した信号を出力する。次に、水平転送部141が各列のメモリ13から2行目の画素100のA+B信号に基づくデジタルA+B信号をDSP80に出力させる。DSP80は、各列のデジタルA+B信号を出力する。 Further, in this embodiment, a mode in which the DSP80 adds a plurality of rows of digital A signals is shown. As another form, as shown in FIG. 23A, a digital A signal based on a plurality of lines of A signals may be added. In FIG. 23A, the horizontal transfer unit 141 causes the DSP 80 to output a digital A signal based on the A signal of the pixel 100 in the first row from the memory 13 in each column. The DSP 80 holds each digital A signal. Then, the horizontal transfer unit 141 causes the DSP 80 to output a digital A + B signal based on the A + B signal of the pixel 100 in the first row from the memory 13 in each column. The DSP 80 outputs a digital A + B signal for each column. Next, the horizontal transfer unit 141 causes the DSP 80 to output a digital A signal based on the A signal of the pixel 100 in the second row from the memory 13 in each column. The DSP 80 outputs a signal obtained by adding a digital A signal based on the A signal of the pixel 100 in the second row and a digital A signal based on the A signal of the pixel 100 in the first row held. Next, the horizontal transfer unit 141 causes the DSP 80 to output a digital A + B signal based on the A + B signal of the pixel 100 in the second row from the memory 13 in each column. The DSP 80 outputs a digital A + B signal for each column.

よって、図23(a)の形態においても、図22(b)に述べた形態と同様の効果を得ることができる。 Therefore, even in the form of FIG. 23 (a), the same effect as that of the form described in FIG. 22 (b) can be obtained.

また、他の形態として、図23(b)のように、1行目の画素100のA+B信号に基づくデジタルA+B信号がDSP80に出力されてから、DSP80が複数のデジタルA信号を加算した信号を出力する形態であっても良い。 Further, as another form, as shown in FIG. 23B, after the digital A + B signal based on the A + B signal of the pixel 100 in the first row is output to the DSP80, the DSP80 adds a plurality of digital A signals to the signal. It may be in the form of output.

本実施例では撮像装置がDSP80を有する形態としたが、DSP80は、撮像装置の外部に設けられた出力信号処理部の形態であっても良い。 In this embodiment, the imaging device has a DSP 80, but the DSP 80 may be in the form of an output signal processing unit provided outside the imaging device.

[実施例11]
本実施例の撮像装置について、実施例10と異なる点を中心に説明する。
[Example 11]
The image pickup apparatus of this embodiment will be described focusing on the points different from those of the tenth embodiment.

図24(a)は本実施例の撮像装置の構成の一例を示した図である。本実施例では、水平転送部141を水平転送部141−1、141−2の複数とし、複数チャンネルで各列のメモリ13からデジタル信号をDSP80に出力させる形態である。 FIG. 24A is a diagram showing an example of the configuration of the image pickup apparatus of this embodiment. In this embodiment, the horizontal transfer units 141 are a plurality of horizontal transfer units 141-1 and 141-2, and digital signals are output to the DSP 80 from the memory 13 in each row on a plurality of channels.

図24(b)は、図24(a)に示した撮像装置において、DSP80に出力されるデジタル信号と、DSP80が出力するデジタル信号と、を表した図である。 FIG. 24B is a diagram showing a digital signal output to the DSP 80 and a digital signal output by the DSP 80 in the image pickup apparatus shown in FIG. 24 (a).

図24(b)に示した入力信号1は、水平転送部141−1によって各列のメモリ13からDSP80に出力されるデジタル信号を表している。また、入力信号2は、水平転送部141−2によって各列のメモリ13からDSP80に出力されるデジタル信号を表している。出力信号は、DSP80が出力するデジタル信号を表している。 The input signal 1 shown in FIG. 24B represents a digital signal output from the memory 13 in each row to the DSP 80 by the horizontal transfer unit 141-1. Further, the input signal 2 represents a digital signal output from the memory 13 in each row to the DSP 80 by the horizontal transfer unit 141-2. The output signal represents a digital signal output by the DSP 80.

入力信号1と入力信号2として、まず各列のメモリ13から1行目の画素100のA信号に基づくデジタルA信号がDSP80に出力される。DSP80は、入力信号1と入力信号2のデジタルA信号を加算した信号を出力する。次に、入力信号1として、各列のメモリ13から1行目の画素100のA+B信号に基づくデジタルA+B信号がDSP80に出力される。DSP80はデジタルA+B信号を出力する。2行目の画素100のA信号に基づくデジタルA信号についても、DSP80は入力信号1と入力信号2のデジタルA信号を加算した信号を出力する。図24(b)では、2行目の画素100のA信号に基づくデジタルA信号については、各列のメモリ13からデジタルA信号がDSP80に出力された後に、DSP80が複数のデジタルA信号を加算した信号を出力する形態を示した。他の形態として、1行目の画素100のA信号に基づくデジタルA信号と同様に、各列のメモリ13からDSP80にデジタルA信号が出力されるのと並行して、DSP80が複数のデジタルA信号を加算した信号を出力する形態であっても良い。 As the input signal 1 and the input signal 2, first, a digital A signal based on the A signal of the pixel 100 in the first row from the memory 13 in each column is output to the DSP 80. The DSP 80 outputs a signal obtained by adding the digital A signal of the input signal 1 and the input signal 2. Next, as the input signal 1, a digital A + B signal based on the A + B signal of the pixel 100 in the first row from the memory 13 in each column is output to the DSP 80. The DSP80 outputs a digital A + B signal. Regarding the digital A signal based on the A signal of the pixel 100 in the second row, the DSP 80 also outputs a signal obtained by adding the digital A signal of the input signal 1 and the input signal 2. In FIG. 24B, with respect to the digital A signal based on the A signal of the pixel 100 in the second row, the DSP 80 adds a plurality of digital A signals after the digital A signal is output to the DSP 80 from the memory 13 of each column. The form of outputting the signal is shown. As another form, similarly to the digital A signal based on the A signal of the pixel 100 in the first row, the DSP 80 has a plurality of digital A signals in parallel with the digital A signal being output from the memory 13 of each column to the DSP 80. It may be in the form of outputting a signal obtained by adding signals.

本実施例の撮像装置においても、実施例10と同様の効果を得ることができる。また、本実施例によれば、DSP80にデジタルA信号が出力されるのとほぼ同時に、DSP80が複数のデジタルA信号を加算した信号を出力できる。よって、メモリ13からデジタル信号がDSP80に出力されてから、DSP80がデジタル信号の出力を終えるまでの期間を実施例10の図23(a)、図23(b)のいずれの形態に比しても短縮することができる。 In the image pickup apparatus of this embodiment, the same effect as that of the tenth embodiment can be obtained. Further, according to this embodiment, the DSP 80 can output a signal obtained by adding a plurality of digital A signals almost at the same time as the digital A signal is output to the DSP 80. Therefore, the period from the output of the digital signal from the memory 13 to the DSP 80 until the DSP 80 finishes the output of the digital signal is compared with any of the modes of FIGS. 23 (a) and 23 (b) of the tenth embodiment. Can also be shortened.

本実施例では撮像装置がDSP80を有する形態としたが、DSP80は、撮像装置の外部に出力信号処理部が設けられた形態であっても良い。 In this embodiment, the imaging device has a DSP 80, but the DSP 80 may have an output signal processing unit provided outside the imaging device.

[実施例12]
本実施例の撮像装置を図25(a)に示す。本実施例の撮像装置は、図20(b)に示したように、A信号とB信号とが異なる垂直信号線7に出力される形態である。図25(a)に示した撮像装置では、1列目の画素100からA信号が比較回路9−11に出力され、B信号が比較回路9−12に出力される。比較回路9−11はA信号とランプ信号VRAMPとを比較し、比較結果信号に基づいてカウンタ回路11−11がカウント信号を保持する。このカウント信号がデジタルA信号である。同様に、比較回路9−12はA+B信号とランプ信号VRAMPとを比較し、比較結果信号に基づいてカウンタ回路11−12がカウント信号を保持する。このカウント信号がデジタルB信号である。メモリ13−11、13−12はそれぞれカウンタ回路11−11、11−12が保持したデジタルA信号、デジタルB信号を保持する。他の列についても、奇数列のメモリ13がデジタルA信号、偶数列のメモリ13がデジタルB信号を保持する。
[Example 12]
The image pickup apparatus of this embodiment is shown in FIG. 25 (a). As shown in FIG. 20B, the image pickup apparatus of this embodiment has a form in which the A signal and the B signal are output to different vertical signal lines 7. In the image pickup apparatus shown in FIG. 25 (a), the A signal is output to the comparison circuit 9-11 from the pixels 100 in the first row, and the B signal is output to the comparison circuit 9-12. The comparison circuit 9-11 compares the A signal and the lamp signal VRAMP, and the counter circuit 11-11 holds the count signal based on the comparison result signal. This count signal is a digital A signal. Similarly, the comparison circuit 9-12 compares the A + B signal with the lamp signal VRAMP, and the counter circuit 11-12 holds the count signal based on the comparison result signal. This count signal is a digital B signal. The memories 13-11 and 13-12 hold the digital A signal and the digital B signal held by the counter circuits 11-11 and 11-12, respectively. As for the other columns, the odd-numbered column memory 13 holds the digital A signal and the even-numbered column memory 13 holds the digital B signal.

図25(b)は、図25(a)に示した撮像装置において、DSP80に出力されるデジタル信号と、DSP80が出力するデジタル信号と、を表した図である。 FIG. 25 (b) is a diagram showing a digital signal output to the DSP 80 and a digital signal output by the DSP 80 in the image pickup apparatus shown in FIG. 25 (a).

まず、水平転送部141は各列のメモリ13からデジタルA信号およびデジタルB信号をDSP80に出力する。DSP80は、同じ画素100に基づくデジタルA信号、デジタルB信号を加算したデジタルA+B信号を出力する。 First, the horizontal transfer unit 141 outputs the digital A signal and the digital B signal from the memory 13 in each row to the DSP 80. The DSP 80 outputs a digital A + B signal obtained by adding a digital A signal and a digital B signal based on the same pixel 100.

DSP80は各列の画素100のデジタルA信号、デジタルB信号を出力した後、DSP80は、複数列のメモリ13のデジタルA信号を加算した信号を出力する。 After the DSP 80 outputs the digital A signal and the digital B signal of the pixels 100 in each row, the DSP 80 outputs a signal obtained by adding the digital A signals of the memories 13 in the plurality of rows.

これにより、撮像装置から出力されるデジタルA信号の信号量を、デジタルA+B信号の信号量よりも少なくすることができる。これにより、実施例2の撮像装置と同様の効果を得ることができる。 As a result, the signal amount of the digital A signal output from the image pickup apparatus can be made smaller than the signal amount of the digital A + B signal. As a result, the same effect as that of the image pickup apparatus of the second embodiment can be obtained.

他の形態として、図25(a)に示した撮像装置において、水平転送部141が図24(a)のように、複数設けられている形態であっても良い。この形態の場合においても、図26(a)に示すように、DSP80がデジタルA+B信号を出力した後、DSP80が複数のデジタルA信号を加算した信号を出力する形態とすることができる。また、図26(b)に示す形態としても良い。つまり、DSP80が1行目と2行目の画素100のA信号、B信号に基づくデジタルA+B信号を出力する。その後、DSP80が1行目の画素100のA信号に基づくデジタルA信号と、2行目の画素100のA信号に基づくデジタルA信号と、を加算した信号を出力する。この形態であっても、実施例2の撮像装置と同様の効果を得ることができる。 As another form, in the image pickup apparatus shown in FIG. 25 (a), a plurality of horizontal transfer units 141 may be provided as shown in FIG. 24 (a). Also in the case of this form, as shown in FIG. 26A, after the DSP 80 outputs a digital A + B signal, the DSP 80 can output a signal obtained by adding a plurality of digital A signals. Further, the form shown in FIG. 26B may be used. That is, the DSP 80 outputs a digital A + B signal based on the A signal and the B signal of the pixels 100 in the first and second rows. After that, the DSP 80 outputs a signal obtained by adding a digital A signal based on the A signal of the pixel 100 in the first row and a digital A signal based on the A signal of the pixel 100 in the second row. Even in this embodiment, the same effect as that of the image pickup apparatus of the second embodiment can be obtained.

本実施例では撮像装置がDSP80を有する形態としたが、DSP80は、撮像装置の外部に設けられた出力信号処理部の形態であっても良い。 In this embodiment, the imaging device has a DSP 80, but the DSP 80 may be in the form of an output signal processing unit provided outside the imaging device.

[実施例13]
本実施例の撮像装置について、実施例12と異なる点を中心に説明する。
[Example 13]
The image pickup apparatus of this embodiment will be described focusing on the points different from those of the twelfth embodiment.

図27(a)は本実施例の撮像装置の構成の一例を示した図である。本実施例の撮像装置は、水平転送部141を水平転送部141−1、141−2、141−3、141−4の4つとした構成である。その他の構成については、図25(a)に示した撮像装置と同様とすることができる。本実施例の撮像装置は水平転送部141−1、141−2、141−3、141−4を有することにより、メモリ13−11、13−12、13−21、13−22からDSP80に同時にデジタル信号を出力させることができる。つまり、メモリ13からDSP80に4チャンネルでデジタル信号を出力させることができる。一方で、本実施例のDSP80は3チャンネルでの出力としている。 FIG. 27A is a diagram showing an example of the configuration of the image pickup apparatus of this embodiment. The image pickup apparatus of this embodiment has a configuration in which the horizontal transfer unit 141 is composed of four horizontal transfer units 141-1, 141-2, 141-3, and 141-4. Other configurations can be the same as those of the image pickup apparatus shown in FIG. 25 (a). The image pickup apparatus of this embodiment has the horizontal transfer units 141-1, 141-2, 141-3, 141-4, so that the memories 13-11, 13-12, 13-21, 13-22 can be simultaneously transferred to the DSP80. A digital signal can be output. That is, it is possible to output a digital signal from the memory 13 to the DSP 80 in 4 channels. On the other hand, the DSP 80 of this embodiment has an output of 3 channels.

次に、図27(b)を参照しながら、図27(a)に示した撮像装置の動作の一例を説明する。 Next, an example of the operation of the image pickup apparatus shown in FIG. 27 (a) will be described with reference to FIG. 27 (b).

図27(b)に示した入力信号1〜4はそれぞれ、水平転送部141−1〜141−4がメモリ13からDSP80に出力するデジタル信号を示している。また、図27(b)に示した出力信号1〜3はDSP80が出力するデジタル信号を示している。 The input signals 1 to 4 shown in FIG. 27B indicate digital signals output from the memory 13 to the DSP 80 by the horizontal transfer units 141 to 141-4, respectively. The output signals 1 to 3 shown in FIG. 27B indicate digital signals output by the DSP 80.

まず、入力信号1、入力信号3として、1行目の画素100のA信号に基づくデジタルA信号がDSP80に出力される。また、入力信号2、入力信号4として、1行目の画素100のB信号に基づくデジタルA+B信号がDSP80に出力される。DSP80は出力信号1、出力信号2として、1行目の同じ画素100のA信号とB信号に基づくデジタルA信号とデジタルB信号とを加算したデジタルA+B信号を出力する。また、DSP80は出力信号3として、画素100のA信号に基づくデジタルA信号同士を加算した信号を出力する。以降、2行目、3行目の画素100のA信号、B信号についても、1行目の画素100のA信号、B信号と同様の処理とすることができる。 First, as the input signal 1 and the input signal 3, a digital A signal based on the A signal of the pixel 100 in the first line is output to the DSP 80. Further, as the input signal 2 and the input signal 4, a digital A + B signal based on the B signal of the pixel 100 in the first line is output to the DSP 80. As the output signal 1 and the output signal 2, the DSP 80 outputs a digital A + B signal obtained by adding the digital A signal and the digital B signal based on the A signal and the B signal of the same pixel 100 in the first line. Further, the DSP 80 outputs a signal obtained by adding digital A signals based on the A signal of the pixel 100 as the output signal 3. After that, the A signal and the B signal of the pixel 100 in the second and third rows can be processed in the same manner as the A signal and the B signal of the pixel 100 in the first row.

本実施例の撮像装置では、DSP80から出力されるデジタルA信号の信号量は、全列のメモリ13のデジタルA信号を出力する形態よりも少ない。よって、実施例12の撮像装置と同様の効果を得ることができる。また、メモリ13からDSP80に4チャンネルでデジタルA信号が出力される。これにより、メモリ13からDSP80にデジタルA信号が出力されるのとほぼ同時に、DSP80が複数列のデジタルA信号を加算した信号を出力することができる。よって、メモリ13からDSP80に1チャンネルでデジタルA信号が出力される形態に比して、本実施例の撮像装置は、メモリ13からDSP80にデジタルA信号が出力されてから、DSP80が複数のデジタルA信号を加算した信号の出力を終えるまでの期間を短縮することができる。また、DSP80は同時に入力されるデジタル信号を加算して出力するため、DSP80内の、一時的にデジタル信号を保持するメモリを実施例12の形態に比して少なくすることができる。 In the image pickup apparatus of this embodiment, the amount of the digital A signal output from the DSP 80 is smaller than that of the form of outputting the digital A signal of the memory 13 in all rows. Therefore, the same effect as that of the image pickup apparatus of Example 12 can be obtained. Further, a digital A signal is output from the memory 13 to the DSP 80 in 4 channels. As a result, the DSP 80 can output a signal obtained by adding a plurality of rows of digital A signals at substantially the same time as the digital A signal is output from the memory 13 to the DSP 80. Therefore, compared to the mode in which the digital A signal is output from the memory 13 to the DSP 80 in one channel, in the imaging device of this embodiment, after the digital A signal is output from the memory 13 to the DSP 80, the DSP 80 has a plurality of digital digital signals. It is possible to shorten the period until the output of the signal to which the A signal is added is completed. Further, since the DSP 80 adds and outputs the digital signals input at the same time, the memory in the DSP 80 for temporarily holding the digital signal can be reduced as compared with the embodiment of the twelfth embodiment.

本実施例では撮像装置がDSP80を有する形態としたが、DSP80は、撮像装置の外部に設けられた出力信号処理部の形態であっても良い。 In this embodiment, the imaging device has a DSP 80, but the DSP 80 may be in the form of an output signal processing unit provided outside the imaging device.

尚、実施例8〜13では、画素100の出力するA信号、B信号、A+B信号が比較回路9に出力される形態を示した。この形態に限定されるものではなく、画素100と比較回路9との間の電気的経路に、実施例1のようにオペアンプ8を設けた形態としても良い。 In Examples 8 to 13, the A signal, the B signal, and the A + B signal output by the pixel 100 are output to the comparison circuit 9. The present invention is not limited to this form, and an operational amplifier 8 may be provided in the electrical path between the pixel 100 and the comparison circuit 9 as in the first embodiment.

[実施例14]
本実施例の撮像装置について、実施例10と異なる点を中心に説明する。図28(a)は本実施例の撮像装置の構成の一例である。画素100の出力するA信号、A+B信号はオペアンプ8に出力される。オペアンプ8は、A信号、A+B信号を増幅して比較回路9に出力する。
[Example 14]
The image pickup apparatus of this embodiment will be described focusing on the points different from those of the tenth embodiment. FIG. 28A is an example of the configuration of the image pickup apparatus of this embodiment. The A signal and A + B signal output by the pixel 100 are output to the operational amplifier 8. The operational amplifier 8 amplifies the A signal and the A + B signal and outputs them to the comparison circuit 9.

本実施例では、画素100の各列に、カウンタ回路11が2つ設けられている。1列目の画素100の設けられた列に対応して、カウンタ回路11−11、11−12が設けられている。カウンタ回路11−11は、複数行の画素100のデジタルA信号を加算したデジタル信号を生成するカウンタ回路である。カウンタ回路11−12は、デジタルA+B信号を生成するカウンタ回路である。本実施例では、水平転送部141がカウンタ回路11からデジタル信号をDSP80に出力させる形態としている。 In this embodiment, two counter circuits 11 are provided in each row of the pixels 100. Counter circuits 11-11 and 11-12 are provided corresponding to the row in which the pixel 100 is provided in the first row. The counter circuit 11-11 is a counter circuit that generates a digital signal by adding the digital A signals of the pixels 100 of a plurality of lines. The counter circuit 11-12 is a counter circuit that generates a digital A + B signal. In this embodiment, the horizontal transfer unit 141 outputs a digital signal from the counter circuit 11 to the DSP 80.

図28(b)を参照しながら、図28(a)に示した撮像装置のカウンタ回路11−11、11−12の動作を中心に説明する。カウンタ回路11−11、11−12のカウント動作において、カウント値を増加させるか減少させるかは、TG12によって制御される。 The operation of the counter circuits 11-11 and 11-12 of the image pickup apparatus shown in FIG. 28 (a) will be mainly described with reference to FIG. 28 (b). In the counting operation of the counter circuits 11-11 and 11-12, whether to increase or decrease the count value is controlled by the TG 12.

1行目の画素100のN変換においては、カウンタ回路11−11、11−12は初期値からカウント値が減少する方向でカウント動作を行う。そして、A変換では、カウンタ回路11−11がN変換で保持したカウント値から増加する方向でカウント動作を行う。このA変換でカウンタ回路11−11が保持したデジタルA信号は、A信号からN信号を差し引いた信号に基づくデジタル信号である。 In the N conversion of the pixel 100 in the first row, the counter circuits 11-11 and 11-12 perform the counting operation in the direction in which the count value decreases from the initial value. Then, in the A conversion, the counter circuit 11-11 performs the counting operation in the direction of increasing from the count value held in the N conversion. The digital A signal held by the counter circuits 11-11 in this A conversion is a digital signal based on the signal obtained by subtracting the N signal from the A signal.

A+B変換では、カウンタ回路11−12が、N変換で保持したカウント値から増加する方向でカウント動作を行う。このA+B変換でカウンタ回路11−12が保持したデジタルA+B信号は、A+B信号からN信号を差し引いた信号に基づくデジタル信号である。水平転送部141は、カウンタ回路11−12からデジタルA+B信号をDSP80に出力させる。そして、TG12はカウンタ回路11−12のカウント値をリセットする。 In the A + B conversion, the counter circuit 11-12 performs the counting operation in the direction of increasing from the count value held in the N conversion. The digital A + B signal held by the counter circuit 11-12 in this A + B conversion is a digital signal based on the signal obtained by subtracting the N signal from the A + B signal. The horizontal transfer unit 141 causes the DSP 80 to output a digital A + B signal from the counter circuit 11-12. Then, the TG 12 resets the count value of the counter circuit 11-12.

次に、2行目の画素100のN変換を行う。カウンタ回路11−11は、先の1行目の画素100のA信号に基づくデジタルA信号のカウント値から減少する方向でカウント動作を行う。カウンタ回路11−12はリセットされたカウント値から減少する方向でカウント動作を行う。 Next, N conversion of the pixel 100 in the second row is performed. The counter circuit 11-11 performs the counting operation in the direction of decreasing from the count value of the digital A signal based on the A signal of the pixel 100 in the first row. The counter circuit 11-12 performs the counting operation in the direction of decreasing from the reset count value.

そして、2行目の画素100のA変換では、カウンタ回路11−11は、2行目の画素100のN変換で保持したカウント値から増加する方向でカウント動作を行う。このA変換でカウンタ回路11−11が保持したデジタルA信号は、1行目の画素100と2行目の画素100のそれぞれの、A信号からN信号を差し引いた信号同士を加算した信号に基づくデジタル信号である。 Then, in the A conversion of the pixel 100 in the second row, the counter circuit 11-11 performs the counting operation in the direction of increasing from the count value held in the N conversion of the pixel 100 in the second row. The digital A signal held by the counter circuit 11-11 in this A conversion is based on the signal obtained by subtracting the N signal from the A signal of each of the pixel 100 in the first row and the pixel 100 in the second row. It is a digital signal.

次に、2行目の画素100のA+B変換では、カウンタ回路11−12は2行目の画素100のN変換で保持したカウント値から増加する方向でカウント動作を行う。このA+B変換でカウンタ回路11−12が保持したデジタルA+B信号は、2行目の画素100のA+B信号からN信号を差し引いた信号に基づくデジタル信号である。 Next, in the A + B conversion of the pixel 100 in the second row, the counter circuit 11-12 performs the counting operation in the direction of increasing from the count value held in the N conversion of the pixel 100 in the second row. The digital A + B signal held by the counter circuit 11-12 in this A + B conversion is a digital signal based on the signal obtained by subtracting the N signal from the A + B signal of the pixel 100 in the second row.

続いて、水平転送部141は、カウンタ11−11、11−12からそれぞれデジタル信号をDSP80に出力させる。 Subsequently, the horizontal transfer unit 141 causes the DSP 80 to output digital signals from the counters 11-11 and 11-12, respectively.

本実施例の撮像装置では、カウンタ回路11が複数行の画素100のA信号を加算した信号に基づくデジタル信号を生成する形態である。これにより、カウンタ回路11が各行の画素100のデジタルA信号を生成する形態に比して、カウンタ回路11からデジタルA信号をDSP80に出力させる期間を短縮することができる。また、カウンタ回路11が各行の画素100のデジタルA信号を生成する形態に比して、DSP80に出力されるデジタルA信号の信号量が減少する。これにより、DSP80の信号処理の負荷を低減することができる。 In the image pickup apparatus of this embodiment, the counter circuit 11 generates a digital signal based on a signal obtained by adding the A signals of the pixels 100 of a plurality of lines. As a result, the period for outputting the digital A signal from the counter circuit 11 to the DSP 80 can be shortened as compared with the form in which the counter circuit 11 generates the digital A signal of the pixels 100 in each row. Further, the signal amount of the digital A signal output to the DSP 80 is reduced as compared with the form in which the counter circuit 11 generates the digital A signal of the pixel 100 in each row. As a result, the load of signal processing of the DSP 80 can be reduced.

[実施例15]
本実施例の撮像装置について、図面を参照しながら説明する。
[Example 15]
The imaging apparatus of this embodiment will be described with reference to the drawings.

図29(a)は、本実施例の撮像装置の構成の一例を示した図である。本実施例の撮像装置は、実施例4の撮像装置のように、各列の信号処理回路がアナログ信号であるA信号、A+B信号を保持する形態である。図29(a)に示すように、各列に、A信号を保持するメモリC_A、A+B信号を保持するメモリC_ABが設けられている。水平走査回路14が信号φC_A、φC_ABをHレベルとすると、メモリC_A、C_ABからA信号、A+B信号がS信号線16に信号SIGOUTとして出力される。各メモリは、たとえば容量素子とスイッチから成るサンプルホールド回路で構成される。S信号線16には、容量CHの一方のノードが電気的に接続され、容量CHの他方のノードはグラウンド電位GNDが与えられている。 FIG. 29A is a diagram showing an example of the configuration of the image pickup apparatus of this embodiment. The image pickup apparatus of this embodiment has a form in which the signal processing circuits in each row hold the A signal and the A + B signal, which are analog signals, like the image pickup apparatus of the fourth embodiment. As shown in FIG. 29A, a memory C_A for holding the A signal and a memory C_AB for holding the A + B signal are provided in each row. When the horizontal scanning circuit 14 sets the signals φC_A and φC_AB to H level, the A signal and the A + B signal are output to the S signal line 16 as a signal SIGOUT from the memories C_A and C_AB. Each memory is composed of, for example, a sample hold circuit including a capacitive element and a switch. One node of the capacitance CH is electrically connected to the S signal line 16, and the other node of the capacitance CH is given a ground potential GND.

図29(b)は図29(a)に示した撮像装置の動作の一例を示した図である。 FIG. 29B is a diagram showing an example of the operation of the image pickup apparatus shown in FIG. 29A.

まず、水平走査回路14は、信号φC_AB1〜6を順次Hレベルとして、各列のメモリC_ABから、A+B信号を順次出力させる。 First, the horizontal scanning circuit 14 sequentially sets the signals φC_AB1 to 6 as H levels, and sequentially outputs A + B signals from the memory C_AB of each column.

そして、水平走査回路14は、信号φC_A1、φC_A2、φC_A3を同時にHレベルとする。これにより、メモリC_A1、C_A2、C_A3のそれぞれが保持していたA信号がS信号線16に同時に出力される。メモリC_A1、C_A2、C_A3のそれぞれの容量素子の容量値をC1、C2、C3とする。信号SIGOUTは、メモリC_A1、C_A2、C_A3の信号の和に、(C1+C2+C3)/(C1+C2+C3+CH)を乗じた値の信号となる。つまり、メモリC_A1、C_A2、C_A3のそれぞれが保持したA信号同士を加算した信号に基づく信号が出力される。 Then, the horizontal scanning circuit 14 sets the signals φC_A1, φC_A2, and φC_A3 to the H level at the same time. As a result, the A signal held by each of the memories C_A1, C_A2, and C_A3 is simultaneously output to the S signal line 16. Let the capacitance values of the capacitance elements of the memories C_A1, C_A2, and C_A3 be C1, C2, and C3. The signal SIGOUT is a signal having a value obtained by multiplying the sum of the signals of the memories C_A1, C_A2, and C_A3 by (C1 + C2 + C3) / (C1 + C2 + C3 + CH). That is, a signal based on the sum of the A signals held by the memories C_A1, C_A2, and C_A3 is output.

次に、水平走査回路14は、信号φC_A4、φC_A5、φC_A6を同時にHレベルとする。これにより、メモリC_A4、C_A5、C_A6のそれぞれが保持していたA信号が同時に出力される。これにより、出力される信号SIGOUTは、メモリC_A4、C_A5、C_A6のそれぞれが保持したA信号同士が加算された信号が出力される。 Next, the horizontal scanning circuit 14 sets the signals φC_A4, φC_A5, and φC_A6 to the H level at the same time. As a result, the A signal held by each of the memories C_A4, C_A5, and C_A6 is output at the same time. As a result, as the output signal SIGOUT, a signal obtained by adding the A signals held by the memories C_A4, C_A5, and C_A6 is output.

本実施例では、複数のメモリC_Aが保持したA信号を加算して出力する。これにより、各列のメモリC_AからそれぞれA信号を信号SIGOUTとして出力させる形態に比して、A信号をメモリC_Aから出力させる期間を短縮することができる。また、各列のメモリC_AからそれぞれA信号を信号SIGOUTとして出力させる形態に比してA信号の信号量が減少するため、撮像装置の外部に設けられたAD変換部の負荷を減らすことができる。 In this embodiment, the A signals held by the plurality of memories C_A are added and output. As a result, the period for outputting the A signal from the memory C_A can be shortened as compared with the form in which the A signal is output from the memory C_A in each column as the signal SIGOUT. Further, since the signal amount of the A signal is reduced as compared with the form in which the A signal is output as the signal SIGOUT from the memory C_A of each column, the load of the AD conversion unit provided outside the image pickup apparatus can be reduced. ..

本実施例では、3列のメモリC_AのA信号を加算する形態について説明したが、複数列のメモリC_AのA信号を加算する形態であれば良い。 In this embodiment, the mode in which the A signal of the memory C_A in the three columns is added has been described, but any form may be used as long as the A signal in the memory C_A in a plurality of columns is added.

[実施例16]
本実施例の撮像装置について、図面を参照しながら説明する。
[Example 16]
The imaging apparatus of this embodiment will be described with reference to the drawings.

図30(a)は、本実施例の撮像装置の構成の一例を示した図である。図30(a)では、図29(a)と同じ機能を有する部材については、図29(a)で付した符号と同一の符号を付して表している。図30(a)の撮像装置は、オペアンプ18−1,18−2が複数列の画素100のA信号を加算した信号を増幅してAD変換部40−3、40−7にそれぞれ出力する形態である。AD変換部40の構成は、図5、図8に示したいずれの形態であっても良い。 FIG. 30A is a diagram showing an example of the configuration of the image pickup apparatus of this embodiment. In FIG. 30A, the members having the same functions as those in FIG. 29A are designated by the same reference numerals as those in FIG. 29A. In the image pickup apparatus shown in FIG. 30A, the operational amplifiers 18-1 and 18-2 amplify the signal obtained by adding the A signals of the pixels 100 in a plurality of rows and output the signals to the AD converters 40-3 and 40-7, respectively. Is. The configuration of the AD conversion unit 40 may be any of the forms shown in FIGS. 5 and 8.

オペアンプ8−1、8−2、8−3、8−4、8−5、8−6はそれぞれ、各列の画素100のA+B信号を増幅した信号をAD変換部40に出力する。 The operational amplifiers 8-1, 8-2, 8-3, 8-4, 8-5, and 8-6 each output a signal obtained by amplifying the A + B signal of the pixel 100 in each row to the AD conversion unit 40.

図30(b)は、図30(a)に示したオペアンプ18の構成の一例について、詳細を示した図である。n列目、n+1列目、n+2列目の画素100のA信号がそれぞれ、信号PSH−AをHレベルとすることで導通するスイッチと、容量素子とを介して、差動増幅器の反転入力ノードに出力される構成としている。差動増幅器からAD変換部40に3列の画素100のA信号を加算した信号に基づく信号が出力される。 FIG. 30B is a diagram showing details of an example of the configuration of the operational amplifier 18 shown in FIG. 30A. The A signal of the pixel 100 in the nth column, the n + 1th column, and the n + 2nd column is conducted by setting the signal PSH-A to the H level, respectively, via a switch and a capacitive element, and an inverting input node of the differential amplifier. It is configured to be output to. A signal based on the signal obtained by adding the A signal of the three rows of pixels 100 to the AD conversion unit 40 is output from the differential amplifier.

図30(c)は、オペアンプ18の構成の他の一例について、詳細を示した図である。n列目、n+1列目、n+2列目の画素100のA信号がそれぞれ、容量素子と、信号PSH−AをHレベルとすることで導通するスイッチとを介して、差動増幅器の反転入力ノードに出力される構成としている。図30(c)に示したオペアンプ18の構成であっても、差動増幅器からAD変換部40に3列の画素100のA信号を加算した信号に基づく信号が出力される。図30(b)、図30(c)のいずれのオペアンプ18も、信号PC0RをHレベルとすると帰還容量の電荷がリセットされる。これをオペアンプ18のリセットと表記する。 FIG. 30C is a diagram showing details of another example of the configuration of the operational amplifier 18. The inverting input node of the differential amplifier via the capacitive element and the switch that conducts the A signal of the pixel 100 in the nth row, n + 1st row, and n + 2nd row by setting the signal PSH-A to H level, respectively. It is configured to be output to. Even with the configuration of the operational amplifier 18 shown in FIG. 30 (c), a signal based on a signal obtained by adding the A signal of the pixels 100 in three rows to the AD conversion unit 40 is output from the differential amplifier. In both the operational amplifiers 18 shown in FIGS. 30 (b) and 30 (c), the charge of the feedback capacitance is reset when the signal PC0R is set to the H level. This is referred to as reset of the operational amplifier 18.

図31は、図30(b)あるいは図30(c)に示したオペアンプ18の動作を中心に示した図である。まず、垂直走査回路2は、1行目の画素100を選択する信号φSELをHレベルとする。その後、図30(a)では不図示のTG12が、信号PSH―AをHレベルとする。そして、垂直走査回路2は、1行目の画素100の信号φRをLレベルとする。そして、TG12は、信号PC0RをLレベルとし、オペアンプ18のリセットを解除する。この時にオペアンプ18がAD変換部40に出力する信号をN変換として、AD変換部40がデジタルN信号に変換する。 FIG. 31 is a diagram mainly showing the operation of the operational amplifier 18 shown in FIG. 30 (b) or FIG. 30 (c). First, the vertical scanning circuit 2 sets the signal φSEL for selecting the pixel 100 in the first row as the H level. After that, TG12 (not shown) in FIG. 30A sets the signal PSH-A to the H level. Then, the vertical scanning circuit 2 sets the signal φR of the pixel 100 in the first row to the L level. Then, the TG 12 sets the signal PC0R to the L level and releases the reset of the operational amplifier 18. At this time, the signal output by the operational amplifier 18 to the AD conversion unit 40 is converted into an N conversion, and the AD conversion unit 40 converts the signal into a digital N signal.

その後、垂直走査回路2は、信号φT1をHレベルとする。これにより、画素100からA信号が出力される。信号PSH−AがHレベルのため、オペアンプ18は複数列の画素100のA信号を加算した信号を増幅してAD変換部40に出力する。その後、TG12は信号PSH−AをLレベルとする。 After that, the vertical scanning circuit 2 sets the signal φT1 to the H level. As a result, the A signal is output from the pixel 100. Since the signal PSH-A is at H level, the operational amplifier 18 amplifies the signal obtained by adding the A signals of the pixels 100 in a plurality of rows and outputs the signal to the AD conversion unit 40. After that, TG12 sets the signal PSH-A to the L level.

そして、垂直走査回路2は、信号φT1、φT2をHレベルとする。これにより、1行目の各画素100からA+B信号がオペアンプ8に出力される。 Then, the vertical scanning circuit 2 sets the signals φT1 and φT2 to the H level. As a result, the A + B signal is output to the operational amplifier 8 from each pixel 100 in the first line.

続いて、オペアンプ18から信号が出力されるAD変換部40は、A変換として、オペアンプ18から出力される信号をデジタルA信号に変換する。 Subsequently, the AD conversion unit 40, which outputs a signal from the operational amplifier 18, converts the signal output from the operational amplifier 18 into a digital A signal as A conversion.

そして、オペアンプ8から信号が出力されるAD変換部40は、A+B変換として、オペアンプ8から出力される信号をデジタルA+B信号に変換する。 Then, the AD conversion unit 40, which outputs a signal from the operational amplifier 8, converts the signal output from the operational amplifier 8 into a digital A + B signal as A + B conversion.

その後、水平走査回路14は各列のAD変換部40から、生成したデジタル信号を順次SIGOUTとして出力させる。 After that, the horizontal scanning circuit 14 sequentially outputs the generated digital signals as SIGOUT from the AD conversion unit 40 of each row.

本実施例の撮像装置では、複数列のA信号を加算した信号に基づく信号がAD変換部40に出力される。これにより、各列のA信号に基づく信号をAD変換部40がAD変換する形態に比して、AD変換期間を短縮することができる。また、各列のA信号に基づく信号をAD変換部40がAD変換する形態に比して、デジタルA信号の信号量が減少するため、図30(a)では不図示のDSP80の信号処理の負荷を低減することができる。 In the image pickup apparatus of this embodiment, a signal based on a signal obtained by adding a plurality of rows of A signals is output to the AD conversion unit 40. As a result, the AD conversion period can be shortened as compared with the form in which the AD conversion unit 40 AD-converts the signal based on the A signal in each column. Further, since the signal amount of the digital A signal is reduced as compared with the form in which the AD conversion unit 40 AD-converts the signal based on the A signal in each column, the signal processing of the DSP 80 (not shown in FIG. 30A) is performed. The load can be reduced.

本実施例では、オペアンプ18が3列の画素100のA信号を加算した信号に基づく信号をAD変換部40に出力する形態について説明した。本実施例はこの形態に限定されるものではなく、オペアンプ18が、複数列の画素100のA信号を加算した信号に基づく信号を出力する形態であれば良い。 In this embodiment, a mode in which the operational amplifier 18 outputs a signal based on the signal obtained by adding the A signal of the pixels 100 in three rows to the AD conversion unit 40 has been described. The present embodiment is not limited to this embodiment, as long as the operational amplifier 18 outputs a signal based on the signal obtained by adding the A signals of the pixels 100 in a plurality of rows.

また、本実施例では、オペアンプ8、18の出力する信号が各列のAD変換部40でデジタル信号に変換される形態を示したが、この形態に限定されるものではない。例えば、図13に示したように、各列からオペアンプ8、18の出力する信号がアナログ信号として出力される形態であっても良い。この形態の場合には、各列からA信号を増幅した信号が出力される形態に比して、A信号を増幅した信号を出力する列数が減少する。これにより、1フレーム期間において、各列からA信号を増幅した信号が出力される形態に比して、A信号を増幅した信号を出力する出力期間を短縮することができる。 Further, in this embodiment, the form in which the signals output by the operational amplifiers 8 and 18 are converted into digital signals by the AD conversion unit 40 of each row is shown, but the present invention is not limited to this form. For example, as shown in FIG. 13, the signals output by the operational amplifiers 8 and 18 from each row may be output as analog signals. In the case of this form, the number of columns for outputting the signal obtained by amplifying the A signal is reduced as compared with the form in which the signal obtained by amplifying the A signal is output from each column. As a result, in one frame period, the output period for outputting the signal obtained by amplifying the A signal can be shortened as compared with the form in which the signal obtained by amplifying the A signal is output from each column.

これまでに述べた各実施例の撮像装置は他の実施例と適宜組み合わせて実施しても良い。 The imaging apparatus of each embodiment described so far may be implemented in combination with other embodiments as appropriate.

1、51 光電変換部
2 垂直走査回路
4 リセットMOSトランジスタ
5 増幅MOSトランジスタ
6 選択MOSトランジスタ
7 垂直信号線
8 オペアンプ
9 比較回路
10 ランプ発生回路
11 カウンタ回路
12 TG
13 メモリ
14 水平走査回路
20,50 転送MOSトランジスタ
21 FD領域
10 画素内読み出し回路部
22 カラーフィルター
23 マイクロレンズ
100 画素
101 信号読み出し回路
1, 51 Photoelectric converter 2 Vertical scanning circuit 4 Reset MOS transistor 5 Amplified MOS transistor 6 Selected MOS transistor 7 Vertical signal line 8 Operational amplifier 9 Comparison circuit 10 Lamp generation circuit 11 Counter circuit 12 TG
13 Memory 14 Horizontal scanning circuit 20, 50 Transfer MOS transistor 21 FD area 10 In-pixel readout circuit 22 Color filter 23 Microlens 100 pixels 101 Signal readout circuit

本発明は上記の課題を解決するために為されたものであり、一の態様は、数の画素と、アナログデジタル変換回路と、マイクロレンズとを有する撮像装置であって前記画素は、信号電荷を生成する複数の光電変換部を含むとともに、前記信号電荷に基づく信号を出力し、前記マイクロレンズは、前記複数の光電変換部に対応して配され、前記画素は、前記複数の光電変換部の一部の光電変換部の前記信号電荷に基づいた第1の信号を出力し、前記画素は、前記複数の光電変換部の少なくとも他の一部の光電変換部の前記信号電荷に基づいた第2の信号を出力し、前記アナログデジタル変換回路は、前記第1の信号に基づく信号と、前記第2の信号に基づく信号のそれぞれをデジタル信号に変換することを特徴とする撮像装置である。
The present invention has been made to solve the above problems, one aspect is an imaging device including a pixel of multiple, and analog-to-digital converter, and a micro-lens, the pixel A plurality of photoelectric conversion units that generate signal charges are included, and a signal based on the signal charges is output. The microlenses are arranged corresponding to the plurality of photoelectric conversion units, and the pixels are the plurality of photoelectric conversion units. A first signal based on the signal charge of a part of the photoelectric conversion unit of the conversion unit is output, and the pixel is based on the signal charge of at least some other photoelectric conversion unit of the plurality of photoelectric conversion units. The analog-digital conversion circuit is an imaging device that outputs a second signal and converts each of a signal based on the first signal and a signal based on the second signal into digital signals. be.

Claims (15)

行列状に配された複数の画素を有し、
前記複数の画素の各々が、
信号電荷を生成する複数の光電変換部を含むとともに、前記信号電荷に基づいた信号を出力する撮像装置であって、
1フレーム期間内に、
前記複数の画素の少なくとも一部の前記画素の各々は、各々が有するm個(mは整数)の前記光電変換部のうち、前記m個よりも少ないn個(nは整数)の前記光電変換部の前記信号電荷に基づいた第1の信号を出力し、
前記1フレーム期間内に、
前記複数の画素の各々が、各々が有する前記m個の前記光電変換部の前記信号電荷に基づいた第2の信号を出力し、
前記撮像装置の出力する、前記第1の信号に基づく信号の個数が、
前記撮像装置の出力する、前記第2の信号に基づく信号の個数よりも少ないことを特徴とする撮像装置。
It has multiple pixels arranged in a matrix and has multiple pixels.
Each of the plurality of pixels
An imaging device that includes a plurality of photoelectric conversion units that generate signal charges and outputs a signal based on the signal charges.
Within one frame period
Each of the pixels, which is at least a part of the plurality of pixels, has n (n is an integer) of the photoelectric conversion units having m (m is an integer), which is less than m. Outputs a first signal based on the signal charge of the unit,
Within the one frame period
Each of the plurality of pixels outputs a second signal based on the signal charge of the mth photoelectric conversion unit each of the plurality of pixels.
The number of signals based on the first signal output by the image pickup apparatus is
An imaging device characterized in that the number of signals output by the imaging device is less than the number of signals based on the second signal.
前記撮像装置が、複数の信号保持部と、複数の増幅回路と、をさらに有し、
一の前記増幅回路が、
前記複数の画素の前記第1の信号同士を加算した信号を増幅した前記信号を一の前記信号保持部に出力し、
前記一の増幅回路とは別の増幅回路が、前記第2の信号を増幅した、前記第2の信号に基づく前記信号を前記一の信号保持部とは別の前記信号保持部に出力することを特徴とする請求項1に記載の撮像装置。
The image pickup apparatus further includes a plurality of signal holding units and a plurality of amplifier circuits.
One of the amplifier circuits
The signal obtained by amplifying the signal obtained by adding the first signals of the plurality of pixels to each other is output to one signal holding unit.
An amplifier circuit different from the one amplifier circuit amplifies the second signal and outputs the signal based on the second signal to the signal holding unit different from the one signal holding unit. The imaging apparatus according to claim 1.
前記第1の信号に基づく前記信号を各々が保持する複数の信号保持部を有し、
前記第1の信号に基づく前記信号を保持した前記複数の信号保持部が同時に前記信号を出力することによって、前記撮像装置が、前記同時に出力された信号を加算した信号を出力することを特徴とする請求項1に記載の撮像装置。
It has a plurality of signal holding units, each of which holds the signal based on the first signal.
The plurality of signal holding units holding the signal based on the first signal simultaneously output the signal, so that the imaging device outputs a signal obtained by adding the signals output at the same time. The imaging device according to claim 1.
前記第1の信号に基づく前記信号と、前記第2の信号に基づく前記信号と、を保持する複数の信号保持部と、水平走査回路と、を有し、
前記水平走査回路が、
前記複数の信号保持部から前記第2の信号に基づく前記信号を出力し、さらに、
前記複数の信号保持部の一部の前記信号保持部から前記第1の信号に基づく前記信号を出力することを特徴とする請求項1に記載の撮像装置。
It has a plurality of signal holding units for holding the signal based on the first signal and the signal based on the second signal, and a horizontal scanning circuit.
The horizontal scanning circuit
The signal based on the second signal is output from the plurality of signal holding units, and further
The imaging device according to claim 1, wherein the signal based on the first signal is output from a part of the signal holding units of the plurality of signal holding units.
前記複数の画素の出力する前記第1の信号と前記第2の信号がアナログ信号であり、
前記アナログ信号をデジタル信号に変換して出力する複数のアナログデジタル変換回路をさらに有し、
前記複数のアナログデジタル変換回路のそれぞれが、
前記第1の信号を前記第1の信号に基づく前記信号であるデジタル信号に変換し、
前記第2の信号を前記第2の信号に基づく前記信号であるデジタル信号に変換する
ことを特徴とする請求項1に記載の撮像装置。
The first signal and the second signal output by the plurality of pixels are analog signals.
It further has a plurality of analog-to-digital conversion circuits that convert the analog signal into a digital signal and output it.
Each of the plurality of analog-to-digital conversion circuits
The first signal is converted into a digital signal which is the signal based on the first signal, and the signal is converted into a digital signal.
The imaging device according to claim 1, wherein the second signal is converted into a digital signal which is the signal based on the second signal.
前記撮像装置が、前記複数のアナログデジタル変換回路の生成する前記デジタル信号を処理する信号処理部をさらに有し、
前記信号処理部が、前記画素の前記第1の信号に基づくデジタル信号と、別の前記画素の前記第1の信号に基づくデジタル信号と、を加算した信号を出力し、
前記信号処理部が、前記画素の前記第2の信号に基づくデジタル信号と、前記別の画素の前記第2の信号に基づくデジタル信号と、をそれぞれ出力することを特徴とする請求項5に記載の撮像装置。
The imaging device further includes a signal processing unit that processes the digital signal generated by the plurality of analog-to-digital conversion circuits.
The signal processing unit outputs a signal obtained by adding a digital signal based on the first signal of the pixel and a digital signal based on the first signal of another pixel.
The fifth aspect of claim 5, wherein the signal processing unit outputs a digital signal based on the second signal of the pixel and a digital signal based on the second signal of the other pixel, respectively. Imaging device.
前記アナログデジタル変換回路が、
参照信号と前記アナログ信号とを比較した結果を示す比較結果信号を出力する比較回路と、
クロック信号を計数するカウンタ回路と、を有し、
前記複数の画素が前記第1の信号を順次、同一の前記アナログデジタル変換回路に出力し、
前記複数の画素の一の画素の前記第1の信号と前記参照信号との比較結果を示す比較結果信号に基づいてクロック信号を計数した信号と、前記複数の画素の前記一の画素とは別の画素の前記第1の信号と前記参照信号との比較結果を示す比較結果信号に基づいてクロック信号を計数した信号と、を加算した信号を前記カウンタ回路が生成することを特徴とする請求項5に記載の撮像装置。
The analog-to-digital conversion circuit
A comparison circuit that outputs a comparison result signal showing the result of comparing the reference signal and the analog signal, and a comparison circuit.
It has a counter circuit that counts clock signals, and
The plurality of pixels sequentially output the first signal to the same analog-to-digital conversion circuit.
The signal obtained by counting the clock signal based on the comparison result signal indicating the comparison result between the first signal of one pixel of the plurality of pixels and the reference signal is different from the one pixel of the plurality of pixels. The counter circuit is characterized in that the counter circuit generates a signal obtained by adding a signal obtained by counting a clock signal based on a comparison result signal indicating a comparison result between the first signal of the pixel and the reference signal. 5. The imaging device according to 5.
前記複数のアナログデジタル変換回路の各々が、
参照信号と前記アナログ信号とを比較した結果を示す比較結果信号を出力する比較回路と、
クロック信号を計数するカウンタ回路と、を有し、
前記撮像装置が、カウンタ制御部をさらに有し、
複数の前記比較回路の各々が、前記参照信号と、互いに異なる前記画素の前記第1の信号とを比較した結果を示す前記比較結果信号を出力し、
前記カウンタ制御部が、前記複数の比較回路の前記比較結果信号に基づいて、前記カウンタ回路の前記クロック信号の計数を制御することによって、前記アナログデジタル変換回路が、前記互いに異なる画素の前記第1の信号を加算した信号に基づくデジタル信号を生成することを特徴とする請求項5に記載の撮像装置。
Each of the plurality of analog-to-digital conversion circuits
A comparison circuit that outputs a comparison result signal showing the result of comparing the reference signal and the analog signal, and a comparison circuit.
It has a counter circuit that counts clock signals, and
The imaging device further includes a counter control unit.
Each of the plurality of comparison circuits outputs the comparison result signal indicating the result of comparing the reference signal with the first signal of the pixel different from each other.
The counter control unit controls the counting of the clock signal of the counter circuit based on the comparison result signal of the plurality of comparison circuits, so that the analog-to-digital conversion circuit has the first pixel different from each other. The imaging apparatus according to claim 5, wherein a digital signal based on a signal obtained by adding the signals of the above is generated.
前記複数の画素が行列状に設けられ、
前記複数のアナログデジタル変換回路の各々は、前記複数の画素が設けられた列に対応して設けられ、
前記カウンタ制御部が、前記複数の比較回路の前記比較結果信号に基づいて、前記カウンタ回路の前記クロック信号の計数を制御することによって、前記アナログデジタル変換回路が、互いに異なる列の画素の前記第1の信号を加算した信号に基づくデジタル信号を生成することを特徴とする請求項8に記載の撮像装置。
The plurality of pixels are provided in a matrix, and the plurality of pixels are provided in a matrix.
Each of the plurality of analog-to-digital conversion circuits is provided corresponding to the row in which the plurality of pixels are provided.
The counter control unit controls the counting of the clock signals of the counter circuits based on the comparison result signals of the plurality of comparison circuits, so that the analog-to-digital conversion circuits have the pixels in different rows. The imaging device according to claim 8, wherein a digital signal based on a signal obtained by adding the signals of 1 is generated.
前記撮像装置は、
マイクロレンズを複数有するマイクロレンズアレイをさらに有し、
1つの前記マイクロレンズは、前記画素の複数の前記光電変換部に光を集光させて入射させることを特徴とする請求項1〜9のいずれかに記載の撮像装置。
The image pickup device
Further having a microlens array with a plurality of microlenses,
The imaging device according to any one of claims 1 to 9, wherein one microlens condenses light on a plurality of photoelectric conversion units of the pixel and causes the light to be incident on the plurality of photoelectric conversion units.
請求項10に記載の前記撮像装置と、
前記撮像装置に光を集光する光学系と、出力信号処理部と、を有する撮像システムであって、
前記複数の画素の一部の前記画素である第1の画素が有する前記n個の前記光電変換部の前記信号電荷に基づいた前記第1の信号に基づく前記信号が前記撮像装置から前記出力信号処理部に出力され、
前記第2の信号に基づく前記信号が前記撮像装置から前記出力信号処理部に出力され、前記出力信号処理部が、
前記第1の画素の前記第1の信号に基づく前記信号と、前記第1の画素の前記第2の信号に基づく前記信号と、の差分である差分信号を得て、前記差分信号と前記第1の画素の前記第1の信号に基づく前記信号とによって焦点検出を行い、
さらに、前記出力信号処理部が、前記複数の画素の前記第2の信号に基づく前記信号によって画像を形成することを特徴とする撮像システム。
The imaging device according to claim 10,
An imaging system including an optical system that collects light on the imaging device and an output signal processing unit.
The signal based on the first signal based on the signal charge of the n photoelectric conversion units of the first pixel which is a part of the plurality of pixels is the output signal from the image pickup apparatus. Output to the processing unit
The signal based on the second signal is output from the image pickup apparatus to the output signal processing unit, and the output signal processing unit receives the output signal processing unit.
A difference signal, which is a difference between the signal based on the first signal of the first pixel and the signal based on the second signal of the first pixel, is obtained, and the difference signal and the first signal are obtained. Focus detection is performed by the signal based on the first signal of one pixel, and the focus is detected.
Further, an imaging system in which the output signal processing unit forms an image with the signal based on the second signal of the plurality of pixels.
撮像装置と、焦点検出用信号処理部と、を有する撮像システムであって、
前記撮像装置は、行列状に配された複数の画素を有し、
前記複数の画素の各々が、信号電荷を生成する光電変換部を複数含み、
1フレーム期間内に、前記複数の画素の少なくとも一部の前記画素の各々が、各々が有するm個(mは整数)の前記光電変換部のうち、前記m個よりも少ないn個(nは整数)の前記光電変換部の前記信号電荷に基づいた第1の信号を出力し、
前記1フレーム期間内に、前記複数の画素の各々が、各々が有する前記m個の前記光電変換部の前記信号電荷に基づいた第2の信号を出力し、
前記撮像装置が、前記複数の画素の前記第2の信号に基づく信号と、前記第1の信号に基づく信号とをそれぞれを前記焦点検出用信号処理部に出力し、
前記焦点検出用信号処理部が、前記焦点検出用信号処理部に出力された、前記複数の画素の前記第1の信号に基づく前記信号のうち、前記複数の画素の一部の前記画素の前記第1の信号に基づく前記信号を出力し、前記複数の画素の他の前記画素の前記第1の信号に基づく前記信号を出力しないことを特徴とする撮像システム。
An imaging system including an imaging device and a focus detection signal processing unit.
The image pickup apparatus has a plurality of pixels arranged in a matrix and has a plurality of pixels.
Each of the plurality of pixels includes a plurality of photoelectric conversion units that generate signal charges.
Within one frame period, each of the at least a part of the plurality of pixels has n (n) less than the m of the m (m is an integer) photoelectric conversion unit each of the pixels has. A first signal based on the signal charge of the photoelectric conversion unit (integer) is output.
Within the one frame period, each of the plurality of pixels outputs a second signal based on the signal charge of the mth photoelectric conversion unit each of the plurality of pixels.
The image pickup apparatus outputs a signal based on the second signal of the plurality of pixels and a signal based on the first signal to the focus detection signal processing unit.
Among the signals based on the first signal of the plurality of pixels output to the focus detection signal processing unit by the focus detection signal processing unit, the said pixel of a part of the plurality of pixels. An imaging system characterized in that the signal based on the first signal is output and the signal based on the first signal of the other pixels of the plurality of pixels is not output.
行列状に配された複数の画素を有し、
前記複数の画素の各々が、信号電荷を生成する光電変換部を複数含む撮像装置の駆動方法であって、
前記駆動方法は、
1フレーム期間内に、前記複数の画素の少なくとも一部の前記画素の各々に、各々が有するm個(mは整数)の前記光電変換部のうち、前記m個よりも少ないn個(nは整数)の前記光電変換部の前記信号電荷に基づいた第1の信号を出力させ、
前記1フレーム期間内に、前記複数の画素の各々に、各々が有する前記m個の前記光電変換部の前記信号電荷に基づいた第2の信号を出力させ、
前記第1の信号に基づく信号の個数を、前記第2の信号に基づく信号の個数よりも少なくして、前記第1の信号に基づく前記信号と前記第2の信号に基づく前記信号とを前記撮像装置に出力させることを特徴とする撮像装置の駆動方法。
It has multiple pixels arranged in a matrix and has multiple pixels.
Each of the plurality of pixels is a method for driving an imaging device including a plurality of photoelectric conversion units that generate signal charges.
The driving method is
Within one frame period, n (n) of the m (m is an integer) photoelectric conversion units each of at least a part of the plurality of pixels have less than m. A first signal based on the signal charge of the photoelectric conversion unit (integer) is output.
Within the one frame period, each of the plurality of pixels is made to output a second signal based on the signal charge of the mth photoelectric conversion unit each of the plurality of pixels.
The number of signals based on the first signal is made smaller than the number of signals based on the second signal, and the signal based on the first signal and the signal based on the second signal are described as described above. A method of driving an imaging device, which comprises outputting to an imaging device.
撮像装置を有し、前記撮像装置から出力される信号の信号処理を行う撮像システムの駆動方法であって、
前記撮像装置は、行列状に配された複数の画素を有し、
前記複数の画素の各々が、信号電荷を生成する光電変換部を複数含み、
さらに、前記撮像装置が、マイクロレンズを複数有するレンズアレイを有し、
1つの前記マイクロレンズで集光された光が前記画素の有する複数の前記光電変換部に入射し、
前記駆動方法は、
1フレーム期間内に、前記複数の画素の少なくとも一部の前記画素の各々に、各々が有するm個(mは整数)の前記光電変換部のうち、前記m個よりも少ないn個(nは整数)の前記光電変換部の前記信号電荷に基づいた第1の信号を出力させ、
前記1フレーム期間内に、前記複数の画素の各々に、各々が有する前記m個の前記光電変換部の前記信号電荷に基づいた第2の信号を出力させ、
前記第1の信号に基づく信号の個数を、前記第2の信号に基づく信号の個数よりも少なくして、前記第1の信号に基づく前記信号と前記第2の信号に基づく前記信号とを前記撮像装置に出力させ、
前記信号処理が、
前記画素の前記第1の信号に基づく前記信号と、前記画素の前記第2の信号に基づく前記信号との差分である差分信号を得て、前記差分信号と、前記画素の前記第1の信号に基づく前記信号とによって焦点検出を行い、前記画素の前記第2の信号に基づく前記信号によって画像を形成する処理であることを特徴とする撮像システムの駆動方法。
It is a driving method of an imaging system having an imaging device and performing signal processing of a signal output from the imaging device.
The image pickup apparatus has a plurality of pixels arranged in a matrix and has a plurality of pixels.
Each of the plurality of pixels includes a plurality of photoelectric conversion units that generate signal charges.
Further, the image pickup apparatus has a lens array having a plurality of microlenses.
The light collected by one microlens is incident on the plurality of photoelectric conversion units of the pixel, and the light is incident on the photoelectric conversion unit.
The driving method is
Within one frame period, n (n) of the m (m is an integer) photoelectric conversion units each of at least a part of the plurality of pixels have less than m. A first signal based on the signal charge of the photoelectric conversion unit (integer) is output.
Within the one frame period, each of the plurality of pixels is made to output a second signal based on the signal charge of the mth photoelectric conversion unit each of the plurality of pixels.
The number of signals based on the first signal is made smaller than the number of signals based on the second signal, and the signal based on the first signal and the signal based on the second signal are described as described above. Output to the image pickup device
The signal processing
A difference signal, which is a difference between the signal based on the first signal of the pixel and the signal based on the second signal of the pixel, is obtained, and the difference signal and the first signal of the pixel are obtained. A method for driving an imaging system, which comprises performing focus detection with the signal based on the above and forming an image with the signal based on the second signal of the pixel.
撮像装置を有し、前記撮像装置から出力される信号の信号処理を行う撮像システムの駆動方法であって、
前記撮像装置は、行列状に配された複数の画素を有し、
前記複数の画素の各々が、信号電荷を生成する光電変換部を複数含み、
さらに、前記撮像装置はマイクロレンズを複数有するレンズアレイを有し、
1つの前記マイクロレンズで集光された光が前記画素の有する複数の前記光電変換部に入射し、
1フレーム期間内に、前記複数の画素の各々に、各々が有するm個(mは整数)の前記光電変換部のうち、前記m個よりも少ないn個(nは整数)の前記光電変換部の前記信号電荷に基づいた第1の信号を出力させ、
前記1フレーム期間内に、前記複数の画素の各々に、各々が有する前記m個の前記光電変換部の前記信号電荷に基づいた第2の信号を出力させ、
前記撮像装置に、前記第1の信号に基づく前記信号と前記第2の信号に基づく前記信号とを出力させ、
前記信号処理が、
前記撮像装置から出力した、前記複数の画素の前記第1の信号に基づく前記信号のうち、前記複数の画素の一部の前記画素の前記第1の信号に基づく前記信号を出力させ、前記複数の画素の他の前記画素の前記第1の信号に基づく前記信号を出力させない処理であることを特徴とする撮像システムの駆動方法。
It is a driving method of an imaging system having an imaging device and performing signal processing of a signal output from the imaging device.
The image pickup apparatus has a plurality of pixels arranged in a matrix and has a plurality of pixels.
Each of the plurality of pixels includes a plurality of photoelectric conversion units that generate signal charges.
Further, the imaging device has a lens array having a plurality of microlenses.
The light collected by one microlens is incident on the plurality of photoelectric conversion units of the pixel, and the light is incident on the photoelectric conversion unit.
Within one frame period, n (n is an integer) of the m (m is an integer) photoelectric conversion units each of the plurality of pixels have less than m of the photoelectric conversion units. To output a first signal based on the signal charge of
Within the one frame period, each of the plurality of pixels is made to output a second signal based on the signal charge of the mth photoelectric conversion unit each of the plurality of pixels.
The imaging device is made to output the signal based on the first signal and the signal based on the second signal.
The signal processing
Among the signals based on the first signal of the plurality of pixels output from the image pickup apparatus, the signal based on the first signal of some of the pixels of the plurality of pixels is output, and the plurality of signals are output. A method for driving an imaging system, which is a process of not outputting the signal based on the first signal of the other pixels of the pixel.
JP2021116663A 2012-03-01 2021-07-14 Imaging device, imaging system, method of driving imaging device, and method of driving imaging system Pending JP2021166411A (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2012045653 2012-03-01
JP2012045653 2012-03-01
JP2020036419A JP2020109980A (en) 2012-03-01 2020-03-04 Imaging apparatus, imaging system, driving method of imaging apparatus, and driving method of imaging system

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2020036419A Division JP2020109980A (en) 2012-03-01 2020-03-04 Imaging apparatus, imaging system, driving method of imaging apparatus, and driving method of imaging system

Publications (1)

Publication Number Publication Date
JP2021166411A true JP2021166411A (en) 2021-10-14

Family

ID=56102839

Family Applications (5)

Application Number Title Priority Date Filing Date
JP2016033276A Active JP6091674B2 (en) 2012-03-01 2016-02-24 Imaging device, imaging system, driving method of imaging device, and driving method of imaging system
JP2017021541A Active JP6305585B2 (en) 2012-03-01 2017-02-08 Imaging device, imaging system, driving method of imaging device, and driving method of imaging system
JP2018040030A Active JP6672356B2 (en) 2012-03-01 2018-03-06 Imaging apparatus, imaging system, driving method of imaging apparatus, and driving method of imaging system
JP2020036419A Ceased JP2020109980A (en) 2012-03-01 2020-03-04 Imaging apparatus, imaging system, driving method of imaging apparatus, and driving method of imaging system
JP2021116663A Pending JP2021166411A (en) 2012-03-01 2021-07-14 Imaging device, imaging system, method of driving imaging device, and method of driving imaging system

Family Applications Before (4)

Application Number Title Priority Date Filing Date
JP2016033276A Active JP6091674B2 (en) 2012-03-01 2016-02-24 Imaging device, imaging system, driving method of imaging device, and driving method of imaging system
JP2017021541A Active JP6305585B2 (en) 2012-03-01 2017-02-08 Imaging device, imaging system, driving method of imaging device, and driving method of imaging system
JP2018040030A Active JP6672356B2 (en) 2012-03-01 2018-03-06 Imaging apparatus, imaging system, driving method of imaging apparatus, and driving method of imaging system
JP2020036419A Ceased JP2020109980A (en) 2012-03-01 2020-03-04 Imaging apparatus, imaging system, driving method of imaging apparatus, and driving method of imaging system

Country Status (1)

Country Link
JP (5) JP6091674B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7113368B2 (en) * 2017-07-03 2022-08-05 パナソニックIpマネジメント株式会社 Imaging device and camera system
JP2019140528A (en) 2018-02-09 2019-08-22 ソニーセミコンダクタソリューションズ株式会社 Imaging apparatus and electronic apparatus

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002131623A (en) * 2000-10-24 2002-05-09 Canon Inc Imaging apparatus and system
JP2010109677A (en) * 2008-10-30 2010-05-13 Sony Corp Solid-state imaging apparatus, imaging apparatus, pixel drive voltage optimization apparatus, and pixel drive voltage optimization method

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3977062B2 (en) * 2001-11-21 2007-09-19 キヤノン株式会社 Imaging apparatus and focus adjustment method
JP2004319837A (en) * 2003-04-17 2004-11-11 Canon Inc Solid-state imaging apparatus
JP4434797B2 (en) * 2004-03-19 2010-03-17 オリンパス株式会社 Imaging device and imaging apparatus
JP4426885B2 (en) * 2004-03-23 2010-03-03 オリンパス株式会社 Solid-state imaging device
JP4497022B2 (en) * 2005-04-26 2010-07-07 ソニー株式会社 Solid-state imaging device, driving method of solid-state imaging device, and imaging device
JP2009130582A (en) * 2007-11-22 2009-06-11 Nikon Corp Solid-state imaging apparatus, and electronic camera
JP5272634B2 (en) * 2008-06-20 2013-08-28 ソニー株式会社 Solid-state imaging device, signal processing method for solid-state imaging device, and imaging device
JP5241355B2 (en) * 2008-07-10 2013-07-17 キヤノン株式会社 Imaging apparatus and control method thereof
JP2010107662A (en) * 2008-10-29 2010-05-13 Panasonic Corp Imaging apparatus, range-finding device and range-finding method
JP2010250007A (en) * 2009-04-14 2010-11-04 Olympus Corp Image capturing apparatus
JP5269735B2 (en) * 2009-10-08 2013-08-21 株式会社東芝 Solid-state imaging device
JP5742313B2 (en) * 2011-03-10 2015-07-01 株式会社ニコン Imaging device

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002131623A (en) * 2000-10-24 2002-05-09 Canon Inc Imaging apparatus and system
JP2010109677A (en) * 2008-10-30 2010-05-13 Sony Corp Solid-state imaging apparatus, imaging apparatus, pixel drive voltage optimization apparatus, and pixel drive voltage optimization method

Also Published As

Publication number Publication date
JP6305585B2 (en) 2018-04-04
JP2020109980A (en) 2020-07-16
JP2016105649A (en) 2016-06-09
JP6091674B2 (en) 2017-03-08
JP6672356B2 (en) 2020-03-25
JP2018093540A (en) 2018-06-14
JP2017092989A (en) 2017-05-25

Similar Documents

Publication Publication Date Title
JP5893572B2 (en) Imaging device, imaging system, and driving method of imaging device
US11758305B2 (en) Comparator, ad converter, solid-state imaging device, electronic apparatus, and method of controlling comparator
JP6482186B2 (en) Imaging apparatus and driving method thereof
JP6041500B2 (en) Imaging device, imaging system, driving method of imaging device, and driving method of imaging system
JP6735582B2 (en) Imaging device, driving method thereof, and imaging device
CN109845243B (en) Imaging device
JP6124717B2 (en) Image sensor, focus detection device
JP2016012903A (en) Imaging element, imaging method, and electronic equipment
WO2013129646A1 (en) A/d conversion circuit, and solid-state image pickup apparatus
JP2013211832A (en) Imaging device, imaging system, and driving method of imaging device
JP6406977B2 (en) Photoelectric conversion device, imaging system
CN111133750B (en) Image sensor and image pickup apparatus
JP2021166411A (en) Imaging device, imaging system, method of driving imaging device, and method of driving imaging system
JP2021182763A (en) Image pick-up device and imaging apparatus
JP2017216626A (en) Image pickup device and its control method and imaging apparatus and its control method
JP6237726B2 (en) Imaging device and imaging apparatus
JP5786762B2 (en) A / D conversion circuit and solid-state imaging device
JP2018061116A (en) Imaging apparatus, control method for imaging apparatus, program, and storage medium

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210813

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210813

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220727

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220823

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20230314