WO2019058959A1 - 固体撮像素子及び電子機器 - Google Patents

固体撮像素子及び電子機器 Download PDF

Info

Publication number
WO2019058959A1
WO2019058959A1 PCT/JP2018/032757 JP2018032757W WO2019058959A1 WO 2019058959 A1 WO2019058959 A1 WO 2019058959A1 JP 2018032757 W JP2018032757 W JP 2018032757W WO 2019058959 A1 WO2019058959 A1 WO 2019058959A1
Authority
WO
WIPO (PCT)
Prior art keywords
unit
pixel
signal
analog
sample
Prior art date
Application number
PCT/JP2018/032757
Other languages
English (en)
French (fr)
Inventor
崇 馬上
洋介 植野
知憲 山下
一徳 長谷部
Original Assignee
ソニーセミコンダクタソリューションズ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニーセミコンダクタソリューションズ株式会社 filed Critical ソニーセミコンダクタソリューションズ株式会社
Priority to US16/647,048 priority Critical patent/US11418749B2/en
Priority to CN201880059215.7A priority patent/CN111095917B/zh
Publication of WO2019058959A1 publication Critical patent/WO2019058959A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/79Arrangements of circuitry being divided between different or multiple substrates, chips or circuit boards, e.g. stacked image sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/71Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
    • H04N25/75Circuitry for providing, modifying or processing image signals from the pixel array
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • H01L27/14601Structural or functional details thereof
    • H01L27/14603Special geometry or disposition of pixel-elements, address-lines or gate-electrodes
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • H01L27/14601Structural or functional details thereof
    • H01L27/14609Pixel-elements with integrated switching, control, storage or amplification elements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/78Readout circuits for addressed sensors, e.g. output amplifiers or A/D converters
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • H01L27/14601Structural or functional details thereof
    • H01L27/14634Assemblies, i.e. Hybrid structures

Definitions

  • the present disclosure relates to a solid-state imaging device and an electronic device.
  • a single slope analog-digital converter can be used as an analog-digital converter of an analog-digital converter that converts an analog pixel signal output from a unit pixel into a digital signal.
  • 1 readout of pixel signal and analog-to-digital conversion time is 1 AD time
  • most of 1 AD time is settling time of input signal from unit pixel and analog Occupied by the counting time of the digital converter counter.
  • 1 AD time has been shortened by arranging a column amplifier unit having an AGC (Adaptive Gain Control or Automatic Gain Control) function at the previous stage of the analog-digital conversion unit (see, for example, Non-Patent Document 1) ).
  • AGC Adaptive Gain Control or Automatic Gain Control
  • the final resolution can be maintained even if the resolution of the analog-to-digital converter is lowered, so that the resolution of the analog-to-digital converter can be lowered. Therefore, in the single-slope type analog-to-digital converter, in particular, the counting time of the signal level can be shortened, and the 1 AD time can be shortened.
  • the present disclosure aims to provide a solid-state imaging device capable of shortening the readout time of a substantial pixel signal including analog-digital conversion, and an electronic apparatus having the solid-state imaging device.
  • a solid-state imaging device for achieving the above object is: A pixel array unit in which a plurality of unit pixels including a photoelectric conversion unit are arranged in a matrix; An amplifier unit for adjusting the level of the pixel signal output from the unit pixel through the vertical signal line provided corresponding to the column array of the pixel array unit; A sample-and-hold unit that samples and holds a pixel signal that has passed through the amplifier unit; It has an analog-to-digital converter that converts the pixel signal output from the sample-and-hold unit into a digital signal, The sample-and-hold unit has at least three capacitors for holding pixel signals, and takes in the pixel signal in one capacitor and outputs the image signal taken in the other capacitor to the analog-digital converter. In parallel.
  • the electronic device of this indication for achieving said objective has a solid-state image sensor of said structure.
  • the sample-and-hold unit provided between the amplifier unit and the analog-digital conversion unit can temporarily hold the pixel signal passed through the amplifier unit.
  • the output voltage of the amplifier unit is held in the capacity of the sample and hold unit after the completion of settling, while the amplifier unit can immediately shift to taking in and settling the next input signal.
  • the analog-to-digital converter performs analog-to-digital conversion on the voltage signal held in the sample-and-hold unit. In this way, settling and analog-to-digital conversion are performed in parallel.
  • the present disclosure by performing settling and analog-to-digital conversion in parallel, it is possible to reduce the effective 1 AD time, and therefore, the readout time of the substantial pixel signal including the analog-to-digital conversion. It can be shortened.
  • FIG. 1 is a block diagram showing an outline of a basic configuration of a CMOS image sensor according to an embodiment of the present disclosure.
  • FIG. 2 is a circuit diagram showing an example of a circuit configuration of a unit pixel.
  • FIG. 3 is an exploded perspective view showing an outline of the laminated structure of the CMOS image sensor according to the present embodiment.
  • FIG. 4 is a circuit diagram showing the configuration of one pixel row of a CMOS image sensor having a circuit configuration without a column amplifier unit.
  • FIG. 5A is a waveform diagram for explaining the operation of the circuit configuration without the column amplifier unit
  • FIG. 5B is a waveform diagram for explaining the operation of the circuit configuration with the column amplifier unit.
  • FIG. 6 is a circuit diagram showing the configuration of one pixel row of a CMOS image sensor having a circuit configuration having a column amplifier unit.
  • FIG. 7A is a diagram showing the relationship between the input of the column amplifier unit and the output of the analog-digital conversion unit
  • FIG. 7B is a diagram showing the relationship between the input of the column amplifier unit and the output after linearization.
  • FIG. 8 is a circuit diagram showing the configuration of one pixel column of the CMOS image sensor according to the first embodiment.
  • FIG. 9 is a timing waveform chart for explaining the circuit operation of the CMOS image sensor according to the present embodiment.
  • FIG. 10 is a circuit diagram showing the configuration of one pixel column of the CMOS image sensor according to the second embodiment.
  • FIG. 11 is a circuit diagram showing the configuration of one pixel column of the CMOS image sensor according to the third embodiment.
  • FIG. 12 is a circuit diagram showing the configuration of one pixel column of the CMOS image sensor according to the fourth embodiment.
  • FIG. 13 is a circuit diagram showing the configuration of one pixel column of the CMOS image sensor according to the fifth embodiment.
  • FIG. 14 is a circuit diagram showing a configuration of one pixel column of a CMOS image sensor according to a sixth embodiment.
  • FIG. 15 is a time chart for explaining the circuit operation of the CMOS image sensor according to the sixth embodiment.
  • FIG. 16 is a diagram illustrating an application example of the technology of the present disclosure.
  • FIG. 17 is a block diagram showing a configuration of an imaging device which is an example of the electronic device of the present disclosure.
  • FIG. 18 is a block diagram showing a schematic configuration example of a vehicle control system that is an example of a mobile control system to which the technology of the present disclosure can be applied.
  • Sample-and-hold section 2-5-1 Example 1 (example having four capacitors for holding pixel signals) 2-5-2.
  • Example 2 (Modification of Example 1: Example where the inverting amplifier is composed of a P-type MOS input source grounded operational amplifier) 2-5-3.
  • Third Embodiment Modification of First Embodiment: An Example Using the Input of an Inverting Amplifier as the Input of the Level Determination Circuit) 2-5-4.
  • Fourth Embodiment Modification of First Embodiment: Example in which Capacitance Value of Feedback Capacitance of Column Amplifier Section is Variable
  • Fifth Embodiment Modification of First Embodiment: Example Having Multiple Level Determination Circuits) 2-5-6.
  • the solid-state imaging device and the electronic device of the present disclosure may have a stacked structure in which at least two semiconductor substrates of the first semiconductor substrate and the second semiconductor substrate are stacked.
  • the pixel array portion is preferably formed on the first semiconductor substrate
  • the sample-and-hold portion is preferably formed on a semiconductor substrate other than the first semiconductor substrate, for example, the second semiconductor substrate.
  • the pixel signal includes a reset signal output from the unit pixel at the time of reset and a data signal output from the unit pixel at the photoelectric conversion. It is.
  • the sample-and-hold unit is configured to, for two pixel signals output from the unit pixel one after another in time series, for the reset signal of one pixel signal, for two data signals, and for the other image. It can be configured to have a total of four capacitances of two capacitances for the signal reset signal and the data signal.
  • a reset switch for resetting the potential of the circuit output end that outputs the pixel signal to the analog-digital conversion unit in the sample & hold unit It can be set as having.
  • the amplifier unit is configured by an adaptive gain amplifier that adaptively adjusts the gain to obtain a constant signal level. be able to.
  • the amplifier unit can be configured to be capable of switching at least two types of gains.
  • the amplifier unit may include a level determination circuit that determines the level of the pixel signal, and may switch the gain according to the determination result of the level determination circuit.
  • a configuration including a digital signal processing unit that processes a digital signal output from the analog-digital conversion unit can be provided.
  • the digital signal processing unit can be configured to perform level adjustment, specifically, compression processing on the digital signal based on the determination result of the level determination circuit.
  • CMOS complementary metal oxide semiconductor
  • a CMOS image sensor is an image sensor manufactured by applying or partially using a CMOS process.
  • FIG. 1 is a block diagram showing an outline of a basic configuration of a CMOS image sensor according to an embodiment of the present disclosure.
  • unit pixels (which may be simply referred to as “pixels” hereinafter) 2 including a photoelectric conversion unit are two-dimensionally arranged in a row direction and a column direction, that is, in a matrix.
  • the pixel array unit 11 and the peripheral circuit unit of the pixel array unit 11 are provided.
  • the row direction refers to the arrangement direction (the so-called horizontal direction) of the unit pixels 2 in the pixel row
  • the column direction refers to the arrangement direction (the so-called vertical direction) the unit pixels 2 in the pixel column.
  • the unit pixel 2 performs photoelectric conversion to generate and accumulate photocharges according to the amount of light received.
  • the peripheral circuit unit of the pixel array unit 11 includes, for example, a row selection unit 12, a load MOS unit 13, a column amplifier unit 14, a sample & hold unit 15, an analog-digital conversion unit 16, a memory unit 17, a data processing unit 18, and an output. It is configured by a unit 19 and a timing control unit 20 and the like.
  • pixel drive lines 31 (31 1 to 31 m ) are wired in the row direction for each pixel row, and vertical signal lines 32 (32 1 to 32 1) for each pixel column. 32 n ) are wired along the column direction.
  • the pixel drive line 31 transmits a drive signal for driving when reading out a signal from the unit pixel 2.
  • FIG. 1 illustrates the pixel drive line 31 as a single wire, it is not limited to one.
  • One end of the pixel drive line 31 is connected to an output end corresponding to each row of the row selection unit 12.
  • the row selection unit 12 is configured by a shift register, an address decoder, and the like, and drives each pixel 2 of the pixel array unit 11 simultaneously for all pixels or in units of rows. That is, the row selection unit 12 constitutes a drive unit that drives each pixel 2 of the pixel array unit 11 together with the timing control unit 20 that controls the row selection unit 12.
  • the row selection unit 12 generally has two scanning systems, a reading scanning system and a sweeping scanning system, although its specific configuration is not shown.
  • the readout scanning system In order to read out the pixel signal from the unit pixel 2, the readout scanning system sequentially selects and scans the unit pixel 2 of the pixel array unit 11 row by row.
  • the pixel signal read out from the unit pixel 2 is an analog signal.
  • the sweeping scanning system performs sweeping scanning on the readout row on which readout scanning is performed by the readout scanning system, prior to the readout scanning by the time of the shutter speed.
  • Unnecessary charge is swept out from the photoelectric conversion unit of the unit pixel 2 of the readout row by the sweep scanning by the sweep scanning system, and the photoelectric conversion unit is reset. Then, so-called electronic shutter operation is performed by sweeping out (resetting) unnecessary charges by the sweeping scanning system.
  • the electronic shutter operation is an operation of discarding the photocharge of the photoelectric conversion unit and newly starting exposure (starting accumulation of photocharge).
  • the signal read out by the readout operation by the readout scanning system corresponds to the amount of light received after the previous readout operation or the electronic shutter operation. Then, a period from the reading timing in the previous reading operation or the sweeping out timing in the electronic shutter operation to the reading timing in the current reading operation is the exposure period of the photocharge in the unit pixel 2.
  • Load MOS unit 13 is formed of a set of current sources I consisting of MOS transistors connected to each of vertical signal lines 32 (32 1 to 32 n ) for each pixel column (see FIG. 2), and selected by row selection unit 12 A bias current is supplied to each pixel 2 of the scanned pixel row through each of the vertical signal lines 32.
  • the column amplifier unit 14 is an adaptive gain amplifier having an AGC (Adaptive Gain Control or Automatic Gain Control) function to adaptively adjust the gain to obtain a constant signal level.
  • the column amplifier unit 14 adjusts the level of the pixel signal read from each pixel 2 of the pixel row selected and scanned by the row selection unit 12 and output through each of the vertical signal lines 32 (32 1 to 32 n ). . Details of the column amplifier unit 14 will be described later.
  • the sample-and-hold unit 15 samples and holds (samples and holds) a pixel signal output from the column amplifier unit 14.
  • the technique of the present disclosure is applied to this sample and hold unit 15.
  • the sample-and-hold unit 15 to which the technology of the present disclosure is applied has at least three capacitors for holding pixel signals, and takes in pixel signals in one capacitor and an image signal in another capacitor. Perform in parallel with the output to the next stage. Details of the sample & hold unit 15 will be described later.
  • the analog-to-digital converter 16 includes a set of a plurality of analog-to-digital converters provided corresponding to the vertical signal lines 32 (32 1 to 32 n ), and is output from the sample & hold unit 15 for each pixel column. Convert analog pixel signals into digital signals.
  • the analog to digital converter can be a known analog to digital converter. Specifically, as an analog to digital converter, a single slope type analog to digital converter, a successive approximation type analog to digital converter, or a delta sigma modulation type ( ⁇ modulation type) analog to digital converter is exemplified. be able to. However, the analog-to-digital converter is not limited to these.
  • the memory unit 17 stores the analog-digital conversion result of the analog-digital conversion unit 16 under the processing of the data processing unit 18.
  • the data processing unit 18 is a digital signal processing unit that processes the digital signal output from the analog-to-digital conversion unit 16 and performs processing of writing / reading the result of analog-to-digital conversion to the memory unit 17. Various processes are performed on the digital conversion result. Further, the data processing unit 18 adjusts the level of the digital signal based on the level determination result of the level determination circuit 142 (see FIG. 6) of the column amplifier unit 14 described later.
  • the output unit 19 outputs the signal processed by the data processing unit 18.
  • the timing control unit 20 generates various timing signals, clock signals, control signals and the like, and based on the generated signals, the row selection unit 12, the column amplifier unit 14, the sample & hold unit 15, the analog-digital signal The drive control of the conversion unit 16 and the data processing unit 18 is performed.
  • FIG. 2 is a circuit diagram showing an example of the circuit configuration of the unit pixel 2.
  • the unit pixel 2 includes, for example, a photodiode 21 as a photoelectric conversion unit.
  • the unit pixel 2 has a pixel configuration including the transfer transistor 22, the reset transistor 23, the amplification transistor 24, and the selection transistor 25 in addition to the photodiode 21.
  • an N-type MOSFET is used as the four transistors of the transfer transistor 22, the reset transistor 23, the amplification transistor 24, and the selection transistor 25.
  • the combination of the conductivity types of the four transistors 22 to 25 illustrated here is merely an example, and the invention is not limited to the combination.
  • a plurality of pixel drive lines are wired in common to each pixel 2 of the same pixel row.
  • the plurality of pixel drive lines are connected to the output end corresponding to each pixel row of the row selection unit 12 in pixel row units.
  • the row selection unit 12 appropriately outputs the transfer signal TRG, the reset signal RST, and the selection signal SEL to a plurality of pixel drive lines.
  • the anode electrode of the photodiode 21 is connected to the low potential side power supply (for example, the ground), and the received light is photoelectrically converted to photocharge (here, photoelectrons) having a charge amount corresponding to the light amount. Accumulate charge.
  • the cathode electrode of the photodiode 21 is electrically connected to the gate electrode of the amplification transistor 24 via the transfer transistor 22.
  • the region where the gate electrodes of the amplification transistors 24 are electrically connected is a floating diffusion (floating diffusion region / impurity diffusion region) FD.
  • the floating diffusion FD is a charge-voltage converter that converts charge into a voltage.
  • a transfer signal TRG whose high level (for example, V DD level) is active is applied to the gate electrode of the transfer transistor 22 from the row selection unit 12.
  • the transfer transistor 22 is turned on in response to the transfer signal TRG, and is photoelectrically converted by the photodiode 21 to transfer the light charge accumulated in the photodiode 21 to the floating diffusion FD.
  • the reset transistor 23 is connected between the node of the high potential side power supply V DD and the floating diffusion FD.
  • a reset signal RST of which high level is active, is applied from the row selection unit 12 to the gate electrode of the reset transistor 23.
  • the reset transistor 23 becomes conductive in response to the reset signal RST, and resets the floating diffusion FD by discarding the charge of the floating diffusion FD to the node of the voltage V DD .
  • the gate electrode of the amplification transistor 24 is connected to the floating diffusion FD, and the drain electrode is connected to the node of the high potential side power supply V DD .
  • the amplification transistor 24 is an input unit of a source follower that reads a signal obtained by photoelectric conversion in the photodiode 21. That is, the source electrode of the amplification transistor 24 is connected to the vertical signal line 32 via the selection transistor 25.
  • the amplification transistor 24 and the current source I connected to one end of the vertical signal line 32 constitute a source follower that converts the voltage of the floating diffusion FD into the potential of the vertical signal line 32.
  • the drain electrode is connected to the source electrode of the amplification transistor 24, and the source electrode is connected to the vertical signal line 32.
  • a selection signal SEL whose high level is active is supplied from the row selection unit 12 to the gate electrode of the selection transistor 25.
  • the selection transistor 25 becomes conductive in response to the selection signal SEL, and transmits the signal output from the amplification transistor 24 to the vertical signal line 32 with the unit pixel 2 in the selection state.
  • the selection transistor 25 may have a circuit configuration connected between the node of the high potential side power supply V DD and the drain electrode of the amplification transistor 24. Further, in this example, as a pixel circuit of the unit pixel 2, a 4Tr configuration including the transfer transistor 22, the reset transistor 23, the amplification transistor 24, and the selection transistor 25; that is, four transistors (Tr) is exemplified. However, it is not limited to this.
  • the selection transistor 25 may be omitted, and the amplification transistor 24 may be configured as a 3Tr to have the function of the selection transistor 25. Alternatively, as necessary, the number of transistors may be increased to 5Tr or more. .
  • CMOS image sensor 1 In the CMOS image sensor 1 according to the present embodiment having the above configuration, as shown in FIG. 3, a so-called stacked structure in which at least two semiconductor substrates (chips) of the first semiconductor substrate 41 and the second semiconductor substrate 42 are stacked. It can be an image sensor of structure. Further, in the CMOS image sensor 1 according to the present embodiment, when the substrate surface on the side where the wiring layer is disposed is the front surface (front), a pixel of the back surface irradiation type that takes in light irradiated from the back surface side on the opposite side It can be structured.
  • the pixel array portion 11 in which unit pixels 2 having a backside illumination type pixel structure are arranged in a matrix is formed on the first semiconductor substrate 41 of the first layer.
  • the row selection unit 12, the load MOS unit 13, the column amplifier unit 14, the sample and hold unit 15, the analog-to-digital conversion unit 16, the memory unit 17, the data processing unit 18, the output unit 19, the timing control unit 20, etc. Is formed on the second semiconductor substrate 42 in the second layer.
  • the first semiconductor substrate 41 of the first layer and the second semiconductor substrate 42 of the second layer are electrically connected through the vias (VIA) 43.
  • the size (area) of the first semiconductor substrate 41 can be sufficient to form the pixel array portion 11, so the size (area of the first semiconductor substrate 41 of the first layer is Thus, the overall size of the chip can be reduced. Furthermore, since a process suitable for manufacturing the unit pixel 2 can be applied to the first semiconductor substrate 41 of the first layer, and a process suitable for manufacturing the circuit portion can be applied to the second semiconductor substrate 42 of the second layer. In the manufacture of the CMOS image sensor 1, there is also an advantage that the process can be optimized.
  • the laminated structure of the two-layer structure in which the first semiconductor substrate 41 and the second semiconductor substrate 42 are laminated is exemplified here, the laminated structure is not limited to the two-layer structure, and three or more layers
  • the circuit portions such as 19 and the timing control unit 20 can be dispersedly formed on the second and subsequent semiconductor substrates.
  • the technology of the present disclosure is not limited to the application to the laminated structure CMOS image sensor 1. That is, according to the technology of the present disclosure, the row selection unit 12, the load MOS unit 13, the column amplifier unit 14, the sample & hold unit 15, the analog-digital conversion unit 16, and the memory unit 17 are provided on the same semiconductor substrate as the pixel array unit 11.
  • the present invention can also be applied to a so-called flat structure CMOS image sensor in which circuit portions such as the data processing unit 18, the output unit 19, and the timing control unit 20 are formed.
  • AD time In the case of using a single slope type analog-to-digital converter as an analog-to-digital converter of the analog-to-digital converter 16 will be described.
  • One AD time is one readout and analog-digital conversion time of pixel signal.
  • the 1 AD time will be described by comparing the case of the circuit configuration without the column amplifier unit 14 and the case of the circuit configuration with the column amplifier unit 14. Then, in any of the circuit configurations, the case where the sample & hold unit 15 to which the technology of the present disclosure is applied is not provided will be described.
  • FIG. 4 shows the configuration of one pixel row of a CMOS image sensor having a circuit configuration without a column amplifier unit.
  • the single slope analog-digital converter 161 has a circuit configuration including a comparator 1611 and a counter 1612.
  • a reference voltage of a so-called ramp (RAMP) waveform slope waveform
  • the reference voltage of the ramp waveform is generated by the reference voltage generator 162.
  • the reference voltage generation unit 162 can be configured, for example, using a DAC (digital-analog conversion) circuit.
  • the comparator 1611 uses a pixel signal read out from the unit pixel 2 as a comparison input, uses the reference voltage generated by the reference voltage generation unit 162 as a reference input, and compares the both. Then, for example, the output of the comparator 1611 is in the first state (for example, high level) when the reference voltage is larger than the pixel signal, and the output is in the second state (for example, when the reference voltage is lower than the pixel signal). , Low level).
  • the output signal of the comparator 1611 is a pulse signal having a pulse width corresponding to the magnitude of the level of the pixel signal.
  • the clock signal is supplied to the counter 1612 at the same timing as the supply start timing of the reference voltage to the comparator 1611. Then, the counter 1612 performs counting operation in synchronization with the clock signal to measure the period of the pulse width of the output pulse of the comparator 1611, that is, the period from the start of the comparison operation to the end of the comparison operation.
  • the count result (count value) of the counter 1612 is a digital value obtained by digitizing an analog pixel signal.
  • the analog-to-digital converter 16 using the single slope type analog-to-digital converter 161 as the analog-to-digital converter generates a reference voltage of a gradually changing analog value, and generates a reference voltage and a signal.
  • a digital signal value is obtained from time information until the magnitude relation with the voltage changes.
  • the pixel signal is a P phase signal (reset signal) which is a black level (reset level) output from the unit pixel 2 at the time of reset, and a D phase signal (data) which is a signal level output from the unit pixel 2 at the photoelectric conversion. Signal).
  • P-phase signal reset signal
  • D phase signal data
  • the P-phase signal is first analog-digital converted, then the D-phase signal is analog-digital converted, and then the difference between the two is taken for reading out one pixel signal. To be done.
  • the process of obtaining the difference between the P-phase signal and the D-phase signal is a process for noise removal called CDS (Correlated Double Sampling).
  • FIG. 5A shows an analog-digital conversion time chart and a slope waveform of a reference voltage in a CMOS image sensor without a column amplifier unit.
  • RST is a reset period of unit pixel 2
  • P.sub .-- settling is a settling period of P-phase signal
  • P.sub .-- count is an analog-digital conversion period of P-phase signal
  • TRG is a D-phase signal in unit pixel 2.
  • Transfer period ie, the on period of the transfer transistor 22).
  • level determination indicates a level determination period of a pixel signal
  • D_settling indicates a settling period of a D-phase signal
  • D_count indicates an analog-digital conversion period of a D-phase signal.
  • FIG. 6 shows the configuration of one pixel row of a CMOS image sensor having a circuit configuration having a column amplifier unit.
  • Column amplifier unit 14 an inverting amplifier 141, the level determination circuit 142, OR circuit 143, the input capacitance C 1, the output capacitance C 2, at least two feedback capacitors C 3, C 4, auto-zero switch SW 1, and, gain switching It has a circuit configuration having a switch SW 2.
  • Pixel signals output from the unit pixel 2 via the input capacitance C 1 is input to the inverting amplifier 141.
  • the inverting amplifier 141 may take various forms, but as a typical example, an N-type MOS input source grounded operational amplifier shown in FIG. 6 can be used.
  • Output capacitance C 2 has an output terminal and a reference potential of the inverting amplifier 141 (e.g., ground) is connected between a node of.
  • Auto zero switch SW 1 is a an input end is connected between the output terminal, in response to a control signal AZ supplied from the timing control unit 20 (see FIG. 1) ON (closed) state of the inverting amplifier 141
  • the control signal AZ is an auto-zero signal that initializes the column amplifier unit 14.
  • Feedback capacitor C 3 is connected between the input and output of the inverting amplifier 141.
  • Feedback capacitor C 4, to the feedback capacitor C 3, is selectively connected in parallel via the gain switching switch SW 2.
  • the level determination circuit 142 compares the output voltage of the inverting amplifier 141 with an externally applied reference voltage V ref , and uses the result of the level determination as one input of the OR circuit 143.
  • the level determination result of the level determination circuit 142 is also given to the data processing unit 18.
  • OR circuit 143 a control signal AZ to the other input, performing on / off control of the gain selector switch SW 2 by the output.
  • the control signal AZ is activated at the beginning of the series of operations, and the auto zero switch SW 1 is turned on (closed), whereby the input / output terminal of the inverting amplifier 141 A short circuit occurs and the inverting amplifier 141 is initialized.
  • the operating point of the inverting amplifier 141 is determined, the voltage difference between the potential of the vertical signal line 32 at the time of pixel reset and the operating point of the inverting amplifier 141 is held in the input capacitor C 1, DC offset is absorbed.
  • the column amplifier unit 14 operates with respect to the amount of change from the auto zero state (initialization state).
  • the reset feedback capacitor C 3 and the feedback capacitor C 4 is also performed.
  • the gain of the column amplifier unit 14 is determined by the ratio of the input capacitance C 1 to the feedback capacitances C 3 and C 4 .
  • the gain changeover switch SW 2 In high gain mode, the gain changeover switch SW 2 is in OFF (open) state, the gain becomes C 1 / C 3.
  • the gain changeover switch SW 2 In low gain mode, the gain changeover switch SW 2 is is turned on (closed) state, the gain becomes C 1 / (C 3 + C 4).
  • Gain switching switch SW 2 after the ON state during the auto-zero (AZ) period, during settling of the P-phase signal is turned off.
  • the level determination circuit 142 sets the output voltage of the column amplifier unit 14 to the reference voltage V ref .
  • the contrast of the D-phase signal is determined by comparison.
  • the output of the level determination circuit 142 becomes high.
  • the gain changeover switch SW 2 is turned on.
  • the output capacitance C 2 which is provided for noise reduction, since the response speed of the column amplifier unit 14 is somewhat limited, in settling period of settling period and D-phase signal P phase signal, the vertical signal line 32 potential Not only settling but also settling of the column amplifier unit 14 is performed.
  • the column amplifier unit 14 makes the amplifier gain high for P-phase signals and dark (low illuminance) D-phase signals, and functions of AGC for bright (high illuminance) D-phase signals.
  • the level of the pixel signal output from the unit pixel 2 is adjusted by automatically setting the amplifier gain to a low gain. That is, the column amplifier unit 14 can switch at least two types of gains.
  • FIG. 7A shows the relationship between the input of the column amplifier unit 14 and the output of the analog-digital conversion unit 16.
  • the bright D-phase signal contains large light shot noise, and the quantization error is buried in it, so that the resolution of analog-digital conversion can be reduced.
  • the signal amplification by the column amplifier unit 14 is compressed based on the level determination result of the level determination circuit 142 in the data processing unit 18 after analog-digital conversion. Linearize and make a picture. Therefore, even if the resolution of the analog-to-digital converter 16 is lowered, the final resolution can be maintained. Therefore, the resolution of the analog-to-digital converter 16 can be reduced by providing the column amplifier unit 14 having the AGC function.
  • FIG. 7B shows the relationship between the input of the column amplifier unit 14 and the output after linearization.
  • the analog-to-digital converter 16 using the single slope analog-to-digital converter 161 can shorten the analog-to-digital conversion time D_count of the D-phase signal, as shown in FIG. 5B. Time can be reduced. Further, for the same reason, the amount of noise required for the analog-to-digital converter 16 is alleviated, so that the circuit scale which is influenced by the magnitude of the noise can be reduced. Can be reduced, and that amount can be allocated to the column amplifier unit 14.
  • AZ represents an auto-zero period in which the column amplifier unit 14 is initialized.
  • analog-to-digital conversion of the D-phase signal is performed. Since time D_count can be shortened, 1 AD time can be shortened. However, although the analog-to-digital conversion time D_count of the D-phase signal can be shortened, the count time of the counter 1612 and the settling time of the input signal still remain. Then there is a limit.
  • the sample and hold unit 15 to which the technology of the present disclosure is applied is provided between the column amplifier unit 14 and the analog-digital conversion unit 16.
  • the sample-and-hold unit 15 has at least three capacitances for holding pixel signals, and takes in the pixel signal in one capacitance and the analog-digital conversion unit 16 in the image signal loaded in the other capacitance. Run in parallel with the output.
  • the sample and hold unit 15 can temporarily hold the pixel signal passed through the column amplifier unit 14. As a result, the output voltage of the column amplifier unit 14 is held in the capacity of the sample and hold unit 15 after the completion of the settling, while the column amplifier unit 14 can immediately shift to the taking in and settling of the next input signal. Then, while the column amplifier unit 14 takes in the next input signal, the analog-digital conversion unit 16 analog-digital converts the voltage signal held by the sample-and-hold unit 15.
  • the technique of the present disclosure reduces the time for reading and analog-to-digital conversion, thereby achieving parallel operation.
  • the number of analog-to-digital converters 16 can be reduced. As a result, the area and cost of the CMOS image sensor 1 can be reduced.
  • the pixel signal output first is the odd-numbered (odd row) pixel signal
  • the pixel signal output later P phase and D phase of each pixel signal are referred to as odd P phase signal, D phase signal, and even P phase signal and D phase signal.
  • Example 1 The first embodiment is an example in which the sample & hold unit 15 has four capacitors for holding pixel signals.
  • an N-type MOS input source grounding operational amplifier is used as the inverting amplifier 141 of the column amplifier unit 14 and the analog-digital converter 161 of the analog-digital converter 16.
  • the sample-and-hold unit 15 is composed of, for example, a set of a plurality of sample-and-hold circuits 151 provided for each pixel column. Then, each of the sample & hold circuits 151 provided for each pixel column has four capacitors for holding pixel signals.
  • FIG. 8 shows the configuration of one pixel row of the CMOS image sensor according to the first embodiment.
  • the sample-and-hold circuit 151 provided for each pixel column includes two capacitors C s_P_odd and C s_D_odd that hold odd-numbered P-phase signals and D-phase signals, and even-numbered P-phase signals. It has a total of four capacitances C s _P_odd , C s _D_odd , C s _P_even , and C s _D_even , which are a total of four capacitances C s _P_even and C s _D_even for holding the signal and the D-phase signal.
  • One end of each of the four capacitors Cs_P_odd , Cs_D_odd , Cs_P_even , and Cs_D_even is connected to a node of a reference potential (for example, the ground).
  • a switch SW in_P_odd and a switch SW in_D_odd are connected between the circuit input end of the sample and hold circuit 151 and each other end of the two capacitors C s _P_odd and C s _D _ odd .
  • the circuit input terminal of the sample and hold circuit 151, two capacitive C S_P_even, between the other ends of the C S_D_even, switch SW In_P_even and the switch SW In_D_even is connected.
  • a switch SWout_P_odd and a switch SWout_D_odd are connected between the other ends of the two capacitors Cs_P_odd and Cs_D_odd and the circuit output terminal of the sample-and-hold circuit 151. Further , a switch SW out_P_even and a switch SW out_D_even are connected between the other ends of the two capacitors C s _P _even and C s _ D _even and the circuit output terminal of the sample and hold circuit 151.
  • the sample-and-hold circuit 151 has a reset switch SW out_Reset connected between the circuit output end and a node of a reference potential (for example, ground).
  • the reset switch SWout_Reset resets the potential of the circuit output end of the sample and hold circuit 151, that is, the circuit output end that outputs the pixel signal to the analog-digital converter 16 (analog-digital converter 161).
  • the on / off control is performed by the timing control unit 20 of FIG.
  • the odd-numbered P-phase signal output from the column amplifier unit 14 is held in the capacitor Cs_P_odd through the switch SW in_P_odd , and the odd-numbered D-phase signal is held in the capacitor C s_D_odd through the switch SW in_D_odd. .
  • the even-numbered P-phase signal output from the column amplifier unit 14 is held in the capacitor Cs_P_even through the switch SW in_P_even , and the even-numbered D-phase signal is held in the capacitor Cs_D_even through the switch SW in_D_even .
  • the circuit operation of the CMOS image sensor 1 according to the present embodiment having the sample and hold circuit 151 of the above circuit configuration, mainly the circuit operation of the sample and hold circuit 151, will be described using the timing waveform diagram of FIG. Do.
  • the circuit operation is performed under the control of the timing control unit 20.
  • the former part of the signal processing system that is, the time chart of the column amplifier unit 14 + sample and hold circuit 151
  • the latter part of the signal processing system that is, the sample and hold circuit 151 + analog-digital converter A 161 time chart is shown.
  • waveforms of the input of the column amplifier unit 14, the output of the level determination circuit 142, the output of the column amplifier unit 14, the output of the sample and hold circuit 151, the reference voltage, and the control signal AZ are shown.
  • SW In_P_odd for odd SW in_D_odd
  • SW out_P_odd SW out_D_odd
  • SW in_P_even for even-numbered
  • SW in_D_even for SW out_P_even
  • SW out_D_even shows the ON / OFF state of the reset switch SW out_Reset.
  • the switch SW In_P_odd and the switch SW In_D_odd the input side sequentially turned on takes in the odd-numbered P-phase signal and the D-phase signal, the capacity for the odd C S_P_odd, the C S_D_odd Hold.
  • the switch SW out_P_even and the switch SW out_D_even on the output side are sequentially turned on, and the capacitors C s_P_even and C s_D_even for even-numbered in the previous operation cycle And outputs the even-numbered P-phase signal and D-phase signal held therein to the analog-digital converter 161 in order.
  • the switch SW in_P_even and the switch SW in_D_even on the input side are sequentially turned on, and the even-numbered P-phase signal and D-phase signal are captured and held in the even-numbered capacitors Cs_P_even , Cs_D_even .
  • the switch SW out_P_odd and the switch SW out_D_odd on the output side are sequentially turned on, and the capacitors C s _ P _ odd for odd number and C s _ D _ odd in the previous operation cycle.
  • the odd-numbered P-phase signal and the D-phase signal held in are sequentially output to the analog-digital converter 161.
  • the output side of the switch SW out_P_odd, SW out_D_odd, SW out_P_even , SW out_D_even is comprised in one by one on state in order, the next switch from each switch is turned off is turned on In the meantime , the reset switch SWout_Reset is turned on for a short time.
  • the reset switch SW out_Reset causes the parasitic capacitance of the output wiring of the sample and hold circuit 151 and the charge accumulated in the input parasitic capacitance of the analog-to-digital converter 161 to be reset once and passed to the analog-to-digital converter 161. The history of each signal remains so as not to be mixed with the signal to be passed next.
  • the output voltage of the column amplifier unit 14 is temporarily stored by the sample & hold unit 15. Can be held.
  • the output voltage of the column amplifier unit 14 is held in the capacity of the sample and hold unit 15 after the completion of the settling, while the column amplifier unit 14 can immediately shift to the taking in and settling of the next input signal.
  • the analog-digital conversion unit 16 analog-digital converts the voltage signal held by the sample-and-hold unit 15.
  • the effective 1 AD time can be shortened.
  • the settling time and the analog-to-digital conversion time are the same, the shortening effect of 1 AD time is the highest, and 1 AD time can be shortened by about half compared with the case where the settling and the analog-digital conversion are not performed in parallel. it can.
  • kT / C noise When sampling and holding a signal, kT / C noise is generated, but in the CMOS image sensor 1 according to this embodiment, the influence can be suppressed by using the AGC operation of the column amplifier unit 14.
  • the kT / C noise of the sample & hold unit 15 is suppressed by the input conversion. This can be said to be because kT / C noise is also compressed and becomes smaller when the signal amplified by the column amplifier unit 14 is compressed by the data processing unit 18 after analog-to-digital conversion and linearized. .
  • the column amplifier unit 14 since the column amplifier unit 14 is in the low gain mode, the above-described effect can not be obtained for the kT / C noise of the sample & hold unit 15.
  • the bright D-phase signal contains large light shot noise, the kT / C noise is buried in it and is not a problem.
  • the AGC operation of the column amplifier unit 14 can be used to reduce the resolution of analog-digital conversion. Further, since the amount of noise required for the analog-to-digital converter 16 is alleviated, the power consumption and area of the analog-to-digital converter 16 can be reduced to be allocated to other blocks.
  • Example 2 The second embodiment is a modification of the first embodiment, in which the inverting amplifier 141 is a P-type MOS input source-grounded operational amplifier.
  • FIG. 10 shows the configuration of one pixel row of the CMOS image sensor according to the second embodiment.
  • the inverting amplifier 141 of the column amplifier unit 14 can take various forms.
  • an N-type MOS input source grounded operational amplifier is used as the inverting amplifier 141.
  • a P-type MOS input source grounded operational amplifier is used as the inverting amplifier 141.
  • the third embodiment is a modification of the first embodiment and is an example using the input of the inverting amplifier 141 as the input of the level determination circuit 142.
  • FIG. 11 shows the configuration of one pixel row of the CMOS image sensor according to the third embodiment.
  • the output of the inverting amplifier 141 is used as the input of the level determination circuit 142.
  • the input of the inverting amplifier 141 that is, the input of the column amplifier unit 14 is used as the input of the level determination circuit 142.
  • Example 4 is. This is a modification of the first embodiment, and is an example in which the capacitance values of the feedback capacitors C 3 and C 4 of the column amplifier unit 14 are variable.
  • FIG. 12 shows the configuration of one pixel row of the CMOS image sensor according to the fourth embodiment.
  • the capacitance values of the feedback capacitors C 3 and C 4 of the column amplifier unit 14 are fixed.
  • Example 4 using a variable capacitance as the feedback capacitor C 3, C 4 of the column amplifier unit 14, and a variable capacitance value of the feedback capacitor C 3, C 4.
  • the technique of the fourth embodiment can also be applied to the second and third embodiments.
  • the fifth embodiment is a modification of the first embodiment and is an example having a plurality of level determination circuits 142.
  • FIG. 13 shows the configuration of one pixel column of the CMOS image sensor according to the fifth embodiment.
  • one level determination circuit 142 is provided, and the determination output of the level determination circuit 142 is one bit.
  • a plurality of level determination circuits 142 are provided.
  • each of the plurality of level determination circuits 142 is supplied with the plurality of reference voltages V ref having different voltage values, and the plurality of level determination circuits 142 output the level determination results of the plurality of bits.
  • OR circuit 143, feedback capacitor C 4, and the gain changeover switch SW 2 is also plurality.
  • the technique of the fifth embodiment is also applicable to the second embodiment, the third embodiment, and the fourth embodiment.
  • the sixth embodiment is an example in which the sample & hold unit 15 has three capacitors for holding pixel signals.
  • FIG. 14 shows the configuration of one pixel column of the CMOS image sensor according to the sixth embodiment.
  • each of the plurality of sample and hold circuits 151 of the sample and hold unit 15 has three capacitors C s1 , C s2 and C s3 as capacitors for holding pixel signals.
  • One end of each of the three capacitors C s1 , C s2 , and C s3 is connected to a node of a reference potential (for example, the ground).
  • Three switches SW in1 , SW in2 , and SW in3 are connected between the circuit input end of the sample and hold circuit 151 and the other ends of the three capacitors C s1 , C s2 , and C s3 .
  • three switches SW out1 , SW out2 , and SW out3 are connected between the other ends of the three capacitors C s1 , C s2 , and C s3 and the circuit output end of the sample and hold circuit 151. ing.
  • FIG. 15 shows a time chart for explaining the circuit operation of the CMOS image sensor according to the sixth embodiment. 15, a time chart of the former part of the signal processing system, ie, the column amplifier unit 14 + sample and hold circuit 151, and a time chart of the latter part of the signal processing system, ie, the sample and hold circuit 151 + analog-digital converter 161. Respectively.
  • the analog-digital conversion period P_count of the P-phase signal and the period from the transfer period TRG of the D-phase signal to the settling period D_settling of the D-phase signal do not overlap.
  • the capacitance C s1 is settled to the D-phase signal immediately after that. It can be used for
  • the modification as in the second embodiment, the third embodiment, the fourth embodiment, or the fifth embodiment can be applied to the sixth embodiment.
  • the technology of the present disclosure is not limited to application to a solid-state imaging device that detects the distribution of incident light quantity of visible light and captures an image as an image, and images distribution of incident quantity such as infrared rays, X-rays, or particles as an image
  • the present invention is applicable to all solid-state imaging devices.
  • CMOS image sensor 1 (Application example of embodiment)
  • the CMOS image sensor 1 according to the present embodiment described above can be used for various devices for sensing light such as visible light, infrared light, ultraviolet light, and X-rays as shown in, for example, FIG. Specific examples of various devices are listed below.
  • a device for capturing an image to be used for viewing purposes such as a digital camera or a portable device with a camera function
  • For safe driving such as automatic stop and recognition of driver's condition etc.
  • Captures gestures of devices and users used in the field of traffic such as in-vehicle sensors that capture images of the rear, surroundings, and inside a car, surveillance cameras that monitor traveling vehicles and roads, and distance measurement sensors that measure distances between vehicles.
  • Devices used in the field of home appliances such as television receivers, refrigerators, air conditioners, etc., and devices that perform blood vessel imaging by receiving infrared light in order to operate the devices according to the gesture Equipment used in the field of medicine and healthcare, surveillance cameras for security applications, cameras used in the field of personal identification, etc.
  • Devices used in the field of security skin measuring instruments for photographing the skin, and microscopes for photographing the scalp Equipment used in the field of beauty, such as equipment, action cameras for sports applications, wearable cameras, etc. equipment used in the field of sports, cameras used to monitor the condition of fields and crops, etc. used in the field of agriculture apparatus
  • an imaging apparatus such as a digital still camera or video camera
  • a portable terminal apparatus having an imaging function such as a cellular phone
  • an electronic apparatus such as a copying machine using a solid-state imaging device as an image reading unit
  • FIG. 17 is a block diagram showing a configuration of an imaging device which is an example of the electronic device of the present disclosure.
  • the imaging device 50 includes an imaging optical system 51 including a lens group, an imaging unit 52, a DSP circuit 53, a frame memory 54, a display device 55, a recording device 56, an operation system 57, And a power supply system 58 and the like.
  • the DSP circuit 53, the frame memory 54, the display device 55, the recording device 56, the operation system 57, and the power supply system 58 are mutually connected via a bus line 59.
  • the imaging optical system 51 captures incident light (image light) from a subject and forms an image on the imaging surface of the imaging unit 52.
  • the imaging unit 52 converts the light amount of incident light focused on the imaging surface by the imaging optical system 51 into an electrical signal in pixel units and outputs the electrical signal as a pixel signal.
  • the DSP circuit 53 performs general camera signal processing such as white balance processing, demosaicing processing, gamma correction processing and the like.
  • the frame memory 54 is suitably used for storing data in the process of signal processing in the DSP circuit 53.
  • the display device 55 includes a panel type display device such as a liquid crystal display device or an organic EL (electro luminescence) display device, and displays a moving image or a still image captured by the imaging unit 52.
  • the recording device 56 records a moving image or a still image captured by the imaging unit 52 in a recording medium such as a portable semiconductor memory, an optical disk, or a hard disk drive (HDD).
  • a recording medium such as a portable semiconductor memory, an optical disk, or a hard disk drive (HDD).
  • the operation system 57 issues operation commands for various functions of the imaging device 50 under the operation of the user.
  • the power supply system 58 appropriately supplies various power supplies serving as operation power supplies of the DSP circuit 53, the frame memory 54, the display device 55, the recording device 56, and the operation system 57 to these supply targets.
  • Such an imaging device 50 is applied to a video camera, a digital still camera, and a camera module for mobile devices such as a smartphone and a cellular phone.
  • the CMOS image sensor according to the above-described embodiment can be used as the imaging unit 52.
  • one AD time which is the time for reading out one pixel signal and the analog-to-digital conversion time, which can contribute to, for example, speeding up of the imaging operation.
  • the technology of the present disclosure is realized as a device mounted on any type of mobile object such as a car, an electric car, a hybrid electric car, a motorcycle, a bicycle, personal mobility, an airplane, a drone, a ship, a robot It may be done.
  • FIG. 18 is a block diagram showing a schematic configuration example of a vehicle control system that is an example of a mobile control system to which the technology of the present disclosure can be applied.
  • Vehicle control system 12000 includes a plurality of electronic control units connected via communication network 12001.
  • the vehicle control system 12000 includes a drive system control unit 12010, a body system control unit 12020, an external information detection unit 12030, an in-vehicle information detection unit 12040, and an integrated control unit 12050.
  • a microcomputer 12051, an audio image output unit 12052, and an in-vehicle network I / F (interface) 12053 are illustrated as a functional configuration of the integrated control unit 12050.
  • the driveline control unit 12010 controls the operation of devices related to the driveline of the vehicle according to various programs.
  • the drive system control unit 12010 includes a drive force generation device for generating a drive force of a vehicle such as an internal combustion engine or a drive motor, a drive force transmission mechanism for transmitting the drive force to the wheels, and a steering angle of the vehicle. adjusting steering mechanism, and functions as a control device of the braking device or the like to generate a braking force of the vehicle.
  • Body system control unit 12020 controls the operation of the camera settings device to the vehicle body in accordance with various programs.
  • the body system control unit 12020 functions as a keyless entry system, a smart key system, a power window device, or a control device of various lamps such as a headlamp, a back lamp, a brake lamp, a blinker or a fog lamp.
  • the body system control unit 12020 the signal of the radio wave or various switches is transmitted from wireless controller to replace the key can be entered.
  • Body system control unit 12020 receives an input of these radio or signal, the door lock device for a vehicle, the power window device, controls the lamp.
  • Outside vehicle information detection unit 12030 detects information outside the vehicle equipped with vehicle control system 12000.
  • an imaging unit 12031 is connected to the external information detection unit 12030.
  • the out-of-vehicle information detection unit 12030 causes the imaging unit 12031 to capture an image outside the vehicle, and receives the captured image.
  • the external information detection unit 12030 may perform object detection processing or distance detection processing of a person, a vehicle, an obstacle, a sign, characters on a road surface, or the like based on the received image.
  • Imaging unit 12031 receives light, an optical sensor for outputting an electric signal corresponding to the received light amount of the light.
  • the imaging unit 12031 can output an electric signal as an image or can output it as distance measurement information.
  • the light image pickup unit 12031 is received may be a visible light, it may be invisible light such as infrared rays.
  • Vehicle information detection unit 12040 detects the vehicle information.
  • a driver state detection unit 12041 that detects a state of a driver is connected to the in-vehicle information detection unit 12040.
  • the driver state detection unit 12041 includes, for example, a camera for imaging the driver, and the in-vehicle information detection unit 12040 determines the degree of fatigue or concentration of the driver based on the detection information input from the driver state detection unit 12041. It may be calculated or it may be determined whether the driver does not go to sleep.
  • the microcomputer 12051 calculates a control target value of the driving force generation device, the steering mechanism or the braking device based on the information inside and outside the vehicle acquired by the outside information detecting unit 12030 or the in-vehicle information detecting unit 12040, and a drive system control unit A control command can be output to 12010.
  • the microcomputer 12051 the driving force generating device on the basis of the information around the vehicle acquired by the outside information detection unit 12030 or vehicle information detection unit 12040, by controlling the steering mechanism or braking device, the driver automatic operation such that autonomously traveling without depending on the operation can be carried out cooperative control for the purpose of.
  • the microcomputer 12051 can output a control command to the body system control unit 12020 based on the information outside the vehicle acquired by the external information detection unit 12030.
  • the microcomputer 12051 controls the headlamps in response to the preceding vehicle or the position where the oncoming vehicle is detected outside the vehicle information detection unit 12030, the cooperative control for the purpose of achieving the anti-glare such as switching the high beam to the low beam It can be carried out.
  • Audio and image output unit 12052 transmits, to the passenger or outside of the vehicle, at least one of the output signal of the voice and image to be output device to inform a visually or aurally information.
  • an audio speaker 12061, a display unit 12062, and an instrument panel 12063 are illustrated as the output device.
  • Display unit 12062 may include at least one of the on-board display and head-up display.
  • FIG. 19 is a diagram illustrating an example of the installation position of the imaging unit 12031.
  • imaging units 12101, 12102, 12103, 12104, and 12105 are provided as the imaging unit 12031.
  • the imaging units 12101, 12102, 12103, 12104, and 12105 are provided, for example, at positions such as the front nose of the vehicle 12100, a side mirror, a rear bumper, a back door, and an upper portion of a windshield of a vehicle interior.
  • the imaging unit 12101 provided in the front nose and the imaging unit 12105 provided in the upper part of the windshield in the vehicle cabin mainly acquire an image in front of the vehicle 12100.
  • the imaging units 12102 and 12103 included in the side mirror mainly acquire an image of the side of the vehicle 12100.
  • the imaging unit 12104 provided in the rear bumper or the back door mainly acquires an image of the rear of the vehicle 12100.
  • the imaging unit 12105 provided on the top of the windshield in the passenger compartment is mainly used to detect a leading vehicle or a pedestrian, an obstacle, a traffic light, a traffic sign, a lane, or the like.
  • FIG. 17 illustrates an example of the imaging range of the imaging units 12101 to 12104.
  • Imaging range 12111 indicates an imaging range of the imaging unit 12101 provided in the front nose
  • imaging range 12112,12113 are each an imaging range of the imaging unit 12102,12103 provided on the side mirror
  • an imaging range 12114 is The imaging range of the imaging part 12104 provided in the rear bumper or the back door is shown. For example, by overlaying the image data captured by the imaging units 12101 to 12104, a bird's-eye view of the vehicle 12100 viewed from above can be obtained.
  • At least one of the imaging units 12101 to 12104 may have a function of acquiring distance information.
  • at least one of the imaging units 12101 to 12104 may be a stereo camera including a plurality of imaging devices, or may be an imaging device having pixels for phase difference detection.
  • the microcomputer 12051 changes the distance to each solid object in the imaging ranges 12111 to 12114 and the temporal change of this distance (relative velocity with respect to the vehicle 12100) In particular, it is possible to extract a three-dimensional object traveling at a predetermined speed (for example, 0 km / h or more) in substantially the same direction as the vehicle 12100 as a leading vehicle, in particular by finding the it can. Further, the microcomputer 12051 can set an inter-vehicle distance to be secured in advance in front of the preceding vehicle, and can perform automatic brake control (including follow-up stop control), automatic acceleration control (including follow-up start control), and the like. Automatic operation or the like for autonomously traveling without depending on the way of the driver operation can perform cooperative control for the purpose.
  • automatic brake control including follow-up stop control
  • automatic acceleration control including follow-up start control
  • the microcomputer 12051 converts three-dimensional object data relating to a three-dimensional object into a two-wheeled vehicle, an ordinary vehicle, a large vehicle, a pedestrian, another object such as a telephone pole It can be classified, extracted and used for automatic avoidance of obstacles. For example, the microcomputer 12051 identifies obstacles around the vehicle 12100 into obstacles visible to the driver of the vehicle 12100 and obstacles difficult to see.
  • the microcomputer 12051 determines a collision risk which indicates the risk of collision with the obstacle, when a situation that might collide with the collision risk set value or more, through an audio speaker 12061, a display portion 12062 By outputting a warning to the driver or performing forcible deceleration or avoidance steering via the drive system control unit 12010, driving support for collision avoidance can be performed.
  • At least one of the imaging units 12101 to 12104 may be an infrared camera that detects infrared light.
  • the microcomputer 12051 can recognize a pedestrian by determining whether a pedestrian is present in the captured image of the imaging units 12101 to 12104.
  • pedestrian recognition is, for example, a procedure for extracting feature points in images captured by the imaging units 12101 to 12104 as an infrared camera, and whether a pedestrian is subjected to pattern matching processing on a series of feature points indicating an outline of an object.
  • the procedure is to determine
  • the audio image output unit 12052 generates a square outline for emphasizing the recognized pedestrian.
  • the display unit 12062 is controlled so as to display a superimposed image.
  • the audio image output unit 12052 is, an icon or the like indicating a pedestrian may control the display unit 12062 to display the desired position.
  • the technique of the present disclosure can be applied to, for example, the imaging unit 12031 and the driver state detection unit 12041 among the configurations described above.
  • the CMOS image sensor 1 of FIG. 1 can be applied to the imaging unit 12031 and the driver state detection unit 12041.
  • the present disclosure can also be configured as follows.
  • A. Solid-state image sensor >> [A-1] A pixel array unit in which a plurality of unit pixels including a photoelectric conversion unit are arranged in a matrix, An amplifier unit for adjusting the level of the pixel signal output from the unit pixel through the vertical signal line provided corresponding to the column array of the pixel array unit; A sample-and-hold unit that samples and holds a pixel signal that has passed through the amplifier unit; It has an analog-to-digital converter that converts the pixel signal output from the sample-and-hold unit into a digital signal, The sample-and-hold unit has at least three capacitors for holding pixel signals, and takes in the pixel signal in one capacitor and outputs the image signal taken in the other capacitor to the analog-digital converter.
  • the pixel signal includes a reset signal output from the unit pixel at the time of reset, and a data signal output from the unit pixel at the time of photoelectric conversion,
  • the sample-and-hold unit has two capacitances for a reset signal of one pixel signal and a capacitance for a data signal, and the other image signal for two pixel signals output from a unit pixel in time series.
  • the solid-state imaging device With a total of four capacitances, two for the reset signal and for the data signal, The solid-state imaging device according to [A-1] or [A-2].
  • the sample-and-hold unit has a reset switch that resets the potential of the circuit output terminal that outputs the pixel signal to the analog-to-digital conversion unit.
  • the solid-state imaging device according to any one of the above [A-1] to [A-3].
  • the amplifier unit is an adaptive gain type amplifier that adaptively adjusts the gain to obtain a constant signal level.
  • the amplifier unit can switch at least two types of gains, The solid-state imaging device according to the above [A-5].
  • the amplifier unit has a level determination circuit that determines the level of the pixel signal, and switches the gain according to the determination result of the level determination circuit.
  • the solid-state imaging device according to the above [A-6].
  • a digital signal processor that processes digital signals output from the analog-to-digital converter is provided.
  • the digital signal processing unit adjusts the level of the digital signal based on the determination result of the level determination circuit.
  • the digital signal processing unit compresses the digital signal based on the determination result of the level determination circuit.
  • a pixel array unit in which a plurality of unit pixels including a photoelectric conversion unit are arranged in a matrix, An amplifier unit for adjusting the level of the pixel signal output from the unit pixel through the vertical signal line provided corresponding to the column array of the pixel array unit; A sample-and-hold unit that samples and holds a pixel signal that has passed through the amplifier unit; It has an analog-to-digital converter that converts the pixel signal output from the sample-and-hold unit into a digital signal, The sample-and-hold unit has at least three capacitors for holding pixel signals, and takes in the pixel signal in one capacitor and outputs the image signal taken in the other capacitor to the analog-digital converter.
  • [B-2] has a stacked structure in which at least two semiconductor substrates of a first semiconductor substrate and a second semiconductor substrate are stacked, The pixel array unit is formed on the first semiconductor substrate, The sample and hold unit is formed on a semiconductor substrate other than the first semiconductor substrate, The electronic device according to the above [B-1].
  • the pixel signal includes a reset signal output from the unit pixel at the time of reset, and a data signal output from the unit pixel at the time of photoelectric conversion,
  • the sample-and-hold unit has two capacitances for a reset signal of one pixel signal and a capacitance for a data signal, and the other image signal for two pixel signals output from a unit pixel in time series.
  • the sample-and-hold unit has a reset switch that resets the potential of the circuit output terminal that outputs the pixel signal to the analog-to-digital conversion unit.
  • the amplifier unit is an adaptive gain type amplifier that adaptively adjusts the gain to obtain a constant signal level.
  • the amplifier unit can switch at least two types of gains, The electronic device according to the above [B-5].
  • the amplifier unit has a level determination circuit that determines the level of the pixel signal, and switches the gain according to the determination result of the level determination circuit.
  • a digital signal processor that processes digital signals output from the analog-digital converter is provided.
  • the digital signal processing unit adjusts the level of the digital signal based on the determination result of the level determination circuit.
  • the digital signal processing unit compresses the digital signal based on the determination result of the level determination circuit.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Power Engineering (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Electromagnetism (AREA)
  • Condensed Matter Physics & Semiconductors (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Solid State Image Pick-Up Elements (AREA)

Abstract

本開示の固体撮像素子は、光電変換部を含む複数の単位画素が行列状に配置された画素アレイ部、画素アレイ部の列配列に対応して設けられた垂直信号線を通して単位画素から出力される画素信号のレベル調整を行うアンプ部、アンプ部を経た画素信号をサンプリングし、保持するサンプル&ホールド部、及び、サンプル&ホールド部から出力される画素信号をデジタル信号に変換するアナログ-デジタル変換部を備える。そして、サンプル&ホールド部は、画素信号を保持する少なくとも3個の容量を有し、一の容量への画素信号の取込みと、あらかじめ他の容量に取り込んでいる画像信号のアナログ-デジタル変換部への出力とを並行して行う。

Description

固体撮像素子及び電子機器
 本開示は、固体撮像素子及び電子機器に関する。
 固体撮像素子において、単位画素から出力されるアナログの画素信号をデジタル信号に変換するアナログ-デジタル変換部のアナログ-デジタル変換器として、例えば、シングルスロープ型のアナログ-デジタル変換器を用いることができる。シングルスロープ型のアナログ-デジタル変換器では、1回分の画素信号の読出し及びアナログ-デジタル変換時間を1AD時間とするとき、1AD時間の殆どが、単位画素からの入力信号のセトリング時間、及び、アナログ-デジタル変換器のカウンタのカウント時間で占められる。
 従来、アナログ-デジタル変換部の前段に、AGC(Adaptive Gain Control あるいは Automatic Gain Control)機能を持つカラムアンプ部を配置することで、1AD時間の短縮化を図っていた(例えば、非特許文献1参照)。この非特許文献1に記載の従来技術では、アナログ-デジタル変換部の分解能を下げても、最終的な分解能を保つことができるため、アナログ-デジタル変換部の分解能を下げることができる。従って、シングルスロープ型のアナログ-デジタル変換器では、特に信号レベルのカウント時間を短縮できるため1AD時間を短縮できる。
An APS-H-Size 250Mpixel CMOS image sensor using column single-slope ADCs with dual-gain amplifiers.ISSCC 2016
 上述した、アナログ-デジタル変換部の前段にカラムアンプ部を配置した構成では、セトリングが終わった後、アナログ-デジタル変換の最中はカラムアンプ部の出力電圧や単位画素の出力電圧は一定値を保持し続ける必要があるため、次の単位画素からの出力はアナログ-デジタル変換の完了を待つ必要があった。一方、アナログ-デジタル変換部は、セトリングが終わるまでアナログ-デジタル変換の開始を待つ必要があった。従って、非特許文献1に記載の従来技術では、1AD時間を短縮できるものの、依然として残るカウント時間とセトリング時間のために、1AD時間の短縮量が限られる。
 そこで、本開示は、アナログ-デジタル変換も含めた実質的な画素信号の読出し時間を短縮することができる固体撮像素子、及び、当該固体撮像素子を有する電子機器を提供することを目的とする。
 上記の目的を達成するための本開示の固体撮像素子は、
 光電変換部を含む複数の単位画素が行列状に配置された画素アレイ部、
 画素アレイ部の列配列に対応して設けられた垂直信号線を通して単位画素から出力される画素信号のレベル調整を行うアンプ部、
 アンプ部を経た画素信号をサンプリングし、保持するサンプル&ホールド部、及び、
 サンプル&ホールド部から出力される画素信号をデジタル信号に変換するアナログ-デジタル変換部を備え、
 サンプル&ホールド部は、画素信号を保持する少なくとも3個の容量を有し、一の容量への画素信号の取込みと、他の容量に取り込んでいる画像信号のアナログ-デジタル変換部への出力とを並行して行う。
 また、上記の目的を達成するための本開示の電子機器は、上記の構成の固体撮像素子を有する。
 上記の構成の固体撮像素子あるいは電子機器において、アンプ部とアナログ-デジタル変換部との間に設けられたサンプル&ホールド部では、アンプ部を経た画素信号を一時的に保持できる。これにより、セトリング完了後にアンプ部の出力電圧をサンプル&ホールド部の容量に保持する一方、アンプ部は直ぐに次の入力信号の取込みとセトリングに移ることができる。そして、アンプ部が次の入力信号を取り込んでいる間に、アナログ-デジタル変換部は、サンプル&ホールド部に保持された電圧信号をアナログ-デジタル変換する。このようにして、セトリングとアナログ-デジタル変換とを並行して行う。
 本開示によれば、セトリングとアナログ-デジタル変換とを並行して行うことにより、実効的な1AD時間を短縮することができるため、アナログ-デジタル変換も含めた実質的な画素信号の読出し時間を短縮することができる。
 尚、ここに記載された効果に必ずしも限定されるものではなく、本明細書中に記載されたいずれかの効果であってもよい。また、本明細書に記載された効果はあくまで例示であって、これに限定されるものではなく、また付加的な効果があってもよい。
図1は、本開示の実施形態に係るCMOSイメージセンサの基本的な構成の概略を示すブロック図である。 図2は、単位画素の回路構成の一例を示す回路図である。 図3は、本実施形態に係るCMOSイメージセンサの積層構造の概略を示す分解斜視図である。 図4は、カラムアンプ部を持たない回路構成をとるCMOSイメージセンサの1画素列分の構成を示す回路図である。 図5Aは、カラムアンプ部を持たない回路構成の動作を説明するための波形図であり、図5Bは、カラムアンプ部を持つ回路構成の動作を説明するための波形図である。 図6は、カラムアンプ部を持つ回路構成をとるCMOSイメージセンサの1画素列分の構成を示す回路図である。 図7Aは、カラムアンプ部の入力とアナログ-デジタル変換部の出力との関係を示す図であり、図7Bは、カラムアンプ部の入力と線形化後の出力との関係を示す図である。 図8は、実施例1に係るCMOSイメージセンサの1画素列分の構成を示す回路図である。 図9は、本実施形態に係るCMOSイメージセンサの回路動作を説明するためのタイミング波形図である。 図10は、実施例2に係るCMOSイメージセンサの1画素列分の構成を示す回路図である。 図11は、実施例3に係るCMOSイメージセンサの1画素列分の構成を示す回路図である。 図12は、実施例4に係るCMOSイメージセンサの1画素列分の構成を示す回路図である。 図13は、実施例5に係るCMOSイメージセンサの1画素列分の構成を示す回路図である。 図14は、実施例6に係るCMOSイメージセンサの1画素列分の構成を示す回路図である。 図15は、実施例6に係るCMOSイメージセンサの回路動作を説明するためのタイムチャートである。 図16は、本開示の技術の適用例を示す図である。 図17は、本開示の電子機器の一例である撮像装置の構成を示すブロック図である。 図18は、本開示の技術が適用され得る移動体制御システムの一例である車両制御システムの概略的な構成例を示すブロック図である。 図19は、撮像部の設置位置の例を示す図である。
 以下、本開示の技術を実施するための形態(以下、「実施形態」と記述する)について図面を用いて詳細に説明する。本開示の技術は実施形態に限定されるものではなく、実施形態における種々の数値などは例示である。以下の説明において、同一要素又は同一機能を有する要素には同一符号を用いることとし、重複する説明は省略する。尚、説明は以下の順序で行う。
1.本開示の固体撮像素子及び電子機器、全般に関する説明
2.本開示の固体撮像素子
 2-1.基本的な構成
 2-2.単位画素の回路構成
 2-3.積層構造
 2-4.1AD時間について
  2-4-1.カラムアンプ部を持たない回路構成
  2-4-2.カラムアンプ部を持つ回路構成
 2-5.サンプル&ホールド部について
  2-5-1.実施例1(画素信号を保持する容量を4個有する例)
  2-5-2.実施例2(実施例1の変形例:反転増幅器がP型MOS入力ソース接地
             オペアンプから成る例)
  2-5-3.実施例3(実施例1の変形例:レベル判定回路の入力として反転増幅器
             の入力を用いる例)
  2-5-4.実施例4(実施例1の変形例:カラムアンプ部の帰還容量の容量値を可
             変とした例)
  2-5-5.実施例5(実施例1の変形例:レベル判定回路を複数有する例)
  2-5-6.実施例6(画素信号を保持する容量を3個有する例)
 2-6.実施形態の変形例
 2-7.実施形態の応用例
3.本開示の技術の適用例
 3-1.本開示の電子機器(撮像装置の例)
 3-2.移動体への応用例
4.本開示がとることができる構成
<本開示の固体撮像素子及び電子機器、全般に関する説明>
 本開示の固体撮像素子及び電子機器にあっては、第1半導体基板及び第2半導体基板の少なくとも2つの半導体基板が積層された積層構造を有する構成とすることができる。そして、この積層構造において、画素アレイ部について第1半導体基板に形成し、サンプル&ホールド部については第1半導体基板以外の半導体基板、例えば第2半導体基板に形成することが好ましい。
 上述した好ましい構成を含む本開示の固体撮像素子及び電子機器にあっては、画素信号は、リセット時に単位画素から出力されるリセット信号、及び、光電変換時に単位画素から出力されるデータ信号を含んでいる。そして、サンプル&ホールド部は、時系列で前後して単位画素から出力される2つの画素信号に対し、一方の画素信号のリセット信号用、データ信号用の2個の容量、及び、他方の画像信号のリセット信号用、データ信号用の2個の容量の計4個の容量を有する構成とすることができる。
 更に、上述した好ましい構成を含む本開示の固体撮像素子及び電子機器にあっては、サンプル&ホールド部について、アナログ-デジタル変換部へ画素信号を出力する回路出力端の電位をリセットするリセットスイッチを有する構成とすることができる。
 また、上述した好ましい構成を含む本開示の固体撮像素子及び電子機器にあっては、アンプ部について、ゲインを適応的に調整して一定の信号レベルを得る適応ゲイン型のアンプから成る構成とすることができる。そして、アンプ部について、少なくとも2種類のゲインの切替えが可能である構成とすることができる。また、アンプ部について、画素信号のレベルを判定するレベル判定回路を有し、レベル判定回路の判定結果に応じてゲインを切り替える構成とすることができる。
 また、上述した好ましい構成を含む本開示の固体撮像素子及び電子機器にあっては、アナログ-デジタル変換部から出力されるデジタル信号を処理するデジタル信号処理部を備える構成とすることができる。そして、デジタル信号処理部について、レベル判定回路の判定結果を基に、デジタル信号に対してレベル調整、具体的には、圧縮処理を行う構成とすることができる。
<本開示の固体撮像素子>
[基本的な構成]
 まず、本開示の固体撮像素子の基本的な構成について説明する。本実施形態では、固体撮像素子として、X-Yアドレス方式の固体撮像素子の一種であるCMOS(Complementary Metal Oxide Semiconductor)イメージセンサを例に挙げて説明する。CMOSイメージセンサは、CMOSプロセスを応用して、又は、部分的に使用して作製されたイメージセンサである。
 図1は、本開示の実施形態に係るCMOSイメージセンサの基本的な構成の概略を示すブロック図である。本実施形態に係るCMOSイメージセンサ1は、光電変換部を含む単位画素(以下、単に「画素」と記述する場合がある)2が行方向及び列方向に、即ち、行列状に2次元配置されて成る画素アレイ部11、及び、当該画素アレイ部11の周辺回路部を有する構成となっている。ここで、行方向とは画素行の単位画素2の配列方向(所謂、水平方向)を言い、列方向とは画素列の単位画素2の配列方向(所謂、垂直方向)を言う。単位画素2は、光電変換を行うことにより、受光した光量に応じた光電荷を生成し、蓄積する。
 画素アレイ部11の周辺回路部は、例えば、行選択部12、負荷MOS部13、カラムアンプ部14、サンプル&ホールド部15、アナログ-デジタル変換部16、メモリ部17、データ処理部18、出力部19、及び、タイミング制御部20等によって構成されている。
 画素アレイ部11において、行列状の画素配列に対し、画素行毎に画素駆動線31(311~31m)が行方向に沿って配線され、画素列毎に垂直信号線32(321~32n)が列方向に沿って配線されている。画素駆動線31は、単位画素2から信号を読み出す際の駆動を行うための駆動信号を伝送する。図1では、画素駆動線31について1本の配線として図示しているが、1本に限られるものではない。画素駆動線31の一端は、行選択部12の各行に対応した出力端に接続されている。
 以下に、画素アレイ部11の周辺回路部の各回路部、即ち、行選択部12、負荷MOS部13、カラムアンプ部14、サンプル&ホールド部15、アナログ-デジタル変換部16、メモリ部17、データ処理部18、出力部19、及び、タイミング制御部20について説明する。
 行選択部12は、シフトレジスタやアドレスデコーダなどによって構成され、画素アレイ部11の各画素2を全画素同時あるいは行単位等で駆動する。すなわち、行選択部12は、当該行選択部12を制御するタイミング制御部20と共に、画素アレイ部11の各画素2を駆動する駆動部を構成している。この行選択部12は、その具体的な構成については図示を省略するが、一般的に、読出し走査系と掃出し走査系の2つの走査系を有する構成となっている。
 読出し走査系は、単位画素2から画素信号を読み出すために、画素アレイ部11の単位画素2を行単位で順に選択走査する。単位画素2から読み出される画素信号はアナログ信号である。掃出し走査系は、読出し走査系によって読出し走査が行われる読出し行に対して、その読出し走査よりもシャッタスピードの時間分だけ先行して掃出し走査を行う。
 この掃出し走査系による掃出し走査により、読出し行の単位画素2の光電変換部から不要な電荷が掃き出されることによって当該光電変換部がリセットされる。そして、この掃出し走査系による不要電荷の掃き出す(リセットする)ことにより、所謂、電子シャッタ動作が行われる。ここで、電子シャッタ動作とは、光電変換部の光電荷を捨てて、新たに露光を開始する(光電荷の蓄積を開始する)動作のことを言う。
 読出し走査系による読出し動作によって読み出される信号は、その直前の読出し動作又は電子シャッタ動作以降に受光した光量に対応するものである。そして、直前の読出し動作による読出しタイミング又は電子シャッタ動作による掃出しタイミングから、今回の読出し動作による読出しタイミングまでの期間が、単位画素2における光電荷の露光期間となる。
 負荷MOS部13は、画素列毎に垂直信号線32(321~32n)の各々に接続されたMOSトランジスタから成る電流源Iの集合から成り(図2参照)、行選択部12によって選択走査された画素行の各画素2に対し、垂直信号線32の各々を通してバイアス電流を供給する。
 カラムアンプ部14は、ゲインを適応的に調整して一定の信号レベルを得るAGC(Adaptive Gain Control あるいは Automatic Gain Control)機能を有する適応ゲイン型のアンプから成る。カラムアンプ部14は、行選択部12によって選択走査された画素行の各画素2から読み出され、垂直信号線32(321~32n)の各々を通して出力される画素信号のレベル調整を行う。カラムアンプ部14の詳細については後述する。
 サンプル&ホールド部15は、カラムアンプ部14から出力される画素信号をサンプリングし、保持(サンプルホールド)する。このサンプル&ホールド部15に対して本開示の技術が適用される。本開示の技術が適用されるサンプル&ホールド部15は、画素信号を保持する少なくとも3個の容量を有し、一の容量への画素信号の取込みと、他の容量に取り込んでいる画像信号の次段への出力とを並行して行う。サンプル&ホールド部15の詳細については後述する。
 アナログ-デジタル変換部16は、垂直信号線32(321~32n)に対応して設けられた複数のアナログ-デジタル変換器の集合から成り、サンプル&ホールド部15から画素列毎に出力されるアナログの画素信号をデジタル信号に変換する。アナログ-デジタル変換器は、周知のアナログ-デジタル変換器とすることができる。具体的には、アナログ-デジタル変換器として、シングルスロープ型アナログ-デジタル変換器、逐次比較型アナログ-デジタル変換器、又は、デルタ-シグマ変調型(ΔΣ変調型)アナログ-デジタル変換器を例示することができる。但し、アナログ-デジタル変換器は、これらに限定されるものではない。
 メモリ部17は、データ処理部18による処理の下に、アナログ-デジタル変換部16でのアナログ-デジタル変換結果を記憶する。
 データ処理部18は、アナログ-デジタル変換部16から出力されるデジタル信号を処理するデジタル信号処理部であり、アナログ-デジタル変換結果をメモリ部17に対する書込み/読出しの処理を行ったり、当該アナログ-デジタル変換結果に対して種々の処理を行ったりする。また、データ処理部18は、カラムアンプ部14の後述するレベル判定回路142(図6参照)のレベル判定結果を基に、デジタル信号に対してレベル調整を行う。
 出力部19は、データ処理部18での処理後の信号を出力する。タイミング制御部20は、各種のタイミング信号、クロック信号、及び、制御信号等を生成し、これら生成した信号を基に、行選択部12、カラムアンプ部14、サンプル&ホールド部15、アナログ-デジタル変換部16、及び、データ処理部18等の駆動制御を行う。
[単位画素の回路構成]
 図2は、単位画素2の回路構成の一例を示す回路図である。単位画素2は、光電変換部として、例えば、フォトダイオード21を有している。単位画素2は、フォトダイオード21に加えて、転送トランジスタ22、リセットトランジスタ23、増幅トランジスタ24、及び、選択トランジスタ25を有する画素構成となっている。
 尚、ここでは、転送トランジスタ22、リセットトランジスタ23、増幅トランジスタ24、及び、選択トランジスタ25の4つのトランジスタとして、例えばN型MOSFETを用いている。但し、ここで例示した4つのトランジスタ22~25の導電型の組み合わせは一例に過ぎず、これらの組み合わせに限られるものではない。
 この単位画素2に対して、先述した画素駆動線31(311~31m)として、複数の画素駆動線が同一画素行の各画素2に対して共通に配線されている。これら複数の画素駆動線は、行選択部12の各画素行に対応した出力端に画素行単位で接続されている。行選択部12は、複数の画素駆動線に対して転送信号TRG、リセット信号RST、及び、選択信号SELを適宜出力する。
 フォトダイオード21は、アノード電極が低電位側電源(例えば、グランド)に接続されており、受光した光をその光量に応じた電荷量の光電荷(ここでは、光電子)に光電変換してその光電荷を蓄積する。フォトダイオード21のカソード電極は、転送トランジスタ22を介して増幅トランジスタ24のゲート電極と電気的に接続されている。ここで、増幅トランジスタ24のゲート電極が電気的に繋がった領域は、フローティングディフュージョン(浮遊拡散領域/不純物拡散領域)FDである。フローティングディフュージョンFDは、電荷を電圧に変換する電荷電圧変換部である。
 転送トランジスタ22のゲート電極には、高レベル(例えば、VDDレベル)がアクティブとなる転送信号TRGが行選択部12から与えられる。転送トランジスタ22は、転送信号TRGに応答して導通状態となることで、フォトダイオード21で光電変換され、当該フォトダイオード21に蓄積された光電荷をフローティングディフュージョンFDに転送する。
 リセットトランジスタ23は、高電位側電源VDDのノードとフローティングディフュージョンFDとの間に接続されている。リセットトランジスタ23のゲート電極には、高レベルがアクティブとなるリセット信号RSTが行選択部12から与えられる。リセットトランジスタ23は、リセット信号RSTに応答して導通状態となり、フローティングディフュージョンFDの電荷を電圧VDDのノードに捨てることによってフローティングディフュージョンFDをリセットする。
 増幅トランジスタ24は、ゲート電極がフローティングディフュージョンFDに、ドレイン電極が高電位側電源VDDのノードにそれぞれ接続されている。増幅トランジスタ24は、フォトダイオード21での光電変換によって得られる信号を読み出すソースフォロワの入力部となる。すなわち、増幅トランジスタ24は、ソース電極が選択トランジスタ25を介して垂直信号線32に接続される。そして、増幅トランジスタ24と、垂直信号線32の一端に接続される電流源Iとは、フローティングディフュージョンFDの電圧を垂直信号線32の電位に変換するソースフォロワを構成している。
 選択トランジスタ25は、例えば、ドレイン電極が増幅トランジスタ24のソース電極に、ソース電極が垂直信号線32にそれぞれ接続されている。選択トランジスタ25のゲート電極には、高レベルがアクティブとなる選択信号SELが行選択部12から与えられる。選択トランジスタ25は、選択信号SELに応答して導通状態となることで、単位画素2を選択状態として増幅トランジスタ24から出力される信号を垂直信号線32に伝達する。
 尚、選択トランジスタ25については、高電位側電源VDDのノードと増幅トランジスタ24のドレイン電極との間に接続する回路構成を採ることもできる。また、本例では、単位画素2の画素回路として、転送トランジスタ22、リセットトランジスタ23、増幅トランジスタ24、及び、選択トランジスタ25から成る、即ち4つのトランジスタ(Tr)から成る4Tr構成を例に挙げたが、これに限られるものではない。例えば、選択トランジスタ25を省略し、増幅トランジスタ24に選択トランジスタ25の機能を持たせる3Tr構成とすることもできるし、必要に応じて、トランジスタの数を増やした5Tr以上の構成とすることもできる。
[積層構造]
 上記の構成の本実施形態に係るCMOSイメージセンサ1は、図3に示すように、第1半導体基板41及び第2半導体基板42の少なくとも2つの半導体基板(チップ)が積層された、所謂、積層構造のイメージセンサとすることができる。また、本実施形態に係るCMOSイメージセンサ1は、配線層が配される側の基板面を表面(正面)とするとき、その反対側の裏面側から照射される光を取り込む裏面照射型の画素構造とすることができる。
 積層構造のCMOSイメージセンサ1において、裏面照射型の画素構造を有する単位画素2が行列状に配置されて成る画素アレイ部11は、1層目の第1半導体基板41に形成される。また、行選択部12、負荷MOS部13、カラムアンプ部14、サンプル&ホールド部15、アナログ-デジタル変換部16、メモリ部17、データ処理部18、出力部19、及び、タイミング制御部20等の回路部分は、2層目の第2半導体基板42に形成される。そして、1層目の第1半導体基板41と2層目の第2半導体基板42とは、ビア(VIA)43を通して電気的に接続される。
 この積層構造のCMOSイメージセンサ1によれば、第1半導体基板41として画素アレイ部11を形成できるだけの大きさ(面積)のもので済むため、1層目の第1半導体基板41のサイズ(面積)、ひいては、チップ全体のサイズを小さくできる。更に、1層目の第1半導体基板41には単位画素2の作製に適したプロセスを適用でき、2層目の第2半導体基板42には回路部分の作製に適したプロセスを適用できるため、CMOSイメージセンサ1の製造に当たって、プロセスの最適化を図ることができるメリットもある。
 尚、ここでは、第1半導体基板41及び第2半導体基板42が積層されて成る2層構造の積層構造を例示したが、積層構造としては、2層構造に限られるものではなく、3層以上の構造とすることもできる。そして、3層以上の積層構造の場合、行選択部12、負荷MOS部13、カラムアンプ部14、サンプル&ホールド部15、アナログ-デジタル変換部16、メモリ部17、データ処理部18、出力部19、及び、タイミング制御部20等の回路部分については、2層目以降の半導体基板に分散して形成することができる。
 また、上記の例では、積層構造のCMOSイメージセンサ1に適用した場合を例に挙げて説明したが、本開示の技術は、積層構造のCMOSイメージセンサ1への適用に限られるものではない。すなわち、本開示の技術は、画素アレイ部11と同じ半導体基板上に、行選択部12、負荷MOS部13、カラムアンプ部14、サンプル&ホールド部15、アナログ-デジタル変換部16、メモリ部17、データ処理部18、出力部19、及び、タイミング制御部20等の回路部分を形成した、所謂、平置構造のCMOSイメージセンサにも適用することができる。
[1AD時間について]
 ここで、アナログ-デジタル変換部16のアナログ-デジタル変換器として、例えば、シングルスロープ型のアナログ-デジタル変換器を用いた場合における1AD時間について説明する。1AD時間は、1回分の画素信号の読出し及びアナログ-デジタル変換時間である。
 ここでは、1AD時間について、カラムアンプ部14を持たない回路構成の場合と、カラムアンプ部14を持つ回路構成の場合とを対比して説明する。そして、いずれの回路構成の場合にも、本開示の技術が適用されるサンプル&ホールド部15を持たない場合について説明することとする。
(カラムアンプ部を持たない回路構成)
 まず、カラムアンプ部14を持たない回路構成をとるCMOSイメージセンサの1AD時間について説明する。図4に、カラムアンプ部を持たない回路構成をとるCMOSイメージセンサの1画素列分の構成を示す。
 シングルスロープ型のアナログ-デジタル変換器161は、コンパレータ1611及びカウンタ1612を有する回路構成となっている。シングルスロープ型のアナログ-デジタル変換器161では、時間が経過するにつれて電圧値が徐々に変化する、所謂、ランプ(RAMP)波形(スロープ波形)の参照電圧が用いられる。ランプ波形の参照電圧は、参照電圧生成部162で生成される。参照電圧生成部162については、例えば、DAC(デジタル-アナログ変換)回路を用いて構成することができる。
 コンパレータ1611は、単位画素2から読み出される画素信号を比較入力とし、参照電圧生成部162で生成された参照電圧を基準入力とし、両者を比較する。そして、コンパレータ1611は、例えば、参照電圧が画素信号よりも大きいときに出力が第1の状態(例えば、高レベル)になり、参照電圧が画素信号以下のときに出力が第2の状態(例えば、低レベル)になる。これにより、コンパレータ1611の出力信号は、画素信号のレベルの大きさに対応したパルス幅を持つパルス信号となる。
 カウンタ1612には、コンパレータ1611に対する参照電圧の供給開始タイミングと同じタイミングでクロック信号が与えられる。そして、カウンタ1612は、クロック信号に同期してカウント動作を行うことにより、コンパレータ1611の出力パルスのパルス幅の期間、即ち、比較動作の開始から比較動作の終了までの期間を計測する。このカウンタ1612のカウント結果(カウント値)が、アナログの画素信号をデジタル化したデジタル値となる。
 上述したように、アナログ-デジタル変換器として、シングルスロープ型のアナログ-デジタル変換器161を用いたアナログ-デジタル変換部16では、徐々に変化するアナログ値の参照電圧を発生し、参照電圧と信号電圧との大小関係が変化するまでの時間情報からデジタル信号値を得る。
 画素信号は、リセット時に単位画素2から出力される黒レベル(リセットレベル)であるP相信号(リセット信号)、及び、光電変換時に単位画素2から出力される信号レベルであるD相信号(データ信号)を含んでいる。そして、CMOSイメージセンサでは、1回の画素信号の読出しにつき、P相信号をまずアナログ-デジタル変換し、次いで、D相信号をアナログ-デジタル変換し、しかる後両者の差をとる処理が一般的に行われる。このP相信号とD相信号との差をとる処理は、CDS(Correlated Double Sampling:相関二重サンプリング)と呼ばれるノイズ除去のための処理である。
 図5Aに、カラムアンプ部を持たないCMOSイメージセンサにおけるアナログ-デジタル変換のタイムチャート及び参照電圧のスロープ波形を示す。図5Aにおいて、RSTは単位画素2のリセット期間を、P_settlingはP相信号のセトリング期間を、P_countはP相信号のアナログ-デジタル変換期間を、TRGは単位画素2内でのD相信号の転送期間(即ち、転送トランジスタ22のオン期間)を表している。また、レベル判定は画素信号のレベル判定期間を、D_settlingはD相信号のセトリング期間を、D_countはD相信号のアナログ-デジタル変換期間を表している。
 図5Aから明らかなように、シングルスロープ型のアナログ-デジタル変換器161では、1AD時間の殆どが、単位画素2からの入力信号のセトリング期間(P_settling,D_settling)、及び、カウンタ1612のカウント期間(P_count,D_count)で占められる。
(カラムアンプ部を持つ回路構成)
 続いて、カラムアンプ部14を持つ回路構成をとるCMOSイメージセンサの1AD時間について説明する。図6に、カラムアンプ部を持つ回路構成をとるCMOSイメージセンサの1画素列分の構成を示す。
 カラムアンプ部14は、反転増幅器141、レベル判定回路142、OR回路143、入力容量C1、出力容量C2、少なくとも2個の帰還容量C3,C4、オートゼロスイッチSW1、及び、ゲイン切替えスイッチSW2を有する回路構成となっている。単位画素2から出力される画素信号は、入力容量C1を介して反転増幅器141に入力される。反転増幅器141は、種々の形をとり得るが、典型的な例として、図6に示すN型MOS入力ソース接地オペアンプを用いることができる。
 出力容量C2は、反転増幅器141の出力端と基準電位(例えば、グランド)のノードとの間に接続されている。オートゼロスイッチSW1は、反転増幅器141の入力端と出力端との間に接続されており、タイミング制御部20(図1参照)から与えられる制御信号AZに応答してオン(閉)状態となることにより、反転増幅器141の入力端と出力端との間を選択的に短絡する。すなわち、制御信号AZは、カラムアンプ部14を初期化するオートゼロ信号である。
 帰還容量C3は、反転増幅器141の入力端と出力端との間に接続されている。帰還容量C4は、帰還容量C3に対して、ゲイン切替えスイッチSW2を介して選択的に並列接続される。レベル判定回路142は、反転増幅器141の出力電圧を、外部から与えられる基準電圧Vrefと比較し、そのレベル判定結果をOR回路143の一方の入力とする。また、レベル判定回路142のレベル判定結果は、データ処理部18にも与えられる。OR回路143は、制御信号AZを他方の入力とし、その出力によってゲイン切替えスイッチSW2のオン/オフ制御を行う。
 上記の構成の適応ゲイン型のカラムアンプ部14において、一連の動作の最初に制御信号AZがアクティブ状態となり、オートゼロスイッチSW1がオン(閉)状態になることで、反転増幅器141の入出力端間が短絡され、反転増幅器141が初期化される。そして、反転増幅器141の動作点が定まると同時に、画素リセット時の垂直信号線32の電位と反転増幅器141の動作点との電圧差が入力容量C1に保持され、DCオフセットが吸収される。これによって、オートゼロ状態(初期化状態)からの変化量に対してカラムアンプ部14が動作することになる。また、このとき同時に、帰還容量C3及び帰還容量C4のリセットも行われる。
 カラムアンプ部14のゲインは、入力容量C1と帰還容量C3,C4の比で決まる。高ゲインモードでは、ゲイン切替えスイッチSW2がオフ(開)状態にあり、ゲインはC1/C3となる。低ゲインモードでは、ゲイン切替えスイッチSW2ががオン(閉)状態になり、ゲインはC1/(C3+C4)となる。
 ゲイン切替えスイッチSW2は、オートゼロ(AZ)期間中にオン状態になった後、P相信号のセトリング中はオフ状態となる。単位画素2内でD相信号を転送する転送トランジスタ22のオン期間(TRG期間)、D相信号がある程度までセトリングしたところで、レベル判定回路142がカラムアンプ部14の出力電圧を基準電圧Vrefと比較することにより、D相信号の明暗を判別する。D相信号が明るい(高照度)と判断すると、レベル判定回路142の出力は高レベルになる。これにより、ゲイン切替えスイッチSW2がオン状態になる。
 ノイズ低減のために設けられる出力容量C2により、カラムアンプ部14の応答速度がある程度制限されるため、P相信号のセトリング期間やD相信号のセトリング期間中は、垂直信号線32の電位のセトリングだけでなく、カラムアンプ部14のセトリングも行われる。
 カラムアンプ部14では、CDSの際、P相信号や暗い(低照度の)D相信号に対してはアンプゲインを高ゲインにし、明るい(高照度の)D相信号に対してはAGCの働きによって自動的にアンプゲインを低ゲインにすることで、単位画素2から出力される画素信号のレベル調整を行う。すなわち、カラムアンプ部14は、少なくとも2種類のゲインの切替えが可能である。図7Aに、カラムアンプ部14の入力とアナログ-デジタル変換部16の出力との関係を示す。
 ここで、明るいD相信号には大きな光ショットノイズが含まれ、量子化誤差がそれに埋もれるため、アナログ-デジタル変換の分解能を下げることができる。また、P相信号や暗いD相信号においては、カラムアンプ部14で信号が増幅された分を、アナログ-デジタル変換後にデータ処理部18において、レベル判定回路142のレベル判定結果を基に圧縮処理を行って線形化し、画を作ることになる。そのため、アナログ-デジタル変換部16の分解能を下げても最終的な分解能を保つことができる。従って、AGC機能を持つカラムアンプ部14を備えることで、アナログ-デジタル変換部16の分解能を下げることができる。図7Bに、カラムアンプ部14の入力と線形化後の出力との関係を示す。
 そして、シングルスロープ型のアナログ-デジタル変換器161を用いるアナログ-デジタル変換部16では、図5Bに示すように、特にD相信号のアナログ-デジタル変換時間D_countを短縮することができるため、1AD時間を短縮できる。また、同様の理由により、アナログ-デジタル変換部16に求められるノイズ量が緩和されることで、ノイズの大きさで左右される回路規模を小さくできるため、アナログ-デジタル変換部16の面積や電力を減らすことができ、その分をカラムアンプ部14に充てることができる。図5Bにおいて、AZはカラムアンプ部14を初期化するオートゼロ期間を表している。
 上述したように、カラムアンプ部14を持つCMOSイメージセンサによれば、カラムアンプ部14で適応的にゲイン調整が行われることにより、図5Bから明らかなように、D相信号のアナログ-デジタル変換時間D_countを短縮することができるため、1AD時間を短縮することができる。しかしながら、D相信号のアナログ-デジタル変換時間D_countを短縮できるものの、依然として残るカウンタ1612のカウント時間と入力信号のセトリング時間が依然として残るため、1AD時間の短縮には、カラムアンプ部14を設けるだけでは限界がある。
[サンプル&ホールド部について]
 そこで、本実施形態に係るCMOSイメージセンサ1では、カラムアンプ部14とアナログ-デジタル変換部16との間に、本開示の技術を適用したサンプル&ホールド部15を設けた構成を採っている。サンプル&ホールド部15は、画素信号を保持する少なくとも3個の容量を有し、一の容量への画素信号の取込みと、他の容量に取り込んでいる画像信号のアナログ-デジタル変換部16への出力とを並行して行う。
 サンプル&ホールド部15では、カラムアンプ部14を経た画素信号を一時的に保持できる。これにより、セトリング完了後にカラムアンプ部14の出力電圧をサンプル&ホールド部15の容量に保持する一方、カラムアンプ部14は直ぐに次の入力信号の取込みとセトリングに移ることができる。そして、カラムアンプ部14が次の入力信号を取り込んでいる間に、アナログ-デジタル変換部16は、サンプル&ホールド部15に保持された電圧信号をアナログ-デジタル変換する。
 このようにして、セトリングとアナログ-デジタル変換とを並行して行うことにより、実効的な1AD時間を短縮することができるため、アナログ-デジタル変換も含めた実質的な画素信号の読出し時間を短縮することができる。これにより、フレームレートの向上を図ることができる。また、フレームレートを同じとした場合(フレームレートの向上を図らない場合)には、読出しとアナログ-デジタル変換をしないブランク期間を増やすことができるため、平均消費電力の低減を図ることができる。
 また、フレームレートを上げるために、並列動作するアナログ-デジタル変換部16の数を増やすことがあるが、本開示の技術によって、読出しとアナログ-デジタル変換の時間が短縮されることにより、並列動作するアナログ-デジタル変換部16の数を減らすことができる。その結果、CMOSイメージセンサ1の面積の削減とコストの低減を図ることができる。
 以下に、本開示の技術が適用されるサンプル&ホールド部15の具体的な実施例について説明する。尚、以下では、時系列で前後して単位画素2から出力される2つの画素信号のうち、先に出力される画素信号を奇数番目(奇数行)の画素信号とし、後に出力される画素信号を偶数番目(偶数行)の画素信号とするとき、各画素信号のP相、D相を、奇数番目のP相信号、D相信号、及び、偶数番目のP相信号、D相信号と呼ぶこととする。
(実施例1)
 実施例1は、サンプル&ホールド部15が画素信号を保持する容量を4個有する例である。実施例1では、図6に示す回路構成の場合と同様に、カラムアンプ部14の反転増幅器141として、N型MOS入力ソース接地オペアンプを用い、アナログ-デジタル変換部16のアナログ-デジタル変換器161として、シングルスロープ型のアナログ-デジタル変換器を用いている。サンプル&ホールド部15は、例えば画素列毎に設けられる複数のサンプル&ホールド回路151の集合から成る。そして、画素列毎に設けられるサンプル&ホールド回路151の各々が、画素信号を保持する容量を4個有することになる。図8に、実施例1に係るCMOSイメージセンサの1画素列分の構成を示す。
 図8に示すように、画素列毎に設けられるサンプル&ホールド回路151は、奇数番目のP相信号、D相信号を保持する2個の容量Cs_P_odd,Cs_D_odd、及び、偶数番目のP相信号、D相信号を保持する2個の容量Cs_P_even,Cs_D_evenの計4個の容量Cs_P_odd,Cs_D_odd,Cs_P_even,Cs_D_evenを有している。4個の容量Cs_P_odd,Cs_D_odd,Cs_P_even,Cs_D_evenの各一端は、基準電位(例えば、グランド)のノードに接続されている。
 サンプル&ホールド回路151の回路入力端と、2個の容量Cs_P_odd,Cs_D_oddの各他端との間には、スイッチSWin_P_odd及びスイッチSWin_D_oddが接続されている。また、サンプル&ホールド回路151の回路入力端と、2個の容量Cs_P_even,Cs_D_evenの各他端との間には、スイッチSWin_P_even及びスイッチSWin_D_evenが接続されている。
 2個の容量Cs_P_odd,Cs_D_oddの各他端とサンプル&ホールド回路151の回路出力端と間には、スイッチSWout_P_odd及びスイッチSWout_D_oddが接続されている。また、2個の容量Cs_P_even,Cs_D_evenの各他端とサンプル&ホールド回路151の回路出力端と間には、スイッチSWout_P_even及びスイッチSWout_D_evenが接続されている。
 サンプル&ホールド回路151は、回路出力端と基準電位(例えば、グランド)のノードとの間に接続されたリセットスイッチSWout_Resetを有する。このリセットスイッチSWout_Resetは、サンプル&ホールド回路151の回路出力端、即ちアナログ-デジタル変換部16(アナログ-デジタル変換器161)へ画素信号を出力する回路出力端の電位をリセットする。
 上記の回路構成のサンプル&ホールド回路151において、入力側のスイッチSWin_P_odd,SWin_D_odd,SWin_P_even,SWin_D_even、出力側のスイッチSWout_P_odd,SWout_D_odd,SWout_P_even,SWout_D_even、及び、リセットスイッチSWout_Resetは、図1のタイミング制御部20によってオン/オフ制御が行われる。
 そして、カラムアンプ部14から出力される奇数番目のP相信号は、スイッチSWin_P_oddを経て容量Cs_P_oddに保持され、奇数番目のD相信号は、スイッチSWin_D_oddを経て容量Cs_D_oddに保持される。カラムアンプ部14から出力される偶数番目のP相信号は、スイッチSWin_P_evenを経て容量Cs_P_evenに保持され、偶数番目のD相信号は、スイッチSWin_D_evenを経て容量Cs_D_evenに保持される。
 次に、上記の回路構成のサンプル&ホールド回路151を有する本実施形態に係るCMOSイメージセンサ1の回路動作、主にサンプル&ホールド回路151の回路動作について、図9のタイミング波形図を用いて説明する。当該回路動作は、タイミング制御部20による制御の下に実行される。
 図9のタイミング波形図には、信号処理系の前段部分、即ちカラムアンプ部14+サンプル&ホールド回路151のタイムチャート、及び、信号処理系の後段部分、即ちサンプル&ホールド回路151+アナログ-デジタル変換器161のタイムチャートを示している。更に、カラムアンプ部14の入力Input、レベル判定回路142の出力、カラムアンプ部14の出力Output、サンプル&ホールド回路151の出力、参照電圧、及び、制御信号AZの各波形を示している。更に、奇数番目用のSWin_P_odd,SWin_D_odd,SWout_P_odd,SWout_D_odd、偶数番目用のSWin_P_even,SWin_D_even,SWout_P_even,SWout_D_even、及び、リセットスイッチSWout_Resetのオン/オフ状態を示している。
 サンプル&ホールド回路151において、まず、入力側のスイッチSWin_P_odd及びスイッチSWin_D_oddが順にオン状態となり、奇数番目のP相信号及びD相信号を取り込んで、奇数番目用の容量Cs_P_odd,Cs_D_oddに保持する。そして、奇数番目のP相信号及びD相信号を取り込んでいる間に、出力側のスイッチSWout_P_even及びスイッチSWout_D_evenが順にオン状態となり、前の動作サイクルで偶数番目用の容量Cs_P_even,Cs_D_evenに保持されている偶数番目のP相信号及びD相信号を順にアナログ-デジタル変換器161へ出力する。
 同様に、まず、入力側のスイッチSWin_P_even及びスイッチSWin_D_evenが順にオン状態となり、偶数番目のP相信号及びD相信号を取り込んで、偶数番目用の容量Cs_P_even,Cs_D_evenに保持する。そして、偶数番目のP相信号及びD相信号を取り込んでいる間に、出力側のスイッチSWout_P_odd及びスイッチSWout_D_oddが順にオン状態となり、前の動作サイクルで奇数番目用の容量Cs_P_odd,Cs_D_oddに保持されている奇数番目のP相信号及びD相信号を順にアナログ-デジタル変換器161へ出力する。
 この基本となる動作において、出力側のスイッチSWout_P_odd,SWout_D_odd,SWout_P_even,SWout_D_evenは、順番に1つずつオン状態になるが、各スイッチがオフ状態になってから次のスイッチがオン状態になるまでの間に、リセットスイッチSWout_Resetが短期間オン状態になる。このリセットスイッチSWout_Resetの作用により、サンプル&ホールド回路151の出力配線の寄生容量や、アナログ-デジタル変換器161の入力寄生容量に溜まった電荷を一度リセットし、アナログ-デジタル変換器161に渡された各信号の履歴が残って次に渡される信号に混ざらないようにすることができる。
 上述したように、カラムアンプ部14とアナログ-デジタル変換部16との間にサンプル&ホールド部15を有するCMOSイメージセンサ1では、カラムアンプ部14の出力電圧をサンプル&ホールド部15で一時的に保持することができる。これにより、セトリング完了後にカラムアンプ部14の出力電圧をサンプル&ホールド部15の容量に保持する一方、カラムアンプ部14は直ぐに次の入力信号の取込みとセトリングに移ることができる。そして、カラムアンプ部14が次の入力信号を取り込んでいる間に、アナログ-デジタル変換部16は、サンプル&ホールド部15に保持された電圧信号をアナログ-デジタル変換する。
 このように、セトリングとアナログ-デジタル変換を並行して行うことにより、実効的な1AD時間を短縮することができる。セトリングとアナログ-デジタル変換の時間が同じである場合が最も1AD時間の短縮効果が高く、セトリングとアナログ-デジタル変換を並行して行わない場合に比べて、1AD時間を半分近くまで短縮することができる。
 信号をサンプル&ホールドする際にはkT/Cノイズが発生するが、本実施形態に係るCMOSイメージセンサ1では、カラムアンプ部14のAGC動作を利用することで、その影響を抑えることができる。P相信号や暗いD相信号においては、カラムアンプ部14が高ゲインモードであるため、サンプル&ホールド部15のkT/Cノイズは入力換算では抑えられる。これは、カラムアンプ部14で信号が増幅された分を、アナログ-デジタル変換後のデータ処理部18で圧縮処理して線形化する際に、kT/Cノイズも圧縮されて小さくなるためとも言える。一方、明るいD相信号においては、カラムアンプ部14が低ゲインモードになるため、サンプル&ホールド部15のkT/Cノイズには上記の効果が得られない。しかし、明るいD相信号には大きな光ショットノイズが含まれるため、kT/Cノイズはそれに埋もれて問題にならない。
 同じ原理により、カラムアンプ部14のAGC動作を利用してアナログ-デジタル変換の分解能を下げることができる。また、アナログ-デジタル変換部16に求められるノイズ量が緩和されるため、アナログ-デジタル変換部16の消費電力や面積を減らして他ブロックに充てることができる。
(実施例2)
 実施例2は、実施例1の変形例であり、反転増幅器141がP型MOS入力ソース接地オペアンプから成る例である。図10に、実施例2に係るCMOSイメージセンサの1画素列分の構成を示す。
 カラムアンプ部14の反転増幅器141は、種々の形をとることができる。実施例1では、反転増幅器141として、N型MOS入力ソース接地オペアンプを用いている。これに対し、実施例2では、反転増幅器141として、P型MOS入力ソース接地オペアンプを用いている。このように、反転増幅器141として、P型MOS入力ソース接地オペアンプを用いた場合であっても、N型MOS入力ソース接地オペアンプを用いた実施例1と同様の作用、効果を得ることができる。
(実施例3)
 実施例3は、実施例1の変形例であり、レベル判定回路142の入力として反転増幅器141の入力を用いる例である。図11に、実施例3に係るCMOSイメージセンサの1画素列分の構成を示す。
 実施例1では、レベル判定回路142の入力として反転増幅器141の出力、即ちカラムアンプ部14の出力を用いている。これに対し、実施例3では、レベル判定回路142の入力として反転増幅器141の入力、即ちカラムアンプ部14の入力を用いている。このように、レベル判定回路142の入力として反転増幅器141の入力を用いた場合であっても、実施例1と同様の作用、効果を得ることができる。この実施例3の技術は、実施例2に対しても適用できる。
(実施例4)
 実施例4は。実施例1の変形例であり、カラムアンプ部14の帰還容量C3,C4の容量値を可変とした例である。図12に、実施例4に係るCMOSイメージセンサの1画素列分の構成を示す。
 実施例1では、カラムアンプ部14の帰還容量C3,C4の容量値を固定としている。これに対し、実施例4では、カラムアンプ部14の帰還容量C3,C4として可変容量を用いて、帰還容量C3,C4の容量値を可変としている。このように、帰還容量C3,C4の容量値を可変とすることで、カラムアンプ部14において、より細かいゲイン設定が可能となる。この実施例4の技術は、実施例2及び実施例3に対しても適用できる。
(実施例5)
 実施例5は、実施例1の変形例であり、レベル判定回路142を複数有する例である。図13に、実施例5に係るCMOSイメージセンサの1画素列分の構成を示す。
 実施例1では、レベル判定回路142を1つ有し、レベル判定回路142の判定出力を1ビットとしている。これに対し、実施例5では、レベル判定回路142を複数有している。これに伴い、複数のレベル判定回路142の各々には、電圧値が異なる複数の基準電圧Vrefが与えられ、複数のレベル判定回路142からは、複数ビットのレベル判定結果が出力される。また、複数のレベル判定回路142に対応して、OR回路143、帰還容量C4、及び、ゲイン切替えスイッチSW2も複数設けられる。
 このように、カラムアンプ部14において、レベル判定回路142を複数有し、レベル判定結果を複数ビットとすることにより、より細かく適応ゲインの制御を行うことが可能となる。この実施例5の技術は、実施例2、実施例3、及び、実施例4に対しても適用できる。
(実施例6)
 実施例6は、サンプル&ホールド部15が画素信号を保持する容量を3個有する例である。図14に、実施例6に係るCMOSイメージセンサの1画素列分の構成を示す。
 図14に示すように、サンプル&ホールド部15の複数のサンプル&ホールド回路151は各々、画素信号を保持する容量として、3個の容量Cs1,Cs2,Cs3を有している。3個の容量Cs1,Cs2,Cs3の各一端は、基準電位(例えば、グランド)のノードに接続されている。
 サンプル&ホールド回路151の回路入力端と、3個の容量Cs1,Cs2,Cs3の各他端との間には、3個のスイッチSWin1,SWin2,SWin3が接続されている。また、3個の容量Cs1,Cs2,Cs3の各他端と、サンプル&ホールド回路151の回路出力端との間には、3個のスイッチSWout1,SWout2,SWout3が接続されている。
 図15に、実施例6に係るCMOSイメージセンサの回路動作を説明するためのタイムチャートを示す。図15には、信号処理系の前段部分、即ちカラムアンプ部14+サンプル&ホールド回路151のタイムチャート、及び、信号処理系の後段部分、即ちサンプル&ホールド回路151+アナログ-デジタル変換器161のタイムチャートをそれぞれ示している。
 図15に示すタイムチャートの場合、P相信号のアナログ-デジタル変換期間P_countと、D相信号の転送期間TRGからD相信号のセトリング期間D_settlingまでの期間が重なっていない。このように、P_countの期間と、TRGからD_settlingの期間が重ならないタイミングの場合には、P相信号のアナログ-デジタル変換の完了直後に、その容量Cs1を直後のD相信号のセトリングに用いることができる。
 このことは、3個の容量Cs1,Cs2,Cs3で、4個の容量Cs_P_odd,Cs_D_odd,Cs_P_even,Cs_D_evenの場合(即ち、実施例1の場合)と同様のアナログ-デジタル変換動作を実現できることを意味している。そして、この場合は、3個の容量Cs1,Cs2,Cs3の各々が、偶数番目/奇数番目、P相/D相のどの信号に用いられるかは毎回変化する。
 この実施例6に対しても、実施例1の場合と同様に、実施例2、実施例3、実施例4、あるいは、実施例5のような変形例を適用することができる。
(実施形態の変形例)
 上記の実施形態では、単位画素2が行列状に配置されて成るCMOSイメージセンサに適用した場合を例に挙げて説明したが、本開示の技術は、CMOSイメージセンサへの適用に限られるものではない。すなわち、本開示の技術は、単位画素2が行列状に2次元配置されて成るX-Yアドレス方式の固体撮像素子全般に対して適用可能である。
 また、本開示の技術は、可視光の入射光量の分布を検知して画像として撮像する固体撮像素子への適用に限らず、赤外線やX線、あるいは粒子等の入射量の分布を画像として撮像する固体撮像素子全般に対して適用可能である。
(実施形態の応用例)
 以上説明した本実施形態に係るCMOSイメージセンサ1は、例えば図16に示すように、可視光、赤外光、紫外光、X線等の光をセンシングする様々な装置に使用することができる。様々な装置の具体例について以下に列挙する。
・デジタルカメラや、カメラ機能付きの携帯機器等の、鑑賞の用途に供される画像を撮影する装置
・自動停止等の安全運転や、運転者の状態の認識等のために、自動車の前方や後方、周囲、車内等を撮影する車載用センサ、走行車両や道路を監視する監視カメラ、車両間等の測距を行う測距センサ等の、交通の分野で用いる装置
・ユーザのジェスチャを撮影して、そのジェスチャに従った機器操作を行うために、テレビジョン受像機、冷蔵庫、エアーコンディショナ等の家電の分野で用いる装置
・内視鏡や、赤外光の受光による血管撮影を行う装置等の、医療やヘルスケアの分野で用いる装置
・防犯用途の監視カメラや、人物認証用途のカメラ等の、セキュリティの分野で用いる装置
・肌を撮影する肌測定器や、頭皮を撮影するマイクロスコープ等の、美容の分野で用いる装置
・スポーツ用途等向けのアクションカメラやウェアラブルカメラ等の、スポーツの分野で用いる装置
・畑や作物の状態を監視するためのカメラ等の、農業の分野で用いる装置
<本開示の技術の適用例>
 本開示の技術は、様々な製品に適用することができる。以下に、より具体的な適用例について説明する。
[本開示の電子機器]
 ここでは、デジタルスチルカメラやビデオカメラ等の撮像装置や、携帯電話機などの撮像機能を有する携帯端末装置や、画像読取部に固体撮像素子を用いる複写機などの電子機器に適用する場合について説明する。
 図17は、本開示の電子機器の一例である撮像装置の構成を示すブロック図である。図17に示すように、本例に係る撮像装置50は、レンズ群等を含む撮像光学系51、撮像部52、DSP回路53、フレームメモリ54、表示装置55、記録装置56、操作系57、及び、電源系58等を有している。そして、DSP回路53、フレームメモリ54、表示装置55、記録装置56、操作系57、及び、電源系58がバスライン59を介して相互に接続された構成となっている。
 撮像光学系51は、被写体からの入射光(像光)を取り込んで撮像部52の撮像面上に結像する。撮像部52は、撮像光学系51によって撮像面上に結像された入射光の光量を画素単位で電気信号に変換して画素信号として出力する。DSP回路53は、一般的なカメラ信号処理、例えば、ホワイトバランス処理、デモザイク処理、ガンマ補正処理などを行う。
 フレームメモリ54は、DSP回路53での信号処理の過程で適宜データの格納に用いられる。表示装置55は、液晶表示装置や有機EL(electro luminescence)表示装置等のパネル型表示装置から成り、撮像部52で撮像された動画または静止画を表示する。記録装置56は、撮像部52で撮像された動画または静止画を、可搬型の半導体メモリや、光ディスク、HDD(Hard Disk Drive)等の記録媒体に記録する。
 操作系57は、ユーザによる操作の下に、本撮像装置50が持つ様々な機能について操作指令を発する。電源系58は、DSP回路53、フレームメモリ54、表示装置55、記録装置56、及び、操作系57の動作電源となる各種の電源を、これら供給対象に対して適宜供給する。
 このような撮像装置50は、ビデオカメラやデジタルスチルカメラ、更には、スマートフォン、携帯電話機等のモバイル機器向けカメラモジュールに適用される。そして、この撮像装置50において、撮像部52として、先述した実施形態に係るCMOSイメージセンサを用いることができる。これにより、1回分の画素信号の読出し及びアナログ-デジタル変換時間である1AD時間を短縮できるため、例えば、撮像動作の高速化に寄与できる。
[移動体への応用例]
 また、例えば、本開示の技術は、自動車、電気自動車、ハイブリッド電気自動車、自動二輪車、自転車、パーソナルモビリティ、飛行機、ドローン、船舶、ロボット等のいずれかの種類の移動体に搭載される装置として実現されてもよい。
 図18は、本開示の技術が適用され得る移動体制御システムの一例である車両制御システムの概略的な構成例を示すブロック図である。
 車両制御システム12000は、通信ネットワーク12001を介して接続された複数の電子制御ユニットを備える。図18に示した例では、車両制御システム12000は、駆動系制御ユニット12010、ボディ系制御ユニット12020、車外情報検出ユニット12030、車内情報検出ユニット12040、及び統合制御ユニット12050を備える。また、統合制御ユニット12050の機能構成として、マイクロコンピュータ12051、音声画像出力部12052、及び車載ネットワークI/F(interface)12053が図示されている。
 駆動系制御ユニット12010は、各種プログラムにしたがって車両の駆動系に関連する装置の動作を制御する。例えば、駆動系制御ユニット12010は、内燃機関又は駆動用モータ等の車両の駆動力を発生させるための駆動力発生装置、駆動力を車輪に伝達するための駆動力伝達機構、車両の舵角を調節するステアリング機構、及び、車両の制動力を発生させる制動装置等の制御装置として機能する。
 ボディ系制御ユニット12020は、各種プログラムにしたがって車体に装備された各種装置の動作を制御する。例えば、ボディ系制御ユニット12020は、キーレスエントリシステム、スマートキーシステム、パワーウィンドウ装置、あるいは、ヘッドランプ、バックランプ、ブレーキランプ、ウィンカー又はフォグランプ等の各種ランプの制御装置として機能する。この場合、ボディ系制御ユニット12020には、鍵を代替する携帯機から発信される電波又は各種スイッチの信号が入力され得る。ボディ系制御ユニット12020は、これらの電波又は信号の入力を受け付け、車両のドアロック装置、パワーウィンドウ装置、ランプ等を制御する。
 車外情報検出ユニット12030は、車両制御システム12000を搭載した車両の外部の情報を検出する。例えば、車外情報検出ユニット12030には、撮像部12031が接続される。車外情報検出ユニット12030は、撮像部12031に車外の画像を撮像させるとともに、撮像された画像を受信する。車外情報検出ユニット12030は、受信した画像に基づいて、人、車、障害物、標識又は路面上の文字等の物体検出処理又は距離検出処理を行ってもよい。
 撮像部12031は、光を受光し、その光の受光量に応じた電気信号を出力する光センサである。撮像部12031は、電気信号を画像として出力することもできるし、測距の情報として出力することもできる。また、撮像部12031が受光する光は、可視光であっても良いし、赤外線等の非可視光であっても良い。
 車内情報検出ユニット12040は、車内の情報を検出する。車内情報検出ユニット12040には、例えば、運転者の状態を検出する運転者状態検出部12041が接続される。運転者状態検出部12041は、例えば運転者を撮像するカメラを含み、車内情報検出ユニット12040は、運転者状態検出部12041から入力される検出情報に基づいて、運転者の疲労度合い又は集中度合いを算出してもよいし、運転者が居眠りをしていないかを判別してもよい。
 マイクロコンピュータ12051は、車外情報検出ユニット12030又は車内情報検出ユニット12040で取得される車内外の情報に基づいて、駆動力発生装置、ステアリング機構又は制動装置の制御目標値を演算し、駆動系制御ユニット12010に対して制御指令を出力することができる。例えば、マイクロコンピュータ12051は、車両の衝突回避あるいは衝撃緩和、車間距離に基づく追従走行、車速維持走行、車両の衝突警告、又は車両のレーン逸脱警告等を含むADAS(Advanced Driver Assistance System)の機能実現を目的とした協調制御を行うことができる。
 また、マイクロコンピュータ12051は、車外情報検出ユニット12030又は車内情報検出ユニット12040で取得される車両の周囲の情報に基づいて駆動力発生装置、ステアリング機構又は制動装置等を制御することにより、運転者の操作に拠らずに自律的に走行する自動運転等を目的とした協調制御を行うことができる。
 また、マイクロコンピュータ12051は、車外情報検出ユニット12030で取得される車外の情報に基づいて、ボディ系制御ユニット12020に対して制御指令を出力することができる。例えば、マイクロコンピュータ12051は、車外情報検出ユニット12030で検知した先行車又は対向車の位置に応じてヘッドランプを制御し、ハイビームをロービームに切り替える等の防眩を図ることを目的とした協調制御を行うことができる。
 音声画像出力部12052は、車両の搭乗者又は車外に対して、視覚的又は聴覚的に情報を通知することが可能な出力装置へ音声及び画像のうちの少なくとも一方の出力信号を送信する。図18の例では、出力装置として、オーディオスピーカ12061、表示部12062及びインストルメントパネル12063が例示されている。表示部12062は、例えば、オンボードディスプレイ及びヘッドアップディスプレイの少なくとも一つを含んでいてもよい。
 図19は、撮像部12031の設置位置の例を示す図である。
 図19では、撮像部12031として、撮像部12101,12102,12103,12104,12105を有する。
 撮像部12101,12102,12103,12104,12105は、例えば、車両12100のフロントノーズ、サイドミラー、リアバンパ、バックドア及び車室内のフロントガラスの上部等の位置に設けられる。フロントノーズに備えられる撮像部12101及び車室内のフロントガラスの上部に備えられる撮像部12105は、主として車両12100の前方の画像を取得する。サイドミラーに備えられる撮像部12102,12103は、主として車両12100の側方の画像を取得する。リアバンパ又はバックドアに備えられる撮像部12104は、主として車両12100の後方の画像を取得する。車室内のフロントガラスの上部に備えられる撮像部12105は、主として先行車両又は、歩行者、障害物、信号機、交通標識又は車線等の検出に用いられる。
 なお、図17には、撮像部12101乃至12104の撮影範囲の一例が示されている。撮像範囲12111は、フロントノーズに設けられた撮像部12101の撮像範囲を示し、撮像範囲12112,12113は、それぞれサイドミラーに設けられた撮像部12102,12103の撮像範囲を示し、撮像範囲12114は、リアバンパ又はバックドアに設けられた撮像部12104の撮像範囲を示す。例えば、撮像部12101乃至12104で撮像された画像データが重ね合わせられることにより、車両12100を上方から見た俯瞰画像が得られる。
 撮像部12101乃至12104の少なくとも1つは、距離情報を取得する機能を有していてもよい。例えば、撮像部12101乃至12104の少なくとも1つは、複数の撮像素子からなるステレオカメラであってもよいし、位相差検出用の画素を有する撮像素子であってもよい。
 例えば、マイクロコンピュータ12051は、撮像部12101乃至12104から得られた距離情報を基に、撮像範囲12111乃至12114内における各立体物までの距離と、この距離の時間的変化(車両12100に対する相対速度)を求めることにより、特に車両12100の進行路上にある最も近い立体物で、車両12100と略同じ方向に所定の速度(例えば、0km/h以上)で走行する立体物を先行車として抽出することができる。更に、マイクロコンピュータ12051は、先行車の手前に予め確保すべき車間距離を設定し、自動ブレーキ制御(追従停止制御も含む)や自動加速制御(追従発進制御も含む)等を行うことができる。このように運転者の操作に拠らずに自律的に走行する自動運転等を目的とした協調制御を行うことができる。
 例えば、マイクロコンピュータ12051は、撮像部12101乃至12104から得られた距離情報を基に、立体物に関する立体物データを、2輪車、普通車両、大型車両、歩行者、電柱等その他の立体物に分類して抽出し、障害物の自動回避に用いることができる。例えば、マイクロコンピュータ12051は、車両12100の周辺の障害物を、車両12100のドライバが視認可能な障害物と視認困難な障害物とに識別する。そして、マイクロコンピュータ12051は、各障害物との衝突の危険度を示す衝突リスクを判断し、衝突リスクが設定値以上で衝突可能性がある状況であるときには、オーディオスピーカ12061や表示部12062を介してドライバに警報を出力することや、駆動系制御ユニット12010を介して強制減速や回避操舵を行うことで、衝突回避のための運転支援を行うことができる。
 撮像部12101乃至12104の少なくとも1つは、赤外線を検出する赤外線カメラであってもよい。例えば、マイクロコンピュータ12051は、撮像部12101乃至12104の撮像画像中に歩行者が存在するか否かを判定することで歩行者を認識することができる。かかる歩行者の認識は、例えば赤外線カメラとしての撮像部12101乃至12104の撮像画像における特徴点を抽出する手順と、物体の輪郭を示す一連の特徴点にパターンマッチング処理を行って歩行者か否かを判別する手順によって行われる。マイクロコンピュータ12051が、撮像部12101乃至12104の撮像画像中に歩行者が存在すると判定し、歩行者を認識すると、音声画像出力部12052は、当該認識された歩行者に強調のための方形輪郭線を重畳表示するように、表示部12062を制御する。また、音声画像出力部12052は、歩行者を示すアイコン等を所望の位置に表示するように表示部12062を制御してもよい。
 以上、本開示の技術が適用され得る車両制御システムの一例について説明した。本開示の技術は、以上説明した構成のうち、例えば、撮像部12031や運転者状態検出部12041に適用され得る。具体的には、例えば、図1のCMOSイメージセンサ1は、撮像部12031や運転者状態検出部12041に適用することができる。撮像部12031や運転者状態検出部12041に本開示の技術を適用することにより、1回分の画素信号の読出し及びアナログ-デジタル変換時間である1AD時間を短縮できるため、例えば、車両の外部及び内部の情報の検出動作の高速化に寄与できる。
<本開示がとることができる構成>
 尚、本開示は、以下のような構成をとることもできる。
≪A.固体撮像素子≫
[A-1]光電変換部を含む複数の単位画素が行列状に配置された画素アレイ部、
 画素アレイ部の列配列に対応して設けられた垂直信号線を通して単位画素から出力される画素信号のレベル調整を行うアンプ部、
 アンプ部を経た画素信号をサンプリングし、保持するサンプル&ホールド部、及び、
 サンプル&ホールド部から出力される画素信号をデジタル信号に変換するアナログ-デジタル変換部を備え、
 サンプル&ホールド部は、画素信号を保持する少なくとも3個の容量を有し、一の容量への画素信号の取込みと、他の容量に取り込んでいる画像信号のアナログ-デジタル変換部への出力とを並行して行う、
 固体撮像素子。
[A-2]第1半導体基板及び第2半導体基板の少なくとも2つの半導体基板が積層された積層構造を有し、
 画素アレイ部は、第1半導体基板に形成され、
 サンプル&ホールド部は、第1半導体基板以外の半導体基板に形成されている、
 上記[A-1]に記載の固体撮像素子。
[A-3]画素信号は、リセット時に単位画素から出力されるリセット信号、及び、光電変換時に単位画素から出力されるデータ信号を含んでおり、
 サンプル&ホールド部は、時系列で前後して単位画素から出力される2つの画素信号に対し、一方の画素信号のリセット信号用、データ信号用の2個の容量、及び、他方の画像信号のリセット信号用、データ信号用の2個の容量の計4個の容量を有する、
 上記[A-1]又は上記[A-2]に記載の固体撮像素子。
[A-4]サンプル&ホールド部は、アナログ-デジタル変換部へ画素信号を出力する回路出力端の電位をリセットするリセットスイッチを有する、
 上記[A-1]乃至上記[A-3]のいずれかに記載の固体撮像素子。
[A-5]アンプ部は、ゲインを適応的に調整して一定の信号レベルを得る適応ゲイン型のアンプから成る、
 上記[A-1]乃至上記[A-4]のいずれかに記載の固体撮像素子。
[A-6]アンプ部は、少なくとも2種類のゲインの切替えが可能である、
 上記[A-5]に記載の固体撮像素子。
[A-7]アンプ部は、画素信号のレベルを判定するレベル判定回路を有し、レベル判定回路の判定結果に応じてゲインを切り替える、
 上記[A-6]に記載の固体撮像素子。
[A-8]アナログ-デジタル変換部から出力されるデジタル信号を処理するデジタル信号処理部を備え、
 デジタル信号処理部は、レベル判定回路の判定結果を基に、デジタル信号に対してレベル調整を行う、
 上記[A-7]に記載の固体撮像素子。
[A-9]デジタル信号処理部は、レベル判定回路の判定結果を基に、デジタル信号に対して圧縮処理を行う、
 上記[A-8]に記載の固体撮像素子。
≪B.電子機器≫
[B-1]光電変換部を含む複数の単位画素が行列状に配置された画素アレイ部、
 画素アレイ部の列配列に対応して設けられた垂直信号線を通して単位画素から出力される画素信号のレベル調整を行うアンプ部、
 アンプ部を経た画素信号をサンプリングし、保持するサンプル&ホールド部、及び、
 サンプル&ホールド部から出力される画素信号をデジタル信号に変換するアナログ-デジタル変換部を備え、
 サンプル&ホールド部は、画素信号を保持する少なくとも3個の容量を有し、一の容量への画素信号の取込みと、他の容量に取り込んでいる画像信号のアナログ-デジタル変換部への出力とを並行して行う、
 固体撮像素子を有する電子機器。
[B-2]第1半導体基板及び第2半導体基板の少なくとも2つの半導体基板が積層された積層構造を有し、
 画素アレイ部は、第1半導体基板に形成され、
 サンプル&ホールド部は、第1半導体基板以外の半導体基板に形成されている、
 上記[B-1]に記載の電子機器。
[B-3]画素信号は、リセット時に単位画素から出力されるリセット信号、及び、光電変換時に単位画素から出力されるデータ信号を含んでおり、
 サンプル&ホールド部は、時系列で前後して単位画素から出力される2つの画素信号に対し、一方の画素信号のリセット信号用、データ信号用の2個の容量、及び、他方の画像信号のリセット信号用、データ信号用の2個の容量の計4個の容量を有する、
 上記[B-1]又は上記[B-2]に記載の電子機器。
[B-4]サンプル&ホールド部は、アナログ-デジタル変換部へ画素信号を出力する回路出力端の電位をリセットするリセットスイッチを有する、
 上記[B-1]乃至上記[B-3]のいずれかに記載の電子機器。
[B-5]アンプ部は、ゲインを適応的に調整して一定の信号レベルを得る適応ゲイン型のアンプから成る、
 上記[B-1]乃至上記[B-4]のいずれかに記載の電子機器。
[B-6]アンプ部は、少なくとも2種類のゲインの切替えが可能である、
 上記[B-5]に記載の電子機器。
[B-7]アンプ部は、画素信号のレベルを判定するレベル判定回路を有し、レベル判定回路の判定結果に応じてゲインを切り替える、
 上記[B-6]に記載の電子機器。
[B-8]アナログ-デジタル変換部から出力されるデジタル信号を処理するデジタル信号処理部を備え、
 デジタル信号処理部は、レベル判定回路の判定結果を基に、デジタル信号に対してレベル調整を行う、
 上記[B-7]に記載の電子機器。
[B-9]デジタル信号処理部は、レベル判定回路の判定結果を基に、デジタル信号に対して圧縮処理を行う、
上記[B-8]に記載の電子機器。
 1・・・CMOSイメージセンサ(固体撮像素子)、2・・・単位画素、11・・・画素アレイ部、12・・・行選択部、13・・・負荷MOS部、14・・・カラムアンプ部、15・・・サンプル&ホールド部、16・・・アナログ-デジタル変換部、17・・・メモリ部、18・・・データ処理部、19・・・出力部、20・・・タイミング制御部、21・・・フォトダイオード(光電変換部)、22・・・転送トランジスタ、23・・・リセットトランジスタ、24・・・増幅トランジスタ、25・・・選択トランジスタ、31(311~31m)・・・画素駆動線、32(321~32n)・・・垂直信号線、151・・・サンプル&ホールド回路、161・・・アナログ-デジタル変換器

Claims (10)

  1.  光電変換部を含む複数の単位画素が行列状に配置された画素アレイ部、
     画素アレイ部の列配列に対応して設けられた垂直信号線を通して単位画素から出力される画素信号のレベル調整を行うアンプ部、
     アンプ部を経た画素信号をサンプリングし、保持するサンプル&ホールド部、及び、
     サンプル&ホールド部から出力される画素信号をデジタル信号に変換するアナログ-デジタル変換部を備え、
     サンプル&ホールド部は、画素信号を保持する少なくとも3個の容量を有し、一の容量への画素信号の取込みと、他の容量に取り込んでいる画像信号のアナログ-デジタル変換部への出力とを並行して行う、
     固体撮像素子。
  2.  第1半導体基板及び第2半導体基板の少なくとも2つの半導体基板が積層された積層構造を有し、
     画素アレイ部は、第1半導体基板に形成され、
     サンプル&ホールド部は、第1半導体基板以外の半導体基板に形成されている、
     請求項1に記載の固体撮像素子。
  3.  画素信号は、リセット時に単位画素から出力されるリセット信号、及び、光電変換時に単位画素から出力されるデータ信号を含んでおり、
     サンプル&ホールド部は、時系列で前後して単位画素から出力される2つの画素信号に対し、一方の画素信号のリセット信号用、データ信号用の2個の容量、及び、他方の画像信号のリセット信号用、データ信号用の2個の容量の計4個の容量を有する、
     請求項1に記載の固体撮像素子。
  4.  サンプル&ホールド部は、アナログ-デジタル変換部へ画素信号を出力する回路出力端の電位をリセットするリセットスイッチを有する、
     請求項1に記載の固体撮像素子。
  5.  アンプ部は、ゲインを適応的に調整して一定の信号レベルを得る適応ゲイン型のアンプから成る、
     請求項1に記載の固体撮像素子。
  6.  アンプ部は、少なくとも2種類のゲインの切替えが可能である、
     請求項5に記載の固体撮像素子。
  7.  アンプ部は、画素信号のレベルを判定するレベル判定回路を有し、レベル判定回路の判定結果に応じてゲインを切り替える、
     請求項6に記載の固体撮像素子。
  8.  アナログ-デジタル変換部から出力されるデジタル信号を処理するデジタル信号処理部を備え、
     デジタル信号処理部は、レベル判定回路の判定結果を基に、デジタル信号に対してレベル調整を行う、
     請求項7に記載の固体撮像素子。
  9.  デジタル信号処理部は、レベル判定回路の判定結果を基に、デジタル信号に対して圧縮処理を行う、
     請求項8に記載の固体撮像素子。
  10.  光電変換部を含む複数の単位画素が行列状に配置された画素アレイ部、
     画素アレイ部の列配列に対応して設けられた垂直信号線を通して単位画素から出力される画素信号のレベル調整を行うアンプ部、
     アンプ部を経た画素信号をサンプリングし、保持するサンプル&ホールド部、及び、
     サンプル&ホールド部から出力される画素信号をデジタル信号に変換するアナログ-デジタル変換部を備え、
     サンプル&ホールド部は、画素信号を保持する少なくとも3個の容量を有し、一の容量への画素信号の取込みと、他の容量に取り込んでいる画像信号のアナログ-デジタル変換部への出力とを並行して行う、
     固体撮像素子を有する電子機器。
PCT/JP2018/032757 2017-09-22 2018-09-04 固体撮像素子及び電子機器 WO2019058959A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US16/647,048 US11418749B2 (en) 2017-09-22 2018-09-04 Solid-state image pick-up device and electronic device
CN201880059215.7A CN111095917B (zh) 2017-09-22 2018-09-04 固态摄像器件和电子设备

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017182192A JP2019057873A (ja) 2017-09-22 2017-09-22 固体撮像素子及び電子機器
JP2017-182192 2017-09-22

Publications (1)

Publication Number Publication Date
WO2019058959A1 true WO2019058959A1 (ja) 2019-03-28

Family

ID=65810897

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/032757 WO2019058959A1 (ja) 2017-09-22 2018-09-04 固体撮像素子及び電子機器

Country Status (4)

Country Link
US (1) US11418749B2 (ja)
JP (1) JP2019057873A (ja)
CN (1) CN111095917B (ja)
WO (1) WO2019058959A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023063024A1 (ja) * 2021-10-15 2023-04-20 ソニーセミコンダクタソリューションズ株式会社 固体撮像素子、撮像装置、および、固体撮像素子の制御方法

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020079539A1 (ja) * 2018-10-18 2020-04-23 株式会社半導体エネルギー研究所 半導体装置
JP2021068954A (ja) * 2019-10-18 2021-04-30 ソニーセミコンダクタソリューションズ株式会社 受光装置及び電子機器
JPWO2021085290A1 (ja) * 2019-10-31 2021-05-06
WO2021223105A1 (zh) * 2020-05-06 2021-11-11 深圳市汇顶科技股份有限公司 像素、图像传感器及电子装置
US11240458B2 (en) * 2020-06-12 2022-02-01 Omnivision Technologies, Inc. Image sensor with capacitor randomization for column gain
JP2022069132A (ja) * 2020-10-23 2022-05-11 キヤノン株式会社 撮像装置、撮像システム及び撮像装置の駆動方法
US11399150B2 (en) * 2020-11-13 2022-07-26 Omnivision Technologies, Inc. Auto-zero techniques for lateral overflow integrating capacitor (LOFIC) readout image sensor
US11140352B1 (en) * 2020-12-14 2021-10-05 Omnivision Technologies, Inc. High dynamic range high speed CMOS image sensor design
JPWO2022172714A1 (ja) * 2021-02-09 2022-08-18
WO2022181099A1 (ja) * 2021-02-25 2022-09-01 ソニーセミコンダクタソリューションズ株式会社 固体撮像素子、および、撮像装置
US20220272298A1 (en) * 2021-02-25 2022-08-25 L3 Cincinnati Electronics Corporation Analog counter circuits and read-out integrated circuits and infrared detectors incorporating the same
US20240187752A1 (en) * 2021-03-19 2024-06-06 Sony Semiconductor Solutions Corporation Solid-state imaging element
JP2024079862A (ja) * 2021-03-31 2024-06-12 ソニーセミコンダクタソリューションズ株式会社 撮像装置及び電子機器
DE112022003695T5 (de) * 2021-07-26 2024-05-23 Sony Semiconductor Solutions Corporation Festkörper-bildgebungselement
WO2023047631A1 (ja) * 2021-09-27 2023-03-30 ソニーセミコンダクタソリューションズ株式会社 光検出素子及び光検出装置
CN118104249A (zh) * 2021-10-15 2024-05-28 索尼半导体解决方案公司 固态成像元件、成像装置和用于控制固态成像元件的方法
CN117957855A (zh) * 2021-10-15 2024-04-30 索尼半导体解决方案公司 固体摄像元件
KR20240089115A (ko) * 2021-10-15 2024-06-20 소니 세미컨덕터 솔루션즈 가부시키가이샤 고체 촬상 소자, 촬상 장치, 및 고체 촬상 소자의 제어 방법
WO2023162471A1 (ja) * 2022-02-28 2023-08-31 ソニーセミコンダクタソリューションズ株式会社 固体撮像素子、撮像装置、および、固体撮像素子の制御方法
WO2024024261A1 (ja) * 2022-07-26 2024-02-01 ソニーセミコンダクタソリューションズ株式会社 固体撮像素子、撮像システム、および、固体撮像素子の制御方法
WO2024122420A1 (ja) * 2022-12-07 2024-06-13 ソニーセミコンダクタソリューションズ株式会社 光検出素子

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010034616A (ja) * 2008-07-24 2010-02-12 Panasonic Corp 固体撮像装置、カメラ
JP2013078153A (ja) * 2013-01-18 2013-04-25 Canon Inc 撮像システムおよび撮像システムの駆動方法
JP2013183216A (ja) * 2012-02-29 2013-09-12 Canon Inc 固体撮像装置
JP2014075750A (ja) * 2012-10-05 2014-04-24 Canon Inc 撮像システム、および撮像システムの駆動方法
WO2017056248A1 (ja) * 2015-09-30 2017-04-06 オリンパス株式会社 固体撮像装置の駆動方法および固体撮像装置

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5757440A (en) * 1996-02-06 1998-05-26 Analog Devices, Inc. Method and apparatus for providing an offset level to an image signal
JP4574045B2 (ja) * 2001-03-30 2010-11-04 ルネサスエレクトロニクス株式会社 半導体集積回路および撮像システム
JP4663956B2 (ja) * 2002-12-25 2011-04-06 浜松ホトニクス株式会社 光検出装置
US7443435B2 (en) * 2004-07-07 2008-10-28 Altasens, Inc. Column amplifier with automatic gain selection for CMOS image sensors
JP2011259305A (ja) * 2010-06-10 2011-12-22 Toshiba Corp 固体撮像装置
CN103119928B (zh) * 2010-09-30 2016-05-25 佳能株式会社 固态成像装置
JP5965674B2 (ja) * 2012-03-05 2016-08-10 オリンパス株式会社 固体撮像装置および撮像装置
JP5893550B2 (ja) * 2012-04-12 2016-03-23 キヤノン株式会社 撮像装置及び撮像システム
US8952795B2 (en) * 2012-09-06 2015-02-10 OmniVision Technologies Selective gain control circuit
JP6175355B2 (ja) * 2013-11-07 2017-08-02 ルネサスエレクトロニクス株式会社 固体撮像素子
JP6395425B2 (ja) * 2014-04-11 2018-09-26 キヤノン株式会社 撮像装置及び撮像システム
US9716841B2 (en) * 2014-06-20 2017-07-25 Analog Devices, Inc. Adaptive gain adjustment in an imaging system
US9787928B2 (en) * 2015-01-06 2017-10-10 Forza Silicon Corporation Layout and timing schemes for ping-pong readout architecture

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010034616A (ja) * 2008-07-24 2010-02-12 Panasonic Corp 固体撮像装置、カメラ
JP2013183216A (ja) * 2012-02-29 2013-09-12 Canon Inc 固体撮像装置
JP2014075750A (ja) * 2012-10-05 2014-04-24 Canon Inc 撮像システム、および撮像システムの駆動方法
JP2013078153A (ja) * 2013-01-18 2013-04-25 Canon Inc 撮像システムおよび撮像システムの駆動方法
WO2017056248A1 (ja) * 2015-09-30 2017-04-06 オリンパス株式会社 固体撮像装置の駆動方法および固体撮像装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023063024A1 (ja) * 2021-10-15 2023-04-20 ソニーセミコンダクタソリューションズ株式会社 固体撮像素子、撮像装置、および、固体撮像素子の制御方法

Also Published As

Publication number Publication date
US20200260034A1 (en) 2020-08-13
CN111095917A (zh) 2020-05-01
JP2019057873A (ja) 2019-04-11
US11418749B2 (en) 2022-08-16
CN111095917B (zh) 2023-01-20

Similar Documents

Publication Publication Date Title
US11418749B2 (en) Solid-state image pick-up device and electronic device
KR102520518B1 (ko) 촬상 소자, 촬상 소자의 제어 방법, 및 전자기기
CN110537366B (zh) 固态摄像装置
CN111615824B (zh) 摄像器件和电子设备
JP7331180B2 (ja) 撮像素子及び電子機器
CN111886857A (zh) 固态摄像器件
WO2019193801A1 (ja) 固体撮像素子、電子機器および固体撮像素子の制御方法
CN115804012A (zh) 成像装置和电子设备
US20230326940A1 (en) Imaging device and electronic apparatus
WO2022118630A1 (ja) 撮像装置及び電子機器
WO2020003646A1 (ja) 固体撮像素子、撮像装置、および、固体撮像素子の制御方法
US20230254607A1 (en) Imaging apparatus and electronic device
CN116601971A (zh) 摄像装置和电子设备
WO2019039311A1 (ja) 固体撮像素子、撮像装置、および、電子機器
WO2023166848A1 (ja) 撮像装置、画像処理装置および撮像装置の制御方法
WO2023157489A1 (ja) 固体撮像素子、撮像装置、および、固体撮像素子の制御方法
US20240064430A1 (en) Imaging device and electronic apparatus
US20230247328A1 (en) Imaging device and electronic device
WO2023062935A1 (ja) 固体撮像素子、撮像装置、および、固体撮像素子の制御方法
US12047701B2 (en) Solid-state imaging element
WO2023162471A1 (ja) 固体撮像素子、撮像装置、および、固体撮像素子の制御方法
WO2024095630A1 (ja) 撮像装置
WO2024042864A1 (ja) 撮像装置
WO2023218774A1 (ja) 撮像素子および電子機器
WO2023007772A1 (ja) 固体撮像素子

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18858256

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 18858256

Country of ref document: EP

Kind code of ref document: A1