WO2014133076A1 - 撮像素子および電子機器 - Google Patents

撮像素子および電子機器 Download PDF

Info

Publication number
WO2014133076A1
WO2014133076A1 PCT/JP2014/054865 JP2014054865W WO2014133076A1 WO 2014133076 A1 WO2014133076 A1 WO 2014133076A1 JP 2014054865 W JP2014054865 W JP 2014054865W WO 2014133076 A1 WO2014133076 A1 WO 2014133076A1
Authority
WO
WIPO (PCT)
Prior art keywords
imaging
area
region
unit
image
Prior art date
Application number
PCT/JP2014/054865
Other languages
English (en)
French (fr)
Inventor
英史 太田
Original Assignee
株式会社ニコン
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社ニコン filed Critical 株式会社ニコン
Priority to CN201811159203.XA priority Critical patent/CN109348148B/zh
Priority to JP2015503018A priority patent/JP6090425B2/ja
Priority to CN201480010575.XA priority patent/CN105103537B/zh
Priority to EP14756999.0A priority patent/EP2963917B1/en
Priority to US14/771,123 priority patent/US10924697B2/en
Publication of WO2014133076A1 publication Critical patent/WO2014133076A1/ja
Priority to US17/146,870 priority patent/US11595604B2/en
Priority to US18/104,936 priority patent/US20230199343A1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H01—ELECTRIC ELEMENTS
    • H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144—Devices controlled by radiation
    • H01L27/146—Imager structures
    • H01L27/14601—Structural or functional details thereof
    • H01L27/1464—Back illuminated imager structures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/703—SSIS architectures incorporating pixels for producing signals other than image signals
    • H04N25/704—Pixels specially adapted for focusing, e.g. phase difference pixel sets
    • H—ELECTRICITY
    • H01—ELECTRIC ELEMENTS
    • H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144—Devices controlled by radiation
    • H01L27/146—Imager structures
    • H01L27/14601—Structural or functional details thereof
    • H01L27/1462—Coatings
    • H01L27/14621—Colour filter arrangements
    • H—ELECTRICITY
    • H01—ELECTRIC ELEMENTS
    • H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144—Devices controlled by radiation
    • H01L27/146—Imager structures
    • H01L27/14601—Structural or functional details thereof
    • H01L27/14641—Electronic components shared by two or more pixel-elements, e.g. one amplifier shared by two pixel elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H04N23/672—Focus control based on electronic image sensor signals based on the phase difference signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/72—Combination of two or more compensation controls
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/44—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/44—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array
    • H04N25/441—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array by reading contiguous pixels from selected rows or columns of the array, e.g. interlaced scanning
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/702—SSIS architectures characterised by non-identical, non-equidistant or non-planar pixel layout
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/703—SSIS architectures incorporating pixels for producing signals other than image signals
    • H04N25/706—Pixels for exposure or ambient light measuring
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/79—Arrangements of circuitry being divided between different or multiple substrates, chips or circuit boards, e.g. stacked image sensors

Definitions

  • the present invention relates to an image sensor and an electronic device.
  • an electronic device including an imaging element (hereinafter referred to as a laminated imaging element) in which a backside illumination imaging chip and a signal processing chip are stacked (see Patent Document 1).
  • the multilayer imaging element is laminated so that the back-illuminated imaging chip and the signal processing chip are connected to each other through micro bumps.
  • the image pickup device picks up the light incident through the optical system under the first image pickup condition and generates a detection signal for performing focus detection of the optical system, and the optical element. And a second imaging region for generating an image signal by imaging light incident through the system under a second imaging condition different from the first imaging condition.
  • the imaging device captures the light incident through the optical system under the first imaging condition and generates a detection signal for performing focus detection of the optical system, and the optical A second imaging region for imaging light incident through the system under a second imaging condition different from the first imaging condition and generating a signal used for exposure calculation.
  • the imaging device captures the light incident through the optical system under the first imaging condition and generates a detection signal for performing focus detection of the optical system, and the optical element.
  • the frame rate set by the first imaging condition is higher than the frame rate set by the second imaging condition. It is preferable.
  • the area of the second imaging region is preferably larger than the area of the first imaging region.
  • the electronic device sets the imaging element according to any one of the first to fifth aspects, the arrangement position of the first imaging area, and the arrangement position of the second imaging area. And comprising.
  • the electronic device of the sixth aspect further includes an analysis unit that analyzes the luminance distribution of the subject, and the setting unit is configured based on the luminance distribution of the subject analyzed by the analysis unit. It is preferable to set the arrangement position of the first imaging area and the arrangement position of the second imaging area.
  • the setting unit sets the first imaging region and the second imaging region in the region determined to include the main subject based on the analysis result of the analysis unit. It is preferable to do.
  • the setting unit may set the two imaging regions in a region other than the region determined to include the main subject based on the analysis result of the analysis unit. preferable.
  • the setting unit includes one imaging region and the second region in a region other than the region exceeding the predetermined luminance according to the analysis result of the analysis unit. It is preferable to set an imaging region.
  • a recording unit that records an image signal
  • an instruction unit that instructs the recording unit to record the image signal
  • the setting unit preferably cancels the setting of the first imaging condition and the setting of the second imaging condition when the instruction unit instructs the recording unit to record the image signal.
  • a plurality of main imaging pre-processing can be performed with high accuracy, and an electronic device that is easy to use can be realized.
  • FIG. 1 is a cross-sectional view of the multilayer image sensor 100.
  • the imaging device 100 includes a backside illumination imaging chip 113 that outputs a pixel signal corresponding to incident light, a signal processing chip 111 that processes the pixel signal, and a memory chip 112 that stores the pixel signal.
  • the imaging chip 113, the signal processing chip 111, and the memory chip 112 are stacked, and are electrically connected to each other by a conductive bump 109 such as Cu.
  • incident light is incident mainly in the positive direction of the Z axis indicated by the white arrow.
  • the surface on the side where incident light is incident is referred to as a back surface.
  • the left direction of the paper orthogonal to the Z axis is the X axis plus direction
  • the front side of the paper orthogonal to the Z axis and the X axis is the Y axis plus direction.
  • the coordinate axes are displayed so that the orientation of each figure can be understood with reference to the coordinate axes of FIG.
  • the imaging chip 113 is a back-illuminated MOS image sensor.
  • the PD layer 106 is disposed on the back side of the wiring layer 108.
  • the PD layer 106 includes a plurality of PDs (photodiodes) 104 that are two-dimensionally arranged and store charges corresponding to incident light, and transistors 105 that are provided corresponding to the PDs 104.
  • a color filter 102 is provided on the incident light incident side of the PD layer 106 via a passivation film 103.
  • the color filter 102 has a plurality of types that transmit different wavelength regions, and has a specific arrangement corresponding to each of the PDs 104. The arrangement of the color filter 102 will be described later.
  • a set of the color filter 102, the PD 104, and the transistor 105 forms one pixel.
  • a microlens 101 is provided on the incident light incident side of the color filter 102 corresponding to each pixel.
  • the microlens 101 condenses incident light toward the corresponding PD 104.
  • the wiring layer 108 includes a wiring 107 that transmits a pixel signal from the PD layer 106 to the signal processing chip 111.
  • the wiring 107 may be multilayer, and a passive element and an active element may be provided.
  • a plurality of bumps 109 are arranged on the surface of the wiring layer 108.
  • the plurality of bumps 109 are aligned with the plurality of bumps 109 provided on the opposing surfaces of the signal processing chip 111, and the imaging chip 113 and the signal processing chip 111 are pressed and aligned.
  • the bumps 109 are joined and electrically connected.
  • a plurality of bumps 109 are arranged on the mutually facing surfaces of the signal processing chip 111 and the memory chip 112.
  • the bumps 109 are aligned with each other, and the signal processing chip 111 and the memory chip 112 are pressurized, so that the aligned bumps 109 are joined and electrically connected.
  • the bonding between the bumps 109 is not limited to Cu bump bonding by solid phase diffusion, and micro bump bonding by solder melting may be employed. Further, for example, about one bump 109 may be provided for one unit region described later. Therefore, the size of the bump 109 may be larger than the pitch of the PD 104. Further, a bump larger than the bump 109 corresponding to the pixel region may be provided in a peripheral region other than the pixel region where the pixels are arranged.
  • the signal processing chip 111 has TSVs (silicon through electrodes) 110 that connect circuits provided on the front and back surfaces to each other.
  • the TSV 110 is preferably provided in the peripheral area.
  • the TSV 110 may also be provided in the peripheral area of the imaging chip 113 and the memory chip 112.
  • FIG. 2 is a diagram for explaining the pixel array and the unit area 131 of the imaging chip 113.
  • a state where the imaging chip 113 is observed from the back side is shown.
  • 20 million or more pixels are arranged in a matrix in the pixel region.
  • 16 pixels of adjacent 4 pixels ⁇ 4 pixels form one unit region 131.
  • the grid lines in the figure indicate the concept that adjacent pixels are grouped to form a unit region 131.
  • the number of pixels forming the unit region 131 is not limited to this, and may be about 1000, for example, 32 pixels ⁇ 64 pixels, or more or less (for example, one pixel).
  • the unit area 131 includes four so-called Bayer arrays, which are composed of four pixels of green pixels Gb, Gr, blue pixels B, and red pixels R, vertically and horizontally.
  • the green pixel is a pixel having a green filter as the color filter 102, and receives light in the green wavelength band of incident light.
  • a blue pixel is a pixel having a blue filter as the color filter 102 and receives light in the blue wavelength band
  • a red pixel is a pixel having a red filter as the color filter 102 and receiving light in the red wavelength band. Receive light.
  • a plurality of blocks are defined so as to include at least one unit region 131 per block, and each block can control pixels included in each block with different control parameters. That is, it is possible to acquire imaging signals having different imaging conditions between a pixel group included in a certain block and a pixel group included in another block.
  • the control parameters are a frame rate, a gain, a thinning rate, the number of addition rows or addition columns to which pixel signals are added, the charge accumulation time or accumulation count, the number of digitization bits, and the like.
  • the control parameter may be a parameter in image processing after obtaining an image signal from a pixel.
  • FIG. 3 is a circuit diagram corresponding to the unit area 131 of the imaging chip 113.
  • a rectangle surrounded by a dotted line typically represents a circuit corresponding to one pixel. Note that at least some of the transistors described below correspond to the transistor 105 in FIG.
  • the unit region 131 is formed of 16 pixels.
  • the 16 PDs 104 corresponding to the respective pixels are respectively connected to the transfer transistors 302, and the gates of the transfer transistors 302 are connected to the TX wiring 307 to which transfer pulses are supplied.
  • the TX wiring 307 is commonly connected to the 16 transfer transistors 302.
  • each transfer transistor 302 is connected to the source of the corresponding reset transistor 303, and a so-called floating diffusion FD between the drain of the transfer transistor 302 and the source of the reset transistor 303 is connected to the gate of the amplification transistor 304.
  • the drain of the reset transistor 303 is connected to a Vdd wiring 310 to which a power supply voltage is supplied, and the gate thereof is connected to a reset wiring 306 to which a reset pulse is supplied.
  • the reset wiring 306 is commonly connected to the 16 reset transistors 303.
  • each amplification transistor 304 is connected to a Vdd wiring 310 to which a power supply voltage is supplied.
  • the source of each amplification transistor 304 is connected to the drain of each corresponding transistor 305.
  • Each gate of the selection transistor is connected to a decoder wiring 308 to which a selection pulse is supplied.
  • the decoder wiring 308 is provided independently for each of the 16 selection transistors 305.
  • the source of each selection transistor 305 is connected to a common output wiring 309.
  • the load current source 311 supplies current to the output wiring 309. That is, the output wiring 309 for the selection transistor 305 is formed by a source follower. Note that the load current source 311 may be provided on the imaging chip 113 side or may be provided on the signal processing chip 111 side.
  • the PD 104 converts the incident light received into charges and accumulates them. Thereafter, when the transfer pulse is applied again without the reset pulse being applied, the accumulated charge is transferred to the floating diffusion FD, and the potential of the floating diffusion FD changes from the reset potential to the signal potential after the charge accumulation. .
  • a selection pulse is applied to the selection transistor 305 through the decoder wiring 308, a change in the signal potential of the floating diffusion FD is transmitted to the output wiring 309 through the amplification transistor 304 and the selection transistor 305. Thereby, a pixel signal corresponding to the reset potential and the signal potential is output from the unit pixel to the output wiring 309.
  • the reset wiring 306 and the TX wiring 307 are common to the 16 pixels forming the unit region 131. That is, the reset pulse and the transfer pulse are simultaneously applied to all 16 pixels. Accordingly, all the pixels forming the unit region 131 start charge accumulation at the same timing and end charge accumulation at the same timing. However, the pixel signal corresponding to the accumulated charge is selectively output from the output wiring 309 by sequentially applying the selection pulse to each selection transistor 305. Further, the reset wiring 306, the TX wiring 307, and the output wiring 309 are provided separately for each unit region 131.
  • the charge accumulation time can be controlled for each unit region 131.
  • pixel signals having different frame rates can be output between the unit regions 131.
  • the other unit region 131 is caused to repeatedly accumulate charges several times and each time a pixel signal is output, so that Each frame for moving images can be output at a different frame rate between the unit areas 131.
  • FIG. 4 is a block diagram showing a functional configuration of the image sensor 100.
  • the analog multiplexer 411 sequentially selects the 16 PDs 104 forming the unit area 131 and outputs each pixel signal to the output wiring 309 provided corresponding to the unit area 131.
  • the multiplexer 411 is formed on the imaging chip 113 together with the PD 104.
  • the pixel signal output via the multiplexer 411 is supplied to the signal processing chip 111 by a signal processing circuit 412 that performs correlated double sampling (CDS) / analog / digital (A / D) conversion. D conversion is performed.
  • CDS correlated double sampling
  • a / D converted pixel signal is transferred to the demultiplexer 413 and stored in the pixel memory 414 corresponding to each pixel.
  • the demultiplexer 413 and the pixel memory 414 are formed in the memory chip 112.
  • the arithmetic circuit 415 processes the pixel signal stored in the pixel memory 414 and passes it to the subsequent image processing unit.
  • the arithmetic circuit 415 may be provided in the signal processing chip 111 or may be provided in the memory chip 112. Note that FIG. 4 shows connections for one unit region 131, but actually these exist for each unit region 131 and operate in parallel. However, the arithmetic circuit 415 does not have to exist for each unit region 131. For example, one arithmetic circuit 415 may perform sequential processing while sequentially referring to the values of the pixel memory 414 corresponding to each unit region 131. Good.
  • the output wiring 309 is provided corresponding to each of the unit areas 131. Since the image pickup device 100 has the image pickup chip 113, the signal processing chip 111, and the memory chip 112 laminated, by using electrical connection between the chips using the bump 109 for the output wiring 309, each chip is arranged in the surface direction. Wiring can be routed without increasing the size.
  • FIG. 5 is a block diagram illustrating the configuration of the image pickup apparatus 1 having the image pickup device 100 described above.
  • the imaging apparatus 1 includes an imaging optical system 10, an imaging unit 20, an image processing unit 30, a work memory 40, a display unit 50, a recording unit 60, and a control unit 70.
  • the imaging optical system 10 is composed of a plurality of lenses, and guides the light flux from the object scene to the imaging unit 20.
  • the imaging optical system 10 may be configured integrally with the imaging device 1 or may be configured to be replaceable with respect to the imaging device 1. Further, the imaging optical system 10 may include a focus lens or a zoom lens.
  • the imaging unit 20 includes the above-described imaging device 100 and a driving unit 21 that drives the imaging device 100.
  • the image sensor 100 is driven and controlled by a control signal output from the drive unit 21, so that independent storage control can be performed in units of blocks as described above.
  • the controller 70 gives instructions to the drive unit 21 such as the position, shape, and range of the block.
  • the image processing unit 30 performs image processing on the image data captured by the imaging unit 20 in cooperation with the work memory 40.
  • the image processing unit 30 performs detection processing of a main subject included in an image in addition to normal image processing (color signal processing, gamma correction, etc.). Detection of the main subject by the image processing unit 30 can be performed using a known face detection function. In addition to face detection, a human body included in an image may be detected as a main subject as described in, for example, Japanese Unexamined Patent Application Publication No. 2010-16621 (US2010 / 0002940).
  • the display unit 50 includes, for example, a liquid crystal display panel 51, and displays images (still images and moving images) and various information captured by the imaging unit 20, and displays an operation input screen.
  • the display unit 50 has a configuration in which a touch panel 52 is laminated on the display surface of the liquid crystal display panel 51.
  • the touch panel 52 outputs a signal indicating a position where the user touches the liquid crystal display panel 51.
  • the recording unit 60 stores various data such as image data in a storage medium such as a memory card.
  • the control unit 70 has a CPU and controls the overall operation of the imaging apparatus 1.
  • the control unit 70 divides the imaging surface of the imaging device 100 (imaging chip 113) into a plurality of blocks, and acquires images at different frame rates and gains between the blocks.
  • the control unit 70 instructs the drive unit 21 of the block position, shape, range, and control parameters for each block.
  • control unit 70 calculates the focus adjustment state by the imaging optical system 10 by the AF calculation unit 71.
  • the control unit 70 further performs exposure calculation by the AE and AWB calculation unit 72 so that proper exposure can be obtained.
  • FIG. 6 is a diagram illustrating the arrangement of the AF area and the AE area in the imaging device 100 (imaging chip 113).
  • the hatched portion represents the AE area
  • the white portion represents the AF area.
  • the AF area and the AE area are determined in advance so as to be arranged in a checkered pattern. For example, when the live view image is acquired, the control unit 70 performs focus detection processing by the AF calculation unit 71 using a signal output from the AF area of the image sensor 100.
  • the live view image is also referred to as a preview image before actual imaging, and refers to a monitor image acquired by the imaging device 100 at a predetermined frame rate (for example, 30 fps).
  • the focus detection process is performed by, for example, a contrast detection method. Specifically, the position of the focus lens of the imaging optical system 10 is adjusted so as to increase the contrast of an image composed of signals output from the AF area while moving the position of the focus lens of the imaging optical system 10.
  • the focus detection process may be performed by a phase difference detection method.
  • pixels for focus detection are provided in the AF area of the image sensor 100 (imaging chip 113).
  • a phase difference detection calculation is performed using an output signal from a focus detection pixel, thereby detecting a focus adjustment state (specifically, a defocus amount) by the imaging optical system 10.
  • the focus detection pixel and the phase difference detection calculation are well known as described in, for example, Japanese Patent Application Laid-Open No. 2009-94881, and thus detailed description thereof is omitted.
  • control unit 70 performs an exposure calculation process in the AE / AWB calculation unit 72 using a signal output from the AE area when the live view image is acquired. For example, the AE / AWB calculation unit 72 determines exposure (frame rate, gain, etc.) so that the average level of the signal output from the AE region approaches a predetermined level. The controller 70 further determines a white balance adjustment value based on the signal output from the AE area. Furthermore, the control unit 70 generates an image for monitoring based on a signal output from the AE area, and displays it on the display unit 50 as the live view image.
  • the control unit 70 sends an instruction to the drive unit 21 so as to perform accumulation control of the image sensor 100 (image pickup chip 113) separately in the AF area and the AE area.
  • the accumulation control is performed separately for the AF area and the AE area before a real imaging (still image recording or moving image recording) instruction is given by a release switch (not shown).
  • the control parameters that are the pre-imaging processing for the AF area are, for example, a frame rate of 120 fps and a gain that is high in the AE area.
  • the control parameters, which are the main imaging pre-processing for the AE area are, for example, a frame rate of 30 fps, which is slower than the AF area, and a gain lower than the gain of the AF area.
  • the arrangement of the AF area and the AE area in the image sensor 100 is not limited to the arrangement illustrated in FIG. 6, and the sizes of the AF area and the AE area may be changed as appropriate. As illustrated in FIG. 7, it may be changed smaller than the case of FIG. 6, or may be changed greatly compared to the case of FIG. 6.
  • FIG. 8 is a diagram exemplifying a case where the area of the AE region is made wider than the area of the AF region and the area ratio of both is changed.
  • the live view image described above is generated by thinning out a part of the pixels of the image sensor 100, for example, an AF area is set corresponding to the thinned out pixels, and the live view image corresponds to the pixels of the live view image. If the AE area is set, the quality of the live view image will not deteriorate.
  • the AF area is to be arranged only at a predetermined position such as the center of the screen, the AF area may be arranged at a predetermined size and only at a predetermined position on the screen.
  • FIG. 9 is a flowchart for explaining the flow of the photographing operation executed by the control unit 70 of the imaging device 1 in the first embodiment.
  • the control unit 70 repeatedly activates the processing of FIG. 9 when an ON-OFF switch (not shown) is turned on and power is supplied to each unit of the imaging apparatus 1.
  • the control unit 70 determines control parameters such as a frame rate and a gain for the AF area and the AE area, and proceeds to step S102. For example, values to be applied in steps S102, S104, and S105, which will be described later, are read out from the program data and prepared.
  • step S102 the control unit 70 sends an instruction to the drive unit 21 to start imaging by the imaging unit 20.
  • the acquisition of the image starting in step S102 is performed by setting control parameters for the AE region, for example, with the substantially entire area of the imaging surface of the image sensor 100 as the AE region.
  • the control unit 70 causes the image processing unit 30 to perform image processing on live view image data based on a signal output from the imaging unit 20 and then causes the display unit 50 to display the live view image data.
  • step S103 the control unit 70 determines whether or not the release half-press operation has been performed.
  • the release half-press operation is used as an instruction to start the main imaging pre-processing (imaging preparation) for the imaging apparatus 1.
  • a release button (not shown) is half-pressed, the control unit 70 makes a positive determination in step S103 and proceeds to step S104. If the half-press operation is not performed, the control unit 70 makes a negative determination in step S103 and Repeat the determination process. When the determination process is repeated, it waits for a release half-press operation.
  • step S ⁇ b> 103 may be omitted when the tap operation on the release icon displayed on the liquid crystal display panel 51 is detected without determining the image pickup instruction without providing the image pickup apparatus 1 with the release button. .
  • the control unit 70 performs processing of steps S104 and S105, which will be described later, from the start of imaging in step S102.
  • Different control parameters (frame rate, gain) are applied to the AF area and AE area.
  • the control unit 70 may perform the same processing as the tap operation on the release icon.
  • the actual imaging pre-processing (imaging preparation) may be performed within a few seconds after is turned on.
  • step S104 the control unit 70 sends an instruction to the driving unit 21 to apply control parameters such as a frame rate and gain for the AF area to the AF area of the image sensor 100.
  • step S ⁇ b> 105 the control unit 70 sends an instruction to the drive unit 21 to apply control parameters such as the frame rate and gain for the AE region to the AE region of the image sensor 100. Accordingly, the control unit 70 performs fine adjustment of the control parameter, determination of the white balance adjustment value, and display of the live view image based on the signal output from the AE area at the frame rate.
  • step S106 the control unit 70 starts AF processing. Specifically, the AF calculation unit 71 starts focus detection processing based on the signal output from the AF area, and proceeds to step S107. Thereby, the focus adjustment of the imaging optical system 10 can be performed based on the signal output from the AF area at the frame rate.
  • step S107 the control unit 70 determines whether or not the AF process is finished. For example, when the contrast of the image obtained from the AF area is equal to or greater than a predetermined value, the control unit 70 makes a positive determination in step S107, and when the contrast of the image obtained from the AF area is less than the predetermined value, the control unit 70 makes a negative determination. To do. When a negative determination is made, the determination process is repeated while continuing the focus detection process.
  • step S108 the control unit 70 causes the AE and AWB calculation unit 72 to calculate the exposure condition and white balance adjustment value to be applied during shooting based on the signal output from the AE area after focus adjustment, and proceeds to step S109.
  • step S109 the control unit 70 determines whether or not the release full-press operation has been performed.
  • the release full pressing operation is used as a main imaging instruction for the imaging apparatus 1.
  • the control unit 70 makes a positive determination in step S109 and proceeds to step S110. If the release button is not fully pressed, the control unit 70 makes a negative determination in step S109. Return to S108.
  • the control unit 70 releases the imaging of the imaging unit 20 by the control parameter of the AF area and the control parameter of the AE area when a release button (not shown) is fully pressed.
  • step S109 is affirmed when the displayed release icon is tapped. What is necessary is just to judge.
  • step S110 the control unit 70 sends an instruction to the driving unit 21, sets control parameters (exposure time, gain, etc.) necessary for the exposure conditions for photographing (main imaging) calculated in step S108, and proceeds to step S111. .
  • step S111 the control unit 70 executes a photographing process, stores the acquired image data in a memory card or the like by the recording unit 60, and ends the process of FIG.
  • the control unit 70 may change the imaging condition of the pixel corresponding to the high-luminance subject when there is a high-luminance subject in part of the object scene. Then, based on the images of a plurality of frames acquired during a predetermined time before and after the release full-press operation, slow reproduction moving image data is generated and recorded.
  • Slow playback moving image data refers to moving image data that is played back at a frame rate (for example, 15 fps) slower than the frame rate (for example, 30 fps) obtained by the image sensor 100.
  • the control unit 70 generates slow playback moving image data as follows. That is, temporarily stored in the work memory 40 for displaying the above-described live view image from a first predetermined time (for example, 0.6 seconds before) to time t1 from the release full press operation time (t1). A plurality of frame images based on the AE area (the frame rate is set to the frame rate set in the AE area.
  • 0.6 seconds when acquired at 30 fps is 18 frames
  • a plurality of frame images stored in the work memory 40 from the time t1 until the second predetermined time (for example, after 0.4 seconds) (the frame rate is the same as the frame rate set in the AE area before the main imaging instruction)
  • 0.4 seconds when acquired at 30 fps is 12 frames.
  • playback is performed based on a plurality of frame images (a total of 30 images) stored in the work memory 40 for one second (0.6 seconds before time t1 to 0.4 seconds after time t1) with time t1 interposed therebetween.
  • Slow playback moving image data having a time of about 2 seconds is generated. In this way, slow playback moving image data based on frame images acquired before and after the release full-press operation is obtained.
  • the slow playback moving image data is generated by the image processing unit 30 as MPEG data or JPEG data.
  • the imaging apparatus 1 can obtain signals used for exposure calculation processing and signals used for detection of the focus adjustment state at appropriate levels, exposure calculation and focus adjustment can be performed quickly and accurately. As a result, a user-friendly electronic device can be realized.
  • the control unit 70 releases the imaging of the imaging unit 20 by the control parameter of the AF area and the control parameter of the AE area in response to a full press of a release switch (not shown), and performs imaging under imaging conditions suitable for main imaging. Since the unit 20 is driven, a better still image / moving image can be obtained.
  • the control unit 70 can improve the responsiveness of the focus detection process by acquiring a signal used for the focus detection process in the second area by applying a higher frame rate than the first area.
  • control unit 70 Since the control unit 70 performs the exposure calculation process with the gain setting of the first area set to a lower gain setting than the second area, the calculation can be performed with high accuracy while suppressing the influence of noise.
  • control unit 70 determines the first area and the second area in advance, the exposure is determined based on a predetermined position in the screen, or the focus is adjusted based on the predetermined position in the screen. Can be.
  • FIG. 10 is a diagram for explaining the relationship between the AF area and the AE area and the live view image in the second embodiment.
  • a person is included in the center of the screen of the live view image
  • a tree is included in the upper left portion of the screen of the live view image
  • the sun is included in the upper right portion of the screen of the live view image.
  • the control unit 70 sends an instruction to the image processing unit 30 to perform a known scene recognition process on the live view image data.
  • the image processing unit 30 extracts a high luminance area A, a main subject area B, and a background area C from the live view image by performing a scene recognition process.
  • the image processing unit 30 sets, for example, a range in which the signal level of the live view image data exceeds a predetermined high luminance threshold as the high luminance area A.
  • the image processing unit 30 sets the range including the human body detected as described above as the main subject region B. Note that not only a person but also an animal such as a pet may be detected, and a range including this animal may be set as the main subject region B.
  • the image processing unit 30 performs edge detection at a position excluding the high luminance area A and the main subject area B, and sets a range where the density of detected edges exceeds a predetermined value as the background area C. If there is no data exceeding the high brightness threshold in the live view image data, it is assumed that there is no high brightness area A.
  • the control unit 70 arranges the AF area and the AE area, for example, in a checkered pattern in the main subject area B.
  • the hatched portion in the main subject region B represents the AE region
  • the white portion represents the AF region.
  • the arrangement of the AF area and the AE area in the main subject area B is not limited to the arrangement illustrated in FIG. 10, and the sizes of the AF area and the AE area may be appropriately changed.
  • the area ratio may be changed as appropriate so that the area of the AE area is larger than the area of the AF area.
  • the AF area when it is desired to arrange the AF area only at a predetermined position such as the central portion in the main subject area B, the AF area may be arranged at a predetermined size and only at the predetermined position. Further, the control unit 70 may arrange the AF area and the AE area so that a part of the AF area and the AE area protrudes from the main subject area B.
  • control unit 70 sets the background area C as the AE area.
  • the hatched portion in the background area C represents the AE area.
  • control unit 70 does not determine an AF area and an AE area for a portion exceeding the high brightness threshold (high brightness area A in the example of FIG. 10).
  • high brightness area A in the example of FIG. 10
  • a portion with a vertical line in the high luminance area A indicates that it is neither an AF area nor an AE area.
  • the control unit 70 includes a portion (a white background portion in FIG. 10) that does not belong to any of the high luminance area A, the main subject area B, and the background area C on the screen of the live view image. AE area.
  • FIG. 11 is a diagram illustrating three settings.
  • Setting 1 is a control parameter (frame) suitable for high brightness so that the output signal does not saturate, for example, by increasing the frame rate and decreasing the gain for the high brightness area A (that is, neither AF area nor AE area). Rate, gain, etc.).
  • Setting 2 is to set control parameters (frame rate, gain, etc.) suitable for focus detection processing for the AF area in the main subject area B, and to set the AE in the main subject area B as in the first embodiment. It shows that control parameters (frame rate, gain, etc.) suitable for exposure calculation processing are set for the area, as in the first embodiment.
  • Setting 3 is the same as the AE area in the main subject area B with respect to the background area C and the portion that does not belong to the high brightness area A or the main subject area B (the white background portion in FIG. 10). It shows that control parameters (frame rate, gain, etc.) suitable for the above are set.
  • the control unit 70 sends an instruction to the driving unit 21 to cause the imaging device 100 (imaging chip 113) to perform the above three settings.
  • the control parameters frame rate, gain, etc.
  • the accumulation control is performed, for example, after the scene recognition by the image processing unit 30 until the actual imaging instruction is performed.
  • the focus detection process is performed based on the image acquired from the AF area
  • the exposure calculation and the white balance calculation are performed based on the image acquired from the AE area
  • the image acquired in the AE area and the AF area are also calculated.
  • the live view image is displayed based on the images acquired in the area that is not the AE area.
  • the control parameters for the AF area are, for example, a frame rate of 120 fps and a gain that is higher in the AE area.
  • the control parameters for the AE area are, for example, a frame rate of 30 fps, which is slower than the AF area, and a gain lower than the gain of the AF area.
  • the reason why the image used for the focus detection process is acquired in the AF area by applying a higher frame rate than the AE area is to improve the responsiveness of the focus detection process. Further, the reason why the gain used in the exposure calculation process and the determination of the white balance adjustment value is obtained by setting the gain in the AE area to be lower than the gain in the AF area is to perform an accurate calculation while avoiding the influence of noise.
  • the control parameters for an area that is neither an AF area nor an AE area are, for example, a frame rate of 60 fps and a gain lower than that of the AE area. As a result, a high-luminance subject image that causes so-called whiteout can be acquired without whiteout.
  • FIG. 12 is a flowchart for describing the flow of a photographing operation performed by the control unit 70 of the imaging device 1 in the second embodiment. Compared with the flowchart in the first embodiment illustrated in FIG. 9, the processes in steps S104B and 105B are different, and the difference will be mainly described.
  • the acquisition of the image started in step S102 of FIG. 12 is performed by setting the control parameters for the AE region with the substantially entire area of the imaging surface of the image sensor 100 as the AE region, as in the case of FIG.
  • the control unit 70 sets the live view image data based on the signal output from the imaging unit 20 with the above setting as a scene recognition target.
  • the control unit 70 sends an instruction to the image processing unit 30 to perform a known scene recognition process on the live view image data.
  • the image processing unit 30 performs the scene recognition process to divide into the high luminance area A, the main subject area B, and the background area C as described above.
  • step S105B the control unit 70 sends an instruction to the driving unit 21 to perform the above-described three settings for each divided region.
  • different images are obtained by applying different control parameters to the AF area, the AE area, and the area that is neither the AF area nor the AE area.
  • the control unit 70 can finely adjust the control parameter and determine the white balance adjustment value based on the image acquired from the AE area. Further, a live view image can be displayed based on an image acquired in the AE area and an image acquired in an area that is neither an AF area nor an AE area.
  • the imaging apparatus 1 can change the position to be subjected to exposure calculation and the position to be focused on the screen based on the scene analysis result.
  • control unit 70 determines the first region and the second region within the range determined to include the main subject by the image processing unit 30 in the image, the target unit is targeted on the screen.
  • the exposure can be determined and focus adjustment can be performed on the main subject.
  • control unit 70 determines the first region outside the range determined by the image processing unit 30 in the image, the background other than the main subject can be included in the exposure calculation target.
  • control unit 70 sets the first region and the second region in a region different from the region exceeding the predetermined luminance in the image, for example, when the signal from the imaging unit 20 is saturated These can be excluded from exposure calculation targets and focus adjustment targets.
  • Imaging device 1 which concerns on 1st embodiment mentioned above and 2nd embodiment with a highly functional mobile telephone or a tablet terminal.
  • a camera unit mounted on a high-function mobile phone (or tablet terminal) is configured using the multilayer image sensor 100.
  • the control unit 70 performs a focus detection process based on the image acquired from the AF area.
  • the control unit 70 determines the white balance adjustment value based on the image acquired from the AWB area.
  • the fine adjustment of the control parameter is performed based on the image acquired from the AE area.
  • the live view image is displayed based on an image acquired in the AE area and an image acquired in an area that is neither the AF area nor the AE area.

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Power Engineering (AREA)
  • Condensed Matter Physics & Semiconductors (AREA)
  • Computer Hardware Design (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • General Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Studio Devices (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Automatic Focus Adjustment (AREA)
  • Solid State Image Pick-Up Elements (AREA)

Abstract

　撮像素子は、光学系を介して入射した光を第１撮像条件で撮像して光学系の焦点検出を行う検出信号を生成する第１撮像領域と、光学系を介して入射した光を第１撮像条件とは異なる第２撮像条件で撮像して画像信号を生成する第２撮像領域と、を備える。

Description

撮像素子および電子機器
　本発明は、撮像素子および電子機器に関する。
　裏面照射型撮像チップと信号処理チップとが積層された撮像素子（以下、積層型撮像素子という）を備えた電子機器が提案されている（特許文献１参照）。積層型撮像素子は、裏面照射型撮像チップと信号処理チップとが、所定の領域ごとにマイクロバンプを介して接続されるように積層されている。
日本国特開２００６－４９３６１号公報
　しかしながら、従来の積層型撮像素子を備えた電子機器において、１または２以上の上記領域を有するブロックに画像を分けて、該ブロックごとに撮像画像を取得する提案は多くなく、積層型撮像素子を備えた電子機器の使い勝手が十分とはいえなかった。
　本発明の第１の態様によると、撮像素子は、光学系を介して入射した光を第１撮像条件で撮像して光学系の焦点検出を行う検出信号を生成する第１撮像領域と、光学系を介して入射した光を第１撮像条件とは異なる第２撮像条件で撮像して画像信号を生成する第２撮像領域と、を備える。
　本発明の第２の態様によると、撮像素子は、光学系を介して入射した光を第１撮像条件で撮像して光学系の焦点検出を行う検出信号を生成する第１撮像領域と、光学系を介して入射した光を第１撮像条件とは異なる第２撮像条件で撮像して露出演算に用いる信号を生成する第２撮像領域と、を備える。
　本発明の第３の態様によると、撮像素子は、光学系を介して入射した光を第１撮像条件で撮像して光学系の焦点検出を行う検出信号を生成する第１撮像領域と、光学系を介して入射した光を第１撮像条件とは異なる第２撮像条件で撮像してホワイトバランス調整に用いる信号を生成する第２撮像領域と、を備える。
　本発明の第４の態様によると、第１～第３のいずれか一態様の撮像素子において、第１撮像条件により設定されたフレームレートは、第２撮像条件により設定されたフレームレートよりも高いことが好ましい。
　本発明の第５の態様によると、第１～第４のいずれか一態様の撮像素子において、第２撮像領域の面積は、第１撮像領域の面積よりも大きいことが好ましい。
　本発明の第６の態様によると、電子機器は、第１～第５のいずれか一態様の撮像素子と、第１撮像領域の配置位置と第２撮像領域の配置位置とを設定する設定部と、を備える。
　本発明の第７の態様によると、第６の態様の電子機器において、被写体の輝度分布を解析する解析部を更に備え、設定部は、解析部により解析された被写体の輝度分布に基づいて第１撮像領域の配置位置と第２撮像領域の配置位置とを設定することが好ましい。
　本発明の第８の態様によると、第７の態様の電子機器において、設定部は、解析部の解析結果により主要被写体を含むと判断された領域に第１撮像領域及び第２撮像領域を設定することが好ましい。
　本発明の第９の態様によると、第８の態様の電子機器において、設定部は、解析部の解析結果により主要被写体を含むと判断された領域以外の領域に２撮像領域を設定することが好ましい。
　本発明の第１０の態様によると、第６～第９のいずれか一態様の電子機器において、設定部は、解析部の解析結果により所定輝度を超える領域以外の領域に１撮像領域及び第２撮像領域を設定することが好ましい。
　本発明の第１１の態様によると、第６～第１０のいずれか一態様の電子機器において、画像信号を記録する記録部と、記録部に画像信号を記録するように指示する指示部と、を更に備え、設定部は、指示部により記録部に画像信号を記録するように指示された場合、第１撮像条件の設定と第２撮像条件の設定とを解除することが好ましい。
　本発明によれば、複数の本撮像前処理を精度よく行なえ、使い勝手のよい電子機器を実現できる。
積層型撮像素子の断面図である。 撮像チップの画素配列と単位領域を説明する図である。 撮像チップの単位領域に対応する回路図である。 撮像素子の機能的構成を示すブロック図である。 撮像装置の構成を例示するブロック図である。 撮像素子におけるAF領域およびAE領域の配置を例示する図である。 撮像素子におけるAF領域およびAE領域の配置を例示する図である。 撮像素子におけるAF領域およびAE領域の配置を例示する図である。 第一の実施形態の制御部が実行する撮影動作の流れを説明するフローチャートである。 第二の実施形態におけるAF領域およびAE領域と、ライブビュー画像との関係を説明する図である。 撮像素子に対する３つの設定を説明する図である。 第二の実施形態の制御部が実行する撮影動作の流れを説明するフローチャートである。
　以下、図面を参照して本発明を実施するための形態について説明する。
（第一の実施形態）
＜積層型撮像素子の説明＞
　始めに、本発明の第一の実施形態による電子機器（例えば撮像装置１）に搭載する積層型撮像素子１００について説明する。なお、この積層型撮像素子１００は、本願出願人が先に出願した特願２０１２－１３９０２６号に記載されているものである。図１は、積層型撮像素子１００の断面図である。撮像素子１００は、入射光に対応した画素信号を出力する裏面照射型撮像チップ１１３と、画素信号を処理する信号処理チップ１１１と、画素信号を記憶するメモリチップ１１２とを備える。これら撮像チップ１１３、信号処理チップ１１１およびメモリチップ１１２は積層されており、Ｃｕ等の導電性を有するバンプ１０９により互いに電気的に接続される。
　なお、図示するように、入射光は主に白抜き矢印で示すＺ軸プラス方向へ向かって入射する。本実施形態においては、撮像チップ１１３において、入射光が入射する側の面を裏面と称する。また、座標軸に示すように、Ｚ軸に直交する紙面左方向をＸ軸プラス方向、Ｚ軸およびＸ軸に直交する紙面手前方向をＹ軸プラス方向とする。以降のいくつかの図においては、図１の座標軸を基準として、それぞれの図の向きがわかるように座標軸を表示する。
　撮像チップ１１３の一例は、裏面照射型のＭＯＳイメージセンサである。ＰＤ層１０６は、配線層１０８の裏面側に配されている。ＰＤ層１０６は、二次元的に配され、入射光に応じた電荷を蓄積する複数のＰＤ（フォトダイオード）１０４、および、ＰＤ１０４に対応して設けられたトランジスタ１０５を有する。
　ＰＤ層１０６における入射光の入射側にはパッシベーション膜１０３を介してカラーフィルタ１０２が設けられる。カラーフィルタ１０２は、互いに異なる波長領域を透過する複数の種類を有しており、ＰＤ１０４のそれぞれに対応して特定の配列を有している。カラーフィルタ１０２の配列については後述する。カラーフィルタ１０２、ＰＤ１０４およびトランジスタ１０５の組が、一つの画素を形成する。
　カラーフィルタ１０２における入射光の入射側には、それぞれの画素に対応して、マイクロレンズ１０１が設けられる。マイクロレンズ１０１は、対応するＰＤ１０４へ向けて入射光を集光する。
　配線層１０８は、ＰＤ層１０６からの画素信号を信号処理チップ１１１に伝送する配線１０７を有する。配線１０７は多層であってもよく、また、受動素子および能動素子が設けられてもよい。
　配線層１０８の表面には複数のバンプ１０９が配される。当該複数のバンプ１０９が信号処理チップ１１１の対向する面に設けられた複数のバンプ１０９と位置合わせされて、撮像チップ１１３と信号処理チップ１１１とが加圧等されることにより、位置合わせされたバンプ１０９同士が接合されて、電気的に接続される。
　同様に、信号処理チップ１１１およびメモリチップ１１２の互いに対向する面には、複数のバンプ１０９が配される。これらのバンプ１０９が互いに位置合わせされて、信号処理チップ１１１とメモリチップ１１２とが加圧等されることにより、位置合わせされたバンプ１０９同士が接合されて、電気的に接続される。
　なお、バンプ１０９間の接合には、固相拡散によるＣｕバンプ接合に限らず、はんだ溶融によるマイクロバンプ結合を採用してもよい。また、バンプ１０９は、例えば後述する一つの単位領域に対して一つ程度設ければよい。したがって、バンプ１０９の大きさは、ＰＤ１０４のピッチよりも大きくてもよい。また、画素が配列された画素領域以外の周辺領域において、画素領域に対応するバンプ１０９よりも大きなバンプを併せて設けてもよい。
　信号処理チップ１１１は、表裏面にそれぞれ設けられた回路を互いに接続するＴＳＶ（シリコン貫通電極）１１０を有する。ＴＳＶ１１０は、周辺領域に設けられることが好ましい。また、ＴＳＶ１１０は、撮像チップ１１３の周辺領域、メモリチップ１１２にも設けられてよい。
　図２は、撮像チップ１１３の画素配列と単位領域１３１を説明する図である。特に、撮像チップ１１３を裏面側から観察した様子を示す。画素領域には例えば２０００万個以上もの画素がマトリックス状に配列されている。本実施形態においては、例えば隣接する４画素×４画素の１６画素が一つの単位領域１３１を形成する。図の格子線は、隣接する画素がグループ化されて単位領域１３１を形成する概念を示す。単位領域１３１を形成する画素の数は、これに限られず１０００個程度、例えば３２画素×６４画素でもよいし、それ以上でもそれ以下（例えば１画素）でもよい。
　画素領域の部分拡大図に示すように、単位領域１３１は、緑色画素Ｇｂ、Ｇｒ、青色画素Ｂおよび赤色画素Ｒの４画素から成るいわゆるベイヤー配列を、上下左右に４つ内包する。緑色画素は、カラーフィルタ１０２として緑色フィルタを有する画素であり、入射光のうち緑色波長帯の光を受光する。同様に、青色画素は、カラーフィルタ１０２として青色フィルタを有する画素であって青色波長帯の光を受光し、赤色画素は、カラーフィルタ１０２として赤色フィルタを有する画素であって赤色波長帯の光を受光する。
　本実施形態において、１ブロックにつき単位領域１３１を少なくとも１つ含むように複数のブロックが定義され、各ブロックはそれぞれ異なる制御パラメータで各ブロックに含まれる画素を制御できる。つまり、あるブロックに含まれる画素群と、別のブロックに含まれる画素群とで、撮像条件が異なる撮像信号を取得できる。制御パラメータの例は、フレームレート、ゲイン、間引き率、画素信号を加算する加算行数または加算列数、電荷の蓄積時間または蓄積回数、デジタル化のビット数等である。さらに、制御パラメータは、画素からの画像信号取得後の画像処理におけるパラメータであってもよい。
　図３は、撮像チップ１１３の単位領域１３１に対応する回路図である。図３において、代表的に点線で囲む矩形が、１画素に対応する回路を表す。なお、以下に説明する各トランジスタの少なくとも一部は、図１のトランジスタ１０５に対応する。
　上述のように、単位領域１３１は、１６画素から形成される。それぞれの画素に対応する１６個のＰＤ１０４は、それぞれ転送トランジスタ３０２に接続され、各転送トランジスタ３０２の各ゲートには、転送パルスが供給されるＴＸ配線３０７に接続される。本実施形態において、ＴＸ配線３０７は、１６個の転送トランジスタ３０２に対して共通接続される。
　各転送トランジスタ３０２のドレインは、対応する各リセットトランジスタ３０３のソースに接続されると共に、転送トランジスタ３０２のドレインとリセットトランジスタ３０３のソース間のいわゆるフローティングディフュージョンＦＤが増幅トランジスタ３０４のゲートに接続される。リセットトランジスタ３０３のドレインは電源電圧が供給されるＶｄｄ配線３１０に接続され、そのゲートはリセットパルスが供給されるリセット配線３０６に接続される。本実施形態において、リセット配線３０６は、１６個のリセットトランジスタ３０３に対して共通接続される。
　各々の増幅トランジスタ３０４のドレインは、電源電圧が供給されるＶｄｄ配線３１０に接続される。また、各々の増幅トランジスタ３０４のソースは、対応する各々のトランジスタ３０５のドレインに接続される。選択トランジスタの各ゲートには、選択パルスが供給されるデコーダ配線３０８に接続される。本実施形態において、デコーダ配線３０８は、１６個の選択トランジスタ３０５に対してそれぞれ独立に設けられる。そして、各々の選択トランジスタ３０５のソースは、共通の出力配線３０９に接続される。負荷電流源３１１は、出力配線３０９に電流を供給する。すなわち、選択トランジスタ３０５に対する出力配線３０９は、ソースフォロアにより形成される。なお、負荷電流源３１１は、撮像チップ１１３側に設けてもよいし、信号処理チップ１１１側に設けてもよい。
　ここで、電荷の蓄積開始から蓄積終了後の画素出力までの流れを説明する。リセット配線３０６を通じてリセットパルスがリセットトランジスタ３０３に印加され、同時にＴＸ配線３０７を通じて転送パルスが転送トランジスタ３０２に印加されると、ＰＤ１０４およびフローティングディフュージョンＦＤの電位がリセットされる。
　ＰＤ１０４は、転送パルスの印加が解除されると、受光する入射光を電荷に変換して蓄積する。その後、リセットパルスが印加されていない状態で再び転送パルスが印加されると、蓄積された電荷はフローティングディフュージョンＦＤへ転送され、フローティングディフュージョンＦＤの電位は、リセット電位から電荷蓄積後の信号電位になる。そして、デコーダ配線３０８を通じて選択パルスが選択トランジスタ３０５に印加されると、フローティングディフュージョンＦＤの信号電位の変動が、増幅トランジスタ３０４および選択トランジスタ３０５を介して出力配線３０９に伝わる。これにより、リセット電位と信号電位とに対応する画素信号は、単位画素から出力配線３０９に出力される。
　図３に示すように、本実施形態においては、単位領域１３１を形成する１６画素に対して、リセット配線３０６とＴＸ配線３０７が共通である。すなわち、リセットパルスと転送パルスはそれぞれ、１６画素全てに対して同時に印加される。したがって、単位領域１３１を形成する全ての画素は、同一のタイミングで電荷蓄積を開始し、同一のタイミングで電荷蓄積を終了する。ただし、蓄積された電荷に対応する画素信号は、それぞれの選択トランジスタ３０５に選択パルスが順次印加されることにより、選択的に出力配線３０９から出力される。また、リセット配線３０６、ＴＸ配線３０７、出力配線３０９は、単位領域１３１毎に別個に設けられる。
　このように単位領域１３１を基準として回路を構成することにより、単位領域１３１ごとに電荷蓄積時間を制御することができる。換言すると、単位領域１３１間で、異なったフレームレートによる画素信号をそれぞれ出力させることができる。更に言えば、一方の単位領域１３１に１回の電荷蓄積を行わせている間に、他方の単位領域１３１に何回もの電荷蓄積を繰り返させてその都度画素信号を出力させることにより、これらの単位領域１３１間で異なるフレームレートで動画用の各フレームを出力することもできる。
　図４は、撮像素子１００の機能的構成を示すブロック図である。アナログのマルチプレクサ４１１は、単位領域１３１を形成する１６個のＰＤ１０４を順番に選択して、それぞれの画素信号を当該単位領域１３１に対応して設けられた出力配線３０９へ出力させる。マルチプレクサ４１１は、ＰＤ１０４と共に、撮像チップ１１３に形成される。
　マルチプレクサ４１１を介して出力された画素信号は、信号処理チップ１１１に形成された、相関二重サンプリング（ＣＤＳ）・アナログ／デジタル（Ａ／Ｄ）変換を行う信号処理回路４１２により、ＣＤＳおよびＡ／Ｄ変換が行われる。Ａ／Ｄ変換された画素信号は、デマルチプレクサ４１３に引き渡され、それぞれの画素に対応する画素メモリ４１４に格納される。デマルチプレクサ４１３および画素メモリ４１４は、メモリチップ１１２に形成される。
　演算回路４１５は、画素メモリ４１４に格納された画素信号を処理して後段の画像処理部に引き渡す。演算回路４１５は、信号処理チップ１１１に設けられてもよいし、メモリチップ１１２に設けられてもよい。なお、図４では１つの単位領域１３１の分の接続を示すが、実際にはこれらが単位領域１３１ごとに存在して、並列で動作する。ただし、演算回路４１５は単位領域１３１ごとに存在しなくても良く、例えば、一つの演算回路４１５がそれぞれの単位領域１３１に対応する画素メモリ４１４の値を順に参照しながらシーケンシャルに処理してもよい。
　上記の通り、単位領域１３１のそれぞれに対応して出力配線３０９が設けられている。撮像素子１００は撮像チップ１１３、信号処理チップ１１１およびメモリチップ１１２を積層しているので、これら出力配線３０９にバンプ１０９を用いたチップ間の電気的接続を用いることにより、各チップを面方向に大きくすることなく配線を引き回すことができる。
＜撮像装置の説明＞
　図５は、上述した撮像素子１００を有する撮像装置１の構成を例示するブロック図である。図５において、撮像装置１は、撮像光学系１０、撮像部２０、画像処理部３０、ワークメモリ４０、表示部５０、記録部６０、および制御部７０を有する。
　撮像光学系１０は、複数のレンズから構成され、被写界からの光束を撮像部２０へ導く。撮像光学系１０は、撮像装置１と一体に構成されていても、撮像装置１に対して交換可能に構成されていてもよい。また、撮像光学系１０には、フォーカスレンズを内蔵していても、ズームレンズを内蔵していてもよい。
　撮像部２０は、上述した撮像素子１００と、撮像素子１００を駆動する駆動部２１とを有する。撮像素子１００は、駆動部２１から出力される制御信号によって駆動制御されることにより、上述したブロック単位で独立した蓄積制御が可能である。駆動部２１に対する上記ブロックの位置や形状、その範囲などの指示は、制御部７０が行う。
　画像処理部３０は、ワークメモリ４０と協働して、撮像部２０で撮像された画像データに対する画像処理を行う。本実施形態において、画像処理部３０は、通常の画像処理（色信号処理、ガンマ補正など）に加えて、画像に含まれる主要被写体の検出処理も行う。画像処理部３０による主要被写体の検出は、公知の顔検出機能を用いて行うことができる。また、顔検出に加えて、例えば日本国特開2010-16621号公報（US2010/0002940号）に記載されているように、画像に含まれる人体を主要被写体として検出するようにしてもよい。
　ワークメモリ４０は、JPEG圧縮前後やMPEG圧縮前後の画像データなどを一時的に記憶する。表示部５０は、例えば液晶表示パネル５１によって構成され、撮像部２０で撮像された画像（静止画や動画）や各種情報を表示したり、操作入力用画面を表示したりする。表示部５０は、液晶表示パネル５１の表示面にタッチパネル５２が積層された構成を有する。タッチパネル５２は、液晶表示パネル５１にユーザが触れた位置を示す信号を出力する。
　記録部６０は、メモリカードなどの記憶媒体に画像データなどの各種データを記憶させる。制御部７０はＣＰＵを有し、撮像装置１による全体の動作を制御する。本実施形態において制御部７０は、撮像素子１００（撮像チップ１１３）の撮像面を複数のブロックに分け、ブロック間において異なるフレームレート、ゲインで画像を取得させる。このために制御部７０は、ブロックの位置、形状、範囲、および各ブロック用の制御パラメータを駆動部２１へ指示する。
　また、制御部７０は、撮像光学系１０による焦点調節状態をＡＦ演算部７１により算出する。制御部７０はさらに、適正露出が得られるようにＡＥ、ＡＷＢ演算部７２で露出演算を行う。
＜ＡＦ領域とＡＥ領域＞
　第一の実施形態では、画面内にＡＦ領域とＡＥ領域という概念を導入し、上記複数のブロックに対応させる。図６は、撮像素子１００（撮像チップ１１３）におけるＡＦ領域およびＡＥ領域の配置を例示する図である。図６において、斜線を付した部分がＡＥ領域を表し、白い部分がＡＦ領域を表す。第一の実施形態では、ＡＦ領域およびＡＥ領域を市松模様状に配置するようにあらかじめ定めておく。制御部７０は、例えばライブビュー画像取得時において、撮像素子１００のＡＦ領域から出力される信号を用いて、ＡＦ演算部７１で焦点検出処理を行う。
　ここで、ライブビュー画像は、本撮像が行われる前のプレビュー画像とも呼ばれ、撮像素子１００によって所定のフレームレート（例えば３０ｆｐｓ）で取得されるモニタ用の画像をいう。焦点検出処理は、例えばコントラスト検出方式により行う。具体的には、撮像光学系１０のフォーカスレンズの位置を移動させながら、AF領域から出力される信号で構成される画像のコントラストを高めるように撮像光学系１０のフォーカスレンズの位置を調節する。
　なお、焦点検出処理を、位相差検出方式によって行う構成にしてもよい。この場合には、撮像素子１００（撮像チップ１１３）におけるＡＦ領域内において、焦点検出用の画素を設けておく。そして、焦点検出用の画素からの出力信号を用いて位相差検出演算を行うことにより、撮像光学系１０による焦点調節状態（具体的にはデフォーカス量）を検出する。焦点検出用の画素および位相差検出演算は、例えば日本国特開２００９－９４８８１号公報に記載されるように公知であるため、詳細な説明を省略する。
　また、制御部７０は、上記ライブビュー画像取得時においてAE領域から出力される信号を用いて、ＡＥ、ＡＷＢ演算部７２で露出演算処理を行う。ＡＥ、ＡＷＢ演算部７２は、例えばAE領域から出力される信号の平均的なレベルを所定のレベルへ近づけるように、露出（フレームレート、ゲイン等）を決定する。制御部７０はさらに、AE領域から出力される信号に基づいてホワイトバランス調整値も決定する。さらにまた、制御部７０は、AE領域から出力される信号に基づいてモニタ用の画像を生成し、上記ライブビュー画像として表示部５０に表示させる。
　制御部７０は、ライブビュー画像を取得する際、撮像素子１００（撮像チップ１１３）をAF領域とAE領域とに分けて蓄積制御するように、駆動部２１へ指示を送る。なお、第一の実施形態においてAF領域およびAE領域に分けて蓄積制御するのは、不図示のレリーズスイッチによる本撮像（静止画記録や動画記録）指示が行われる前とする。
　すなわち、本撮像指示が行われるまでは、AF領域とAE領域とで異なる制御パラメータを適用することによって異なる画像を得る。そして、AF領域から取得された画像に基づいて焦点検出処理を行い、AE領域から取得された画像に基づいて露出演算、ホワイトバランス演算、およびライブビュー画像の表示を行う。
　AF領域に対する本撮像前処理である制御パラメータは、例えばフレームレートを１２０ｆｐｓとし、ゲインをAE領域のゲインを高くする。AE領域に対する本撮像前処理である制御パラメータは、例えばフレームレートをAF領域より低速の３０ｆｐｓとし、ゲインをAF領域のゲインより低くする。このように、AF領域においてAE領域に比べて高いフレームレートを適用して焦点検出処理に用いる画像を取得することで、焦点検出処理の応答性をよくすることができる。また、AE領域のゲインをAF領域のゲインより低くして露出演算処理、ホワイトバランス調整値の決定に用いる画像を取得することで、ノイズの影響を避けて精度のよい演算を行える。
　なお、撮像素子１００（撮像チップ１１３）におけるAF領域およびAE領域の配置は、図６に例示した配置に限らず、AF領域およびAE領域の個々の大きさを適宜変更してもよい。図７に例示するように、図６の場合に比べて小さく変更してもよいし、図６の場合に比べて大きく変更してもよい。
　また、AF領域およびAE領域の大きさを変更するだけでなく、図８に例示するように、AF領域とAE領域との面積比率を適宜変更してもよい。図８は、AF領域の面積に比べてAE領域の面積を広くとり、両者の面積比率を変更した場合を例示する図である。前述したライブビュー画像は、撮像素子１００の画素の一部を間引いて生成されるため、例えば、間引かれた画素分に対応してＡＦ領域を設定し、ライブビュー画像の画素分に対応してＡＥ領域を設定すればライブビュー画像の画質が劣化することがない。なお、AF領域を画面の中央部など所定位置のみに配置したい場合には、AF領域を所定の大きさで、画面の所定位置のみに配置させても構わない。
＜フローチャートの説明＞
　図９は、第一の実施形態において、撮像装置１の制御部７０が実行する撮影動作の流れを説明するフローチャートである。制御部７０は、不図示のON-OFFスイッチがオン操作され、撮像装置１の各部に対して通電が行われている場合に、図９による処理を繰り返し起動させる。図９のステップＳ１０１において、制御部７０は、AF領域およびAE領域用のフレームレート、ゲインなどの制御パラメータをそれぞれ決定してステップＳ１０２へ進む。例えば、後述するステップＳ１０２、Ｓ１０４、Ｓ１０５において適用する値を、プログラムデータから読み出して用意しておく。
　ステップＳ１０２において、制御部７０は駆動部２１へ指示を送り、撮像部２０による撮像を開始させる。ステップＳ１０２で開始する画像の取得は、例えば撮像素子１００の撮像面の略全域をAE領域として、AE領域用の制御パラメータを設定して行う。制御部７０は、撮像部２０から出力される信号に基づくライブビュー画像データを画像処理部３０により画像処理させた後、表示部５０に表示させる。
　ステップＳ１０３において、制御部７０は、レリーズ半押し操作されたか否かを判定する。レリーズ半押し操作は、撮像装置１に対して本撮像前処理（撮影準備）を開始させる指示として用いられる。制御部７０は、不図示のレリーズボタンが半押し操作された場合に、ステップＳ１０３を肯定判定してステップＳ１０４へ進み、半押し操作が行われない場合には、ステップＳ１０３を否定判定して当該判定処理を繰り返す。判定処理を繰り返す場合は、レリーズ半押し操作が行われるのを待つ。
　なお、撮像装置１にレリーズボタンを設けずに、液晶表示パネル５１に表示させたレリーズアイコンに対するタップ操作を検出して本撮像指示を判断する場合には、ステップＳ１０３の処理を省略してもよい。この場合の制御部７０は、電源オンして図９による処理を起動後、ステップＳ１０２の撮像開始時から後述するステップＳ１０４およびＳ１０５の処理を行い、図６に例示したように、あらかじめ定めておいたAF領域とAE領域とで異なる制御パラメータ（フレームレート、ゲイン）を適用する。また、動画撮像の開始と終了とを指示する動画スイッチを電子機器１に設けた場合にも、制御部７０は、レリーズアイコンに対するタップ操作と同じような処理をしてもよく、また、動画スイッチがオンされた後の数秒の間に本撮像前処理（撮影準備）を行うようにしてもよい。
　ステップＳ１０４において、制御部７０は駆動部２１へ指示を送り、撮像素子１００のAF領域にAF領域用のフレームレート、ゲインなどの制御パラメータを適用させる。ステップＳ１０５において、制御部７０は駆動部２１へ指示を送り、撮像素子１００のAE領域にAE領域用のフレームレート、ゲインなどの制御パラメータを適用させる。これにより、制御部７０は、AE領域から上記フレームレートで出力される信号に基づいて、制御パラメータの微調整と、ホワイトバランス調整値の決定と、ライブビュー画像の表示とを行う。
　ステップＳ１０６において、制御部７０はＡＦ処理を開始させる。具体的には、ＡＦ演算部７１により、AF領域から出力される信号に基づいて焦点検出処理を開始させてステップＳ１０７へ進む。これにより、AF領域から上記フレームレートで出力される信号に基づいて撮像光学系１０の焦点調節を行える。
　ステップＳ１０７において、制御部７０はＡＦ処理が終了か否かを判定する。制御部７０は、例えばAF領域から得られる画像のコントラストが所定値以上の場合にステップＳ１０７を肯定判定し、AF領域から得られる画像のコントラストが所定値に満たない場合にはステップＳ１０７を否定判定する。否定判定する場合は、焦点検出処理を継続しながら当該判定処理を繰り返す。
　ステップＳ１０８において、制御部７０は、焦点調節後にAE領域から出力される信号に基づいて、撮影時に適用する露出条件、ホワイトバランス調整値をＡＥ、ＡＷＢ演算部７２で算出させてステップＳ１０９へ進む。
　ステップＳ１０９において、制御部７０は、レリーズ全押し操作されたか否かを判定する。レリーズ全押し操作は、撮像装置１に対する本撮像指示として用いられる。制御部７０は、不図示のレリーズボタンが全押し操作された場合に、ステップＳ１０９を肯定判定してステップＳ１１０へ進み、全押し操作が行われない場合には、ステップＳ１０９を否定判定してステップＳ１０８へ戻る。ステップＳ１０８へ戻る場合は、上述した処理を繰り返す。なお、制御部７０は、不図示のレリーズボタンが全押し操作された場合にＡＦ領域の制御パラメータおよびＡＥ領域の制御パラメータによる撮像部２０の撮像を解除する。
　なお、上述したように、液晶表示パネル５１に表示させたレリーズアイコンに対するタップ操作を検出して本撮像指示を判断する場合には、表示中のレリーズアイコンがタップ操作された場合にステップＳ１０９を肯定判定すればよい。
　ステップＳ１１０において、制御部７０は駆動部２１へ指示を送り、ステップＳ１０８において算出した撮影用（本撮像）の露出条件に必要な制御パラメータ（露光時間、ゲインなど）を設定してステップＳ１１１へ進む。
　ステップＳ１１１において、制御部７０は撮影処理を実行し、取得された画像のデータを記録部６０によってメモリカードなどに記憶させて図９による処理を終了させる。撮影処理では、撮像素子１００の全領域で共通（同じ）に設定した撮影用の制御パラメータを適用して、１コマの静止画像を取得（本撮像）、記録するとともに、静止画像を取得した後も複数フレームの画像を取得する。なお、制御部７０は、被写界の一部に高輝度被写体がある場合に、高輝度被写体に対応した画素の撮像条件を変えるようにしても構わない。そして、レリーズ全押し操作の前後所定時間の間に取得した複数フレームの画像に基づいて、スロー再生動画データを生成、記録する。スロー再生動画データは、撮像素子１００で取得した際のフレームレート（例えば３０ｆｐｓ）より遅いフレームレート（例えば１５ｆｐｓ）で再生する動画像のデータをいう。
　制御部７０は、以下のようにスロー再生動画データを生成する。すなわち、レリーズ全押し操作時刻（ｔ１とする）より第１所定時間前（例えば０．６秒前）から時刻ｔ１までに、上述したライブビュー画像の表示のためにワークメモリ４０に一時的に記憶されたAE領域に基づく複数のフレーム画像（フレームレートはAE領域に設定されていたフレームレートとする。例えば３０ｆｐｓで取得された場合の０．６秒分は１８フレームである）、および時刻ｔ１から時刻ｔ１より第２所定時間後（例えば０．４秒後）までにワークメモリ４０に記憶された複数のフレーム画像（フレームレートは本撮像指示前にAE領域に設定されていたフレームレートと同じとする。例えば３０ｆｐｓで取得された場合の０．４秒分は１２フレームである）に基づいて、スロー再生動画データを生成する。これにより、時刻ｔ１を挟む１秒間（時刻ｔ１の０．６秒前から時刻ｔ１の０．４秒後）にワークメモリ４０に記憶された複数のフレーム画像（計３０枚）に基づいて、再生時間が約２秒間のスロー再生動画データを生成する。このように、レリーズ全押し操作前後に取得したフレーム画像に基づくスロー再生動画データが得られる。なお、スロー再生動画データは、画像処理部３０によりMPEGデータまたはJPEGデータとして生成される。
　以上説明した第一の実施形態によれば、次の作用効果が得られる。
（１）撮像装置１は、露出演算処理に用いる信号と焦点調節状態の検出に用いる信号とをそれぞれ適切なレベルで得られるから、露出演算や焦点調節をすみやかに精度よく行ない得る。この結果、使い勝手のよい電子機器を実現できる。
（２）制御部７０は、不図示のレリーズスイッチの全押しに応じて、ＡＦ領域の制御パラメータおよびＡＥ領域の制御パラメータによる撮像部２０の撮像を解除し、本撮像に適した撮像条件で撮像部２０を駆動するので、より良い静止画・動画を得ることができる。
（３）制御部７０は、第２領域において第１領域に比べて高いフレームレートを適用して焦点検出処理に用いる信号を取得することで、焦点検出処理の応答性をよくすることができる。
（４）制御部７０は、第１領域のゲイン設定を第２領域に比べて低いゲイン設定にして露出演算処理を行うので、ノイズの影響を抑えた精度よい演算を行うことができる。
（５）制御部７０が、第１領域および第２領域をあらかじめ決めた場合には、画面内の決まった位置を基準に露出を決めたり、画面内の決まった位置を基準に焦点調節を行ったりすることができる。
（第二の実施形態）
　上述した第一の実施形態では、撮像素子１００（撮像チップ１１３）におけるAF領域とAE領域の配置をあらかじめ定めておく例を説明したが、第二の実施形態では、撮像素子１００（撮像チップ１１３）におけるAF領域とAE領域の配置を、ライブビュー画像に基づくシーン認識を経て決定する。なお、撮像装置１の構成は第一の実施形態において説明した図５の構成と同様であるので、構成についての説明は省略する。
　図１０は、第二の実施形態におけるAF領域およびAE領域と、ライブビュー画像との関係を説明する図である。図１０において、ライブビュー画像の画面中央手前に人物が含まれ、ライブビュー画像の画面左上部に樹木が含まれ、ライブビュー画像の画面右上部に太陽が含まれている。制御部７０は画像処理部３０へ指示を送り、ライブビュー画像データに対して公知のシーン認識処理を行わせる。画像処理部３０は、シーン認識処理を行うことにより、ライブビュー画像から高輝度領域Ａ、主要被写体領域Ｂ、および背景領域Ｃを抽出する。
　画像処理部３０は、例えば、ライブビュー画像データの信号レベルがあらかじめ定めた高輝度閾値を超えている範囲を高輝度領域Ａとする。また、画像処理部３０は、上述したように検出した人体を含む範囲を主要被写体領域Ｂとする。なお、人物に限らずペットなどの動物を検出し、この動物を含む範囲を主要被写体領域Ｂとしてもよい。画像処理部３０はさらに、高輝度領域Ａおよび主要被写体領域Ｂを除外した位置においてエッジ検出を行い、検出されたエッジの密度が所定値を超える範囲を背景領域Ｃとする。なお、ライブビュー画像のデータに高輝度閾値を超えるデータが存在しない場合は、高輝度領域Ａはないものとする。
　制御部７０は、上記主要被写体領域Ｂにおいて、例えばAF領域およびAE領域を市松模様状に配置する。図１０において、主要被写体領域Ｂ内で斜線を付した部分がAE領域を表し、白い部分がAF領域を表す。ここで、主要被写体領域Ｂ内におけるAF領域およびAE領域の配置は、図１０に例示した配置に限らず、AF領域およびAE領域の個々の大きさを適宜変更してもよい。また、AF領域およびAE領域の大きさを変更するだけでなく、ＡＥ領域の面積がＡＦ領域の面積よりも大きくなるように面積比率を適宜変更してもよい。さらにまた、AF領域を主要被写体領域Ｂ内の中央部など所定位置のみに配置したい場合には、AF領域を所定の大きさで、所定位置のみに配置させても構わない。また、制御部７０は、AF領域およびAE領域の一部が主要被写体領域Ｂからはみ出るようにAF領域およびAE領域を配置しても構わない。
　また、制御部７０は、上記背景領域Ｃ内をAE領域とする。図１０において、背景領域Ｃ内で斜線を付した部分はAE領域を表す。さらにまた、制御部７０は、高輝度閾値を超えている部分（図１０の例では高輝度領域Ａ）についてはAF領域およびAE領域を定めない。図１０において、高輝度領域Ａ内で縦線を付した部分はAF領域でもAE領域でもないことを表す。
　第二の実施形態における制御部７０は、ライブビュー画像の画面において高輝度領域Ａと、主要被写体領域Ｂと、背景領域Ｃのいずれにも属さない部分（図１０において白地部分）とを、それぞれAE領域とする。
　第二の実施形態では、ライブビュー画像を取得する際に、撮像素子１００（撮像チップ１１３）に対して３つの設定を行う。図１１は、３つの設定を説明する図である。設定１は、高輝度領域Ａ（すなわちAF領域でもAE領域でもない）に対し、例えばフレームレートを高めてゲインを下げるなどして、出力信号が飽和しないように高輝度に適した制御パラメータ（フレームレート、ゲインなど）を設定することを示す。
　設定２は、主要被写体領域ＢにおけるAF領域に対し、第一の実施形態と同様に、焦点検出処理に適した制御パラメータ（フレームレート、ゲインなど）を設定すること、および主要被写体領域ＢにおけるAE領域に対し、第一の実施形態と同様に、露出演算処理に適した制御パラメータ（フレームレート、ゲインなど）を設定することを示す。
　設定３は、背景領域Ｃと、高輝度領域Ａにも主要被写体領域Ｂにも属さない部分（図１０において白地部分）とに対して、上記主要被写体領域ＢにおけるAE領域と同じく、露出演算処理に適した制御パラメータ（フレームレート、ゲインなど）を設定することを示す。
　制御部７０は、駆動部２１へ指示を送り、撮像素子１００（撮像チップ１１３）に対して上記３つの設定を行わせる。これにより、撮像素子１００（撮像チップ１１３）は、ライブビュー画像を取得する際、AF領域と、AE領域と、AF領域でもAE領域でもない領域とにおいて、それぞれ異なる制御パラメータ（フレームレート、ゲインなど）で蓄積制御される。このように蓄積制御されるのは、例えば、画像処理部３０によるシーン認識後から、本撮像指示が行われるまでとする。
　すなわち、本撮像指示が行われる前は、AF領域と、AE領域と、AF領域でもAE領域でもない領域とで異なる制御パラメータを適用することによって異なる画像を得る。そして、AF領域から取得された画像に基づいて焦点検出処理を行い、AE領域から取得された画像に基づいて露出演算、およびホワイトバランス演算を行い、AE領域で取得された画像と、AF領域でもAE領域でもない領域とで取得された画像に基づいてライブビュー画像の表示を行う。
　AF領域に対する制御パラメータは、例えばフレームレートを１２０ｆｐｓとし、ゲインをAE領域のゲインを高くする。AE領域に対する制御パラメータは、例えばフレームレートをAF領域より低速の３０ｆｐｓとし、ゲインをAF領域のゲインより低くする。AF領域においてAE領域に比べて高いフレームレートを適用して焦点検出処理に用いる画像を取得するのは、焦点検出処理の応答性をよくするためである。また、AE領域のゲインをAF領域のゲインより低くして露出演算処理、ホワイトバランス調整値の決定に用いる画像を取得するのは、ノイズの影響を避けて精度のよい演算を行うためである。
　AF領域でもAE領域でもない領域に対する制御パラメータは、例えばフレームレートを６０ｆｐｓとし、ゲインをAE領域より低くする。これにより、いわゆる白飛びが生じるような高輝度な被写体像も、白飛びさせず取得できる。
＜フローチャートの説明＞
　図１２は、第二の実施形態において、撮像装置１の制御部７０が実行する撮影動作の流れを説明するフローチャートである。図９に例示した第一の実施形態におけるフローチャートと比べて、ステップＳ１０４Ｂおよび１０５Ｂの処理が異なるので、これらの相違点を中心に説明する。
　図１２のステップＳ１０２で開始された画像の取得は、図９の場合と同様に、撮像素子１００の撮像面の略全域をAE領域として、AE領域用の制御パラメータを設定して行われる。制御部７０は、上記設定により撮像部２０から出力される信号に基づくライブビュー画像データをシーン認識対象とする。ステップＳ１０４Ｂにおいて、制御部７０は画像処理部３０に指示を送り、上記ライブビュー画像データに対して公知のシーン認識処理を行わせる。画像処理部３０は、シーン認識処理を行うことにより、上述したように高輝度領域Ａ、主要被写体領域Ｂ、および背景領域Ｃに分割する。
　ステップＳ１０５Ｂにおいて、制御部７０は駆動部２１へ指示を送り、分割領域別に上述した３つの設定を行わせる。これにより、AF領域と、AE領域と、AF領域でもAE領域でもない領域とで異なる制御パラメータを適用することによって異なる画像を得る。制御部７０は、AE領域から取得された画像に基づいて、制御パラメータの微調整と、ホワイトバランス調整値の決定とを行える。また、AE領域で取得された画像と、AF領域でもAE領域でもない領域とで取得された画像とに基づいてライブビュー画像の表示を行える。
　以上説明した第二の実施形態によれば、次の作用効果が得られる。
（１）撮像装置１は、画面の中で露出演算の対象とする位置、および焦点調節の対象とする位置を、シーン解析結果に基づいて可変することができる。
（２）制御部７０は、上記画像のうち画像処理部３０によって主要被写体を含むと判断された範囲内に第１領域および第２領域をそれぞれ定めるようにしたので、画面内で主要被写体を対象に露出を決め、主要被写体を対象に焦点調節を行い得る。
（３）制御部７０は、上記画像のうち画像処理部３０によって判断された上記範囲の外に第１領域を定めるようにしたので、主要被写体以外の背景についても露出演算の対象に含め得る。
（４）制御部７０は、上記画像のうち、所定輝度を超える領域とは別の領域に範囲に１領域および第２領域を設定したので、例えば撮像部２０からの信号が飽和した場合には、これらを露出演算の対象や焦点調節の対象から除くことができる。
（変形例１）
　上述した第一の実施形態および第二の実施形態に係る撮像装置１を、高機能携帯電話機、またはタブレット端末によって構成してもよい。この場合、高機能携帯電話機（またはタブレット端末）に搭載されるカメラユニットを、上記積層型撮像素子１００を用いて構成する。
（変形例２）
　上述した説明では、AE領域から取得された画像に基づいて、制御パラメータの微調整と、ホワイトバランス調整値の決定とを行う例を説明した。この代わりに、AF領域およびAE領域と別にＡＷＢ領域を新たに設けてもよい。そして、撮像素子１００（撮像チップ１１３）を、ライブビュー画像を取得する際、AF領域と、AE領域と、ＡＷＢ領域とにおいてそれぞれ異なる制御パラメータ（フレームレート、ゲインなど）で蓄積制御する。
　変形例２において制御部７０は、AF領域から取得された画像に基づいて焦点検出処理を行う。制御部７０は、ホワイトバランス調整値の決定を、ＡＷＢ領域から取得された画像に基づいて行う。制御パラメータの微調整については、AE領域から取得された画像に基づいて行う。また、ライブビュー画像の表示については、AE領域で取得された画像と、AF領域でもAE領域でもない領域とで取得された画像とに基づいて行う。
　上記では、種々の実施の形態および変形例を説明したが、本発明はこれらの内容に限定されるものではない。各実施形態および各変形例の構成は、適宜組み合わせても構わない。本発明の技術的思想の範囲内で考えられるその他の態様も本発明の範囲内に含まれる。各フローチャートの処理順番を適宜入れ替えることも可能である。
　　１…撮像装置
　１０…撮像光学系
　２０…撮像部
　３０…画像処理部
　４０…ワークメモリ
　５０…表示部
　５１…液晶表示パネル
　５２…タッチパネル
　６０…記録部
　７０…制御部
　７１…ＡＦ演算部
　７２…ＡＥ、ＡＷＢ演算部
１００…撮像素子
１０９…バンプ
１１１…信号処理チップ
１１２…メモリチップ
１１３…撮像チップ
１３１…単位領域
　次の優先権基礎出願の開示内容は引用文としてここに組み込まれる。
　日本国特許出願２０１３年第０３７６１７号（２０１３年２月２７日出願）

Claims (11)

  1. 　光学系を介して入射した光を第１撮像条件で撮像して前記光学系の焦点検出を行う検出信号を生成する第１撮像領域と、
    　前記光学系を介して入射した光を前記第１撮像条件とは異なる第２撮像条件で撮像して画像信号を生成する第２撮像領域と、
    を備える撮像素子。
  2. 　光学系を介して入射した光を第１撮像条件で撮像して前記光学系の焦点検出を行う検出信号を生成する第１撮像領域と、
    　前記光学系を介して入射した光を前記第１撮像条件とは異なる第２撮像条件で撮像して露出演算に用いる信号を生成する第２撮像領域と、
    を備える撮像素子。
  3. 　光学系を介して入射した光を第１撮像条件で撮像して前記光学系の焦点検出を行う検出信号を生成する第１撮像領域と、
    　前記光学系を介して入射した光を前記第１撮像条件とは異なる第２撮像条件で撮像してホワイトバランス調整に用いる信号を生成する第２撮像領域と、
    を備える撮像素子。
  4. 　請求項１から請求項３のいずれか一項に記載の撮像素子において、
    　前記第１撮像条件により設定されたフレームレートは、前記第２撮像条件により設定されたフレームレートよりも高い撮像素子。
  5. 　請求項１から請求項４のいずれか一項に記載の撮像素子において、
    　前記第２撮像領域の面積は、前記第１撮像領域の面積よりも大きい撮像素子。
  6. 　請求項１から請求項５のいずれか一項に記載の撮像素子と、
    　前記第１撮像領域の配置位置と前記第２撮像領域の配置位置とを設定する設定部と、
    を備える電子機器。
  7. 　請求項６に記載の電子機器において、
    　被写体の輝度分布を解析する解析部を更に備え、
    　前記設定部は、前記解析部により解析された被写体の輝度分布に基づいて前記第１撮像領域の配置位置と前記第２撮像領域の配置位置とを設定する電子機器。
  8. 　請求項７に記載の電子機器において、
    　前記設定部は、前記解析部の解析結果により主要被写体を含むと判断された領域に前記第１撮像領域及び前記第２撮像領域を設定する電子機器。
  9. 　請求項８に記載の電子機器において、
    　前記設定部は、前記解析部の解析結果により主要被写体を含むと判断された領域以外の領域に前記２撮像領域を設定する電子機器。
  10. 　請求項６から請求項９のいずれか一項に記載の電子機器において、
    　前記設定部は、前記解析部の解析結果により所定輝度を超える領域以外の領域に前記１撮像領域及び前記第２撮像領域を設定する電子機器。
  11. 　請求項６から請求項１０のいずれか一項に記載の電子機器において、
    　画像信号を記録する記録部と、
    　前記記録部に画像信号を記録するように指示する指示部と、を更に備え、
    　前記設定部は、前記指示部により前記記録部に画像信号を記録するように指示された場合、前記第１撮像条件の設定と前記第２撮像条件の設定とを解除する電子機器。
     
PCT/JP2014/054865 2013-02-27 2014-02-27 撮像素子および電子機器 WO2014133076A1 (ja)

Priority Applications (7)

Application Number Priority Date Filing Date Title
CN201811159203.XA CN109348148B (zh) 2013-02-27 2014-02-27 成像元件及电子设备
JP2015503018A JP6090425B2 (ja) 2013-02-27 2014-02-27 撮像素子および電子機器
CN201480010575.XA CN105103537B (zh) 2013-02-27 2014-02-27 成像元件及电子设备
EP14756999.0A EP2963917B1 (en) 2013-02-27 2014-02-27 Electronic apparatus comprising an image sensor
US14/771,123 US10924697B2 (en) 2013-02-27 2014-02-27 Image sensor and electronic device having imaging regions for focus detection extending in first and second different directions
US17/146,870 US11595604B2 (en) 2013-02-27 2021-01-12 Image sensor and imaging device including a plurality of semiconductor substrates
US18/104,936 US20230199343A1 (en) 2013-02-27 2023-02-02 Image sensor and imaging device including a plurality of semiconductor substrates

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2013-037617 2013-02-27
JP2013037617 2013-02-27

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US14/771,123 A-371-Of-International US10924697B2 (en) 2013-02-27 2014-02-27 Image sensor and electronic device having imaging regions for focus detection extending in first and second different directions
US17/146,870 Continuation US11595604B2 (en) 2013-02-27 2021-01-12 Image sensor and imaging device including a plurality of semiconductor substrates

Publications (1)

Publication Number Publication Date
WO2014133076A1 true WO2014133076A1 (ja) 2014-09-04

Family

ID=51428335

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2014/054865 WO2014133076A1 (ja) 2013-02-27 2014-02-27 撮像素子および電子機器

Country Status (5)

Country Link
US (3) US10924697B2 (ja)
EP (1) EP2963917B1 (ja)
JP (5) JP6090425B2 (ja)
CN (2) CN109348148B (ja)
WO (1) WO2014133076A1 (ja)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016052640A1 (ja) * 2014-09-30 2016-04-07 株式会社ニコン 電子機器、撮像装置、および、撮像システム
CN107005635A (zh) * 2014-09-30 2017-08-01 株式会社尼康 电子设备、再现装置、再现方法、记录介质及记录方法
CN107005633A (zh) * 2014-09-30 2017-08-01 株式会社尼康 电子设备、再现装置、再现方法、记录介质及记录方法
CN107005636A (zh) * 2014-09-30 2017-08-01 株式会社尼康 电子设备
JP2017225084A (ja) * 2016-06-17 2017-12-21 株式会社ニコン 撮像素子、電子機器、撮像方法、およびプログラム
EP3203720A4 (en) * 2014-09-30 2018-03-21 Nikon Corporation Electronic apparatus, reproduction device, reproduction method, recording medium, and recording method
EP3203722A4 (en) * 2014-09-30 2018-06-06 Nikon Corporation Electronic apparatus and image processing method
JP2020036330A (ja) * 2013-02-27 2020-03-05 株式会社ニコン 撮像装置および撮像素子
JP2020101969A (ja) * 2018-12-21 2020-07-02 株式会社モルフォ 画像処理装置、画像処理方法およびプログラム
CN112653821A (zh) * 2014-12-03 2021-04-13 株式会社尼康 电子设备

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6234058B2 (ja) * 2013-05-09 2017-11-22 キヤノン株式会社 焦点調節装置およびその制御方法
EP3076662A4 (en) 2013-11-26 2017-08-09 Nikon Corporation Electronic device, imaging device, and imaging element
JP6539015B2 (ja) 2013-12-05 2019-07-03 キヤノン株式会社 撮像装置及びその制御方法
JP6198600B2 (ja) * 2013-12-16 2017-09-20 キヤノン株式会社 画像処理装置、撮像装置、その制御方法及びプログラム
JP6146293B2 (ja) * 2013-12-25 2017-06-14 ソニー株式会社 制御装置、制御方法および制御システム
JP2015195235A (ja) * 2014-03-31 2015-11-05 ソニー株式会社 固体撮像素子、電子機器、および撮像方法
US10485486B2 (en) * 2014-11-18 2019-11-26 Baylor College Of Medicine Clinical metric for predicting onset of cardiorespiratory deterioration in patients
CN105446056B (zh) * 2014-12-25 2018-08-10 北京展讯高科通信技术有限公司 自动对焦装置及方法
KR102328098B1 (ko) * 2015-02-13 2021-11-17 삼성전자주식회사 전자장치의 초점 검출 장치 및 방법
KR20160102814A (ko) * 2015-02-23 2016-08-31 삼성전자주식회사 이미지 센서 이를 포함하는 이미지 처리 시스템, 및 상기 이미지 센서를 포함하는 모바일 컴퓨팅 장치
JP6608185B2 (ja) * 2015-06-18 2019-11-20 キヤノン株式会社 積層型イメージセンサおよび撮像装置
KR20180117597A (ko) * 2016-03-03 2018-10-29 소니 주식회사 화상 처리 장치, 화상 처리 방법, 컴퓨터 프로그램 및 전자 기기
CN105827994A (zh) * 2016-04-12 2016-08-03 乐视控股（北京）有限公司 一种解决对焦区曝光过度的***及方法
US10491832B2 (en) * 2017-08-16 2019-11-26 Qualcomm Incorporated Image capture device with stabilized exposure or white balance

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006049361A (ja) 2004-07-30 2006-02-16 Sony Corp 半導体モジュール及びｍｏｓ型固体撮像装置
JP2006303755A (ja) * 2005-04-19 2006-11-02 Konica Minolta Photo Imaging Inc 撮像装置及び撮像方法
JP2009049858A (ja) * 2007-08-22 2009-03-05 Canon Inc 撮像装置
JP2009094881A (ja) 2007-10-10 2009-04-30 Nikon Corp 撮像装置および撮像方法
US20100002940A1 (en) 2008-07-03 2010-01-07 Sony Corporation Image data processing apparatus and image data processing method
JP2012060370A (ja) * 2010-09-08 2012-03-22 Pentax Ricoh Imaging Co Ltd 撮像システムおよび画素信号読出し方法
JP2012139026A (ja) 2010-12-27 2012-07-19 Alpine Electronics Inc 消費電力制御システム

Family Cites Families (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03243071A (ja) * 1990-02-21 1991-10-30 Sony Corp オートフォーカス回路
JPH06303379A (ja) 1993-04-14 1994-10-28 Fuji Xerox Co Ltd 画像読取素子
JP3270252B2 (ja) * 1994-09-12 2002-04-02 オリンパス光学工業株式会社 カメラ
JPH0918773A (ja) * 1995-06-27 1997-01-17 Canon Inc 撮像装置
JP4100736B2 (ja) 1996-09-27 2008-06-11 シャープ株式会社 非水系二次電池用正極活物質ニッケル酸リチウムの製造方法
JP2002116369A (ja) * 2000-10-05 2002-04-19 Ricoh Co Ltd 自動焦点制御装置
JP2003289469A (ja) * 2002-03-28 2003-10-10 Minolta Co Ltd 撮像装置
JP2003333506A (ja) * 2002-05-10 2003-11-21 Canon Inc 画像処理装置、画像処理システム、画像処理方法、プログラム、及び記憶媒体
US6747808B2 (en) * 2002-10-04 2004-06-08 Hewlett-Packard Development Company, L.P. Electronic imaging device focusing
JP4665422B2 (ja) 2004-04-02 2011-04-06 ソニー株式会社 撮像装置
JP4612814B2 (ja) * 2004-07-26 2011-01-12 キヤノン株式会社 自動焦点調節装置及びその制御方法並びに撮像装置
JP2006109103A (ja) 2004-10-05 2006-04-20 Victor Co Of Japan Ltd 撮像装置のフォーカス処理回路
TW201101476A (en) * 2005-06-02 2011-01-01 Sony Corp Semiconductor image sensor module and method of manufacturing the same
JP4218670B2 (ja) * 2005-09-27 2009-02-04 オムロン株式会社 前方撮影装置
JP4816336B2 (ja) * 2006-02-07 2011-11-16 日本ビクター株式会社 撮像方法及び撮像装置
JP2007228019A (ja) * 2006-02-21 2007-09-06 Olympus Corp 撮像装置
JP2007248782A (ja) * 2006-03-15 2007-09-27 Olympus Imaging Corp 焦点調節装置およびカメラ
US8049801B2 (en) * 2006-09-14 2011-11-01 Nikon Corporation Image sensor and imaging apparatus
US8031258B2 (en) * 2006-10-04 2011-10-04 Omnivision Technologies, Inc. Providing multiple video signals from single sensor
JP5009091B2 (ja) * 2007-08-23 2012-08-22 富士フイルム株式会社 焦点調節装置及び焦点調節方法
JP5056297B2 (ja) * 2007-09-14 2012-10-24 カシオ計算機株式会社 撮像装置、撮像装置制御プログラム及び撮像装置制御方法
JP5194688B2 (ja) 2007-10-01 2013-05-08 株式会社ニコン 固体撮像装置
JP2009141631A (ja) * 2007-12-05 2009-06-25 Canon Inc 光電変換装置及び撮像装置
US8441535B2 (en) * 2008-03-05 2013-05-14 Omnivision Technologies, Inc. System and method for independent image sensor parameter control in regions of interest
JP4530067B2 (ja) 2008-03-27 2010-08-25 ソニー株式会社 撮像装置、撮像方法及びプログラム
US7667169B2 (en) 2008-05-22 2010-02-23 Omnivision Technologies, Inc. Image sensor with simultaneous auto-focus and image preview
JP2010020015A (ja) * 2008-07-09 2010-01-28 Canon Inc 撮像装置
JP5266916B2 (ja) * 2008-07-09 2013-08-21 ソニー株式会社 撮像素子、カメラ、撮像素子の制御方法、並びにプログラム
US8179466B2 (en) * 2009-03-11 2012-05-15 Eastman Kodak Company Capture of video with motion-speed determination and variable capture rate
JP5238673B2 (ja) * 2009-11-09 2013-07-17 株式会社東芝 固体撮像装置
KR101624654B1 (ko) * 2010-03-15 2016-05-26 삼성전자주식회사 초점 조절 장치 및 초점 조절 방법
JP5633323B2 (ja) 2010-11-11 2014-12-03 ソニー株式会社 固体撮像装置及び電子機器
JP2012129425A (ja) * 2010-12-16 2012-07-05 Canon Inc マトリクス基板、検出装置、検出システム、及び、検出装置の駆動方法
JP2012175234A (ja) 2011-02-18 2012-09-10 Sony Corp 撮像装置、撮像素子、および撮像制御方法、並びにプログラム
US20130002936A1 (en) * 2011-06-30 2013-01-03 Nikon Corporation Image pickup apparatus, image processing apparatus, and storage medium storing image processing program
JP2013145779A (ja) * 2012-01-13 2013-07-25 Sony Corp 固体撮像装置及び電子機器
JP2013172210A (ja) * 2012-02-17 2013-09-02 Canon Inc 撮像装置
JP6023437B2 (ja) * 2012-02-29 2016-11-09 キヤノン株式会社 固体撮像装置及びカメラ
EP2846538B1 (en) 2012-05-02 2021-06-23 Nikon Corporation Imaging device
WO2014133076A1 (ja) 2013-02-27 2014-09-04 株式会社ニコン 撮像素子および電子機器
US9661243B2 (en) * 2013-03-15 2017-05-23 Forza Silicon Corporation CMOS image sensor with column-wise selective charge-domain binning

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006049361A (ja) 2004-07-30 2006-02-16 Sony Corp 半導体モジュール及びｍｏｓ型固体撮像装置
JP2006303755A (ja) * 2005-04-19 2006-11-02 Konica Minolta Photo Imaging Inc 撮像装置及び撮像方法
JP2009049858A (ja) * 2007-08-22 2009-03-05 Canon Inc 撮像装置
JP2009094881A (ja) 2007-10-10 2009-04-30 Nikon Corp 撮像装置および撮像方法
US20100002940A1 (en) 2008-07-03 2010-01-07 Sony Corporation Image data processing apparatus and image data processing method
JP2010016621A (ja) 2008-07-03 2010-01-21 Sony Corp 画像データ処理装置と画像データ処理方法およびプログラムと記録媒体
JP2012060370A (ja) * 2010-09-08 2012-03-22 Pentax Ricoh Imaging Co Ltd 撮像システムおよび画素信号読出し方法
JP2012139026A (ja) 2010-12-27 2012-07-19 Alpine Electronics Inc 消費電力制御システム

Cited By (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020036330A (ja) * 2013-02-27 2020-03-05 株式会社ニコン 撮像装置および撮像素子
US11595604B2 (en) 2013-02-27 2023-02-28 Nikon Corporation Image sensor and imaging device including a plurality of semiconductor substrates
US10924697B2 (en) 2013-02-27 2021-02-16 Nikon Corporation Image sensor and electronic device having imaging regions for focus detection extending in first and second different directions
EP3203717A4 (en) * 2014-09-30 2018-04-25 Nikon Corporation Electronic apparatus, reproduction device, reproduction method, recording medium, and recording method
EP3203722A4 (en) * 2014-09-30 2018-06-06 Nikon Corporation Electronic apparatus and image processing method
JPWO2016052640A1 (ja) * 2014-09-30 2017-08-31 株式会社ニコン 電子機器、撮像装置、および、撮像システム
US11689798B2 (en) 2014-09-30 2023-06-27 Nikon Corporation Electronic device, image-capturing device, and image-capturing system
EP3203723A4 (en) * 2014-09-30 2018-02-28 Nikon Corporation Electronic device
EP3203720A4 (en) * 2014-09-30 2018-03-21 Nikon Corporation Electronic apparatus, reproduction device, reproduction method, recording medium, and recording method
EP3203718A4 (en) * 2014-09-30 2018-04-11 Nikon Corporation Electronic apparatus, reproduction device, reproduction method, recording medium, and recording method
WO2016052640A1 (ja) * 2014-09-30 2016-04-07 株式会社ニコン 電子機器、撮像装置、および、撮像システム
EP3203721A4 (en) * 2014-09-30 2018-05-16 Nikon Corporation Electronic apparatus, image pickup device, and image pickup system
CN107005636A (zh) * 2014-09-30 2017-08-01 株式会社尼康 电子设备
CN107005633A (zh) * 2014-09-30 2017-08-01 株式会社尼康 电子设备、再现装置、再现方法、记录介质及记录方法
JP2020065280A (ja) * 2014-09-30 2020-04-23 株式会社ニコン 電子機器
CN107005638A (zh) * 2014-09-30 2017-08-01 株式会社尼康 电子设备、拍摄装置和拍摄***
CN107005635A (zh) * 2014-09-30 2017-08-01 株式会社尼康 电子设备、再现装置、再现方法、记录介质及记录方法
JP2022031703A (ja) * 2014-09-30 2022-02-22 株式会社ニコン 電子機器
US11006067B2 (en) 2014-09-30 2021-05-11 Nikon Corporation Electronic apparatus, reproduction device, reproduction method, recording medium, and recording method
CN113890993A (zh) * 2014-09-30 2022-01-04 株式会社尼康 拍摄元件和拍摄装置
CN112653821A (zh) * 2014-12-03 2021-04-13 株式会社尼康 电子设备
JP2017225084A (ja) * 2016-06-17 2017-12-21 株式会社ニコン 撮像素子、電子機器、撮像方法、およびプログラム
JP2020101969A (ja) * 2018-12-21 2020-07-02 株式会社モルフォ 画像処理装置、画像処理方法およびプログラム

Also Published As

Publication number Publication date
US20230199343A1 (en) 2023-06-22
CN105103537A (zh) 2015-11-25
EP2963917A4 (en) 2016-10-19
JP6090425B2 (ja) 2017-03-08
EP2963917B1 (en) 2021-04-14
EP2963917A1 (en) 2016-01-06
JPWO2014133076A1 (ja) 2017-02-02
US10924697B2 (en) 2021-02-16
CN109348148B (zh) 2022-03-15
JP7264189B2 (ja) 2023-04-25
CN109348148A (zh) 2019-02-15
JP2023089131A (ja) 2023-06-27
JP2021168512A (ja) 2021-10-21
JP2020036330A (ja) 2020-03-05
CN105103537B (zh) 2018-11-06
US20160014359A1 (en) 2016-01-14
US20210136302A1 (en) 2021-05-06
JP2017118579A (ja) 2017-06-29
US11595604B2 (en) 2023-02-28

Similar Documents

Publication Publication Date Title
JP7264189B2 (ja) 撮像素子及び撮像装置
JP6780745B2 (ja) 電子機器
WO2014192152A1 (ja) 電子機器及び制御プログラム
JP2014178603A (ja) 撮像装置
JP6413233B2 (ja) 撮像装置および撮像素子
US10757341B2 (en) Electronic device, imaging device, and imaging element
JP2014179892A (ja) 撮像装置
JP2014179778A (ja) 信号処理装置、撮像素子、撮像装置および電子機器
JP6488545B2 (ja) 電子機器
JP6781140B2 (ja) 撮像装置
JP6349659B2 (ja) 電子機器、電子機器の制御方法、及び制御プログラム
JP6852712B2 (ja) 撮像素子および撮像装置
JP6916418B2 (ja) 撮像装置
JP2021193811A (ja) 撮像素子、及び撮像装置
JP2018174543A (ja) 電子機器
JP2019092220A (ja) 電子機器

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 201480010575.X

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14756999

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2015503018

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 2014756999

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 14771123

Country of ref document: US