CN110036627B - 摄像装置、照相机以及摄像方法 - Google Patents
摄像装置、照相机以及摄像方法 Download PDFInfo
- Publication number
- CN110036627B CN110036627B CN201780072524.3A CN201780072524A CN110036627B CN 110036627 B CN110036627 B CN 110036627B CN 201780072524 A CN201780072524 A CN 201780072524A CN 110036627 B CN110036627 B CN 110036627B
- Authority
- CN
- China
- Prior art keywords
- image
- acquired
- solid
- exposure
- state imaging
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 180
- 238000012545 processing Methods 0.000 claims abstract description 182
- 238000004458 analytical method Methods 0.000 claims abstract description 56
- 239000011159 matrix material Substances 0.000 claims abstract description 10
- 230000001066 destructive effect Effects 0.000 claims description 69
- 238000010191 image analysis Methods 0.000 claims description 65
- 238000006243 chemical reaction Methods 0.000 claims description 52
- 238000012937 correction Methods 0.000 claims description 24
- 238000000034 method Methods 0.000 claims description 16
- 229920006395 saturated elastomer Polymers 0.000 claims description 4
- 238000003860 storage Methods 0.000 description 25
- 238000010586 diagram Methods 0.000 description 15
- 230000008569 process Effects 0.000 description 9
- 230000006870 function Effects 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 5
- 230000003321 amplification Effects 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 4
- 230000010354 integration Effects 0.000 description 4
- 238000003199 nucleic acid amplification method Methods 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 239000003086 colorant Substances 0.000 description 3
- 239000000470 constituent Substances 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 230000035945 sensitivity Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000031700 light absorption Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 238000005096 rolling process Methods 0.000 description 2
- 239000010936 titanium Substances 0.000 description 2
- ATJFFYVFTNAWJD-UHFFFAOYSA-N Tin Chemical compound [Sn] ATJFFYVFTNAWJD-UHFFFAOYSA-N 0.000 description 1
- RTAQQCXQSZGOHL-UHFFFAOYSA-N Titanium Chemical compound [Ti] RTAQQCXQSZGOHL-UHFFFAOYSA-N 0.000 description 1
- 238000009825 accumulation Methods 0.000 description 1
- 238000007792 addition Methods 0.000 description 1
- 239000004020 conductor Substances 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 229910052738 indium Inorganic materials 0.000 description 1
- APFVFJFRJDLVQX-UHFFFAOYSA-N indium atom Chemical compound [In] APFVFJFRJDLVQX-UHFFFAOYSA-N 0.000 description 1
- 229910010272 inorganic material Inorganic materials 0.000 description 1
- 239000011147 inorganic material Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 229910052719 titanium Inorganic materials 0.000 description 1
- 238000002834 transmittance Methods 0.000 description 1
- 238000001771 vacuum deposition Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/50—Control of the SSIS exposure
- H04N25/57—Control of the dynamic range
- H04N25/58—Control of the dynamic range involving two or more exposures
-
- H—ELECTRICITY
- H01—ELECTRIC ELEMENTS
- H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
- H01L27/00—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
- H01L27/14—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
- H01L27/144—Devices controlled by radiation
- H01L27/146—Imager structures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/76—Circuitry for compensating brightness variation in the scene by influencing the image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/50—Control of the SSIS exposure
- H04N25/53—Control of the integration time
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/703—SSIS architectures incorporating pixels for producing signals other than image signals
- H04N25/707—Pixels for event detection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
- H04N25/767—Horizontal readout lines, multiplexers or registers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3179—Video signal processing therefor
- H04N9/3182—Colour adjustment, e.g. white balance, shading or gamut
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
- H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02E—REDUCTION OF GREENHOUSE GAS [GHG] EMISSIONS, RELATED TO ENERGY GENERATION, TRANSMISSION OR DISTRIBUTION
- Y02E10/00—Energy generation through renewable energy sources
- Y02E10/50—Photovoltaic [PV] energy
- Y02E10/549—Organic PV cells
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Power Engineering (AREA)
- General Physics & Mathematics (AREA)
- Condensed Matter Physics & Semiconductors (AREA)
- Electromagnetism (AREA)
- Computer Hardware Design (AREA)
- Microelectronics & Electronic Packaging (AREA)
- Studio Devices (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Solid State Image Pick-Up Elements (AREA)
- Image Processing (AREA)
Abstract
摄像装置(10)具备:固体摄像元件(100),能够进行非破坏读取并且具有被排列为矩阵状的多个像素(210);和图像处理部(340),使用适当图像的解析结果,对主图像进行图像处理。并且,适当图像是贮存于多个像素(210)的信号电荷的电荷量为预先决定的第1阈值以上时从固体摄像元件(100)获取的图像,主图像是摄像条件所对应的第1曝光后从固体摄像元件(100)获取的图像。
Description
技术领域
本公开涉及摄像装置、具备该摄像装置的照相机以及其摄像方法。
背景技术
以往,已知使用图像传感器来拍摄图像的摄像装置(例如,参照专利文献1)。
在先技术文献
专利文献
专利文献1:JP特开2008-042180号公报
发明内容
-发明要解决的课题-
拍摄时,若贮存的信号电荷是饱和电平(饱和的电荷量),或者贮存的信号电荷为不足电平,则可能不能正确地进行AWB(Auto White Balance)等的图像处理。作为摄像装置,最好更加适当地进行图像处理。
因此,本公开的目的在于,提供一种更加适当地进行图像处理的摄像装置、照相机以及摄像方法。
-解决课题的手段-
为了实现上述目的,本公开的一方式所涉及的摄像装置具备:能够进行非破坏读取且具有被排列为矩阵状的多个像素的固体摄像元件、和使用适当图像的解析结果来对主图像进行图像处理的图像处理部,适当图像是贮存于多个像素的信号电荷的电荷量为预先决定的第1阈值以上时从固体摄像元件获取的图像,主图像是在摄像条件所对应的第1曝光后从固体摄像元件获取的图像。
此外,本公开的一方式所涉及的照相机具备:上述所述的摄像装置、和显示摄像装置所拍摄的图像的显示部。
此外,本公开的一方式所涉及的摄像方法从能够进行非破坏读取并且具有被排列为矩阵状的多个像素的固体摄像元件,获取贮存于多个像素的信号电荷的量为被预先决定为适当曝光的阈值以上的适当图像,进行获取的适当图像的图像解析,使用该解析结果,对摄像条件所对应的曝光的后从固体摄像元件获取的主图像进行图像处理。
-发明效果-
通过上述本公开所涉及的摄像装置、照相机以及摄像方法,能够更加适当地进行图像处理。
附图说明
图1是表示实施方式所涉及的摄像装置的整体结构的框图。
图2是表示实施方式所涉及的像素的电路结构的一个例子的图。
图3是内置有实施方式所涉及的摄像装置的照相机的功能框图。
图4是表示实施方式所涉及的电荷量与图像的关系的图。
图5是表示实施方式所涉及的摄像装置的动作的流程图。
图6A是表示实施方式所涉及的电荷量低于第1阈值的情况下的电荷量与图像处理的流程的图。
图6B是表示实施方式所涉及的电荷量为第1阈值以上并且低于第2阈值的情况下的电荷量与图像处理的流程的图。
图6C是表示实施方式所涉及的电荷量为第2阈值的情况下的电荷量与图像处理的流程的图。
图7是内置有实施方式所涉及的摄像装置的照相机的外观图。
图8是表示在实施方式所涉及的照相机的显示部显示曝光中的信息的一个例子的图。
具体实施方式
以下,参照附图来对本公开的摄像装置、照相机以及摄像方法详细进行说明。另外,以下说明的实施方式均表示本公开的优选的一具体例。因此,以下的实施方式所示的数值、形状、材料、结构要素、结构要素的配置以及连接形态、步骤、步骤的顺序等是一个例子,并不是限定本公开的主旨。因此,以下的实施方式中的结构要素之中,关于表示本公开的最上位概念的独立权利要求未记载的结构要素,被说明为任意的结构要素。
另外,为了本领域技术人员充分理解本公开而提供附图以及以下的说明,并不意图通过这些来限定权利要求所述的主题。此外,各图是示意图,不必严密地图示。
(实施方式)
以下,使用图1~图8,对实施方式进行说明。
[1.摄像装置的整体结构]
首先,使用图1来对本实施方式所涉及的摄像装置的整体结构进行说明。图1是表示本实施方式所涉及的摄像装置10的整体结构的框图。该图所示的摄像装置10具备:固体摄像元件100、信号处理部300、显示部500(参照图3)、操作部600(参照图3)。进一步地,固体摄像元件100具有:像素阵列部110、列AD转换部120、行扫描部130、列扫描部140、驱动控制部150。此外,在像素阵列部110及其周边区域,按照每个像素列而配置列信号线160,按照每个像素行而配置扫描线170。另外,在图1中,摄像装置10所具备的显示部500以及操作部600省略图示。
像素阵列部110是多个像素210被配置为矩阵状的摄像部。
列AD转换(模拟/数字转换器)部120是通过对从各列信号线160输入的信号(模拟信号)进行数字转换,从而获取、保持以及输出像素210的受光量所对应的数字值的转换部。
行扫描部130具有以行为单位来对像素210的重置动作、电荷的贮存动作以及读取动作进行控制的功能。
列扫描部140通过使保持于列AD转换部120的一行数字值依次输出到行信号线180,从而输出到信号处理部300。
驱动控制部150通过对行扫描部130以及列扫描部140提供各种控制信号,来控制各部。驱动控制部150例如基于来自信号处理部300的控制信号,对行扫描部130以及列扫描部140提供各种控制信号。
本实施方式所涉及的摄像装置10例如是用于拍摄静止图像的摄像装置。
[2.固体摄像元件的结构]
接着,参照图1,使用图2来对固体摄像元件100的结构详细进行说明。
[2-1.像素]
首先,使用图2来对像素210进行说明。图2是表示本实施方式所涉及的像素210的电路结构的一个例子的图。
像素210具有光电转换元件211、重置晶体管212、放大晶体管213、选择晶体管214、电荷贮存部215。
光电转换元件211是将受光的光光电转换为信号电荷(像素电荷)的光电转换部。具体而言,光电转换元件211由上部电极211a、下部电极211b、被两电极夹着的光电转换膜211c构成。光电转换膜211c是由根据受光的光而产生电荷的光电转换材料构成的膜,在本实施方式中,由包含具有较高的光吸收功能的有机分子的有机光电转换膜构成。换言之,本实施方式所涉及的光电转换元件211是具有有机光电转换膜的有机光电转换元件,固体摄像元件100是使用有机光电转换元件的有机传感器。另外,有机光电转换膜横跨多个像素210而形成。多个像素210分别具有有机光电转换膜。
有机光电转换膜通过使施加于有机光电转换膜的电压可变,从而光的透过率变化。换句话说,能够通过调整施加于有机光电转换膜的电压来实现快门功能。由此,由于能够将具有有机光电转换膜的多个像素210的全部实质上同时切换曝光状态和遮光状态,因此能够在不追加存储器等元件的情况下,实现全局快门。因此,能够减少基于滚动快门的读取所导致产生的形变(滚动形变)。
光电转换膜211c的厚度例如约为500nm。此外,光电转换膜211c例如可使用真空蒸镀法来形成。上述有机分子在波长从约400nm到约700nm的可见光整个区域具有较高的光吸收功能。
另外,本实施方式所涉及的像素210所具备的光电转换元件211并不限定于由上述的有机光电转换膜构成,例如也可以是由无机材料构成的光电二极管。
上部电极211a是与下部电极211b对置的电极,形成为在光电转换膜211c上覆盖光电转换膜211c。换句话说,上部电极211a横跨多个像素210而形成。上部电极211a由于使光入射到光电转换膜211c,因此由透明的导电性材料(例如,ITO:铟/钛/锡)构成。
下部电极211b是用于将处于与对置的上部电极211a之间的光电转换膜211c中产生的电子或者空穴取出的电极。下部电极211b按照每个像素210而形成。下部电极211b例如由Ti、TiN、Ta、Mo等构成。
电荷贮存部215与光电转换元件211连接,对经由下部电极211b而被取出的信号电荷进行贮存。
重置晶体管212向漏极提供重置电压VRST,源极与电荷贮存部215连接,对电荷贮存部215的电位进行重置(初始化)。具体而言,通过经由重置用扫描线170A来从行扫描部130向重置晶体管212的栅极提供规定的电压(接通),从而重置晶体管212对电荷贮存部215的电位进行重置。此外,通过停止规定的电压的提供,从而在电荷贮存部215中贮存信号电荷(开始曝光)。
放大晶体管213的栅极与电荷贮存部215连接,向漏极提供电源电压VDD,输出与贮存于电荷贮存部215的信号电荷的电荷量相应的像素信号。
选择晶体管214的漏极与放大晶体管213的源极连接,源极与列信号线160连接,决定从放大晶体管213输出像素信号的定时。具体而言,通过经由选择用扫描线170B来从行扫描部130向选择晶体管214的栅极提供规定的电压,从而从放大晶体管213输出像素信号。
具有上述的结构的像素210能够进行非破坏读取。这里,所谓非破坏读取,是指在曝光中,不破坏贮存于电荷贮存部215的电荷(信号电荷)地,读取与该电荷量相应的像素信号。另外,所谓曝光中,设为表示曝光时间内的任意的定时的情况来使用。
[2-2.其他的结构]
再次参照图1,列AD转换部120由按照每个列信号线160而被设置的AD转换器121构成。AD转换器121例如是14bit的AD转换器。AD转换器121例如通过斜坡方式来对从像素210输出的模拟的像素信号进行数字转换,从而输出与像素210中的受光量对应的数字值。AD转换器121具有比较器以及增减计数器(未图示)。
这里,所谓基于斜坡方式的AD转换,是指使用了斜波的AD转换,是指如下的方式:若模拟的输入信号被输入,则将电压以一定的倾斜上升的斜波提升,对从该提升时刻到两信号(输入信号和斜波)的电压一致为止的时间进行测量,以数字值输出该测量时间。比较器对列信号的电压与被输入为斜波的参照信号的电压进行比较,输出表示参照信号的电压与列信号的电压一致的定时的信号。
增减计数器在从向比较器输入参照信号起到该参照信号达到表示基准成分的列信号的电压为止的期间向下计数(或者,向上计数),接着,在从向比较器输入参照电压起到该参照信号达到表示信号成分的列信号的电压为止的期间进行向上计数(或者,向下计数),从而最终保持相当于从列信号的信号成分减去基准成分所得的差分的数字值。
保持于各增减计数器的数字值依次被输出到行信号线180,经由输出电路(虽未图示,但为输出缓存等),被输出到信号处理部300。
驱动控制部150通过对行扫描部130以及列扫描部140进行控制,从而对像素210中的重置动作、电荷的贮存动作以及读取动作、或者从AD转换器121向信号处理部300的数字信号的输出动作进行控制。
例如,若从信号处理部300接受读取的指示,则驱动控制部150控制行扫描部130,依次向选择用扫描线170B施加规定的电压,使其输出像素信号(模拟)。此外,驱动控制部150控制列扫描部140,使保持于AD转换器121的像素信号(数字值)依次输出到信号处理部300。
[3.信号处理部的结构]
接着,使用图3来对信号处理部300进行说明。图3是内置有本实施方式所涉及的摄像装置10的照相机1的功能框图。该图所示的照相机1具备固体摄像元件100、信号处理部300、透镜400、显示部500、操作部600。并且,信号处理部300具有控制部310、判定部320、存储器330以及图像处理部340。
通过透镜400的光入射到固体摄像元件100。信号处理部300驱动固体摄像元件100,获取来自固体摄像元件100的像素信号(数字值)。例如,通过控制部310控制驱动控制部150,从而图像处理部340获取来自固体摄像元件100的像素信号。图像处理部340对从固体摄像元件100获取的像素信号进行规定的信号处理,生成图像。生成的图像被保存于存储器330。此外,生成的图像被输出到显示部500。另外,图像处理部340并不限定于对从固体摄像元件100获取的像素信号进行规定的信号处理。例如,也可以将从固体摄像元件100获取的像素信号作为图像数据来保存于存储器330。或者,从固体摄像元件100获取的像素信号也可以不经由图像处理部340地保存于存储器330。
控制部310例如从存储器330读取程序,执行读取程序。上述中,说明了控制部310控制驱动控制部150,但也可以控制其他各部。例如,控制部310也可以控制固体摄像元件100的曝光(曝光的开始和曝光的结束)。具体而言,控制部310通过对施加于有机光电转换膜的电压进行调整,从而控制曝光的开始和曝光的结束。例如,通过向有机光电转换膜施加规定的电压来设为透过状态,通过停止向有机光电转换膜的电压的外加来设为遮光状态。所谓透过状态,是指光电转换元件211对光进行受光并且信号电荷被贮存于电荷贮存部215的状态,所谓遮光状态,是指对向光电转换元件211的光进行遮光并且信号电荷未被贮存于电荷贮存部215的状态。另外,控制部310也可以通过机械式快门(也被记为机械快门)来切换透过状态和遮光状态。此外,例如,若操作部600接受来自用户(使用者)的输入,则控制部310也可以进行与输入相应的控制。若操作部600从用户接受拍摄的指示,则控制部310也可以控制透镜400(具体而言,控制透镜400的位置的马达),调整被摄体的焦点等。
判定部320针对通过非破坏读取而从固体摄像元件100获取的图像(也称为非破坏读取图像),进行是否为贮存于电荷贮存部215的信号电荷的电荷量(信号量)是第1阈值以上时获取的图像的判定。所谓第1阈值,是被预先决定为适当曝光的电荷量,例如是从多个像素210分别能够贮存的电荷量的最大值的40%以上且60%以下的范围中设定的值。作为一个例子,所谓第1阈值,是能够贮存的电荷量的最大值的50%。例如,所谓第1阈值,也可以是图像处理部340中的图像处理被适当地进行所需的图像的明亮度(像素值)的下限值所对应的电荷量。
例如,判定部320也可以对固体摄像元件100所具有的全部像素210中贮存的电荷量的平均值与第1阈值进行比较并进行上述的判定。此外,判定部320也可以对固体摄像元件100所具有的全部像素210中贮存的电荷量的最低值与第1阈值进行比较并进行上述的判定。
另外,曝光中进行非破坏读取的次数并不被特别限定,进行一次以上即可。例如,控制部310对进行非破坏读取的定时进行控制,判定部320按照每个通过非破坏读取而获取的非破坏读取图像,进行上述的判定。控制部310也可以根据非破坏读取所需的时间和判定部320的判定所需的时间,对进行非破坏读取的定时进行控制。例如,控制部310对进行非破坏读取的定时进行控制,以使得在通过判定部320的判定结束的定时获取下一个非破坏读取图像。由此,判定部320能够对获取的非破坏读取图像,依次进行判定。
存储器330作为图像处理部340的工作存储器而发挥功能。存储器330对由图像处理部340处理的图像进行保存。具体而言,存储器330对通过曝光中以及曝光后的非破坏读取而从固体摄像元件100获取的非破坏读取图像,保存通过图像处理部340而被进行图像处理的图像(非破坏读取图像)。如上述所示,所谓非破坏读取图像,也包含曝光的结束后从固体摄像元件100获取的图像,但曝光的结束后(后述的第1曝光的结束后)从固体摄像元件100获取的图像为了识别也被称为主图像。换句话说,主图像是摄像条件(光圈值、ISO灵敏度等)所对应的曝光之后,从固体摄像元件100获取的图像。另外,摄像条件所对应的曝光是第1曝光的一个例子。并且,存储器330也保存主图像。另外,若非破坏读取被实施多次,则非破坏读取图像也存在同样数目。存储器330也可以保存多个非破坏读取图像的全部,也可以仅保存特定的非破坏读取图像。
存储器330例如通过DRAM(Dynamic Random Access Memory)或者铁电体存储器等来实现。另外,只要摄像装置10具有存储器330即可,信号处理部300也可以不具有。
图像处理部340是使用适当图像的解析结果,对主图像进行图像处理的处理部。另外,所谓适当图像,是指贮存于多个像素210的信号电荷的电荷量是被预先设定为适当曝光的第1阈值以上时从固体摄像元件100获取的图像。换句话说,所谓适当图像,是具有规定的明亮度(像素值)的图像。此外,所谓图像处理,是为了进行图像处理若不使用具有规定的明亮度的图像则不可进行正确的处理的图像处理,例如是白平衡的修正(例如,自动白平衡:AWB)等。在图像处理是白平衡的修正的情况下,所谓图像解析,是指用于使用适当图像来获取用于对主图像进行白平衡的修正的修正值(例如,分别针对RGB的颜色的修正值)的处理。换句话说,所谓图像解析,是指使用适当图像来获取用于对主图像进行规定的图像处理的解析结果(例如,修正值)的处理。此外,所谓图像处理,是指通过对利用图像解析而获取的修正值(解析结果)与主图像进行运算,来对主图像进行白平衡的修正的处理。换句话说,所谓图像处理,是指通过对利用图像解析而获取的解析结果与主图像进行运算,从而对主图像进行图像处理的处理。
这里,使用图4,对贮存于电荷贮存部215的电荷量与根据该电荷量而生成的图像进行说明。图4是表示电荷量与图像的关系的图。另外,图4的(b)~图4的(d)的纵轴表示电荷量,横轴表示时间(曝光时间以及读取时间)。
图4的(a)表示快门的开闭的定时。另外,快门也可以通过调整施加于有机光电转换膜的电压来实现,也可以通过机械快门来实现。
图4的(b)表示能够获取适当图像的情况下的电荷量与图像的关系。若快门打开并且曝光开始,则根据受光量来在多个像素210的电荷贮存部215贮存信号电荷。若快门关闭并且曝光结束,则信号电荷的贮存停止但贮存的信号电荷被维持。在图4的(b)中,表示被贮存的信号电荷的电荷量与第1阈值相同的情况。在电荷量是第1阈值的情况下,通过读取该电荷而生成的图像为具有规定的明亮度的图像。换句话说,通过使用该图像来进行图像解析,能够得到正确的解析结果。另外,在第1阈值的电荷量时进行读取并生成的图像是适当图像的一个例子。
图4的(c)表示被贮存的信号电荷的电荷量大幅度地超过第1阈值的情况下的电荷量与图像的关系。例如,在逆光等下拍摄被摄体的情况下,由于受光量较多因此被贮存的电荷量可能大幅度地超过第1阈值。在该情况下,通过读取该电荷量而生成的图像可能为未正确表示颜色的图像。例如,若多个像素210分别贮存信号电荷直到能够贮存的电荷量的最大值,则通过读取该电荷量而生成的图像为产生发白的图像。由于产生发白的图像是未正确表现颜色的图像(不适当图像),因此即使使用该图像来进行图像解析也不能得到正确的解析结果。换句话说,被贮存的电荷量即使过多也不可得到正确的解析结果。因此,如后面所述,可以设置第2阈值。
图4的(d)表示被贮存的电荷量低于第1阈值的情况下的电荷量与图像的关系。例如,在拍摄夜景等较暗的被摄体的情况下,由于照度不足导致被贮存的电荷量较少,因此电荷量可能未达到第1阈值。在该情况下,通过读取该电荷量而生成的图像例如为产生发黑的图像。由于产生发黑的图像是未正确表现颜色的图像(不适当图像),因此即使使用该图像来进行图像解析,也不能得到正确的解析结果。
如图4的(c)或者图4的(d)那样,若使用不正确的解析结果来对主图像进行AWB,则得到颜色再现性较低的图像。换句话说,不能进行适当的图像处理。
另外,在本实施方式中,由于使用可进行非破坏读取的固体摄像元件100,因此即使进行非破坏读取,被贮存的信号电荷也不被破坏。此外,在图4中,将从曝光的开始到快门关闭表示为曝光。
此外,图像处理部340也可以通过对从固体摄像元件100获取的像素信号进行规定的修正(信号处理的一个例子)来生成图像。例如,也可以通过对利用曝光中的非破坏读取而获取的像素信号(以下,也称为第1像素信号)进行规定的修正(以下,也称为第1修正),来生成非破坏读取图像。此外,也可以通过对利用第1曝光的结束后的读取而获取的像素信号(以下,也称为第2像素信号)进行规定的修正(以下,也称为第2修正),来生成主图像。另外,所谓规定的修正,是指针对固体摄像元件100中产生的噪声(例如,作为图像而进入条纹等)的修正、以及针对透镜400的周边的像素210的光量调整的修正等。另外,详细后述,但第1曝光的结束后的读取可通过非破坏读取或者破坏读取来进行。所谓破坏读取,是指在通过非破坏读取来获取到非破坏读取图像之后,对贮存的信号电荷进行破坏(重置)的读取。
由于通过利用曝光中的非破坏读取而获取的像素信号而生成的非破坏读取图像是在相比于通过利用曝光的结束后的破坏读取而获取的像素信号而生成的主图像、曝光时间较短时获取的图像,因此为整体上较暗的图像。因此,通过非破坏读取而获取的像素信号例如也可以是通过AD转换器121来进行了增益的修正的像素信号。具体而言,也可以进行提高明亮度的增益的修正。此外,也可以对通过曝光后的破坏读取而获取的像素信号不进行增益的修正。换句话说,第1修正和第2修正也可以进行不同的修正。进行适合于非破坏读取图像以及主图像的修正即可。由此,例如,非破坏读取图像为更加明亮的图像。另外,通过非破坏读取而生成的第1像素是对焦的图像。
另外,在本实施方式中,对图像处理部340是一个的例子进行了说明,但图像处理部340的数量并不限定于此。例如,图像处理部340也可以由处理第1像素信号的第1图像处理部和处理第2像素信号的第2图像处理部构成。由此,能够缩短像素信号的处理时间。
显示部500是对由信号处理部300生成的图像进行显示的显示设备,例如是液晶监视器、电子取景器等。此外,显示部500能够显示照相机中的各种设定信息。例如,显示部500能够显示拍摄时的摄像条件(光圈、ISO灵敏度等)。
操作部600是接受来自用户的输入的输入部,例如,释放按钮或者触摸面板等。例如,触摸面板被粘接于液晶监视器。接受来自用户的拍摄的指示、摄像条件的变更等。
另外,摄像装置10也可以具备用于在外部的电路与固体摄像元件100或者信号处理部300之间进行通信的接口(未图示)。接口作为一个例子,是包含半导体集成电路的通信端口等。
[4.摄像装置的处理]
接下来,对摄像装置10的处理进行说明。另外,对图像处理是白平衡的修正的情况进行说明。
[4-1.摄像装置的处理的流程]
使用图5来对摄像装置10的处理的流程进行说明。图5是表示本实施方式所涉及的摄像装置10的动作的流程图。
首先,固体摄像元件100例如通过控制部310的控制来开始第1曝光(S1)。由此,分别在多个像素210中贮存与受光量相应的信号电荷。具体而言,与光电转换元件211的受光量相应的信号电荷被贮存于电荷贮存部215。
并且,控制部310进行执行非破坏读取的控制,所述非破坏读取在不破坏曝光中各个像素210的电荷贮存部215中贮存的信号电荷的情况下进行读取。更具体而言,控制部310对驱动控制部150进行控制,将按照每个像素行而利用列AD转换部120进行AD转换从而贮存的信号电荷转换为与该信号电荷相应的数字值(像素信号),被转换的数字值通过列扫描部140而依次被输出到信号处理部300。换句话说,信号处理部300通过非破坏读取,获取非破坏读取图像(S2)。另外,在进行了第1曝光中的非破坏读取之后,不进行基于重置晶体管212的电荷贮存部215的电位的重置。
接下来,判定部320针对通过第1曝光中的非破坏读取而从固体摄像元件100获取的非破坏读取图像,判定是否为贮存于多个像素210的信号电荷的电荷量是预先决定为适当曝光的第1阈值以上时从固体摄像元件100获取的图像(S3)。若第1曝光中进行非破坏读取的次数是一次以上则并不被特别限定,但判定部320按照通过第1曝光中的非破坏读取而获取的每个非破坏读取图像来进行上述的判定。另外,例如,在判定部320在获取的非破坏读取图像为第1阈值以上时判定为是从固体摄像元件100获取的图像(以下,也称为第1判定)的情况下,也可以针对该判定以后获取的非破坏读取图像,不进行上述的判定。此外,在判定部320进行第1判定的情况下,控制部310也可以进行停止第1曝光中的非破坏读取的控制。通过判定部320的第1判定,能够获取图像处理部340进行的图像解析中使用的图像,因此减少由判定部320进行的处理(判定)量。
在针对第1曝光中获取的非破坏读取图像的判定部320的判定中,在判定为是第1阈值以上时获取的图像的情况下(S3中为是),图像处理部340将该非破坏读取图像作为图像解析中使用的图像(以下,也称为解析用图像)的候选即候选图像而保存于存储器330(S4)。所谓候选图像,是指通过第1曝光中的非破坏读取而从固体摄像元件100获取的图像,是被贮存的信号电荷的电荷量达到第1阈值的图像。例如,在存在多个被判定为第1阈值以上的非破坏读取图像的情况下,也可以将贮存的信号电荷的电荷量为第1阈值以上并且最接近于第1阈值的电荷量时获取的非破坏读取图像作为候选图像,也可以通过除此以外的方法来选择候选图像。另外,未成为候选图像的非破坏读取图像(例如,电荷量为第1阈值以下时获取的图像)也可以不被保存于存储器330。
这里,控制部310对第1曝光是否结束进行判定(S5)。具体而言,对第1曝光之中的规定的曝光期间(图6A中的快门打开的期间)的曝光是否结束进行判定。所谓规定的曝光期间,是指根据摄像条件而预先决定的期间。若判定为第1曝光结束(S5中为是),则控制部310进行关闭快门的控制。具体而言,通过停止电压向有机光电转换膜的施加来设为遮光状态(快门关闭的状态)。然后,进入到步骤S6。另外,在通过机械快门来切换透过状态和遮光状态的情况下,通过关闭机械快门来设为遮光状态。
此外,若判定为第1曝光未结束(S5中为否),则控制部310进入到步骤S2。由此,到规定的曝光期间结束为止,能够进行多次非破坏读取。另外,在第1曝光中仅进行一次非破坏读取的情况下,电可以省略上述步骤S5的处理。
接下来,信号处理部300在第1曝光的结束后通过破坏读取来获取主图像(S6)。另外,在获取主图像之后,也可以不破坏贮存于电荷贮存部215的信号电荷。在该情况下,在步骤S6中,通过非破坏读取来获取主图像。
这里,判定部320针对获取的主图像,判定贮存于多个像素210的信号电荷的电荷量是否为比第1阈值更高的值即第2阈值(S7)。所谓第2阈值,例如是指贮存于多个像素210的信号电荷饱和的值(多个像素210分别能够贮存的电荷量的最大值)。换句话说,若电荷量为第2阈值,则作为图像而产生发白。因此,若在用于进行白平衡等图像处理的图像解析中,使用第2阈值的电荷量被贮存并产生发白的图像,则该图像发白并且颜色未被正确地表示(电荷量为第2阈值的像素210的颜色被表示为白色),因此不能进行正确的图像解析。因此,进行上述步骤S7的判定。另外,第2阈值并不限定于多个像素210分别能够贮存的电荷量的最大值。第2阈值也可以在比第1阈值高的值中,被适当地决定。
在判定部320针对主图像,判定为是贮存于多个像素210的信号电荷的电荷量为比第1阈值更高的值即第2阈值时获取的图像的情况下(S7中为是),则图像处理部340使用候选图像来进行图像解析(S8)。在该情况下,候选图像(步骤S4中设为候选图像的非破坏读取图像)是适当图像的一个例子。
在判定部320针对主图像,判定为是贮存于多个像素210的信号电荷的电荷量比第2阈值低时获取的图像的情况下(S7中为否),则图像处理部340使用主图像来进行图像解析(S9)。也能够使用候选图像来进行图像解析,但候选图像和主图像是在一次拍摄中在不同时刻(定时)获取的图像。因此,在获取候选图像到获取主图像的期间被摄体的明亮度等变化的情况下,若使用候选图像来对主图像进行图像处理,则进行不能反映该变化的图像处理。因此,通过主图像来进行适当的图像处理中,可以使用该主图像来进行图像处理。在该情况下,主图像是适当图像的一个例子。
接着,在针对第1曝光中获取的非破坏读取图像的判定部320的判定中,在判定为是电荷量不为第1阈值以上(未达到第1阈值)时获取的图像的情况下(S3中为否,也称为第2判定),控制部310对第1曝光是否结束进行判定(S10)。具体而言,判定第1曝光之中的、规定的曝光期间(图6A中的快门打开的期间)的曝光是否结束。若判定为第1曝光结束(S10中为是),则控制部310进行关闭快门的控制。具体而言,通过停止电压向有机光电转换膜的施加来设为遮光状态(快门关闭的状态)。然后,进入到步骤S11。另外,在通过机械快门来切换透过状态和遮光状态的情况下,则通过关闭机械快门来设为遮光状态。
此外,若判定为第1曝光未结束(S10中为否),则控制部310进入到步骤S2。由此,到规定的曝光期间结束为止,能够进行多次非破坏读取。另外,在第1曝光中仅进行一次非破坏读取的情况下,也可以省略上述步骤S10的处理。
接下来,信号处理部300在摄像条件所对应的第1曝光的结束后,通过非破坏读取来获取主图像(S11)。然后,判定部320针对主图像,判定是否为贮存于多个像素210的信号电荷的电荷量是预先决定为适当曝光的第1阈值以上时从固体摄像元件100获取的图像(S12)。
在判定部320针对主图像进行了第1判定的情况下(S12中为是),进入到步骤S9,图像处理部340使用该主图像来进行图像解析。在步骤S3中为否并且步骤S12中为是的情况下,能够正确地进行图像解析的图像在第1曝光结束为止被拍摄的图像之中仅为主图像。因此,使用主图像来进行图像解析。在该情况下,主图像是适当图像的一个例子。
在判定部320针对主图像进行了第2判定的情况下(S12中为否),不能获取具有规定的明亮度的图像(适当图像)。换句话说,不能获取该时刻图像解析中使用的图像(不能正确地进行图像解析的图像)。因此,控制部310在图像处理部340获取主图像之后,控制固体摄像元件100,使第2曝光开始(S13)。具体而言,控制部310通过向有机光电转换膜施加规定的电压,来开始第2曝光。换句话说,所谓第2曝光,是指获取到主图像之后进行的曝光。另外,在通过机械快门来切换透过状态和遮光状态的情况下,通过打开机械快门,来开始第2曝光。
由于通过非破坏读取来获取主图像(电荷贮存部215的电位未被重置),因此在电荷贮存部215中在第1曝光结束的时刻被贮存的信号电荷以贮存的状态而被维持。因此,通过利用非破坏读取来获取主图像,在获取主图像之后进行第2曝光,从而在第1曝光中贮存的信号电荷中,进一步贮存第2曝光中产生的信号电荷。此外,第2曝光中进行非破坏读取的次数是一次以上即可,并不被特别限定。
信号处理部300通过第2曝光中的非破坏读取来从固体摄像元件100获取非破坏读取图像(S14),控制部310进行该非破坏读取图像是否为贮存于多个像素210的信号电荷的电荷量是第1阈值以上时获取的图像的判定(S15)。
分别针对通过第2曝光中的非破坏读取而获取的非破坏读取图像,进行步骤S15的判定。在通过判定部320,针对第2曝光中获取的非破坏读取图像,进行了第1判定的情况下(S15中为是),图像处理部340使用该非破坏读取图像来进行图像解析(S16)。在该情况下,该非破坏读取图像是适当图像的一个例子。另外,在针对非破坏读取图像来进行了第1判定的情况下,图像处理部340也可以通过破坏读取来获取图像解析中使用的图像。此外,在针对非破坏读取图像进行了第1判定的情况下,控制部310也可以使第2曝光停止。
在通过判定部320,针对第2曝光中获取的非破坏读取图像进行了第2判定的情况下(S15中为否),控制部310对固体摄像元件100进行控制来使第2曝光继续(S17)。另外,第2曝光也可以继续到步骤S15中为是为止,也可以进行预先决定的期间。或者,第2曝光也可以继续到操作部600接受来自用户的停止第2曝光的指示为止。
通过第2曝光继续到步骤S15为是为止,能够获取图像处理中使用的适当图像。此外,通过第2曝光进行预先决定的期间,在贮存的信号电荷的电荷量在预先决定的期间的中途达到第1阈值的情况下,信号处理部300能够获取多张电荷量为第1阈值以上时读取的图像。换句话说,能够从多张图像中通过图像解析来选定适合的图像。例如,在被摄体运动的情况下,通过使用电荷量为第1阈值的时刻的图像(第2曝光时间较短的图像),能够进行减少了被摄体的运动所导致的(运动模糊等的)影响的图像处理。
然后,图像处理部340使用步骤S8、步骤S9或者步骤S16中的解析结果来对主图像进行图像处理(S18)。由此,能够使用具有规定的明亮度的图像的图像解析来进行图像处理,因此能够更加适当地进行图像处理。在图像处理是AWB的情况下,进行了图像处理的主图像为颜色再现性更高的图像。
另外,步骤S7以及步骤S9也可以不进行。例如,在步骤S3中为是的情况下,也可以作为适当图像,进行候选图像的图像解析,使用其解析结果来对主图像进行图像处理。由此,由于能够省略判定部320中的处理(S7),因此能够进行图像处理的高速化。此外,在该情况下,适当图像以及主图像的至少一方是非破坏读取图像。
[4-2.电荷量和图像处理的流程]
接着,使用图6A~图6C来对本实施方式所涉及的摄像装置10中贮存的电荷量和图像处理的流程进一步详细进行说明。另外,图6A~图6C的(a)是表示快门的开闭的定时的图。图6A~图6C的(b)是表示曝光时间与被贮存的电荷量的关系的图,纵轴表示电荷量,横轴表示时间。图6A~图6C的(c)表示时间经过中的图像处理。
首先,使用图6A,对第1曝光中电荷量比第1阈值低的情况进行说明。图6A是表示电荷量比第1阈值低的情况下的电荷量与图像处理的流程的图。
通过打开快门来开始第1曝光(对应于图5的S1)。所谓第1曝光,是指与摄像条件(光圈值、ISO灵敏度等)对应的规定的曝光时间的曝光。换言之,从快门打开到快门关闭是第1曝光。在第1曝光中,根据受光量,信号电荷被贮存于电荷贮存部215。在第1曝光中,通过控制部310对固体摄像元件100进行控制,从而信号处理部300利用非破坏读取来获取图像(对应于图5的S2)。判定部320针对获取的图像,进行该图像是否为电荷量是第1阈值以上时获取的图像的判定(图中的电荷量的判定)(对应于图5的S3)。图6A的(b)的向下的虚线箭头表示正在进行非破坏读取,但第1曝光中进行非破坏读取的次数并不被特别限定,进行一次以上即可。在图6A中,在第1曝光中,电荷量未达到第1阈值(对应于图5的S3中为否),因此该状态下不能获取图像解析中使用的图像。在该情况下,在第1曝光后读取主图像时,通过非破坏读取来进行读取(对应于图5的S11)。由此,固体摄像元件100中,第1曝光中贮存的信号电荷被这样维持。另外,所谓第1曝光后,例如是指从第1曝光的结束到下一次曝光开始,是指刚刚第1曝光之后。
然后,控制部310对固体摄像元件100进行控制,使第2曝光开始(对应于图5的S13)。在第2曝光中,也通过非破坏读取来获取图像(对应于图5的S14),判定部320进行与步骤S3相同的判定(图中的电荷量的判定)(对应于图5的S15)。在通过判定部320来进行了第1判定的情况下,控制部310对固体摄像元件100进行控制,进行关闭快门的控制。并且,如该图所示,信号处理部300通过破坏读取来从固体摄像元件100获取图像。该图像是图像解析中能够使用的图像(解析用图像)。另外,图像解析中使用的图像并不限定于通过破坏读取来获取的图像。如图5的步骤S16所示,也可以使用通过非破坏读取来获取的非破坏读取图像。解析中使用的图像使用在第2曝光中,电荷量达到第1阈值时获取的图像即可。
如上述那样,在受光量较少且第1曝光中贮存的电荷量未达到第1阈值的情况下,通过非破坏读取来获取主图像,在获取主图像后再次进行曝光(第2曝光)。通过利用非破坏读取来获取主图像,从而第1曝光中贮存的信号电荷不被破坏地贮存于电荷贮存部215,通过进行第2曝光来进一步贮存第2曝光中产生的信号电荷。通过第2曝光中的非破坏读取来获取的图像是比主图像更加明亮的图像(从更多的电荷量生成的图像),通过使用该图像来进行图像解析,相比于使用第1阈值以下的电荷量时获取的主图像来进行图像解析的情况,能够得到更加正确的解析结果。换句话说,能够对主图像进行更加适当的图像处理。
接下来,使用图6B,对第1曝光中,电荷量为第1阈值以上并且低于第2阈值的情况进行说明。图6B是表示电荷量为第1阈值以上并且低于第2阈值的情况下的电荷量和图像处理的流程的图。另外,针对与图6A相同的内容,可能省略说明。
在图6B的(b)中,信号电荷被贮存直到在第1曝光中为第1阈值以上并且低于第2阈值的值(对应于图5的S3中为是以及S7中为否)。因此,第1曝光后获取的主图像也是电荷量为第1阈值以上并且低于第2阈值时获取的图像,能够使用主图像来进行正确的图像解析。换句话说,在该情况下,能够进行主图像的图像解析(对应于图5的S9),使用该解析结果来对主图像进行图像处理。
另外,在图6B的(c)中,表示通过破坏读取来获取主图像的情况,但并不限定于此。此外,对使用主图像来进行图像解析的例子进行了说明,但并不限定于此。例如,也可以使用图6B的(b)所示的候选图像(电荷量达到第1阈值时获取的非破坏读取图像)来进行图像解析。换句话说,使用为第1阈值以上的电荷量时获取的图像,进行图像解析即可。此外,在该图中,表示了在第1曝光中,获取候选图像之后,也通过非破坏读取来获取非破坏读取图像的例子,但并不限定于此。
如上述那样,在主图像是第1阈值以上并且低于第2阈值的电荷量时获取的图像的情况下,信号处理部300使用主图像来进行图像解析。由此,相比于使用通过第1曝光中的非破坏读取而获取的候选图像来进行图像解析的情况,可得到包含从获取候选图像的定时到获取主图像的定时的期间的被摄体的变化(例如,明亮度变化)的解析结果,因此能够进行更加适当的图像处理。
接着,使用图6C,对第1曝光中,贮存的信号电荷的电荷量为第2阈值的情况进行说明。图6C是表示电荷量为第2阈值的情况下的电荷量与图像处理的流程的图。另外,针对与图6A相同的内容,可能省略说明。
在图6C的(b)中,信号电荷被贮存直到第1曝光中比第1阈值更高的第2阈值(对应于图5的S3以及S7中为是)。在第2阈值的电荷量时获取的主图像为发白等颜色不可正确地表现的图像。因此,即使使用该主图像来进行图像解析,也不可得到正确的解析结果。因此,使用第1曝光中获取的候选图像来进行图像解析(对应于图5的S8)。候选图像是第1阈值以上并且低于第2阈值的电荷量时获取的图像,因此通过使用该候选图像来进行图像解析,能够得到正确的解析结果。此外,主图像为产生发白等的图像,但通过使用候选图像的解析结果来进行图像处理,可得到更加接近于被摄体的图像(例如,在AWB的情况下,可得到颜色再现性更高的图像)。另外,主图像例如通过破坏读取而被获取。
本实施方式所涉及的摄像装置10通过对非破坏读取图像或者主图像被获取时的电荷量与阈值(第1阈值和第2阈值)进行比较来进行判定,能够根据其判定结果来使用更加合适的图像进行图像解析,因此能够得到更加正确的解析结果。因此,通过使用其解析结果,能够更加适当地进行图像处理。
[5.照相机]
作为内置有上述的摄像装置10的照相机1的例子,例如举例图7的(a)所示的数字静态照相机1A、图7的(b)所示的数字视频照相机1B等。例如,通过在图7的(a)或者图7的(b)等的照相机内置本实施方式所涉及的摄像装置10,如上述说明那样,能够使用适当图像来进行图像解析,因此能够获取、存储或者显示更加适当地进行了图像处理的主图像。
在针对判定部320获取的非破坏读取图像进行第1判定的情况下,第2曝光不开始。在该情况下,进行了图像处理的主图像被显示于显示部500。
另一方面,在判定部320针对获取的主图像进行了第2判定的情况下,开始第2曝光。在该情况下,由于用户不知道是否进行第2曝光,因此例如控制部310也可以在照相机1的显示部500显示表示进行第2曝光的信息。例如,也可以在数字静态照相机1A的显示部500显示图8所示的信息。另外,在图8中例示了仅显示表示进行第2曝光的信息的例子,但例如也可以同时显示步骤S11中获取的主图像和上述信息。
[6.效果等]
如以上那样,本实施方式所涉及的摄像装置10具备:能够进行非破坏读取且具有被排列为矩阵状的多个像素210的固体摄像元件100、和使用适当图像的解析结果来对主图像进行图像处理的图像处理部340。适当图像是贮存于多个像素210的信号电荷的电荷量为预先决定的第1阈值以上时从固体摄像元件100获取的图像。此外,主图像是与摄像条件对应的第1曝光后从固体摄像元件100获取的图像。
由此,主图像使用电荷量为第1阈值以上时从固体摄像元件100获取的适当图像的解析结果而被进行图像处理。在进行图像解析的图像较暗(电荷量低于第1阈值)的情况下,即使使用该图像来进行图像解析,也不能得到正确的解析结果。因此,即使使用该解析结果来对主图像进行图像处理,也不可说是进行了适当的图像处理。在图像处理是AWB的情况下,主图像可能为颜色再现性较低的图像。另一方面,本实施方式所涉及的摄像装置10使用电荷量为第1阈值以上时获取的图像来进行图像解析,因此可得到更加正确的解析结果。并且,由于使用该解析结果来对主图像进行图像处理,因此能够通过主图像来进行适当的图像处理。在图像处理是AWB的情况下,主图像可得到颜色再现性较高的图像。
此外,进一步地,具备判定部320,针对从固体摄像元件100获取的图像,进行是否为电荷量是第1阈值以上时获取的图像的判定。并且,在判定部320针对第1曝光中通过非破坏读取而从固体摄像元件100获取的非破坏读取图像,进行了表示是电荷量为第1阈值以上时获取的图像的第1判定的情况下,图像处理部340通过破坏读取来从固体摄像元件100获取主图像。此外,在判定部320针对第1曝光中通过非破坏读取而从固体摄像元件100获取的非破坏读取图像,进行了表示是电荷量不为第1阈值以上时获取的图像的第2判定的情况下,图像处理部340通过非破坏读取来从固体摄像元件100获取主图像。
由此,在针对第1曝光中获取的非破坏读取图像,判定部320进行了第1判定的情况下(换句话说,获取图像解析中使用的适当图像的情况下),通过破坏读取来获取主图像,因此贮存的信号电荷被重置。因此,能够进行下一次拍摄。换言之,在能够获取适当图像的情况下信号电荷被重置,因此能够进行下一次拍摄。此外,在判定部320进行了第2判定的情况下(换句话说,未获取解析中使用的适当图像的情况下),通过非破坏读取来获取主图像,因此贮存的信号电荷被维持(信号电荷不被重置)。由此,在再次开始曝光(开始第2曝光)的情况下,第2曝光中产生的信号电荷被进一步贮存,因此通过在第2曝光中获取图像,从而能够获取比利用非破坏读取而获取的主图像更加明亮的图像。因此,通过进行第2曝光中获取的图像、即比主图像更加明亮的图像的图像解析,相比于进行主图像的图像解析的情况,能够获取更加正确的解析结果,因此能够对主图像进行更加适当的图像处理。
此外,进一步地,具备对曝光进行控制的控制部310。在判定部320针对非破坏读取图像进行了第2判定的情况下,控制部310在图像处理部340获取主图像后,使固体摄像元件100进行第2曝光。并且,图像处理部340使用作为适当图像而在第2曝光中从固体摄像元件100获取的图像的解析结果,对主图像进行图像处理。
由此,在不能获取图像解析中使用的适当图像的情况下,开始第2曝光。在该情况下,主图像通过非破坏读取而被获取,因此在第2曝光中,在第1曝光中贮存的信号电荷中,进一步贮存第2曝光中产生的信号电荷。换句话说,第2曝光中获取的图像为比主图像更加明亮的图像(电荷量较多时获取的图像)。因此,通过进行第2曝光中获取的图像、即比主图像更加明亮的图像的图像解析,相比于进行主图像的图像解析的情况,能够获取更加正确的解析结果,因此能够对主图像进行更加适当的图像处理。
此外,第2曝光被进行直到电荷量达到第1阈值。
由此,在第2曝光中,能够获取电荷量为第1阈值以上时的图像。通过使用该图像来进行图像解析,能够得到更加正确的解析结果,因此能够对主图像进行更加适当的图像处理。
此外,第2曝光被进行预先决定的期间。
由此,在贮存的信号电荷的电荷量在预先决定的期间的中途达到第1阈值的情况下,能够获取多张电荷量为第1阈值以上的图像。换句话说,能够从多张图像中通过图像解析来选定合适的图像。例如,在被摄体运动的情况下,通过使用达到第1阈值的时刻的图像(曝光时间较短的图像),能够进行减少了被摄体的运动所导致的影响的图像处理。
此外,在判定部320将通过破坏读取而从固体摄像元件100获取的主图像判定为在电荷量是第1阈值以上并且比高于第1阈值的值即第2阈值低时获取的图像的情况下,图像处理部340作为适当图像而使用主图像的解析结果,对主图像进行图像处理。此外,在判定部320将主图像判定为在电荷量是第2阈值以上时获取的图像的情况下,图像处理部340作为适当图像,使用通过第1曝光中的非破坏读取而从固体摄像元件100获取的图像、即电荷量达到第1阈值的图像的解析结果,对主图像进行图像处理。
由此,能够更加适当地选定用于进行主图像的图像处理的图像解析中使用的图像。在主图像是第1阈值以上并且低于第2阈值时获取的图像的情况下,该主图像是适当图像,能够使用该主图像来正确地进行图像解析。此外,由于在主图像是在电荷量为第2阈值以上时获取的图像的情况下,更加正确地进行图像解析,因此使用通过第1曝光中的非破坏读取而从固体摄像元件100获取的图像、即电荷量达到第1阈值的图像。由此,相比于使用电荷量为第2阈值以上时获取且未正确地表示颜色的主图像来进行图像解析的情况,能够得到更加正确的解析结果。并且,由于使用该解析结果来对主图像进行图像处理,因此能够对主图像进行更加适当的图像处理。
此外,适当图像以及主图像的至少一个为通过非破坏读取而从固体摄像元件100获取的非破坏读取图像。
由此,在主图像通过非破坏读取而被获取的情况下,能够作为适当图像,使用通过破坏读取而获取的图像,来对主图像进行图像处理。此外,在主图像通过破坏读取而被获取的情况下,作为适当图像,能够使用通过非破坏读取而获取的非破坏读取图像来对主图像进行图像处理。
此外,第2阈值是多个像素210中贮存的信号电荷的电荷量饱和的值。
由此,图像解析中使用的图像是电荷量低于第2阈值时获取的图像。换句话说,该图像由于不产生发白等,因此能够从图像获取被摄体的颜色的信息。因此,通过设置第2阈值,能够使用更加适当的图像来进行图像解析,因此对主图像进行的图像处理也能够更加适当地进行。
此外,所谓图像处理,是指白平衡的修正。
由此,作为图像处理,能够更加适当地进行白平衡的修正。
此外,多个像素210分别具有有机光电转换膜。
由此,由于通过调整施加于有机光电转换膜的电压能够实现快门功能,因此能够在不追加存储器等元件的情况下,实现全局快门。因此,即使在被摄体运动的情况下,也能够获取形变更少的图像。因此,能够使用形变较少的图像来进行图像解析。
此外,本实施方式所涉及的照相机1具备:上述的摄像装置10、和对上述的摄像装置10所拍摄的图像进行显示的显示部500。
由此,由于摄像装置10使用适当图像能够进行图像解析,因此本实施方式所涉及的照相机1能够获取、存储或者显示更加适当地进行了图像处理的主图像。
此外,在进行第2曝光的情况下,在显示部500显示表示进行第2曝光的信息。
由此,用户通过确认显示部500能够识别第2曝光正在进行。因此,能够抑制用户在未识别第2曝光中的情况下移动照相机1等不能适当地进行拍摄的情况。
此外,本实施方式所涉及的摄像方法从能够进行非破坏读取并且具有被排列为矩阵状的多个像素210的固体摄像元件100,获取多个像素210中贮存的信号电荷的量为被预先决定为适当曝光的阈值以上的适当图像,进行获取的适当图像的图像解析(S8、S9以及S16),使用该解析结果,对摄像条件所对应的曝光之后从固体摄像元件100获取的主图像进行图像处理(S18)。
由此,主图像使用适当图像的解析结果而被进行图像处理。在进行图像解析的图像较暗(电荷量低于第1阈值)的情况下,即使使用该图像来进行图像解析,也不能得到正确的解析结果。并且,即使使用该解析结果来对主图像进行图像处理,也不可说进行了适当的图像处理。例如,在图像处理是AWB的情况下,主图像可能为颜色再现性较低的图像。本实施方式所涉及的摄像装置10使用电荷量为第1阈值以上时获取的适当图像来进行图像解析,因此可得到更加正确的解析结果。并且,由于使用该解析结果来对主图像进行图像处理,因此能够通过主图像来进行适当的图像处理。
(其他实施方式)
如以上那样,作为本公开中的技术的示例,说明了实施方式。为此,提供了附图以及详细的说明。
因此,附图以及详细的说明所述的结构要素之中,不仅包含为了课题解决所必须的结构要素,也包含为了示例上述技术而非为了课题解决所必须的结构要素。因此,这些非必须的结构要素被记载于附图、详细的说明,但并不应直接认定这些非必须的结构要素是必须的。
此外,上述的实施方式用于示例本公开中的技术,因此在权利要求书或者其均等的范围能够进行各种变更、置换、附加、省略等。
例如,在上述实施方式中,对图像处理是白平衡的修正的例子进行了说明,但图像处理并不限定于此。例如,也可以是根据被摄体的人物的脸部等的特长来识别个人的识别处理、风景或人物等的拍摄场景判定、基于此的画质参数设定。
由此,起到与图像处理是白平衡的修正的情况相同的效果。
此外,摄像装置10中的各结构要素(功能模块)也可以通过IC(IntegratedCircuit)、LSI(Large Scale Integration)等半导体装置来分别1芯片化,也可以被1芯片化为包含一部分或者全部。此外,集成电路化的手法并不局限于LSI,也可以通过专用电路或者通用处理器来实现。在LSI制造后,也可以利用可程序化的FPGA(Field ProgrammableGate Array)、可重建LSI内部的电路单元的连接或设定的可配置处理器。进一步地,若通过半导体技术的进步或者派生的其他技术而置换LSI的集成电路化的技术登场,则也可以使用该技术来进行功能模块的集成化。也可能进行生物技术的应用等。
此外,上述各种处理的全部或者一部分可以通过电子电路等硬件实现,也可以使用软件实现。另外,基于软件的处理通过包含于摄像装置10的处理器执行存储于存储器的程序来实现。此外,也可以将该程序记录于记录介质并颁布或流通。例如,通过将被颁布的程序安装于其他具有处理器的装置,使该处理器执行该程序,从而能够使该装置进行上述各处理。
此外,在上述实施方式中,说明了照相机1具备将来自外部的光入射到固体摄像元件100的透镜400的例子,但并不限定于此。透镜400例如也可以是可装卸于照相机1的透镜。在该情况下,照相机1也可以不具备透镜400。另外,透镜400对来自外部的光进行聚光并入射到固体摄像元件100。
此外,通过将上述的实施方式所示的结构要素以及功能任意地组合而实现的方式也包含于本公开的范围。
产业上的可利用性
本公开能够广泛利用于拍摄图像的摄像装置。
-符号说明-
1 照相机
1A 数字静态照相机
1B 数字视频照相机
10 摄像装置
100 固体摄像元件
110 像素阵列部
120 列AD转换部
121 AD转换器
130 行扫描部
140 列扫描部
150 驱动控制部
160 列信号线
170 扫描线
170A 重置用扫描线
170B 选择用扫描线
180 行信号线
210 像素
211 光电转换元件
211a 上部电极
211b 下部电极
211c 光电转换膜
212 重置晶体管
213 放大晶体管
214 选择晶体管
215 电荷贮存部
300 信号处理部
310 控制部
320 判定部
330 存储器
340 图像处理部
400 透镜
500 显示部
600 操作部
Claims (15)
1.一种摄像装置,具备:
固体摄像元件,能够进行非破坏读取,具有被排列为矩阵状的多个像素;和
图像处理部,使用适当图像的解析结果,对主图像进行图像处理,
所述适当图像是被贮存于所述多个像素的信号电荷的电荷量为预先决定的第1阈值以上时从所述固体摄像元件获取到的图像,
所述主图像是摄像条件所对应的第1曝光后从所述固体摄像元件获取到的图像,
所述摄像装置还具备:判定部,针对从所述固体摄像元件获取到的图像判定是否为所述电荷量为所述第1阈值以上时获取到的图像,
在所述判定部针对所述第1曝光中通过所述非破坏读取而从所述固体摄像元件获取到的非破坏读取图像,进行了表示是所述电荷量为所述第1阈值以上时获取到的图像的第1判定的情况下,所述图像处理部通过破坏读取从所述固体摄像元件获取所述主图像,
在所述判定部针对所述非破坏读取图像,进行了表示是所述电荷量不为所述第1阈值以上时获取到的图像的第2判定的情况下,所述图像处理部通过所述非破坏读取从所述固体摄像元件获取所述主图像,
所述摄像装置还具备对曝光进行控制的控制部,
在所述判定部对所述非破坏读取图像进行了所述第2判定的情况下,所述控制部在所述图像处理部获取所述主图像后,使所述固体摄像元件进行第2曝光,
所述图像处理部使用在所述第2曝光中从所述固体摄像元件获取到的图像的所述解析结果来作为所述适当图像,对所述主图像进行所述图像处理。
2.根据权利要求1所述的摄像装置,其中,
所述第2曝光进行到所述电荷量达到所述第1阈值为止。
3.根据权利要求1所述的摄像装置,其中,
所述第2曝光进行预先决定的期间。
4.根据权利要求1~3的任意一项所述的摄像装置,其中,
所述适当图像以及所述主图像的至少一方是通过非破坏读取而从所述固体摄像元件获取到的非破坏读取图像。
5.根据权利要求1~3的任意一项所述的摄像装置,其中,
所述图像处理是白平衡的修正。
6.根据权利要求1~3的任意一项所述的摄像装置,其中,
所述多个像素分别具有有机光电转换膜。
7.一种照相机,具备权利要求1所述的摄像装置,
所述摄像装置还具备显示所拍摄的图像的显示部。
8.根据权利要求7所述的照相机,其中,
在进行所述第2曝光的情况下,所述显示部对表示在进行所述第2曝光的信息进行显示。
9.一种摄像方法,
从能够进行非破坏读取并且具有被排列为矩阵状的多个像素的固体摄像元件,获取被贮存于所述多个像素的信号电荷的电荷量为预先决定为适当曝光的第1阈值以上的适当图像,
进行获取到的所述适当图像的图像解析,使用该解析结果,对摄像条件所对应的第1曝光之后从所述固体摄像元件获取到的主图像进行图像处理,
针对从所述固体摄像元件获取到的图像判定是否为所述电荷量为所述第1阈值以上时获取到的图像,
在针对所述第1曝光中通过所述非破坏读取而从所述固体摄像元件获取到的非破坏读取图像,进行了表示是所述电荷量为所述第1阈值以上时获取到的图像的第1判定的情况下,通过破坏读取从所述固体摄像元件获取所述主图像,
在针对所述非破坏读取图像,进行了表示是所述电荷量不为所述第1阈值以上时获取到的图像的第2判定的情况下,通过所述非破坏读取从所述固体摄像元件获取所述主图像,
在对所述非破坏读取图像进行了所述第2判定的情况下,在获取所述主图像后,使所述固体摄像元件进行第2曝光,
使用在所述第2曝光中从所述固体摄像元件获取到的图像的所述解析结果来作为所述适当图像,对所述主图像进行所述图像处理。
10.一种摄像装置,具备:
固体摄像元件,能够进行非破坏读取,具有被排列为矩阵状的多个像素;和
图像处理部,使用适当图像的解析结果,对主图像进行图像处理,
所述适当图像是被贮存于所述多个像素的信号电荷的电荷量为预先决定的第1阈值以上时从所述固体摄像元件获取到的图像,
所述主图像是摄像条件所对应的第1曝光后从所述固体摄像元件获取到的图像,
所述摄像装置还具备:判定部,针对从所述固体摄像元件获取到的图像判定是否为所述电荷量为所述第1阈值以上时获取到的图像,
在所述判定部针对所述第1曝光中通过所述非破坏读取而从所述固体摄像元件获取到的非破坏读取图像,进行了表示是所述电荷量为所述第1阈值以上时获取到的图像的第1判定的情况下,所述图像处理部通过破坏读取从所述固体摄像元件获取所述主图像,
在所述判定部针对所述非破坏读取图像,进行了表示是所述电荷量不为所述第1阈值以上时获取到的图像的第2判定的情况下,所述图像处理部通过所述非破坏读取从所述固体摄像元件获取所述主图像,
在所述判定部将通过所述破坏读取而从所述固体摄像元件获取到的所述主图像,判定为是所述电荷量为所述第1阈值以上并且低于比所述第1阈值更高的值即第2阈值时获取到的图像的情况下,所述图像处理部将所述主图像的所述解析结果用作为所述适当图像,对所述主图像进行所述图像处理,
在所述判定部将所述主图像判定为是所述电荷量为所述第2阈值时获取到的图像的情况下,所述图像处理部使用通过所述第1曝光中的所述非破坏读取而从所述固体摄像元件获取到的图像、即所述电荷量达到所述第1阈值的图像的所述解析结果来作为所述适当图像,对所述主图像进行所述图像处理。
11.根据权利要求10所述的摄像装置,其中,
所述第2阈值是被贮存于所述多个像素的所述信号电荷饱和的电荷量。
12.根据权利要求10所述的摄像装置,其中,
所述图像处理是白平衡的修正。
13.根据权利要求10所述的摄像装置,其中,
所述多个像素分别具有有机光电转换膜。
14.一种照相机,具备权利要求10~13的任意一项所述的摄像装置,
所述摄像装置还具备显示所拍摄的图像的显示部。
15.一种摄像方法,
从能够进行非破坏读取并且具有被排列为矩阵状的多个像素的固体摄像元件,获取被贮存于所述多个像素的信号电荷的电荷量为预先决定为适当曝光的第1阈值以上的适当图像,
进行获取到的所述适当图像的图像解析,使用该解析结果,对摄像条件所对应的第1曝光之后从所述固体摄像元件获取到的主图像进行图像处理,
针对从所述固体摄像元件获取到的图像判定是否为所述电荷量为所述第1阈值以上时获取到的图像,
在针对所述第1曝光中通过所述非破坏读取而从所述固体摄像元件获取到的非破坏读取图像,进行了表示是所述电荷量为所述第1阈值以上时获取到的图像的第1判定的情况下,通过破坏读取从所述固体摄像元件获取所述主图像,
在针对所述非破坏读取图像,进行了表示是所述电荷量不为所述第1阈值以上时获取到的图像的第2判定的情况下,通过所述非破坏读取从所述固体摄像元件获取所述主图像,
在将通过所述破坏读取而从所述固体摄像元件获取到的所述主图像,判定为是所述电荷量为所述第1阈值以上并且低于比所述第1阈值更高的值即第2阈值时获取到的图像的情况下,将所述主图像的所述解析结果用作为所述适当图像,对所述主图像进行所述图像处理,
在将所述主图像判定为是所述电荷量为所述第2阈值时获取到的图像的情况下,使用通过所述第1曝光中的所述非破坏读取而从所述固体摄像元件获取到的图像、即所述电荷量达到所述第1阈值的图像的所述解析结果来作为所述适当图像,对所述主图像进行所述图像处理。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016254545 | 2016-12-27 | ||
JP2016-254545 | 2016-12-27 | ||
PCT/JP2017/046597 WO2018124053A1 (ja) | 2016-12-27 | 2017-12-26 | 撮像装置、カメラ及び撮像方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110036627A CN110036627A (zh) | 2019-07-19 |
CN110036627B true CN110036627B (zh) | 2021-03-05 |
Family
ID=62707588
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201780072524.3A Active CN110036627B (zh) | 2016-12-27 | 2017-12-26 | 摄像装置、照相机以及摄像方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10951842B2 (zh) |
EP (1) | EP3565234B1 (zh) |
JP (1) | JP6643658B2 (zh) |
CN (1) | CN110036627B (zh) |
WO (1) | WO2018124053A1 (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TW201915818A (zh) * | 2017-10-05 | 2019-04-16 | 香港商印芯科技股份有限公司 | 光學識別模組 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH01269386A (ja) * | 1988-04-21 | 1989-10-26 | Canon Inc | カラー・カメラ |
CN101072303A (zh) * | 2006-05-11 | 2007-11-14 | 精工爱普生株式会社 | 摄像元件及摄像装置 |
JP2016019090A (ja) * | 2014-07-07 | 2016-02-01 | パナソニックIpマネジメント株式会社 | 固体撮像装置 |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2289981A (en) * | 1994-06-01 | 1995-12-06 | Simage Oy | Imaging devices systems and methods |
JP4281199B2 (ja) * | 2000-02-18 | 2009-06-17 | 株式会社ニコン | 電子カメラ |
US7061524B2 (en) * | 2001-11-13 | 2006-06-13 | The Board Of Trustees Of The Leland Stanford Junior University | Motion/saturation detection system and method for synthesizing high dynamic range motion blur free images from multiple captures |
US7376244B2 (en) * | 2003-11-24 | 2008-05-20 | Micron Technology, Inc. | Imaging surveillance system and method for event detection in low illumination |
US20070041063A1 (en) | 2005-08-18 | 2007-02-22 | Matsushita Electric Industrial Co., Ltd. | Image sensor |
US7202463B1 (en) * | 2005-09-16 | 2007-04-10 | Adobe Systems Incorporated | Higher dynamic range image sensor with signal integration |
JP4888081B2 (ja) * | 2006-01-23 | 2012-02-29 | セイコーエプソン株式会社 | 撮像装置、撮像方法、撮像システム及び画像処理装置 |
US7496291B2 (en) * | 2006-03-21 | 2009-02-24 | Hewlett-Packard Development Company, L.P. | Method and apparatus for interleaved image captures |
JP2008042180A (ja) | 2006-07-13 | 2008-02-21 | Matsushita Electric Ind Co Ltd | イメージセンサ |
US20080049129A1 (en) * | 2006-08-28 | 2008-02-28 | Meacham James H | Imaging device with improved signal to noise performance |
US7714903B2 (en) * | 2006-08-29 | 2010-05-11 | Zoran Corporation | Wide dynamic range image capturing system method and apparatus |
WO2010084493A1 (en) * | 2009-01-26 | 2010-07-29 | Elbit Systems Ltd. | Optical pixel and image sensor |
JP5699482B2 (ja) * | 2010-08-24 | 2015-04-08 | セイコーエプソン株式会社 | 画像処理装置、画像処理方法及び撮像装置 |
WO2012172908A1 (ja) * | 2011-06-14 | 2012-12-20 | オリンパスメディカルシステムズ株式会社 | 医療機器 |
GB2497570A (en) * | 2011-12-15 | 2013-06-19 | St Microelectronics Res & Dev | Image sensor readout using plural memory locations |
US8446481B1 (en) * | 2012-09-11 | 2013-05-21 | Google Inc. | Interleaved capture for high dynamic range image acquisition and synthesis |
US9406718B2 (en) * | 2014-09-29 | 2016-08-02 | Omnivision Technologies, Inc. | Image sensor pixel cell with non-destructive readout |
JP2016161653A (ja) * | 2015-02-27 | 2016-09-05 | 富士フイルム株式会社 | 撮影装置および方法 |
-
2017
- 2017-12-26 WO PCT/JP2017/046597 patent/WO2018124053A1/ja unknown
- 2017-12-26 CN CN201780072524.3A patent/CN110036627B/zh active Active
- 2017-12-26 JP JP2018559510A patent/JP6643658B2/ja active Active
- 2017-12-26 EP EP17886845.1A patent/EP3565234B1/en active Active
-
2019
- 2019-05-18 US US16/416,197 patent/US10951842B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH01269386A (ja) * | 1988-04-21 | 1989-10-26 | Canon Inc | カラー・カメラ |
CN101072303A (zh) * | 2006-05-11 | 2007-11-14 | 精工爱普生株式会社 | 摄像元件及摄像装置 |
JP2016019090A (ja) * | 2014-07-07 | 2016-02-01 | パナソニックIpマネジメント株式会社 | 固体撮像装置 |
Also Published As
Publication number | Publication date |
---|---|
EP3565234A4 (en) | 2020-03-04 |
EP3565234B1 (en) | 2023-05-24 |
JP6643658B2 (ja) | 2020-02-12 |
WO2018124053A1 (ja) | 2018-07-05 |
US20190273878A1 (en) | 2019-09-05 |
US10951842B2 (en) | 2021-03-16 |
CN110036627A (zh) | 2019-07-19 |
EP3565234A1 (en) | 2019-11-06 |
JPWO2018124053A1 (ja) | 2019-10-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8610811B2 (en) | Image pickup apparatus | |
JP3748267B2 (ja) | 撮像装置 | |
JP6414718B2 (ja) | 撮像装置 | |
CN109997352B (zh) | 摄像装置、相机以及摄像方法 | |
US20100045830A1 (en) | Image capturing device, smear reduction method, and computer readable storage medium | |
JP6024102B2 (ja) | 撮像装置 | |
KR101556468B1 (ko) | 고체 촬상 장치 및 카메라 | |
US20100245590A1 (en) | Camera sensor system self-calibration | |
CN110036627B (zh) | 摄像装置、照相机以及摄像方法 | |
US11546490B2 (en) | Image generation method, imaging apparatus, and recording medium | |
WO2018124051A1 (ja) | 画像選択装置、カメラ及び画像選択方法 | |
NL1022903C2 (nl) | Meervoudige donkerframesubstractie. | |
WO2018124049A1 (ja) | 撮像装置、カメラ及び撮像方法 | |
US9794502B2 (en) | Image capturing apparatus | |
WO2018124050A1 (ja) | 撮像装置、カメラ及び撮像方法 | |
JP6704611B2 (ja) | 撮影装置及び撮影方法 | |
JP5515320B2 (ja) | 撮像装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |