CN102739965A - 摄像设备及其控制方法 - Google Patents

摄像设备及其控制方法 Download PDF

Info

Publication number
CN102739965A
CN102739965A CN2012100980481A CN201210098048A CN102739965A CN 102739965 A CN102739965 A CN 102739965A CN 2012100980481 A CN2012100980481 A CN 2012100980481A CN 201210098048 A CN201210098048 A CN 201210098048A CN 102739965 A CN102739965 A CN 102739965A
Authority
CN
China
Prior art keywords
light value
view data
value
photometry
imageing sensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2012100980481A
Other languages
English (en)
Other versions
CN102739965B (zh
Inventor
峰阳介
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN102739965A publication Critical patent/CN102739965A/zh
Application granted granted Critical
Publication of CN102739965B publication Critical patent/CN102739965B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B7/00Control of exposure by setting shutters, diaphragms or filters, separately or conjointly
    • G03B7/08Control effected solely on the basis of the response, to the intensity of the light received by the camera, of a built-in light-sensitive device
    • G03B7/091Digital circuits
    • G03B7/097Digital circuits for control of both exposure time and aperture
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B7/00Control of exposure by setting shutters, diaphragms or filters, separately or conjointly
    • G03B7/28Circuitry to measure or to take account of the object contrast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/71Circuitry for evaluating the brightness variation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/73Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/741Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/46Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by combining or binning pixels

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)
  • Exposure Control For Cameras (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)

Abstract

本发明涉及一种摄像设备及其控制方法。基于根据从图像传感器读出的第一图像数据所计算出的第一测光值以及根据从所述图像传感器读出的第二图像数据所计算出的第二测光值来计算曝光控制值,其中,所述第一图像数据是在不对像素信号进行相加或者对像素信号进行相加的情况下所获得的,以及所述第二图像数据是通过对数量比为了获得所述第一图像数据而相加的像素信号的数量多的像素信号进行相加所获得的。

Description

摄像设备及其控制方法
技术领域
本发明涉及一种摄像设备及其控制方法,尤其涉及使用电荷累积型图像传感器来进行测光的摄像设备及其控制方法。
背景技术
诸如数字照相机或数字摄像机等的摄像设备所需的测光范围通常是以APEX为单位的Bv值约为-5~+15。即,该测光范围的动态范围约为20级。另一方面,可以使用电荷累积型图像传感器通过一次累积来进行测光的动态范围窄于20级。
因而,利用已知技术,使用电荷累积型图像传感器来对通过使用不同的曝光量多次拍摄同一场景的图像所获得的图像信号进行合成,由此生成动态范围比通过一次累积(摄像)可以实现的动态范围宽的图像。这种技术是所谓的HDR(高动态范围)摄像。
还已提出了以相同方式扩大采用电荷累积型光接收元件的测光装置的动态范围。例如,在日本特开平6-130462中,采用电荷累积型光接收元件的测光装置交替进行使用长的累积时间的测光和使用短的累积时间的测光,由此即使视野内的亮度差非常大也获得了从低亮度区域到高亮度区域的测光值。
然而,日本特开平6-130462所述的方法需要长的曝光时间来对低亮度区域的测光进行摄像,由此使测光所需的时间延长。
发明内容
考虑到前述传统问题而作出本发明,并且本发明提供如下的一种摄像设备及其控制方法,其中该摄像设备能够同时扩大使用电荷累积型图像传感器的测光范围以及抑制测光所需的时间的延长。
根据本发明的方面,提供一种摄像设备,包括:包含多个像素的图像传感器;测光计算单元,用于基于从所述图像传感器读出的图像数据来计算测光值;以及曝光计算单元,用于基于所述测光计算单元所计算出的测光值来计算曝光控制值,其中,所述曝光计算单元基于根据从所述图像传感器读出的第一图像数据所计算出的第一测光值以及根据从所述图像传感器读出的第二图像数据所计算出的第二测光值来计算所述曝光控制值,以及所述第一图像数据是在不对像素信号进行相加或者对像素信号进行相加的情况下所获得的,以及所述第二图像数据是通过对数量比为了获得所述第一图像数据而相加的像素信号的数量多的像素信号进行相加所获得的。
根据本发明的另一方面,提供一种摄像设备的控制方法,包括以下步骤:测光计算步骤,用于基于从包含多个像素的图像传感器读出的图像数据来计算测光值;以及曝光计算步骤,用于基于在所述测光计算步骤中所计算出的测光值来计算曝光控制值,其中,在所述曝光计算步骤中,基于根据从所述图像传感器读出的第一图像数据所计算出的第一测光值以及根据从所述图像传感器读出的第二图像数据所计算出的第二测光值来计算所述曝光控制值,以及所述第一图像数据是在不对像素信号进行相加或者对像素信号进行相加的情况下所获得的,以及所述第二图像数据是通过对数量比为了获得所述第一图像数据而相加的像素信号的数量多的像素信号进行相加所获得的。
通过以下参考附图对典型实施例的说明,本发明的其它特征将变得明显。
附图说明
图1是示出作为根据本发明实施例的摄像设备的示例的数字静态照相机的结构示例的框图;
图2是用于说明根据本发明实施例的数字静态照相机的摄像处理的流程图;
图3是用于说明根据本发明实施例的数字静态照相机的AE处理的流程图;
图4是用于说明根据本发明实施例的数字静态照相机的初始累积处理的流程图;
图5A~5F是用于说明根据本发明实施例的设置数字静态照相机的像素相加范围的方法的图;
图6A~6C是示出根据本发明实施例的用于确定数字静态照相机的测光累积控制所使用的控制值的程序图的示例的图;以及
图7是用于说明根据本发明实施例的对数字静态照相机的AE处理中所获得的测量输出值进行合成的处理的图。
具体实施方式
现在将参考附图来详细说明本发明的典型实施例。
照相机10的结构
图1是示出作为根据本发明实施例的摄像设备的示例的数字静态照相机(以下简称为照相机)10的结构示例的框图。
在本实施例中,摄像透镜11包括自动调焦机构和变焦机构,并且不仅可以根据来自变焦控制单元44的控制信号驱动该变焦机构,还可以根据来自焦点控制单元45的控制信号驱动调焦透镜。
光圈12的开口的大小根据来自光圈控制单元43的控制信号而改变,并且光圈12控制入射到图像传感器上的光量。
快门13根据来自快门控制单元42的控制信号而打开/关闭,以控制图像传感器的曝光时间。
电荷累积型图像传感器14例如用作CMOS图像传感器。图像传感器14根据来自图像传感器控制单元41的控制信号,对各像素进行光电转换以累积电荷,将光学图像转换成电信号(图像数据),并输出该电信号。
AGC电路15对从图像传感器14输出的图像数据进行与来自增益控制单元40的控制信号相对应的增益调整,并将已经过了增益调整的图像数据输出至A/D转换器16。
A/D转换器16对来自AGC电路15的已经过了增益调整的图像数据进行A/D转换。将该A/D转换后的图像数据经由图像处理单元20和存储器控制单元21这两者或者仅经由存储器控制单元21写入存储器30中。
图像处理单元20对来自A/D转换器16或存储器控制单元21的图像数据进行例如像素校正处理、颜色转换处理、AF(自动调焦)处理、AE(自动曝光)处理、EF(电子闪光灯预发光)处理和AWB(自动白平衡)处理。
***控制单元50基于图像处理单元20所获得的计算结果来控制增益控制单元40、图像传感器控制单元41、快门控制单元42、光圈控制单元43、变焦控制单元44、焦点控制单元45和电子闪光灯单元46。
增益控制单元40控制AGC电路15的增益。图像传感器控制单元41控制图像传感器14的累积时间以及像素相加数。快门控制单元42控制快门13的打开/关闭操作。光圈控制单元43控制光圈12的开口的大小。变焦控制单元44控制摄像透镜11的变焦。焦点控制单元45驱动摄像透镜11的调焦透镜以控制焦点位置。
电子闪光灯单元46具有AF辅助光投射功能和电子闪光灯控制功能。
***控制单元50例如包括CPU、ROM和RAM并且控制整体照相机10的操作。注意,***控制单元50可以至少部分控制上述的增益控制单元40、图像传感器控制单元41、快门控制单元42、光圈控制单元43、变焦控制单元44和焦点控制单元45。
存储器30例如存储用于***控制单元50工作的常量、变量和程序。
显示单元32例如用作LCD,并且例如根据***控制单元50的控制显示菜单画面和照相机10的各种信息。此外,根据本实施例的照相机10在摄像待机状态下连续拍摄图像并将所拍摄图像显示在显示单元32上,由此使显示单元32用作电子取景器。
快门开关60包括快门开关SW1和SW2。快门开关SW1通过快门按钮(未示出)的半行程而接通,并且快门开关SW2通过该快门按钮的全行程而接通。
***控制单元50将快门开关SW1的接通(ON)检测为用以开始摄像准备处理的指示,并且开始诸如AF(自动调焦)处理和AE(自动曝光)处理等的操作。
此外,***控制单元50将快门开关SW2的接通检测为用以开始最终摄像(记录摄像)处理的指示。在该最终摄像处理中,在电子闪光灯摄像模式下,***控制单元50控制电子闪光灯单元46的发光,并进行以与AE处理相对应的F值和快门速度(曝光时间)对图像传感器14进行曝光的曝光处理。
***控制单元50将图像传感器14所获得的图像数据经由A/D转换器16和存储器控制单元21写入存储器30中。此外,***控制单元50使用图像处理单元20所获得的计算结果来对存在于存储器30中的图像数据进行显影处理(例如,颜色插值处理)。此外,***控制单元50执行如下的记录处理,其中该记录处理用于从存储器30读出显影后的图像数据并将该图像数据以例如图像文件的格式写入记录单元70中所配置的记录介质上。注意,***控制单元50根据需要对图像数据进行编码。
记录单元70包括诸如半导体存储卡等的记录介质,并且根据***控制单元50的控制来从该记录介质读取数据或将数据写入该记录介质上。
照相机10的操作
接着,将参考图2~4所示的流程图来说明照相机10的操作。注意,在这种情况下,照相机10的电源接通、即处于摄像待机状态。如上所述,照相机10在摄像待机状态下连续拍摄图像,并且显示单元32用作电子取景器。以下将显示单元32用作电子取景器时所显示的所拍摄图像称为直通图像。
在步骤S101中,***控制单元50判断快门开关SW1是接通还是断开。如果快门开关SW1为接通,则***控制单元50使该处理进入步骤S102。
在步骤S102中,***控制单元50使图像处理单元20对直通图像的图像数据执行用以进行AE处理的图像处理。注意,后面将参考图3来详细说明该AE处理。
在步骤S103中,***控制单元50使用直通图像的图像数据来进行已知对比度检测方法的AF(自动调焦)处理。***控制单元50使图像处理单元20根据直通图像的图像数据计算AF评价值,并经由焦点控制单元45驱动摄像透镜11的调焦透镜,由此搜索AF评价值最大的调焦透镜位置。***控制单元50将调焦透镜驱动至AF评价值最大的调焦透镜位置。
在步骤S104中,***控制单元50判断快门开关SW2是接通还是断开。如果快门开关SW2为断开,则在步骤S105中,***控制单元50检查快门开关SW1的状态。如果快门开关SW1仍为接通,则***控制单元50使该处理返回至步骤S102。如果快门开关SW1已断开,则***控制单元50使该处理返回至步骤S101。
如果在步骤S104中***控制单元50判断为快门开关SW2为接通,则在步骤S106中,***控制单元50基于步骤S102的AE处理中所计算出的曝光控制值来执行上述的最终摄像处理。
AE处理的详情
图3是示出图2的步骤S102中的AE处理的详情的流程图。
在步骤S201中,***控制单元50判断是否接通了电源。如果在步骤S201中判断为“是”,则***控制单元50使该处理进入步骤S250;否则,***控制单元50使该处理进入步骤S202。
在步骤S250中,***控制单元50进行初始累积处理。
将参考图4所示的流程图以及图6A~6C来说明初始累积处理。
在步骤S301中,***控制单元50执行测光累积控制(第一次初始累积操作)。在初始累积处理的第一次累积(摄像)操作中,***控制单元50设置如下的累积时间(Tv0)和像素相加数(Kv0),其中与照相机10所需的测光范围的中心的亮度相对应的输出具有图像传感器14的动态范围(最小输出值~最大输出值)的中间值。例如,在本实施例中,所需的测光范围是Bv值-5~+15,因而设置如下的累积时间和像素相加数,其中与亮度Bv=5相对应的输出具有图像传感器14的动态范围的中间值。后面将说明像素相加数。在本实施例中,尽管在该累积处理中所设置的光圈总是完全打开,但可以根据预先确定的程序图来设置该光圈。
***控制单元50在所设置的累积时间内进行测光累积(摄像)。在所设置的累积时间结束之后,***控制单元50使图像处理单元20根据包括在通过分割所拍摄图像所获得的多个测光区域各自中的图像数据来计算与亮度相关联的测量输出值Y。尽管后面将参考图5A~5F来说明这些测光区域,但将图像分割成6(水平)×4(垂直)个测光区域,使得设置了总共为24个测光区域。注意,分割得到的测光区域的数量不限于上述数量,并且所拍摄图像也不必总是被二维等距分割成测光区域。
在步骤S302中,***控制单元50如下计算出加权因数k与图像处理单元20所计算出的各测光区域的测量输出值Y之间的加权平均值Yw。
Yw=(∑Yij×kij)/24
其中,i和j是表示各测光区域的位置的尾标。在本实施例中,存在6(水平)×4(垂直)个测光区域,因此i=0~5并且j=0~3。
此外,加权因数k用于根据例如照相机10的摄像模式、测光模式和拍摄场景的类型来改变各测光区域的测量输出值的权重。如果测光模式例如是中央重点测光模式,则与图像外周的测光区域相比,对于图像中央附近的测光区域将加权因数设置得较大。此外,如果照相机10具有针对诸如面部等的特征区域的特征区域检测功能,则在使用该特征区域检测功能的摄像模式下,将针对与特征区域相对应的测光区域的加权因数设置得大于针对其它测光区域的加权因数。此外,如果照相机10具有根据视野的状态来自动判别拍摄场景的类型的场景判别功能,则对各测光区域设置最适合于所判别出的场景的加权因数。由于加权因数k不与本发明直接相关,因此将不给出更加详细的说明。
***控制单元50根据由以下给出的ΔY来判断是否要进行初始累积处理的第二次累积操作。
ΔY=log2(Yw/Ytarget)
其中,Ytarget是目标亮度、即加权平均值Yw的目标值。***控制单元50对曝光控制值进行设置,以使得加权平均值Yw接近目标亮度Ytarget。
如果ΔY落入预定范围内(例如,落入±3.0级的范围内),则***控制单元50根据以下来计算下一测光累积操作的控制值P0,并且***控制单元50使该处理进入步骤S202,而不进行第二次初次累积(摄像)操作。
对于-3.0≤ΔY≤+3.0
P0(下一测光累积操作)=P0(第一次初始累积操作)+ΔY
(注意P0(下一测光累积操作)是步骤S206中所使用的控制值且不用于进行第二次初次累积(摄像)操作)。注意,控制值P0(第一次初始累积操作)与步骤S301中所设置的累积时间(Tv0)和像素相加数(Kv0)相对应。后面将详细说明控制值P。
另一方面,如果ΔY落在预定范围外(例如,落在±3.0级的范围外),则***控制单元50通过以预定量(例如,与±6级相对应的量)改变曝光量来计算控制值P0(第二次初始累积操作),并且判断为要进行第二次初始累积(摄像)操作。即,
对于-3.0>ΔY
P0(第二次初始累积操作)=P0(第一次初始累积操作)-6
对于ΔY>3.0
P0(第二次初始累积操作)=P0(第一次初始累积操作)+6
如果在步骤S303中***控制单元50判断为要进行第二次初始累积(摄像)操作,则***控制单元50使该处理进入步骤S304;否则,***控制单元50结束该初始累积处理(使该处理进入步骤S202)。
在步骤S304中,***控制单元50基于针对第二次初始累积操作中的测光累积控制所设置的控制值P0(第二次初始累积操作),根据图6A所示的程序图来确定累积时间(Tv0)和像素相加数(Kv0)。在图6A所示的例子中,对于-3.0>ΔY,累积时间(Tv0)=1/100秒且像素相加数(Kv0)=16个像素,并且对于ΔY>3.0,累积时间(Tv0)=1/25600秒且像素相加数(Kv0)=0(不进行像素相加)。
在步骤S305中,***控制单元50在获取到图像数据之后以与步骤S302相同的方式计算ΔY,并且如下计算出下一测光累积操作的控制值P0。
对于-3.0≤ΔY≤+3.0
P0(下一测光累积操作)=P0(第二次初始累积操作)+ΔY
另一方面,如果ΔY落在±3.0级的范围外,则以与±3.0级相对应的量来改变曝光量。即,如下所述。
对于-3.0>ΔY
P0(下一测光累积操作)=P0(第二次初始累积操作)-3
对于ΔY>3.0
P0(下一测光累积操作)=P0(第二次初始累积操作)+3
当***控制单元50设置了下一测光累积操作的控制值时,***控制单元50结束该初始累积处理,并使处理进入图3的步骤S202。
如果在步骤S202中***控制单元50判断为(后面要说明的)步骤S209中所设置的合成条件为ON,则***控制单元50使该处理进入步骤S203;否则,***控制单元50使该处理进入步骤S206。注意,对于初始累积处理结果,在步骤S209中判断是否要进行合成之前,在步骤S202中对合成条件进行判断。因而,***控制单元50在初始累积处理之后判断为合成条件为OFF,并且使该处理进入步骤S206。作为代替,***控制单元50在初始累积处理之后可以跳过步骤S202的处理,并且使该处理进入步骤S206。
在步骤S203中,***控制单元50判断是否已根据控制值P1进行了前一累积控制操作。如果在步骤S203中判断为“是”,则***控制单元50使该处理进入步骤S204;否则,***控制单元50使该处理进入步骤S205。通过以控制值P0作为基准而以+2级和-2级分别改变曝光量,来获得控制值P1和P2。
在步骤S204中,***控制单元50基于控制值P2来确定累积时间(Tv2)和像素相加数(Kv2),并进行测光累积处理。在该累积之后,***控制单元50将所拍摄图像分割成多个测光区域,并计算各测光区域的测量输出值Y。
在步骤S205中,***控制单元50基于控制值P1来确定累积时间(Tv1)和像素相加数(Kv1),并进行测光累积处理。在该累积之后,***控制单元50将所拍摄图像分割成多个测光区域,并计算各测光区域的测量输出值Y。
在步骤S206中,***控制单元50基于控制值P0来确定累积时间(Tv0)和像素相加数(Kv0),并进行测光累积处理。在该累积之后,***控制单元50将所拍摄图像分割成多个测光区域,并计算各测光区域的测量输出值Y。注意,此时使用在初始累积处理中所计算出的控制值P0(下一测光累积操作)。
在步骤S207中,***控制单元50将在S204~S206的两个不同的步骤中先前计算出的测量输出值Y的水平与此时计算出的测量输出值Y的水平进行对准,然后进行合成处理以计算扩大各测光区域的测光范围时的测量输出值Y。注意,后面将参考图7来详细说明该合成处理。
在步骤S208中,***控制单元50计算加权因数k与步骤S206或S207中所计算出的各测光区域的测量输出值Y之间的加权平均值Yw。***控制单元50基于根据加权平均值Yw、累积时间和像素相加数所获得的被摄体亮度来确定最终摄像时的曝光控制值(例如,快门速度、f值和感光度)。注意,由于用于确定曝光控制值的方法不与本发明直接相关并且可以是任意方法,因此将不给出对该方法的详细说明。
在步骤S209中,***控制单元50基于步骤S208中所计算出的加权平均值Yw来确定表示在下一AE处理操作中是否要合成测量输出值的合成条件。后面将详细说明用于判断是否要合成测量输出值的方法。
接着,将参考图5A~5F来说明用于计算像素相加数和测量输出值Y的方法。
根据本实施例的照相机10的图像传感器14包括原色滤波器,并且各像素具有与R(红色)、G(绿色)或B(蓝色)相对应的分光特性。此外,为了便于说明和理解,假定图像传感器14具有96(水平)×64(垂直)个像素。
图5A示意性示出如下的状态:将通过使用图像传感器控制单元41控制图像传感器14而从图像传感器14读出的图像数据经由A/D转换器16和存储器控制单元21写入存储器30中。
图5B示出将具有96(水平)×64(垂直)个像素的图像分割成总共为6(水平)×4(垂直)=24个测光区域200的例子。一个测光区域包括图像传感器14的16×16个像素。
图5C是一个测光区域200的放大图。在这种情况下,图5C示出图像传感器14包括以拜尔模式排列的滤色器时的像素配置。注意,由于本发明并不依赖于滤色器的排列,因此可以采用其它的像素排列。
图像传感器控制单元41设置对来自相同颜色的像素的输出进行相加的图像传感器(或图像)的范围。
例如,图5D~5F示出如下的例子:在图5C所示的测光区域内设置了分别将4×4个像素、8×8个像素以及16×16个像素相加的像素相加范围210、220和230。
在像素相加范围210、220和230内分别将2×2个滤色器的单位排列(R、G1、B和G2)的各颜色的像素信号相加4次、16次和64次,以针对各相加范围获得R、G1、B和G2的一组总和。
在将没有对像素信号进行相加的累积时间的值定义为1的情况下,在分别设置像素相加范围210、220和230时,用以在相同视野(相同场景)内从图像传感器14获得相同输出的累积时间具有值1/4、1/16和1/64。因此,可以通过增加像素相加数(设置相对宽的像素相加范围)来抑制低亮度时累积时间的延长。
可以在各测光区域内计算平均值R、G(G1和G2)和B,以如下得出测量输出值Y。
Y=0.299×R+0.587×G+0.114×B
这样,在不依赖于相加范围的情况下,可以通过针对各测光区域计算一个测量输出值Y来进行(后面要说明的)合成处理。注意,代替针对各测光区域计算一个测量输出值Y,可以针对各相加范围计算一个测量输出值Y并且将其用作该相加范围内的像素的输出值。
接着,将参考图6A来说明用于控制累积时间和像素相加数的方法。
图6A示出针对视野的Bv值、横轴表示累积时间且纵轴表示像素相加数的程序图的示例。
在这种情况下,将累积时间(Tv)和像素相加数(Kv)的总和(Tv+Kv)定义为控制值(曝光量)P。注意,这里,累积时间(Tv)和像素相加数(Kv)的总和表示APEX值的总和,因此并不表示实际累积时间(例如,1/100秒)和实际像素数(例如,16个像素)的总和。预先确定与特定的累积时间和像素相加数相对应的TV(APEX)和Kv(APEX),从而满足P(APEX)=TV(APEX)+Kv(APEX)。例如,关于APEX单位,详情参见“数字静态照相机图像文件格式标准(Exif)版本2.1”的“附录C中的APEX”。
在确定了控制值P时,基于图6A~6C所示的程序图来确定Tv和Kv。
在Bv值相对小的低亮度时,获得给定曝光量所需的累积时间相对长。如果所需的累积时间长于或等于预定累积时间(在图6A~6C中为1/100秒以上),则***控制单元50增加像素相加数以补偿在预定累积时间内拍摄图像时的不足曝光量。仅在即使像素相加数为最大(在图6A~6C中为64个像素)也无法补偿不足曝光量的情况下,设置比预定累积时间长的累积时间(比1/100秒长的累积时间)。在比预定累积时间短的累积时间内可以获得给定曝光量的高亮度时,不对图像信号进行相加。尽管将1/100秒设置为预定累积时间,但可以将不同于1/100秒的累积时间设置为该预定累积时间。可选地,可以设置根据例如照相机的摄像模式而改变的累积时间。
接着,将参考图6A~6C以及图7来说明测量输出值Y的合成处理。
如上所述,通常的所需测光范围是Bv值约为-5~+15,即该所需测光范围与约20级的动态范围相对应。然而,在本实施例中,图像传感器14的动态范围(可以通过一次累积进行测光的亮度的范围)窄于20级。
因而,在本实施例中,将如下的控制值(当基于该控制值进行曝光时可以获得来自图像传感器14的输出值的中间值)定义为控制值P0,其中与测量输出值的加权平均值相对应的输出是图像传感器14的动态范围的中央。此外,通过以控制值P0为基准来按+2级和-2级分别改变曝光量,获得了控制值P1和P2。
图6B是针对控制值P0和P1的程序图,并且图6C是针对控制值P2的程序图。
图6B和6C所示的程序图中的点P0、P1和P2表示当视野的Bv值=5时的控制值。点P0与累积时间1/400秒相对应,而不进行像素相加;并且点P1和P2与相同的累积时间1/1600秒相对应,而分别不进行像素相加以及对16个像素进行相加。
在根据本实施例的测光中,通过交替重复累积控制来扩大图像传感器14的动态范围,其中,该累积控制使用对累积时间和像素相加数进行控制所依据的控制值P1和P2。
图7示出针对视野的Bv值、可以通过根据控制值P0、P1和P2使用图像传感器14拍摄图像来进行测光的范围。
此外,图7所示的Y合成值是通过在对根据控制值P1和P2所获得的各测光区域的测量输出值Y的水平进行对准之后执行合成处理所获得的。注意,视野的亮度在使用控制值P1的累积控制(摄像)和使用控制值P2的累积控制之间改变。如果控制值P0改变,则将该变化量反映到要对准的水平上。
使用阈值TH_DR_HI和TH_DR_LO来进行水平对准。阈值TH_DR_HI与控制值P2处的测光可能范围内的上限Bv值相对应,并且阈值TH_DR_LO与控制值P1处的测光可能范围内的下限Bv值相对应。
在水平对准时,使相同Bv值的测量输出值相同。例如,将通过根据控制值P2进行累积控制所获得的测量输出值校正为与通过根据控制值P1进行累积控制所获得的测量输出值相等。更具体地,当控制值P1与不进行像素相加的情况相对应、并且控制值P2与16个像素的相加的情况相对应时,将通过根据控制值P2进行累积控制所获得的测量输出值校正为1/16。这样维持了Bv值和测量输出值之间的关系在合成之后的测光范围内的连续性。
在对测量输出值的水平进行对准之后,***控制单元50在以下条件下进行合成处理。
如果从根据控制值P1拍摄到的图像所获得的测量输出值Y大于阈值TH_DR_HI,则该测量输出值Y用作合成之后的值。
如果从根据控制值P2拍摄到的图像所获得的测量输出值Y小于阈值TH_DR_LO,则该测量输出值Y用作合成之后的值。
如果从根据控制值P1拍摄到的图像所获得的测量输出值Y和从根据控制值P2拍摄到的图像所获得的测量输出值Y在阈值TH_DR_LO(包含)和阈值TH_DR_HI(包含)之间,则基于新拍摄到的图像的测量输出值Y用作合成之后的值。这是因为基于新拍摄到的图像的测量输出值Y在更大程度上反映了当前视野的亮度。注意,从根据控制值P1拍摄到的图像所获得的测量输出值Y和从根据控制值P2拍摄到的图像所获得的测量输出值Y之间的平均值可用作合成之后的值。使用该平均值作为合成之后的值,可以抑制亮度的暂时变化的影响。
通过上述的处理,与基于控制值P0的测光可能范围相比,可以使测光可能范围扩大了约4级(±2级)。
此外,当除了控制值P1和P2以外还设置了多个控制值Pn时,可以通过针对各测光区域进行水平对准和合成处理来扩大测光可能范围。
尽管已参考图7说明了将根据控制值P1和P2所获得的各测光区域的测量输出值Y进行合成的例子,但这同样适用于将根据控制值P1或P2所获得的测量输出值Y与根据控制值P0所获得的测量输出值Y进行合成的情况。
接着,将说明在步骤S209中判断是否要进行合成的方法。
在步骤S209中,***控制单元50基于测光结果来判断在下一测光累积操作中是否要进行合成处理。如果在下一测光累积操作中要进行合成,则将合成条件设置为ON。如果在下一测光累积操作中不进行合成,则将合成条件设置为OFF。
在步骤S208中,***控制单元50计算加权因数k与各测光区域的测量输出值Y之间的加权平均值Yw,以如下得出与目标亮度Ytarget和加权平均值Yw之间的差相对应的级数ΔY。
ΔY=log2(Yw/Ytarget)
如果ΔY落入±3.0的范围内,则预期亮度在视野内不会大幅改变,并且在步骤S209中***控制单元50将用以在下一测光累积操作中进行合成处理的下一摄像参数设置为如下。
对于-3.0≤ΔY≤+3.0
P0(下一测光累积操作)=P0(前一测光累积操作)+ΔY
P1(下一测光累积操作)=P0(下一测光累积操作)+2
P2(下一测光累积操作)=P0(下一测光累积操作)-2
下一合成条件:ON
另一方面,如果ΔY没有落入±3.0级的范围内,则预期亮度在视野内已大幅改变,并且在下一测光累积操作时无需进行合成处理的情况下,如下对下一摄像参数进行设置以根据控制值P0来拍摄图像。
对于-3.0>ΔY
P0(下一测光累积操作)=P0(前一测光累积操作)-3
下一合成条件:OFF
对于ΔY>3.0
P0(下一测光累积操作)=P0(前一测光累积操作)+3
下一合成条件:OFF
如上所述,根据本实施例,与通过一次摄像来进行测光的情况相比,当通过使用不同的曝光量多次摄像来进行测光时,可以使测光可能范围扩大。此外,当需要长于或等于预定时间的累积时间以对低亮度区域内的测光进行摄像时,在将累积时间设置为预定时间时拍摄图像,并且基于相加像素信号来计算测量输出值,由此抑制测光所需的时间延长并扩大测光可能范围。
其它实施例
尽管已经参考典型实施例说明了本发明,但是应该理解,本发明不限于所公开的典型实施例。所附权利要求书的范围符合最宽的解释,以包含所有这类修改、等同结构和功能。
例如,在上述实施例中,尽管使用拍摄记录图像的图像传感器来进行测光,但本发明可应用于使用与拍摄记录图像的图像传感器分开设置的电荷累积型图像传感器来进行测光的情况。
此外,可以采用允许用户对操作装置(未示出)进行操作从而判断是否要进行上述实施例所述的处理的结构,或者可以采用仅当用户对操作部件(未示出)进行操作以在多个模式中选择预定模式时进行上述实施例所述的处理的结构。
此外,在低亮度时,在将累积时间设置得长于预定累积时间从而获得适当曝光量的情况下,如果进行多次测光累积则测光所需的时间延长。因此,在这种情况下,可以省略多次测光累积以及合成处理。
还可以通过读出并执行记录在存储器装置上的程序以进行上述实施例的功能的***或设备的计算机(或者CPU或MPU等装置)和通过下面的方法来实现本发明的各方面,其中,***或设备的计算机通过例如读出并执行记录在存储器装置上的程序以进行上述实施例的功能来进行上述方法的各步骤。由于该原因,例如经由网络或者通过用作存储器装置的各种类型的记录介质(例如,计算机可读介质)将该程序提供给计算机。

Claims (10)

1.一种摄像设备,包括:
包含多个像素的图像传感器;
测光计算单元,用于基于从所述图像传感器读出的图像数据来计算测光值;以及
曝光计算单元,用于基于所述测光计算单元所计算出的测光值来计算曝光控制值,
其中,所述曝光计算单元基于根据从所述图像传感器读出的第一图像数据所计算出的第一测光值以及根据从所述图像传感器读出的第二图像数据所计算出的第二测光值来计算所述曝光控制值,以及
所述第一图像数据是在不对像素信号进行相加或者对像素信号进行相加的情况下所获得的,以及所述第二图像数据是通过对数量比为了获得所述第一图像数据而相加的像素信号的数量多的像素信号进行相加所获得的。
2.根据权利要求1所述的摄像设备,其特征在于,
所述测光计算单元计算拍摄视野内的多个区域的测光值,以及
在基于所述拍摄视野内的多个区域的测光值计算所述曝光控制值时,所述曝光计算单元使用所述第一测光值作为所述拍摄视野内的高亮度区域的测光值,并使用所述第二测光值作为所述拍摄视野内的低亮度区域的测光值。
3.根据权利要求1所述的摄像设备,其特征在于,
所述测光计算单元针对多个区域中的每个区域计算所述第一测光值和所述第二测光值,以及
在基于所述多个区域的测光值计算所述曝光控制值时,所述曝光计算单元针对所述多个区域中所述第一测光值大于第一预定值的区域使用所述第一测光值,并且针对所述多个区域中所述第二测光值小于第二预定值的区域使用所述第二测光值。
4.根据权利要求3所述的摄像设备,其特征在于,所述曝光计算单元在所述多个区域中的、所述第一测光值和所述第二测光值都不小于所述第二预定值且都不大于所述第一预定值的区域中,使用所述第一测光值和所述第二测光值中的基于较新的图像数据所计算出的测光值。
5.根据权利要求1所述的摄像设备,其特征在于,所述曝光计算单元基于所述第一测光值、以及针对预定亮度被校正为等于所述第一测光值的所述第二测光值来计算所述曝光控制值。
6.根据权利要求1所述的摄像设备,其特征在于,所述第一图像数据和所述第二图像数据是交替读出的。
7.根据权利要求1所述的摄像设备,其特征在于,所述第一图像数据是在不对多个像素信号进行相加的情况下从所述图像传感器读出的。
8.根据权利要求1所述的摄像设备,其特征在于,还包括确定单元,所述确定单元用于基于所述测光计算单元所计算出的测光值来确定要从所述图像传感器读出所述第一图像数据还是所述第二图像数据。
9.根据权利要求1所述的摄像设备,其特征在于,所述图像传感器获取所述第一图像数据所需的累积时间等于所述图像传感器获取所述第二图像数据所需的累积时间。
10.一种摄像设备的控制方法,包括以下步骤:
测光计算步骤,用于基于从包含多个像素的图像传感器读出的图像数据来计算测光值;以及
曝光计算步骤,用于基于在所述测光计算步骤中所计算出的测光值来计算曝光控制值,
其中,在所述曝光计算步骤中,基于根据从所述图像传感器读出的第一图像数据所计算出的第一测光值以及根据从所述图像传感器读出的第二图像数据所计算出的第二测光值来计算所述曝光控制值,以及
所述第一图像数据是在不对像素信号进行相加或者对像素信号进行相加的情况下所获得的,以及所述第二图像数据是通过对数量比为了获得所述第一图像数据而相加的像素信号的数量多的像素信号进行相加所获得的。
CN201210098048.1A 2011-04-05 2012-04-05 摄像设备及其控制方法 Expired - Fee Related CN102739965B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011-084079 2011-04-05
JP2011084079A JP5822508B2 (ja) 2011-04-05 2011-04-05 撮像装置及びその制御方法

Publications (2)

Publication Number Publication Date
CN102739965A true CN102739965A (zh) 2012-10-17
CN102739965B CN102739965B (zh) 2015-09-30

Family

ID=46965823

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210098048.1A Expired - Fee Related CN102739965B (zh) 2011-04-05 2012-04-05 摄像设备及其控制方法

Country Status (3)

Country Link
US (1) US9122125B2 (zh)
JP (1) JP5822508B2 (zh)
CN (1) CN102739965B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104754238A (zh) * 2013-12-31 2015-07-01 展讯通信(上海)有限公司 一种成像控制方法及装置、成像控制***

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6046905B2 (ja) * 2012-04-02 2016-12-21 キヤノン株式会社 撮像装置、露出制御方法、及びプログラム
US10136079B2 (en) 2013-10-31 2018-11-20 Ricoh Imaging Company, Ltd. Method and apparatus for imaging an object
JP6277675B2 (ja) * 2013-10-31 2018-02-14 リコーイメージング株式会社 撮像装置および撮像方法
CN106507068B (zh) 2016-11-29 2018-05-04 广东欧珀移动通信有限公司 图像处理方法及装置、控制方法及装置、成像及电子装置
CN106507019B (zh) * 2016-11-29 2019-05-10 Oppo广东移动通信有限公司 控制方法、控制装置、电子装置
CN112415834B (zh) * 2020-11-06 2022-03-04 浙江大华技术股份有限公司 一种激光灯控制的方法及设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06130462A (ja) * 1992-10-19 1994-05-13 Nikon Corp カメラの測光装置
JP2000050168A (ja) * 1998-07-30 2000-02-18 Canon Inc フルフレームトランスファー型固体撮像装置及びその駆動方法
US20060238621A1 (en) * 2005-04-26 2006-10-26 Mitsumasa Okubo Image pickup apparatus
US20080253758A1 (en) * 2007-04-13 2008-10-16 Choon Hwee Yap Image processing method
JP2009010694A (ja) * 2007-06-28 2009-01-15 Sanyo Electric Co Ltd 露光制御回路、およびそれを搭載した撮像装置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7359000B2 (en) * 2002-11-18 2008-04-15 Canon Kabushiki Kaisha Image pickup apparatus, control method therefor, and computer-readable program for implementing the control method
JP2006352715A (ja) * 2005-06-17 2006-12-28 Casio Comput Co Ltd デジタルカメラ、及びその露出制御方法
US8675122B2 (en) * 2009-01-16 2014-03-18 Microsoft Corporation Determining exposure time in a digital camera
JP4678060B2 (ja) * 2009-03-25 2011-04-27 株式会社ニコン 撮像装置および画像処理プログラム
KR101597785B1 (ko) * 2009-07-14 2016-02-25 삼성전자주식회사 이미지 센서 및 영상 처리 방법
JP5371717B2 (ja) * 2009-12-01 2013-12-18 キヤノン株式会社 画像処理装置及び画像処理方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06130462A (ja) * 1992-10-19 1994-05-13 Nikon Corp カメラの測光装置
JP2000050168A (ja) * 1998-07-30 2000-02-18 Canon Inc フルフレームトランスファー型固体撮像装置及びその駆動方法
US20060238621A1 (en) * 2005-04-26 2006-10-26 Mitsumasa Okubo Image pickup apparatus
US20080253758A1 (en) * 2007-04-13 2008-10-16 Choon Hwee Yap Image processing method
JP2009010694A (ja) * 2007-06-28 2009-01-15 Sanyo Electric Co Ltd 露光制御回路、およびそれを搭載した撮像装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104754238A (zh) * 2013-12-31 2015-07-01 展讯通信(上海)有限公司 一种成像控制方法及装置、成像控制***
CN104754238B (zh) * 2013-12-31 2018-03-23 展讯通信(上海)有限公司 一种成像控制方法及装置、成像控制***

Also Published As

Publication number Publication date
US9122125B2 (en) 2015-09-01
JP5822508B2 (ja) 2015-11-24
US20120257081A1 (en) 2012-10-11
CN102739965B (zh) 2015-09-30
JP2012222469A (ja) 2012-11-12

Similar Documents

Publication Publication Date Title
CN102821249B (zh) 摄像设备和曝光控制方法
US8212890B2 (en) Imaging device and imaging method
US8823829B2 (en) Image capture with adjustment of imaging properties at transitions between regions
CN102739965B (zh) 摄像设备及其控制方法
US8106965B2 (en) Image capturing device which corrects a target luminance, based on which an exposure condition is determined
US8625021B2 (en) Image capture with region-based adjustment of imaging properties
JP6521776B2 (ja) 画像処理装置、画像処理方法
US8494354B2 (en) Focus adjusting apparatus and focus adjusting method
US20110050950A1 (en) Image device and imaging method
CN106357968A (zh) 摄像装置、图像处理方法
CN101877765A (zh) 图像变换设备及控制图像变换设备操作的方法
JP6752667B2 (ja) 画像処理装置と画像処理方法およびプログラム
US9071766B2 (en) Image capturing apparatus and control method thereof
US8228423B2 (en) Imaging apparatus and method for controlling flash emission
US8665355B2 (en) Image capture with region-based adjustment of contrast
JP2010147786A (ja) 撮像装置及び画像処理方法
JP4626432B2 (ja) 撮像装置における色判別方法及び装置並びに撮像装置の露出制御方法
JP2008005540A (ja) 画像処理装置及び方法
JP2009017427A (ja) 撮像装置
JP4272566B2 (ja) 広ダイナミックレンジ固体撮像素子の色シェーディング補正方法および固体撮像装置
JP2004341095A (ja) オートフォーカスカメラ
JP4578157B2 (ja) カメラ
JP2007306064A (ja) 撮像装置
JP6561432B2 (ja) 露出演算装置、露出制御装置及びカメラ
JP4905225B2 (ja) 撮像装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20150930