CN101304487A - 调焦设备、方法和程序 - Google Patents
调焦设备、方法和程序 Download PDFInfo
- Publication number
- CN101304487A CN101304487A CNA2008100961747A CN200810096174A CN101304487A CN 101304487 A CN101304487 A CN 101304487A CN A2008100961747 A CNA2008100961747 A CN A2008100961747A CN 200810096174 A CN200810096174 A CN 200810096174A CN 101304487 A CN101304487 A CN 101304487A
- Authority
- CN
- China
- Prior art keywords
- face
- eyes
- detected
- focusing
- estimated value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims description 35
- 238000001514 detection method Methods 0.000 claims abstract description 55
- 210000001508 eye Anatomy 0.000 claims description 93
- 230000001815 facial effect Effects 0.000 claims description 49
- 230000007246 mechanism Effects 0.000 claims description 16
- 238000011156 evaluation Methods 0.000 abstract 3
- 238000012545 processing Methods 0.000 description 52
- 210000000887 face Anatomy 0.000 description 9
- 230000000694 effects Effects 0.000 description 8
- 230000008569 process Effects 0.000 description 8
- 230000000007 visual effect Effects 0.000 description 8
- 230000008878 coupling Effects 0.000 description 6
- 238000010168 coupling process Methods 0.000 description 6
- 238000005859 coupling reaction Methods 0.000 description 6
- 230000006835 compression Effects 0.000 description 4
- 238000007906 compression Methods 0.000 description 4
- 238000012937 correction Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000003384 imaging method Methods 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000003825 pressing Methods 0.000 description 3
- 230000001360 synchronised effect Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 210000005252 bulbus oculi Anatomy 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 230000005693 optoelectronics Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B13/00—Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
- G03B13/32—Means for focusing
- G03B13/34—Power focusing
- G03B13/36—Autofocus systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
- G02B7/28—Systems for automatic generation of focusing signals
- G02B7/36—Systems for automatic generation of focusing signals using image sharpness techniques, e.g. image processing techniques for generating autofocus signals
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Optics & Photonics (AREA)
- Studio Devices (AREA)
- Focusing (AREA)
- Automatic Focus Adjustment (AREA)
Abstract
一种聚焦调节装置、方法和程序用于实现有效调焦,尤其当拍摄人物时。面部检测部分37检测包括在由拍摄获得的图像中的人物的面部;估计值计算部分39计算出表示在被检测出的面部的位置的景深的估计值;AF处理部分40根据该估计值而有选择地执行以下操作:(a)执行调焦,以便至少对被检测出的面部进行聚焦,或(b)使得眼睛检测装置38来检测人物的眼睛并执行调焦,以便对被检测出的眼睛进行聚焦。
Description
技术领域
本发明涉及一种调焦设备和在例如数码相机之类的拍摄装置中执行调焦的方法。本发明进一步涉及一种计算机可读记录介质,在其上记录有用于使计算机执行所述调焦方法的程序。
背景技术
当进行肖像拍摄之类的人物拍摄时,如果未对眼睛聚焦,则即使在鼻子或脸颊的轮廓上聚焦,该拍摄也只能给出一个模糊成像效果。为此,当拍摄人物时,对眼睛进行聚焦是基本做法。为了对眼睛进行聚焦,例如在日本未经审查的专利公开第2001-215403号、第2002-6203号和第2003-107335号中描述的那样,提出了一种拍摄装置,其具有从要被拍摄的图像中检测出人物的面部和眼睛、并对眼睛进行聚焦的功能。近来,还提出了一种拍摄装置,其能够从要被拍摄的图像中检测出面部并能正确地拍摄被检测出的面部。而且,例如在日本未经审查专利公开第2005-128156号中描述的那样,在具有面部检测能力的拍摄装置中,提出了一种方法,其用于从该检测出的面部中进一步检测出眼睛并对被检测出的眼睛进行聚焦的方法。
但是,日本未经审查专利公开第2001-215403号、第2002-6203号、第2003-107335号和第2005-128156号中描述的拍摄装置具有的问题是它们都需要相当多的时间和大的功耗用于调焦,这是因为它们在检测出面部之后总是要检测出眼睛。
发明内容
已经开发的本发明考虑到了上述情况,并且本发明的一个目的是实现有效调焦,尤其在拍摄人物时。
根据本发明一种调焦设备包括:
面部检测装置,其用于检测包括在由拍摄获得的图像中的人物的面部;
眼睛检测装置,用于检测包括在图像中的人物的眼睛;
估计值计算装置,用于计算出表示在被检测出的面部的位置的景深的估计值;和
调焦装置,用于基于该估计值而有选择地执行下列步骤:(a)执行调焦,以至少对被检测出的面部进行聚焦,或(b)使得眼睛检测装置检测出该人物的眼睛,并且执行调焦,来对被检测出的眼睛进行聚焦。
在此,″至少″一词的含义包括一种情况,其中不仅面部或眼睛被聚焦,而且还有除了面部或眼睛之外的该人物的其它部分(例如头部、鼻子等等),也与面部或眼睛一起被聚焦。
本发明的调焦设备可以进一步包括一个面部方向确定装置,用于确定面部的方向,并且当使得眼睛检测装置来检测人物的眼睛时,该调焦装置可以用于根据该面部的方向来确定将被聚焦的那只眼睛。
而且,本发明的调焦设备可以进一步包括一个面部方向确定装置,用于确定面部的方向,并且当检测人物的眼睛时,眼睛检测装置可以是用于设置检测眼睛的区域并且检测出在确定的区域内的眼睛的装置。
更进一步,在本发明的调焦设备中,估计值计算装置可以是用于根据焦距、光圈值、与构成拍摄装置的透镜的焦点对准位置的距离和面部大小中的至少一个的信息来计算出该估计值的装置。
而且,在本发明的调焦设备中,当检测出多个面部时,面部检测装置可以是用于确定要被聚焦的面部中的一个面部的装置。
根据本发明的一种调焦方法包括以下步骤:
检测包括在由拍摄获得的图像中的人物的面部;
计算出表示在被检测出的面部的位置的景深的估计值;以及
根据该估计值而有选择地执行下列步骤:(a)执行调焦,以至少使得被检测出的面部聚焦,或(b)检测出该人物的眼睛,并且执行调焦,以便对被检测出的眼睛进行聚焦。
而且,本发明的调焦方法可以被记录在一种计算机可读记录介质上的程序的形式来提供,用于使得计算机来执行该方法。
在景深为浅的场合,如果不对眼睛聚焦,则图像将给出模糊的效果。相反,在景深为深的场合,即使不对眼睛聚焦而仅对面部聚焦,图像将不会给出模糊的效果。
根据本发明,计算出表示在被检测出的面部的位置的景深的估计值,并且根据该估计值有选择地执行下列操作:执行调焦,以便至少对检测出的面部进行聚焦,或检测出该人物的眼睛并执行调焦,以便对被检测出的眼睛进行聚焦。因此,不同于在上述专利公开中描述的总是执行面部检测和眼睛检测的方法,本发明的技术方案是仅当景深为浅时才执行眼睛检测和调焦,来对被检测出的眼睛进行聚焦。因此,在景深为深的情况下,不执行眼睛检测,从而可以降低用于调焦所需的处理时间和功耗。
而且,通过确定被检测出的面部的方向、并确定要被聚焦的眼睛,可以对更适当的眼睛进行聚焦,尤其在面部稍微朝向侧面并且对两个眼睛进行检测的情况下,从而可以获得不给出模糊效果的图像。
更进一步,通过确定被检测出的面部的方向、以及根据确定的面部方向来设置眼睛检测区域,可以有效执行该睛检测,尤其在面部稍微朝向侧面的情况下,从而可以进一步降低用于调焦的处理时间。
附图说明
图1是数码相机的构造示意框图,该数码相机应用了根据本发明第一实施例的调焦设备。
图2是在第一实施例中执行的AF处理的流程图。
图3图示了如何检测面部区域。
图4图示了如何检测眼睛。
图5是数码相机的构造示意框图,该数码相机应用了根据本发明第二实施例的调焦设备。
图6是在第二实施例中执行的AF处理的流程图(部分1)。
图7是在第二实施例中执行的AF处理的流程图(部分2)。
图8图示了用于确定面部方向的模板。
图9是在第三实施例中执行的AF处理的流程图(部分1)。
图10是在第三实施例中执行的AF处理的流程图(部分2)。
图11图示了如何设置眼睛检测区域。
具体实施方式
随后,将参照附图更详细地描述本发明的示范性实施例。图1是数码相机的构造示意框图,该数码相机应用了根据本发明第一实施例的调焦设备。如图1所示,根据第一实施例的数码相机1包括操作***2和操作***控制部分3,其中操作***2具有操作模式开关、变焦杆、上下和左右按钮、释放按钮、电源开关等,操作***控制部分3是用于把操作***2的操作内容传输到CUP 40的接口部分。
成像***6包括构成摄像镜头10的聚焦透镜10a和变焦透镜10b。聚焦透镜驱动部分11和变焦透镜驱动器部分12分别使聚焦透镜10a和变焦透镜10b在光轴方向上移动,聚焦透镜驱动部分11和变焦透镜驱动器部分12均包括电机和电机驱动器。聚焦透镜驱动部分11根据从AF处理部分30输出的聚焦驱动量数据来控制聚焦透镜10a的移动。变焦透镜驱动器部分12根据变焦杆的操作量的数据来控制变焦透镜10b的移动。
孔径光阑14是由包括电机和电机驱动器的孔径光阑驱动部分15驱动的。孔径光阑驱动部分15根据由AE/AWB处理部分31输出的孔径值数据来控制该孔径光阑的孔径直径。
快门16是机械快门,其由包括电机和电机驱动器的快门驱动部分17所驱动。快门驱动部分17根据由释放按钮的下压产生的信号和从AE/AWB处理部分31输出的快门速度数据来执行快门16的开/关控制。
在光学***的后侧提供了作为图像传感器的CCD 18。CCD 18具有包括大量二维布置的光接收单元的光电性表面,并且表示通过该光学***来传输的被摄图像的光被聚焦在该光电性表面上并对其进行光电转换。在该光电性表面的前方布置有用于把光引导到各个像素的微透镜阵列以及包括规则排列的R、G、B滤光器的滤色器阵列。与由CCD控制部分19提供的垂直转移时钟信号和水平转移时钟信号同步,CCD 18逐行地输出存储在各个像素中的电荷,作为串行模拟图像信号。由从CCD控制部分19提供的电子快门驱动信号来确定每一像素的电荷存储时间,即曝光时间。由CCD控制部分19对CCD 18进行增益调节,以便获取具有预定电平的模拟图像信号。
从CCD 18输出的模拟图像信号被输入到模拟信号处理部分20。该模拟信号处理部分20包括:相关双取样电路(CDS),用于从模拟信号中除去噪声;自动增益控制器(AGC),用于控制模拟信号的增益;以及A/D转换器(ADC),用于将模拟信号转换成数字信号。以下,由模拟信号处理部分20执行的处理被称为″模拟信号处理″。被转换成数字信号的图像数据是CCD-RAW数据,其中每一像素均具有RGB密度值。
定时发生器21是用于产生定时信号的发生器,该定时信号被输入到快门驱动部分17、CCD控制部分19和模拟信号处理部分20,从而使释放按钮的操作、快门16的开/关、CCD 18的电荷采集、以及模拟信号处理部分20的处理同步。
闪光控制部分23使得闪光灯24在拍摄时发光。
图像输入控制器25把从模拟信号处理部分20输入的CCD-RAW数据写入到帧存储器26中。
帧存储器26是当对图像数据执行稍后将被描述的各种类型的图像处理(信号处理)时所使用的工作存储器,并且由例如与具有固定频率的总线时钟信号同步地执行数据传送的SDRAM(同步动态存储器)构成。
显示控制部分27用于使得液晶监视器28显示作为直通图像(through images)而存储在帧存储器26中的图像数据,或在重放模式时显示存储在记录介质35中的图像数据。直通图像是在成像模式被选定时由CCD 18以预定的时间间隔连续地获得的
AF处理部分30和AE/AWB处理部分31根据预图像来确定成像条件。预图像是基于作为由CCD 18执行预成像的结果而存储在帧存储器26中的图像数据的图像,该预图像是由CPU 40已经检测出的在释放按钮被按下一半时产生的按下一半信号。
AF处理部分30根据预图像来执行AF处理。更具体地说,根据从直通图像检测出的面部或眼睛的位置和大小,在预图像上设置一个聚焦框,并计算出聚焦信号,该聚焦信号是在从邻近到无穷逐渐移动聚焦透镜10a的同时,相对于该聚焦框所获得的高频信号的相加总和。随后,把给出聚焦信号的聚焦透镜的步进位置确定为聚焦位置。在设置多个聚焦框的情况下,相对于每个聚焦框,可获得最大聚焦信号值,并且把给出该最大聚焦信号值的聚焦透镜的步进位置确定为每聚焦框的聚焦位置。随后,输出用于移动聚焦透镜10a的聚焦驱动量数据,以便在聚焦位置上得到聚焦。以下,在本实施例中,把设置聚焦框之后的处理称为调焦。
AE/AWB处理部分31根据预图像来测量被摄物亮度,确定ISO敏感度、光圈值、快门速度等,并且把ISO敏感度数据、光圈值数据、以及快门速度数据确定为曝光设定值(AE处理),以及自动调节拍摄时的白平衡(AWB处理)。
图像处理部分32对于最终图像的图像数据执行图像质量校正,例如灰度校正、清晰度校正、色彩校正等。此外其执行YC处理,其中把CCD-RAW数据转换成为亮度信号数据的Y数据和YC数据,YC数据包括为蓝色差信号的Cb数据和为红色差信号的Cr数据。在此使用的术语″最终图像″是指基于图像数据的图像,该图像数据是通过在释放按钮被完全按下而执行主拍摄时由CCD 18拾取,并经模拟信号处理部分20和图像输入控制器25而被存储在该帧存储器16中的图像数据。
在图像处理部分32执行了图像质量校正和转换之后,通过对图像数据执行压缩,压缩/扩展处理部分33产生例如JPEG格式的图像文件。包括辅助信息的标签被附加到该图像文件,辅助信息包括基于例如Exif格式等存储的拍摄的日期和时间等。
介质控制部分34获得对记录介质35的访问,以控制图像文件的读/写操作。内部存储器36存储将被设置在数码相机1中的各种常数、将要由CPU 40执行的程序等。
面部检测部分37从一个直通图像中检测人物的面部。此外,其还按需从预图像或最终图像中检测出人的面部。
眼睛检测部分38从面部检测部分37检测出的面部来检测眼睛。
估计值计算部分39计算出相对于景深的估计值。
随后,将描述在AF处理时的面部检测部分37、眼睛检测部分38、以及估计计算部分39的操作。
CPU 40响应于来自包括操作***2、AF处理部分30等各种部分的信号来控制数码相机1的主体的每一部分。此外,CPU 40控制面部检测部分37,以从直通图像检测出面部区域。而且,CPU 40控制面部检测部分37、眼睛检测部分38、估计计算部分39、以及AF处理部分30,以执行AF处理。
现将描述在第一实施例中执行的控制过程。图2是在第一实施例中执行的AF处理的流程图。当给数码相机1供电时,并获得直通图像时,由CPU 40开始该处理过程,并且面部检测部分37从该直通图像检测出面部(步骤ST1)。面部检测结果包括被检测出的面部的大小和位置信息。在没有检测出面部的情况下,检测结果将提供指示不存在面部的信息。面部检测部分37检测包括在直通图像内的全部面部。
其中,作为在此使用的面部检测方法是,在图像上逐位移动具有确定尺寸的检测框,以从在每一移动位置的检测框中的图像来计算出特征量,然后,计算出具有预定面部特征量的匹配水平,并且把其中该匹配水平变为大于或等于阈值Th0的检测框的位置检测为面部。在这里,检测框的尺寸变化可实现不同尺寸面部的检测。
这可从图3所示的直通图像中检测出由矩形检测框包围的面部区域F1至F3。应该注意的是,当使用预图像执行调焦处理时,检测框可用作聚焦框。
应该理解,面部检测方法并不局限于此,而是可以使用任何面部检测方法,例如把被检测出的具有肤色并围绕面部轮廓形状的图像的矩形区域作为面部的方法、把被检测出的具有面部轮廓形状的图像的区域作为面部的方法,或类似的方法等。
随后,CPU 40确定释放按钮是否被按下一半(步骤ST2),如果步骤ST2是否定的,则该过程返回步骤ST1。这将导致重复地从直通图像中检测面部。如果步骤ST2是肯定的,则确定是否检测出面部(步骤ST3),并且如果步骤ST3是否定的,则AF处理部分30在视角的中心设置聚焦框并且执行调焦,以便使用通过释放按钮的按下一半获得的预图像来对视角的中心进行聚焦(步骤ST4)。如果步骤ST3是肯定的,则确定是否检测出了多个面部(步骤ST5)。
如果步骤ST5是肯定的,则选择检测出的面部之一用于调焦(步骤ST6)。更具体地说,把具有最大尺寸或最接近图像中心定位的面部选择作为用于调焦的面部。这将产生图2所示的要被选择的面部F2。作为选择,可以选择在面部检测时具有最高匹配水平的面部。接下来,AF处理部分30根据选择的面部与视角的比例来计算出数码相机1和被选择的面部之间的距离L(步骤ST7)。应该注意的是,当步骤ST5是否定时,该处理过程进行到步骤ST7。
人面部的大小不会因人不同而变化很大,面部与视角比例基本上以恒速随着与从数码相机1的距离变化,而不取决于个人。因此,根据被检测出的面部与整个图像的比例,可以计算出到被摄物的距离L。在数码相机1被预置来先于面部检测而执行初步AF处理的情况下,可以根据在那时计算出的透镜移动量数据来计算数码相机1到被摄物的距离L。
随后,估计值计算部分39根据下面公式(1)计算出估计值,该估计值表示在由面部检测部分37检测出的面部所在位置的景深(步骤ST8)。
DOF=δFL2/(f2-δFL)-δFL2/(f2+δFL) (1)
其中,DOF是景深、F是光圈值、f是透镜的焦距、δ是可允许模糊圈的半径。其中光圈值、透镜焦距和允许模糊圈的半径对于数码相机1来说是唯一值,因此可将它们存储在内部存储器36中并在计算估计值时使用。
在这里,应该注意,其中的景深DOF本身被用作表示景深的估计值。但其并不局限于此,而是可以使用任何值,只要使用的值能够表示景深DOF即可。
随后,AF处理部分30确定表示景深的估计值是否小于或等于预定的阈值Th1(步骤ST9)。例如,阈值Th1可以是3cm。如果步骤ST9是否定的,则AF处理部分30执行调焦,以便对在步骤ST5中选择的面部进行聚焦(步骤ST10)。更具体地说,使用图3所示的面部区域F2作为聚焦框来执行调焦。
同时,如果步骤ST9是肯定的,则眼睛检测部分38检测包括在步骤ST6中检测出的面部中的眼睛(步骤ST11)。更具体地说,在目标面部区域中的图像上逐位移动矩形眼图案,以计算出在每一移动位置的匹配水平,并将其中匹配水平变为大于或等于预定阈值Th2的眼图案位置的坐标检测为眼睛。这将导致在面部区域F2内的眼区E1和E2被检测出,如图4所示。
随后,AF处理部分30执行调焦,以便对被检测出的眼睛进行聚焦(步骤ST12)。更具体地说,使用在面部区域F2中的被检测出的眼区E1和E2作为聚焦框来执行调焦,如图4所示。
步骤ST4、步骤ST10、或步骤ST12之后,CPU 40确定释放按钮是否被完全按下(步骤ST13)。如果步骤ST13为否定的,则过程返回到步骤ST1。而如果步骤ST13是肯定的,则执行主拍摄(步骤ST14),并结束该过程。
图像处理部分32对由主拍摄获得的CCD-RAW数据进行处理。随后,压缩/扩展处理部分33以JPEG压缩格式等来对处理过的CCD-RAW数据执行压缩,以产生图像文件。由介质控制部分34把产生的图像文件记录在记录介质35上。
在景深为浅的场合,如果不对眼睛聚焦,则图像将给出模糊的效果。相反,在景深为深的场合,即使不对眼睛聚焦而仅对面部聚焦,图像将不会给出模糊的效果。
根据第一实施例,计算出表示在被检测出的面部的位置的景深的估计值,并且根据该估计值有选择地执行下列操作:执行调焦以对被检测出的面部进行聚焦,或眼睛检测部分38进一步执行眼睛检测以对被检测的眼睛进行聚焦。因此,不同于在上述专利公开中描述的总是执行面部检测和眼睛检测的方法,本发明的技术方案是仅当景深为浅时才执行眼睛检测和调焦以对被检测出的眼睛进行聚焦。因此,在景深为深的情况下,不执行眼睛检测,从而可以降低AF处理所需的处理时间和功耗。
接下来,将描述本发明的第二实施例。图5是数码相机的构造示意框图,该数码相机应用了根据本发明第二实施例的调焦设备。在第二实施例中,与第一实施例完全相同的部件被给出相同的标号,并将不在此另作详细说明。根据第二实施例的数码相机1A与根据第一实施例的数码相机1的不同在于面部检测部分37还包括面部方向确定部分45,其用于确定被检测出的面部的方向。
现将描述在第二实施例中执行的控制过程。图6和图7图示了在第二实施例中执行的AF处理的流程图。当给数码相机1A供电并获得直通图像时,由CPU 40来开始处理过程,并且面部检测部分37从该直通图像中检测出面部(步骤ST21)。
随后,面部方向确定部分45通过面部检测部分37确定被检测出的面部的方向(步骤ST22)。更具体地说,将图8所示的朝左面部检测模板TL和朝右面部检测模板TR与被检测出的面部执行模板匹配,并且将对应于具有较大匹配水平的模板的面部方向确定为被检测出的面部的方向。模板TL和TR分别根据朝左面部和朝右面部的特征量具有信号值,这些信号值是预先通过大量的面部的学习过程而计算出来的,并被存储在内存储器36中。
随后,CPU 40确定释放按钮是否被按下一半(步骤ST23),如果步骤ST23是否定的,则该过程返回步骤ST21。这将导致重复地从直通图像检测面部。如果步骤ST23是肯定的,则确定是否检测出面部(步骤ST24),如果步骤ST24是否定的,则AF处理部分30执行调焦,以便对视角的中心进行聚焦(步骤ST25)。如果步骤ST24是肯定的,则确定是否检测出了多个面部(步骤ST26)。
如果步骤ST26是肯定的,则选择被检测出的面部之一用于调焦(步骤ST27)。随后,AF处理部分30根据被选择的面部与该视角的比例来计算出数码相机1A和被选择的面部之间的距离L(步骤ST28)。如果步骤ST26为否定的,则该过程进行到步骤ST28。
随后,估计值计算部分39根据上述公式(1)计算出估计值,该估计值表示在由面部检测部分37检测出的面部所在位置的景深(步骤ST29)。
随后,AF处理部分30确定表示该景深的估计值是否小于或等于预定的阈值Th1(步骤ST30)。如果步骤ST30是否定的,则AF处理部分30执行调焦,以便对在步骤ST27中选择的面部进行聚焦(步骤ST31)。
同时,如果步骤ST30是肯定的,则眼睛检测部分38检测包括在步骤ST27中检测出的面部中的眼睛(步骤ST32)。随后,AF处理部分30确定面部的方向是否为左(步骤ST33)。如果步骤ST33是肯定的,则执行调焦,以便对左眼进行聚焦(步骤ST34)。同时,如果步骤ST33是否定的,则执行调焦,以便对右眼进行聚焦(步骤ST35)。
步骤ST25、步骤ST31、步骤ST34或步骤ST35之后,CPU 40确定释放按钮是否被完全按下(步骤ST36)。如果步骤ST36为否定的,则该过程返回到步骤ST21。而如果步骤ST36是肯定的,则执行主拍摄(步骤ST37),并结束该处理过程。
以此方式,在第二实施例中,确定被检测出的面部的方向,并根据该面部方向来确定将被进行聚焦的眼睛。这将使得更适当的眼睛被进行聚焦,尤其在面部稍微朝向侧面并两个眼睛都被检测出的情况下,从而能获得不给出模糊效果的图像。
接下来,将描述本发明的第三实施例。根据第三实施例的数码相机具有与根据第二实施例的数码相机1A完全相同的结构,仅是所执行的控制过程不同,因此将不再详细地说明该构造。
现将描述在第三实施例中执行的控制过程。图9和图10图示了在第三实施例中执行的AF处理的流程图。当给数码相机供电并获得直通图像时,由CPU 40开始该处理过程,并且面部检测部分37从该直通图像检测出面部(步骤ST41)。
随后,面部方向确定部分45确定由面部检测部分37检测出的面部的方向(步骤ST42)。随后,CPU 40确定释放按钮是否被按下一半(步骤ST43),如果步骤ST23是否定的,则该过程返回步骤ST41。这将导致重复地从直通图像中检测面部。如果步骤ST43是肯定的,则确定是否检测出面部(步骤ST44),如果步骤ST44是否定的,则AF处理部分30执行调焦,以便对视角的中心进行聚焦(步骤ST45)。如果步骤ST24是肯定的,则确定是否检测出了多个面部(步骤ST46)。
如果步骤ST46是肯定的,则选择被检测出的面部之一用于调焦(步骤ST47)。随后,AF处理部分30根据被选择的面部与该视角的比例来计算出该数码相机1和被选择的面部之间的距离L(步骤ST48)。如果步骤ST46为否定的,则该处理过程进行到步骤ST48。
随后,估计值计算部分39根据上述公式(1)计算出估计值,该估计值表示由面部检测部分37检测出的面部所在位置的景深(步骤ST49)。
随后,该AF处理部分30确定表示景深的估计值是否小于或等于预定的阈值Th1(步骤ST50)。如果步骤ST50是否定的,则AF处理部分30执行调焦,以便对在步骤ST47中选择的面部进行聚焦(步骤ST51)。
同时,如果步骤ST50是肯定的,则眼睛检测部分38将相对于在步骤ST47中检测出的面部而设置一个区域,该区域用于执行依赖面部方向的眼睛检测(步骤ST52)。图11图示了如何设置眼睛检测区域。如图11所示,如果面部被确定为朝左,则在面部检测框中的区域A1被设置为眼睛检测区域,而如果面部被确定为朝右,则在面部检测框中的区域A2被设置为眼睛检测区域。随后,在被确定的眼睛检测区中执行眼睛检测(步骤ST53),并执行调焦,以便对被检测出的眼睛进行聚焦(步骤ST54)。
步骤ST45、步骤ST51、或步骤ST54之后,CPU 40确定释放按钮是否被完全按下(步骤ST55)。如果步骤ST55为否定的,则该程序返回到步骤ST41。而如果步骤ST55是肯定的,则执行主拍摄(步骤ST56),并结束该处理过程。
以此方式,在第三实施例中,确定被检测出的面部的方向,并根据被确定的面部方向来确定眼睛检测区。这将实现更有效的眼睛检测,尤其在面部稍微朝向侧面的情况下,从而能进一步降低用于调焦所需的时间。
在第一到第三实施例中,当检测出多个面部时,选择这些面部之一用于调焦。然而在诸如肖像拍摄之类的某些情况中,仅拍摄单个人物。在此情况下,可以在不执行关于是否检测出多个面部的确定的情况下,立即计算出距离L。
至此,已经描述了根据本发明实施例的数码相机。本发明的另一实施例是一种程序,该程序使得计算机起到对应于AF处理部分30、面部检测部分37、眼睛检测部分38、估计值计算部分39、以及面部方向确定部分45的装置的作用,从而使得该计算机能执行在图2、图6、图7、图9和图10中图示的那些处理过程。而且,本发明的另一实施例是一种计算机可读记录介质,在其上记录有这种程序。
Claims (6)
1.一种调焦设备,包括:
面部检测装置,其用于检测包括在由拍摄获得的图像中的人物的面部;
眼睛检测装置,其用于检测包括在图像中的人物的眼睛;
估计值计算装置,其用于计算出表示在被检测出的面部的位置的景深的估计值;以及
调焦装置,用于基于所述估计值而有选择地执行下列操作:(a)执行调焦,以便至少对被检测出的面部进行聚焦,或(b)使得所述眼睛检测装置来检测出该人物的眼睛,并且执行调焦,以便对被检测出的眼睛进行聚焦。
2.根据权利要求1所述的调焦设备,其中:
所述设备还包括面部方向确定装置,其用于确定面部的方向;以及
当使得所述眼睛检测装置来检测人物的眼睛时,所述调焦装置用于根据所述面部的方向来确定将被进行聚焦的眼睛。
3.根据权利要求1所述的调焦设备,其中:
所述设备还包括面部方向确定装置,其用于确定面部的方向;以及
当检测人物的眼睛时,所述眼睛检测装置设置用来检测眼睛的区域,并且检测出在确定的区域中的眼睛。
4.根据权利要求1所述的调焦设备,其中所述估计值计算装置用于根据焦距、光圈值、与构成拍摄装置的透镜的焦点对准位置的距离、和面部大小中的至少一个的信息来计算出估计值。
5.根据权利要求1所述的调焦设备,其中,当检测出多个面部时,所述面部检测装置用于确定将被进行聚焦的一个面部。
6.一种调焦方法,其包括以下步骤:
检测包括在由拍摄获得的图像中的人物的面部;
计算出表示在被检测出的面部的位置的景深的估计值;以及
基于所述估计值而有选择地执行下列操作:(a)执行调焦,以便至少对被检测出的面部进行聚焦,或(b)检测出人物的眼睛,并且执行调焦,以便对被检测出的眼睛进行聚焦。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007-125293 | 2007-05-10 | ||
JP2007125293A JP4782725B2 (ja) | 2007-05-10 | 2007-05-10 | 合焦装置および方法並びにプログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
CN101304487A true CN101304487A (zh) | 2008-11-12 |
Family
ID=39969146
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNA2008100961747A Pending CN101304487A (zh) | 2007-05-10 | 2008-05-09 | 调焦设备、方法和程序 |
Country Status (3)
Country | Link |
---|---|
US (1) | US8106999B2 (zh) |
JP (1) | JP4782725B2 (zh) |
CN (1) | CN101304487A (zh) |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102238335A (zh) * | 2010-04-30 | 2011-11-09 | 奥林巴斯映像株式会社 | 摄影设备以及图像数据生成方法 |
CN102265601A (zh) * | 2008-12-24 | 2011-11-30 | 三洋电机株式会社 | 摄像装置和笑脸记录程序 |
CN102375323A (zh) * | 2010-08-20 | 2012-03-14 | 佳能株式会社 | 摄像***和摄像设备 |
CN102572269A (zh) * | 2010-12-10 | 2012-07-11 | 奥林巴斯映像株式会社 | 摄像装置以及af控制方法 |
CN103259981A (zh) * | 2011-11-25 | 2013-08-21 | 王丞轩 | 景深变化侦测***、接收装置、景深变化侦测及连动*** |
CN104243802A (zh) * | 2013-06-10 | 2014-12-24 | 佳能株式会社 | 摄像设备和摄像方法 |
WO2016197494A1 (zh) * | 2015-06-12 | 2016-12-15 | 中兴通讯股份有限公司 | 对焦区域调整方法和装置 |
CN106797432A (zh) * | 2014-09-05 | 2017-05-31 | 三星电子株式会社 | 摄影装置和摄影方法 |
CN108833795A (zh) * | 2018-08-29 | 2018-11-16 | 北京七鑫易维信息技术有限公司 | 一种图像获取设备的对焦方法及装置 |
CN109905599A (zh) * | 2019-03-18 | 2019-06-18 | 信利光电股份有限公司 | 一种人眼对焦方法、装置及可读存储介质 |
WO2021168749A1 (en) * | 2020-02-27 | 2021-09-02 | Qualcomm Incorporated | Dynamic adjustment of a region of interest for image capture |
CN113475055A (zh) * | 2018-12-28 | 2021-10-01 | 株式会社尼康 | 电子设备、照相机以及程序 |
Families Citing this family (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8300136B2 (en) * | 2008-06-26 | 2012-10-30 | Canon Kabushiki Kaisha | Imaging apparatus for detecting a face image and imaging method |
US8325980B1 (en) * | 2008-12-16 | 2012-12-04 | Sprint Communications Company L.P. | Providing indications of object attributes |
KR20110029002A (ko) * | 2009-09-14 | 2011-03-22 | 삼성전자주식회사 | 얼굴 판단 장치 및 방법 |
KR101594298B1 (ko) | 2009-11-17 | 2016-02-16 | 삼성전자주식회사 | 디지털 영상 처리기에서 포커스 조정 장치 및 방법 |
JP5459031B2 (ja) * | 2010-04-13 | 2014-04-02 | ソニー株式会社 | 情報処理装置、情報処理方法及びプログラム |
TWI423661B (zh) * | 2010-07-09 | 2014-01-11 | Altek Corp | Face block assisted focus method |
US8294810B2 (en) * | 2010-07-09 | 2012-10-23 | Altek Corporation | Assisting focusing method for face block |
US8988512B2 (en) | 2011-04-14 | 2015-03-24 | Mediatek Inc. | Method for adjusting playback of multimedia content according to detection result of user status and related apparatus thereof |
JP5156108B2 (ja) * | 2011-04-23 | 2013-03-06 | オリンパスイメージング株式会社 | 撮像装置および撮像方法 |
JP5959923B2 (ja) * | 2012-04-26 | 2016-08-02 | キヤノン株式会社 | 検出装置、その制御方法、および制御プログラム、並びに撮像装置および表示装置 |
JP6157288B2 (ja) * | 2012-12-19 | 2017-07-05 | キヤノン株式会社 | 画像処理装置およびその制御方法、撮像装置 |
JP6501536B2 (ja) * | 2015-02-02 | 2019-04-17 | キヤノン株式会社 | 撮像装置及びその制御方法、プログラム、記憶媒体 |
CN106060373B (zh) | 2015-04-03 | 2019-12-20 | 佳能株式会社 | 焦点检测装置及其控制方法 |
KR102392789B1 (ko) * | 2015-10-21 | 2022-05-02 | 삼성전자주식회사 | 초점 설정을 위한 방법 및 그 전자 장치 |
US10269098B2 (en) * | 2016-11-01 | 2019-04-23 | Chun Ming Tsang | Systems and methods for removing haze in digital photos |
CN109975948A (zh) * | 2017-12-28 | 2019-07-05 | 格科微电子(上海)有限公司 | 控制对焦模组运动得到景深信息的方法 |
JP7129294B2 (ja) * | 2018-09-21 | 2022-09-01 | キヤノン株式会社 | 電子機器および領域選択方法 |
US11729502B2 (en) * | 2021-04-28 | 2023-08-15 | Canon Kabushiki Kaisha | Apparatus including focusing function and method of the same |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001215403A (ja) | 2000-02-01 | 2001-08-10 | Canon Inc | 撮像装置および焦点の自動検出方法 |
JP4536218B2 (ja) | 2000-06-19 | 2010-09-01 | オリンパス株式会社 | 合焦装置及び撮像装置 |
JP4536248B2 (ja) | 2000-11-24 | 2010-09-01 | オリンパス株式会社 | 撮像装置 |
JP2003107335A (ja) | 2001-09-28 | 2003-04-09 | Ricoh Co Ltd | 撮像装置、自動合焦方法、およびその方法をコンピュータが実行するためのプログラム |
US6895181B2 (en) * | 2002-08-27 | 2005-05-17 | Olympus Corporation | Camera and distance measuring method thereof |
US20040207743A1 (en) * | 2003-04-15 | 2004-10-21 | Nikon Corporation | Digital camera system |
JP4553346B2 (ja) | 2003-10-22 | 2010-09-29 | キヤノン株式会社 | 焦点調節装置及び焦点調節方法 |
CN1716078B (zh) * | 2004-06-03 | 2012-03-28 | 佳能株式会社 | 图像拾取设备和图像拾取方法 |
JP5098259B2 (ja) | 2006-09-04 | 2012-12-12 | 株式会社ニコン | カメラ |
-
2007
- 2007-05-10 JP JP2007125293A patent/JP4782725B2/ja not_active Expired - Fee Related
-
2008
- 2008-04-29 US US12/111,821 patent/US8106999B2/en not_active Expired - Fee Related
- 2008-05-09 CN CNA2008100961747A patent/CN101304487A/zh active Pending
Cited By (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102265601A (zh) * | 2008-12-24 | 2011-11-30 | 三洋电机株式会社 | 摄像装置和笑脸记录程序 |
CN102238335A (zh) * | 2010-04-30 | 2011-11-09 | 奥林巴斯映像株式会社 | 摄影设备以及图像数据生成方法 |
CN102238335B (zh) * | 2010-04-30 | 2014-04-16 | 奥林巴斯映像株式会社 | 摄影设备以及图像数据生成方法 |
CN102375323A (zh) * | 2010-08-20 | 2012-03-14 | 佳能株式会社 | 摄像***和摄像设备 |
CN102375323B (zh) * | 2010-08-20 | 2016-02-24 | 佳能株式会社 | 摄像***和摄像设备 |
CN102572269A (zh) * | 2010-12-10 | 2012-07-11 | 奥林巴斯映像株式会社 | 摄像装置以及af控制方法 |
CN102572269B (zh) * | 2010-12-10 | 2015-04-08 | 奥林巴斯映像株式会社 | 摄像装置以及af控制方法 |
CN103259981A (zh) * | 2011-11-25 | 2013-08-21 | 王丞轩 | 景深变化侦测***、接收装置、景深变化侦测及连动*** |
CN104243802A (zh) * | 2013-06-10 | 2014-12-24 | 佳能株式会社 | 摄像设备和摄像方法 |
CN104243802B (zh) * | 2013-06-10 | 2017-09-08 | 佳能株式会社 | 摄像设备和摄像方法 |
CN106797432A (zh) * | 2014-09-05 | 2017-05-31 | 三星电子株式会社 | 摄影装置和摄影方法 |
CN106797432B (zh) * | 2014-09-05 | 2020-03-03 | 三星电子株式会社 | 摄影装置和摄影方法 |
WO2016197494A1 (zh) * | 2015-06-12 | 2016-12-15 | 中兴通讯股份有限公司 | 对焦区域调整方法和装置 |
CN108833795A (zh) * | 2018-08-29 | 2018-11-16 | 北京七鑫易维信息技术有限公司 | 一种图像获取设备的对焦方法及装置 |
CN108833795B (zh) * | 2018-08-29 | 2020-06-19 | 北京七鑫易维信息技术有限公司 | 一种图像获取设备的对焦方法及装置 |
CN113475055A (zh) * | 2018-12-28 | 2021-10-01 | 株式会社尼康 | 电子设备、照相机以及程序 |
CN113475055B (zh) * | 2018-12-28 | 2023-10-13 | 株式会社尼康 | 电子设备、照相机以及程序 |
CN109905599A (zh) * | 2019-03-18 | 2019-06-18 | 信利光电股份有限公司 | 一种人眼对焦方法、装置及可读存储介质 |
WO2021168749A1 (en) * | 2020-02-27 | 2021-09-02 | Qualcomm Incorporated | Dynamic adjustment of a region of interest for image capture |
CN115136580A (zh) * | 2020-02-27 | 2022-09-30 | 高通股份有限公司 | 用于图像捕捉的感兴趣区域的动态调整 |
Also Published As
Publication number | Publication date |
---|---|
JP2008281733A (ja) | 2008-11-20 |
US20080278587A1 (en) | 2008-11-13 |
US8106999B2 (en) | 2012-01-31 |
JP4782725B2 (ja) | 2011-09-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101304487A (zh) | 调焦设备、方法和程序 | |
CN101415074B (zh) | 成像装置和成像控制方法 | |
CN101137012B (zh) | 拍摄装置和方法 | |
CN101237530B (zh) | 照相装置,控制照相装置的方法 | |
CN101136066B (zh) | 拍摄装置、方法 | |
US8477993B2 (en) | Image taking apparatus and image taking method | |
US8300112B2 (en) | Image processing apparatus and control method therefor | |
JP4861952B2 (ja) | 画像処理装置及び撮像装置 | |
CN100553296C (zh) | 拍摄装置和曝光控制方法 | |
US8310589B2 (en) | Digital still camera including shooting control device and method of controlling same | |
JP2008141740A (ja) | 撮影装置および方法並びにプログラム | |
CN101241549A (zh) | 拍摄设备、方法和计算机程序产品 | |
CN103842903B (zh) | 成像设备、成像方法以及程序 | |
CN103458183A (zh) | 摄像装置和摄像装置的控制方法 | |
US8228423B2 (en) | Imaging apparatus and method for controlling flash emission | |
CN101359150B (zh) | 摄像设备及其控制方法 | |
JP5180349B2 (ja) | 撮影装置および方法並びにプログラム | |
JP4449354B2 (ja) | 画像撮影装置及びプログラム | |
JP4799501B2 (ja) | 撮影装置、撮影装置の制御方法およびプログラム | |
JP4818999B2 (ja) | 撮影装置および方法並びにプログラム | |
KR20090052298A (ko) | 촬상 장치, 방법 및 프로그램 | |
JP5027580B2 (ja) | 撮影装置および方法並びにプログラム | |
JP2009081636A (ja) | 画像記録装置及び撮影方法 | |
JP5045538B2 (ja) | 撮像装置、及び、プログラム | |
JP5027055B2 (ja) | 画像処理装置および方法並びにプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C12 | Rejection of a patent application after its publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20081112 |