CN1738364A - 图像摄取设备及其控制方法 - Google Patents

图像摄取设备及其控制方法 Download PDF

Info

Publication number
CN1738364A
CN1738364A CNA2005100926063A CN200510092606A CN1738364A CN 1738364 A CN1738364 A CN 1738364A CN A2005100926063 A CNA2005100926063 A CN A2005100926063A CN 200510092606 A CN200510092606 A CN 200510092606A CN 1738364 A CN1738364 A CN 1738364A
Authority
CN
China
Prior art keywords
unit
image capture
warning
subject
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2005100926063A
Other languages
English (en)
Inventor
福井贵明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN1738364A publication Critical patent/CN1738364A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00838—Preventing unauthorised reproduction
    • H04N1/00856—Preventive measures
    • H04N1/00864—Modifying the reproduction, e.g. outputting a modified copy of a scanned original
    • H04N1/00867—Modifying the reproduction, e.g. outputting a modified copy of a scanned original with additional data, e.g. by adding a warning message
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/21—Intermediate information storage
    • H04N1/2104—Intermediate information storage for one or a few pictures
    • H04N1/2112—Intermediate information storage for one or a few pictures using still video cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/634—Warning indications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Studio Devices (AREA)

Abstract

本发明所提出的诸如数码相机或数字静物摄像机等的图像摄取设备在拍摄期间能通过图像处理确定被摄对象的状态和按照确定结果执行重新拍摄或给出提示重新拍摄的警告很容易能拍摄到最佳的图像。

Description

图像摄取设备及其控制方法
技术领域
本发明与在诸如数码相机或数字摄像机等的图像摄取设备内用来摄取最佳图像的控制方法有关。
背景技术
作为检查在图像摄取模式摄取的图像的功能，诸如数码相机或数字摄像机等的图像摄取设备具有在摄取图像后在液晶显示屏(LCD)上直接显示所拍摄的图像的REC检查功能。
在再现模式(重放模式)，图像摄取设备具有按照用户操作相继显示所拍摄的一系列图像的功能。在图像摄取设备(数码相机或数字摄像机)内使用这样的功能时，由于用来检查所摄取的图像的电子取景器(EVF)的屏幕很小，因此在很多情况下要将所摄取的图像缩小许多显示。
所以，即使是拍摄不能如用户所想象的条件下执行，例如被摄者的眼睛没有睁开、被摄对象处在红眼状态、被摄者面部亮度过高或焦点未对准被摄者，如果所显示的被摄对象的图像很小，用户也很难检查出这样的情况。
因此，这样的图像摄取设备具有使用户能通过按照用户按钮操作放大图像来检查所摄取的图像的功能。
然而，每次拍摄就要放大所摄取的图像那是很费时和麻烦的。此外，如果用户由于未完成摄取图像而准备再拍摄的话，甚至在用户操作期间被摄对象的构图也可能改变。
有些用户可能在拍摄了多个图像后集中检查所摄取的图像，而不是每拍摄一次就检查一下图像。
在这种情况下，只是在拍摄第一个图像后过了一段时间用户才可以发现所摄取的图像不是一个所想象的图像。在这种情况下，即使用户由于未完成所摄取的图像而准备再拍摄，在用户操作期间被摄对象的构图也可能改变。
日本专利申请公开No.2000-292853揭示了一种技术，可以通过检测被摄对象的面部和眼睛的位置、自动删除作为输出的相片不合适的例如眼睛没有睁开的图像，始终输出最佳的图像。
以上这种技术是以检测被摄对象的眼睛的位置、确定眼睛的状态和只有在眼睛睁开时才执行拍摄为基础的。
因此，以上这种技术在以被摄人物是摄影中的拍摄目标而被摄人物的眼睛睁开为前提执行摄取的情况下是行之有效的。
然而，在用户随时用数码相机或数字摄像机执行拍摄的一般方法中，可以摄取眼睛没有睁开的状态，而只是按照被摄者的状态决定处理的方法并不是优选的。
发明内容
本发明考虑了以上情况，旨在提供一种能通过图像处理确定被摄者的状态、按照所确定的结果发出提示重拍的警告方便地摄取最佳图像的图像摄取设备。
按照本发明的一个方面，提供一种图像摄取设备，包括一个配置成按照用户的指令摄取图像数据的图像摄取单元、一个配置成从所摄取的图像数据中检测一个被摄对象区域的被摄对象检测单元、一个配置成根据所摄取的图像数据产生显示图像数据的信号处理单元和一个配置成显示由信号处理单元产生的显示图像数据的显示单元，其特征是所述图像摄取设备还包括：一个配置成根据被摄对象检测单元的检测结果确定是否发出警告的确定单元；一个配置成如果确定单元确定为应发出警告就发出警告的通知单元；以及一个配置成如果通知单元发出了警告就按照警告内容改变图像摄取单元的控制参数使图像摄取单元摄取图像数据的控制单元。
按照本发明的一个方面，提供一种用于图像摄取设备的控制方法，包括一个按照用户的指令从所摄取的图像数据中检测一个被摄对象区域的被摄对象检测步骤、一个根据按照用户的指令摄取的图像数据产生显示图像数据的信号处理步骤和一个显示信号处理步骤所产生的显示图像数据的显示步骤，其特征是所述控制方法还包括：一个根据被摄对象检测步骤的检测结果确定是否发出警告的确定步骤；一个在确定步骤确定为应发出警告时发出警告的通知步骤；以及一个在通知步骤发出了警告时，按照警告内容改变一个图像摄取单元的控制参数，以使图像摄取单元摄取图像数据的控制步骤。
按照本发明的另一个方面，提供一种图像摄取设备，包括一个配置成按照用户的指令摄取图像数据的图像摄取单元、一个配置成从所摄取的图像数据中检测一个被摄对象区域的被摄对象检测单元、一个配置成根据所摄取的图像数据产生显示图像数据的信号处理单元和一个配置成显示由信号处理单元产生的显示图像数据的显示单元，其特征是所述图像摄取设备还包括：一个配置成根据被摄对象检测单元的检测结果确定被摄对象至少两个不同的状态的确定单元；一个配置成按照确定单元的确定结果发出警告的通知单元；以及一个配置成如果通知单元发出了警告，按照确定单元的确定结果改变图像摄取单元的控制参数使图像摄取单元摄取图像数据的控制单元。
按照本发明的另一个方面，提供一种用于图像摄取设备的控制方法，包括一个按照用户的指令从所摄取的图像数据中检测一个被摄对象区域的被摄对象检测步骤、一个根据按照用户的指令摄取的图像数据产生显示图像数据的信号处理步骤和一个显示信号处理步骤所产生的显示图像数据的显示步骤，其特征是所述控制方法还包括：一个根据被摄对象检测步骤的检测结果确定被摄对象至少两个不同的状态的确定步骤；一个按照确定步骤的确定结果发出警告的通知步骤；以及一个如果通知步骤发出了警告，按照确定步骤的确定结果改变一个图像摄取单元的控制参数使图像摄取单元摄取图像数据的控制步骤。
按照本发明的另一个方面，所提供的程序可以使一个计算机执行所述控制方法。
从以下结合附图对一些典型实施例的详细说明中可以清楚地看到本发明的其他特征。
附图简要说明
作为本说明书的一个组成部分的这些附图例示了本发明的实施例，与所作的说明一起用来说明本发明的原理。在这些附图中：
图1为示出按照本发明的第一实施例设计的图像摄取设备的方框图；
图2为示出了按照第一实施例进行处理的流程图；
图3A至3C为例示按照第一实施例进行面部检测的方法的示意图；
图4为示出第一实施例的面部检测方法的典型处理的流程图；
图5为示出在CTELab色空间内典型色度的曲线图；
图6为示出按照第一实施例进行模板匹配的示意图；
图7为示出按照第一实施例设计的警告形式的示意图；
图8为示出按照第一实施例的修改例进行的典型处理的流程图；
图9为按照本发明的第二实施例进行的典型处理的流程图；
图10为示出按照第二实施例设计的警告形式的示意图；
图11为按照本发明的第三实施例进行的典型处理的流程图。
实施例详细说明
下面将结合附图对本发明的实施例进行详细说明。
第一实施例
图1示出了按照本发明的第一实施例设计的图像摄取设备20的配置情况。将以数码相机作为图像摄取设备20的例子进行说明。
来看图1，控制单元1控制一个信号来控制图像摄取设备20的每个功能。
图像摄取单元2包括一个诸如电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)等的具有光电转换功能的固态图像传感器、一个将来自被摄对象的光导向固态图像传感器的成像光学***、一个由光圈或快门组成的用来调整到达固态图像传感器的光的光量的光量调整构件、一个调整固态图像传感器输出信号的增益的自动增益控制器(AGC)等。
图像处理单元3接收图像摄取单元2输出的信号，通过执行诸如众所周知的彩色校正处理、亮度校正处理等的信号处理，产生图像数据。
图像存储缓存器4存储图像处理单元3产生的图像数据。
信号变换单元5读取存储在图像存储缓存器4内的图像数据，将这数据变换成数据量减小了的图像数据。
面部检测单元9用存储在图像存储缓存器4内的图像数据检测图像数据内人的面部。
确定单元8确定面部检测单元9检测到的人的面部是否满足预定条件。
图像产生单元6将信号变换单元5产生的图像数据与所显示的警告组合在一起。
显示单元7用数模(D/A)变换器(未示出)将图像产生单元6的输出变换成模拟信号，显示用模拟信号表示的图像。
诸如闪速存储器等的记录单元10存储暂时存储在图像存储缓存器4内的图像数据。
图2为示出按照第一实施例进行处理的流程的流程图。应注意的是，这个流程图示出了一个在用户按了相机的释放开关(未示出)后执行的过程，以便使控制单元1产生一个记录所摄取的图像数据的指令。
在步骤S101，图像摄取单元2按照所设置的曝光值执行对固态图像传感器的曝光操作和调整固态图像传感器的输出信号的增益。
在步骤S102，图像处理单元3通过处理图像摄取单元2输出的信号产生图像数据。
在步骤S103，控制单元1将在步骤S102产生的图像数据存储在图像存储缓存器4内。步骤S104与步骤S105和S106并行执行，对存储在图像存储缓存器4内的图像数据进行处理。
在步骤S104，信号变换单元5产生分辨率低于存储在图像存储缓存器4内的分辨率的显示图像数据。
所以要变换成分辨率较低的显示图像数据是因为***由于EVF的性能在显示的分辨率上有限制而且处理高分辨率的图像数据需要较长的处理时间，因此通过变换成数据稀疏的低分辨率的图像可以减少需处理的数据量从而获得高的处理速度。
在步骤S105，面部检测单元9在步骤S103存入图像存储缓存器4的图像数据内对面部进行检测(将在下面说明)。
在步骤S106，确定单元8确定面部检测单元9检测到的面部的眼睛是否没有睁开。按照这个第一实施例，在确定为被摄对象的眼睛没有睁开时，发出一个警告。下面说明所以要将步骤S104的处理与步骤S105和S106的处理分开执行的原因。在步骤S104产生的显示图像数据是低分辨率的。因此，在确定单元8用显示图像数据进行确定时，确定结果可能有错，特别是在被摄对象很小的情况下。因此，在步骤S105和S106，用分辨率大于显示图像数据的分辨率的图像数据确定眼睛是否没有睁开，使得确定的准确度可以高于用显示图像数据的情况。应注意的是，为了提高确定速度可以产生分辨率高于在步骤S104产生的显示图像数据的分辨率但低于存储在图像存储缓存器4内的图像数据的分辨率的确定图像数据，然后可以根据确定图像数据执行面部检测和确定眼睛是否没有睁开。
在步骤S107，如果在步骤S106确定需要进行警告，图像产生单元6就将在步骤S104产生的图像数据与要显示的警告组合在一起产生新的图像数据，予以输出。如果在步骤S106确定不需进行警告，图像产生单元6就直接输出在步骤S104产生的图像数据。
在步骤S108，显示单元7接收图像产生单元106输出的图像数据，显示由图像数据表示的图像。
在步骤S109，确定在步骤S106是否已经确定为被摄对象的眼睛没有睁开。如果确定为被摄对象的眼睛不是没有睁开，过程就进至步骤S110，将存储在图像存储缓存器4内的图像数据录在诸如闪速存储器等的记录单元10上，从而完成处理。
如果在步骤S109确定为被摄对象的眼睛没有睁开，过程就进至步骤S111。在步骤S111，控制单元1保持图像摄取单元2的控制参数，诸如闪光量、感光灵敏度、快门速度等，返回步骤S101，再次驱动图像摄取单元2，以便执行固态图像传感器的曝光操作。或者，也可以是在步骤S111，控制单元1执行聚焦调整操作和曝光表测量操作设置图像摄取单元2的新控制参数(诸如闪光量、感光灵敏度、快门速度等)，然后再返回步骤S101，再次驱动图像摄取单元2，以便执行对固态图像传感器的曝光操作。
在步骤S111改变控制参数是因为可能拍摄景象随时间已改变成与第一次拍摄时不同。
于是，如果在步骤S111改变了图像摄取单元2的控制参数，控制单元1就设置所改变的控制参数，然后再返回步骤S101，再次驱动图像摄取单元2，以便执行对固态图像传感器的曝光操作。
下面将说明面部检测单元9执行的面部检测处理。
作为典型的面部检测方法，迄今为止业已有许多提议，诸如应用以神经网络为代表的学习的方法、用模板匹配从图像区域寻找一个具有诸如眼、鼻或口等的特征形状的部分如果形状相似性高就确定这个部分是一个面部的方法、检测图像的诸如肤色或眼睛形状等的特征量和应用统计分析的方法等。通常，可以综合使用多种这样的方法来执行面部检测。
特别是，日本专利申请公开No.2002-251380揭示了一种用小波变换和图像的一些特征量实现面部检测的方法。
下面说明一种通过根据彩色信息和眼睛形状特征执行模板匹配来实现面部检测的方法。
图3A至3C示出了按照第一实施例进行面部检测的方法和确定眼睛状态的方法。图4为例示第一实施例的面部检测方法的流程图。
在步骤S401，面部检测单元9从目标图像数据提取一个肤色区域。
图5为指出CIELab色空间内的典型彩色的色度图。图5内所示的椭圆区域为一个很可能是肤色的区域。
图3A示出了用于面部检测的图像数据。
图3B示出了一个与从图3A所示的图像中提取的肤色区域相应的色度区域。
在步骤S402，例如，面部检测单元9用一个高通滤波器处理用于面部检测的图像。
图3C示出了一个通过对图3B所示的图像进行高通滤波而得到的图像的例子。
按照第一实施例面部检测单元9在所提取的肤色区域内检测特征部分，诸如眼、鼻、口和眉毛等，而从肤色区域删除面部之外的部分。
在步骤S403，如图6所示，对于在步骤S402检测到的区域，用预先记录在图像摄取设备的存储器内的眼睛模板数据执行模板匹配(通过将模板数据与所摄取的图像数据相比较检验符合或相似性)，在所摄取的图像数据内检测眼睛。
在步骤S404，面部检测单元9将在步骤S403检测到的眼睛图像数据与模板匹配检测到的眼睛图像数据相比较。如果比较结果表明眼睛睁开不足、只检测到一个眼睛或没有检测到眼睛，就确定为被摄对象的眼睛没有睁开，流程结束。
图7示出了在屏幕上显示被摄对象没有睁开眼睛给出警告的情况。
在被摄对象没有睁开眼睛时，图像产生单元6在屏幕上与所摄取的图像一起显示一些字符或一个图标，以容易理解的方式给用户一个警告。
警告的方法不局限于以上所述。以上所述方法可以用语音方法、使一个LED闪烁或发光的方法等代替。
用户依据发布的警告可以当场知道需重新执行拍摄。
在图2这个流程图中，如果被摄对象的眼睛没有睁开就自动再次执行拍摄。然而，本发明并不局限于这种配置。
可以想象，有时候故意要拍摄一个可能确定单元8会确定为不合适的景象，诸如被摄对象眨眼的景象。因此，在发出警告后是否重新执行拍摄可以留待用户确定。
可以采用一种配置，通过按压一个选择按钮(未示出)可以在自动重新执行拍摄和由用户选择之间切换。
如果在发出警告时用户确定需要重新拍摄，用户可以考虑在EVF上显示的图像决定是否直接执行再次拍摄。
要确定被摄对象的眼睛是否睁开可能是困难的，因为在EVF上显示的图像分辨率较低。然而，用户根据警告可以迅速知道被摄对象眼睛没有睁开，从而可以在被摄对象的构图有显著改变前再次进行拍摄。
因此，用户可以通过将被摄对象图像的构图与被摄对象的眼睛状态相比较自由地选择是否重新执行拍摄。
按照第一实施例，参数在由于警告而执行重新拍摄时改变。然而，可以测量从上一次得到确定要发出警告的图像数据的拍摄以来的时间，如果确定已经过了一段预定时间，就可以再次执行曝光测量操作和聚焦调整操作，为图像摄取单元2设置新的控制参数。
下面将说明第一实施例的一个经修改的例子。
按照这个经修改的例子，面部检测在用户操作相机的释放开关(未示出)前执行。下面将结合图8所示的典型流程图说明用户可以在操作释放开关前在显示单元7上监视被摄对象的图像摄取模式的一个例子。
在将相机设置成拍摄静止图像的模式时，在步骤S1101，为了使用户能得到监视被摄对象的图像数据，图像摄取单元2执行对固态图像传感器的曝光操作和调整固态图像传感器输出信号的增益。
在步骤S1102，图像处理单元3处理图像摄取单元2输出的信号，产生图像数据。
在步骤S1103，控制单元1将在步骤S1102产生的图像数据存储在图像存储缓存器4内。
在步骤S1104，信号变换单元5产生分辨率低于存储在图像存储缓存器4内的图像数据的分辨率的显示图像数据。
在步骤S1105，面部检测单元9对在步骤S1103存入图像存储缓存器4的图像数据执行面部检测。这个处理类似于图2中所示的步骤S103的处理。
在步骤S1106，存储存在检测到的面部的区域的坐标。
在步骤S1107，按照在步骤S1106存储的坐标产生一个框架，将这个框架与步骤S1104产生的图像数据一起产生新的图像数据。
在步骤S1108，显示单元7用新的图像数据执行显示。因此，用户可以看到一个相机检测为面部的区域和一个优先执行聚焦调整和曝光控制的区域。相机着重根据存在面部的区域的图像数据执行聚焦调整和曝光控制，设置曝光时间。
在步骤S1109，确定用户是否对相机的释放开关(未示出)进行了操作。如果还没有操作，过程返回步骤S1101。如果进行了操作，过程进至步骤S101。
在步骤S101，图像摄取单元2执行对固态图像传感器的曝光操作和调整固态图像传感器的输出信号的增益。
在步骤S102，图像处理单元3处理图像摄取单元2输出的信号，产生图像数据。
在步骤S103，控制单元1将在步骤S102产生的图像数据存储在图像存储缓存器4内。对存储在图像存储缓存器4内的图像数据并行执行步骤S104和步骤S106的处理。
在步骤S104，信号变换单元5产生分辨率低于存储在图像存储缓存器4内的图像数据的分辨率的显示图像数据。
在步骤S106，确定单元8根据存储在图像存储缓存器4内的图像数据确定在一个与在步骤S1106存储的坐标相应的区域内是否有一对眼睛。如果不存在一对眼睛，确定单元8确定被摄对象处在眼睛没有睁开的状态，从而发出警告。
在步骤S107，如果在步骤S106确定为需要进行警告，图像产生单元6就将在步骤S104产生的图像数据与要显示的警告组合在一起产生新的图像数据，予以输出。如果在步骤S1061确定不需进行警告，图像产生单元6就直接输出在步骤S104产生的图像数据。
在步骤S108，显示单元7接收图像产生单元106输出的图像数据，显示由图像数据表示的图像。
在步骤S109，确定在步骤S106是否已经确定为被摄对象的眼睛没有睁开。如果确定被摄对象的眼睛不是没有睁开，过程就进至步骤S110，将存储在图像存储缓存器4内的图像数据录在诸如闪速存储器等的记录单元10上，从而完成处理。
如果在步骤S109确定为被摄对象的眼睛没有睁开，控制单元1就保持图像摄取单元2的控制参数，诸如闪光量、拍摄灵敏度、快门速度等，返回步骤S101，再次驱动图像摄取单元2执行对固态图像传感器的曝光操作。或者，也可以是控制单元1执行聚焦调整操作或曝光测量操作，重新设置图像摄取单元2的新控制参数(诸如闪光量、感光灵敏度、快门速度等)，然后再返回步骤S101，再次驱动图像摄取单元2执行对固态图像传感器的曝光操作。
如上面所说明的那样，在用户发出记录所摄取的图像数据的指令前可以在所得到的图像数据内检测面部的位置，根据面部位置的坐标从所摄取的图像数据中确定眼睛是否没有睁开。
第二实施例
下面将说明作为本发明的第二实施例的图像摄取设备。说明将集中在与第一实施例的差别上。
按照第二实施例，将被摄对象出现红眼现象作为执行警告的准则。
如众所周知，红眼现象是在低照度用闪光灯发射的光拍摄人像的情况下，闪光灯发射的闪光在每个眼球的后面反射，从而使所拍摄的人物的眼睛发红。
第二实施例内的确定单元8确定面部检测单元9检测到的面部是否出现红眼现象。
图9为示出按照第二实施例进行处理的流程的流程图。
这个流程与图2的不同的是，根据在存储在图像存储缓存器4内的图像数据内检测到的面部区域检测红眼现象，确定是否进行警告(步骤S105和S201)，如果确定为执行警告就强迫改变图像摄取单元2的控制参数，例如闪光量(步骤S202)。
在红眼现象检测中，首先面部检测单元9通过与图4中的步骤S401至S404类似的处理根据图像数据检测眼睛。确定单元8检查作为眼睛检测到的区域的色度，检测眼睛图像位置的平均色度，如果检测到的红分量的值等于或大于门限值就确定出现红眼现象。
确定单元8根据红眼现象检测结果和诸如拍摄期间发射的闪光量、周围亮度、拍摄灵敏度和快门速度等的拍摄条件确定是否给用户警告。
按照一种具体的确定方法，如果需摄取的被摄对象的周围亮度低而发射的闪光量大，出现红眼现象的可能性就大，因此提高红眼现象的确定概率(即，减小红眼现象的门限值)。
相反，如果没有发射闪光，就不加面部检测单元9的面部检测结果，执行控制，确定不发出红眼现象警告，因此可以进行高速和高精确的确定。
图10示出了在屏幕上显示红眼现象给出警告的情况。
在这样的红眼现象的情况下，图像产生单元6在屏幕上显示与所摄取的图像组合在一起的一些字符或一个图标，以容易理解的方式给用户一个警告。
不用说，警告可以用语音或使一个LED闪烁或发光的形式给出。
如果发出了一个警告，过程就进至步骤S202，改变图像摄取单元2的控制参数，诸如闪光量等。
具体地说，控制单元1通过延长红眼减轻灯的发光时间、提高红眼减轻灯的光量或改变闪光量来改变图像摄取单元2的控制参数，来防止出现红眼现象。
一个单独的参数，例如改变闪光量，可以被改变，或者一个组合参数可以被改变以获得拍摄图像的最佳效果(例如，闪光量可以与拍摄灵敏度和/或快门速度组合改变)。
于是，在步骤S202改变图像摄取单元2的控制参数后，控制单元1就设置所改变的控制参数，然后再返回步骤S101，控制单元1再次驱动图像摄取单元2，以便执行对固态图像传感器的曝光操作。
第三实施例
下面将说明作为本发明的第三实施例的图像摄取设备。按照第二实施例，将出现红眼现象作为执行警告的准则。然而，按照第三实施例，将被摄对象的面部区域的聚焦状态或模糊状态作为执行警告的准则。
第三实施例内的确定单元8确定面部检测单元9检测到的面部是处在模糊状态还是聚焦状态。
通常，作为不适当拍摄的图像，有模糊图像和聚焦不好图像。模糊可以是由于在按快门按钮时相机移动而引起的相机震动和由于被摄对象移动而引起的被摄对象晃动引起的。
在这两种情况下，图像区域经常是沿一个固定的方向移动。例如，有一种作为频率分析法的检测模糊的方法，用傅里叶变换等确定是否出现许多在正常图像内不存在的特有频率分量。
对于检测没有聚焦状态的方法，有一种与模糊检测方法类似的执行频率分析的方法，如果高频分量小就确定处在没有聚焦状态。
图11为示出按照第三实施例进行处理的流程的流程图。
这个流程与图9的不同的是，面部检测单元9根据在存储在图像存储缓存器4内的图像数据检测面部区域，再确定检测到的面部区域是否处在没有聚焦状态(步骤S105和S301)。
如果发出了警告，就在步骤S202强迫改变图像摄取单元2的控制参数，诸如闪光量、感光灵敏度、快门速度等。
例如，为了防止模糊，可以缩短曝光时间(提高快门速度)，而该曝光时间的不足通过改变光圈值和/或灵敏度来补偿。基于光圈值和/或灵敏度的改变，其它的参数(例如闪光量参数)可以被改变以基于改变后的光圈值和/或灵敏度获得最佳的图像拍摄效果。
按照第三实施例，如果检测到图像模糊或没有聚焦状态，就向用户发出这一情况的警告，因此可以执行适当的图像拍摄。
以上以被摄对象为人物为例就检测眼睛没有睁开、红眼和模糊对第一至第三实施例进行了说明。这些例子并不意味着对本发明有所限制。
除了以上对于不完全的图像数据的之外，可以使用任何执行图像处理、根据图像数据检测被摄对象的特征再按照检测结果显示警告或自动执行重新拍摄的配置。
本发明可用于确定作为主要被摄对象的目标后用户由于所显示的摄取图像小而不能清楚地看到主要被摄对象的目标出现的问题的各种情况。
采用上述配置，即使所摄取的图像数据有着用户只有在图像数据以放大方式显示时才能检查出来的问题，也可以发出迅速执行重新拍摄的警告，或者可以自动执行重新拍摄，因此可以实现所希望的拍摄而不会错过拍摄时机。
虽然本发明是结合典型的实施例进行说明的，但可以理解，本发明并不局限于所揭示的这些典型实施例。以下权利要求书所给出的专利保护范围应广义理解为包括所有变型、等效结构和功能。

Claims (18)

1.一种图像摄取设备，包括一个配置成按照用户的指令摄取图像数据的图像摄取单元、一个配置成从所摄取的图像数据中检测一个被摄对象区域的被摄对象检测单元、一个配置成根据所摄取的图像数据产生显示图像数据的信号处理单元和一个配置成显示由信号处理单元产生的显示图像数据的显示单元，其特征是所述图像摄取设备还包括：
一个配置成根据被摄对象检测单元的检测结果确定是否发出警告的确定单元；
一个配置成如果确定单元确定为应发出警告就发出警告的通知单元；以及
一个配置成如果通知单元发出了警告就按照警告内容改变图像摄取单元的控制参数使图像摄取单元摄取图像数据的控制单元。
2.按照权利要求1所述的图像摄取设备，其特征是所述通知单元配置成如果确定单元确定为应发出警告就产生一个具有在显示图像数据上添加了警告后的内容的警告内容显示图像并使显示单元显示警告内容显示图像。
3.按照权利要求1所述的图像摄取设备，其特征是所述图像摄取设备还包括一个记录单元，所述控制单元在确定单元确定为不必警告时使记录单元记录图像数据。
4.按照权利要求1所述的图像摄取设备，其特征是所述控制单元在通知单元发出警告后检测到一个来自用户的指令时使图像摄取单元摄取图像数据。
5.按照权利要求1所述的图像摄取设备，其特征是由通知单元所发出的警告的内容基于被摄对象区域的聚焦状态而确定。
6.按照权利要求1所述的图像摄取设备，其特征是由通知单元所发出的警告的内容基于被摄对象的眼睛的色调而确定。
7.按照权利要求1所述的图像摄取设备，其特征是由通知单元所发出的警告的内容基于被摄对象的眼睛是否睁开而确定。
8.按照权利要求1所述的图像摄取设备，其特征是，在按照确定单元的确定结果使图像摄取单元重新拍摄图像数据时，如果从上次拍摄已经过了一段预定时间，所述控制单元就为图像摄取单元设置新的控制参数。
9.一种用于图像摄取设备的控制方法，包括一个按照用户的指令从所摄取的图像数据中检测一个被摄对象区域的被摄对象检测步骤、一个根据按照用户的指令摄取的图像数据产生显示图像数据的信号处理步骤和一个显示信号处理步骤所产生的显示图像数据的显示步骤，其特征是所述控制方法还包括：
一个根据被摄对象检测步骤的检测结果确定是否发出警告的确定步骤；
一个在确定步骤确定为应发出警告时发出警告的通知步骤；以及
一个在通知步骤发出了警告时，按照警告内容改变一个图像摄取单元的控制参数，以使图像摄取单元摄取图像数据的控制步骤。
10.按照权利要求9所述的用于图像摄取设备的控制方法，其特征是所述通知步骤包括一个在确定步骤确定为发出警告时产生一个具有在显示图像数据上添加了警告后的内容的警告内容显示图像和显示这个警告内容显示图像的步骤。
11.按照权利要求9所述的用于图像摄取设备的控制方法，其特征是所述控制步骤包括一个在确定步骤确定为不发出警告时使一个记录单元记录图像数据的步骤。
12.按照权利要求9所述的用于图像摄取设备的控制方法，其特征是所述控制步骤包括一个在通知步骤发出警告后检测到一个来自用户的指令时使图像摄取单元摄取图像数据的步骤。
13.按照权利要求9所述的用于图像摄取设备的控制方法，其特征是由通知步骤所发出的警告的内容基于被摄对象区域的聚焦状态而确定。
14.按照权利要求9所述的用于图像摄取设备的控制方法，其特征是由通知步骤所发出的警告的内容基于被摄对象的眼睛的色调而确定。
15.按照权利要求9所述的用于图像摄取设备的控制方法，其特征是由通知步骤所发出的警告的内容基于被摄对象的眼睛是否睁开而确定。
16.按照权利要求9所述的用于图像摄取设备的控制方法，其特征是所述控制步骤包括一个为图像摄取单元设置新的控制参数的步骤，在按照确定步骤的确定结果使图像摄取单元重新拍摄图像数据时，如果从上次拍摄已经过了一段预定时间，就为图像摄取单元设置新的控制参数。
17.一种图像摄取设备，包括一个配置成按照用户的指令摄取图像数据的图像摄取单元、一个配置成从所摄取的图像数据中检测一个被摄对象区域的被摄对象检测单元、一个配置成根据所摄取的图像数据产生显示图像数据的信号处理单元和一个配置成显示由信号处理单元产生的显示图像数据的显示单元，其特征是所述图像摄取设备还包括：
一个配置成根据被摄对象检测单元的检测结果确定被摄对象至少两个不同的状态的确定单元；
一个配置成按照确定单元的确定结果发出警告的通知单元；以及
一个配置成如果通知单元发出了警告，按照确定单元的确定结果改变图像摄取单元的控制参数使图像摄取单元摄取图像数据的控制单元。
18.一种用于图像摄取设备的控制方法，包括一个按照用户的指令从所摄取的图像数据中检测一个被摄对象区域的被摄对象检测步骤、一个根据按照用户的指令摄取的图像数据产生显示图像数据的信号处理步骤和一个显示信号处理步骤所产生的显示图像数据的显示步骤，其特征是所述控制方法还包括：
一个根据被摄对象检测步骤的检测结果确定被摄对象至少两个不同的状态的确定步骤；
一个按照确定步骤的确定结果发出警告的通知步骤；以及
一个如果通知步骤发出了警告，按照确定步骤的确定结果改变一个图像摄取单元的控制参数使图像摄取单元摄取图像数据的控制步骤。
CNA2005100926063A 2004-08-16 2005-08-16 图像摄取设备及其控制方法 Pending CN1738364A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2004236501 2004-08-16
JP2004236501 2004-08-16

Publications (1)

Publication Number Publication Date
CN1738364A true CN1738364A (zh) 2006-02-22

Family

ID=34981415

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA2005100926063A Pending CN1738364A (zh) 2004-08-16 2005-08-16 图像摄取设备及其控制方法

Country Status (4)

Country Link
US (1) US7430369B2 (zh)
EP (1) EP1628465A1 (zh)
KR (1) KR100738492B1 (zh)
CN (1) CN1738364A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101500084B (zh) * 2008-01-30 2011-04-20 富士胶片株式会社 图像摄取设备和用于图像摄取的控制方法
CN101365061B (zh) * 2007-08-10 2013-01-30 奥林巴斯映像株式会社 摄像装置、摄像***以及摄像方法
CN103501410A (zh) * 2013-10-08 2014-01-08 百度在线网络技术（北京）有限公司 拍摄的提醒方法、装置及检测模式的生成方法、装置
CN104378540A (zh) * 2013-08-12 2015-02-25 联想(北京)有限公司 图像采集方法、装置及电子设备
CN105453133A (zh) * 2013-08-07 2016-03-30 索尼公司 图像处理装置和方法、眼底图像处理装置、图像拍摄方法、及眼底图像拍摄装置和方法

Families Citing this family (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8155397B2 (en) 2007-09-26 2012-04-10 DigitalOptics Corporation Europe Limited Face tracking in a camera processor
JP2005309409A (ja) * 2004-03-25 2005-11-04 Fuji Photo Film Co Ltd 赤目防止装置、プログラムおよびプログラムを記録した記録媒体
IL162878A0 (en) * 2004-07-06 2005-11-20 Hi Tech Solutions Ltd Multi-level neural network based characters identification method and system
US7315631B1 (en) * 2006-08-11 2008-01-01 Fotonation Vision Limited Real-time face tracking in a digital image acquisition device
JP4626425B2 (ja) * 2005-07-11 2011-02-09 富士フイルム株式会社 撮像装置、撮像方法及び撮像プログラム
JP4649550B2 (ja) * 2005-12-27 2011-03-09 三星電子株式会社 カメラ
JP4945722B2 (ja) * 2006-02-15 2012-06-06 Ｈｏｙａ株式会社 撮像装置
JP5087856B2 (ja) * 2006-04-05 2012-12-05 株式会社ニコン 電子カメラ
JP2008005395A (ja) * 2006-06-26 2008-01-10 Fujitsu Ltd 携帯端末装置、携帯端末装置の制御装置、制御方法および制御プログラム
US7403643B2 (en) 2006-08-11 2008-07-22 Fotonation Vision Limited Real-time face tracking in a digital image acquisition device
JP4311435B2 (ja) * 2006-10-25 2009-08-12 ソニー株式会社 撮像装置、および撮像装置制御方法、並びにコンピュータ・プログラム
JP4568918B2 (ja) 2007-01-30 2010-10-27 富士フイルム株式会社 撮像装置および撮像制御方法
KR101341095B1 (ko) * 2007-08-23 2013-12-13 삼성전기주식회사 야경 환경에서 최적의 화질을 갖는 영상 획득 장치 및 방법
US8022982B2 (en) 2008-01-02 2011-09-20 Sony Ericsson Mobile Communications Ab Camera system and method for operating a camera system
KR20090086754A (ko) * 2008-02-11 2009-08-14 삼성디지털이미징 주식회사 디지털 영상 처리 장치 및 그 제어 방법
KR101444103B1 (ko) * 2008-03-14 2014-09-26 삼성전자주식회사 상태 정보를 이용하여 미디어 신호를 생성하는 방법 및장치
JP5251547B2 (ja) * 2008-06-06 2013-07-31 ソニー株式会社 画像撮影装置及び画像撮影方法、並びにコンピュータ・プログラム
AU2009251086B2 (en) * 2009-12-22 2013-12-05 Canon Kabushiki Kaisha Method of foreground/background separation
US20110205383A1 (en) * 2010-02-24 2011-08-25 Research In Motion Limited Eye blink avoidance during image acquisition in a mobile communications device with digital camera functionality
US9053616B2 (en) 2010-04-20 2015-06-09 Temptime Corporation Computing systems and methods for electronically indicating the acceptability of a product
US9224120B2 (en) * 2010-04-20 2015-12-29 Temptime Corporation Computing systems and methods for electronically indicating the acceptability of a product
TWI407388B (zh) * 2010-04-21 2013-09-01 Hon Hai Prec Ind Co Ltd 嬰兒睡眠偵測系統及方法
KR20150090983A (ko) * 2014-01-30 2015-08-07 가부시끼가이샤 도시바 촬영 장치
US9332179B2 (en) * 2014-06-30 2016-05-03 Qualcomm Incorporated Flash collision detection, compensation, and prevention
CN106303266B (zh) * 2015-05-19 2019-05-21 小米科技有限责任公司 闪光灯的控制方法、装置及终端
US9769367B2 (en) 2015-08-07 2017-09-19 Google Inc. Speech and computer vision-based control
CN105095881B (zh) 2015-08-21 2023-04-07 小米科技有限责任公司 人脸识别方法、装置及终端
US10225511B1 (en) 2015-12-30 2019-03-05 Google Llc Low power framework for controlling image sensor mode in a mobile image capture device
US9838641B1 (en) 2015-12-30 2017-12-05 Google Llc Low power framework for processing, compressing, and transmitting images at a mobile image capture device
US10732809B2 (en) 2015-12-30 2020-08-04 Google Llc Systems and methods for selective retention and editing of images captured by mobile image capture device
US9836484B1 (en) 2015-12-30 2017-12-05 Google Llc Systems and methods that leverage deep learning to selectively store images at a mobile image capture device
US9836819B1 (en) 2015-12-30 2017-12-05 Google Llc Systems and methods for selective retention and editing of images captured by mobile image capture device
CN108846377A (zh) * 2018-06-29 2018-11-20 百度在线网络技术（北京）有限公司 用于拍摄图像的方法和装置
US20200053278A1 (en) * 2018-08-08 2020-02-13 Sony Corporation Techniques for improving photograph quality for common problem situations
US10686991B2 (en) 2018-09-11 2020-06-16 Sony Corporation Techniques for improving photograph quality for fouled lens or sensor situations
US10958828B2 (en) 2018-10-10 2021-03-23 International Business Machines Corporation Advising image acquisition based on existing training sets
US10924661B2 (en) 2019-05-02 2021-02-16 International Business Machines Corporation Generating image capture configurations and compositions

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03144427A (ja) * 1989-10-30 1991-06-19 Olympus Optical Co Ltd 閃光発光装置
JP4316063B2 (ja) 1999-01-14 2009-08-19 株式会社東芝 顔画像撮影方法および顔画像撮影装置
KR100555481B1 (ko) * 1999-08-09 2006-03-03 삼성전자주식회사 카메라 시스템에서 칼러 키잉 수행장치
EP1085366B1 (en) 1999-09-14 2004-09-15 Kabushiki Kaisha Toshiba Face image photographing apparatus and face image photographing method
US6940545B1 (en) * 2000-02-28 2005-09-06 Eastman Kodak Company Face detecting camera and method
KR100704758B1 (ko) * 2000-03-09 2007-04-09 삼성테크윈 주식회사 씨씨디 카메라 시스템의 화상 신호 보상 장치
US6301440B1 (en) 2000-04-13 2001-10-09 International Business Machines Corp. System and method for automatically setting image acquisition controls
JP2002251380A (ja) 2001-02-22 2002-09-06 Omron Corp 利用者照合システム
US7362354B2 (en) * 2002-02-12 2008-04-22 Hewlett-Packard Development Company, L.P. Method and system for assessing the photo quality of a captured image in a digital still camera
JP2003315875A (ja) * 2002-04-26 2003-11-06 Konica Minolta Holdings Inc 撮影装置、及び撮影方法
EP1404111A3 (en) * 2002-09-30 2004-10-20 Fuji Photo Film Co., Ltd. Photography system
JP2004128584A (ja) 2002-09-30 2004-04-22 Minolta Co Ltd 撮像装置
JP4218348B2 (ja) * 2003-01-17 2009-02-04 オムロン株式会社 撮影装置
US20040207743A1 (en) * 2003-04-15 2004-10-21 Nikon Corporation Digital camera system

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101365061B (zh) * 2007-08-10 2013-01-30 奥林巴斯映像株式会社 摄像装置、摄像***以及摄像方法
CN101500084B (zh) * 2008-01-30 2011-04-20 富士胶片株式会社 图像摄取设备和用于图像摄取的控制方法
CN105453133A (zh) * 2013-08-07 2016-03-30 索尼公司 图像处理装置和方法、眼底图像处理装置、图像拍摄方法、及眼底图像拍摄装置和方法
CN105453133B (zh) * 2013-08-07 2019-02-22 索尼公司 图像处理装置和方法、眼底图像处理装置、图像拍摄方法、及眼底图像拍摄装置和方法
CN104378540A (zh) * 2013-08-12 2015-02-25 联想(北京)有限公司 图像采集方法、装置及电子设备
CN103501410A (zh) * 2013-10-08 2014-01-08 百度在线网络技术（北京）有限公司 拍摄的提醒方法、装置及检测模式的生成方法、装置
CN103501410B (zh) * 2013-10-08 2017-04-05 百度在线网络技术（北京）有限公司 拍摄的提醒方法、装置及检测模式的生成方法、装置

Also Published As

Publication number Publication date
EP1628465A1 (en) 2006-02-22
US7430369B2 (en) 2008-09-30
KR20060050472A (ko) 2006-05-19
US20060034602A1 (en) 2006-02-16
KR100738492B1 (ko) 2007-07-11

Similar Documents

Publication Publication Date Title
CN1738364A (zh) 图像摄取设备及其控制方法
JP4453721B2 (ja) 画像撮影装置及び画像撮影方法、並びにコンピュータ・プログラム
KR100815512B1 (ko) 촬상장치 및 그 제어 방법
CN101867724B (zh) 成像装置以及成像方法
CN1917611A (zh) 成像设备和成像方法
CN1967566A (zh) 图像处理设备和图像处理方法
CN1977526A (zh) 图像捕捉方法和图像捕捉设备
CN101031033A (zh) 摄像装置以及摄像方法
CN1885911A (zh) 对象确定装置、摄像装置以及监视装置
JP4974812B2 (ja) 電子カメラ
CN1731828A (zh) 图像摄取装置以及图像摄取控制方法和程序
CN1928692A (zh) 具有多个摄像元件的照相机装置
CN1677442A (zh) 亮度校正
CN1753458A (zh) 摄影装置及摄影方法
CN1933558A (zh) 图像处理装置和方法、及其程序
CN1812492A (zh) 数字相机、图像回放装置、面部图像显示装置及其控制方法
CN1812496A (zh) 摄像装置及其控制方法
CN1697488A (zh) 具有亮度校正的数码相机
CN1661458A (zh) 自动聚焦装置以及自动聚焦控制方法
JP2009010776A (ja) 撮像装置、撮影制御方法及びプログラム
CN101047794A (zh) 图像处理设备、图像处理方法和图像捕获设备
CN1928604A (zh) 透镜装置、图像拾取装置及图像拾取***
CN1917587A (zh) 摄像装置及图像处理方法
WO2017037978A1 (ja) 検出装置、検出方法、検出プログラムおよび撮像装置
JP2006087083A (ja) 撮像装置及び撮像装置の制御方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication