CN102265602A - 图像拍摄装置 - Google Patents

图像拍摄装置 Download PDF

Info

Publication number
CN102265602A
CN102265602A CN2009801525790A CN200980152579A CN102265602A CN 102265602 A CN102265602 A CN 102265602A CN 2009801525790 A CN2009801525790 A CN 2009801525790A CN 200980152579 A CN200980152579 A CN 200980152579A CN 102265602 A CN102265602 A CN 102265602A
Authority
CN
China
Prior art keywords
image
feature
test section
detects
zone
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2009801525790A
Other languages
English (en)
Inventor
大川圭介
酒井武则
高田尚贤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN102265602A publication Critical patent/CN102265602A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • G06T7/337Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods involving reference images or patches
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/162Detection; Localisation; Normalisation using pixel segmentation or colour matching
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face

Landscapes

  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

通过使得能够进行摄影者所希望的被摄体的摄影,来提供高自由度的摄影环境。图像拍摄装置具备:图像拍摄部,其接受来自被摄体的光,生成与被摄体的像对应的图像的信号;第1检测部,其用预先规定的第1方法来检测生成的图像所包含的特征;第2检测部,其用与第1方法不同的第2方法来检测生成的图像所包含的特征;操作部,其受理指定生成的图像上的位置的操作;和控制器,其按照操作部受理了操作的时点的第1检测部所检测出的特征的位置与操作部受理的位置之间的关系,来决定使用第1检测部和第2检测部的哪一个来检测在时点以后生成的图像所包含的特征。

Description

图像拍摄装置
技术领域
本发明涉及在图像拍摄装置中识别被摄体的技术。
背景技术
在以往的图像拍摄装置(例如数码照相机)中,存在具有识别被摄体的功能的图像拍摄装置。这种图像拍摄装置进行各种控制,持续进行自动曝光(AE)、自动对焦(AF)等来识别被摄体,使得能够在最合适的条件下进行拍摄。
专利文献1公开了一种具有用于显示被摄体图像的画面的图像拍摄装置。在该图像拍摄装置中,在同一画面内存在多个被摄体的情况下,能够由摄影者来选择想要拍摄的被摄体。由此,能够对选择的该被摄体进行最合适的AE、AF控制。
专利文献1公开了一种图像拍摄装置。该图像拍摄装置具备:区域设定单元3,其利用来自拍摄元件2的图像信号来在画面内设定区域;视线探测单元8、9、11,其探测摄影者的视线;和区域选择单元12,其在由区域设定单元设定的区域为多个的情况下,基于来自所述视线探测单元的视线信息来选择其中想要拍摄的区域。在画面内设定了多个区域的情况下,该图像拍摄装置基于视线信息来自动地选择其中想要拍摄的区域。
专利文献1:JP特开平5-328197号公报
但是,在上述专利文献1所公开的图像拍摄装置中,高精度地检测使用者想要拍摄的区域存在限度。专利文献1关于精度的提高没有公开。
发明内容
本发明的目的在于,提供一种更高精度地进行摄影者想要拍摄的被摄体的检测的图像拍摄装置。
本发明的图像拍摄装置,具备:图像拍摄部,其接受来自被摄体的光,生成与所述被摄体的像对应的图像的信号;第1检测部,其用预先规定的第1方法来检测生成的所述图像所包含的特征;第2检测部,其用与所述第1方法不同的第2方法来检测生成的所述图像所包含的特征;操作部,其受理指定生成的所述图像上的位置的操作;和控制器,其按照所述操作部受理了所述操作的时点的、所述第1检测部所检测出的特征的位置与所述操作部所受理的位置之间的关系,来决定使用所述第1检测部和所述第2检测部的哪一个来检测在所述时点以后生成的图像所包含的特征。
所述图像拍摄装置也可以:还具备显示部,其在使用所述第1检测部检测出了所述图像中的特征时,显示由所述图像拍摄部生成的图像、以及由所述第1检测部检测出的特征的位置。
也可以:所述第1检测部基于预先规定的图案,来检测生成的所述图像中的特征,所述第2检测部基于所述操作部所受理的位置和生成的所述图像的颜色信息,来检测生成的所述图像所包含的特征。
也可以:所述第1检测部基于表示构成人的面部的多个部位的形状和配置关系的至少一方的图案,来检测生成的所述图像中的特征。
也可以:在所述第1特征检测部检测出了所述特征的位置时,所述控制器判定所述操作部所受理的所述位置是否存在于检测出所述特征的区域内,在所述位置存在于检测出所述特征的区域内时,所述控制器使所述显示部在检测出的所述特征的位置上显示能够目识别的标记。
也可以:在所述第1特征检测部检测出了所述特征的位置时,所述控制器判定所述操作部所受理的所述位置是否存在于检测出所述特征的区域内,在所述位置不存在于检测出所述特征的区域内时,所述控制器决定使用所述第2检测部来检测所述图像所包含的特征,所述控制器使所述第2检测部基于所述位置和所述图像的颜色信息来检测所述图像的特征,并使所述显示部在所述第2检测部检测出的所述图像的特征的位置上显示能够目识别的标记。
也可以:在所述位置从存在于检测出所述特征的区域内的状态,变化成了不存在于检测出所述特征的区域内的状态时,所述控制器决定使用所述第2检测部来检测所述图像所包含的特征,所述控制器使所述第2检测部基于所述位置和所述图像的颜色信息来检测所述图像的特征,并使所述显示部在所述第2检测部检测出的所述图像的特征的位置上显示能够目识别的标记。
也可以:在所述位置从不存在于检测出所述特征的区域内的状态变化成了存在于检测出所述特征的区域内的状态时,所述控制器使所述显示部在使所述第1特征检测部检测出的所述特征的位置上显示能够目识别的标记。
也可以:所述第1检测部、所述第2检测部、以及所述控制器的至少两者形成于一个芯片电路上。
在本发明所涉及的图像拍摄装置中,设有用不同的方法来检测生成的图像所包含的特征的第1和第2特征检测部。并且,按照操作部受理了图像上的位置指定操作的时点的、第1特征检测部所检测出的特征的位置与操作部所受理的位置之间的关系,来决定使用第1和第2特征检测部的哪一个来检测在该时点以后生成的图像所包含的特征。本发明所涉及的图像拍摄装置通过分开使用第1和第2特征检测部,能够更高精度地进行摄影者想要拍摄的被摄体的检测。
附图说明
图1(a)和(b)是表示作为图像拍摄装置的一个例子的数字静像照相机100a和摄像机100b的外观的图。
图2(a)~(c)是表示本实施方式的数字静像照相机100a的外观的三视图。
图3是表示本实施方式所涉及的具备被摄体识别功能的图像拍摄装置100的结构的模块图。
图4(a)和(b)是表示在显示部13上显示的画面例的图。
图5(a)和(b)是表示在显示部13上显示的画面例的图。
图6是表示用户进行被摄体选择时的图像拍摄装置100的动作的流程图。
图7是表示成为追踪区域的标志50的图。
图8是表示追踪区域内的图像数据的颜色信息的图。
图9是表示色调空间的图。
具体实施方式
下面,参照附图,对本发明的图像拍摄装置的实施方式进行说明。
1.图像拍摄装置的结构
图1(a)和(b)表示作为图像拍摄装置的一个例子的数字静像照相机100a和摄像机100b的外观。虽然数字静像照相机100a主要用于对静止图像进行拍摄,但也具有对动态图像进行拍摄的功能。另一方面,摄像机100b主要具有对动态图像进行拍摄的功能。
图2(a)~(c)是表示本实施方式的数字静像照相机100a的外观的三视图。图2(a)是主视图、(b)是后视图、(c)是俯视图。
如图2(a)所示,在数字静像照相机100a的正面,配置有透镜镜筒21、闪光灯28、以及用于在暗处使AF功能起作用的補助光闪光灯29。
另一方面,如图2(b)所示,在数字静像照相机100a的背面,配置有显示设备13、以及选择摄影模式的旋钮(dial)16a和多个操作按钮16b。
此外,如图2(c)所示,在数字静像照相机100a的上表面,配置有快门按钮22、电源按钮23、以及用于改变视场角的变焦杆30。
另外,除了透镜镜筒和闪光灯之外,摄像机100b也具备具有相同的功能的按钮和功能,省略它们的说明。
以下,在本说明书中,将数字静像照相机100a和摄像机100b总称为“图像拍摄装置100”。
图3是表示本实施方式所涉及的具备被摄体识别功能的图像拍摄装置100的结构的模块图。
图像拍摄装置100具备:图像拍摄部10、信号处理部11、图像记录部12、显示部13、面部检测部14、特征颜色检测部15、操作部16、特定区域显示部17、和控制器18。以下,详细说明图像拍摄装置100的构成要素。另外,与各构成要素的说明相关联,省略众所周知的硬件结构的图示。
图像拍摄部10接受来自被摄体的光,并生成与该被摄体的像对应的图像的信号。图像拍摄部10包含光学***和拍摄元件。光学***包含例如物镜、变焦镜头、光圈、OIS(Optical Image Stabilizer)单元、聚焦透镜(全部未图示)。光学***接受来自被摄体的光,并对它们进行聚光,来形成被摄体像。拍摄元件拍摄由光学***形成的被摄体像,生成与该被摄体的像对应的图像的模拟信号。拍摄元件例如是CMOS图像传感器、CCD图像传感器。
信号处理部11接收在图像拍摄部10中生成的图像的模拟信号并执行预先规定的处理。信号处理部11作为一个芯片电路被安装。信号处理部11包含例如AD转换器、图像处理部、***编码器、***解码器(全部未图示)。AD转换器将由拍摄元件生成的图像的模拟信号变换为数字信号。图像处理部对由AD转换器变换后的数字信号的图像实施各种图像处理。此外图像处理部生成用于输入到***编码器的图像数据,并生成用于显示于显示部13的图像数据。此外,图像处理部对由***解码器处理并输出的数字信号的图像实施图像处理,生成用于显示于显示部13的图像数据,并生成用于向***编码器进行再输入的图像数据。
信号处理部11内的图像处理部包含图像前处理部、图像压缩部、图像扩展部(全都未图示)。图像前处理部对由AD转换器变换后的数字信号的图像进行伽马校正和白平衡校正等各种图像处理。图像压缩部通过进行DCT(离散余弦变换)、霍夫曼编码等,来压缩图像数据。图像压缩部利用依据例如MPEG-2或H.264的标准的压缩形式来压缩图像数据。但是,这些压缩标准是一个例子。压缩形式是任意的,并且也可以为不进行图像间压缩等的形式。图像扩展部将图像数据解码为非压缩的状态。该处理例如在显示部13上再现从信号处理部11的***解码器输出的已压缩的图像数据的情况等下进行。***解码器对记录在图像记录部12中的AV数据进行解码,并生成压缩图像数据。***解码器将生成的压缩图像数据输出到图像扩展部。
图像记录部12记录信号处理部11所输出的图像的数据。图像记录部12具有对记录介质进行记录控制的介质控制器以及记录介质。记录介质为闪存卡、硬盘、DVD(Digital Versatile Disc)、BD(Blu-ray Disc)等。记录介质既可以自由装卸于图像拍摄装置100,也可以内置于图像拍摄装置100。
显示部13是液晶显示器和电子取景器等显示设备。显示部13能够显示由图像拍摄部10拍摄的图像数据、或从图像记录部12中读出的AV数据中的图像数据。此外,显示部13能够显示图像拍摄装置100的各种设定信息和摄影时间等。显示部13显示信号处理部11所输出的图像以及检测出的特定的对象。例如,显示部13在使用以下说明的面部检测部14而检测出了图像中的特征(例如人物的面部)时,显示由图像拍摄部10生成的图像、以及由面部检测部14检测出的特征的位置。
面部检测部14按照预先规定的检测方法,来从信号处理部11所输出的图像中检测人物的面部。更具体来说,面部检测部14对由信号处理部11生成的图像数据进行解析,从图像中确定具有预先规定的图案的部分。该图案作为表示构成人的面部的多个部位(例如眼、鼻、口)的形状和配置关系的一者或两者的特征的图案预先准备好。面部检测部14将与该图案一致的部分检测为人物的面部。通过持续地进行上述处理,只要不发生成为被摄体的人物朝向侧面等、被摄体的状态的较大的变化,则面部检测部14能够持续检测出被摄体的面部。此外,面部检测部14在检测面部的位置和大小的同时,计算表示该特定对应的面部的确定度的可靠度。
特征颜色检测部15利用选择位置、和以信号处理后的图像中的选择位置为中心的区域的颜色信息,来检测特定的被摄体。在此所说的“被摄体”不限于人物,是指显示于该图像上的任意的对象物(不仅包括固体,也包括液体和气体)。此外,以面部特征难以被检测的角度拍摄的人物也可以成为被摄体。特征颜色检测部15的更详细的动作在后面说明。
特征颜色检测部15根据由信号处理部11生成的图像数据和来自操作部16的位置信息,基于指定的位置信息来切割出图像数据内的特定区域,并基于该区域内的颜色信息来检测特定的被摄体。即,特征颜色检测部15将图像中的颜色作为被摄体的特征来进行检测。这与由面部检测部14利用与面部的特征对应的图案来检测人物的面部的方法明显不同。
操作部16受理对显示于显示部13上的图像上的位置进行指定的用户操作或其他各种操作。操作部16例如以图2(b)所示的形状配置,或者也可以是配置为十字的五金键(hardware key),还可以是触摸屏。在操作部16为五金键时,例如用户操作五金键,使与显示于显示部13的图像重叠显示的光标或标志(边框)移动,来指定图像上的位置。此外,在操作部16为触摸屏时,用户通过按压重叠于显示部13的显示设备上的触摸屏,来指定图像上的位置。操作部16将表示指定的位置的信息(位置信息)传达给控制器18。此外,操作部16受理位置指定以外的各种各样的用户操作(指示),并将该指示传达给控制器18。
特定区域显示部17显示选择的区域。特定区域显示部17经由控制器18来收到与由面部检测部14和特征颜色检测部15检测出的区域对应的位置信息、由摄影者(用户)选择的位置信息。并且,特定区域显示部17生成标志信号,该标志信号用于显示明确表示由该位置信息所特定的位置的区域(例如标志)。该标志信号被送往显示图像数据的显示部13,且该区域显示于显示部13上。
控制器18控制图像拍摄装置100整体。控制器18是使用了半导体元件的电路、例如微型计算机。控制器18既可以仅由硬件构成,也可以通过组合硬件和软件来实现。在本实施方式中,由微型计算机执行记述了后述的图6所示的流程图的处理的计算机程序。由此,微型计算机或者从微型计算机接受指示的各构成要素进行流程图所示的各种处理。
例如控制器18判定操作部16从用户接收了指定图像上的位置的操作的时点的、面部检测部14所检测出的人物的面部特征的位置、与操作部16所接收到的图像上的位置之间的关系。然后根据其结果,控制器18决定使用面部检测部14和特征颜色检测部15的哪一个来检测之后生成的图像所包含的图像中的特征。该处理的详细内容在后面详述。
上述计算机程序记录于CD-ROM等记录介质中并作为产品在市场上流通,或者,通过因特网等电信线路来传输。控制器18由执行计算机程序的通用的微型计算机来实现,或者,也可以作为将这种计算机程序和处理器一体化后的专用处理器来实现。
另外,在本实施方式中,采用了与信号处理部11和控制器18分开,另外设置面部检测部14和特征颜色检测部15的结构。但是,该结构是一个例子。例如,也可以将信号处理部11、面部检测部14、特征颜色检测部15和控制器18的全部用1个芯片电路来实现。或者,也可以如图3所示,将信号处理部11、面部检测部14和特征颜色检测部15用1个芯片电路27来实现,而控制器用另外的微型计算机来实现。或者,也可以将面部检测部14、特征颜色检测部15和控制器18用1个芯片电路来实现。或者,也可以将这些的任意两个(信号处理部11和面部检测部14、信号处理部11和特征颜色检测部15、面部检测部14和特征颜色检测部15、控制器18和面部检测部14、控制器18和特征颜色检测部15、信号处理部11和控制器18)的组合用1个芯片来实现。
2.动作
针对如上述这样构成的具备被摄体识别功能的图像拍摄装置100,说明其动作。
信号处理部11对从图像拍摄部10输入的图像数据进行各种校正。校正后的信号记录于图像记录部12中。此外,信号处理部11生成用于检测特定对象的信号。面部检测部14检测出位于来自信号处理部11的信号中的面部。作为面部的检测方法,已知基于肤色来进行检测的方法、基于多个部位(例如眼、鼻、口)的形状和配置关系来进行检测的方法等各种各样的方法。在本实施方式中,只要是检测图像数据中的面部的方法则使用怎样的方法都可以。控制器18使用特定区域显示部17,使检测出的特定区域或表示该区域的位置的标志显示于显示部13。
同时,控制器18监视操作部16,检测是否通过来自用户操作而选择了显示部13上的被摄体。被摄体的选择,通过位置信息的输入来进行。若输入了位置信息,则控制器18判断该位置信息是否处于已经检测出的特定对象的检测区域内。并且,在特定对象的检测区域内的情况下,控制器18提取包含选择位置的区域。
另一方面,在被摄体的位置信息不包含于任何一个特定对象检测区域的情况下,控制器18将选择位置输入到特征颜色检测部15。特征颜色检测部15根据来自信号处理部11的信号和选择位置信息来重新提取特定对象。通常,在图像中仅用颜色信息来选择特定对象是很困难的。特征颜色检测部15通过使用选择位置信息提取存在于该选择位置周边的大致同色的对象,来提取特定的被摄体。
控制器18对图像拍摄部10、信号处理部11等进行控制,并对提取的区域进行调整,使得AF、AE等最合适。
以下,参照图4和图5,对用户选择没有被面部检测部14检测出的被摄体时的图像拍摄装置100的动作进行说明。
图4和图5表示显示于显示部13上的画面例。
在图4(a)中,假设被摄体101、102预先被面部检测部14进行了面部检测。在图4(a)中,显示了表示面部检测完成的标志104、105。
在此状态下,假设用户想要进行拍摄的对象是被摄体103。此时,用户首先选择显示为“追踪模式”的图标40。然后,控制器18对特定区域显示部17进行指示,使其消去在此之前显示的标志104和105。
用户可以利用操作部16通过进行操作部16的确定按钮(未作图示)的按压或者对画面的触摸,来选择被摄体103。这样,能够指定被摄体103上的位置。指定了位置后,特征颜色检测部15决定与指定的位置大致同色的范围,并通知给控制器18。取得与大致同色的范围相关的信息后,控制器18控制特定区域显示部17,使其生成在大致同色的范围的周围显示标志108的信号。
接下来,特征颜色检测部15取得与指定的位置大致同色的范围的像素的颜色信息,并以其中心附近的像素的颜色为基准,提取规定范围所包含的颜色分布的范围。即,提取包含被摄体103的区域。特定区域显示部17将该区域作为标志108来进行选择、显示。另外,“大致同色的范围”的检测方法的详细内容在后面说明。
图5(a)和(b)表示在尽管应选择的被摄体102是人的面部部分,但根据被摄体的状态而没能被面部检测部14检测出的情况下,选择该被摄体102的动作。用户想要选择被摄体102。但是,根据被摄体102的状态,存在面部检测部14无法检测出的情况。
例如,如图5(a)所示,在朝向侧面的面部的情况、或者面部朝向后面的情况下,无法检测出构成面部的眼睛等要素。因此面部检测部14无法检测出被摄体102。
但是,根据本实施方式,用户通过按压图标40,能够指定图像上的任意的位置。若用户通过选择被摄体102的中心附近而指定了位置,则特定区域显示部17显示标志109。
特征颜色检测部15能够提取包含被摄体102的区域,并作为标志109来选择并显示。
如上所述,控制器18通过使用特征颜色检测部15,能够检测出面部检测部14无法提取的动物或车辆等物体,并能够选择为特定对象。
图6是表示用户进行被摄体选择时的图像拍摄装置100的动作的流程图。
图像拍摄装置100在显示部13上显示由图像拍摄部10拍摄中的图像(S401)。面部检测部14对由信号处理部11生成的图像数据进行解析,从图像数据中检测人物的面部(S402)。在存在面部检测区域的情况(在S403中为是)下,控制器18对特定区域显示部17进行控制,将表示检测出的面部的标志重叠于拍摄中的图像数据并显示于显示部13(S404)。
接下来,控制器18检测是否进行了向用户能够选择显示于显示部13的被摄体的模式(被摄体选择模式)的变更操作(S405)。在图像拍摄装置100被变更为被摄体选择模式的情况下(在S405中为是),用户能够进行被摄体的选择。控制器18在不是被摄体选择模式的情况下(在S405中为否),等待被变更为被摄体选择模式。
控制器18判定是否由用户在显示于显示部13的画面上进行了选择想要识别的被摄体的操作(S406)。在此,作为选择被摄体的方法,在显示部13对应于触摸面板的情况下,用户通过触摸显示于显示部13的被摄体来选择被摄体。在显示部13不对应于触摸面板的情况下,用户通过对操作部16的十字键等进行操作,使显示于显示部13上的指针移动,在指针位于想要选择的被摄体上时按下操作部16的决定按钮等,由此来选择被摄体。
控制器18在没有进行被摄体的选择操作的情况下(在S406中为否),等待进行选择操作。控制器18在进行了被摄体的选择操作的情况下(在S406中为是),判定是否存在由面部检测部14检测出了面部的区域(S407)。
控制器18在不存在表示由面部检测部14预先检测出的面部的区域的情况下(在S407中为否),将选择的位置输入到特征颜色检测部15,由特征颜色检测部15来进行区域判定处理(S410)。控制器18在存在表示由面部检测部14预先检测出的面部的区域的情况下(在S407中为是),判定选择的位置是否位于至少一个以上检测出的表示面部的区域内(S408)。
控制器18在选择位置不包含于任何一个面部检测区域内的情况下(在S408中为否),将选择位置输入到特征颜色检测部15,由特征颜色检测部15来进行区域判定处理(S410)。控制器18在选择位置包含于预先检测出的面部区域的任意一个中的情况下(在S408中为是),控制特定区域显示部17,使表示选择了包含选择位置的面部检测区域的标志显示于显示部13(S409)。控制器18在由特征颜色检测部15进行了特征颜色检测处理(S410)时,也控制特定区域显示部17,在包围判定出的区域内的特征颜色的区域中使显示部13显示标志(S411)。在此,表示选择的区域的标志,进行与在S404中显示的表示由面部检测部14检测出的面部区域的标志不同的显示。表示选择的区域的标志,如图4和图5所示,既可以与表示面部区域的标志显示形状不同,也可以在相同的形状下使标志的边框的颜色变化。
接下来,对步骤S410的由特征颜色检测部15进行的区域判定处理进行说明。
例如,图7表示设定了标志50的被摄体。特征颜色检测部15对在图像数据中设定了标志50的被摄体进行区域判定动作。为了能够进行区域判定动作,特征颜色检测部15进行颜色存储处理、检索区域取得处理、以及颜色信息检索处理。以下具体地说明。
颜色存储处理是将标志50内的图像数据的颜色信息存储于记录介质中的处理。在此作为存储介质,可以考虑未作图示的缓冲存储器、闪存、存储卡等,但不限于此。也可以在图像记录部12所具有的记录介质中存储颜色信息。
特征颜色检测部15取得标志50内的图像数据(图8(A))。然后,特征颜色检测部15取得标志50内的图像数据的颜色信息。在此,颜色信息用色调的颜色空间来表现。即,色调可以作为0~360度的相位角通过角度来表示。在此,在颜色空间为HSV颜色空间的情况下,如图9所示,可以用R=0/G=120/B=240的位置关系来表现。例如,在符合的颜色如图9所示那样定位的情况下,符合的颜色的角度成为θ。由此,例如,在图8(A)的标志50内的图像数据中,可以用图8(B)的直方图(histogram)来表现。在此,直方图的横轴表示角度(度),纵轴表示存在于图8(A)所示的区域内的各色调的像素的数量。横轴的Min为0度,Max为359度。
特征颜色检测部15将像这样取得的标志50的颜色信息存储于缓冲存储器或闪存、存储卡等存储介质中。优选将追踪区域的颜色信息存储在内置于数码照相机1中的存储介质中。这样一来,能够缩短追踪区域的颜色信息的读出时间。另外,色调也可以用频谱上的颜色的位置来表示。在此情况下,可以用300nm~780nm来表现光的波长。
特征颜色检测部15将具有以由用户所选择的位置的色调为基准的规定范围内(例如色调的±5%的范围)的色调的区域,检测为上述“大致同色的范围”。该处理是检索区域取得处理。然后,特征颜色检测部15将具有与检索区域取得处理的结果得到的“大致同色的范围”相同的颜色信息的范围,作为以后也选择的区域继续进行检测。
另外,特征颜色检测部15既可以从画面整体的区域中确定上述范围,也可以从画面的一部分的区域中确定上述范围。
例如,也可以设定包含由用户所选择的位置的、大小不同的多个(例如4个)部分区域,并从以规定的比例包含“大致同色的范围”的1个部分区域中确定该范围。例如,从在“大致同色的范围”的色调占据20%以上不到30%的部分区域中的最大的部分区域中,检索该范围即可。
以上,说明了特征颜色检测部15的处理。
另外,进行上述的步骤S406的处理(是否选择了被摄体的判断处理)的定时是一个例子。除此之外例如也可以在刚刚进行了步骤S401的拍摄图像的显示后,并且,在面部检测处理之前进行。
此外,在选择位置后来包含于面部检测区域的情况下,控制器18也可以控制图像拍摄装置100的动作,来取代由特征颜色检测部15进行的颜色检测处理,而切换为由面部检测部14进行的面部检测处理。反之,在虽然最初进行了面部检测处理,但由于被摄体朝向侧面等情况而无法进行面部检测处理时,也可以控制图像拍摄装置100的动作,使得切换为由特征颜色检测部15进行的颜色检测处理。
如上所述,通过选择用户希望的被摄体,从而除了由面部检测部14检测出的人的面部以外,还能够选择没有被面部检测部14检测出的动物或朝向侧面的面部,被摄体选择的自由度变高,能够指定用户所希望拍摄的被摄体。
并且,通常较多地被选择的由面部检测部14检测的区域,通过不断使面部检测部14工作,能够迅速地确定选择区域。另一方面,因为特征颜色检测部14在区域选择后开始区域检测,所以虽然到确定选择区域为止需要时间,但不需要使其不断动作,能够减轻图像拍摄装置100的处理负担。
在本实施方式中,对使用基于选择的位置上的颜色信息来检测特定被摄体的特征颜色检测部15作为第2特征检测部的方式进行了说明。但是,该处理是一个例子。也可以检测选择的位置上的被摄体的运动,并基于运动量和运动方向(也称作“运动向量”。)来进行被摄体的检测和追踪。或者,也可以从数字信号中提取选择的位置上的被摄体的明亮度(亮度)的信息,并基于该信息来进行被摄体的检测和追踪。
(产业上的可利用性)
本发明的图像拍摄装置对于预先检测出的特定被摄体以外的被摄体也能够通过使用可选择的方式来将AE、AF等适于用户所希望拍摄的被摄体,在数码照相机、摄像机等中很有用。
符号说明:
10图像拍摄部;
11信号处理部;
12图像记录部;
13显示部;
14面部检测部;
15特征颜色检测部;
16操作部;
17特定区域显示部;
18控制器;
100图像拍摄装置。

Claims (9)

1.一种图像拍摄装置,其具备:
图像拍摄部,其接受来自被摄体的光,生成与所述被摄体的像对应的图像的信号;
第1检测部,其用预先规定的第1方法来检测生成的所述图像所包含的特征;
第2检测部,其用与所述第1方法不同的第2方法来检测生成的所述图像所包含的特征;
操作部,其受理用来指定生成的所述图像上的位置的操作;和
控制器,其按照所述操作部受理了所述操作的时点的所述第1检测部所检测出的特征的位置与所述操作部受理的位置之间的关系,来决定使用所述第1检测部和所述第2检测部的哪一个来检测在所述时点以后生成的图像所包含的特征。
2.根据权利要求1所述的图像拍摄装置,其特征在于,
还具备显示部,其在使用所述第1检测部检测出所述图像中的特征时,显示由所述图像拍摄部生成的图像、以及由所述第1检测部检测出的特征的位置。
3.根据权利要求1或2所述的图像拍摄装置,其特征在于,
所述第1检测部基于预先规定的图案,来检测生成的所述图像中的特征,
所述第2检测部基于所述操作部受理的位置和生成的所述图像的颜色信息,来检测生成的所述图像所包含的特征。
4.根据权利要求3所述的图像拍摄装置,其特征在于,
所述第1检测部基于表示构成人的面部的多个部位的形状和配置关系的至少一方的图案,来检测生成的所述图像中的特征。
5.根据权利要求2所述的图像拍摄装置,其特征在于,
在所述第1特征检测部检测出所述特征的位置时,
所述控制器判定所述操作部受理的所述位置是否存在于检测出所述特征的区域内,
在所述位置存在于检测出所述特征的区域内时,所述控制器使所述显示部在检测出的所述特征的位置上显示能够目识别的标记。
6.根据权利要求2所述的图像拍摄装置,其特征在于,
在所述第1特征检测部检测出所述特征的位置时,
所述控制器判定所述操作部受理的所述位置是否存在于检测出所述特征的区域内,
在所述位置不存在于检测出所述特征的区域内时,所述控制器决定使用所述第2检测部来检测所述图像所包含的特征,所述控制器使所述第2检测部基于所述位置和所述图像的颜色信息来检测所述图像的特征,并使所述显示部在所述第2检测部检测出的所述图像的特征的位置上显示能够目识别的标记。
7.根据权利要求5所述的图像拍摄装置,其特征在于,
在所述位置从存在于检测出所述特征的区域内的状态,变化成了不存在于检测出所述特征的区域内的状态时,所述控制器决定使用所述第2检测部来检测所述图像所包含的特征,所述控制器使所述第2检测部基于所述位置和所述图像的颜色信息来检测所述图像的特征,并使所述显示部在所述第2检测部检测出的所述图像的特征的位置上显示能够目识别的标记。
8.根据权利要求6所述的图像拍摄装置,其特征在于,
在所述位置从不存在于检测出所述特征的区域内的状态变化成了存在于检测出所述特征的区域内的状态时,所述控制器使所述显示部在所述第1特征检测部检测出的所述特征的位置上显示能够目识别的标记。
9.根据权利要求1所述的图像拍摄装置,其特征在于,
所述第1检测部、所述第2检测部以及所述控制器的至少两者形成于一个芯片电路上。
CN2009801525790A 2008-12-26 2009-12-22 图像拍摄装置 Pending CN102265602A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2008-332551 2008-12-26
JP2008332551 2008-12-26
PCT/JP2009/007116 WO2010073619A1 (ja) 2008-12-26 2009-12-22 撮像装置

Publications (1)

Publication Number Publication Date
CN102265602A true CN102265602A (zh) 2011-11-30

Family

ID=42287266

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009801525790A Pending CN102265602A (zh) 2008-12-26 2009-12-22 图像拍摄装置

Country Status (5)

Country Link
US (1) US8830374B2 (zh)
EP (1) EP2373002A4 (zh)
JP (1) JP5331128B2 (zh)
CN (1) CN102265602A (zh)
WO (1) WO2010073619A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107736009A (zh) * 2015-06-16 2018-02-23 奥林巴斯株式会社 运算方法、运算程序和拍摄装置
CN112307882A (zh) * 2019-07-31 2021-02-02 株式会社理光 图像判断装置及图像判断***

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2777748C (en) 2009-10-20 2017-09-19 Soane Energy Llc Proppants for hydraulic fracturing technologies
JP5871463B2 (ja) * 2010-12-27 2016-03-01 キヤノン株式会社 画像処理装置及びその制御方法、プログラム並びに記憶媒体
US8842213B2 (en) 2011-04-18 2014-09-23 Panasonic Corporation Image capture device, image capture device focus control method, and integrated circuit
JP5226903B1 (ja) * 2011-06-29 2013-07-03 オリンパスイメージング株式会社 追尾装置及び追尾方法
US11100234B2 (en) * 2014-06-13 2021-08-24 Hitachi Systems, Ltd. Work recording apparatus, system, program, and method preventing confidential information leaks
US9111164B1 (en) 2015-01-19 2015-08-18 Snapchat, Inc. Custom functional patterns for optical barcodes
US9911073B1 (en) 2016-03-18 2018-03-06 Snap Inc. Facial patterns for optical barcodes
US9716825B1 (en) * 2016-06-12 2017-07-25 Apple Inc. User interface for camera effects
US10146971B1 (en) 2017-03-14 2018-12-04 Snap Inc. Optical barcodes without orientation
JP6791108B2 (ja) * 2017-12-11 2020-11-25 オムロン株式会社 顔位置検出装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7034881B1 (en) * 1997-10-31 2006-04-25 Fuji Photo Film Co., Ltd. Camera provided with touchscreen
CN101146178A (zh) * 2006-09-14 2008-03-19 奥林巴斯映像株式会社 摄像机
JP2008206018A (ja) * 2007-02-22 2008-09-04 Nikon Corp 撮像装置およびプログラム
CN101281290A (zh) * 2007-04-04 2008-10-08 株式会社尼康 数码相机
CN101325658A (zh) * 2007-06-13 2008-12-17 索尼株式会社 成像设备、成像方法和计算机程序

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6118484A (en) 1992-05-22 2000-09-12 Canon Kabushiki Kaisha Imaging apparatus
JP3192483B2 (ja) 1992-05-22 2001-07-30 キヤノン株式会社 光学機器
JP3222091B2 (ja) * 1997-05-27 2001-10-22 シャープ株式会社 画像処理装置及び画像処理装置制御プログラムを記憶した媒体
JP2002369215A (ja) * 2001-06-04 2002-12-20 Sony Corp 画像処理装置および方法、記録媒体、並びにプログラム
JP2003219225A (ja) * 2002-01-25 2003-07-31 Nippon Micro Systems Kk 動体画像監視装置
US8159561B2 (en) 2003-10-10 2012-04-17 Nikon Corporation Digital camera with feature extraction device
JP4254467B2 (ja) * 2003-10-10 2009-04-15 株式会社ニコン デジタルカメラ
JP2007279601A (ja) * 2006-04-11 2007-10-25 Nikon Corp カメラ
JP4914778B2 (ja) * 2006-09-14 2012-04-11 オリンパスイメージング株式会社 カメラ
US8599251B2 (en) 2006-09-14 2013-12-03 Olympus Imaging Corp. Camera
EP1986421A3 (en) 2007-04-04 2008-12-03 Nikon Corporation Digital camera
JP5019939B2 (ja) 2007-04-19 2012-09-05 パナソニック株式会社 撮像装置及び撮像方法
JP2008301355A (ja) * 2007-06-01 2008-12-11 Casio Comput Co Ltd 撮像装置及びそのプログラム
JP5046788B2 (ja) * 2007-08-10 2012-10-10 キヤノン株式会社 撮像装置及びその制御方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7034881B1 (en) * 1997-10-31 2006-04-25 Fuji Photo Film Co., Ltd. Camera provided with touchscreen
CN101146178A (zh) * 2006-09-14 2008-03-19 奥林巴斯映像株式会社 摄像机
JP2008206018A (ja) * 2007-02-22 2008-09-04 Nikon Corp 撮像装置およびプログラム
CN101281290A (zh) * 2007-04-04 2008-10-08 株式会社尼康 数码相机
CN101325658A (zh) * 2007-06-13 2008-12-17 索尼株式会社 成像设备、成像方法和计算机程序

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107736009A (zh) * 2015-06-16 2018-02-23 奥林巴斯株式会社 运算方法、运算程序和拍摄装置
CN112307882A (zh) * 2019-07-31 2021-02-02 株式会社理光 图像判断装置及图像判断***

Also Published As

Publication number Publication date
EP2373002A4 (en) 2012-07-25
US8830374B2 (en) 2014-09-09
JP5331128B2 (ja) 2013-10-30
WO2010073619A1 (ja) 2010-07-01
EP2373002A1 (en) 2011-10-05
US20110298941A1 (en) 2011-12-08
JPWO2010073619A1 (ja) 2012-06-07

Similar Documents

Publication Publication Date Title
CN102265602A (zh) 图像拍摄装置
US8520116B2 (en) Photographing apparatus and method
CN101325658B (zh) 成像设备和成像方法
CN103733607B (zh) 用于检测运动物体的装置和方法
US9489747B2 (en) Image processing apparatus for performing object recognition focusing on object motion, and image processing method therefor
CN103024265B (zh) 摄像装置和摄像装置的摄像方法
US8077216B2 (en) Image pickup apparatus with a human face detecting function, method and program product for detecting a human face
US11736792B2 (en) Electronic device including plurality of cameras, and operation method therefor
US9065998B2 (en) Photographing apparatus provided with an object detection function
JP4923005B2 (ja) ディジタル・スチル・カメラおよびその制御方法
JP5753251B2 (ja) 画像処理装置、画像処理方法及び画像処理プログラム
CN105359502B (zh) 追踪装置、追踪方法以及存储了追踪程序的非易失性存储介质
US20100329552A1 (en) Method and apparatus for guiding user with suitable composition, and digital photographing apparatus
KR20120022512A (ko) 전자 카메라, 화상 처리 장치 및 화상 처리 방법
JPWO2010073608A1 (ja) 撮像装置
CN102812699A (zh) 图像处理设备、方法以及计算机程序存储设备
CN104754212A (zh) 电子装置以及通过使用该电子装置捕获移动对象的方法
JP5045538B2 (ja) 撮像装置、及び、プログラム
JP2018007082A (ja) 画像再生装置およびその制御方法およびプログラム
JP5030883B2 (ja) ディジタル・スチル・カメラおよびその制御方法
JP2008048152A (ja) 動画処理装置、動画撮影装置および動画撮影プログラム
CN109660712A (zh) 选择视频序列的帧的方法、***和装置
JP2006039254A (ja) カメラ
US20160198084A1 (en) Image pickup apparatus, operation support method, and medium recording operation support program
JP6375114B2 (ja) 画像再生装置及び画像再生装置の制御方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20111130