CN106067943A - 控制装置、光学设备、摄像设备和控制方法 - Google Patents

控制装置、光学设备、摄像设备和控制方法 Download PDF

Info

Publication number
CN106067943A
CN106067943A CN201610245439.XA CN201610245439A CN106067943A CN 106067943 A CN106067943 A CN 106067943A CN 201610245439 A CN201610245439 A CN 201610245439A CN 106067943 A CN106067943 A CN 106067943A
Authority
CN
China
Prior art keywords
subject
gravity
unit
control device
centre
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610245439.XA
Other languages
English (en)
Other versions
CN106067943B (zh
Inventor
若松伸茂
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN106067943A publication Critical patent/CN106067943A/zh
Application granted granted Critical
Publication of CN106067943B publication Critical patent/CN106067943B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682Vibration or motion blur correction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681Motion detection
    • H04N23/6811Motion detection based on the image signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681Motion detection
    • H04N23/6812Motion detection based on additional sensors, e.g. acceleration sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682Vibration or motion blur correction
    • H04N23/685Vibration or motion blur correction performed by mechanical compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682Vibration or motion blur correction
    • H04N23/685Vibration or motion blur correction performed by mechanical compensation
    • H04N23/687Vibration or motion blur correction performed by mechanical compensation by shifting the lens or sensor position

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Adjustment Of Camera Lenses (AREA)

Abstract

本发明涉及一种控制装置、光学设备、摄像设备和控制方法。控制装置用于通过控制校正透镜来追踪被摄体,以使得被摄体移动至拍摄图像的目标位置。控制装置进行反馈控制,以使得被摄体的位置和拍摄图像中的被摄体的目标位置之间的差变小。控制装置检测拍摄条件,并且通过基于所检测到的拍摄条件改变反馈控制中的控制增益来改变被摄体的追踪程度。

Description

控制装置、光学设备、摄像设备和控制方法
技术领域
本发明涉及一种控制装置、光学设备、摄像设备和控制方法。
背景技术
在诸如数字照相机等的摄像设备中,使诸如曝光决定或聚焦操控等的重要摄像作业全自动化。在安装有防止由于照相机抖动等所引起的图像模糊的防振动控制装置的摄像设备中,主要解决了引起拍摄者的拍摄失误的因素。提出了具有能够检测被摄体中所包括的人物的面部或身体的面部检测功能或人体检测功能的摄像设备。在这些摄像设备中,例如,预先确定了对人物的面部进行判断所利用的图案,因而可以检测到图像中所包括的与这些图案一致的部分作为人物的面部。例如在调焦控制或曝光控制中参考所检测到的人物的面部。
然而,在被摄体正在移动的状态下的拍摄或者在焦距变大的远摄状态下的拍摄引起以下问题。在被摄体正在移动且偏离拍摄图像的情况下,拍摄者需要进行特殊技术,以通过以高精度进行操作来追踪连续运动的被摄体。在利用包括焦距增大的远摄镜头的照相机来进行拍摄的情况下,由于照相机抖动所引起的图像模糊的影响增加。因此,难以维持主被摄体处于拍摄图像的中心。即使在拍摄者对照相机进行操作以使被摄体返回到拍摄图像内的情况下,拍摄者有意操作得到的照相机抖动量也经过了模糊校正。因此,由于防振动控制的影响而导致难以将被摄体微调到拍摄图像内或微调于所拍摄画面的中心。
日本特开2010-93362公开了通过使光学***的一部分在与光轴交叉的方向上移动来自动追踪被摄体的摄像设备。日本特开平7-226873公开了如下的摄像设备:从拍摄信号中提取目标被摄体以输出该被摄体的中心位置,并且使用旋转照相机平台等追踪被摄体,以使得在拍摄图像的中心附近输出被摄体的中心位置。
在如日本特开平7-226873所公开的摄像设备那样、进行被摄体追踪以使得被摄体的中心位置维持处于拍摄图像的特定位置的情况下,存在以下问题。在拍摄图像内存在诸如面部或人物等的多个被摄体的情况下,摄像装置选择仅一个特定被摄体,并且进行控制,以使得该被摄体的中心位置维持处于拍摄图像的中心。因此,拍摄图像内的其它多个面部或人物离开图像,并且与拍摄者的意图无关地自动追踪特定被摄体,以使得强制使该特定被摄体维持处于拍摄图像的特定位置。
发明内容
本发明提供能够实现被摄体追踪、以使得拍摄图像内所存在的多个被摄体尽可能多地在拍摄图像内的装置。
根据本发明的方面,一种控制装置,用于通过用于使拍摄图像中的被摄体偏移移动的可动单元来对该被摄体进行追踪控制,所述控制装置包括:重心计算单元,用于计算与从所述拍摄图像中检测到的多个被摄体相对应的一个重心位置;以及控制单元,用于对所述可动单元进行驱动控制,以使得所计算出的重心位置位于所述拍摄图像的特定位置。
根据本发明的方面,一种光学设备,其包括控制装置,所述控制装置用于通过用于使拍摄图像中的被摄体偏移移动的可动单元来对该被摄体进行追踪控制,其中,所述控制装置包括:重心计算单元,用于计算与从所述拍摄图像中检测到的多个被摄体相对应的一个重心位置;以及控制单元,用于对所述可动单元进行驱动控制,以使得所计算出的重心位置位于所述拍摄图像的特定位置。
根据本发明的方面,一种摄像设备,其包括控制装置,所述控制装置用于通过用于使拍摄图像中的被摄体偏移移动的可动单元来对该被摄体进行追踪控制,其中,所述控制装置包括:重心计算单元,用于计算与从所述拍摄图像中检测到的多个被摄体相对应的一个重心位置;以及控制单元,用于对所述可动单元进行驱动控制,以使得所计算出的重心位置位于所述拍摄图像的特定位置。
根据本发明的方面,一种控制方法,用于通过用于使拍摄图像中的被摄体偏移移动的可动单元来对该被摄体进行追踪控制,所述控制方法包括:计算与从所述拍摄图像中检测到的多个被摄体相对应的一个重心位置;以及对所述可动单元进行驱动控制,以使得所计算出的重心位置位于所述拍摄图像的特定位置。
通过以下参考附图对典型实施例的说明,本发明的其它特征将变得明显。
附图说明
图1是示意性示出根据实施例的摄像设备的图。
图2是示出摄像设备的结构的图。
图3A和3B是用于说明针对所检测到的被摄体的追踪控制的图。
图4是示出追踪量计算单元的功能的示例的框图。
图5A和5B是用于说明摄像设备对一个主被摄体进行追踪控制的示例的图。
图6A和6B是用于说明根据第一实施例的摄像设备所进行的追踪控制的图。
图7是用于说明针对被摄体的追踪控制的示例的流程图。
图8A~8C是用于说明根据第二实施例的摄像设备所进行的追踪控制的图。
具体实施方式
第一实施例
图1是示意性示出根据实施例的摄像设备的图。图2是示出摄像设备的结构的图。
在照相机101的本体上设置有释放按钮104。通过对释放按钮104进行操作所产生的开关的开或闭信号发送至CPU 105。CPU 105用作根据本实施例的控制装置。本发明可应用于包括CPU 105的任何光学装置。校正透镜114和图像传感器106位于摄像光学***的光轴102上。角速度计103是用于检测箭头103p(俯仰)和箭头103y(横摆)所表示的转动中的角度振动的角速度单元。角速度计103的输出输入至CPU 105。抖动校正角度计算单元108基于角速度计103的输出来计算抖动校正角度。具体地,抖动校正角度计算单元108从角速度计103的输出中截除作为检测噪声而添加至角速度计103的DC成分,随后进行积分处理,并且输出角度信号。在截除DC成分时,例如,使用高通滤波器(HPF)或高通透过滤波器。抖动校正角度计算单元108的输出输入至灵敏度调整单元109。
灵敏度调整单元109基于变焦和调焦位置信息107以及根据该变焦和调焦位置信息107所获得的焦距或拍摄倍率来放大抖动校正角度计算单元108的输出,并且将放大后的输出设置为抖动校正目标值。用于基于变焦和调焦位置信息107来获得抖动校正目标值的原因是:通过诸如镜头的调焦或变焦等的光学信息的变化来改变针对校正透镜114的抖动校正行程的照相机摄像面的抖动校正灵敏度。灵敏度调整单元109将抖动校正目标值作为抖动校正量输出至驱动控制单元113。
校正透镜114用作用于使拍摄图像中的被摄体发生偏移移动的可动单元。驱动控制单元113对校正透镜114进行驱动控制并且进行被摄体追踪控制。驱动控制单元113通过沿与光轴不同的方向驱动校正透镜114来进行图像模糊校正(光学防振动)。在图2所示的示例中,采用使用校正透镜114所进行的光学防振动。然而,作为用于校正图像模糊的方法,可以采用用于通过使图像传感器在与光轴垂直的平面内移动来校正图像模糊的方法。可以应用通过改变图像传感器所输出的各拍摄帧的开始位置来减轻抖动的影响的电子防振动。可以组合多个图像模糊校正方法。
接着,将说明用于使用校正透镜114来控制被摄体的追踪的方法。图2所示的被摄***置检测单元110检测拍摄图像内的被摄体的位置(被摄***置)。追踪量计算单元111基于与所检测到的被摄***置有关的信息,来计算作为校正透镜114追踪被摄体所使用的控制量的追踪校正量。相加器112将灵敏度调整单元109所输出的抖动校正量与追踪量计算单元111所输出的抖动校正量相加,并且将相加得到的量输出至驱动控制单元113。驱动控制单元113基于来自相加器112的输出来计算校正透镜114的驱动量,并且基于该驱动量来驱动校正透镜114以追踪被摄体并校正图像模糊。
接着,将说明被摄***置检测单元110中的用于检测被摄***置的方法。图像传感器106通过将从被摄体反射的光转换成电气信号来获得图像信息。该图像信息被转换成数字信号。转换成数字信号的图像信息被发送至被摄***置检测单元110。
用于从拍摄图像中所捕捉到的被摄体中自动识别主被摄体的方法如下所述。第一个方法是用于检测人物的方法。被摄***置检测单元110检测面部或人体作为拍摄图像中的被摄体。在面部检测处理中,预先确定被判断作为人物的面部的图案,因而可以检测到图像中所包括的与该图案一致的部分作为人物的面部。即使在检测到人体的情况下,也基于与预先确定的图案的一致程度来检测人体。被摄***置检测单元110计算表示所检测到的各个被摄体是被摄体(面部)的可能性的可靠度。例如,根据与图像中的面部区域或面部图案的大小的一致程度来计算可靠度。也就是说,被摄***置检测单元110用作可靠度计算单元,其中该可靠度计算单元用于基于拍摄图像中的被摄体的大小或者该被摄体与预先存储的被摄体的图案之间的一致程度来计算被摄体的可靠度。
作为用于检测主被摄体的其它方法,可以将如下的各区域识别为被摄体,其中该各区域是通过对根据对拍摄图像中所捕捉到的被摄体进行摄像而得到的图像内的色相或饱和度等的直方图所导入的分布进行分区、并且对针对各分区进行摄像而得到的图像进行分类而获得的。例如,通过对在山型分布范围中对针对摄像得到的图像所生成的多个颜色成分的直方图进行分区、并且在属于相同分区的组合的区域中对摄像得到的图像进行分类,来识别被摄体。通过针对所识别的各个被摄体计算评价值,可以将评价值最高的被摄体判断为主被摄体。在确定了主被摄体之后,例如,使用诸如色相分布或大小等的特征量,可以通过从随后顺次摄像得到的图像中检测与特征量相似的区域来追踪主被摄体的区域。使所检测到的被摄体的位置信息输入至追踪量计算单元111。追踪量计算单元111计算追踪校正量。在被摄体的数量是1个的情况下,追踪量计算单元111计算追踪校正量,以使得被摄体的重心位置位于图像中心附近。在被摄体的数量是多个的情况下,追踪量计算单元111获得与这多个被摄体相对应的一个重心位置,并且计算追踪校正量,以使得所获得的重心位置位于图像中心附近。
图3A和3B是用于说明针对所检测到的被摄体的追踪控制的图。
图3A示出被摄体追踪控制开始之前的拍摄图像301a。图3B示出被摄体追踪控制开始之后的拍摄图像301b。在图3A的拍摄图像301a中,被摄体302a位于远离图像中心304的位置。附图标记303a表示被摄体302a的重心位置(被摄体重心位置)。CPU 105进行追踪控制,以使得通过追踪控制使得被摄体重心位置303a到图像中心304的距离逐渐变近,并且最终图像中心304与被摄体重心位置大致一致。如图3B所示,追踪成功的被摄体302b的被摄体重心位置303a与图像中心304一致。
图4是示出追踪量计算单元的功能的例子的框图。
追踪量计算单元111在图像的垂直方向和水平方向上的各轴处计算各个追踪校正量。这里,将仅说明一个轴。
相减器403基于被摄***置检测单元110所输出的被摄***置信息来减去被摄***置401的坐标和图像中央位置402的坐标。因此,计算图像中心位置与被摄体的重心位置之间在图像上的距离(中心偏离量),并且所计算出的中心偏离量用作图像中心设置为0的带符号的数据。相减器403的输出输入至计数值表404,并且基于被摄体重心位置和图像中心之间的差的距离的大小来计算追踪所用的计数值。该计数值是针对各控制采样所计算的。这里,在中心偏离量等于或小于预定阈值A或者等于或大于预定阈值-A的情况下,将计数值设置为0,由此设置了在从中心起的预定范围内不进行追踪的死区区域。在计数值表404中,中心偏离量越大,计数值越大。计数值的符号是根据中心偏离量的符号所计算的。
计数值表404的输出输入至信号选择单元406。递减计数值输出单元405的输出和追踪开关407的状态也输入至信号选择单元406。在追踪开关接通的情况下,信号选择单元406选择计数值表404的输出并且输出所选择的输出至相加器408。在追踪开关断开的情况下,信号选择单元406选择递减计数值输出单元405的输出并且输出所选择的输出至相加器408。
递减计数值输出单元405输出递减计数值。在后处理中所计算出的追踪量的先前采样值410也输入至递减计数值输出单元405。追踪量的先前采样值410是直到先前采样为止的追踪校正量。在追踪量的先前采样值410的符号为正的情况下,递减计数值输出单元405将递减计数值设置为负。在追踪量的先前采样值410的符号为负的情况下,递减计数值输出单元405将递减计数值设置为正,以使得追踪校正量的绝对值减小。在追踪量的先前采样值410在0±预定范围内的情况下,递减计数值输出单元405将递减计数值设置为0。
相加器408将信号选择单元406的输出与追踪量的先前采样值410相加。相加器408的输出输入至上下限值设置单元409。上下限值设置单元409设置追踪校正量,以使得该追踪校正量不等于或大于预定上限值并且不等于或小于预定下限值。上下限值设置单元409的输出输入至低通滤波器(LPF或低通透过滤波器)411。利用LPF 411截除上下限值设置单元409的输出中的被摄体检测的高频噪声,并且该输出被输出至校正透镜量转换单元412。校正透镜量转换单元412将LPF 411的输出转换成校正透镜114追踪被摄体所使用的信号。因此,计算最终的追踪校正量。通过基于通过上述处理所获得的追踪校正量来驱动校正透镜114,以被摄体的重心位置逐渐位于图像中心附近的方式进行追踪校正。
图5A和5B是用于说明摄像设备对一个主被摄体进行追踪控制的示例的图。
在拍摄图像中,存在多个被摄体。在图5A和5B所示的示例中,摄像设备进行追踪控制,以使得从拍摄图像中检测到的主被摄体(面部)的重心位置转变为拍摄图像的中心位置。图5A示出追踪控制开始之前的图像。图5B示出在追踪控制开始之后在图像中心附近捕捉到被摄体的情况下的图像。
在拍摄图像501a中,主被摄体502a位于远离图像中心的点处。CPU 105进行追踪控制,使得从被摄体重心位置503a到图像中心的距离逐渐变近、并且最终图像中心与被摄体重心位置大致一致。在追踪成功的图像501b中,被摄体重心位置503a与图像中心一致。然而,在追踪控制开始之前在拍摄图像501a中存在多个面部、并且对图像中心处的被识别为主被摄体的附图标记502a进行追踪控制的情况下,忽略其它被摄体504a的位置。因此,在中心处捕捉到主被摄体的情况下的拍摄图像502b中,其它被摄体504b可能离开拍摄图像。
然而,不一定拍摄者想要将被摄体502a的面部追踪到中心。由于存在拍摄者想要拍摄其它面部作为主被摄体的可能性,因此在参考图5A和5B所述的追踪控制中,在一些情况下,可能获得拍摄者并不期望的图像。即使在拍摄者抖动照相机以对期望拍摄的被摄体进行取景并且使该被摄体返回到图像中的情况下,摄像设备也使在追踪控制中所识别的被摄体502a维持处于图像中心,因而取景操作可能受到影响。
因此,在拍摄图像中存在多个被摄体的情况下,根据第一实施例的摄像设备基于各被摄体的重心位置和可靠度来计算与这多个被摄体相对应的一个重心位置作为追踪目标位置。摄像设备中所包括的驱动控制单元113(参见图2)进行追踪控制,以使得所计算出的追踪目标位置位于特定位置(在该示例中,图像中心附近)。因此,在拍摄图像中存在多个被摄体(面部或人物)的情况下,特定被摄体可能不会被误认,并且拍摄者本来所拍摄的被摄体可能不会从画面离开。
图6A和6B是用于说明根据第一实施例的摄像设备所进行的追踪控制的图。
图6A示出追踪控制开始之前的图像。图6B示出追踪控制开始之后的图像。
在拍摄图像601a中,存在多个被摄体(被摄体602a和604a)。摄像设备中所包括的追踪量计算单元111(参见图2)用作重心计算单元,其中该重心计算单元用于基于所检测到的面部的数量n、各面部的重心坐标位置b和各面部的可靠度a,通过表达式1来计算与这多个被摄体相对应的一个重心位置。
数学式1
y = Σ i = 1 n ( b i × a i Σ i = 1 n a i ) ... ( 1 )
这里,n是所检测到的面部的数量,b是各面部的重心坐标位置,a是各面部的可靠度,并且y是与多个被摄体相对应的一个重心位置。在本实施例中,追踪量计算单元111增大可靠度高的面部的权重,以使得所计算出的重心位置位于可靠度高的面部附近。
在图6A的拍摄图像601a中,附图标记603a表示与多个被摄体相对应的重心位置。
如图6B的拍摄图像602b所示,摄像设备进行追踪控制,以使得重心位置y转变为图像中心位置。在该示例中,从面部的大小的角度,被摄体602a的可靠度高于被摄体604a的可靠度。因此,重心位置y不是简单地被计算为图像中所存在的面部位置的中心位置,而且通过表达式(1),所计算出的重心位置y是靠近被摄体602b的位置。然而,可以尽可能防止被摄体604b从拍摄图像离开。
图7是用于说明针对被摄体的追踪控制的示例的流程图。
在照相机101的主电源接通并且启动的情况下,按恒定的采样周期进行图7所示的追踪控制。
首先,在步骤S701中,CPU 105判断防振动SW是否接通。在防振动SW断开的情况下,处理进入S705,并且CPU 105将抖动校正量设置为0。然后,处理进入步骤S706。在防振动SW接通的情况下,处理进入S702。
在步骤S702中,CPU 105获取角速度计103的输出。在步骤S703中,CPU105判断照相机是否处于可以进行抖动校正的状态。具体地,在照相机处于从电源供给起直到角速度计103的输出稳定为止的状态的情况下,CPU 105判断为不能进行抖动校正。在照相机处于角速度计103的输出稳定之后的状态的情况下,CPU 105判断为可以进行抖动校正。因此,在紧接着电源供给之后的输出值不稳定的状态下,可能无法进行抖动校正。在照相机不是处于可以进行抖动校正的状态下,处理进入步骤S705。在照相机处于可以进行抖动校正的状态的情况下,处理进入步骤S704。
在步骤S704中,CPU 105使抖动校正角度计算单元108和灵敏度调整单元109基于步骤S702中所获取到的角速度计的输出来计算抖动校正量。随后,在步骤S706中,CPU 105判断追踪SW是否接通。在追踪SW断开的情况下,处理进入步骤S713。然后,在步骤S713中,CPU 105将追踪校正量设置为0并且处理进入步骤S714。在追踪SW接通的情况下,处理进入步骤S707。
在步骤S707中,CPU 105根据图像传感器106所获取到的图像信号来判断是否存在追踪对象被摄体。在不存在追踪对象被摄体的情况下,处理进入步骤S713。在存在对象追踪被摄体的情况下,处理进入步骤S708。
在步骤S707中,CPU 105检测被摄体的数量。随后,在步骤S709中,CPU105检测各被摄体的重心位置。在步骤S710中,CPU 105检测各被摄体的可靠度。
接着,在步骤S711中,CPU 105基于步骤S708~S710中所检测到的被摄体的数量、各被摄体的重心位置和各被摄体的可靠度,使用表达式(1)来计算被摄体重心位置。随后,在步骤S712中,CPU 105使追踪量计算单元111基于被摄体重心位置来计算追踪校正量。
接着,在步骤S714中,CPU 105将步骤S704中所计算出的抖动校正量与步骤S712中所计算出的追踪校正量相加以计算透镜驱动量。随后,在步骤S715中,CPU 105使驱动控制单元113基于透镜驱动量来驱动校正透镜114。因此,校正了图像模糊并且追踪到被摄体。然后,处理进入步骤S716以结束抖动校正例程,并且进入待机状态,直到下一采样周期为止。
根据第一实施例的控制装置根据拍摄图像中的多个被摄体的位置以及各被摄体的可靠度来计算与这多个被摄体相对应的一个重心位置,并且基于该重心位置来进行自动追踪控制。因此,可以通过仅追踪特定被摄体来防止其它被摄体离开画面,并且防止进行拍摄者所不期望的自动追踪操作。
在本实施例中,应用通过使用校正透镜作为抖动校正单元而在与光轴垂直的平面内移动的所谓的光学防振动。然而,本发明不限于光学防振动,而且还可以应用以下结构:
(1)使图像传感器在与光轴垂直的平面内移动的被摄体追踪装置的结构;
(2)改变图像传感器所输出的各拍摄帧的开始位置的被摄体追踪装置的结构;
(3)转动地驱动包括图像传感器和拍摄透镜组的镜筒的被摄体追踪装置的结构;
(4)组合有与摄像设备分开设置的并且可以使摄像设备平摇和俯仰的旋转照相机平台的被摄体追踪装置的结构;以及
(5)上述多个被摄体追踪装置的结构的组合。
第二实施例
图8A~8C是用于说明根据第二实施例的摄像设备所进行的追踪控制的图。
与第一实施例相同,摄像设备基于所检测到的面部的数量n、各面部的重心坐标位置b和各面部的可靠度a,通过使用表达式(1)来计算与多个被摄体相对应的一个重心位置。然后,摄像设备进行追踪控制,以使得重心位置维持处于图像中心。在第二实施例中,CPU 105基于角速度计103的输出、即表示施加至摄像设备的抖动的抖动检测信号,来检测拍摄者的照相机抖动操作(被摄体追踪操作)。CPU 105基于所检测到的照相机抖动操作来估计拍摄者作为目标的被摄体,并且将该被摄体的可靠度设置得高以重新计算重心位置。然后,进行追踪控制,以使得重新计算出的重心位置维持处于图像中心。
在图8A的拍摄图像801a中,进行追踪控制,以使得与两个被摄体(802a和803a)相对应的重心位置804a维持处于图像中心。在这种状态下,在拍摄者对照相机进行操作以使得被摄体803a返回至图像中心的情况下,发生沿箭头805a所表示的方向的照相机抖动。摄像设备检测到该照相机抖动,并且基于该检测结果估计出拍摄者的目标的被摄体是被摄体803a。然后,摄像设备将被摄体803a的可靠度设置得高以重新计算重心位置。也就是说,摄像设备将位于照相机抖动的方向上的被摄体803a的可靠度设置得更高,并且再次将相对于照相机抖动的方向的相反方向上或中心附近的被摄体802a的可靠度设置得更低,以重新计算重心位置。摄像设备进行追踪控制,以使得重新计算出的重心位置维持处于图像中心。
在图8B的拍摄图像801b中,进行追踪控制,以使得重新计算出的重心位置804b维持处于图像中心。在这种状态下,在拍摄者对照相机进行操作、以使得被摄体803b进一步返回至图像中心的情况下,发生沿箭头805a所表示的方向的照相机抖动。摄像设备将位于照相机抖动方向上的被摄体803b的可靠度设置得更高,并且再次将被摄体802b的可靠度设置得更低。基于再次新设置的可靠度来重新计算重心位置,并且进行追踪控制,以使得该重心位置维持处于图像中心。在图8C的拍摄图像801c中,进行追踪控制,以使得重新计算出的重心位置804c维持处于图像中心。根据第二实施例的摄像设备,可以防止拍摄者所不期望的自动追踪控制。
其它实施例
本发明的实施例还可以通过如下的方法来实现,即,通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给***或装置,该***或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。
尽管已经参考典型实施例说明了本发明,但是应该理解,本发明不限于所公开的典型实施例。所附权利要求书的范围符合最宽的解释,以包含所有这类修改、等同结构和功能。
本申请要求2015年4月21日提交的日本专利申请2015-086886的优先权,在此通过引用包含其全部内容。

Claims (11)

1.一种控制装置,用于通过用于使拍摄图像中的被摄体偏移移动的可动单元来对该被摄体进行追踪控制,所述控制装置包括:
重心计算单元,用于计算与从所述拍摄图像中检测到的多个被摄体相对应的一个重心位置;以及
控制单元,用于对所述可动单元进行驱动控制,以使得所计算出的重心位置位于所述拍摄图像的特定位置。
2.根据权利要求1所述的控制装置,其中,
所述重心计算单元基于所检测到的被摄体的数量、各个被摄体的重心位置、以及表示各个被摄体是特定被摄体的可能性的可靠度,来计算与所述多个被摄体相对应的一个重心位置。
3.根据权利要求2所述的控制装置,其中,
所述重心计算单元增大可靠度高的被摄体的权重,以使得所计算出的重心位置位于可靠度高的被摄体附近。
4.根据权利要求2所述的控制装置,其中,还包括:
检测单元,用于基于表示施加至所述控制装置的抖动的抖动检测信号,来检测拍摄者的被摄体追踪操作;以及
改变单元,用于根据所检测到的被摄体追踪操作来改变被摄体的可靠度。
5.根据权利要求4所述的控制装置,其中,
在检测到所述被摄体追踪操作的情况下,所述改变单元提高所述抖动的方向上所存在的被摄体的可靠度。
6.根据权利要求5所述的控制装置,其中,
在检测到所述被摄体追踪操作的情况下,所述改变单元降低所述拍摄图像的中心附近所存在的被摄体或者与所述抖动的方向相反的方向上所存在的被摄体的可靠度。
7.根据权利要求1所述的控制装置,其中,
所述被摄体是人物的面部或人体。
8.根据权利要求1所述的控制装置,其中,还包括:
可靠度计算单元,用于基于所述拍摄图像中的被摄体的大小或者该被摄体与预先存储的被摄体的图案之间的一致程度,来计算表示该被摄体是特定被摄体的可能性的可靠度。
9.一种光学设备,其包括控制装置,所述控制装置用于通过用于使拍摄图像中的被摄体偏移移动的可动单元来对该被摄体进行追踪控制,
其中,所述控制装置包括:
重心计算单元,用于计算与从所述拍摄图像中检测到的多个被摄体相对应的一个重心位置;以及
控制单元,用于对所述可动单元进行驱动控制,以使得所计算出的重心位置位于所述拍摄图像的特定位置。
10.一种摄像设备,其包括控制装置,所述控制装置用于通过用于使拍摄图像中的被摄体偏移移动的可动单元来对该被摄体进行追踪控制,
其中,所述控制装置包括:
重心计算单元,用于计算与从所述拍摄图像中检测到的多个被摄体相对应的一个重心位置;以及
控制单元,用于对所述可动单元进行驱动控制,以使得所计算出的重心位置位于所述拍摄图像的特定位置。
11.一种控制方法,用于通过用于使拍摄图像中的被摄体偏移移动的可动单元来对该被摄体进行追踪控制,所述控制方法包括:
计算与从所述拍摄图像中检测到的多个被摄体相对应的一个重心位置;以及
对所述可动单元进行驱动控制,以使得所计算出的重心位置位于所述拍摄图像的特定位置。
CN201610245439.XA 2015-04-21 2016-04-19 控制装置、光学设备、摄像设备和控制方法 Expired - Fee Related CN106067943B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2015086886A JP6504899B2 (ja) 2015-04-21 2015-04-21 制御装置、光学機器、撮像装置および制御方法
JP2015-086886 2015-04-21

Publications (2)

Publication Number Publication Date
CN106067943A true CN106067943A (zh) 2016-11-02
CN106067943B CN106067943B (zh) 2020-01-21

Family

ID=57148222

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610245439.XA Expired - Fee Related CN106067943B (zh) 2015-04-21 2016-04-19 控制装置、光学设备、摄像设备和控制方法

Country Status (3)

Country Link
US (1) US9692962B2 (zh)
JP (1) JP6504899B2 (zh)
CN (1) CN106067943B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111918697A (zh) * 2018-03-12 2020-11-10 东芝能源***株式会社 医用图像处理装置、治疗***以及医用图像处理程序
CN111935453A (zh) * 2020-07-27 2020-11-13 浙江大华技术股份有限公司 一种学习监督方法、装置、电子设备及存储介质
CN113170049A (zh) * 2018-12-27 2021-07-23 微软技术许可有限责任公司 使用场景改变触发自动图像捕获

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11265478B2 (en) * 2019-12-20 2022-03-01 Canon Kabushiki Kaisha Tracking apparatus and control method thereof, image capturing apparatus, and storage medium

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07226873A (ja) * 1994-02-16 1995-08-22 Hitachi Ltd 自動追尾撮像装置
CN101141565A (zh) * 2006-09-04 2008-03-12 索尼株式会社 图像处理装置和图像处理方法、计算机程序及摄像装置
JP2010093362A (ja) * 2008-10-03 2010-04-22 Nikon Corp 撮像装置および光学装置
CN101785306A (zh) * 2007-07-13 2010-07-21 坦德伯格电信公司 用于自动摄像机控制的方法和***

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005110160A (ja) * 2003-10-02 2005-04-21 Konica Minolta Holdings Inc 撮像装置
JP5115139B2 (ja) * 2007-10-17 2013-01-09 ソニー株式会社 構図判定装置、構図判定方法、プログラム
JP6178987B2 (ja) * 2014-02-05 2017-08-16 パナソニックIpマネジメント株式会社 撮像装置
JP6128109B2 (ja) * 2014-12-12 2017-05-17 カシオ計算機株式会社 撮影装置、撮影方向の制御方法及びプログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07226873A (ja) * 1994-02-16 1995-08-22 Hitachi Ltd 自動追尾撮像装置
CN101141565A (zh) * 2006-09-04 2008-03-12 索尼株式会社 图像处理装置和图像处理方法、计算机程序及摄像装置
CN101785306A (zh) * 2007-07-13 2010-07-21 坦德伯格电信公司 用于自动摄像机控制的方法和***
JP2010093362A (ja) * 2008-10-03 2010-04-22 Nikon Corp 撮像装置および光学装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111918697A (zh) * 2018-03-12 2020-11-10 东芝能源***株式会社 医用图像处理装置、治疗***以及医用图像处理程序
CN111918697B (zh) * 2018-03-12 2023-11-10 东芝能源***株式会社 医用图像处理装置、治疗***以及存储介质
CN113170049A (zh) * 2018-12-27 2021-07-23 微软技术许可有限责任公司 使用场景改变触发自动图像捕获
CN111935453A (zh) * 2020-07-27 2020-11-13 浙江大华技术股份有限公司 一种学习监督方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
CN106067943B (zh) 2020-01-21
US9692962B2 (en) 2017-06-27
US20160316137A1 (en) 2016-10-27
JP2016208230A (ja) 2016-12-08
JP6504899B2 (ja) 2019-04-24

Similar Documents

Publication Publication Date Title
CN106954007A (zh) 摄像装置和摄像方法
CN104065878B (zh) 拍摄控制方法、装置及终端
CN101309357B (zh) 具有图像抖动检测功能的摄像装置
CN106067943A (zh) 控制装置、光学设备、摄像设备和控制方法
CN107018288A (zh) 控制装置和摄像设备
CN104580901B (zh) 确定拍摄参数的方法和终端
US11375097B2 (en) Lens control method and apparatus and terminal
CN109886995B (zh) 一种复杂环境下多目标跟踪方法
CN109413324A (zh) 一种拍摄方法和移动终端
CN103733607A (zh) 用于检测运动物体的装置和方法
CN110383335A (zh) 视频内容中基于光流和传感器输入的背景减除
CN104883524B (zh) 一种在线课堂中运动目标自动跟踪拍摄方法及***
CN105872363A (zh) 人脸对焦清晰度的调整方法及调整装置
US8537247B2 (en) Photographing device which measures azimuth during photographing
CN106488116A (zh) 摄像装置
CN110245641A (zh) 一种目标追踪拍摄方法、装置、电子设备
JP6516544B2 (ja) 制御装置、光学機器、撮像装置および制御方法
CN107920200A (zh) 图像模糊校正装置及其控制方法和摄像装置
CN103988107A (zh) 成像设备、控制成像设备的方法和程序
JP4589646B2 (ja) ディジタル・スチル・カメラおよびその制御方法
CN112166435A (zh) 目标跟踪方法、装置、电子设备及存储介质
CN113542612A (zh) 镜头防抖方法、装置、计算机设备和存储介质
WO2021189429A1 (zh) 图像拍摄方法、装置、可移动平台和存储介质
JP6702736B2 (ja) 撮像制御装置および撮像装置の制御方法、プログラム
JP5365722B2 (ja) 撮影装置、撮影装置の制御方法およびプログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20200121