CN106464783B - 图像拾取控制设备、图像拾取设备和图像拾取控制方法 - Google Patents

图像拾取控制设备、图像拾取设备和图像拾取控制方法 Download PDF

Info

Publication number
CN106464783B
CN106464783B CN201580025940.9A CN201580025940A CN106464783B CN 106464783 B CN106464783 B CN 106464783B CN 201580025940 A CN201580025940 A CN 201580025940A CN 106464783 B CN106464783 B CN 106464783B
Authority
CN
China
Prior art keywords
display
detection
image
displayed
detection region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201580025940.9A
Other languages
English (en)
Other versions
CN106464783A (zh
Inventor
宫谷佳孝
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN106464783A publication Critical patent/CN106464783A/zh
Application granted granted Critical
Publication of CN106464783B publication Critical patent/CN106464783B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635—Region indicators; Field of view indicators
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28—Systems for automatic generation of focusing signals
    • G02B7/36—Systems for automatic generation of focusing signals using image sharpness techniques, e.g. image processing techniques for generating autofocus signals
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B13/00—Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
    • G03B13/32—Means for focusing
    • G03B13/34—Power focusing
    • G03B13/36—Autofocus systems
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00—Details of cameras or camera bodies; Accessories therefor
    • G03B17/18—Signals indicating condition of a camera member or suitability of light
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/80—Geometric correction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H04N23/675—Focus control based on electronic image sensor signals comprising setting of focusing regions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/71—Circuitry for evaluating the brightness variation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Optics & Photonics (AREA)
  • Theoretical Computer Science (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Geometry (AREA)
  • Automatic Focus Adjustment (AREA)
  • Focusing (AREA)
  • Indication In Cameras, And Counting Of Exposures (AREA)

Abstract

为了提供能够实现诸如聚焦控制的正确图像控制的成像控制设备、成像设备和成像控制方法。根据本技术的实施例的一种成像控制设备包括检测控制单元、图像校正单元和显示控制单元。所述检测控制单元基于图像传感器所获取的对象图像中的对应于预定区域的检测区域来控制检测。所述图像校正单元基于与图像拾取镜头相关的镜头信息来校正屏幕上显示的对象图像。所述显示控制单元基于所述检测区域和所述镜头信息，在所述屏幕上的预定位置显示检测区域显示，所述检测区域显示代表所述检测区域。

Description

图像拾取控制设备、图像拾取设备和图像拾取控制方法
技术领域
本技术涉及执行自动聚焦功能及其显示控制的成像控制设备、成像设备和成像控制方法。
背景技术
近年来，诸如数字相机的电子设备通常包括监视器，监视器在进行图像拾取时显示用于执行聚焦或者确定构成的拾取图像。另外，如今，在监视器上显示光学测距帧，并且改变被聚焦的光学测距帧的颜色或者只显示被聚焦的光学测距帧，使得用户可更容易地将对象对焦。
在专利文献1中，例如，描述了一种成像设备，该成像设备能够在拾取拾取图像的聚焦帧时，通过在LCD上优先放大和显示具有近距离聚焦区域的图像来为用户显示拾取图像的更聚焦的点。
专利文献1：日本专利申请特许公开No.2005-295418
发明内容
要解决的问题
例如，如果图像拾取镜头有失真，则在监视器上显示的对象图像和光学测距帧之间的位置关系会产生位移。结果，会难以对用户所期望的预定区域中的对象执行正确的聚焦控制。
依据如上所述的情形，本技术的目的是提供能够实现正确的图像控制(诸如，聚焦控制)的成像控制设备、成像设备和程序控制方法。
解决问题的手段
根据本技术的实施例的一种成像控制设备包括检测控制单元、图像校正单元和显示控制单元。
所述检测控制单元基于与图像传感器所获取的对象图像中的预定区域对应的检测区域来控制检测。
所述图像校正单元基于与图像拾取镜头相关的镜头信息来校正屏幕上显示的对象图像。
所述显示控制单元基于所述检测区域和所述镜头信息，在所述屏幕上的预定位置显示检测区域显示，所述检测区域显示代表所述检测区域。
所述成像控制设备包括显示控制单元，所述显示控制单元基于检测区域和所述镜头信息，显示屏幕上的预定位置处的检测区域显示，所述检测区域显示代表检测区域。因此，可以在屏幕上显示对象图像，使得检测区域显示对应于对象图像。例如，因此，可以实现用户所期望的聚焦控制。
检测区域显示通常包括代表自动聚焦(AF)区域的光学测距帧、代表自动曝光(AE)区域的显示帧等。
所述显示控制单元可基于所述镜头信息，确定校正所述检测区域显示的显示位置的必要性。
只有当必须进行校正时，才校正显示位置，从而可以更有效地进行显示处理。
所述显示控制单元可在所述对象图像中的对应于所述检测区域的区域被聚焦时，在所述屏幕上显示所述检测区域显示。
因此，可以为用户显示对焦位置。
所述检测区域可包括多个检测区域。所述检测控制单元可基于选自所述多个检测区域的检测区域来控制检测。
因此，例如，可以实现用户所期望的检测区域中的对象的聚焦控制。
在这种情况下，所述检测控制单元可被构造成基于所述镜头信息来确定校正所选择的所述检测区域的必要性。
因此，可以防止由于失真而造成的检测区域的位置的移位。
所述镜头信息通常包括所述图像拾取镜头的失真信息。所述图像校正单元被构造成基于所述失真信息，校正所述对象图像的失真。
可从所述图像拾取镜头获取所述镜头信息。
所述检测控制单元通常检测所述对象图像中的对应于所述检测区域的区域的对焦位置。然而，并不限于此，并且所述检测控制单元可检测所述对象图像中的对应于所述检测区域的区域的曝光量。
所述成像控制设备还可包括：获取单元，其获取所述镜头信息。
所述成像控制设备还可包括受所述检测控制单元控制的检测单元。所述检测单元基于所述检测区域执行检测处理。
根据本技术的实施例的一种成像设备包括图像拾取光学***、图像传感器、检测控制单元、图像校正单元、显示单元和显示控制单元。
所述图像拾取光学***包括图像拾取镜头。
所述图像传感器获取所述图像拾取光学***所形成的对象图像。
所述检测控制单元基于与所述图像传感器所获取的所述对象图像中的预定区域对应的检测区域来控制检测。
所述图像校正单元基于与所述图像拾取镜头相关的镜头信息，校正所述图像传感器所获取的所述对象图像。
所述显示单元包括显示被所述图像校正单元校正的所述对象图像和代表所述检测区域的检测区域显示的屏幕。
所述显示控制单元基于所述检测区域和所述镜头信息，在所述屏幕上的预定位置处显示所述检测区域显示。
所述图像传感器可包括执行所述图像拾取镜头的瞳孔划分的多个相位差检测像素。因此，可以实现高速的自动聚焦控制。另外，相比于基于校正后的对象图像执行检测控制的情况，可以减少检测所必需的计算负担并且缩短检测处理所必需的时间。
所述检测区域可包括多个检测区域。所述显示单元还可包括触摸传感器，所述触摸传感器检测针对代表所述多个检测区域的多个检测区域显示中的一个进行的选择操作。
根据本技术的实施例的一种成像控制方法包括：基于与图像传感器所获取的对象图像中的预定区域对应的检测区域来控制检测。
基于与所述图像拾取镜头相关的镜头信息，校正屏幕上显示的所述对象图像。
基于所述检测区域和所述镜头信息，在所述屏幕上的预定位置处显示检测区域显示，所述检测区域显示代表所述检测区域。
效果
如上所述，根据本技术，可以实现正确的图像控制(诸如，聚焦控制)。
注意的是，本文中描述的效果不一定受限制，并且可以是本文中描述的效果中的任一个。
附图说明
[图1]示出根据这个实施例的成像设备的整体构造的框图。
[图2]示出图像传感器中的正常像素和相位差检测像素的布置示例的示意图。
[图3]说明图像失真的示意图。
[图4]说明校正失真的方法的示意图。
[图5]示出画面上的检测区域的显示示例的示意图。
[图6]说明成像控制设备的操作示例的流程图。
[图7]说明通过成像控制设备对检测区域进行显示控制的示例的示意图。
[图8]说明成像控制设备的另一个操作示例的流程图。
[图9]说明通过成像控制设备对检测区域进行显示控制的示例的示意图。
具体实施方式
下文中，将参照附图描述本技术的实施例。
[成像设备和成像控制设备]
图1是示出根据这个实施例的成像设备100的整体构造的框图。
成像设备100包括光学成像***101、图像传感器102、预处理电路103、相机处理电路104、图像存储器105、控制单元106、图形I/F(接口)107、显示单元108、输入单元109、和R/W(读/写器)110。控制单元106用作成像控制设备150。
光学成像***101包括：图像拾取镜头101A，其用于从图像传感器102中的对象采集光；驱动机构，其用于通过移动图像拾取镜头101A来执行聚焦或变焦的驱动机构；快门机构；虹膜机构等。响应于来自控制单元106的控制信号来驱动它们。借助光学成像***101获取的对象的光图像形成在用作成像装置的图像传感器102上。
图像传感器102包括作为正常像素的R(红色)像素、G(绿色)像素和B(蓝色)像素和用于相位差检测的相位差检测像素。构成图像传感器102的像素均将来自对象的入射光光电转换成电荷量并且输出像素信号。然后，图像传感器102最终将包括像素信号的成像信号输出到预处理器电路103。使用CCD(电荷耦合器件)、CMOS(互补型金属氧化物半导体)等作为图像传感器102。
图2是示出图像传感器102中的正常像素和相位差检测像素的布置示例的示意图。在图2中，R、G和B分别是的R(红色)像素、G(绿色)像素和B(蓝色)像素，并且代表正常成像像素。另外，在图2中，P1和P2分别代表第一相位差检测像素和第二相位差检测像素。
相位差检测像素被构造成形成成对的P1和P2，并且执行图像拾取镜头101A的瞳孔划分。相位差检测像素P1和P2具有与正常成像像素的光学性质不同的光学性质。注意的是，在图2中，使用G像素的部分作为相位差检测像素。这是因为，G像素的数量是R像素或B像素的数量的两倍。应该注意，相位差检测像素不限于G像素。
图像传感器102包括用于执行图像拾取镜头101A的瞳孔划分的多个相位差检测像素P1和P2以及正常像素R、G和B。成像设备100被构造成用来自多个相位差检测像素P1和P2的输出来执行所谓的图像表面相位差AF(自动聚焦)。
预处理电路103例如对从图像传感器102输出的成像信号执行样本保持操作，用CDS(相关双采样)处理将S/N(信号/噪声)比率保持在有利值。另外，预处理电路103用AGC(自动增益控制)处理来控制增益，并且通过执行A/D(模拟/数字)转换来输出数字图像信号。
相机处理电路104对来自预处理电路103的图像信号执行信号处理(诸如，白平衡调节处理、颜色校正处理、伽玛校正处理、Y/C转换处理和AE(自动曝光)处理)。
图像存储器105是易失性存储(例如，包括DRAM(动态随机存取存储器)的缓冲存储器)，并且暂时存储已经被预处理电路103和相机处理电路104执行预定处理的图像数据。
控制单元106包括例如CPU、RAM和ROM。在ROM中，例如，存储被CPU读取并且进行操作的程序。使用RAM作为CPU的工作存储器。CPU通过按照存储在ROM中的程序执行各种类型的处理来控制整个成像设备100。
控制单元106通过执行预定程序来用作成像控制设备150。应该注意，成像控制设备150不一定需要用程序来实现，并且可通过专用设备来实现，该专用设备是具有像成像控制设备一样的功能的硬件。在这种情况下，成像设备100包括作为硬件的成像控制设备。
成像控制设备150包括获取单元151、检测单元152、检测控制单元153、图像校正单元154和显示控制单元155。
注意的是，获取单元151和检测单元152不一定需要通过成像控制设备150的部分来构造，并且可独立于成像控制设备来构造。
获取单元151被构造成获取检测单元152执行聚焦调节所必需的控制参数或者例如图像校正单元154对对象图像执行失真校正所必需的校正值。
获取单元151获取镜头信息和相位差信号。镜头信息包括与图像拾取镜头101A相关的镜头信息(即，图像拾取镜头101A中的变焦(焦距)、聚焦(图像拾取距离)和光圈(F数))和失真信息(诸如，失真量)。获取单元151从例如管理图像拾取镜头101A的微计算机(未示出)获取镜头信息，并且从图像传感器102获取包括相位差检测像素P1和P2的相位差信号。
获取单元151所获取的镜头信息、相位差信号等可被存储在用作成像控制设备150的控制单元106的ROM中或者单独的存储介质中。
检测单元152被构造成基于获取单元151所获取的镜头信息、相位差信号等，检测与图像传感器102所获取的对象图像中的预定区域对应的检测区域。
检测控制单元153基于检测区域来控制检测。具体地，检测控制单元153控制检测单元152对检测区域执行检测处理。通常，多个检测区域被设置成对应于对象图像的预定区域。检测区域在显示单元108的屏幕上被显示为预定形式的检测区域显示。
检测区域显示通常在显示单元108的屏幕上的多个位置显示。检测区域均包括多个相位差检测像素，并且检测区域显示在屏幕上被显示为进行AF的光学测距帧和AE的显示帧。这多个检测区域显示可在屏幕上以栅格图案显示，或者可分别在任意位置显示。
检测单元152对预先设置的或者供用户选择的预定检测区域执行检测处理。检测控制单元153致使检测单元152检测对应于检测区域的对象图像中的区域的对焦位置。具体地，检测单元152基于检测区域中的相位差信号，计算图像传感器102所获取的焦点位置和图像拾取镜头101A中的最佳图像表面的位置之间的差异，并且确定图像拾取镜头101A向着光轴方向的移动量。检测单元152将用于驱动图像拾取镜头101A的AR控制信号输出到光学成像***101，并且对对象图像执行聚焦控制。
在这个实施例中，由于检测单元152被构造成使用来自相位差检测像素的相位差信号，对图像执行自动聚焦控制，因此可以高速地实现自动聚焦控制。另外，检测单元152被构造成对还未被图像校正单元154执行失真校正的图像执行自动聚焦控制。因此，相比于基于校正后的对象图像执行检测控制的情况，可以减少检测所必需的计算负担并且缩短检测处理所必需的时间。
图像校正单元154被构造成基于获取单元151所获取的镜头信息(失真信息)，校正在显示单元108的屏幕上显示的对象图像的失真。
当图像拾取镜头101A具有像差时，在借助图像拾取镜头101A形成的对象图像上产生光学失真。因为图像传感器102将光学成像***101所形成的对象图像原样地转换成图像信号，另外，图像信号受对象图像的光学失真影响。典型的光学失真包括诸如图3的A部分中示出的“桶形失真”和图3的B部分中示出的“枕形失真”的失真。图3的A部分和B部分表示以下状态：用交替的双点划线表示的范围中的对象的图像由于失真而被形成为用实线表示的形状。
图像校正单元154被构造成基于与图像拾取镜头相关的镜头信息，校正屏幕上显示的对象图像。具体地，图像校正单元154用所获取的镜头信息来确定图像拾取镜头101A的失真量，并且校正图像传感器102所获取的对象图像，以得到没有像差的图像。控制单元106生成在显示单元108的屏幕上显示被图像校正单元154校正的对象图像的图像信号。
例如，可通过将对象图像转换成数字数据并且根据失真量重排像素数据来校正对象图像的失真。在校正了产生桶形失真的图像的情况下，例如，a点至d点处的像素被分别读取为A点至D点处的像素，如图4中所示。因此，可以产生其失真已经被校正的图像。此时，还可以用插值处理、细化处理等来调节像素的数量。
注意的是，控制单元106可被构造成通过用户的选择，生成在不对对象图像执行以上提到的像差校正的情况下，在显示单元108的屏幕上原样显示图像传感器102所获取的对象图像的控制信号。
显示控制单元155基于检测区域和镜头信息，在屏幕上的预定位置显示代表检测区域的检测区域显示。具体地，显示控制单元155在显示单元108的屏幕上显示AF帧(检测帧)作为检测区域显示。图5示出AF帧的显示示例。在显示单元108的屏幕108A上，显示已经被图像校正单元154执行失真校正的对象图像V。AF帧120被叠加在对象图像上进行显示。可显示所有AF帧120，或者可只显示聚焦AF帧。在前一种情况下，可用与未聚焦AF帧的形式不同的形式来显示聚焦AF帧。
在所示出的示例中，作为AF帧120，7个AF帧和8个AF帧分别垂直且水平地布置成栅格图案。然而，AF帧的数量和位置不限于以上提到的示例。另外，AF帧120不一定需要彼此相邻地显示，并且可彼此分开地显示。
检测单元152对关于预定AF帧120的对象图像执行自动聚焦控制。预定的AF帧120可以是所有的AF帧120或者用户指定的一个或多个AF帧。
通常，检测单元152基于失真校正之前的对象图像，对AF帧执行光学测距控制。因此，基于失真校正之前的对象图像，设置检测区域。另一方面，由于在屏幕108A上显示了已经被执行失真校正的对象图像，因此当基于失真校正之前的对象图像而设置的AF帧原样在屏幕108A上显示时，屏幕108A上的对象图像V和AF帧120之间的相对位置处产生位移。在这种情况下，可能难以实现用户所期望的正确AF控制。
依据上文，在这个实施例中，显示控制单元155被构造成基于获取单元151所获取的镜头信息，校正在显示单元108的屏幕上显示的检测区域的显示位置。因此，可以显示AF帧120，使得AF帧120对应于屏幕108A上的对象图像V。因此，可以实现用户所期望的聚焦控制。
显示控制单元155基于图像拾取镜头101A的镜头信息，确定校正屏幕108A上的AF帧120的显示位置的必要性。具体地，显示控制单元155被构造成根据图像拾取镜头101A的失真量，确定是否需要校正AF帧120的显示位置，并且只有当必须进行校正时才校正显示位置，从而使得可以更有效地进行显示处理。基于图像拾取镜头101A的镜头信息来确定失真量。可供选择地，可基于图像校正单元154所执行校正的量来确定失真量。
图形I/F 107用从控制单元106供应的图像信号来生成在显示单元108上显示图像的图像信号，并且将这个信号供应到显示单元108来显示图像。
显示单元108包括显示被图像校正单元154执行失真校正的对象图像的屏幕、其显示位置被显示控制单元155校正的检测区域等的屏幕。显示单元108包括例如LCD(液晶显示器)、有机EL(电致发光)面板等。显示单元108可包括触摸传感器，触摸传感器能够检测屏幕上的触摸输入。在屏幕上，显示当前成像的通过图像(through-image)、记录在存储介质111中的图像等。
输入单元109包括：例如，电源按钮，其用于接通/切断电源；释放按钮，其用于支持记录图像的开始；操作元件，其用于变焦调节；触摸屏幕(触摸面板)，其与显示单元108形成一体，等等。当对输入单元109进行输入时，生成取决于输入的控制信号，并且将其输出到控制单元106。然后，控制单元106执行对应于控制信号的算术处理或控制。
R/W 110是存储通过成像等生成的图像数据的存储介质111所连接的接口。R/W110将控制单元106供应的数据写入存储介质111中，并且将从存储介质111读取的数据输出到控制单元106。存储介质111包括例如硬盘、卡型存储介质、诸如USB存储器的高容量存储介质等。
[成像设备和成像控制设备的操作]
下文中，将把成像控制设备150的细节与成像设备100的操作一起进行描述。
图6是说明成像控制设备150的操作示例的流程图。将用成像控制设备150对对象图像中的特定区域自动执行聚焦控制的示例进行描述。
在成像设备100的静止图像拾取模式下，通过图像传感器102获取光学成像***101所形成的对象图像，并且在屏幕108A上显示器帧图像。
当检测到用户半按(S1)快门按钮(释放按钮)时，获取单元151获取图像拾取镜头101A的镜头信息和相位差信号(步骤101和102)。可从光学成像***101直接获取或者从存储预先获取的镜头信息的存储器读取镜头信息。从图像传感器102的相位差检测像素P1和P2获取相位差信号。
检测控制单元153致使检测单元152对所有AF帧(检测区域)120执行光学测距控制，并且确定主要对象(步骤103和104)。例如，选择与图像拾取透镜101A最近的对象或位于中心的对象作为主要对象。检测单元152驱动图像拾取透镜101A对所确定的主要对象执行聚焦控制(步骤105)。
图像校正单元154基于获取单元151所获取的镜头信息，对对象图像执行失真校正，并且致使屏幕108A显示没有失真的对象图像。另一方面，显示控制单元155基于镜头信息，确定是否需要校正AF帧120的显示位置(步骤106)。
通常，在当显示被聚焦的AF帧120时由于图像的失真校正而导致显示位置改变预定量或更多的情况下，根据改变量来校正AF帧120的显示位置。在改变量小于预定量的情况下，原样显示AF帧120，而没有校正AF帧120的位置(步骤107和108)。
图7的A部分表示以下状态：由于失真校正，导致在AF帧121和122中，失真校正之前的AF帧124和125中的图像有移动。检测单元152检测AF帧124和125中的对失真校正之前的图像V0执行聚焦控制的相位差信号。图像校正单元154在屏幕108A上显示已经被执行失真校正的图像V1来替代图像V0。显示控制单元155在如图7的B部分中所示的屏幕108A上点亮并且显示在完成与V0所处的AF帧124和125对应的对象图像中的区域的聚焦控制之后的V1所处的AF帧121和122。
如上所述，根据这个实施例，可以正确地显示对焦位置，因为防止了屏幕108A上显示的聚焦位置移位。因此，可以实现用户所期望的正确聚焦控制。
图8是说明成像控制设备150的另一个操作示例的流程图。将用对用户所指定的对象图像中的特定区域执行聚焦控制的示例进行描述。
类似于以上提到的操作示例，当检测到用户半按(S1)快门按钮(释放按钮)时，获取单元151获取图像拾取镜头101A的镜头信息和相位差信号(步骤201和202)。
接下来，图像校正单元154基于获取单元151所获取的镜头信息对对象图像执行失真校正，并且致使屏幕108A显示没有失真的对象图像。另一方面，显示控制单元155接收用户所指定的特定聚焦帧(检测区域)的输入。
以上提到的聚焦帧可以是如图5中所示的屏幕108A上显示的多个AF帧120的一个或多个区域或者屏幕108A上的一个或多个任意区域。在后一种情况下，并不需要在屏幕108A上显示AF帧120本身，而是只需要确定与用户所指定的位置对应的聚焦帧。
注意的是，对以上提到的聚焦帧的指定可以是对屏幕108A进行的触摸输入或借助预定操作按钮进行的选择输入操作(例如，光标操作)。在通过触摸输入对屏幕108A执行聚焦帧指定的情况下，触摸传感器用多个聚焦帧来检测被执行选择操作的聚焦帧，并且将检测结果输出到控制单元106。被执行选择操作的聚焦帧的数量不限于1个，可以是2个或更多个。
检测控制单元153在基于镜头信息确定是否需要校正指定的聚焦帧(步骤204)之前，识别用户所指定的聚焦帧(步骤203)。
通常，在当识别指定的聚焦帧时由于图像的失真校正而导致位置改变预定量或更多的情况下，检测控制单元153根据改变量来校正聚焦帧的位置。在改变量小于预定量的情况下，检测控制单元153原样采用指定位置的聚焦帧，而没有校正聚焦帧的位置(步骤205和206)。
接下来，检测控制单元153致使检测单元152对指定的聚焦帧执行光学测距控制，并且驱动图像拾取镜头101A对聚焦帧中的图像执行聚焦控制(步骤207和208)。在完成聚焦控制之后，在屏幕108A上点亮并且显示聚焦帧(步骤209)。在这种情况下，根据步骤204的确定结果，确定聚焦帧的显示位置。
图9是说明聚焦帧的显示位置和检测区域之间的关系的示意图。
在这个操作示例中，通过用户指定来选择检测区域(聚焦帧)。如上所述，对失真校正之前的图像V0执行对象图像的检测控制，并且在屏幕108A上显示失真校正之后的图像V1。在图8中，在用户指定了屏幕108A上的聚焦帧122的情况下，例如，检测单元152认为已经指定了失真之前的图像V0所处的聚焦帧125并且对聚焦帧125执行检测控制。在完成了聚焦之后，点亮并且显示与失真校正之后的图像V1的显示位置对应的聚焦帧122。
如上所述，另外，在这个操作示例中，可以正确地显示对焦位置，因为防止屏幕108A上的聚焦显示移位。因此，可以实现用户所期望的正确聚焦控制。
尽管已经描述了本技术的实施例，但本技术不限于以上提到的实施例并且可在不脱离本技术本质的情况下进行各种修改。
例如，在上述的实施例中，已经用对象图像的自动聚焦控制(AF控制)的示例进行了描述。然而，作为其替代或补充，本技术还可应用于自动曝光控制(AE控制)。在这种情况下，检测控制单元153致使检测单元152检测对应于检测区域的对象图像中的区域的对焦位置和曝光量中的至少一个。
另外，在上述实施例中，已经描述了在图像传感器102中装入用于相位差检测的相位差检测像素P1和P2的示例。还可以通过分别使用专用图像传感器进行相位差检测对对象图像执行AF控制。另外，不一定需要使用图像表面相位差检测方法，并且可采用使用所谓对比方法的AF控制技术。
应该注意，本技术可采用以下构造。
(1)一种成像控制设备，所述成像控制设备包括：
检测控制单元，其基于与图像传感器所获取的对象图像中的预定区域对应的检测区域来控制检测；
图像校正单元，其基于与图像拾取镜头相关的镜头信息来校正屏幕上显示的所述对象图像；以及
显示控制单元，其基于所述检测区域和所述镜头信息，在所述屏幕上的预定位置显示检测区域显示，所述检测区域显示代表所述检测区域。
(2)根据以上(1)所述的成像控制设备，其中，
所述显示控制单元基于所述镜头信息，确定校正所述检测区域显示的显示位置的必要性。
(3)根据以上(1)或(2)所述的成像控制设备，其中，
所述显示控制单元在所述对象图像中的对应于所述检测区域的区域被聚焦时，在所述屏幕上显示所述检测区域显示。
(4)根据以上(1)至(3)中的任一项所述的成像控制设备，其中，
所述检测区域包括多个检测区域，以及
所述检测控制单元基于选自所述多个检测区域的检测区域来控制检测。
(5)根据以上(4)所述的成像控制设备，其中，
所述检测控制单元基于所述镜头信息来确定校正所选择的所述检测区域的必要性。
(6)根据以上(1)至(5)中的任一项所述的成像控制设备，其中，
所述镜头信息包括所述图像拾取镜头的失真信息，以及
所述图像校正单元基于所述失真信息，校正所述对象图像的失真。
(7)根据以上(1)至(6)中的任一项所述的成像控制设备，其中，
从所述图像拾取镜头获取所述镜头信息。
(8)根据以上(1)至(7)中的任一项所述的成像控制设备，其中，
所述检测控制单元检测所述对象图像中的对应于所述检测区域的区域的对焦位置。
(9)根据以上(1)至(8)中的任一项所述的成像控制设备，其中，
所述检测控制单元检测所述对象图像中的对应于所述检测区域的区域的曝光量。
(10)根据以上(1)至(9)中的任一项所述的成像控制设备，所述成像控制设备还包括：
获取单元，其获取所述镜头信息。
(11)根据以上(1)至(10)中的任一项所述的成像控制设备，所述成像控制设备还包括：
检测单元，其受所述检测控制单元控制并且基于所述检测区域执行检测处理。
(12)一种成像设备，所述成像设备包括：
图像拾取光学***，其包括图像拾取镜头；
图像传感器，其获取所述图像拾取光学***所形成的对象图像；
检测控制单元，其基于与所述图像传感器所获取的所述对象图像中的预定区域对应的检测区域来控制检测；
图像校正单元，其基于与所述图像拾取镜头相关的镜头信息，校正所述图像传感器所获取的所述对象图像；
显示单元，其包括显示被所述图像校正单元校正的所述对象图像和代表所述检测区域的检测区域显示的屏幕；以及
显示控制单元，其基于所述检测区域和所述镜头信息，在所述屏幕上的预定位置处显示所述检测区域显示。
(13)根据以上(12)所述的成像设备，其中，
所述图像传感器包括执行所述图像拾取镜头的瞳孔划分的多个相位差检测像素。
(14)根据以上(12)或(13)所述的成像设备，其中，
所述检测区域包括多个检测区域，以及
所述显示单元还包括触摸传感器，所述触摸传感器检测针对代表所述多个检测区域的多个检测区域显示中的一个进行的选择操作。
(15)一种成像控制方法，所述成像控制方法包括：
基于与图像传感器所获取的对象图像中的预定区域对应的检测区域来控制检测；
基于与图像拾取镜头相关的镜头信息，校正屏幕上显示的所述对象图像；以及
基于所述检测区域和所述镜头信息，在所述屏幕上的预定位置处显示检测区域显示，所述检测区域显示代表所述检测区域。
参考标号描述
100成像设备，101光学成像***，101A图像拾取镜头，102图像传感器，106控制单元，108显示单元，108A屏幕，150成像控制设备，151获取单元，152检测单元，153检测控制单元，154图像校正单元，155显示控制单元。

Claims (15)

1.一种成像控制设备，所述成像控制设备包括：
电路，配置成：
控制图像传感器获取的对象图像中第一检测区域的检测；
控制显示屏幕显示所述对象图像；
获取图像拾取镜头的镜头信息，其中所述镜头信息包括焦距和图像拾取距离，
基于所述镜头信息校正所显示的对象图像；
控制所述显示屏幕显示校正对象图像和检测区域显示，
其中，所述检测区域显示被显示在显示屏幕的显示位置，所述校正对象图像和所述检测区域显示的显示基于所述第一检测区域和所述镜头信息，并且所述检测区域显示代表所述第一检测区域；以及
基于所述检测区域显示的所述显示位置的变化校正所述检测区域显示的所述显示位置，其中，所述显示位置的变化大于确定阈值，并且所述显示位置的变化是以所显示的对象图像的所述校正为基础的。
2.根据权利要求1所述的成像控制设备，其中，
所述电路还被配置为基于所述镜头信息，确定所述检测区域显示的所述显示位置的校正。
3.根据权利要求1所述的成像控制设备，其中，
所述电路还被配置为基于所述对象图像中的聚焦的检测区域控制所述显示屏幕显示所述检测区域显示。
4.根据权利要求1所述的成像控制设备，其中，
所述第一检测区域包括多个检测区域，以及
所述电路还被配置为基于选自所述多个检测区域的第二检测区域来控制所述第一检测区域的检测。
5.根据权利要求4所述的成像控制设备，其中，
所述电路还配置为基于所述镜头信息来确定所选择的所述第二检测区域的校正。
6.根据权利要求1所述的成像控制设备，其中，
所述镜头信息包括所述图像拾取镜头的失真信息，以及
所述电路还被配置为基于所述失真信息，校正所述对象图像的失真。
7.根据权利要求1所述的成像控制设备，其中，
从所述图像拾取镜头获取所述镜头信息。
8.根据权利要求1所述的成像控制设备，其中，
所述电路还被配置为检测所述对象图像中的对应于所述第一检测区域的区域的对焦位置。
9.根据权利要求1所述的成像控制设备，其中，
所述电路还被配置为检测所述对象图像中的对应于所述第一检测区域的区域的曝光量。
10.根据权利要求1所述的成像控制设备，所述成像控制设备还包括：
获取单元，其获取所述镜头信息。
11.根据权利要求1所述的成像控制设备，所述成像控制设备还包括：
检测单元，其受所述电路控制并且基于所述第一检测区域执行检测处理。
12.一种成像设备，所述成像设备包括：
图像拾取光学***，其包括图像拾取镜头；
图像传感器，其获取所述图像拾取光学***所形成的对象图像；
电路，配置成：
控制图像传感器获取的对象图像中第一检测区域的检测；
控制显示屏幕显示所述对象图像；
获取图像拾取镜头的镜头信息，其中所述镜头信息包括焦距和图像拾取距离，
基于所述镜头信息校正所显示的对象图像；
控制所述显示屏幕显示校正对象图像和检测区域显示，
其中，所述检测区域显示被显示在显示屏幕的显示位置，所述校正对象图像和所述检测区域显示的显示基于所述第一检测区域和所述镜头信息，并且所述检测区域显示代表所述第一检测区域；以及
基于所述检测区域显示的所述显示位置的变化校正所述检测区域显示的所述显示位置，其中，所述显示位置的变化大于确定阈值，并且所述显示位置的变化是以所显示的对象图像的所述校正为基础的。
13.根据权利要求12所述的成像设备，其中，
所述图像传感器包括执行所述图像拾取镜头的瞳孔划分的多个相位差检测像素。
14.根据权利要求12所述的成像设备，其中，
所述检测区域包括多个检测区域，以及
所述成像设备还包括触摸传感器，所述触摸传感器检测针对代表所述多个检测区域的多个检测区域显示中的一个进行的选择操作。
15.一种成像控制方法，所述成像控制方法包括：
控制图像传感器获取的对象图像中第一检测区域的检测；
控制显示屏幕显示所述对象图像；
获取图像拾取镜头的镜头信息，其中所述镜头信息包括焦距和图像拾取距离，
基于所述镜头信息校正所显示的对象图像；
控制所述显示屏幕显示校正对象图像和检测区域显示，
其中，所述检测区域显示被显示在显示屏幕的显示位置，所述校正对象图像和所述检测区域显示的显示基于所述第一检测区域和所述镜头信息，并且所述检测区域显示代表所述第一检测区域；以及
基于所述检测区域显示的所述显示位置的变化校正所述检测区域显示的所述显示位置，其中，所述显示位置的变化大于确定阈值，并且所述显示位置的变化是以所显示的对象图像的所述校正为基础的。
CN201580025940.9A 2014-05-26 2015-03-10 图像拾取控制设备、图像拾取设备和图像拾取控制方法 Active CN106464783B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2014108198 2014-05-26
JP2014-108198 2014-05-26
PCT/JP2015/001300 WO2015182021A1 (ja) 2014-05-26 2015-03-10 撮像制御装置、撮像装置および撮像制御方法

Publications (2)

Publication Number Publication Date
CN106464783A CN106464783A (zh) 2017-02-22
CN106464783B true CN106464783B (zh) 2020-01-21

Family

ID=54698386

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580025940.9A Active CN106464783B (zh) 2014-05-26 2015-03-10 图像拾取控制设备、图像拾取设备和图像拾取控制方法

Country Status (4)

Country Link
US (1) US10277796B2 (zh)
JP (1) JP6547742B2 (zh)
CN (1) CN106464783B (zh)
WO (1) WO2015182021A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7271316B2 (ja) * 2019-05-31 2023-05-11 キヤノン株式会社 撮像装置及びその制御方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005295418A (ja) * 2004-04-05 2005-10-20 Sony Corp 撮像装置および撮像表示方法
WO2007129444A1 (ja) * 2006-04-14 2007-11-15 Nikon Corporation 画像の歪曲補正方法、歪曲補正プログラム、及び光学装置
JP2008118387A (ja) * 2006-11-02 2008-05-22 Canon Inc 撮像装置
JP2008292715A (ja) * 2007-05-24 2008-12-04 Sony Corp 撮像装置、撮像装置の検波領域調整方法および撮像装置の検波領域調整プログラム
JP2009109548A (ja) * 2007-10-26 2009-05-21 Sony Corp 撮像装置
JP2009284462A (ja) * 2008-04-21 2009-12-03 Sony Corp 撮像装置及び測距領域制御方法
CN101998055A (zh) * 2009-08-20 2011-03-30 佳能株式会社 图像捕获设备和方法

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009104390A1 (ja) * 2008-02-22 2009-08-27 パナソニック株式会社 撮像装置
JP5020894B2 (ja) * 2008-06-10 2012-09-05 キヤノン株式会社 画像処理装置、制御方法、及びプログラム
JP5604160B2 (ja) * 2010-04-09 2014-10-08 パナソニック株式会社 撮像装置
JP5789091B2 (ja) * 2010-08-20 2015-10-07 キヤノン株式会社 撮像装置および撮像装置の制御方法
CN104428815B (zh) * 2012-07-13 2017-05-31 富士胶片株式会社 图像变形装置及其动作控制方法
JP5901801B2 (ja) * 2013-01-04 2016-04-13 富士フイルム株式会社 画像処理装置、撮像装置、プログラム及び画像処理方法
JP6137840B2 (ja) * 2013-01-18 2017-05-31 オリンパス株式会社 カメラシステム
CN105103534B (zh) * 2013-03-27 2018-06-22 富士胶片株式会社 摄像装置及校准方法
KR102146856B1 (ko) * 2013-12-31 2020-08-21 삼성전자주식회사 렌즈 특성 기반의 촬영 모드 제시 방법, 상기 방법을 기록한 컴퓨터 판독 가능 저장매체 및 디지털 촬영 장치.

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005295418A (ja) * 2004-04-05 2005-10-20 Sony Corp 撮像装置および撮像表示方法
WO2007129444A1 (ja) * 2006-04-14 2007-11-15 Nikon Corporation 画像の歪曲補正方法、歪曲補正プログラム、及び光学装置
JP2008118387A (ja) * 2006-11-02 2008-05-22 Canon Inc 撮像装置
JP2008292715A (ja) * 2007-05-24 2008-12-04 Sony Corp 撮像装置、撮像装置の検波領域調整方法および撮像装置の検波領域調整プログラム
JP2009109548A (ja) * 2007-10-26 2009-05-21 Sony Corp 撮像装置
JP2009284462A (ja) * 2008-04-21 2009-12-03 Sony Corp 撮像装置及び測距領域制御方法
CN101998055A (zh) * 2009-08-20 2011-03-30 佳能株式会社 图像捕获设备和方法

Also Published As

Publication number Publication date
JPWO2015182021A1 (ja) 2017-04-20
US20170085779A1 (en) 2017-03-23
WO2015182021A1 (ja) 2015-12-03
US10277796B2 (en) 2019-04-30
JP6547742B2 (ja) 2019-07-24
CN106464783A (zh) 2017-02-22

Similar Documents

Publication Publication Date Title
US9800772B2 (en) Focus adjustment device and focus adjustment method that detects spatial frequency of a captured image
US8212895B2 (en) Digital camera system with portrait effect
US20150009352A1 (en) Imaging apparatus and method for controlling the same
JP5380784B2 (ja) オートフォーカス装置、撮像装置及びオートフォーカス方法
US9554029B2 (en) Imaging apparatus and focus control method
US20140071318A1 (en) Imaging apparatus
US20140204266A1 (en) Focus adjustment unit and camera system
US9706131B2 (en) Image combining apparatus for generating a combined image from a plurality of images, image combining system, and image combining method
US10652453B2 (en) Electronic apparatus and control method thereof
JP5572700B2 (ja) 撮像装置及び撮像方法
US20140132824A1 (en) Imaging apparatus and imaging method
US20190243533A1 (en) Display controller, control method thereof, and non-transitory computer readable medium
US10412321B2 (en) Imaging apparatus and image synthesis method
JP5378283B2 (ja) 撮像装置およびその制御方法
US9274402B2 (en) Imaging device that executes auto focus control by referring to distance image data regarding a depth of a region
US8514305B2 (en) Imaging apparatus
CN106464783B (zh) 图像拾取控制设备、图像拾取设备和图像拾取控制方法
EP4002830A2 (en) Image pick up apparatus, image pick up method, and storage medium
JP5933306B2 (ja) 撮像装置
WO2016167142A1 (ja) 撮像装置およびその制御方法
JP6590899B2 (ja) 撮像装置、撮像方法およびプログラム
JP5415208B2 (ja) 撮像装置
JP2009194469A (ja) 撮像装置
US20220217285A1 (en) Image processing device, image processing method, and recording medium
JP5338248B2 (ja) 画像処理装置、電子カメラおよび画像処理プログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant