CN102375323B - 摄像***和摄像设备 - Google Patents

摄像***和摄像设备 Download PDF

Info

Publication number
CN102375323B
CN102375323B CN201110243192.5A CN201110243192A CN102375323B CN 102375323 B CN102375323 B CN 102375323B CN 201110243192 A CN201110243192 A CN 201110243192A CN 102375323 B CN102375323 B CN 102375323B
Authority
CN
China
Prior art keywords
picture pick
camera
image
captured
focal position
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201110243192.5A
Other languages
English (en)
Other versions
CN102375323A (zh
Inventor
盐崎智行
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN102375323A publication Critical patent/CN102375323A/zh
Application granted granted Critical
Publication of CN102375323B publication Critical patent/CN102375323B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/243Image signal generators using stereoscopic image cameras using three or more 2D image sensors
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B35/00Stereoscopic photography
    • G03B35/08Stereoscopic photography by simultaneous recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • H04N23/958Computational photography systems, e.g. light-field imaging systems for extended depth of field imaging
    • H04N23/959Computational photography systems, e.g. light-field imaging systems for extended depth of field imaging by adjusting depth of field during image capture, e.g. maximising or setting range based on scene characteristics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/634Warning indications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/65Control of camera operation in relation to power supply
    • H04N23/651Control of camera operation in relation to power supply for reducing power consumption by affecting camera operations, e.g. sleep mode, hibernation mode or power off of selective parts of the camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Focusing (AREA)
  • Accessories Of Cameras (AREA)
  • Automatic Focus Adjustment (AREA)

Abstract

本发明涉及摄像***和摄像设备。所述摄像***用于使用能够相互通信的多个摄像设备来拍摄同一被摄体的图像。所述摄像设备中的至少一个摄像设备向所述摄像设备中的其它摄像设备发送离聚焦位置的距离的信息或者包括所述聚焦位置的所拍摄图像,并且所述摄像设备各自使用离所述聚焦位置的距离的信息或包括所述聚焦位置的所拍摄图像来确定各自的景深。

Description

摄像***和摄像设备
技术领域
本发明涉及一种用于使用可相互通信的多个摄像设备来拍摄同一被摄体的图像的摄像***和该***所使用的摄像设备。
背景技术
近年来,在诸如电影等的数字内容方面,三维图像拍摄***已受到关注。对于传统的三维图像拍摄设备,例如,日本特开昭62-21396号公报提供了一种诸如三维电视装置等的、用于通过利用多个摄像设备所拍摄的图像来获得三维图像的技术。
如日本特开昭62-21396号公报所述的技术一样,当使用多个摄像设备拍摄同一被摄体的图像并获得三维图像时,如果各个拍摄镜头进入聚焦的区域相互不同,则在生成三维图像时可能产生不自然的印象。为解决该问题,通常,为使各摄像设备的拍摄镜头对被摄体聚焦,在拍摄之前要调整各拍摄镜头的焦距和光圈值。然而,该操作非常麻烦。
发明内容
本发明涉及在使用多个摄像设备拍摄同一被摄体的图像时简化摄像设备的调焦操作。
根据本发明的一个方面,提供一种摄像***,用于使用能够相互通信的多个摄像设备来拍摄同一被摄体的图像,其中,所述多个摄像设备中的至少一个摄像设备向所述多个摄像设备中的其它摄像设备发送离聚焦位置的距离的信息或者包括聚焦位置的所拍摄图像,以及所述多个摄像设备中的各个摄像设备使用所述离聚焦位置的距离的信息或者所述包括聚焦位置的所拍摄图像,来确定各自的景深。
根据本发明的另一个方面,提供一种摄像设备,包括:摄像单元,用于拍摄被摄体的图像;摄像光学单元,被配置为能够改变焦距;计算单元,用于计算所述摄像光学单元对于所述被摄体的聚焦状态;检测单元,用于检测离所述摄像光学单元对于所述被摄体的聚焦位置的距离;发送/接收单元,用于与其它摄像设备发送或接收信息;以及确定单元,用于使用由所述发送/接收单元所接收到的、所述其它摄像设备中的离聚焦位置的距离的信息,来确定所述摄像设备自身的景深。
根据本发明的另一个方面,提供一种摄像设备,包括:摄像单元,用于拍摄被摄体的图像;摄像光学单元,被配置为能够改变焦距;测距单元,用于计算所述摄像光学单元对于所述被摄体的聚焦状态;发送/接收单元,用于与其它摄像设备发送或接收信息;以及确定单元,用于使用由所述发送/接收单元所接收到的、由所述其它摄像设备所拍摄的包括聚焦位置的所拍摄图像,来确定所述摄像设备自身的景深。
通过以下参考附图对典型实施例的详细说明,本发明的其它特征和方面将变得明显。
附图说明
包含在说明书中并构成说明书的一部分的附图示出本发明的典型实施例、特征和方面,并与说明书一起用来解释本发明的原理。
图1示出摄像***的结构。
图2示出摄像设备的结构的例子。
图3是示出根据第一典型实施例的摄像***的操作序列的流程图。
图4是示出根据第二典型实施例的摄像***的操作序列的流程图。
图5示出根据第二典型实施例从所拍摄的图像剪切出聚焦位置附近的图像并在照相机之间发送和接收该图像的情况。
图6是示出根据第三典型实施例的摄像***的操作序列的流程图。
图7示出用于选择要对被摄体聚焦的多个点的方法的例子。
具体实施方式
下面将参考附图详细说明本发明的各种典型实施例、特征和方面。
图1示出根据第一典型实施例的摄像***的结构。附图标记10表示主照相机,附图标记11和12分别表示从照相机。被摄体20是摄像的对象。图1仅是一个例子,而且照相机的数量不局限于该例子中的数量。只要使用可相互通信的多个摄像设备来拍摄同一被摄体的图像,该数量可以是任意数字。
图2示出作为用作主照相机10或从照相机11和12的摄像设备的数字照相机的结构的例子。附图标记100表示照相机主体。图像传感器121拍摄被摄体的图像。经由镜头接口102和202以及快门144在图像传感器121上形成来自拍摄镜头210的被摄体的光学图像(未示出)。拍摄镜头210构成可改变焦距的摄像光学***,而且图像传感器121将光学图像转换成电信号。
模拟数字(A/D)转换单元122将图像传感器121的模拟信号输出转换成数字信号。A/D转换后的数字信号受存储器控制单元124和***控制单元120控制,并被存储在存储器127中。图像处理单元123对数字信号的数据或来自存储器控制单元124的数据进行预定像素插值或颜色转换处理。图像处理单元123包括用于使用自适应离散余弦变换(ADCT)等压缩或解压缩图像数据的压缩/解压缩电路。图像处理单元123可以读取存储器127中存储的图像,进行压缩处理或解压缩处理,并且将处理后的数据写入存储器127中。图像处理单元123还可以通过进行诸如不同图像数据的相关性计算等的计算,进行对不同图像数据中存在的相同图像的检测。
存储器控制单元124控制A/D转换单元122、图像处理单元123、液晶面板显示单元125和外部安装/拆卸存储器单元130与存储器127之间的数据的发送和接收。经由图像处理单元123和存储器控制单元124将A/D转换单元122的数据写入存储器127中,或者直接经由存储器控制单元124将A/D转换单元122的数据写入存储器127中。
液晶显示器型显示设备110包括液晶面板显示单元125和背光照明单元126。根据来自***控制单元120的指示,液晶面板显示单元125可以显示存储器127的图像显示数据用的区域中存储的菜单画面或者外部安装/拆卸存储器单元130中存储的图像文件。背光照明单元126对液晶面板显示单元125进行背面照明。背光照明的光源元件包括发光二极管(LED)、有机电致发光(EL)、或荧光灯管等。
***控制单元120对照相机进行总控制。存储器127存储所拍摄的静止图像和运动图像、以及用于再现显示的图像。存储器127具有用于存储预定张数的静止图像和运动图像的足够大的存储容量。非易失性存储器128是电可擦除可记录的存储器。作为非易失性存储器128,例如,使用闪速存储器或电可擦除可编程只读存储器(EEPROM)等。非易失性存储器128存储用于保持图像拍摄状态和控制照相机等的程序。姿势检测单元129检测照相机主体100的姿势。
外部安装/拆卸存储器单元130将图像文件记录在诸如CompactFlash(紧凑型闪存)(注册商标)或SD(安全数字)卡等的记录介质中,以及从记录介质读取图像文件。电源单元131包括电池、电池检测电路、DC-DC转换器、以及用于切换要供应电力的块的切换电路等。电源单元131检测是否安装了电池、电池的类型和剩余电池电量。电源单元131根据检测结果和来自***控制单元120的指示,控制DC-DC转换器,并且在必要的时间段内向各块部提供必要的电压。
快门控制单元141使用来自测光单元142的测光信息,与用于控制光圈211的镜头控制单元204协作来控制快门144。测光单元142进行自动曝光(AE)处理。光束进入拍摄镜头210,而且通过镜头接口202和102以及测光透镜(未示出)进入测光单元142。因而,可以测量作为光学图像所形成的图像的曝光状态。测光单元142还具有与闪光灯单元300协作进行电子闪光灯预发光(EF)处理的功能。闪光灯单元300具有用于投射AF辅助光的功能和闪光灯光量控制功能。测距单元143进行自动调焦(AF)处理。例如,测距单元143是诸如互补金属氧化物半导体(CMOS)或电荷耦合装置(CCD)等的区域或线存储型光电转换元件。光束进入拍摄镜头210,通过光圈211、镜头接口202和102以及测距镜(未示出)进入测距单元143。因而,可以进行已知的图像偏差方法来检测调焦,从而使得可以测量作为光学图像所形成的图像的聚焦状态。附图标记144表示快门。
照相机控制单元140通过与快门控制单元141、测光单元142和测距单元143的发送或接收通信来控制一系列操作。照相机控制单元140还可以控制镜头单元200和闪光灯单元300。
操作装置132、133、134、135、136、137和138用于向***控制单元120输入各种操作指示。这些操作装置可以是开关、拨盘、利用视线检测的指示或语音识别装置等中的一个或者多个的组合。
将详细说明这些操作装置。可以使用再现开关132来进行再现显示模式操作,以将预定的图像数据显示在液晶面板显示单元125上。当再现并显示外部安装/拆卸存储器单元130中存储的图像文件时,需要使用再现开关132来进行操作。在将模式设置成再现显示模式并进行了再现开关132的操作的情况下,将再现显示模式切换成拍摄模式。
使用菜单开关133来在液晶面板显示单元125上显示各种项列表。显示内容包括与摄像有关的状态设置、记录介质的格式、时钟的设置、显像参数设置和用户功能设置(定制功能的设置)。可以从该菜单中选择作为用于实现本发明的模式的“多个照相机拍摄模式”。
使用模式拨盘134来切换和设置诸如自动拍摄模式、程序拍摄模式、快门优先拍摄模式、光圈优先拍摄模式、手动拍摄模式、肖像拍摄模式、风景拍摄模式、运动拍摄模式、夜景拍摄模式和运动图像模式等的各个功能拍摄模式。
通过半按下释放按钮(SW1)或者通过全按下释放按钮(SW2)来接通释放开关135。在半按下状态下,发出用于开始诸如AF处理、AE处理、自动白平衡(AWB)处理、或EF处理等的操作的指示。在全按下状态下,进行摄像处理和显像处理,其中,摄像处理用于经由A/D转换单元122和存储器控制单元124将从图像传感器121读取的信号作为图像数据写入存储器127中,显像处理使用图像处理单元123或存储器控制单元124中的计算。此外,发出用于开始记录处理的一系列操作的指示。在记录处理中进行:从存储器127读取图像数据,在图像处理单元123中压缩该图像数据,并且将该图像数据写入安装至外部安装/拆卸存储器单元130的记录介质(未示出)中。
操作单元136包括各种按钮开关。通过使用操作单元136,可以进行以下的操作:拍摄模式、连续拍摄模式、设置处理、微距处理、页前进处理、闪光灯设置、菜单移动、白平衡选择、拍摄图像质量选择、曝光校正、ISO感光度选择或者日期/时间设置。此外,操作单元136包括用于开始或停止运动图像拍摄的运动图像拍摄开关、垂直和水平方向开关、用于再现图像的变焦倍率改变开关、液晶面板显示单元125的图像显示打开/关闭开关、用于在紧挨在图像拍摄之后自动再现所拍摄的图像数据的快速预览打开/关闭开关、以及用于清除再现图像的图像清除开关。此外,操作单元136包括用于选择联合图像专家组(JPEG)和运动图像专家组(MPEG)各自的压缩比和用于直接数字化图像传感器的信号并进行记录的CCDRAW模式的压缩模式开关。此外,操作单元136包括AF模式设置开关,其中,AF模式设置开关用于设置用于持续进行自动调焦操作的伺服AF模式和用于保持在半按下释放开关时自动调焦的聚焦状态的单拍AF模式。
使用电子拨盘137来设置快门速度、光圈值或曝光等。此外,可以根据电子拨盘的转动角度来转动液晶面板显示单元125上显示的所拍摄的图像。此外,可以根据电子拨盘的转动角度来转动液晶面板显示单元125上显示的表示加速度传感器的横摇角的直线。
使用电源开关138来切换和设置照相机主体100的电源接通和电源断开的各模式。还使用电源开关138来切换和设置与照相机主体100连接的诸如镜头单元200、闪光灯单元300或记录介质等的各种附件装置的电源接通和电源断开。
计时器139具有时钟功能、日历功能、计时器计数器功能和警告功能,并用于诸如管理休眠模式的转变时间或警告通知等的***管理。
使用天线160来与其它摄像设备通信。发送/接收电路161与***控制单元120连接,并且控制发送或接收。调制/解调电路162用于对发送的信息进行必要的调制处理并将信息输出至发送/接收电路161,以及对由发送/接收电路161接收到的信息进行解调处理。
镜头接口102和202是用于将照相机主体100与镜头单元200连接的接口。镜头接口101和201是用于将照相机主体100与镜头单元200电连接的连接器。通过照相机控制单元140控制镜头接口101和201。附件插座111和301是用于将照相机主体100与闪光灯单元300电连接的接口。
附图标记200表示可更换镜头型镜头单元,附图标记210表示包括焦点调节用的透镜的拍摄镜头,以及附图标记211表示光圈。在镜头单元200中,被摄体的光学图像(未示出)可以从拍摄镜头210导入,通过光圈211、镜头接口202和102以及快门144,并形成在图像传感器121上。距离检测单元203获得与离被摄体的距离有关的信息。距离检测单元203可以通过使用编码器测量焦点调节透镜的伸出量来计算离聚焦位置的距离。
镜头控制单元204对镜头单元200进行总控制。镜头控制单元204还具有用于存储操作用的常数、变量或程序等的存储器的功能;并且还具有用于存储以下信息的非易失性存储器的功能:诸如镜头单元200的唯一编号等的识别信息,管理信息,诸如开放光圈值、最小光圈值和焦距等的功能信息,以及当前和过去的各种设置值等。此外,镜头控制单元204具有用于控制光圈211的功能、用于控制拍摄镜头210的调焦的功能、以及用于控制拍摄镜头210的变焦的功能。
闪光灯单元300与附件插座111连接。闪光灯发光控制单元302对闪光灯单元300进行总控制。闪光灯发光控制单元302使用来自测光单元142的信息,控制诸如氙气管等的发光单元(未示出)的发光量或发光定时。
参考图1和图3说明根据第一典型实施例的摄像***的操作序列。响应于接通照相机的电源开关138进行该序列。通过照相机的***控制单元120和照相机控制单元140分别执行控制程序来实现下述处理操作。
首先,在步骤S100,根据用户对菜单开关133和其它操作单元136的操作,如果选择并设置了“多个照相机拍摄模式”,则处理进入步骤S101。如果没有将模式设置成“多个照相机拍摄模式”,则设置正常单拍模式。在拍摄要使用的照相机中,将首先被设置为“多个照相机拍摄模式”的照相机定义为主照相机10。以确认无线连接的顺序,向从照相机11、12、......(以下称为从照相机11和12)各自分配ID识别编号“ID1”、“ID2”、“ID3”、......。在发送/接收电路161的控制下,经由天线160将ID识别编号通知给所有从照相机11和12,并将ID识别编号存储在各照相机中的非易失性存储器128中。通过ID识别编号来在各照相机10~12之间识别所分发的信息的源。
在步骤S101,由用户进行主照相机10的初始设置。初始设置包括曝光条件设置、测光方法、ISO感光度设置、连续拍摄模式设置、闪光灯设置、白平衡选择、拍摄图像质量选择和AF设置等。
在步骤S102,如果用户半按下主照相机10的释放开关135(SW1),则使用该操作作为触发,处理进入步骤S103。在步骤S103,在发送/接收电路161的控制下,经由天线160将主照相机10的初始设置通知给所有从照相机11和12。通过该处理,将所有从照相机11和12设置成相同条件。
在步骤S104,在各照相机10~12中,根据拍摄信息来输入画面内的亮度信息,并且判断所拍摄的图像是否具有适当的亮度。如果亮度不适当,则通过改变图像传感器121的累积时间或改变读取增益来调整所拍摄图像的亮度。根据示出所拍摄图像的适当亮度的累积时间的信息或读取增益的信息、以及步骤S101中所设置的曝光设置值,来计算曝光时间和光圈值。
在步骤S105,在各照相机10~12中,测距单元143计算被摄体的聚焦状态。在步骤S106,在各照相机10~12中,根据计算出的聚焦状态计算用于获得聚焦状态的镜头移动量,并且将计算出的镜头移动量输出至镜头控制单元204。通过使用该移动量,镜头控制单元204驱动焦点调节用的透镜。通过该操作,拍摄镜头210获得被摄体的聚焦状态。
在步骤S107,在各照相机10~12中,距离检测单元203测量焦点调节透镜的伸出量,并且计算离聚焦位置的距离。在步骤S108,在各照相机10~12之间,经由无线通信分发离聚焦位置的距离的信息。
在步骤S109,在各照相机10~12中,通过使用各照相机10~12中所分发的离聚焦位置的距离的信息来确定景深。参考图1说明景深的确定方法。在图1中,附图标记13表示主照相机10中的被摄体20的聚焦位置,附图标记14表示从照相机11中的被摄体20的聚焦位置,以及附图标记15表示从照相机12中的被摄体20的聚焦位置。
围绕主照相机10的摄像面中心,定义坐标系∑M,其中,摄像面的水平方向为XM轴,摄像面的垂直方向为YM轴,镜头的光轴方向为ZM轴。类似地,围绕从照相机11的摄像面中心,定义坐标系∑S1,其中,摄像面的水平方向为XS1轴,摄像面的垂直方向为YS1轴,镜头的光轴方向为ZS1轴。如果根据以下等式(1)来定义坐标系∑S1中的聚焦位置14的位置坐标,则可以通过以下等式(3)计算坐标系∑M中的聚焦位置14的位置坐标(以下等式(2))。
S1xS1=[S1xS1S1yS1S1zS1]T…(1)
MxS1=[MxS1MyS1MzS1]T…(2)
x S 1 M y S 1 M z S 1 M 1 = cos θ S 1 M 0 - sin θ S 1 M p x M 0 1 0 p y M sin θ S 1 M 0 cos θ S 1 M p z M 0 0 0 1 x S 1 S 1 y S 1 S 1 z S 1 S 1 1 · · · ( 3 )
在这些等式中,[MPxMPyMPz]是从坐标系∑M来看的坐标系∑S1的中心坐标,MθS1是从坐标系∑M来看的坐标轴ZS1所表示的方向。在本典型实施例中,已知[MPxMPyMPz]和MθS1
通过计算从照相机11的离聚焦位置的距离的信息,获得坐标系∑S1中的聚焦位置14的位置坐标(上述等式(1))中的S1zS1。此外,如果将利用针孔照相机模型所近似的摄像设备的焦距定义为f,并且将聚焦位置14在从照相机11的摄像面上的投影定义为[S1u,S1v],则通过以下等式(4)和(5)计算S1xS1S1yS1
x S 1 S 1 = u S 1 z S 1 S 1 f · · · ( 4 )
y S 1 S 1 = v S 1 z S 1 S 1 f · · · ( 5 )
通过以上计算,计算从主照相机10来看(以主照相机10作为基准)的从照相机11的聚焦位置14的坐标。类似地,计算从主照相机10来看的从照相机12的聚焦位置15的坐标。上述计算等式仅是例子,并且可以使用任何方法,只要能够计算出照相机10~12各自的聚焦位置的坐标即可。
在从主照相机10来看的各照相机10~12的聚焦位置坐标中,选择最近的聚焦位置13和最远的聚焦位置14。然后,计算拍摄镜头210至少在最近的聚焦位置13和最远的聚焦位置14之间的范围16内进入聚焦的景深。
如上所述,以主照相机10作为例子来说明用于计算景深的方法。类似地计算从照相机11和12的景深,由此,通过上述处理计算所有照相机10~12的景深。
返回图3,在步骤S110,在各照相机10~12中,使用步骤S109中计算出的景深来确定光圈值。在该处理中,针对要设置的光圈值,可以设置上限和下限的阈值。如果计算出超过阈值的设置值,则可以使用液晶面板显示单元125、声音、或LED等来发出警告。在步骤S111,在各照相机10~12中,使用步骤S110中所确定的光圈值和步骤S101中所设置的曝光设置值,计算曝光时间。
在步骤S112,如果用户全按下主照相机10的释放开关135(SW2),则使用该操作作为触发,处理进入步骤S113。在步骤S113,在各照相机10~12中,将步骤S110中计算出的光圈值输出至镜头控制单元204。通过使用该信息,镜头控制单元204驱动光圈211。通过该操作,拍摄镜头实现光圈缩小状态。
在步骤S114,在各照相机10~12中,***控制单元120根据步骤S111中计算出的曝光时间,输出用于设置图像传感器121的累积时间的指示,然后通过图像传感器121进行主拍摄。在照相机10~12中以相互同步的方式进行来自***控制单元120的拍摄指示。
在步骤S115,在各照相机10~12中,向镜头控制单元204输出用于使光圈211处于遮光状态的信号。通过该处理,拍摄镜头实现遮光状态。
在步骤S116,在各照相机10~12中,A/D转换单元122从图像传感器121读取利用主拍摄所拍摄的图像信息并对该图像信息进行A/D转换。然后,在图像处理设备123中进行必要的校正处理和信号处理,并经由存储器控制单元124将处理后的图像信息写入存储器127。
在步骤S117,在发送/接收电路161的控制下,经由天线160将步骤S116中所获取的各从照相机11和12的所拍摄图像发送至主照相机10。在主照相机10中,经由存储器控制单元124将接收到的从照相机11和12的所拍摄图像写入存储器127。还将主照相机10自身所拍摄的图像写入存储器127。然后,从存储器127读取图像数据,并在图像处理单元123中进一步对该图像数据进行压缩。将图像数据写入安装至外部安装/拆卸存储器单元130的记录介质(未示出)中。
在步骤S118,在各照相机10~12中,向镜头控制单元204输出用于使光圈211处于开放状态的信号。通过该处理,拍摄镜头实现开放状态。
在以上说明中,说明了第一典型实施例。在第一典型实施例中,在照相机10~12之间相互发送和接收照相机10~12各自的离聚焦位置的距离的信息。然后,通过使用所有照相机10~12中的离聚焦位置的距离的信息来确定各自的景深。利用上述结构,可以调整照相机10~12各自的景深,从而使得所有照相机10~12在聚焦位置进入聚焦。此外,在第一典型实施例中,可以类似地设置各照相机10~12的曝光条件设置、测光方法、ISO感光度设置、连续拍摄模式设置、闪光灯设置、白平衡选择和拍摄图像质量选择。因此,在进行诸如三维图像获取等的图像合成时,可以获得自然的所拍摄图像。
在第一典型实施例中,各照相机10~12相互无线通信。然而,可以采用有线通信。此外,为了简单,相互区分从照相机11和12。然而,在该结构中,并非必须区分照相机。此外,在第一典型实施例中,通过改变光圈值来调整照相机10~12各自的拍摄镜头210进入聚焦的范围。然而,可以同时调整焦距。此外,在第一典型实施例中,通过测量焦点调节透镜的伸出量来计算从各照相机10~12到聚焦位置的距离。然而,测距方式可以是任何方式。此外,在第一典型实施例中,将从照相机11和12的所拍摄图像发送至主照相机10。然而,并非必须发送该图像,而是可以将该图像存储在安装至各照相机10~12的外部安装/拆卸存储器单元130中。可以将该图像发送至除主照相机10以外的诸如服务器等的装置。
此外,在第一典型实施例中,[MPxMPyMPz]和MθS1是已知的。然而,通过使用姿势检测单元129和诸如全球定位***(GPS)功能等的位置测量部件,可以测量照相机10~12各自的配置。
将说明第二典型实施例。摄像***和照相机的结构与第一典型实施例中的相同,因此省略它们的说明。参考图4和图5说明根据第二典型实施例的摄像***的操作序列。通过照相机的***控制单元120和照相机控制单元140分别执行控制程序来实现下述处理操作。步骤S200~S207的处理与第一典型实施例中的步骤S100~S107的相同,因此省略说明。
在步骤S208,在各照相机10~12中,根据在步骤S201所设置的照相机初始设置值,从***控制单元120将指示输出至图像传感器121,并且进行拍摄。在照相机10~12中以相互同步的方式进行来自***控制单元120的拍摄指示。
在步骤S209,在各照相机10~12中,A/D转换单元122从图像传感器121读取利用该拍摄所拍摄的图像信息并对该图像信息进行A/D转换。经由存储器控制单元124将数据写入存储器127。
在步骤S210,在各照相机10~12中,从所拍摄的图像剪切出聚焦位置附近的图像(包括聚焦位置的所拍摄图像),并且在各照相机10~12之间进行无线分发。在步骤S211,在各照相机10~12中,通过使用各照相机10~12中的聚焦位置附近的图像来确定景深。
参考图5说明步骤S210和S211的处理。在图5中,附图标记30表示步骤S209中所获取的从照相机的所拍摄图像,附图标记31表示步骤S209中类似地获取的主照相机10的所拍摄图像。附图标记32表示从照相机的聚焦位置。首先,在步骤S210,在从照相机中,自从照相机的所拍摄图像30中剪切出聚焦位置附近32的图像33,并且在发送/接收电路161的控制下,经由天线160将该图像33分发至主照相机10。
在步骤S211,在主照相机10的图像处理单元123中,进行从照相机所发送的从照相机的聚焦位置附近图像33和主照相机10的所拍摄图像31的相关性计算。计算在主照相机10的所拍摄图像31中的、与从照相机的聚焦位置附近图像33具有最高相关性的区域34。区域34示出主照相机10的所拍摄图像内的从照相机的聚焦位置。类似地,进行与所有从照相机的聚焦位置附近图像33的相关性计算,并且计算主照相机10的所拍摄图像内的从照相机各自的聚焦位置。然后,针对从照相机各自的聚焦位置附近,利用测距单元143计算聚焦状态。然后,计算从主照相机10来看的拍摄镜头210在所有聚焦位置都进入聚焦的景深。
在以上说明中,以主照相机10为例子说明了用于计算景深的方法。类似地计算从照相机11和12的景深,由此,通过上述处理计算所有照相机10~12的景深。
返回图4,以下步骤S212~S220的处理与第一典型实施例中的步骤S110~S118的处理相同,因此省略说明。
在以上说明中,说明了第二典型实施例。在第二典型实施例中,在照相机10~12之间发送和接收照相机10~12各自的包括聚焦位置的所拍摄图像。然后,通过使用照相机10~12所拍摄的包括聚焦位置的所拍摄图像来确定各自的景深。在第一典型实施例中,需要使用某一方法来获取各照相机10~12之间的配置信息。另一方面,在第二典型实施例中,即使各照相机10~12之间的配置信息是未知的,也可以以使得照相机10~12的聚焦位置聚焦的方式调整各照相机10~12的景深。通过该结构,在进行诸如三维图像获取等的图像合成时,可以获得自然的所拍摄图像。在第一典型实施例中,需要通过测量焦点调节透镜的伸出量来计算从各照相机10~12到聚焦位置的距离。在第二典型实施例中,只要可以通过测距单元143确认聚焦状态,则不需要进行从各照相机10~12到聚焦位置的测量。
在第二典型实施例中,发送各照相机中的一个聚焦位置附近图像。然而,可以发送各照相机中的多个聚焦位置附近图像。
将说明第三典型实施例。摄像***和照相机的结构与第一典型实施例中的相同,因此省略说明。参考图6和图7说明根据第三典型实施例的摄像***的操作序列。通过照相机的***控制单元120和照相机控制单元140分别执行控制程序来实现下述的处理操作。步骤S300~S301的处理与第一典型实施例中的步骤S100~S101的相同,因此省略说明。
在步骤S302,在主照相机10中,选择用户想要对被摄体聚焦的多个区域。作为该选择的方法,从液晶电子取景器(未示出)所显示的多个测距区域中选择要聚焦的区域。参考图7说明该方法。在图7中,附图标记40表示电子取景器中所显示的所拍摄图像,附图标记41表示所选择的第一测距区域,附图标记42表示第二测距区域。
在步骤S303,如果用户半按下主照相机10的释放开关135(SW1),则使用该操作作为触发,处理进入步骤S304。在步骤S304,在发送/接收电路161的控制下,经由天线160将主照相机10的初始设置通知给从照相机11和12。通过该处理,照相机11和12被设置成相同条件。
在步骤S305,在各照相机10~12中,根据拍摄信息输入画面内的亮度信息,并且判断所拍摄图像是否具有适当的亮度。如果亮度不适当,则通过改变图像传感器121的累积时间或改变读取增益来调整所拍摄图像的亮度。根据示出所拍摄图像的适当亮度的累积时间的信息或者读取增益的信息、以及步骤S301中所设置的曝光设置值,计算曝光时间和光圈值。
在步骤S306,在主照相机10中,计算步骤S302中所指定的各测距区域的聚焦状态。然后,根据计算出的聚焦状态,针对各测距区域计算用于获得聚焦状态的镜头移动量,并且按照升序将所计算出的各镜头移动量输出至镜头控制单元204。通过使用镜头移动量,在镜头控制单元204驱动焦点调节透镜的同时,测量焦点调节透镜的伸出量,并针对各测距区域计算离聚焦位置的距离。
在步骤S307,在主照相机10中,在发送/接收电路161的控制下,经由天线160将在步骤S306中所计算出的离多个聚焦位置的测距信息分发给所有从照相机11和12。
在步骤S308,在各从照相机11和12中,通过与第一典型实施例中步骤S109所述的方法相同的方法,在从各从照相机11和12来看的主照相机10的聚焦位置坐标中,选择最近的聚焦位置和最远的聚焦位置。然后,计算镜头至少在从最近的聚焦位置到最远的聚焦位置的范围内进入聚焦的景深。在主照相机10中,根据步骤S306中所计算出的离聚焦位置的距离的信息,计算镜头至少在从最近的聚焦位置到最远的聚焦位置的范围内进入聚焦的景深。
在步骤S309,在各照相机10~12中,根据步骤S308中所计算出的各照相机的景深,计算各镜头的焦距和光圈值。在步骤S310,在各照相机10~12中,根据步骤S309中计算出的焦距计算各镜头的镜头移动量,并将计算出的镜头移动量输出至镜头控制单元204。使用该镜头移动量,镜头控制单元204驱动焦点调节透镜。
以下步骤S311~S318的处理与第一典型实施例中的步骤S111~S118的处理相同,因此省略说明。
在以上说明中,说明了第三典型实施例。在第三典型实施例中,在多个照相机10~12中,至少一个照相机10将离所选择的要对被摄体聚焦的点的距离的信息发送至其它照相机11和12。然后,各照相机10~12通过使用离要对被摄体聚焦的位置的距离的信息来确定各自的景深。在第三典型实施例中,可以根据用户意图来确定要对被摄体聚焦的范围。
作为步骤S303中的选择测距区域的方法,可以在液晶面板显示单元125上显示被摄体的所拍摄图像,并且通过使用操作单元136中的垂直方向开关,可以将液晶面板显示单元125上所显示的光标设置成要聚焦的区域。此外,可以在液晶面板显示单元125上设置触摸面板输入单元,并且可以通过触摸面板输入来设置要聚焦的区域。步骤S308中的景深计算方法与第一典型实施例的步骤S109中的景深计算方法相同。然而,可以使用第二典型实施例的步骤S211中的方法。
其它实施例
可以通过执行以下处理来实现本发明的典型实施例。也就是说,经由网络或各种存储介质将用以实现上述典型实施例的功能的软件(程序)提供给***或设备。该***或设备的计算机(或者中央处理单元(CPU)或微处理单元(MPU))读出并执行该程序。
尽管参考典型实施例说明了本发明,但是应该理解,本发明不局限于所公开的典型实施例。所附权利要求书的范围符合最宽的解释,以包含所有修改、等同结构和功能。

Claims (5)

1.一种摄像***,用于使用能够相互通信的多个摄像设备来拍摄同一被摄体的图像,其特征在于,
所述多个摄像设备中的至少一个摄像设备向所述多个摄像设备中的其它摄像设备发送包括聚焦位置的所拍摄图像,以及
所述多个摄像设备中的各个摄像设备使用所述包括聚焦位置的所拍摄图像来确定各自的景深以使得从所拍摄图像中基于与从所述其它摄像设备发送的所拍摄图像的相关性而选取的区域位于所述景深内。
2.根据权利要求1所述的摄像***,其特征在于,在所述摄像***中的所述多个摄像设备之间,相互发送或接收各个摄像设备中所拍摄的包括聚焦位置的所拍摄图像,以及
所述多个摄像设备中的各个摄像设备使用所有所述多个摄像设备中所拍摄的包括聚焦位置的所拍摄图像,来确定各自的景深。
3.一种摄像设备,包括:
摄像单元,用于拍摄被摄体的图像,
所述摄像设备的特征在于,还包括:
发送单元,用于向其它摄像设备发送所述摄像单元拍摄的包括聚焦位置的所拍摄图像;
接收单元,用于从所述其它摄像设备接收所拍摄图像,所接收的所拍摄图像包括所述其它摄像设备的聚焦位置;以及
确定单元,用于使用由所述接收单元所接收到的所拍摄图像来确定所述摄像设备自身的景深以使得从所拍摄图像中基于与从其它摄像设备发送的所拍摄图像的相关性而选取的区域位于所述景深内。
4.根据权利要求3所述的摄像设备,其特征在于,所述确定单元通过使用由所述摄像设备自身所拍摄的包括聚焦位置的所拍摄图像和由所述其它摄像设备所拍摄的包括聚焦位置的所拍摄图像,来计算由所述摄像设备自身所拍摄的包括聚焦位置的所拍摄图像中的所述其它摄像设备的聚焦位置,从而确定所述摄像设备自身的景深。
5.根据权利要求3所述的摄像设备,其特征在于,所述确定单元包括用于选择要对所述被摄体聚焦的多个点的选择单元。
CN201110243192.5A 2010-08-20 2011-08-22 摄像***和摄像设备 Expired - Fee Related CN102375323B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010185275A JP5661373B2 (ja) 2010-08-20 2010-08-20 撮影システム、撮像装置及びその制御方法
JP2010-185275 2010-08-20

Publications (2)

Publication Number Publication Date
CN102375323A CN102375323A (zh) 2012-03-14
CN102375323B true CN102375323B (zh) 2016-02-24

Family

ID=45593760

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110243192.5A Expired - Fee Related CN102375323B (zh) 2010-08-20 2011-08-22 摄像***和摄像设备

Country Status (3)

Country Link
US (2) US20120044373A1 (zh)
JP (1) JP5661373B2 (zh)
CN (1) CN102375323B (zh)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103636191B (zh) * 2011-08-23 2016-11-02 松下电器产业株式会社 三维摄像装置、透镜控制装置
JP5657175B2 (ja) * 2012-03-29 2015-01-21 富士フイルム株式会社 補正装置
JP6044272B2 (ja) * 2012-10-31 2016-12-14 株式会社ニコン 補助撮像装置
JP6137929B2 (ja) * 2013-04-22 2017-05-31 キヤノン株式会社 情報処理装置および情報処理方法
EP3073723A4 (en) * 2013-11-19 2017-06-21 Sony Corporation Imaging system, imaging device, information processing device, method, and program
TWI521255B (zh) * 2013-11-29 2016-02-11 光寶科技股份有限公司 自動對焦方法、其自動對焦裝置和其影像擷取裝置
KR102138523B1 (ko) * 2013-12-19 2020-08-11 엘지전자 주식회사 화상진료를 위한 원격촬영 방법 및 시스템, 그리고 이를 위한 단말기 및 단말기 제어방법
TWI538480B (zh) * 2014-05-27 2016-06-11 敦泰電子股份有限公司 藉由偵測鄰近像素複雜度來動態調整壓縮參數的影像壓縮系統
JP6305232B2 (ja) * 2014-06-13 2018-04-04 キヤノン株式会社 情報処理装置、撮像装置、撮像システム、情報処理方法およびプログラム。
WO2015194274A1 (ja) * 2014-06-17 2015-12-23 ソニー株式会社 撮像システム、撮像装置、情報処理装置および方法とプログラム
JP5844491B1 (ja) * 2014-11-18 2016-01-20 株式会社日本ビデオシステム モーションコントローラー装置
US20160119532A1 (en) * 2015-01-22 2016-04-28 Mediatek Inc. Method And Apparatus Of Utilizing Image/Video Data From Multiple Sources
EP3391330B1 (en) * 2015-12-16 2020-02-05 InterDigital CE Patent Holdings Method and device for refocusing at least one plenoptic video
CN106791479A (zh) * 2017-01-22 2017-05-31 十维度(厦门)网络科技有限公司 一种相机阵列装置及相机阵列的方法
US10334149B2 (en) * 2017-02-23 2019-06-25 Qualcomm Incorporated Adjustment for cameras for low power mode operation
JP6602412B2 (ja) * 2018-03-07 2019-11-06 キヤノン株式会社 情報処理装置及び方法、情報処理システム、ならびにプログラム。
US20220224822A1 (en) * 2018-10-24 2022-07-14 Sony Corporation Multi-camera system, control value calculation method, and control apparatus
US20230188855A1 (en) * 2020-05-21 2023-06-15 Nec Corporation Installation assistance apparatus, installation assistance method, and non-transitory computer-readable storage medium

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101304487A (zh) * 2007-05-10 2008-11-12 富士胶片株式会社 调焦设备、方法和程序
CN101437167A (zh) * 2007-11-16 2009-05-20 佳能株式会社 摄影设备及其控制方法
CN101770157A (zh) * 2008-12-26 2010-07-07 奥林巴斯映像株式会社 相机和相机***

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3206420B2 (ja) * 1996-02-22 2001-09-10 株式会社デンソー カメラ装置
JP2000059820A (ja) * 1998-08-14 2000-02-25 Sanyu Seni:Kk 3カメラ方式による立体撮影用ビデオカメラ
JP2000083246A (ja) * 1998-09-04 2000-03-21 Canon Inc カメラ制御システム、カメラ制御方法、およびその処理を実行するプログラムを記憶した記録媒体
EP1085769B1 (en) * 1999-09-15 2012-02-01 Sharp Kabushiki Kaisha Stereoscopic image pickup apparatus
WO2002065763A2 (en) * 2001-02-12 2002-08-22 Carnegie Mellon University System and method for manipulating the point of interest in a sequence of images
JP4328224B2 (ja) * 2004-01-26 2009-09-09 オリンパス株式会社 結像光学系の結像性能評価方法及び装置
US7990467B2 (en) * 2004-11-08 2011-08-02 Sony Corporation Parallax image pickup apparatus and image pickup method
US7495582B2 (en) * 2005-03-08 2009-02-24 Northrop Grumman Corporation Geographic information storage, transmission and display system
EP1713253A1 (en) * 2005-04-14 2006-10-18 Thomson Licensing Camera system with PIP in viewfinder
FR2907575B1 (fr) * 2006-10-18 2009-02-13 Canon Res Ct France Soc Par Ac Procede et dispositif de codage d'images representant des vues d'une meme scene

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101304487A (zh) * 2007-05-10 2008-11-12 富士胶片株式会社 调焦设备、方法和程序
CN101437167A (zh) * 2007-11-16 2009-05-20 佳能株式会社 摄影设备及其控制方法
CN101770157A (zh) * 2008-12-26 2010-07-07 奥林巴斯映像株式会社 相机和相机***

Also Published As

Publication number Publication date
US20160309139A1 (en) 2016-10-20
CN102375323A (zh) 2012-03-14
JP5661373B2 (ja) 2015-01-28
US20120044373A1 (en) 2012-02-23
US10085010B2 (en) 2018-09-25
JP2012044540A (ja) 2012-03-01

Similar Documents

Publication Publication Date Title
CN102375323B (zh) 摄像***和摄像设备
CN110708466B (zh) 电子设备及电子设备的摄像方法
CN100553300C (zh) 摄像装置
CN101959020B (zh) 成像装置和成像方法
US7769287B2 (en) Image taking apparatus and image taking method
KR100914447B1 (ko) 촬영 장치 및 인포커스 포지션 검색 방법
US8482648B2 (en) Image pickup apparatus that facilitates checking of tilt thereof, method of controlling the same, and storage medium
CN100553296C (zh) 拍摄装置和曝光控制方法
JP2008028959A (ja) 撮影装置及び画像表示制御方法
CN104717423A (zh) 摄像装置、通信装置及其控制方法
CN104919790A (zh) 摄像装置、摄像***、摄像方法和摄像程序
CN103873749A (zh) 摄像装置和告知方法
CN102752514B (zh) 摄像设备及其控制方法
US7342610B2 (en) Color balance adjustment of image sensed upon emitting flash light
JP2006108759A (ja) 撮像装置
CN102857689B (zh) 摄像设备及其控制方法
CN101848335A (zh) 摄影装置和实时取景显示方法
JP4647518B2 (ja) 撮影装置
CN104980654A (zh) 包括多个摄像单元的摄像设备及其控制方法
JP2006174010A (ja) 撮像装置
JP2004173036A (ja) デジタルカメラ
JP2008005034A (ja) 撮影条件設定システム、撮影条件設定方法、撮影条件提供サーバおよび撮影装置
JP2002185835A (ja) 電子カメラシステム、電子カメラ、サーバコンピュータおよび携帯情報端末
JP2003111007A (ja) 画像処理システム、撮像装置、画像処理装置、画像処理方法、及びプログラム
JP2001141448A (ja) 光学装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20160224

Termination date: 20210822