CN105379244A - 摄像装置和摄像方法 - Google Patents

摄像装置和摄像方法 Download PDF

Info

Publication number
CN105379244A
CN105379244A CN201480030310.6A CN201480030310A CN105379244A CN 105379244 A CN105379244 A CN 105379244A CN 201480030310 A CN201480030310 A CN 201480030310A CN 105379244 A CN105379244 A CN 105379244A
Authority
CN
China
Prior art keywords
image
view data
camera head
optical system
control part
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480030310.6A
Other languages
English (en)
Other versions
CN105379244B (zh
Inventor
见盐裕纪
泽田知孝
一寸木达郎
盐谷望
柏俣充昭
寺门贵大
村上直哉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Aozhixin Digital Technology Co ltd
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2013111775A external-priority patent/JP6139984B2/ja
Priority claimed from JP2013160584A external-priority patent/JP6157263B2/ja
Priority claimed from JP2013161533A external-priority patent/JP2015033007A/ja
Priority claimed from JP2013161534A external-priority patent/JP2015031832A/ja
Application filed by Olympus Corp filed Critical Olympus Corp
Publication of CN105379244A publication Critical patent/CN105379244A/zh
Application granted granted Critical
Publication of CN105379244B publication Critical patent/CN105379244B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/667Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • G03B37/06Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe involving anamorphosis
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B7/00Control of exposure by setting shutters, diaphragms or filters, separately or conjointly
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/54Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/64Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/65Control of camera operation in relation to power supply
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/907Television signal recording using static stores, e.g. storage tubes or semiconductor memories
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00Details of cameras or camera bodies; Accessories therefor
    • G03B17/02Bodies

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)

Abstract

摄像装置(100)包括光学***(102a、102b)、摄像部(104a、104b)、姿势检测部(116)、控制部(122)。光学***(102a、102b)使来自被摄体的光束成像。摄像部(104a、104b)得到与由所述光学***(102a、102b)成像的光束对应的图像数据。姿势检测部(116)检测摄像装置(100)的姿势。控制部(122)根据所述姿势判定是在所述光学***(102a、102b)的光轴朝向天顶的状态下进行拍摄的模式还是在所述光学***(102a、102b)的光轴朝向拍摄者侧的状态下进行拍摄的模式,根据该判定的结果对使用所述摄像部(102a、102b)的拍摄动作时的控制进行变更。

Description

摄像装置和摄像方法
技术领域
本发明涉及摄像装置和摄像方法。
背景技术
公知具有日本特开2012-022108号公报中提出的鱼眼光学***的摄像装置。日本特开2012-022108号公报的鱼眼光学***构成为在最前面具有大型的凹透镜。在这种鱼眼光学***中,虽然图像的周边部中的变形增大,但是,能够使来自大致180度的视场角的光束在摄像元件中成像。
通过使用鱼眼光学***等特殊的宽视野光学***,用户能够进行通常的光学***中无法进行的拍摄。例如,在用户以使宽视野光学***的光轴朝向天顶的方式摆放摄像装置的情况下,能够一次性地拍摄包含用户自身在内的宽视野光学***的绕光轴的方位方向的图像。并且,在用户使宽视野光学***朝向自己自身的情况下,能够进行不仅拍摄自己的面部还拍摄自己的全身这样的特殊的自拍。由于能够拍摄较宽范围,所以,除了自拍以外,还能够进行不看取景器进行拍摄的盲操作拍摄、不看(nolook)/取景器拍摄等。
发明内容
在鱼眼光学***等特殊的宽视野光学***中,根据摄像装置的姿势,能够进行包含不同种类的自拍的盲操作拍摄、不看拍摄等。因此,期望根据摄像装置的姿势来进行最佳的盲操作拍摄、不看拍摄的控制。
本发明是鉴于所述情况而完成的,其目的在于,提供如下的摄像装置和摄像方法:在能够根据摄像装置的姿势而进行不同的多种不看拍摄的摄像装置中,进行与各个不看拍摄对应的拍摄控制。
第1方式的摄像装置具有:光学***,其使来自被摄体的光束成像;摄像部,其得到与由所述光学***成像的光束对应的图像数据;姿势检测部,其检测摄像装置的姿势;以及控制部,其根据所述姿势判定是在所述光学***的光轴朝向天顶的状态下进行拍摄的模式还是在所述光学***的光轴朝向拍摄者侧的状态下进行拍摄的模式,根据该判定的结果对使用所述摄像部的拍摄动作时的控制进行变更。
第2方式的摄像方法具有以下步骤:得到与由光学***成像的光束对应的图像数据;检测摄像装置的姿势;根据所述姿势判定是在所述光学***的光轴朝向天顶的状态下进行拍摄的模式还是在所述光学***的光轴朝向拍摄者侧的状态下进行拍摄的模式;以及根据所述判定的结果对拍摄动作时的控制进行变更。
附图说明
图1是示出作为本发明的第1实施方式的摄像装置的一例的结构的框图。
图2是示出全方位光学***的一例的结构的图。
图3A是用于说明闪光灯的配置的第1图。
图3B是用于说明闪光灯的配置的第2图。
图4是示出作为第1拍摄的通常拍摄的例子的图。
图5A是示出通常拍摄中得到的图像的例子的第1图。
图5B是示出通常拍摄中得到的图像的例子的第2图。
图6是示出对通常拍摄中得到的图像进行合成后的图像的图。
图7是示出作为第2拍摄的全身自拍的例子的图。
图8A是示出全身自拍中得到的图像的例子的第1图。
图8B是示出全身自拍中得到的图像的例子的第2图。
图9是示出对全身自拍中得到的图像进行合成后的图像的图。
图10是作为第3拍摄的全方位拍摄的例子。
图11是示出图10的拍摄时的被摄体的关系的图。
图12是示出全方位拍摄中得到的图像的例子的图。
图13是示出进行图像转换处理后的图像的图。
图14A是示出摄像装置的动作的流程图的第1图。
图14B是示出摄像装置的动作的流程图的第2图。
图15是示出图像转换处理的手法的例子的图。
图16是示出不稳定的状况下的拍摄的例子的图。
图17是示出进行图16的摄像装置的把持方式时的触摸面板的状态的图。
图18是示出电源接通控制的流程图。
图19是示出电源断开控制的流程图。
图20是示出作为本发明的第2实施方式的摄像装置的一例的结构的框图。
图21是示出图像的切出范围的切换的图。
图22是示出第2实施方式中的全方位拍摄的例子的图。
图23A是示出第2实施方式中的圆环状的图像的切出范围的切换的例子的第1图。
图23B是示出第2实施方式中的圆环状的图像的切出范围的切换的例子的第2图。
图24A是示出第2实施方式中的图像转换处理的第1图。
图24B是示出第2实施方式中的图像转换处理的第2图。
图24C是示出第2实施方式中的图像转换处理的第3图。
图25是示出具有本发明的第3实施方式的操作装置的摄像装置的结构的框图。
图26是说明摄像装置的详细情况的主视图。
图27A是示出摄像装置的使用例的第1图。
图27B是示出摄像装置的使用例的第2图。
图27C是示出摄像装置的使用例的第3图。
图28A是说明全方位拍摄的第1图。
图28B是说明全方位拍摄的第2图。
图28C是说明全方位拍摄的第3图。
图29A是说明摄像装置的动作的流程图。
图29B是说明摄像装置的动作的流程图。
图30A是示出利用左手把持摄像装置的状况的例子的第1图。
图30B是示出利用左手把持摄像装置的状况的例子的第2图。
图31是说明左手把持的判定的详细情况的流程图。
图32A是说明左手把持的判定的详细情况的第1图。
图32B是说明左手把持的判定的详细情况的第2图。
图33A是说明引导光的效果的第1图。
图33B是说明引导光的效果的第2图。
图33C是说明引导光的效果的第3图。
图33D是说明引导光的效果的第4图。
图34是说明左手操作的判定的动作的流程图。
图35A是说明左手操作的判定的第1图。
图35B是说明左手操作的判定的第2图。
图35C是说明左手操作的判定的第3图。
图36A是示出图像数据的合成的例子的第1图。
图36B是示出图像数据的合成的例子的第2图。
图36C是示出图像数据的合成的例子的第3图。
图36D是示出图像数据的合成的例子的第4图。
图36E是示出图像数据的合成的例子的第5图。
图36F是示出图像数据的合成的例子的第6图。
图36G是示出图像数据的合成的例子的第7图。
图36H是示出图像数据的合成的例子的第8图。
图36I是示出图像数据的合成的例子的第9图。
图36J是示出图像数据的合成的例子的第10图。
图36K是示出图像数据的合成的例子的第11图。
图36L是示出图像数据的合成的例子的第12图。
图37是说明图像数据的合成的详细情况的流程图。
具体实施方式
下面,参照附图对本发明的实施方式进行说明。
[第1实施方式]
首先,对本发明的第1实施方式进行说明。图1是示出作为本发明的第1实施方式的摄像装置的一例的结构的框图。图1所示的摄像装置100例如是数字照相机、带拍摄功能的便携电话机、带拍摄功能的便携终端。图1所示的摄像装置100具有光学***102a、全方位光学***102b、摄像部104a、摄像部104b、图像处理部106、显示部108、触摸面板110、记录部112、操作部114、姿势检测部116、面部检测部118、闪光灯120a、闪光灯120b、控制部122。
光学***102a是用于使来自被摄体的光束入射到摄像部104a的光学***。光学***102a例如是可变焦距的光学***。光学***102a也可以是固定焦距的光学***。全方位光学***102b以其光轴与光学***102a的光轴平行的方式配置在摄像装置100中,与光学***102a相比,是宽视野(宽视场角)的光学***。全方位光学***102b例如是图2所示的光学***。图2所示的例子的全方位光学***102b具有自由曲面透镜1021b和成像透镜组1022b,具有关于光轴L为轴对称的构造。自由曲面透镜1021b是构成为使来自将光轴L作为天顶的整个天空方向的光束F在内表面反射并入射到成像透镜组1022b的自由曲面透镜。成像透镜组1022b构成为使经由自由曲面透镜1021b入射的光束F入射到摄像部104b。
摄像部104a根据从光学***102a入射的光束生成图像数据。摄像部104a具有摄像元件和A/D转换电路。摄像元件将经由光学***102a成像的光束转换为模拟电信号。A/D转换电路将由摄像元件得到的电信号转换为数字信号即图像数据。摄像部104b根据从全方位光学***102b入射的光束生成图像数据。摄像部104b可以具有与摄像部104a相同的结构,也可以具有不同的结构。例如,与摄像部104a相比,摄像部104b的摄像元件的像素数和摄像面的面积也可以较大。
图像处理部106对由摄像部104a得到的图像数据和由摄像部104b得到的图像数据实施图像处理。图像处理部106例如进行白平衡校正或伽马校正这样的图像的显示或记录所需要的基本图像处理。并且,图像处理部106具有作为进行图像转换处理的图像转换处理部和进行图像合成处理的图像合成处理部的功能。图像转换处理是将经由摄像部104b得到的圆环状的图像数据转换为带状的图像数据的处理。图像合成处理是对经由摄像部104a得到的图像数据和经由摄像部104b得到的图像数据进行合成的处理。图像转换处理和图像合成处理在后面详细说明。
显示部108例如是设置在摄像装置100的主体背面的液晶显示器。显示部108根据从控制部122输入的图像数据显示图像。触摸面板110例如设置在显示部108的显示画面上。触摸面板110检测用户的手指等的接触,将接触位置的信息输入到控制部122。另外,显示部108不是必须为一处,也可以设置在摄像装置100的主体侧面和光学***侧。在小型的便携设备中,为了提高便携性,便携设备存在小型化的倾向。在小型的便携设备中,用户在拍摄时无法逐一观看显示部108进行确认的状况较多。根据这种状况,不看拍摄的必要性提高。
记录部112例如是构成为相对于摄像装置100拆装自如的存储卡。记录部112记录由控制部122生成的图像文件等各种信息。近年来,存在以无线方式散布记录在外部的记录部中的情况,但是,在这种情况下,本实施方式的技术也是有效的。
操作部114是设置在摄像装置100的主体上的触摸面板110以外的机械操作部件。操作部114例如包括释放按钮、电源开关。释放按钮是用于供用户指示拍摄执行的操作部件。电源开关是用于供用户指示摄像装置100的电源的接通或断开的操作部件。
姿势检测部116例如是分别与摄像装置100的水平方向(X轴)、垂直方向(Y轴)、进深方向(Z轴)平行配置的3轴加速度传感器,检测摄像装置100的姿势。图3A和图3B示出摄像装置100中设定的3轴的例子。水平方向(X轴)例如是以横位置摆放摄像装置100时与地表平行且与光学***102a和全方位光学***102b的光轴垂直的摄像装置100的方向。垂直方向(Y轴)例如是以横位置摆放摄像装置100时与地表垂直的摄像装置100的方向。进深方向(Z轴)例如是以横位置摆放摄像装置100时与地表平行且与光学***102a和全方位光学***102b的光轴平行的摄像装置100的方向。
面部检测部118例如使用图案匹配来检测图像数据中的人物的面部,将检测到的面部的位置信息输入到控制部122。
闪光灯120a和闪光灯120b通过发光而对被摄体进行照明。闪光灯120a和闪光灯120b以使得发光方向正交的方式设置在摄像装置100的主体上。如图3B所示,作为第1闪光灯的闪光灯120a以光学***102a和全方位光学***102b的光轴朝向被摄体的方向时与被摄体相面对、即发光方向与光学***102a和全方位光学***102b的光轴平行的方式,例如设置在摄像装置100的上表面上。此时,如图3B所示,优选闪光灯120a以相对于设置有光学***102a和全方位光学***102b的摄像装置100的正面具有规定间隔d的方式设置在摄像装置100的上表面上。通过这样设置闪光灯120a,在全方位光学***102b与闪光灯120a之间形成有阶梯差。通过该阶梯差,防止来自闪光灯120a的照明光直接入射到全方位光学***102b。如图3A所示,作为第2闪光灯的闪光灯120b以光学***102a和全方位光学***102b的光轴朝向天顶方向时朝向被摄体的方向、即发光方向与光学***102a和全方位光学***102b的光轴垂直的方式设置在摄像装置100的侧面。
控制部122例如具有CPU,对摄像装置100的整体的动作进行控制。控制部122具有作为拍摄控制部的功能。作为拍摄控制部的功能包括作为摄像控制部的功能、作为触摸面板控制部的功能、作为闪光灯控制部的功能、作为图像处理控制部的功能、作为电源控制部的功能。作为摄像控制部的功能是对基于摄像部104a和104b的曝光动作进行控制的功能。作为触摸面板控制部的功能是根据拍摄时的摄像装置100的姿势而对触摸面板110的设定进行控制的功能。闪光灯控制功能是在需要闪光灯的发光时、根据拍摄时的摄像装置100的姿势而使闪光灯120a和闪光灯120b中的任意一方发光的功能。图像处理设定功能是根据拍摄时的摄像装置100的姿势而对图像处理部106的图像处理的内容进行控制的功能。作为电源控制部的功能是进行与摄像装置100的各模块的电源的接通或断开有关的控制的功能。在存在多个显示部的情况下,控制部122也可以根据摄像装置100的姿势来切换显示。此时,控制部122考虑显示部位和纵横等来切换显示。
接着,对本实施方式的摄像装置100的动作进行说明。在本实施方式中,用户变更摄像装置100的摆放方式,由此进行不同的3种拍摄。
图4是示出作为第1拍摄的通常拍摄的例子的图。作为第1拍摄,用户U以使摄像装置100的光学***102a和全方位光学***102b的光轴朝向被摄体S1、S2的方式进行摆放。当在不存在光学***的背面(光学***的配置面的相反面)设置显示部108时,能够成为比较大的面积,用户U一边利用显示部108确认时机和构图一边进行拍摄即可。
当在图4所示的状态下由用户U进行拍摄时,在摄像部104a中,得到图5A所示的以光学***102a的光轴为中心的规定矩形范围的图像。例如,在光学***102a朝向被摄体S1、S2的情况下,在摄像部104a中得到被摄体S1、S2的周边的图像。并且,在摄像部104b中,得到图5B所示的绕全方位光学***102b的光轴的360度方位的范围的圆环状的图像。例如,在全方位光学***102b朝向被摄体S1、S2的情况下,得到被摄体S1、S2的周围的背景B的图像。在这种第1拍摄中,能够与现有的摄像装置同样地拍摄被摄体。
这里,由摄像部104a得到的图5A所示的图像数据和图5B所示的图像数据可以如图6所示那样合成。通过合成,与仅使用光学***102a进行拍摄的情况相比,能够得到广角的图像。关于合成的手法,例如可以使用如下手法:通过后面说明的手法将图5B的图像数据转换为带状图像数据后,在带状图像数据内的被摄体S1、S2的位置合成图5A所示的图像数据。关于该合成图像,假设拍摄时的显示和再现时的显示,但是,也可以是不显示转换后的图像而仅进行记录的方式。
图7是示出作为第2拍摄的全身自拍的例子的图。作为第2拍摄,用户U以使摄像装置100的光学***102a和全方位光学***102b的光轴朝向自己的方式进行摆放。当在图7所示的状态下由用户U进行拍摄时,在摄像部104a中,得到图8A所示的以光学***102a的光轴为中心的规定矩形范围的图像。例如,在光学***102a朝向用户U的面部的情况下,得到用户U的面部的周边的图像。并且,在摄像部104b中,得到图8B所示的绕全方位光学***102b的光轴的360度方位的范围的圆环状的图像。例如,在全方位光学***102b朝向用户U的面部的情况下,得到用户U的躯干等的周边的图像。在这种第2拍摄中,在自拍时,能够得到不仅包含用户U的面部附近、还包含用户的全身的周围的图像。即使在存在光学***的面上设置显示部108,也不会成为较大的面积,很难一边确认时机和构图一边进行拍摄。特别是在不稳定的状况下,当一边确认一边拍摄时,注意力分散,安全可能受到威胁。
这里,由摄像部104a得到的图8A所示的图像数据和图8B所示的图像数据可以如图9所示那样合成。关于合成的手法,例如可以使用如下手法:通过后面说明的手法将图8B的图像数据转换为带状图像数据后,在带状图像数据内的用户U的位置合成图8A所示的图像数据。关于该合成图像,假设拍摄时的显示和再现时的显示,但是,也可以是不显示转换后的图像而仅进行记录的方式。
图10是作为第3拍摄的全方位拍摄的例子。作为第3拍摄,用户U以使摄像装置100的光学***102a和全方位光学***102b的光轴朝向天顶的方式进行摆放。被摄体S1、S2与用户U的三维上的位置关系例如如图11所示。此时,当由用户U进行拍摄时,在摄像部104b中,得到图12所示的以全方位光学***102b的光轴为中心的360度方位的图像。在这种第3拍摄中,能够一次性地拍摄包含拍摄者即用户U在内的摄像装置100的周围的图像。这里,即使在存在光学***的面上或摄像装置100的侧面设置显示部108,也不会成为较大的面积,很难一边确认时机和构图一边进行拍摄。当然,如果抬到头上进行拍摄,则也可以进行不包含拍摄者的拍摄。
根据经由全方位光学***102b入射到摄像部104b的像而得到的图像成为图12所示的圆环状的图像。该圆环状的图像可以如图13所示转换为带状的图像。关于该图像,假设拍摄时的显示和再现时的显示,但是,也可以是不显示转换后的图像而仅进行记录的方式。
下面,进一步对摄像装置100的动作进行说明。图14A和图14B是示出摄像装置100的动作的流程图。在图14A和图14B中,控制部122进行电源接通控制(步骤S101)。电源接通控制是根据各种条件来接通摄像装置100的电源的控制。电源接通控制的详细情况在后面说明,这里,设电源接通控制的结果为摄像装置100的电源接通,继续进行说明。
在摄像装置100的电源接通后,控制部122判定摄像装置100的动作模式是否是拍摄模式(步骤S102)。摄像装置100具有拍摄模式和再现模式作为动作模式。拍摄模式是用于拍摄记录用的图像的动作模式。再现模式是用于再现所记录的图像的动作模式。通过用户的触摸面板110的操作或操作部114的操作来进行拍摄模式和再现模式的切换。
在步骤S102中判定为动作模式不是拍摄模式的情况下,控制部122进行再现模式的处理(步骤S103)。关于再现模式的处理,可以应用与现有技术相同的技术。这里,对再现模式的处理进行简单说明。在再现模式中,在显示部108中显示记录部112中记录的图像文件的一览。用户选择一览显示的图像文件中的期望的图像文件。从记录部112中读出由该用户选择出的图像文件并在显示部108中进行再现。在再现模式的处理后,处理转移到步骤S113。
在步骤S102中判定为动作模式是拍摄模式的情况下,控制部122通过姿势检测部116检测摄像装置100的姿势(步骤S104)。然后,控制部122根据姿势检测部116的检测结果,判定光学***102a和全方位光学***102b的光轴是否朝向天顶方向、即是否要进行图10所示的全方位拍摄(步骤S105)。能够根据Y轴的加速度表示重力加速度来检测光轴朝向天顶方向。
在步骤S105中判定为光轴朝向天顶方向的情况下,控制部122判定是否产生了朝向闪光灯120b的发光方向的加速度、即用户是否进行了朝向闪光灯120b的发光方向移动摄像装置100的动作(步骤S106)。能够根据X方向的加速度来检测产生了朝向闪光灯120b的发光方向的加速度。在步骤S106中判定为未产生朝向闪光灯120b的发光方向的加速度的情况下,控制部122使处理转移到步骤S113。
在步骤S106中判定为产生了朝向闪光灯120b的发光方向的加速度的情况下,控制部122判定经由摄像部104b得到的图像数据中的被摄体(例如面部)的亮度与规定亮度相比是否是低亮度(步骤S107)。在步骤S107中判定为被摄体的亮度与规定亮度相比不是低亮度的情况下,控制部122执行使用摄像部104b的全方位拍摄(步骤S108)。此时,控制部122对摄像部104b的曝光进行控制以使得被摄体的亮度适当,由此执行拍摄。在步骤S107中判定为被摄体的亮度与规定亮度相比是低亮度的情况下,控制部122视为需要闪光灯的发光,使闪光灯120b发光,并且执行使用摄像部104b的全方位拍摄(步骤S109)。这里,在图14A和图14B的例子中,通过判定是否是低亮度,来判定闪光灯的发光的必要性。除此之外,例如也可以在由用户设定为使闪光灯发光的情况下使闪光灯发光。
这样,在本实施方式中,在光轴朝向天顶方向的情况下,将由用户移动摄像装置100作为触发来执行拍摄。在全方位拍摄中,如图10所示,用户和被摄体可能以包围摄像装置100的周围的方式存在。当在该状态下使发光方向与光学***102a和全方位光学***102b的光轴相同的闪光灯120a发光时,用户和被摄体可能感到眩目。因此,在全方位拍摄中产生闪光灯的发光的必要性的情况下,不使闪光灯120a发光,而使闪光灯120b发光。摄像装置100的拍摄执行的触发不是必须为移动摄像装置100。例如,释放按钮的操作也可以是拍摄执行的触发。
在步骤S108或步骤S109的全方位拍摄后,控制部122判定是否进行图像转换处理、即是否记录图13所示的带状的图像数据(步骤S110)。例如通过用户来选择是否记录带状的图像数据。
在步骤S110中判定为不进行图像转换处理的情况下,如图15所示,控制部122根据在图像处理部106中对摄像部104b的全部有效范围的图像数据I1进行处理后的图像数据生成图像文件,将所生成的图像文件记录在记录部112中(步骤S111)。这里,通过全方位光学***102b在摄像元件中成像的范围为圆环状。与此相对,一般情况下,摄像元件的像面为矩形。因此,在全方位拍摄时,作为图像文件进行记录的图像数据也是矩形的图像数据。另外,下面,将形成圆环状的像的矩形的图像数据称为整周图像数据。
在步骤S110中判定为进行图像转换处理的情况下,控制部122在图像处理部106中进行图像转换处理并生成带状图像数据I2。控制部122根据所生成的带状图像数据生成图像文件,将所生成的图像文件记录在记录部112中(步骤S112)。作为用于生成带状图像数据的手法,例如考虑图15的实线箭头和虚线箭头所示的、通过使用表示整周图像数据的各坐标与带状图像数据的各坐标的对应关系的转换函数f的坐标转换来生成的手法。当然,带状图像数据的生成手法不限于这里所示的手法。
接着,控制部122进行电源断开控制(步骤S113)。电源断开控制是根据各种条件来断开摄像装置100的电源的控制。电源断开控制的详细情况在后面说明。
在步骤S105中判定为光轴不朝向天顶的情况下,控制部122判定光轴是否不朝向地表方向(步骤S114)。能够根据Y轴的加速度来检测光轴朝向地表方向。在步骤S114中判定为光轴朝向地表方向的情况下,控制部122使处理转移到步骤S113。该情况下,不进行拍摄。在步骤S114中判定为光轴不朝向地表方向的情况下、即要进行图4所示的通常拍摄或图7所示的全身自拍的情况下,控制部122通过图像处理部106,如图6或图9所示对由摄像部104a得到的图像数据和由摄像部104b得到的图像数据进行合成(步骤S115)。
接着,控制部122根据触摸面板110的输出来检测触摸面板110的触摸位置(步骤S116)。可能在不稳定的状况下进行拍摄。例如,图16是示出用户U一边抓住悬崖一边进行自拍的状况的图。此时,用户用一只手抓住悬崖,并且用另一只手使摄像装置100朝向自身进行拍摄。这里,在如图16那样摆放摄像装置100的情况下,用户U很难按下释放按钮114a。当用户要勉强按下释放按钮114a时,还可能掉落摄像装置100。因此,在图16的状况下,期望可以不使用释放按钮114a来进行拍摄。在本实施方式中,在估计出拍摄时的状况为图16的状况时,能够通过使用触摸面板110的拍摄操作来进行拍摄。例如根据用户U对摄像装置100的把持方式来判定图16的状况。图17是示出进行图16的摄像装置100的把持方式时的触摸面板110的状态的图。在图16的状况下,用户U用单手牢固地把持摄像装置100,以使得摄像装置100不会掉落。此时,预想到用户的多个手指F如图17所示那样接触触摸面板110。即,预想到用户以某种程度打开手指F进行把持,以支承摄像装置100。在本实施方式中,如图17所示,在多个手指F的间隔为大致等间隔时,判定为图16的状况。即,在触摸检测后,控制部122判定接近的3点的触摸位置的间隔TH1和TH2是否大致相等(步骤S117)。
在步骤S117中判定为间隔TH1和TH2不大致相等的情况下,控制部122使显示部108显示步骤S114中生成的合成图像作为实时取景图像(步骤S118)。然后,控制部122判定是否由用户进行了拍摄操作(步骤S119)。由于不是图16的状况,所以,与以往同样地判定是否进行了拍摄操作即可。例如,判定是否按下了释放按钮即可。在步骤S119中判定为未进行拍摄操作的情况下,控制部122使处理转移到步骤S113。在步骤S119中判定为进行了拍摄操作的情况下,控制部122使处理转移到步骤S121。该情况下,进行拍摄。
在步骤S117中判定为间隔TH1和TH2大致相等的情况下,控制部122判定接近的3点的触摸位置中的中央的触摸位置的触摸状态是否变化(步骤S120)。在图16的状况下,用户无法看到显示部108。因此,不需要实时取景图像显示。在步骤S120中判定为中央的触摸位置的触摸状态未变化的情况下,控制部122使处理转移到步骤S113。在步骤S120中判定为例如用户的手指离开等而使中央的触摸位置的触摸状态变化的情况下,控制部122使处理转移到步骤S121。该情况下,进行拍摄。特别是在能够进行全方位拍摄的摄像装置的情况下,光学***的部分突出。因此,用户必须以不接触光学***的部分的方式进行拍摄。进而,当手指等向光学***侧突出时,成为手指进入的图像。这样,在能够进行全方位拍摄的摄像装置的情况下,把持方式产生限制。在手指不会进入的设备的抓取方式中,由于多个手指位于背面,所以,在这样的拍摄方法中,能够利用多个手指来减少误动作。进而,不是触摸面的特定部位,能够仅通过手指的触摸的相对位置进行操作,所以,能够迅速地进行没有错误的拍摄。并且,相反,在普通拍摄时,由于这种拍摄方法不自然,所以能够防止误动作。因此,根据设备的姿势,这种方式在失败照片防止、节能、隐私保护等方面是有效的。
在判定为进行拍摄的情况下,控制部122判定经由摄像部104b得到的图像数据中的被摄体(例如面部)的亮度与规定亮度相比是否是低亮度(步骤S121)。在步骤S121中判定为被摄体的亮度与规定亮度相比不是低亮度的情况下,控制部122执行使用摄像部104a和摄像部104b双方的拍摄(步骤S122)。此时,控制部122对摄像部104a和摄像部104b的曝光进行控制以使得被摄体的亮度适当,由此执行拍摄(通常拍摄或全身自拍)。在步骤S121中判定为被摄体的亮度与规定亮度相比是低亮度的情况下,控制部122视为需要闪光灯的发光,使闪光灯120a发光,并且执行使用摄像部104a和摄像部104b双方的拍摄(步骤S123)。通过使闪光灯120a发光,能够适当地对被摄体进行照明。当存在多余的发光时,由于反射光而产生的光斑等对画质造成影响,当然在节能方面也不理想。也不会眩目而产生迷惑。
在拍摄后,控制部122判定是否在由摄像部104a得到的图像数据和由摄像部104b得到的图像数据双方中分断了人物的组成部分(parts)(步骤S124)。例如,在由摄像部104a得到的图像数据中仅存在面部、由摄像部104b得到的图像数据中仅存在躯干的情况下,判定为在由摄像部104a得到的图像数据和由摄像部104b得到的图像数据双方中分断了人物的组成部分。使用肤色检测或图案匹配等公知手法进行人物的躯干的检测。在步骤S124中判定为在2个图像数据中分断了人物的组成部分的情况下,控制部122根据如图6或图9所示通过图像处理部106对进行拍摄而由摄像部104a和摄像部104b分别得到的图像数据进行合成后的图像数据生成图像文件,将所生成的图像文件记录在记录部112中(步骤S125)。在步骤S124中判定为未在2个图像数据中分断人物的组成部分的情况下,控制部122根据进行拍摄而由摄像部104a得到的图像数据生成图像文件,将所生成的图像文件记录在记录部112中(步骤S126)。在步骤S125或步骤S126中记录了图像文件后,控制部122使处理转移到步骤S113。
图18是示出电源接通控制的流程图。在电源接通控制中,即使用户不进行电源开关的操作,在检测到用户从例如口袋中取出摄像装置100的动作时,也进行自动接通摄像装置100的电源的控制。在电源接通控制的开始时,控制部122判定电源控制的模式是否是运动模式(motionmode)(步骤S201)。运动模式是自动进行控制以使得接通或断开摄像装置100的电源的模式。通过用户的触摸面板110的操作或操作部114的操作来进行是否将电源控制的模式设为运动模式的切换。
在步骤S201中判定为电源控制的模式不是运动模式的情况下,控制部122判定用户是否进行了电源开关的接通操作(步骤S202)。在步骤S202中判定为未进行电源开关的接通操作的情况下,控制部122使处理返回步骤S201。该情况下,继续成为电源的断开状态。在步骤S202中判定为进行了电源开关的接通操作的情况下,控制部122接通图1所示的摄像装置100的各模块的电源(步骤S203)。然后,控制部122使处理转移到步骤S102。
在步骤S201中判定为电源控制的模式是运动模式的情况下,控制部122接通姿势检测部116的电源,断开其他模块的电源(步骤S204)。接着,控制部122根据姿势检测部116的输出来判定摄像装置100中是否产生了与重力相反的方向的加速度(步骤S205)。当在图16的状况下用户U从口袋中取出摄像装置100时,在摄像装置100中产生箭头A所示的加速度。步骤S205的判定是判定是否产生了箭头A所示的加速度中的与重力相反的朝向、即向上的加速度的处理。在步骤S205中判定为摄像装置100中未产生与重力相反的朝向的加速度的情况下,控制部122使处理返回步骤S201。
在步骤S205中判定为摄像装置100中产生了与重力相反的朝向的加速度的情况下,控制部122根据姿势检测部116的输出来判定摄像装置100中是否产生了与重力正交的朝向的加速度(步骤S206)。步骤S206的判定是判定是否产生了箭头A所示的加速度中的与重力正交的朝向、即与地表平行的平面方向(在图16的例子中为朝向用户U的背后的朝向)的加速度的处理。在步骤S206中判定为摄像装置100中未产生与重力正交的朝向的加速度的情况下,控制部122使处理返回步骤S201。
在步骤S206中判定为摄像装置100中产生了与重力正交的朝向的加速度的情况下,控制部122根据姿势检测部116的输出来判定摄像装置100的姿势是否被固定(步骤S207)。例如根据由姿势检测部116检测到的加速度在规定时间(例如5秒左右)内没有变化来判定姿势被固定。在步骤S207中判定为姿势未被固定的情况下,控制部122使处理返回步骤S201。
在步骤S207中判定为姿势被固定的情况下,控制部122接通触摸面板110的电源(步骤S208)。然后,控制部122使处理转移到步骤S117。通过步骤S205~步骤S207的判定,估计为用户进行了从口袋中取出摄像装置100的动作。此时,假设可能进行图16的拍摄,在本实施方式中,在步骤S205~步骤S207的任意判定中均判定为“是”的情况下,在接通触摸面板110的电源后,立即进行步骤S117的判定。由此,用户在图16的状况下不用操作电源开关和释放按钮这样的操作部也能够进行拍摄。
图19是示出电源断开控制的流程图。在电源断开控制中,即使用户不进行电源开关的操作,也进行由于经过规定时间而自动断开摄像装置100的电源的控制。在电源断开控制的开始时,控制部122判定用户是否进行了电源开关的断开操作(步骤S301)。在步骤S301中判定为进行了电源开关的断开操作的情况下,控制部122断开图1所示的摄像装置100的各模块的电源(步骤S302)。在断开摄像装置100的各模块的电源后,控制部122结束电源断开控制。这里,控制部122的必要部分的电源成为接通状态,以使得在断开电源后也能够进行电源接通控制。
在步骤S301中判定为用户未进行电源开关的断开操作的情况下,控制部122判定电源控制的模式是否是运动模式(步骤S303)。在步骤S303中判定为电源控制的模式是运动模式的情况下,控制部122根据姿势检测部116的输出来判定是否在摄像装置100的姿势的固定被解除后经过了规定时间(例如5秒)(步骤S304)。在步骤S304中判定为未在摄像装置100的姿势的固定被解除后经过规定时间的情况下,控制部122使处理转移到步骤S117。该情况下,视为用户还存在拍摄意图,使摄像装置100的电源维持接通状态。在步骤S304中判定为在摄像装置100的姿势的固定被解除后经过了规定时间的情况下,控制部122使处理转移到步骤S204。该情况下,进行运动模式的情况下的电源接通控制。
在步骤S303中判定为电源的模式不是运动模式的情况下,控制部122判定是否在无操作状态下经过了规定时间(例如1分钟)(步骤S305)。在步骤S305中判定为未在无操作状态下经过规定时间的情况下,控制部122使处理返回步骤S102。该情况下,摄像装置100的电源依然是接通状态。在步骤S305中判定为在无操作状态下经过了规定时间的情况下,控制部122使处理转移到步骤S302。该情况下,断开摄像装置100的各模块的电源。
如以上说明的那样,在本实施方式中,在摄像装置100中设置有通常的光学***102a和全方位光学***102b这2种光学***。因此,在本实施方式中,除了通常拍摄以外,还能够进行与摄像装置100的姿势对应的不同的2种自拍。即,在全身自拍中,不仅能够拍摄用户的面部,还能够拍摄全身。并且,在全方位拍摄中,能够得到摄像装置100的周围的360度方位的图像。因此,能够同时拍摄包围摄像装置100的周围的多个被摄体。进而,在本实施方式中,还可以将全方位拍摄时得到的圆环状的图像数据转换为带状的图像数据进行记录。当然不限于该实施方式,写成“自拍”的部分不必止于此,在拍摄自己方向的背面拍摄、不看拍摄中,当然也可以发挥相同效果。
并且,在全身自拍时等,可能产生用户无法对操作部114进行操作的状况。在本实施方式中,根据摄像装置100的姿势的变化来判定用户无法对操作部114进行操作的图16的状况,在估计为图16的状况的情况下,能够进行基于触摸面板110的拍摄操作。进而,由于在图16的状况下也很难进行电源开关的操作,所以,在本实施方式中,在估计为图16的状况的情况下,自动接通或断开摄像装置100的电源。由此,用户在图16这样的操作部114的操作困难的状况下也能够进行拍摄操作。另外,在图16的自拍时,假设在由摄像部104a或摄像部104b得到的图像数据中映出把持摄像装置100的用户U的手。因此,也可以代替步骤S117的判定而在图像数据中检测到手的情况下,判定为图16的状况。并且,也可以在单纯检测到用户U的面部的情况下,判定为图16的状况。
在本实施方式中,在通常拍摄或全身自拍时,能够对经由光学***102a得到的图像数据和经由全方位光学***102b得到的图像数据进行合成。由此,能够得到仅通过光学***102a无法得到的宽视野的图像。
并且,在本实施方式中,在摄像装置100中设置有发光方向不同的2个闪光灯。由此,能够选择与摄像装置100的姿势对应的适当的闪光灯对被摄体进行照明。
[第2实施方式]
接着,对本发明的第2实施方式进行说明。图20是示出作为本发明的第2实施方式的摄像装置的一例的结构的框图。在图20中,通过对与图1相同的部分标注与图1相同的参照标号来省略说明。第2实施方式的摄像装置100代替光学***102a和全方位光学***102b而具有鱼眼光学***102c。鱼眼光学***102c构成为在前表面具有大型的凹透镜,通过该凹透镜使来自将光轴设为天顶的整个天空的光束入射到摄像部104。鱼眼光学***102c与全方位光学***102b不同,在摄像部104的摄像元件上形成图21的左部所示的圆状的像。换言之,在第2实施方式中,光束还成像在摄像元件的中央部。因此,在第2实施方式中不需要2个光学***。因此,摄像部也可以是一个。
接着,对本实施方式的摄像装置100的动作进行说明。第2实施方式中的摄像装置100的基本动作与第1实施方式中说明的动作相同。即,在第2实施方式中,也通过由用户变更摄像装置100的摆放方式,能够进行通常拍摄、全身自拍(或背面拍摄)、全方位拍摄这3种拍摄。与第1实施方式的不同之处在于,通过使用鱼眼光学***102c,不进行第1实施方式那样的图像合成处理,也能够得到宽视野的图像。但是,在图像的端部残留有较大的变形。因此,例如,在通常拍摄的情况下,期望切出变形比较小的区域即与像圈(通过鱼眼光学***102c形成视为有效的亮度的像的范围)I内切的矩形区域A1的图像数据(对角图像数据)后进行记录。与此相对,在全身自拍或全方位拍摄的情况下,期望不进行切出而记录整个区域A2的图像数据(整周图像数据)。当然,也可以由用户选择是记录对角图像数据还是记录整周图像数据。
并且,在第2实施方式中,在进行图22所示的全方位拍摄时,能够进行将通过拍摄而得到的圆状图像数据转换为带状图像数据的图像转换处理。这里,在第2实施方式中,也可以对生成带状图像数据时的图像数据的切出范围进行变更。例如,图23A是示出以使外周与像圈I一致、内周为规定长度B1的方式设定圆环状的切出范围的例子的图。并且,图23B是示出以使外周与像圈I的周长一致、内周为比B1短的周长B2的方式设定圆环状的切出范围的例子的图。例如,在进行全方位拍摄的情况下,整周图像数据的中央部映出天空等的可能性较高。因此,中央部不是必须的。另一方面,期望在圆环状的切出范围内至少存在有被摄体的面部。因此,期望根据对比度的有无或面部的有无来设定圆环状的切出范围。
进而,期望根据生成带状图像时的内周的放大率来设定圆环状的切出范围的内周的长度。如图24A所示,在设圆环状的图像数据的内周侧的半径为R1、外周侧的半径为R0时,内周的长度l1为2π×R1,外周的长度l0为2π×R0。这里,l1<l0。为了将这种圆环状的图像数据转换为带状的图像数据,如图24B所示,需要以k(=R0/R1)倍的放大率对内周侧进行放大。放大使用线性插值等公知手法。一般情况下,当放大率增大时,画质劣化。因此,当仅内周侧以较大放大率进行放大时,在带状图像数据的上侧和下侧,画质之差较大,可能对用户赋予不舒适感。因此,对k设置上限,在k不超过上限的范围内设定内周的长度,以使得较大地映出被摄体。例如,设图24C所示的仰角45度时的k即k=2为上限。
如以上说明的那样,在本实施方式中,通过使用鱼眼光学***,不用使用多个光学***就能够得到与第1实施方式相同的效果。另外,第1实施方式和第2实施方式中说明的技术例如不止于民生用、业务用照相机(拍摄装置),当然也可以应用于安全确认装置、移动监视装置、检查装置等重视显示的显示装置。
[第3实施方式]
接着,对本发明的第3实施方式进行说明。图25是示出具有本发明的第3实施方式的操作装置的摄像装置的结构的框图。摄像装置200具有主体202。在该主体202中具有拍摄部204、通信部206、辅助光发光部208、控制部210、显示部212、记录部214、触摸面板216、操作部218、闪光灯220、姿势判定部222、外部通信部224。
拍摄部204具有拍摄光学***2041和摄像部2042。拍摄光学***2041具备具有作为鱼眼透镜的功能的多枚透镜,捕捉绕光轴的整周范围内的视野区域的光。摄像部2042根据拍摄光学***2041捕捉到的光生成图像数据。通信部206通过有线通信或无线通信向控制部210发送由摄像部2042得到的图像数据。
辅助光发光部208照射引导光。在被摄体包含在视场角内时,引导光照射到视场角内的规定位置。用户通过观看照射到视场角内的引导光,能够视觉辨认被摄体包含在视场角内。例如,通过将引导光投影到视场角内的周边部的被摄体上,用户不观看显示部212也能够视觉辨认视场角。引导光例如是激光。
控制部210具有面部检测部2101、图像处理部2102、显示控制部2103、图像合成部2104、辅助光控制部2105。面部检测部2101根据图像数据检测人的面部的部分。图像处理部2102对图像数据实施白平衡校正或伽马校正等图像处理。显示控制部2103使显示部212显示基于由图像处理部2102进行图像处理后的图像数据的图像。图像合成部2104对图像数据进行倾斜校正和裁剪。进而,图像合成部2104将图像数据与其他图像数据进行合成。辅助光控制部2105对辅助光发光部208的发光进行控制。
显示部212是根据显示控制部2103的控制来显示基于图像数据的图像的元件。显示部212例如进行实时取景显示。在实时取景显示中,实时显示摄像部2042捕捉到的图像数据。并且,显示部212包括液晶显示器或有机EL显示器。
记录部214记录由控制部210进行图像处理后的图像数据。该记录部214包括存储卡等。触摸面板216在进行了手指等的触摸时,检测被触摸的位置信息,将检测到的位置信息输入到控制部210。操作部218具有释放按钮等操作部件,将表示基于用户的操作部件的操作状态的信息输入到控制部210。闪光灯220在被摄体为低亮度时等进行发光。姿势判定部222检测摄像装置200的姿势或姿势的变化。外部通信部224向摄像装置200的外部装置发送图像数据。经由基于USB等的有线通信或基于Wi-fi等的无线通信来进行发送。
使用图26对摄像装置200的结构进行详细说明。图26是本发明的一个实施方式的摄像装置200的主视图。另外,在图26中,通过对与图25相同的结构标注与图25相同的参照标号而省略说明。
详细地讲,拍摄光学***2041具有鱼眼透镜2041a和低通滤光片2041b。鱼眼透镜2041a是用于捕捉宽视野范围内的光的光学***。低通滤光片2041b是构成为在从鱼眼透镜2041a入射的光中去除高频噪声的滤光片。
详细地讲,摄像部2042具有摄像元件2042a和AD转换电路2042b。摄像元件2042a将经由鱼眼透镜2041a和低通滤光片2041b入射的光转换为模拟电信号(图像信号)。AD转换电路2042b将由摄像元件2042a得到的模拟信号转换为数字信号(图像数据)。摄像元件2042a安装在基板2042c上。在该基板2042c上设置有连接器206a。进而,以包围基板2042c的方式形成有支承部2042d。而且,通过鱼眼透镜2041a、基板2042c、支承部2042d对摄像元件2042a进行密封。
在连接器206a上连接有柔性印刷基板206b。柔性印刷基板206b是印刷有用于从AD转换电路2042b传送图像数据的布线的挠性基板。该柔性印刷基板206b与连接器206c连接。连接器206c形成在基板210a上。通过连接器206a进行基板2042c与柔性印刷基板206b的相互连接。并且,通过连接器206c进行柔性印刷基板206b与基板210a的相互连接。这样,连接器206a、柔性印刷基板206b、连接器206c作为通信部206的一例发挥功能。
基板210a是用于组入电子部件的印刷基板。在基板210a上例如安装有图像处理IC2102a、显示控制IC2103a、显示部212、触摸面板216、电源电路226作为电子部件。图像处理IC2102a对应于图像处理部2102,对图像数据实施白平衡校正或伽马校正等图像处理。显示控制IC2103a对应于显示控制部2103,使显示部212显示基于图像数据的图像。电源电路226对从电池228得到的电压进行控制,供给用于使摄像装置200进行动作的电力。
并且,在主体202内设置有主电容器220a。主电容器220a根据从电源电路226供给的电压进行用于使闪光灯220发光的充电。并且,在主体202的外部形成有夹紧部202a。夹紧部202a是形成在主体202的外部以使用户稳定地摆放摄像装置200的辅助部件。
图27A、图27B、图27C示出摄像装置200的使用例。图27A示出用户一边观看显示部212一边利用右手进行释放操作的使用例。即,图27A示出通常拍摄时的例子。图27B示出广角自拍时的例子。广角自拍是指用户不观看显示部212而利用左手摆放摄像装置200并拍摄自己。图27C是用户通过使鱼眼透镜的光轴朝向天顶来进行全方位拍摄的使用例。
使用图28A、图28B、图28C进一步对图27C所示的全方位拍摄进行说明。图28A是示出用户H1通过全方位拍摄来拍摄自己自身和用户H1以外的2名被摄体H2的合计3人时的状况的图。在基于鱼眼透镜的拍摄中,3名被摄体全部收于视场角内。图28B是图28A的拍摄结果。在设定为拍摄光学***2041的像圈小于摄像元件的摄像范围时,得到图28B所示的圆形的拍摄结果。关于图28B的圆形的拍摄结果,还能够通过图像处理而加工成图28C所示的全景图像。为了使图28B所示的3名被摄体收于视场角内,期望拍摄光学***2041的光轴朝向天顶。
使用图29A和图29B的流程图对摄像装置200的动作进行说明。在摄像装置200的电源接通时,控制部210判定是否由用户选择了拍摄模式(步骤S400)。在判定为选择了拍摄模式时,控制部210判定用户是否利用左手握持摄像装置200(步骤S401)。
使用图30A和图30B所示的攀岩中的拍摄例对利用左手把持摄像装置的状况的例子进行说明。在图30A中,用户利用左手抓住岩石表面,利用右手摆放摄像装置200。此时,用户能够使用释放按钮等容易地进行拍摄。另一方面,在图30B中,用户利用右手抓住岩石表面,所以,利用左手摆放摄像装置200。由于摄像装置200的释放按钮大多配置在左手很难操作的位置,所以很难进行拍摄。
进而,关于是否利用左手把持摄像装置200的判定,对其详细处理进行说明。图31是用于详细说明左手把持的判定的流程图。首先,控制部210判定摄像装置200的倾斜是否保持为水平(步骤S501)。即,在判定为倾斜为水平时,控制部210判定为用户要进行拍摄。另一方面,在判定为倾斜不是水平时,控制部210判定为用户不要进行拍摄。在步骤S501中判定为摄像装置200的倾斜保持为水平时,控制部210开始检测触摸面板216的触摸位置(步骤S502)。在触摸面板216的触摸位置的检测后,控制部210判定是否检测到针对图32A所示的触摸面板216的三角形状的触摸部T5的触摸,其中,该触摸部T5被认为是在用户利用左手握持摄像装置200时用户左手接触的部分(步骤S503)。在该步骤S503中判定是否检测到触摸。但是,在步骤S503的判定中,即使没有严格地检测到触摸,也可以判定为触摸。例如,如果是静电电容型或光学式的触摸面板216,则即使没有接触对象物(这里为手的一部分或手指),只要与对象物之间的距离为一定距离内,则检测到进行了触摸。并且,判定针对三角形状的触摸部T5的触摸是因为,在用户具有要观看显示部212的显示的意思并把持摄像装置200的情况下,如图32A那样,容易把持摄像装置200的端部。近年来,显示部的画面存在大型化的倾向。在用户要把持具有这种大型画面的显示部的摄像装置200的情况下,用户把持显示部的周边。此时,在考虑观看显示部212的显示的情况下,容易预想到用户把持显示部的端部。并且,即使不考虑观看显示部212的显示,认为嫌弃对显示部的中央部赋予指纹或手印的用户也不会抓住显示部而会把持显示部的端部。因此,通过判定针对三角形状的触摸部T5的触摸,容易进行用户的把持的判定。
在步骤S503中判定为检测到针对三角形状的触摸部T5的触摸时,控制部210判定为利用左手把持摄像装置200。在步骤S503中判定为未进行针对三角形状的触摸部T5的触摸时,控制部210判定是否检测到针对图32B所示的触摸面板216上的作为两个部位的触摸部T1的同时触摸,其中,该触摸部T1被认为是在用户以其他方式利用左手握持摄像装置200时与用户手指接触的部分(步骤S504)。在步骤S504中判定是否检测到针对两个部位的触摸部T1的触摸。对判定针对两个部位的触摸部T1的触摸的理由进行说明。例如,当利用拇指和小指进行把持(该情况下,由于食指、中指、无名指来到画面上,所以这些手指可以用于触摸操作)时,由于小指很难用力,所以,用户很难稳定地把持摄像装置200。并且,在利用拇指和中指进行把持的情况下,用户能够稳定地把持摄像装置200。但是,该情况下,用户只能移动食指。当只能移动食指时,很难观看显示部212的画面。与此相对,在利用拇指和无名指进行把持(该情况下,由于食指、中指来到显示部212的画面上,所以这些手指可以用于触摸操作)的情况下,用户能够稳定地把持摄像装置200。进而,在食指和中指的两个部位的触摸中,如果弯曲或打开这两根手指,则容易视觉辨认显示部212的画面。两个部位的触摸部T1用于检测这种拇指和无名指的把持。三角形状的触摸部T5检测中指和拇指的把持,该情况下,成为使用食指的一个部位的触摸。但是,由于用户轻轻握持摄像装置200,所以能够确认显示部212的画面。
在步骤S504中判定为检测到针对触摸面板216上的两个部位的触摸部T1的同时触摸时,控制部210判定为利用左手把持摄像装置200。
在步骤S501中判定为摄像装置200的倾斜不是水平、即倾斜时,控制部210判定为不是利用左手把持摄像装置200。并且,在步骤S504中判定为未检测到针对触摸面板216上的两个部位的触摸部T1的同时触摸时,控制部210判定为不是利用左手把持摄像装置200。
在本实施方式中,以左手把持的操作为例进行说明。本实施方式的技术也可以应用于右手把持的情况。例如,能够通过触摸部的设定来检测很难按下释放按钮的右手把持。这种右手把持的触摸部的位置例如是在左右方向上与左手把持的触摸部的位置相反的位置。进而,例如,也可以设定与基于残疾人的手或脚的把持对应的触摸部。即,也可以设定与用户喜好的特定把持方式对应的触摸部,根据触摸位置的分布来检测这种特定把持。
这里,返回图29A和图29B的说明。在步骤S401中判定为利用右手把持摄像装置200时,控制部210将左手把持标志清除为0(步骤S402)。在将左手把持标志清除为0后,控制部210判定光轴的水平状态的持续时间是否比规定时间短(步骤S403)。在步骤S403中判定为水平状态的持续时间不比规定时间短时,控制部210使显示部212显示实时取景。并且,控制部210进行面部检测(步骤S404)。
控制部210判定是否操作了释放按钮或触摸面板216、即是否存在释放操作(步骤S405)。在步骤S405中判定为未操作释放按钮或触摸面板216时,控制部210使处理转移到步骤S407。在步骤S405中判定为操作了释放按钮或触摸面板216时,控制部210结合焦点或曝光对触摸面板216上的触摸位置或作为面部检测结果而检测到的面部进行拍摄后,将通过该拍摄而得到的图像数据记录在记录部214中。(步骤S406)。
在步骤S405或步骤S406后,控制部210判定是否由用户断开了电源(步骤S407)。在步骤S407中判定为断开了电源时,控制部210结束处理。在步骤S407中判定为未断开电源时,控制部210使处理返回步骤S400。
在步骤S401中判定为利用左手把持摄像装置200时,控制部210将左手把持标志设置为1(步骤S408)。然后,控制部210使处理转移到步骤S409。在步骤S408中将左手把持标志设置为1后或在步骤S403中判定为水平状态的持续时间比规定时间短时,控制部210使显示部212显示实时取景。进而,控制部210进行面部检测(步骤S409)。然后,控制部210判定是否从图像数据中检测到面部(步骤S410)。在判定为从图像数据中检测到面部时,控制部210从辅助光发光部208朝向被摄体主体的一部分照射引导光(步骤S411)。
这里,使用图33A、图33B、图33C、图33D对引导光的效果进行说明。用户通过观看引导光,即使不观看显示部212,也能够容易地视觉辨认到被摄体收于视场角内。用作引导光的光是具有指向性的光。引导光例如使用激光。通过将引导光的照射位置限定为视场角内的面部以外的被摄体,引导光不会直接入射到被摄体的眼睛。在图33A中,用户能够观看显示部212中显示的实时取景。因此,用户能够容易地如图33B所示的拍摄结果那样将被摄体收于视场角内。另一方面,图33C示出用户观看实时取景而很难确认被摄体是否收于视场角内的状况。在该状况下,为了使用户得知被摄体收于视场角内,如图33D的B1所示对被摄体的一部分照射引导光。
另外,以通知被摄体收于视场角内为目的的引导光的照射位置不限于被摄体主体的一部分,也可以是与视场角的端部相当的位置。通过确认照射到视场角的两端部的引导光,用户即使不观看显示部212,也能够确认视场角和视场角内的用户的位置等。在被摄体上或其左右存在墙壁或大厦等受到引导光的照射的其他被摄体时,控制部210对受到光的照射的物体照射引导光。
这里,返回图29A和图29B的说明。在步骤S410中判定为未从图像数据中检测到面部时,控制部210判定摄像装置200与被摄体的距离是否比规定距离近(步骤S412)。规定距离例如是3m。在步骤S412中判定为摄像装置200与被摄体的距离比规定距离近时,控制部210以使用户得知被摄体未收于视场角内为目的,对被摄体照射闪烁的引导光(步骤S413)。
接着,控制部210判定摄像装置200的重力方向和为了进行实时取景而得到的图像数据的重力方向是否一致(步骤S414)。在步骤S414中摄像装置200的重力方向与为了进行实时取景而得到的图像数据的重力方向一致时,控制部210将图像数据暂时存储在未图示的存储部中(步骤S415)。在后面叙述,但是,暂时存储的图像数据用于图像的合成。该暂时存储的图像数据对应于水平图像数据。在步骤S414中重力方向不一致时,控制部210不进行暂时存储。这里,暂时记录的图像数据是在拍摄紧前取得的。但是,暂时记录中使用的图像数据只要在用户拍摄的附近取得即可,即,也可以是刚刚拍摄之后取得的图像数据。例如,可以是拍摄的1帧后暂时记录的图像数据。
接着,控制部210判定左手把持标志是否设置为1(步骤S416)。在步骤S416中判定为左手把持标志设置为1时、即判定为利用左手把持摄像装置200时,控制部210进行与触摸检测的位置对应的左手操作的处理(步骤S417)。
对左手操作的处理进行说明。图34是示出左手操作的处理的流程图。在图34中,控制部210判定是否检测到针对触摸面板216上的两个部位的同时触摸(步骤S601)。在步骤S601中判定为检测到针对触摸面板216的两个部位的同时触摸时,如图35A所示,控制部210将用于通过检测两个部位同时触摸而进行释放操作的释放用触摸部T7设置在与触摸部T1不同的位置(步骤S602)。例如,释放用触摸部T7设置在比触摸部T1更接近触摸面板216的端部的位置。在本实施方式中,左手把持中的操作用的触摸部设置在认为触摸了通过左手把持的判定而判定出的触摸部的手指到达的范围内。即,由于不在该手指不会到达的范围内设置触摸部,所以,违反用户意思而按压了触摸部以外的区域时的误动作减少。
在步骤S601中判定为未检测到针对触摸面板216上的两个部位的同时触摸时、即判定为检测到针对一个部位的触摸时,如图35B所示,控制部210将释放用触摸部T2、放大实时取景用触摸部T3、曝光校正用触摸部T4、三角形状触摸部T6设置在触摸面板216中的用户的左手手指能够接触的范围内(步骤S603)。释放用触摸部T2是用于通过由用户利用左手手指触摸而进行释放操作的一个部位的触摸部。放大实时取景用触摸部T3是用于通过由用户滑动手指而进行放大实时取景操作的触摸部。放大实时取景操作是指进一步对放大了实时取景显示的图像数据的一部分后的区域进行实时取景显示的动作。该操作在需要放大观看对象物的拍摄设备以外的装置中也是有效的。曝光校正用触摸部T4是用于通过由用户滑动手指而进行曝光校正操作的触摸部。三角形状触摸部T6设置在与触摸部T5不同的位置,是用于通过由用户触摸而进行规定操作的触摸部。
在将触摸部T2、T3、T4、T6或T7设置在触摸面板216上时,也可以使显示部212显示与各触摸部对应的图像,以使得用户容易视觉辨认各触摸部。例如,使显示部212显示图35A或图35B所示的椭圆、图35B所示的箭头这样的图像。
并且,也可以通过触摸来进行曝光校正那样的与被摄体的视觉辨认有关的一般动作、例如焦点校正等操作。即使利用左手手指触摸了触摸面板216的三角形状触摸部T6,用户也能够确认显示部212的中央显示的图像。即,本发明的一个实施方式的操作装置是有效利用触摸面板216的利用手把持的区域以外的区域作为显示位置的、即直观的用户接口(UI)。
并且,考虑手指不与显示部212中显示的图像重合、手指能够自然触摸到触摸部来决定触摸部的位置。例如,即使触摸用的手指与显示部212的图像重合,在操作用触摸部的区域中,也能够通过由用户弯曲或展开该手指来确认图像。即,根据使用哪个手指进行针对操作用触摸部的触摸,进而考虑手的构造和手的可动范围,由此,用户的手指能够自然触摸的操作用触摸部的区域的位置变化。进行把持的手的一部分手指用于把持,其他手指用于操作。控制部210在判定为对摄像装置200进行了特定把持时,通过判定触摸面板216的触摸位置的分布,来判定利用哪个手指进行把持。另外,在本发明的一个实施方式中,对利用左手把持摄像装置时的触摸部进行说明。但是,本实施方式中的触摸部不限于基于左手的触摸,也可以对应于基于其他身体部位的触摸。例如,在抓住设备进行把持时,在控制部210判定为不存在操作用的手指时,也可以重新设置考虑了利用用户鼻子或其他四肢进行触摸的触摸部。
这里,返回图29A和图29B的说明。在步骤S417后,控制部210判定是否对触摸面板216进行了触摸操作(步骤S418)。在步骤S418中判定为未进行触摸操作时,控制部210使处理转移到步骤S407。
在步骤S418中检测到针对触摸部的触摸时、即在判定为利用手指按压了触摸面板216或进行了图35C所示的滑动操作时,控制部210判定该操作是否是释放操作(步骤S419)。在步骤S419中判定为操作是释放操作时,控制部210判定为用户利用左手进行了释放操作。另一方面,在步骤S419中判定为操作不是释放操作时,控制部210根据被按压的触摸部进行放大实时取景或曝光校正这样的控制(步骤S420)。
在步骤S416中左手把持标志不是1时、即用户利用右手握持摄像装置200时,控制部210判定是否使用释放按钮进行了释放操作(步骤S421)。
在步骤S419或步骤S421中进行了释放操作时,控制部210使朝向被摄体照射的引导光熄灭。然后,控制部210进行拍摄(步骤S422)。
在拍摄后,控制部210判定是否需要进行通过暂时存储而得到的图像数据与通过拍摄而得到的图像数据的合成、且是否能够进行合成(步骤S423)。需要进行合成的状况是指拍摄时的重力方向和图像数据的重力方向不一致时。能够进行合成的状况例如是在暂时存储的图像数据组中包含有判定为合成中能够使用的图像数据的状况。判定为合成中能够使用的图像数据是与需要进行合成的图像数据相似的图像数据,例如是在需要进行合成的图像数据紧前或紧后拍摄的图像数据。在步骤S423中判定为需要且能够进行暂时存储的图像数据与通过拍摄而得到的图像数据的合成时,控制部210对两个图像数据进行合成(步骤S424)。
对图像数据的合成的详细情况进行说明。作为需要进行图像数据的合成的状况的例子,图36A-图36L示出用户乘坐独木舟来拍摄自己的状况。在图36A的例子中,用户利用右手把持桨,利用左手进行摄像装置的操作。如图36B所示,图36A的状况下的理想的拍摄结果是拍摄时的重力方向和图像数据的重力方向一致的拍摄结果。但是,如上所述,由于处于不稳定的状况下,所以,拍摄结果大多是图36C所示的拍摄时的重力方向和图像数据的重力方向不一致的拍摄结果。因此,摄像装置200进行合成,以使得能够取得拍摄时得到的拍摄时的重力方向和图像数据的重力方向不一致的图像数据,作为拍摄时的重力方向和图像数据的重力方向一致的图像数据。
图37是示出图像数据的合成的流程图。在图37中,控制部210使拍摄时得到的图像数据的重力方向(图36C的G)与拍摄时的重力方向(例如下方向)一致(步骤S701)。因此,控制部210例如使图36D所示的图像数据的重力方向与摄像时的重力方向不同的图像数据如图36E所示倾斜。接着,如图36F所示,控制部210以使倾斜后的拍摄图像数据I1与暂时记录的水平图像数据I2之间的一致度最高的方式重合两个图像数据,得到图36H所示的合成图像数据I3(步骤S702)。例如,在图像数据I1和图像数据I2中,以使人物部S的位置对齐的方式进行重合。在进行图像数据的重合后,如图36I所示,控制部210删除存在于水平图像数据和拍摄图像数据重合的部分中的水平图像数据部分(步骤S703)。例如如图36J所示,通过删除人物部S中的水平图像数据,针对人物部S,仅保留拍摄图像数据。然后,如图36K所示,控制部210将合成图像数据切出为四边形状(步骤S704)。然后,结束图37的处理。例如,在图36L中,删除虚线所示的部分而得到最终的合成图像数据。
这里,返回图29A和图29B的说明。在步骤S424后,控制部210将通过合成而得到的图像数据记录在记录部214中(步骤S425)。然后,控制部210使处理转移到步骤S407。
在步骤S423中判定为不需要或不能进行合成时,控制部210将通过拍摄而得到的图像数据直接记录在记录部214中(步骤S426)。然后,控制部210使处理转移到步骤S407。
如以上说明的那样,第3实施方式的摄像装置200首先判定是否利用左手把持摄像装置200。在判定为利用左手进行操作时,控制部210在触摸面板216中设置与左手的握持方式对应的触摸部。通过对与握持方式对应的触摸部进行操作,用户能够容易地利用左手进行操作。
本发明的一个实施方式只要是能够使用触摸面板进行操作的操作装置即可,不限于摄像装置。例如,能够应用于遥控器这样的、希望以由用户把持而不分开的方式进行操作的各种操作装置。或者,能够应用于产业用设备或医疗用设备的领域中使用的控制箱和具有固定设备的操作部件的握持部分的操作装置。或者,还能够应用于车载设备这样的要求盲操作的操作装置。进而,在本发明的一个实施方式中,叙述了操作装置的姿势和基于摄像的面部检测结果。作为该操作装置的姿势,可以在该范畴内包含杆的倾斜和遥控器所朝向的方向等。进而,进行摄像而检测到的部分不限于面部,也可以是在朝向遥控器或控制箱的方向的监视器画面中映出的对象物或设备本身。在这种以进行显示部确认和显示部上触摸的操作为前提的设备中,本发明能够发挥效力。因此,本发明属于操作装置。
并且,第3实施方式的摄像装置200针对所拍摄的非水平图像数据进行使其成为水平图像数据的图像处理。即,摄像装置200使图像倾斜以对非水平图像数据的水平方向进行校正。进而,摄像装置200对倾斜的图像数据和其他水平图像数据进行合成。由此,提供校正了倾斜、且补偿了由于校正而产生的不足的图像数据。
图像数据只要确定重力方向即可,也可以不是所拍摄的图像数据。因此,本发明属于图像处理装置。另外,对于水平显示图像很重要的设备来说,特别是在产业用设备和医疗用设备的领域中能够利用本发明。例如,在显示图像的手持型测定器等、即人手持进行使用的设备中,可能要求对图像的水平进行校正的图像处理。通过该图像处理,用户能够始终水平地观看手持型测定器中显示的图像。或者,在取得拍摄了车外的图像的车载设备中,认为该图像根据道路的倾斜而倾斜。因此,考虑进行图像处理,以使得将车载设备拍摄的道路的倾斜校正为水平。关于车载设备中进行图像处理后的图像的用途,例如,用于使驾驶员立即判断车外的状况。另一方面,设备本身为水平的固定设备能够进行如下应用:即使取得该设备的对象物不是水平的图像,也能够进行图像处理以使该对象物成为水平。
并且,第3实施方式的摄像装置200在判定为被摄体收于视场角内时,对不包含视场角内的被摄体的面部的位置照射引导光。用户通过视觉辨认引导光,即使在很难观看显示部212的状况下,也能够视觉辨认被摄体收于视场角内。该引导光不仅能够应用于摄像装置,还能够应用于设备的遥控器等特定设备的操作部件。例如,能够应用为投射作为表示遥控器未朝向主体设备的方向的警告的引导光的摄像装置。由于朝向主体设备投射该作为警告的引导光,所以,不会直接进入人眼。或者,与遥控器同样,引导光还能够应用于产业用、医疗用装置的操作部件等、一边观看显示部一边进行操作的控制箱或固定设备的操作部位。或者,如果应用为将设备操作的引导和警告作为文字投射到投射面上的摄像装置,则远视或老花眼的用户能够通过观看较大照射的文字的光来判别警告和引导。或者,如果将引导光应用于需要盲操作的车载设备,则用户能够通过观看引导光的显示而立即判断车载设备的操作。
叙述了设备的姿势和基于摄像的面部检测结果,但是,作为摄像装置的姿势,可以在该范畴内包含杆的倾斜和遥控器所朝向的方向等。进而,进行摄像而利用的部分不限于面部,也可以检测朝向遥控器或控制箱的方向的监视器画面中映出的对象物或设备本身。并且,还能够应用于以虚拟方式在操作设备上进行引导显示的用途。考虑将本发明应用于这种以基于显示部的确认的操作为前提的设备。

Claims (27)

1.一种摄像装置,其具有:
光学***,其使来自被摄体的光束成像;
摄像部,其得到与由所述光学***成像的光束对应的图像数据;
姿势检测部,其检测摄像装置的姿势;以及
控制部,其根据所述姿势判定是在所述光学***的光轴朝向天顶的状态下进行拍摄的模式还是在所述光学***的光轴朝向拍摄者侧的状态下进行拍摄的模式,根据该判定的结果对使用所述摄像部的拍摄动作时的控制进行变更。
2.根据权利要求1所述的摄像装置,其中,
所述控制部在判定为在所述光学***的光轴朝向天顶的状态下进行拍摄的模式的情况下,进行控制,使得在记录部中记录由所述摄像部得到的圆环状的图像数据或圆状的图像数据,在判定为在所述光学***的光轴朝向拍摄者侧的状态下进行拍摄的模式的情况下,进行控制,使得在所述记录部中记录由所述摄像部得到的矩形的图像数据。
3.根据权利要求2所述的摄像装置,其中,
所述摄像装置还具有将所述圆环状的图像数据或所述圆状的图像数据转换为带状的图像数据的图像转换处理部。
4.根据权利要求1所述的摄像装置,其中,
所述摄像装置具有:
第1闪光灯,其具有与所述光学***的光轴平行的方向的发光方向;以及
第2闪光灯,其具有与所述光学***的光轴垂直的方向的发光方向,
所述控制部在判定为在所述光学***的光轴朝向天顶的状态下进行拍摄的模式且需要闪光灯的发光的情况下,进行控制以使所述第2闪光灯发光,在判定为在所述光学***的光轴朝向拍摄者侧的状态下进行拍摄的模式且需要闪光灯的发光的情况下,进行控制以使所述第1闪光灯发光。
5.根据权利要求1所述的摄像装置,其中,
所述摄像装置还具有触摸面板,
在成为在所述光学***的光轴朝向拍摄者侧的状态下进行拍摄的模式、且由所述触摸面板检测到的触摸位置是规定的位置的情况下,所述控制部变更所述触摸面板的设定,使得根据所述触摸面板的操作来执行所述拍摄。
6.根据权利要求5所述的摄像装置,其中,
所述摄像装置还具有电源控制部,该电源控制部根据由所述姿势检测部检测到的所述摄像装置的姿势的变化,接通或断开所述摄像装置的电源。
7.根据权利要求1所述的摄像装置,其中,
所述光学***具有第1光学***和视野比所述第1光学***宽的第2光学***,
所述摄像部具有与所述第1光学***对应的第1摄像部和与所述第2光学***对应的第2摄像部。
8.根据权利要求7所述的摄像装置,其中,
所述摄像装置还具有图像合成处理部,该图像合成处理部对由所述第1摄像部得到的第1图像数据和由所述第2摄像部得到的第2图像数据进行合成。
9.根据权利要求8所述的摄像装置,其中,
在人物的组成部分被分割而存在于所述第1图像数据和所述第2图像数据中的情况下,所述控制部执行所述图像合成处理部的合成。
10.一种摄像方法,其具有以下步骤:
得到与由光学***成像的光束对应的图像数据;
检测摄像装置的姿势;
根据所述姿势判定是在所述光学***的光轴朝向天顶的状态下进行拍摄的模式还是在所述光学***的光轴朝向拍摄者侧的状态下进行拍摄的模式;以及
根据所述判定的结果对拍摄动作时的控制进行变更。
11.一种操作装置,其具有:
触摸面板;以及
控制部,其进行控制,使得在利用手把持所述触摸面板时,在除了感知到所述手的把持的所述触摸面板的区域即把持区域以外的所述触摸面板的区域中的与所述把持对应的特定区域中,设置用于进行与所述把持对应的规定操作的操作用触摸部的区域。
12.根据权利要求11所述的操作装置,其中,
所述控制部进行控制,使得在作为所述特定区域的根据手掌接触的位置而决定的位置处设置所述操作用触摸部的区域。
13.根据权利要求11所述的操作装置,其中,
所述控制部与根据所述把持区域确定的可动的手指对应地决定所述操作用触摸部的区域的位置。
14.根据权利要求11所述的操作装置,其中,
所述操作装置还具有:
显示图像的显示部;以及
对所述显示部进行控制的显示控制部,
所述显示控制部进行控制,使得使所述显示部显示表示所述操作用触摸部的图像。
15.根据权利要求11所述的操作装置,其中,
所述控制部在手指同时接近或接触所述触摸面板的至少两个部位时,判定为所述触摸面板被所述手把持。
16.根据权利要求11所述的操作装置,其中,
所述操作装置还具有显示图像的显示部,
所述控制部进行控制,使得在所述操作用触摸部感知到滑动操作时,根据所述滑动操作来改变所述显示部中显示的所述图像的放大率,使所述显示部显示改变了所述放大率的所述图像。
17.根据权利要求11所述的操作装置,其中,
所述操作装置还具有:
显示图像的显示部;以及
进行所述图像的曝光校正的图像处理部,
所述控制部进行控制,使得在检测到所述操作用触摸部中的滑动操作时,根据所述滑动操作,通过所述图像处理部改变所述图像的曝光度,使所述显示部显示改变了所述曝光度的所述图像。
18.根据权利要求11所述的操作装置,其中,
所述操作装置还具有对被摄体进行摄像而取得图像的摄像部,
所述控制部进行控制,使得在通过所述操作用触摸部感知到所述手的把持时,使所述摄像部进行摄像。
19.一种操作装置的控制方法,所述操作装置具有利用手进行把持并感知手的把持的触摸面板,其中,所述控制方法具有以下步骤:
检测利用所述手把持所述触摸面板的情况;以及
在被触摸的所述触摸面板的区域即把持区域中,根据触摸部触摸位置的信息,将用于进行与所述把持对应的规定操作的操作用触摸部的区域设置在所述触摸面板的除了感知到所述手的把持的位置以外的位置处。
20.一种图像处理装置,其具有:
姿势判定部,其在图像数据的重力方向和所述图像数据的拍摄时的重力方向一致时,判定为所述图像数据是水平的水平图像数据,在图像数据的重力方向和所述图像数据的拍摄时的重力方向不一致时,判定为所述图像数据是非水平的非水平图像数据;
控制部,其判定非水平图像数据的被摄体和水平图像数据的被摄体是否相似;以及
图像合成部,其在判定为所述非水平图像数据的被摄体和所述水平图像数据的被摄体相似时,使所述非水平图像数据的重力方向和至少一个所述水平图像数据的重力方向一致,进而,以将所述非水平图像数据的所述被摄体和至少一个所述水平图像数据的所述被摄体对齐的方式进行合成,生成合成图像数据,在所述合成图像数据中删除所述水平图像数据的与所述非水平图像数据重合的部分。
21.根据权利要求20所述的图像处理装置,其中,
所述水平图像数据是取得所述非水平图像数据紧前或刚刚取得所述非水平图像数据之后的图像数据。
22.根据权利要求20所述的图像处理装置,其中,
所述图像合成部在所述合成图像数据中删除非水平图像数据的不与所述水平图像数据重合的部分。
23.一种摄像装置,其具有:
摄像部,其拍摄对象物并取得包含所述对象物的图像数据;
面部检测部,其根据所述图像数据检测面部;
辅助光发光部,其照射引导光;以及
辅助光控制部,其对所述辅助光发光部进行控制,使得向所述摄像部的拍摄区域内的不包含所述面部的位置照射所述引导光。
24.根据权利要求23所述的摄像装置,其中,
所述辅助光控制部进行控制,使得从所述辅助光发光部向所述拍摄区域的端部的对象物照射引导光。
25.根据权利要求23所述的摄像装置,其中,
所述辅助光控制部对所述辅助光发光部进行控制,使得在所述对象物与所述摄像装置之间的距离为近距离、且所述面部检测部未检测到所述面部时,使所述引导光闪烁。
26.根据权利要求23所述的摄像装置,其中,
所述辅助光发光部照射具有指向性的所述引导光。
27.根据权利要求23所述的摄像装置,其中,
所述辅助光发光部通过照射所述引导光而形成图像。
CN201480030310.6A 2013-05-28 2014-05-22 摄像装置和摄像方法 Expired - Fee Related CN105379244B (zh)

Applications Claiming Priority (9)

Application Number Priority Date Filing Date Title
JP2013-111775 2013-05-28
JP2013111775A JP6139984B2 (ja) 2013-05-28 2013-05-28 撮像装置及び撮像方法
JP2013160584A JP6157263B2 (ja) 2013-08-01 2013-08-01 操作装置及びその制御方法
JP2013-160584 2013-08-01
JP2013161533A JP2015033007A (ja) 2013-08-02 2013-08-02 画像処理装置
JP2013-161533 2013-08-02
JP2013-161534 2013-08-02
JP2013161534A JP2015031832A (ja) 2013-08-02 2013-08-02 撮像装置
PCT/JP2014/063624 WO2014192640A1 (ja) 2013-05-28 2014-05-22 撮像装置及び撮像方法

Publications (2)

Publication Number Publication Date
CN105379244A true CN105379244A (zh) 2016-03-02
CN105379244B CN105379244B (zh) 2019-04-12

Family

ID=51988673

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480030310.6A Expired - Fee Related CN105379244B (zh) 2013-05-28 2014-05-22 摄像装置和摄像方法

Country Status (3)

Country Link
US (1) US9843727B2 (zh)
CN (1) CN105379244B (zh)
WO (1) WO2014192640A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109981977A (zh) * 2017-12-28 2019-07-05 佳能株式会社 电子装置及其控制方法和计算机可读存储介质
CN110881097A (zh) * 2018-09-06 2020-03-13 佳能株式会社 显示控制设备、摄像设备、控制方法和计算机可读介质
US10893217B2 (en) 2017-12-28 2021-01-12 Canon Kabushiki Kaisha Electronic apparatus and method for clipping a range out of a wide field view image
CN112698661A (zh) * 2021-03-22 2021-04-23 成都睿铂科技有限责任公司 一种飞行器的航测数据采集方法、装置、***及存储介质

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016025639A (ja) * 2014-07-24 2016-02-08 エイオーエフ イメージング テクノロジー リミテッド 撮像装置、画像信号転送制御方法およびプログラム
KR20160020896A (ko) * 2014-08-14 2016-02-24 삼성전자주식회사 디지털 영상 처리 방법, 상기 방법을 기록한 컴퓨터 판독 가능 저장매체 및 디지털 영상 처리 장치.
US20170048455A1 (en) * 2015-08-11 2017-02-16 Douglas Arnold Brand Optic for enabling instantaneously 360° Degree Panoramic Video of the Surroundings
US10412299B2 (en) * 2017-09-22 2019-09-10 International Business Machines Corporation Taking personalized photos

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006279739A (ja) * 2005-03-30 2006-10-12 Casio Comput Co Ltd 魚眼レンズを備えた撮像装置及びそのプログラム
US20070223914A1 (en) * 2006-03-24 2007-09-27 Fujifilm Corporation Camera system
JP2007300353A (ja) * 2006-04-28 2007-11-15 Fujifilm Corp 撮像装置
WO2008149901A1 (ja) * 2007-06-05 2008-12-11 Yamaha Corporation 撮像システム

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0764158A (ja) 1993-08-23 1995-03-10 Canon Inc カメラ
JP2004340991A (ja) 2003-05-13 2004-12-02 Fuji Photo Film Co Ltd カメラ
JP4227844B2 (ja) * 2003-06-06 2009-02-18 日本電信電話株式会社 指示器付きカメラ
JP2006222837A (ja) 2005-02-14 2006-08-24 Matsushita Electric Ind Co Ltd 撮影装置
JP2007187970A (ja) * 2006-01-16 2007-07-26 Sumitomo Mitsui Construction Co Ltd 広角撮影装置、及び画像処理方法
JP2009015313A (ja) * 2007-06-05 2009-01-22 Yamaha Corp カメラシステム
US20090174679A1 (en) 2008-01-04 2009-07-09 Wayne Carl Westerman Selective Rejection of Touch Contacts in an Edge Region of a Touch Surface
JP2011055246A (ja) * 2009-09-02 2011-03-17 Panasonic Corp 望遠撮像装置
JP2012022108A (ja) 2010-07-14 2012-02-02 Canon Inc レンズ鏡筒
JP2012133745A (ja) 2010-11-29 2012-07-12 Nec Corp 情報処理装置およびその表示サイズ制御方法
JP5599741B2 (ja) 2011-02-21 2014-10-01 シャープ株式会社 電子機器、コンテンツ表示方法、およびコンテンツ表示プログラム
JP5222967B2 (ja) 2011-03-23 2013-06-26 株式会社エヌ・ティ・ティ・ドコモ 携帯端末
JP2012209626A (ja) * 2011-03-29 2012-10-25 Brother Ind Ltd 会議装置、会議装置のプログラム、及び、制御方法
WO2012176384A1 (ja) 2011-06-21 2012-12-27 株式会社ニコン 表示プログラムおよび表示装置
JP5453351B2 (ja) * 2011-06-24 2014-03-26 株式会社Nttドコモ 移動情報端末、操作状態判定方法、プログラム
JP5695536B2 (ja) 2011-09-30 2015-04-08 オリンパスイメージング株式会社 撮像装置、撮像方法およびプログラム
JP5189197B1 (ja) 2011-10-27 2013-04-24 シャープ株式会社 携帯情報端末
JP5846921B2 (ja) 2012-01-13 2016-01-20 オリンパス株式会社 撮影システム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006279739A (ja) * 2005-03-30 2006-10-12 Casio Comput Co Ltd 魚眼レンズを備えた撮像装置及びそのプログラム
US20070223914A1 (en) * 2006-03-24 2007-09-27 Fujifilm Corporation Camera system
JP2007300353A (ja) * 2006-04-28 2007-11-15 Fujifilm Corp 撮像装置
WO2008149901A1 (ja) * 2007-06-05 2008-12-11 Yamaha Corporation 撮像システム

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109981977A (zh) * 2017-12-28 2019-07-05 佳能株式会社 电子装置及其控制方法和计算机可读存储介质
US10893216B2 (en) 2017-12-28 2021-01-12 Canon Kabushiki Kaisha Electronic apparatus and method for controlling same
US10893217B2 (en) 2017-12-28 2021-01-12 Canon Kabushiki Kaisha Electronic apparatus and method for clipping a range out of a wide field view image
CN109981977B (zh) * 2017-12-28 2021-12-07 佳能株式会社 电子装置及其控制方法和计算机可读存储介质
CN110881097A (zh) * 2018-09-06 2020-03-13 佳能株式会社 显示控制设备、摄像设备、控制方法和计算机可读介质
CN110881097B (zh) * 2018-09-06 2022-01-04 佳能株式会社 显示控制设备、控制方法和计算机可读介质
CN112698661A (zh) * 2021-03-22 2021-04-23 成都睿铂科技有限责任公司 一种飞行器的航测数据采集方法、装置、***及存储介质

Also Published As

Publication number Publication date
US9843727B2 (en) 2017-12-12
WO2014192640A1 (ja) 2014-12-04
CN105379244B (zh) 2019-04-12
US20160065863A1 (en) 2016-03-03

Similar Documents

Publication Publication Date Title
CN105379244A (zh) 摄像装置和摄像方法
CN104253935B (zh) 摄像装置
WO2016016984A1 (ja) 撮像装置およびその被写体追尾方法
US9491352B2 (en) Imaging device, signal processing method, and signal processing program
US20140204234A1 (en) Photographing unit, cooperative photographing method, and recording medium having recorded program
CN104125379A (zh) 摄像装置
CN101840135B (zh) 投影型影像显示装置和记载板以及影像投影***
WO2005077002A3 (en) Pocket-pen ultra-high resolution mems projection display in combination with on-axis ccd image capture system including means for permitting 3-d imaging
CN103533217B (zh) 摄像装置、摄像方法
JP2009267792A (ja) 撮像装置
CN102209189A (zh) 摄像设备及其控制方法
US20060140448A1 (en) Image capturing apparatus and navigation system
JP2011166756A (ja) 撮影装置及び撮影システム
JP2014011624A (ja) 情報入出力装置、及び頭部装着表示装置
CN109409147A (zh) 一种条码识别方法和装置
CN101841658B (zh) 摄像装置及摄像装置的控制方法
JP2015023512A (ja) 撮影装置、撮影方法及び撮影装置の撮影プログラム
KR102512839B1 (ko) 외부 장치의 자세 조정을 통해 복수의 카메라들을 이용하여 이미지를 획득하는 전자 장치 및 방법
KR20210080875A (ko) 이미지 센서를 포함하는 전자 장치 및 그의 동작 방법
JP2018163299A (ja) 電子機器、撮像装置、及び制御方法、並びにプログラム
KR20160017463A (ko) 이동 단말기 및 그 제어 방법
CN106210464A (zh) 摄像装置和摄像装置的控制方法
CN103813073A (zh) 近距拍摄方法和支持所述方法的终端
KR20160038409A (ko) 이동 단말기 및 그 제어 방법
US20050030392A1 (en) Method for eliminating blooming streak of acquired image

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20211208

Address after: Tokyo, Japan

Patentee after: Aozhixin Digital Technology Co.,Ltd.

Address before: Tokyo, Japan

Patentee before: OLYMPUS Corp.

CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20190412