CN102572481A - 图像处理设备、其控制方法和程序 - Google Patents

图像处理设备、其控制方法和程序 Download PDF

Info

Publication number
CN102572481A
CN102572481A CN2011104467419A CN201110446741A CN102572481A CN 102572481 A CN102572481 A CN 102572481A CN 2011104467419 A CN2011104467419 A CN 2011104467419A CN 201110446741 A CN201110446741 A CN 201110446741A CN 102572481 A CN102572481 A CN 102572481A
Authority
CN
China
Prior art keywords
image
picture
stereo
unit
posture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011104467419A
Other languages
English (en)
Other versions
CN102572481B (zh
Inventor
桶川秀治
德田贵宏
中弥浩和
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN102572481A publication Critical patent/CN102572481A/zh
Application granted granted Critical
Publication of CN102572481B publication Critical patent/CN102572481B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00281Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal
    • H04N1/00307Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal with a mobile telephone apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00405Output means
    • H04N1/00408Display of information to the user, e.g. menus
    • H04N1/0044Display of information to the user, e.g. menus for image preview or review, e.g. to help the user position a sheet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/133Equalising the characteristics of different image components, e.g. their average brightness or colour balance
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189Recording image signals; Reproducing recorded image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/239Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2101/00Still video cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/3254Orientation, e.g. landscape or portrait; Location or order of the image data, e.g. in memory

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Processing Or Creating Images (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

提供了图像处理设备、其控制方法和程序。图像处理设备包括:姿势检测单元,检测图像处理设备的姿势;图像捕捉单元,产生包括被摄体的平面图像或者用于被摄体的立体观测的立体图像;模式设置单元,设置平面图像捕捉模式和立体图像捕捉模式中的任意一个;图像转换单元,通过执行纵横转换和缩小处理来转换图像;和控制单元,进行操作以便如果设置立体图像捕捉模式,则在记录介质上记录立体图像而无论图像处理设备的检测到的姿势如何,而如果设置平面图像捕捉模式,则基于图像处理设备的检测到的姿势在记录介质上记录平面图像和通过转换平面图像而获得的已转换图像中的任意一个。

Description

图像处理设备、其控制方法和程序
技术领域
本公开涉及图像处理设备,且更具体地涉及处置立体图像的图像处理设备、其控制方法和使得计算机执行相应的方法的程序。
背景技术
近年来,比如数码相机或者数码摄像机(例如,集成的相机记录器)之类的图像捕捉装置已经普及,其捕捉比如人之类的被摄体,产生捕捉的图像(图像数据),并将所产生的捕捉图像记录为图像内容(图像文件)。例如,在这种图像捕捉装置中,使用预定记录格式将产生的捕捉图像记录在记录介质中。
这里,在用于记录捕捉图像的记录格式中,可以确定纵横比。例如,在运动图像记录格式的情况下,16∶9(=宽度∶长度)或者4∶3(=宽度∶长度)可以确定为纵横比。近年来,已经开发了处置这种纵横比的技术。
例如,已经提出了相互比较多种纵横比并输出具有最优纵横比的图像的图像信号处理设备(例如,参见日本未审查专利申请公开No.2009-3240)。
发明内容
根据上述现有技术,可以在具有水平上长的纵横比的图像之间优化纵横比。
这里,在图像捕捉操作期间,图像捕捉装置可以不置于特定姿势。由于此,假定根据图像捕捉装置的姿势,被摄体的上侧和下侧可以不同于用户(观看者)的上侧和下侧(例如,被摄体的姿势可以反向或者被摄体可以在其一侧躺下)。因此,通过在图像捕捉期间考虑图像捕捉装置的姿势来执行图像转换处理,可以显示图像以使得在图像再现期间被摄体的上侧和下侧以及用户(观看者)的上侧和下侧具有适当的关系。
这里,假定关于立体图像执行记录处理或者显示处理。由于立体图像通过使用左眼和右眼的视差来获得立体视觉,因此,例如,左眼图像和右眼图像中包括的被摄体在水平方向上彼此移位。由于此,在观看立体图像(左眼图像和右眼图像)的情况下,用户(观看者)需要以预定位置和姿势看所显示的立体图像。由于此,在图像捕捉期间考虑图像捕捉装置的姿势执行图像转换处理的情况下,可以精确地显示立体图像的上下方向,但是可能不能从立体图像获得立体视觉。
期望根据图像捕捉模式执行适当的图像处理。
根据本公开的实施例,提供了图像处理设备、其控制方法和使得计算机执行相应的方法的程序。图像处理设备包括:姿势检测单元,检测图像处理设备的姿势;图像捕捉单元,捕捉被摄体并产生包括被摄体的平面图像或用于被摄体的立体观测的立体图像;模式设置单元,基于用户操作设置用于记录平面图像的平面图像捕捉模式和用于记录立体图像的立体图像捕捉模式中的任意一个;图像转换单元,通过关于图像执行纵横转换处理和缩小处理来转换由图像捕捉单元产生的图像;和控制单元,进行操作以便如果设置立体图像捕捉模式则在记录介质上记录立体图像而无论图像处理设备的检测到的姿势如何,而如果设置平面图像捕捉模式,则基于图像处理设备的检测到的姿势在记录介质上记录平面图像和已转换图像中的任意一个,该已转换图像是通过经由图像转换单元转换平面图像而获得的图像。因此,如果设置立体图像捕捉模式,则记录立体图像而无论图像处理设备的检测到的姿势如何,而如果设置平面图像捕捉模式,则基于图像处理设备的检测到的姿势记录平面图像和已转换图像中的任意一个。
另外,根据本公开的实施例,控制单元可以进行操作以在设置平面图像捕捉模式的情况下,如果检测到第一姿势,则在记录介质上记录平面图像,而如果检测到第二姿势,则在记录介质上记录已转换图像,该第一姿势是其中图像处理设备的外壳的长度方向和水平方向彼此一致的姿势,而第二姿势是其中外壳的长度方向和垂直方向彼此一致的姿势。因此,如果在设置平面图像捕捉模式的情况下检测到第一姿势,则记录平面图像,而如果检测到第二姿势,则记录已转换图像。
另外,根据本公开的实施例,图像转换单元可以通过平面图像或者转换图像旋转180°来转换图像;且控制单元可以进行操作以便如果在设置平面图像捕捉模式的情况下检测到反向姿势,则在记录介质上记录通过经由图像转换单元的平面图像的旋转而获得的图像,该反向姿势是其中图像处理设备的外壳的上下方向基于第一姿势反向的姿势;而如果在设置平面图像捕捉模式的情况下检测到反向姿势,则在记录介质上记录通过经由图像转换单元的已转换图像的旋转而获得的图像,该反向姿势是其中图像处理设备的外壳的上下方向基于第二姿势反向的姿势。因此,如果在设置平面图像捕捉模式的情况下检测到反向姿势,则记录通过平面图像的旋转而获得的图像,而如果检测到垂直姿势或者反向姿势,则记录通过已转换图像的进一步旋转而获得的图像。
另外,根据本公开的实施例,图像捕捉单元可以包括产生用于显示立体图像的第一图像的第一图像捕捉单元和产生用于显示立体图像的第二图像的第二图像捕捉单元,且控制单元可以进行操作以便如果设置立体图像捕捉模式,则在记录介质上记录第一图像和第二图像作为立体图像,而如果设置平面图像捕捉模式,则在记录介质上记录第一图像和已转换图像中的任意一个,该已转换图像是通过经由图像转换单元转换第一图像而获得的图像。因此,如果设置立体图像捕捉模式,则记录第一图像和第二图像作为立体图像,而如果设置平面图像捕捉模式,则记录第一图像和已转换图像中的任意一个。
另外,根据本公开的实施例,图像捕捉单元可以产生由平面图像形成的运动图像或者由立体图像形成的运动图像,且另外包括操作接收单元,接收运动图像的记录操作开始的指令操作,且控制单元可以在设置平面图像捕捉模式的情况下,基于当接收到指令操作时检测到的图像处理设备的姿势,来确定是否在记录介质上记录平面图像和已转换图像中的任意一个作为关于指令操作的运动图像。因此,在设置平面图像捕捉模式的情况下,基于当接收到运动图像的记录操作开始的指令操作时检测到的图像处理设备的姿势,来确定是否记录平面图像和已转换图像中的任意一个作为关于指令操作的运动图像。
另外,根据本公开的实施例,模式设置单元可以设置用于基于用户操作在显示单元上显示记录在记录介质上的平面图像、已转换图像和立体图像中的任意一个的再现模式,图像转换单元可以通过关于相应的图像执行纵横转换处理和放大处理来转换记录在记录介质上的图像,且控制单元可以控制显示单元以便在设置再现模式的情况下如果要显示的图像是立体图像,则显示立体图像而无论图像处理设备的检测到的姿势如何,并控制显示单元以便如果要显示的图像不是立体图像,则基于图像处理设备的检测到的姿势和要显示图像是否是已转换图像,来显示平面图像、已转换图像和由图像转换单元新转换的图像中的任意一个。因此,如果在设置再现模式的情况下要显示的图像是立体图像,则显示立体图像而无论图像处理设备的检测到的姿势如何,而如果要显示的图像不是立体图像,则基于图像处理设备的检测到的姿势和要显示的图像是否是已转换图像来显示平面图像、已转换图像和新转换的图像中的任意一个。
根据本公开的另一实施例,提供了图像处理设备、其控制方法和使得计算机执行相应的方法的程序。图像处理设备包括:姿势检测单元,检测图像处理设备的姿势;图像捕捉单元,捕捉被摄体并产生包括被摄体的平面图像或用于被摄体的立体观测的立体图像;模式设置单元,基于用户操作设置用于记录平面图像的平面图像捕捉模式和用于记录立体图像的立体图像捕捉模式中的任意一个;图像转换单元,通过关于图像执行纵横转换处理和缩小处理来转换由图像捕捉单元产生的图像;和控制单元,进行操作以便如果设置立体图像捕捉模式,则将用于显示立体图像的立体图像信息发送到显示装置,而无论图像处理设备的检测到的姿势如何,而如果设置平面图像捕捉模式,则基于图像处理设备的检测到的姿势,将用于显示平面图像和已转换图像中的任意一个图像的图像信息发送到显示装置,该已转换图像是通过经由图像变换单元转换平面图像而获得的图像。因此,如果设置立体图像捕捉模式,则发送立体图像而无论图像处理设备的检测到的姿势如何,而如果设置平面图像捕捉模式,则基于图像处理设备的检测到的姿势发送用于显示平面图像和已转换图像中的任意一个图像的图像信息。
根据本公开的又一实施例,提供了图像处理设备、其控制方法和使得计算机执行相应的方法的程序。图像处理设备包括:姿势检测单元,检测图像处理设备的姿势;图像转换单元,在设置再现模式的情况下,通过关于要显示的图像执行纵横转换处理和放大处理来转换要显示的图像,该再现模式用于使得显示单元显示包括要捕捉的被摄体的平面图像、通过关于平面图像执行纵横转换处理和缩小处理而获得的已转换图像和从记录用于被摄体的立体观测的立体图像的记录介质获取的要显示的图像;和控制单元,如果在设置再现模式的情况下要显示的图像是立体图像,则控制显示单元显示立体图像而无论图像处理设备的检测到的姿势如何,和如果要显示的图像不是立体图像,则控制显示单元以基于图像处理设备的检测到的姿势和要显示的图像是否是已转换图像,来显示平面图像、已转换图像和由图像转换单元新转换的图像中的任意一个。因此,如果在设置再现模式的情况下要显示的图像是立体图像,则显示立体图像而无论图像处理设备的检测到的姿势如何,而如果要显示的图像不是立体图像,则基于图像处理设备的检测到的姿势和要显示的图像是否是已转换图像来显示平面图像、已转换图像和新转换的图像中的任意一个。
根据本公开的实施例,可以获得良好的效果,其中可以根据图像捕捉模式恰当地执行图像处理。
附图说明
图1A和图1B是图示根据本公开第一实施例的图像捕捉装置的外部配置的示例的图;
图2A和图2B是图示根据本公开第一实施例的图像捕捉装置的外部配置的示例的图;
图3是图示根据本公开第一实施例的图像捕捉装置的内部配置的示例的框图;
图4是图示根据本公开第一实施例的图像捕捉装置的功能配置的示例的框图;
图5A和图5B是图示根据本公开第一实施例的、使用图像捕捉装置执行的图像捕捉操作和由图像捕捉操作产生的捕捉图像之间的关系的图;
图6A到图6C是图示根据本公开第一实施例的、使用图像捕捉装置执行的图像捕捉操作和由图像捕捉操作产生的捕捉图像之间的关系的图;
图7A到图7D是图示根据本公开第一实施例的、在图像捕捉操作期间图像捕捉装置的姿势和通过姿势产生的捕捉图像之间的关系的示例的图;
图8A和图8B是图示根据本公开第一实施例的、在图像捕捉操作期间图像捕捉装置的姿势和通过姿势产生的捕捉图像之间的关系的示例的图;
图9A到图9C是图示根据本公开第一实施例的、在图像捕捉操作期间图像捕捉装置的姿势和由图像转换单元转换的图像之间的关系的示例的图;
图10A到图10C是图示根据本公开第一实施例的、在图像捕捉操作期间图像捕捉装置的姿势和由图像转换单元转换的图像之间的关系的示例的图;
图11A和图11B是图示根据本公开第一实施例的、在图像捕捉操作期间图像捕捉装置的姿势和由图像捕捉单元产生的立体图像之间的关系的示例的图;
图12A和图12B是图示根据本公开第一实施例的、在图像捕捉操作期间图像捕捉装置的姿势和由图像捕捉单元产生的立体图像之间的关系的示例的图;
图13是图示根据本公开第一实施例的、由图像捕捉装置执行的图像转换控制处理的示例的流程图;
图14A到图14C是图示根据本公开第一实施例的、在再现由图像捕捉装置记录的图像的情况下的图像再现的示例的图;
图15A到图15C是图示根据本公开第一实施例的、在再现由图像捕捉装置记录的图像的情况下的图像再现的示例的图;以及
图16是图示根据本公开第一实施例的、由图像捕捉装置执行的图像转换控制处理的示例的流程图。
具体实施方式
在下文中,将参考附图描述执行本公开的具体方式(以下称为实施例)。将以以下次序进行其说明。
1.第一实施例(图像转换控制:在关于由图像捕捉单元产生的图像执行图像转换处理的情况下根据图像捕捉模式改变图像转换处理的示例)
2.修改
<1.第一实施例>
[图像捕捉装置的外部配置的示例]
图1A到图2B是图示根据本公开实施例的图像捕捉装置100的外部配置的示例的图。
图1A是图示图像捕捉装置100的前表面(也就是,在其上安装朝向被摄体的镜头的表面)的外观的前视图。另外,图1B是图示图像捕捉装置100的后表面(也就是,朝向拍摄者的输入/输出面板151的表面)的外观的后视图。图2A是图示图像捕捉装置100的前表面(从如图1A所示的状态以由箭头102指示的方向旋转90°)的外观的前视图。另外,图2B是图示图像捕捉装置100的后表面(从如图1B所示的状态以由箭头103指示的方向旋转90°)的外观的后视图。例如,图像捕捉装置100由包括与立体摄影对应的两个图像捕捉单元、通过捕捉被摄体产生两个图像(图像数据)并彼此相关联地记录各个图像(左眼图像和右眼图像)的图像捕捉装置实现。例如,该图像捕捉装置是数码相机、数码摄像机(例如,集成相机记录器)等,其可以在记录介质上记录产生的图像作为静止图像内容或者运动图像内容。在这种情况下,图像捕捉装置100是根据本公开实施例的图像处理设备的示例。
图像捕捉装置100包括第一图像捕捉单元110、第二图像捕捉单元120、电源开关141、快门按钮142、操作按钮组143、上下左右按钮144、记录按钮145和输入/输出面板151。
第一图像捕捉单元110和第二图像捕捉单元120捕捉被摄体并产生包括被摄体的图像。例如,如果设置用于记录平面图像(2D图像)的平面图像捕捉模式(2D图像捕捉模式),则第一图像捕捉单元110捕捉被摄体并产生包括被摄体的图像(平面图像)。另外,如果设置用于记录立体图像(3D图像)的立体图像捕捉模式(3D图像捕捉模式),则第一图像捕捉单元110和第二图像捕捉单元120产生立体图像。也就是说,第一图像捕捉单元110产生用于产生立体图像的左眼图像,且第二图像捕捉单元120产生用于产生立体图像的右眼图像。另外,例如,在执行立体图像的捕捉操作的情况下,在图2A和图2B图示的状态下执行捕捉操作。在这种情况下,在本公开的第一实施例中,图2A和图2B图示的状态被称为图像捕捉装置100的水平状态(或者水平姿势)。也就是说,图像捕捉装置100的水平状态是其中在其上安装第一图像捕捉单元110和第二图像捕捉单元120的表面(前表面)朝向被摄体的情况下,图像捕捉装置100的水平方向和长度方向处于相同方向的状态。另外,在本公开的第一实施例中,图1A和图1B图示的状态被称为图像捕捉装置100的垂直状态(或者垂直姿势)。也就是说,图像捕捉装置100的垂直状态是其中在其上安装第一图像捕捉单元110和第二图像捕捉单元120的表面(前表面)朝向被摄体的情况下,图像捕捉装置100的垂直方向和长度方向处于相同方向的状态。将参考图3和图4具体描述第一图像捕捉单元110和第二图像捕捉单元120。
电源开关141是当打开/关闭图像捕捉装置100的电源时使用的操作部件。
快门按钮142是当记录由第一图像捕捉单元110和第二图像捕捉单元120中的至少一个产生的图像(图像数据)作为内容(静止图像内容)时由用户按压的操作部件。例如,如果在设置立体图像捕捉模式(3D图像捕捉模式)的情况下半按下快门按钮142,则执行用于执行自动对焦的对焦调整。另外,如果完全按下快门按钮142,则执行相应的对焦调整,且记录由第一图像捕捉单元110和第二图像捕捉单元120产生的图像(图像数据)作为内容(静止图像(立体图像)内容)。通过该记录处理,例如,内容(静止图像(立体图像)内容)记录在如图3所示的存储单元180中。
操作按钮组143包括当执行各种操作时使用的操作按钮。
上下左右按钮144是当执行关于上下左右方向的各种操作时使用的操作按钮。
记录按钮145是当记录由第一图像捕捉单元110和第二图像捕捉单元120中的至少一个产生的图像(图像数据)作为内容(运动图像内容)时由用户按压的操作部件。例如,如果在设置立体图像捕捉模式的情况下按压记录按钮145,则开始由第一图像捕捉单元110和第二图像捕捉单元120产生的图像(图像数据)的记录。另外,如果再次按压记录按钮145,则终止图像(图像数据)的记录。通过该记录处理,在图3中所示的存储单元180中的记录中,例如,记录内容(运动图像(立体图像)内容)。
输入/输出面板151显示各种图像,并基于接近或者接触显示表面的对象的检测状态从用户接收操作输入。在这种情况下,输入/输出面板151也被称为触摸屏或者触摸板。向输入/输出面板151提供操作接收单元和显示面板。例如,作为操作接收单元,可以使用基于电容的改变来检测具有导电性性的对象(例如,人的手指)的接触或者接近的静电(电容)型触摸板。另外,例如,作为显示面板,可以使用比如LCD(液晶显示器)、有机EL(电致发光)面板等的显示面板。另外,例如,通过使得透明触摸板与显示面板的显示表面重叠来配置输入/输出面板151。
[图像捕捉装置的内部配置的示例]
图3是图示根据本公开第一实施例的图像捕捉装置100的内部配置的示例的框图。
图像捕捉装置100包括第一图像捕捉单元110、第二图像捕捉单元120、姿势检测单元130、操作接收单元140、显示单元150、通信单元160、DSP(数字信号处理器)170和存储单元180。
配置第一图像捕捉单元110和第二图像捕捉单元120,以使得光学***和各个图像捕捉元件构成左右组以产生左眼图像和右眼图像。也就是说,第一图像捕捉单元110包括图像捕捉光学***111、图像捕捉元件112、TG(定时发生器)113和光学组件驱动单元114和115。另外,第二图像捕捉单元120包括图像捕捉光学***121、图像捕捉元件122、TG 123和光学组件驱动单元124和125。
在这种情况下,第一图像捕捉单元110和第二图像捕捉单元120的各个配置(各个光学***、各个图像捕捉元件等)除了它们的布置位置彼此不同这一点之外基本上相同。因此,在下文中,将描述左和右配置的任意一个同时将省略其一部分的描述。
图像捕捉光学***111是光学地设计从而以一个方向捕捉被摄体的光学***,且包括比如各种镜头(包括对焦镜头和变焦镜头)和除去不必要的波长的滤光器、光圈等的光学组件。从被摄体入射的光学图像(被摄体的图像)通过图像捕捉光学***111的各个光学组件形成在图像捕捉元件112的曝光表面上。另外,在图像捕捉光学***111中,光学组件驱动单元114和115机械地连接以驱动构成图像捕捉光学***111的光学组件。
图像捕捉元件112执行从图像捕捉光学***111提供的光学图像的光电转换,并产生和输出电信号(模拟图像信号)到DSP 170。作为图像捕捉元件112,例如,可以使用固态图像捕捉元件(图像传感器),比如CCD(电荷耦合器件)或者CMOS(互补金属氧化物半导体)。
TG 113是在DSP 170的控制下产生图像捕捉元件112所需的操作脉冲的定时发生器。例如,TG 113产生各种脉冲,比如用于垂直传输的四相脉冲、场移位脉冲、用于水平传输的二相脉冲和快门脉冲,并将产生的脉冲提供到图像捕捉元件112。另外,在TG 113驱动图像捕捉元件112时,捕捉被摄体的图像。另外,TG 113调整图像捕捉元件112的快门速度以控制捕捉图像的曝光量和曝光时段(电子快门功能)。
光学组件驱动单元114和115在DSP 170的控制下驱动构成图像捕捉光学***111的光学组件,且例如,包括变焦马达、对焦马达等。例如,光学组件驱动单元114和11 5通过移动构成图像捕捉光学***11 1的变焦镜头和对焦镜头来调整光圈。
姿势检测单元130通过检测图像捕捉装置100的加速度、移动、倾斜等来检测图像捕捉装置100的姿势,并输出关于检测到的姿势的信息(姿势信息)到DSP 170。例如,使用陀螺仪传感器实现姿势检测单元130。通过该陀螺仪传感器,检测图像捕捉装置100的角速度(在三个轴方向上的旋转角速度),且因此检测图像捕捉装置100的姿势。在这种情况下,可以使用除陀螺仪传感器之外的其它传感器(例如,加速度传感器、磁传感器等)来检测图像捕捉装置100的加速度、移动和倾斜,且基于检测的结果,可以检测图像捕捉装置100的姿势和其改变。
操作接收单元140是从用户接收操作输入的操作接收单元,并根据输入到DSP 170的接收的操作来输出操作信号。例如,操作接收单元140对应于图1A到图2B图示的电源开关141、快门按钮142、操作按钮组143、上下左右按钮144、记录按钮145和输入/输出面板151。
例如,显示单元1 50包括LCD(液晶显示器)、有机EL显示器等。显示单元150在DSP 170的控制下显示各种输入图像数据。例如,显示单元150显示在图像捕捉操作期间从DSP 170实时输入的正在拍摄的捕捉图像(通过图像)。在图像捕捉操作期间,显示捕捉图像(通过图像)而无论图像捕捉装置100的姿势如何。因此,用户在图像捕捉操作期间可以通过显示单元150在看图像的同时操作图像捕捉装置100。另外,在已经关于在存储单元180中存储的内容执行了再现指令操作的情况下,显示单元150显示从DSP 170输入的内容。因此,用户可以确认在存储单元180中存储的内容。例如,显示单元150对应于图1A到图2B中图示的输入/输出面板151。
通信单元160是用于将由第一图像捕捉单元110和第二图像捕捉单元120产生的捕捉图像和在存储单元180中存储的图像输出到外部设备(例如,显示装置)的通信单元。例如,通信单元160包括HDMI(高清多媒体接口)。
DSP 170是用于执行捕捉图像的图像处理和图像捕捉装置100的操作控制的操作处理装置。DSP 170包括如图4所示的信号处理单元171、图像转换单元172、模式设置单元173、控制单元174、记录控制单元175和显示控制单元176。例如,控制单元174包括操作处理装置,比如安装在DSP 170中的微控制器,并控制图像捕捉装置100的总体操作。例如,控制单元174基于存储在存储单元180中包括的闪速ROM(只读存储器)等中的程序而操作,并执行控制所需的各种操作处理。可以使用存储单元180中包括的DRAM(动态随机存取存储器)来执行操作处理。在这种情况下,可以使用存储在盘型记录介质或者比如存储卡等的可拆卸存储介质中并被提供到图像捕捉装置100的程序。另外,可以使用通过比如LAN(局域网)和因特网之类的网络下载到图像捕捉装置100的程序。
另外,例如,控制单元174通过TG 113和123或者光学组件驱动单元114、115、124和125的控制来控制第一图像捕捉单元110的图像捕捉操作。另外,控制单元174通过图像捕捉光学***111和121的光圈的调节、图像捕捉元件112和122的电子快门速度的设置和信号处理单元171的AGC的增益设置来执行自动曝光控制(AE功能)。另外,控制单元174通过移动图像捕捉光学***111和121的对焦镜头来关于指定被摄体执行用于自动地调整图像捕捉光学***111和121的焦点的自动对焦控制(AF功能)。另外,控制单元174通过移动图像捕捉光学***111和121的变焦镜头来调整捕捉图像的视角。另外,控制单元174通过记录控制单元175控制图像数据的记录处理并通过显示控制单元176控制图像数据的再现处理。另外,控制单元174执行用于在显示单元150上显示各种显示数据的显示控制。在这种情况下,将参考图4具体描述构成DSP 170的各个单元。
存储单元180是用于存储各种数据(例如,用于图像捕捉装置100中的各个处理的数据)的存储单元。作为存储单元180,例如,可以使用半导体存储器、光盘或者硬盘。在这种情况下,作为半导体存储器,可以使用闪速ROM(只读存储器)、DRAM(动态随机存取存储器)等。另外,作为光盘,可以使用BD(蓝光盘)、DVD(数字多用途盘)、CD(致密盘)等。作为存储单元180,可以使用内置于图像捕捉装置100的存储装置,或者比如存储卡之类的可拆卸地连接到图像捕捉装置100的可拆卸介质(记录介质)。另外,作为存储单元180可以使用多种存储装置或者可拆卸介质。
[图像捕捉装置的功能配置的示例]
图4是图示根据本公开第一实施例的图像捕捉装置100的功能配置的示例的框图。在这种情况下,将相同的附图标记给予与如图3所示的那些相同的功能配置,且将省略它们的部分描述。另外,将省略信号线部分的图示和描述。
图像捕捉装置100包括图像捕捉单元190、姿势检测单元130、操作接收单元140、显示单元150和通信单元160。另外,图像捕捉装置100包括信号处理单元171、图像转换单元172、模式设置单元173、控制单元174、记录控制单元175、显示控制单元176和存储单元180。在这种情况下,图像捕捉单元190包括第一图像捕捉单元110和第二图像捕捉单元120。
图像捕捉单元190是捕捉被摄体并产生包括被摄体的平面图像或者用于被摄体的立体观测的立体图像,并根据由模式设置单元173设置的图像捕捉模式来执行图像捕捉处理的图像捕捉单元。也就是说,由模式设置单元173设置平面图像捕捉模式、立体图像捕捉模式和再现模式中的任意一个模式。平面图像捕捉模式是用于记录平面图像的图像捕捉模式。另外,立体图像捕捉模式是用于记录立体图像的图像捕捉模式。在这种情况下,假定上述图像捕捉模式可以设置为用于记录静止图像的静止图像捕捉模式和用于记录运动图像的运动图像捕捉模式中的任意一个。也就是说,在设置平面图像捕捉模式和立体图像捕捉模式中的任意一个图像捕捉模式的情况下,可以基于用户操作执行静止图像记录操作和运动图像记录操作中的任意一个。另外,再现模式是用于执行在存储单元180中存储的图像内容的再现的模式。
具体地说,图像捕捉单元190包括第一图像捕捉单元110和第二图像捕捉单元120。例如,在设置平面图像捕捉模式的情况下,第一图像捕捉单元110通过以指定方向(例如,光轴方向)捕捉被摄体来产生平面图像。另外,在设置立体图像捕捉模式的情况下,第一图像捕捉单元110和第二图像捕捉单元120产生立体图像。也就是说,第一图像捕捉单元110通过以指定方向捕捉被摄体来产生用于显示立体图像的第一图像(左眼图像),且第二图像捕捉单元120产生用于显示立体图像的第二图像(右眼图像)。另外,图像捕捉单元190输出如上产生的图像(图像数据)到信号处理单元171。
姿势检测单元130检测图像捕捉装置100的姿势,并将关于检测到的姿势的姿势信息输出到控制单元174。
操作接收单元140是接收从用户输入的操作的操作接收单元,并根据输入到控制单元174的接收的操作来输出操作信号。例如,操作接收单元140接收静止图像的记录操作的指令操作和运动图像的记录操作开始(或者记录操作结束)的指令操作。另外,操作接收单元140接收用于设置模式的设置操作。
信号处理单元171在控制单元174的控制下,关于从图像捕捉单元190输出的图像(图像数据)执行预定信号处理,并将信号处理之后的图像(图像数据)提供到图像转换单元172。例如,信号处理单元171关于从如图3所示的图像捕捉元件112和122输出的图像信号(模拟图像信号)执行预定信号处理,并将信号处理之后的图像信号(数字图像信号)提供到各个单元。另外,例如,信号处理单元171包括模拟信号处理单元、A/D(模拟/数字)转换单元和数字信号处理单元。模拟信号处理单元是预处理图像信号的处理单元(所谓的模拟前端)。例如,该模拟信号处理单元通过可编程增益放大器(PGA)关于从图像捕捉元件112和122输出的图像信号执行CDS(相关双采样)。A/D转换单元将从模拟信号处理单元输出的图像信号(模拟图像信号)转换为数字图像信号并将数字图像信号输出到数字信号处理单元。例如,数字信号处理单元关于从A/D转换单元输出的数字图像信号执行数字信号处理,比如噪声去除、白平衡调节、彩色校正、边缘增强和伽马校正,并将已处理的数字图像信号输出到各个单元。在这种情况下,信号处理单元171可以不执行模拟和数字信号处理。例如,第一图像捕捉单元110和第二图像捕捉单元120可以输出数字图像信号,且信号处理单元171可以仅执行数字信号处理。
图像转换单元172在控制单元174的控制下,关于从信号处理单元171输出的图像(图像数据)执行各种图像转换处理,并将已经执行了图像转换处理的图像输出到通信单元160、记录控制单元175或者显示控制单元176。另外,在再现模式的设置期间,图像转换单元172在控制单元174的控制下关于从显示控制单元176输出的图像(图像数据)执行各种图像转换处理,并将已经执行了图像转换处理的图像输出到通信单元160或者显示控制单元176。另外,图像转换单元172根据由模式设置单元173设置的模式来执行图像处理。例如,图像转换单元172通过关于由图像捕捉单元190产生的图像(从信号处理单元171输出的图像)执行纵横转换处理、缩小处理和旋转处理(旋转180°)来转换图像。另外,图像转换单元172通过关于在存储单元180中记录的图像(由显示控制单元176获取的图像)执行纵横转换处理和放大处理来转换图像。在这种情况下,如果不需要图像转换,则图像转换单元172不关于从信号处理单元171输出的图像(图像数据)执行图像转换处理,并将图像输出到通信单元160、记录控制单元175或者显示控制单元176。另外,在图像捕捉模式的设置期间将通过图像显示到显示单元150的情况下,图像转换单元172将从信号处理单元171输出的图像(没有执行图像转换处理的图像)输出到显示控制单元176。
模式设置单元173在控制单元174的控制下设置图像捕捉模式或者再现模式。具体地说,模式设置单元173设置平面图像捕捉模式、立体图像捕捉模式和再现模式中的任意一个。例如,基于由操作接收单元140接收到的用户操作来设置各个模式。
控制单元174执行图像捕捉装置100的整体控制。例如,控制单元174根据由操作接收单元140接收到的用户的操作输入来执行控制。
另外,例如,在立体图像捕捉模式的设置期间,控制单元174执行控制以在存储单元1 80中记录立体图像而无论由姿势检测单元130检测到的图像捕捉装置100的姿势如何。另外,在平面图像捕捉模式的设置期间,控制单元174执行控制以基于由姿势检测单元130检测到的图像捕捉装置100的姿势,在存储单元180中记录平面图像和通过经由图像转换单元172转换平面图像而获得的图像(已转换图像)中的任意一个。在这种情况下,在设置平面图像捕捉模式的情况下,如果检测到其中图像捕捉装置100的外壳的长度方向和水平方向彼此一致的姿势(第一姿势(基本姿势)),则控制单元174执行控制以在存储单元180中记录平面图像,而如果检测到其中图像捕捉装置100的外壳的长度方向和垂直方向彼此一致的姿势(第二姿势(垂直姿势)),则控制单元174执行控制以在存储单元180中记录已转换图像。
但是,假定在设置平面图像捕捉模式的情况下检测到其中基于第一姿势(基本姿势)反向图像捕捉装置100的外壳的上下方向的姿势(反向姿势)。在这种情况下,控制单元174执行控制以在存储单元180中记录通过经由图像转换单元172将平面图像旋转(180°)而获得的图像。另外,假定检测到其中基于第二姿势(垂直姿势)反向图像捕捉装置100的外壳的上下方向的姿势(垂直姿势或者反向姿势)。在这种情况下,控制单元174执行控制以在存储单元180中记录通过经由图像转换单元172将已转换图像进一步旋转(180°)而获得的图像。
另外,在设置平面图像捕捉模式的情况下,当操作接收单元140接收到运动图像的记录操作开始的指令操作时,控制单元174基于由姿势检测单元130检测到的图像捕捉装置100的姿势来执行上述图像转换处理。也就是说,控制单元174在接收到指令操作时,基于由姿势检测单元130检测到的图像捕捉装置100的姿势,根据指令操作确定在存储单元180中记录平面图像和已转换图像中的任意一个作为运动图像。
另外,在设置立体图像捕捉模式的情况下,控制单元174执行控制以将用于显示立体图像的立体图像信息发送到外部显示装置,而无论由姿势检测单元130检测到的图像捕捉装置100的姿势如何。另外,在设置平面图像捕捉模式的情况下,控制单元174基于由姿势检测单元130检测到的图像捕捉装置100的姿势执行控制,以将用于显示平面图像和已转换图像中的任意一个的图像信息发送到显示装置。
另外,如果在设置再现模式的情况下要显示的图像是立体图像,则控制单元174控制显示单元150以显示立体图像,而无论由姿势检测单元130检测到的图像捕捉装置100的姿势如何。另外,如果要显示的图像不是立体图像,则控制单元174控制显示单元150以基于检测到的姿势和要显示的图像是否是已转换图像,来显示平面图像、已转换图像和由图像转换单元172新转换的图像中的任意一个。
记录控制单元175在控制单元174的控制下执行从图像转换单元172输出的图像的压缩记录处理。例如,如果在设置图像捕捉模式的情况下按下记录按钮145(图1A和图1B图示的),则记录控制单元175以预定记录格式压缩捕捉图像(帧)。另外,记录控制单元175执行压缩图像数据在存储单元180中作为运动图像内容的记录。在这种情况下,作为预定记录格式,例如,可以使用MPEG(运动图像专家组)4。另外,如果在设置图像捕捉模式的情况下按下快门按钮142(图2A和图2B图示的),则记录控制单元175以预定压缩编码方法压缩捕捉图像(静止图像),并在存储单元180中记录压缩图像作为静止图像内容。另外,当记录控制单元175在存储单元180中记录从图像转换单元172输出的图像时,其将元数据(附加信息)添加到图像。
显示控制单元176在控制单元174的控制下,在显示单元150上显示从图像转换单元172输出的图像或者在存储单元180中存储的图像。例如,在设置图像捕捉模式的情况下,显示控制单元176在显示单元150上显示从图像转换单元172输出的图像(还没有执行图像转换处理的图像)作为通过图像。另外,在设置再现模式的情况下,显示控制单元176从存储单元180获取根据来自操作接收单元140的再现指令操作的图像内容,展开压缩图像数据,并在显示单元150上显示展开的图像数据。另外,显示控制单元176获取添加到从存储单元180获取的图像内容的元数据,并将元数据输出到控制单元174。如果需要通过图像转换单元172的对应于图像内容的图像的图像转换,则显示控制单元176基于元数据将图像内容输出到图像转换单元172。另外,图像转换单元172执行对应于图像内容的图像的图像转换处理,并将已转换图像输出到显示控制单元176。
[图像捕捉操作的示例和因此产生的图像的示例]
图5A到图6C是图示根据本公开第一实施例的、使用图像捕捉装置100执行的图像捕捉操作和由图像捕捉操作产生的捕捉图像之间的关系的图。
图5A图示作为使用图像捕捉装置100的图像捕捉操作(要捕捉)的被摄体的人401和402。图5B图示在记录如图5A所示的人401和402作为被摄体的情况下从一侧观看时的图像捕捉操作(人403的图像捕捉操作)。在图5A和图5B中,为了容易说明,以简化方式图示人401和402以及背景。
图6A图示使用处于水平状态的图像捕捉装置100,在以如图5B所示的状态执行图像捕捉操作的情况下在输入/输出面板151上显示的通过图像的示例。
图6B图示在设置平面图像捕捉模式的情况下,在如图6A所示的状态下当完全按下快门按钮142时记录的图像(平面图像430)。在如上所述设置平面图像捕捉模式的情况下,由第一图像捕捉单元110产生的图像(平面图像430)成为要记录的图像。该平面图像430是其中并排排列人401和402的水平图像。
图6C图示在设置立体图像捕捉模式的情况下,在如图6A所示的状态下当完全按下快门按钮142时记录的图像(立体图像440)。在如上所述设置立体图像捕捉模式的情况下,由第一图像捕捉单元110和第二图像捕捉单元120产生的图像(立体图像440)成为要记录的图像。该立体图像440包括由第一图像捕捉单元110产生的左眼图像441和由第二图像捕捉单元120产生的右眼图像442。左眼图像441和右眼图像442是用于显示立体图像的一组图像,且图像捕捉范围中包括的被摄体(人401和402)以(由箭头445指示的)水平方向移位。在这种情况下,虚线的椭圆444指示右眼图像442中包括的人401的脸的轮廓。
在如上所述使用图像捕捉装置100执行图像捕捉操作的情况下,可以记录多种捕捉图像。另外,通过改变图像捕捉装置100的姿势,可以记录具有不同构图的捕捉图像。在图7A到图8B中图示该示例。
[图像捕捉装置的姿势和捕捉图像之间的关系的示例]
图7A到图8B是图示根据本公开第一实施例的、在图像捕捉操作期间图像捕捉装置100的姿势和通过姿势产生的捕捉图像之间的关系的示例的图。
图7A到图7D图示四种姿势,作为关于作为被摄体的人401和402执行图像捕捉操作的图像捕捉装置100的姿势。在这种情况下,通过关于光轴方向将图像捕捉装置100旋转90°(箭头451到454),可以获得图7A到图7D中图示的各个姿势。
这里,在关于作为被摄体的人401和402执行图像捕捉操作的情况下,例如,以如图7A所示的水平状态执行图像捕捉操作。在下文中,如图7A所示的水平状态被称作基本姿势。另外,在仅关于作为被摄体的人401执行图像捕捉操作的情况下,例如,以如图7B所示的水平状态(垂直姿势)执行图像捕捉操作。但是,例如,也可以假设人403仅以他/她的左手操作图像捕捉装置100。在这种情况下,假定图像捕捉装置100的姿势成为图7C和图7D中图示的姿势。
因此,在下文中,将使用两个分类描述图像捕捉装置100的姿势。例如,在图7A到图7D中图示的图像捕捉装置100的姿势当中,图7B和图7D中图示的图像捕捉装置100的姿势被称为垂直姿势。另外,图7C和图7D图示的图像捕捉装置100的姿势被称为反向姿势。这里,虽然在使用图像捕捉装置100执行图像捕捉操作的情况下的姿势将被描述为图像捕捉装置100的姿势,但是假定即使在图像捕捉装置100显示图像的情况下,也使用类似的名称(基本姿势、垂直姿势和反向姿势)。
首先,如图7B和7D所示,将描述图像捕捉装置100具有垂直姿势的情况。在这种情况下产生的捕捉图像成为其纵横与在图像捕捉装置100具有反向姿势的情况下产生的捕捉图像相比已经反向的图像。
接下来,如图7C和图7D所示,将描述图像捕捉装置100具有反向姿势的情况。例如,在人403以手中的图像捕捉装置100执行图像捕捉操作(静止图像捕捉操作)的情况下,人403在输入/输出面板151可见的状态下将右手(例如,食指或者拇指)放在快门按钮142上。然后,人403通过在期望的时刻按下快门按钮142来执行图像捕捉操作。因此,通常,在人以手中的图像捕捉装置100执行图像捕捉操作(静止图像捕捉操作)的情况下,通常以如图7A或者图7B所示的姿势执行图像捕捉操作。相反,图7C所示的姿势与如图7A所示通常执行的姿势相比成为垂直地反向的姿势。因此,如上所述,如图7C所示的图像捕捉装置100的姿势被称为反向姿势。
另外,如上所述,作为图像捕捉装置100的垂直姿势,存在图7B和图7D中图示的图像捕捉装置100的两种姿势。因此,在本公开的第一实施例中,为了区分该两种姿势,根据姿势是否是反向姿势,甚至以区别的名称使用垂直姿势。
如上所述,通常,在人以手中的图像捕捉装置100执行图像捕捉操作(静止图像捕捉操作)的情况下,通常以如图7A或者图7B所示的姿势执行图像捕捉操作。相反,图7D所示的姿势与如图7B所示通常执行的姿势相比成为垂直地反向的姿势。因此,图7D中所示的图像捕捉装置100的姿势被称为垂直姿势或者反向姿势。
图8A图示在图像捕捉装置100具有垂直姿势的情况下由第一图像捕捉单元110产生的捕捉图像(平面图像460)的示例。图8A中所示的图像捕捉装置100的姿势是通过从图7A中所示的图像捕捉装置100的姿势(基本姿势)开始,关于光轴方向作为轴以逆时针方向将图像捕捉装置100旋转-90°而获得的姿势。在这种情况下,由于第一图像捕捉单元110根据图像捕捉装置100的旋转也以逆时针方向(CCW)旋转-90°,因此人401旋转90°且甚至在由第一图像捕捉单元110产生的平面图像460中也成为在他/她的一侧上躺下的状态。
图8B图示在图像捕捉装置100具有垂直姿势或者反向姿势的情况下由第一图像捕捉单元110产生的捕捉图像(平面图像470)的示例。如图8B所示的图像捕捉装置100的姿势是通过从如图7A所示的图像捕捉装置100的姿势(基本姿势)开始,关于光轴方向作为轴以逆时针方向(CCW)将图像捕捉装置100旋转180°而获得的姿势。在这种情况下,由于第一图像捕捉单元110根据图像捕捉装置100的旋转也旋转180°,因此甚至在由第一图像捕捉单元110产生的平面图像470中人401和402也旋转180°。
在输入/输出面板151上显示通过图8A和图8B中图示的图像捕捉装置100的姿势产生的平面图像460和470的情况下,由图像捕捉装置100的姿势施加影响。例如,假定以如图7B所示的图像捕捉装置100的姿势再现通过以图7A中所示的图像捕捉装置100的姿势执行的图像捕捉操作获得和记录的平面图像。在这种情况下,在输入/输出面板151上显示的平面图像(再现图像)中,显示人401和402以使得它们以CCW方向旋转-90°并成为在一侧上躺下的状态。
另外,例如,假定以图7C中所示的图像捕捉装置100的姿势再现通过以图7A中所示的图像捕捉装置100的姿势执行的图像捕捉操作获得和记录的平面图像。在这种情况下,在输入/输出面板151上显示的平面图像(再现图像)中,显示人401和402以使得它们以CCW方向旋转180°(也就是,它们垂直地反向)。
如上所述,取决于图像捕捉操作期间图像捕捉装置100的姿势和图像再现期间图像捕捉装置100的姿势,在图像再现期间可能不适当地显示图像。根据本公开的第一实施例,基于图像捕捉操作期间图像捕捉装置100的姿势来转换和记录捕捉图像。
[图像转换的示例]
图9A到图10C是图示根据本公开第一实施例的、在图像捕捉装置100的姿势和已经由图像转换单元172执行了图像转换处理的图像之间的关系的示例的图。
图9A图示在以处于垂直姿势的图像捕捉装置100执行图像捕捉操作的情况下的输入/输出面板151的显示示例。图9A中所示的显示示例等效于图7B中的显示示例。
图9B图示在图像捕捉装置100具有垂直姿势(也就是,如图9A所示的姿势)的情况下由记录控制单元175记录的已转换图像510。
图9C图示在图像捕捉装置100具有垂直姿势(也就是,如图9A所示的姿势)的情况下,以简化方式在显示装置520上显示从通信单元160输出到显示装置520的图像的情况。在这种情况下,假定显示装置520中提供的显示单元的显示表面的纵横比是水平地长的。
在如图9A所示的示例中,图像捕捉装置100从基本姿势(如图7A所示的姿势)移位到以CCW方向旋转-90°的姿势(垂直姿势)。在这种情况下,图像转换单元172在控制单元174的控制下,通过关于由第一图像捕捉单元110产生的捕捉图像执行纵横转换处理和缩小处理来转换捕捉图像。另外,在控制单元174的控制下,记录控制单元175在存储单元180中记录由图像转换单元172转换的图像(已转换图像510)。另外,在控制单元174的控制下,通信单元160将由图像转换单元172转换的图像(已转换图像510)输出到外部显示装置520。也就是说,在显示表面上使用具有水平地长的纵横比的显示装置520显示已转换图像510(如图9B所示)的情况下,按照原样地显示已转换图像510。另外,在这种情况下,适当地执行与在显示装置520中提供的显示单元的显示表面对应的扩展和缩小处理。
如上所述,由于已经以图9A中所示的姿势(垂直姿势)执行了图像捕捉操作并在存储单元180中存储的图像(已转换图像510)是由处于垂直方向的图像捕捉装置100产生的图像,所以将其在显示单元150上显示为垂直地长的图像。但是,在存储单元180中存储的图像(已转换图像510)是水平地长的。因此,关于由第一图像捕捉单元110产生的图像执行纵横转换处理和缩小处理,并在长度方向上将黑色图像添加到其两侧。在缩小处理中,缩小图像以使得其垂直尺寸不超过要记录的图像的尺寸。
以同样方式,由于已经以图9A中所示的姿势(垂直姿势)执行了图像捕捉操作并在显示装置520上显示的图像(已转换图像510)是由处于垂直姿势的图像捕捉装置100产生的图像,所以将其在显示装置520上显示为垂直地长的图像。即使在这种情况下,如上所述,执行纵横转换处理和缩小处理,且在长度方向上将黑色图像添加到其两侧。
也就是说,控制单元174基于来自姿势检测单元130的姿势信息来确定图像捕捉装置100的姿势。另外,如果确定图像捕捉装置100具有垂直姿势,则图像转换单元172在控制单元174的控制下,将由第一捕捉单元110和信号处理单元171产生的捕捉图像转换为已纵横转换图像。具体地说,图像转换单元172以CCW方向将捕捉图像旋转90°。由于此旋转,转换捕捉图像的纵横。如果图像捕捉装置100具有垂直姿势,则与基本姿势相比捕捉图像的纵横反向,且因此通过进一步反向捕捉图像的纵横,捕捉图像的纵横可以恢复到其初始状态。
然后,图像转换单元172缩小已纵横转换图像。这里,在本公开的第一实施例中,例示了将纵横比设置为16∶9(=宽度∶长度)作为记录格式。如上所述,因为纵横转换处理之后的图像的纵横比是9∶16(宽度∶长度),所以垂直尺寸超过记录格式可记录的尺寸。因此,缩小图像以使得要记录的图像的垂直尺寸不超过记录格式可记录的尺寸。在这种情况下,即使在设置不同纵横比(例如,4∶3(=宽度∶长度))的情况下,可以应用本公开的第一实施例。
然后,图像转换单元172将预定图像(例如,黑色图像)添加到缩小图像。也就是说,根据缩小之后的图像,垂直地长的缩小图像包括在具有水平地长的纵横比的图像中,且因此图像的侧面成为开放的。因此,图像转换单元172将预定图像添加到图像的两侧(例如,在水平方向上具有尺寸W1的区域)。在该图像添加处理中,因为优选地在图像开放部分中填充,因此代替地可以添加除了预定图像之外的显示元素(例如,比如壁纸之类的图像)。通过这些处理,产生具有与捕捉图像相同大小的已转换图像。
如果图像捕捉装置100不处于垂直姿势,则控制单元174确定不关于捕捉图像执行纵横转换处理和缩小处理。
图10A图示在图像捕捉装置100具有反向姿势的状态下执行图像捕捉操作的情况下输入/输出面板151的显示示例。在这种情况下,图10A中所示的显示示例等效于图7C中所示的显示示例。
图10B图示在图像捕捉装置100具有反向姿势(也就是说,图10A中所示的姿势)的情况下由记录控制单元175记录的已转换图像540。
图10C图示在图像捕捉装置100具有反向姿势(也就是,图10A中所示的姿势)的情况下,以简化方式在显示装置550上显示从通信单元160输出到显示装置550的图像的情况。在这种情况下,假定显示装置550中提供的显示单元的显示表面的纵横比是水平地长的。
在如图10A所示的示例中,图像捕捉装置100从基本姿势(图7A中所示的姿势)移位到旋转了180°的姿势(反向姿势)。在这种情况下,图像转换单元172在控制单元174的控制下,通过旋转由第一图像捕捉单元110产生的捕捉图像来转换捕捉图像。另外,在控制单元174的控制下,记录控制单元175在存储单元180中记录由图像转换单元172转换的图像(已转换图像540)。另外,在控制单元174的控制下,通信单元160将由图像转换单元172转换的图像(已转换图像540)输出到外部显示装置550。也就是说,在显示表面上使用具有水平地长的纵横比的显示装置550显示已转换图像540的情况下,按照原样地显示已转换图像540。另外,在这种情况下,适当地执行与在显示装置550中提供的显示单元的显示表面对应的扩展和缩小处理。
也就是说,控制单元174基于来自姿势检测单元130的姿势信息来确定图像捕捉装置100的姿势。另外,如果确定图像捕捉装置100具有反向姿势,则图像转换单元172在控制单元174的控制下,旋转由第一捕捉单元110和信号处理单元171产生的捕捉图像。具体地说,图像转换单元172将捕捉图像旋转了180°。由于此旋转,转换捕捉图像的顶部和底部。如果图像捕捉装置100具有反向姿势,则与基本姿势相比捕捉图像的顶部和底部反向,且因此通过进一步反向捕捉图像的顶部和底部,捕捉图像的顶部和底部的关系可以恢复到其初始状态。此时,因为捕捉图像本身是水平地长的,所以可以不改变尺寸。
如果图像捕捉装置100不处于反向姿势,则控制单元174确定不旋转捕捉图像。
另外,如果图像捕捉装置100处于垂直姿势或者处于反向姿势(也就是说,图7B中所示的姿势),则依次执行上述纵横转换处理和旋转处理。
这里,在记录控制单元175开始运动图像的记录的情况下,控制单元174基于来自姿势检测单元130的姿势信息,确定图像捕捉装置100在开始时间的姿势,并继续使用确定的结果。也就是说,即使通过运动图像捕捉操作由记录控制单元175连续地执行图像记录,当记录控制单元175开始图像的记录时,控制单元174也基于图像捕捉装置100的姿势来控制图像转换单元172。例如,因为通常由用户有意地执行捕捉图像的记录开始之后图像捕捉装置100的姿势的改变,所以上述结构是有效的。但是,在通过记录控制单元175的运动图像的记录期间,控制单元174可以基于来自姿势检测单元130的姿势信息来连续地确定图像捕捉装置100的姿势,并基于确定的姿势来顺序地控制图像转换单元172。另外,关于这种确定的定时,可以由用户操作改变设置内容。
另外,在由上述处理(纵横转换处理、缩小处理、旋转处理等)转换的已转换图像作为图像内容记录在存储单元180中的情况下,指示已转换图像的元数据(附加信息)包括在要记录的图像内容中。例如,在控制单元174的控制下,记录控制单元175记录指示已转换图像的元数据(附加信息),作为图像文件中包括的标记信息。在元数据中,甚至记录各种已转换图像(已经执行了纵横转换处理和缩小处理的图像、旋转的图像、立体图像等)。
这里,甚至在由上述处理(纵横转换处理、缩小处理和旋转处理等)转换图像(要记录的图像或者要输出到外部装置的图像)的情况下,在输入/输出面板151上显示由第一图像捕捉单元110产生的捕捉图像作为通过图像。也就是说,因为输入/输出面板151安装在图像捕捉装置100上,所以其与第一图像捕捉单元110一起旋转。因此,无论图像捕捉装置100的姿势如何,因为关于在输入/输出面板151上显示的通过图像不反向纵横或者顶部和底部,所以不需要转换在输入/输出面板151上显示的图像。
如上所述,如果在设置平面图像捕捉模式的情况下图像捕捉装置100处于垂直姿势或者处于反向姿势,则执行图像转换处理,且因此可以在显示的图像中精确地显示上下方向。接下来,将描述在设置立体图像捕捉模式的情况下图像捕捉装置100处于垂直姿势或者处于反向姿势的情况。
[当设置立体图像捕捉模式时图像产生的示例]
图11A到图12B是图示根据本公开第一实施例的、在图像捕捉操作期间图像捕捉装置100的姿势和由图像捕捉单元190产生的立体图像之间的关系的示例的图。
图11A图示在设置立体图像捕捉模式的情况下、在图像捕捉装置100具有垂直姿势的状态下执行的图像捕捉操作期间图像捕捉装置100的后侧。也就是说,在图11A中所示的示例中,在仅关于作为被摄体的人401执行图像捕捉操作的情况下输入/输出面板151的显示示例。
图11B图示当在图11A中所示的状态下完全按下快门按钮142时产生的立体图像560。如上所述,立体图像560包括由第一图像捕捉单元110产生的左眼图像561和由第二图像捕捉单元120产生的右眼图像562。左眼图像561和右眼图像562是用于显示立体图像的一组图像,且图像捕捉范围中包括的被摄体(人401)以水平方向移位(由箭头565指示)。在这种情况下,虚线的椭圆564指示右眼图像562中包括的人401的脸的轮廓。
图12A图示在设置立体图像捕捉模式的情况下在图像捕捉装置100具有反向姿势的状态下执行的图像捕捉操作期间图像捕捉装置100的后侧。也就是说,在图12A中所示的示例中,在关于作为被摄体的人401和402执行图像捕捉操作的情况下输入/输出面板151的显示示例。
图12B图示当在图12A中所示的状态下完全按下快门按钮142时产生的立体图像570。如上所述,立体图像570包括由第一图像捕捉单元110产生的左眼图像571和由第二图像捕捉单元120产生的右眼图像572。左眼图像571和右眼图像572是用于显示立体图像的一组图像,且图像捕捉范围中包括的被摄体(人401和402)以水平方向移位(由箭头575指示)。在这种情况下,虚线的椭圆574指示右眼图像572中包括的人401的脸的轮廓。
如图11B和图12B所示,由于立体图像通过使用左眼和右眼的视差来获得立体视觉,因此左眼图像和右眼图像中包括的被摄体在水平方向中移位。在观看如以上配置的立体图像(左眼图像和右眼图像)的情况下,用户需要以预定位置和姿势观看显示的立体图像。由于此,在设置立体图像捕捉模式的情况下执行上述图像转换处理的情况下,可以精确地显示立体图像的上下方向,而可能不从立体图像获得立体视觉。因此,在本公开的第一实施例中,在设置立体图像捕捉模式的情况下不执行上述图像转换处理。因此,即使在设置平面图像捕捉模式和立体图像捕捉模式中的任意一个图像捕捉模式的情况下,也可以记录适当的图像。
[图像捕捉装置的操作示例]
接下来,将参考附图描述根据本公开第一实施例的图像捕捉装置100的操作。
图13是图示根据本公开第一实施例的、由图像捕捉装置100执行的图像转换处理的示例的流程图。在该示例中,设置图像捕捉模式,且示出了在执行运动图像记录处理的情况下图像转换控制处理的示例。
首先,控制单元174确定是否设置了立体图像捕捉模式(步骤S901)。如果设置了立体图像捕捉模式(步骤S901),则不执行上述图像转换处理,且终止图像转换控制处理的操作。
另外,如果未设置立体图像捕捉模式(也就是说,如果设置了平面图像捕捉模式)(步骤S901),则控制单元174基于来自姿势检测单元130的姿势信息来确定图像捕捉装置100是否具有垂直姿势(步骤S902)。如果图像捕捉装置100不具有垂直姿势(步骤S902),则控制单元174操作以进行到步骤S906。
另一方面,如果图像捕捉装置100具有垂直姿势(步骤S902),则图像转换单元172在控制单元174的控制下,关于通过信号处理单元171从第一图像捕捉单元110输出的捕捉图像执行纵横转换处理(步骤S903)。具体地说,图像转换单元172通过以CCW方向将捕捉图像旋转90°来执行纵横转换处理(步骤S903)。
然后,图像转换单元172关于纵横转换处理之后的图像执行缩小处理(步骤S904)。然后,图像转换单元172执行用于将预定图像(例如,黑色图像)添加到缩小的图像的图像添加处理(步骤S905)。
然后,控制单元174基于来自姿势检测单元130的姿势信息来确定图像捕捉装置100是否具有反向姿势(步骤S906)。如果图像捕捉装置100不具有反向姿势(步骤S906),则控制单元174终止图像转换控制处理的操作。
另一方面,如果图像捕捉装置100具有反向姿势(步骤S906),则图像转换单元172在控制单元174的控制下,关于被摄体图像执行旋转处理(步骤S907)。这里,被摄体图像是通过信号处理单元171从第一图像捕捉单元110输出的捕捉图像或者由在步骤S903到S905中的各个图像转换处理产生的已转换图像。具体地说,图像转换单元172将被摄体图像旋转180°(步骤S907)。此外,步骤S901是根据本公开实施例的确定处理的示例。另外,步骤S902和S906是根据本公开实施例的姿势检测处理的示例。另外,步骤S903到S905和S907是根据本公开实施例的控制处理的示例。
关于已经执行了图像转换处理(步骤S903到S905和S907)的已转换图像或者没有执行图像转换处理的捕捉图像(立体图像和平面图像),记录控制单元175在控制单元174的控制下执行图像记录处理。另外,在将图像内容记录在存储单元180中的情况下,如上所述,指示图像的种类的元数据(附加信息)包括在要记录的图像内容中。
另外,如上所述,即使在由图像转换处理转换图像的情况下,也在输入/输出面板151上显示由图像捕捉单元190产生的捕捉图像作为通过图像。
在这种情况下,虽然示出了在存储单元180中记录图像的示例,但是由第一图像捕捉单元110和第二图像捕捉单元120中的至少一个产生的图像可以以同样方式输出到外部显示装置。在这种情况下,代替图像记录处理,通信单元160在控制单元174的控制下执行图像输出处理。
另外,在该示例中,通过记录控制单元175在运动图像的记录期间基于来自姿势检测单元130的姿势信息连续地确定图像捕捉装置100的姿势(步骤S902),且基于确定的姿势顺序地控制图像转换单元172。但是,如上所述,可以基于来自姿势检测单元130的姿势信息确定当开始运动图像的记录时图像捕捉装置100的姿势,且此后,可以继续使用确定的结果。
[图像再现的示例]
图14A到图15C是图示根据本公开第一实施例的、在再现由图像捕捉装置100记录的图像的情况下的图像再现的示例的图。
图14A图示在设置平面图像捕捉模式的情况下在图像捕捉装置100具有垂直姿势的状态下已经执行了记录处理的已转换图像600。已转换图像600等效于图9B中所示的已转换图像510,且将黑色图像(具有尺寸W1的区域)在水平方向上添加到其两侧。
图14B图示当在设置再现模式的情况下在图像捕捉装置100具有垂直姿势的状态下显示图14A中所示的已转换图像600时的显示示例。在图14B中,图像捕捉装置100从基本姿势以CCW方向旋转-90°并具有垂直姿势。
如上所述,在图像捕捉装置100具有垂直姿势的情况下,转换要显示的图像以进行显示。也就是说,在控制单元174的控制下,图像转换单元172从由显示控制单元176从存储单元180获取的已转换图像600删除黑色图像,并放大已经删除了黑色图像的已转换图像600以将已转换图像600转换为显示图像。另外,显示控制单元176在控制单元174的控制下,代替已转换图像600,在输入/输出面板151上显示显示图像(通过关于已转换图像600执行黑色图像删除和放大处理而获得的图像)。通过显示已转换图像600,如图14B所示,可以显示图像以使得包括人401的图像的上下方向与用户的上下方向一致。
也就是说,在图像捕捉装置100具有垂直姿势且输入/输出面板151的显示表面上的纵横比是垂直地长的情况下,将已转换图像从缩小的尺寸放大到图像捕捉期间的尺寸以进行显示。
图14C图示在使用显示装置610显示已转换图像600(如图14A所示)的情况下的显示示例。在这种情况下,假定在显示装置610中提供的显示单元的显示表面上的纵横比是水平地长的。如上所述,在显示表面上使用具有水平地长的纵横比的显示装置610显示已转换图像600(如图14A所示)的情况下,不从已转换图像600删除黑色图像,且按照原样地显示已转换图像600。另外,在这种情况下,恰当地执行与在显示装置610中提供的显示单元的显示表面对应的放大或者缩小处理。
图15A图示在设置平面图像捕捉模式的情况下在图像捕捉装置100具有基本姿势的状态下已经执行了记录处理的平面图像620。平面图像620等效于图6B中所示的平面图像430(也就是说,平面图像620不是已转换图像)。
图15B图示在设置再现模式的情况下当在图像捕捉装置100具有垂直姿势的状态下显示图15A中所示的平面图像620时的显示示例。在图15B中,图像捕捉装置100从基本姿势以CCW方向旋转-90°并具有垂直姿势。
如上所述,如果要显示的图像不是已转换图像且图像捕捉装置100具有垂直姿势,则转换要显示的图像以进行显示。也就是说,在控制单元174的控制下,图像转换单元172通过由显示控制单元176以CCW方向将图像旋转90°来缩小从存储单元180获取的平面图像620,并通过将预定图像(例如黑色图像)添加到平面图像来将平面图像转换为显示图像。例如,执行该缩小处理以使得平面图像620的水平尺寸成为输入/输出面板151的显示表面上的可显示尺寸。
另外,显示控制单元176在控制单元174的控制下,代替平面图像620,在输入/输出面板151上显示显示图像(通过执行平面图像620的旋转和缩小以及黑色图像添加而获得的图像)。通过显示平面图像620,如图15B所示,可以显示图像以使得包括人401和402的图像的上下方向与用户的上下方向一致。
也就是说,在图像捕捉装置100具有垂直姿势且在输入/输出面板151的显示表面上的纵横比是垂直地长的情况下,在关于平面图像执行旋转、缩小和黑色图像添加处理之后显示平面图像(水平地长的纵横比)。
图15C图示在使用显示装置640显示平面图像620(如图15A所示)的情况下的显示示例。在这种情况下,假定在显示装置640中提供的显示单元的显示表面上的纵横比是水平地长的。如上所述,在显示表面上使用具有水平地长的纵横比的显示装置640显示平面图像600的情况下,按照原样地显示平面图像620。在这种情况下,恰当地执行与在显示装置640中提供的显示单元的显示表面对应的放大或者缩小处理。
这里,假定图像捕捉装置100在显示已转换图像600(如图14A所示)或者平面图像620(如图15A所示)的情况下具有反向姿势,或者垂直姿势和反向姿势。在这种情况下,即使在执行上述处理的情况下,显示图像的上下方向和用户的上下方向也反向。因此,在图像捕捉装置100具有反向姿势或者垂直姿势和反向姿势的情况下,通过旋转来转换要显示的图像以进行显示。也就是说,在控制单元174的控制下,图像转换单元172将已经执行了上述处理的要显示的图像旋转180°。通过该旋转,可以反向已经执行了上述处理的要显示的图像的上下方向。
如上所述,在图像捕捉装置100具有垂直姿势或者反向姿势的情况下,可以通过执行图像转换处理来确切地显示显示图像的上下方向。
这里,假定在设置再现模式的情况下要显示的图像是立体图像。如上所述,在观看立体图像(左眼图像和右眼图像)的情况下,用户需要以预定位置和姿势观看显示的立体图像。由于此,在设置再现模式的情况下执行上述图像转换处理的情况下,可以精确地显示立体图像的上下方向,而可能不从立体图像获得立体视觉。因此,在本公开的第一实施例中,如果在设置再现模式的情况下要显示的图像是立体图像,则不执行上述图像转换处理。因此,即使在设置再现模式的情况下显示立体图像,也可以显示适当的图像。
[图像捕捉装置的操作示例]
接下来,将参考附图描述根据本公开第一实施例的图像捕捉装置100的操作。
图16是图示根据本公开第一实施例的、由图像捕捉装置100执行的图像转换处理的示例的流程图。在该示例中,示出了在显示由图像捕捉装置100记录的图像(平面图像(包括已纵横转换图像和反向图像)或者立体图像)的情况下的图像转换控制处理的示例。另外,在该示例中,示出了在基于用户操作关于由显示控制单元176获取的图像执行显示处理的情况下的图像转换控制处理的示例。
首先,控制单元174确定要显示的图像是否是立体图像(步骤S921)。例如,基于图像内容中包括的元数据(附加信息(例如,图像文件中包括的标记信息))来确定要显示的图像是否是立体图像。如果要显示的图像是立体图像(步骤S921),则图像转换控制处理的操作终止。此时,如果要显示的图像是立体图像(步骤S921),则控制单元174确定要显示的图像是否是已纵横转换图像(步骤S922)。例如,基于图像内容中包括的元数据(附加信息(例如,图像文件中包括的标记信息))来确定要显示的图像是否是纵横转换图像。
如果要显示的图像是已纵横转换图像(步骤S922),则控制单元174基于来自姿势检测单元130的姿势信息确定图像捕捉装置100是否具有垂直姿势(步骤S923)。如果图像捕捉装置100不具有垂直姿势(步骤S923),则控制单元174操作以进行到步骤S930。在这种情况下,如果图像捕捉装置100具有垂直姿势(步骤S923),则图像转换单元172在控制单元174的控制下,关于显示控制单元176从存储单元180获取的要显示的图像(图像内容)执行图像转换处理(步骤S924和S925)。也就是说,图像转换单元172删除在已纵横转换图像(要显示的图像)的水平方向中的两侧上添加的预定图像(例如,黑色图像)(步骤S924)。然后,图像转换单元172关于已经从其删除了黑色图像的已纵横转换图像执行放大处理(步骤S925)。例如,执行放大处理以使得已经从其删除了黑色图像的已纵横转换图像的尺寸适配显示单元150的显示表面的尺寸。
如果要显示的图像不是已纵横转换图像(步骤S922),则控制单元174基于来自姿势检测单元130的姿势信息确定图像捕捉装置100是否具有垂直姿势(步骤S926)。如果图像捕捉装置100不具有垂直姿势(步骤S926),则控制单元174操作以进行到步骤S930。
另外,如果图像捕捉装置100具有垂直姿势(步骤S926),则图像转换单元172在控制单元174的控制下,执行图像转换处理(步骤S927到S929)。也就是说,图像转换单元172在控制单元174的控制下,关于由显示控制单元176从存储单元180获取的要显示的图像(图像内容)执行纵横转换处理(以CCW方向旋转90°)(步骤S927)。然后,图像转换单元172关于要显示的已纵横转换图像执行缩小处理(步骤S928)。例如,执行缩小处理以使得水平方向上要显示的图像的尺寸不超过显示单元150的显示表面的尺寸(步骤S928)。然后,图像转换单元172执行用于在垂直方向上将预定图像(例如,黑色图像)添加到要显示的图像的两侧的图像添加处理(步骤S929)。也就是说,如图15B所示,在已经执行了缩小处理的图像在处于垂直状态的输入/输出面板151上显示的情况下,以缩小的水平状态显示要显示的图像,且因此要显示的图像的侧面成为开放的。因此,图像转换单元172将预定图像添加到要显示的图像的两侧(例如,黑色图像)。在这种情况下,代替添加黑色图像,可以添加除了黑色图像之外的显示元素(例如,比如壁纸的图像)。
然后,控制单元174基于来自姿势检测单元130的姿势信息来确定图像捕捉装置100是否具有反向姿势(步骤S930)。如果图像捕捉装置100不具有反向姿势(步骤S930),则终止图像转换控制处理的操作。如果图像捕捉装置100具有反向姿势(步骤S930),则图像转换单元172在控制单元174的控制下,关于要显示的图像执行旋转处理(步骤S931)。也就是说,图像转换单元172将要显示的图像旋转180°(步骤S931)。要显示的图像包括在步骤S924、S925、S927到S929已经执行了图像处理的图像。通过该旋转处理,反向要显示的图像的上下部分。也就是说,如果在图像捕捉装置100具有反向姿势的情况下按照原样地在输入/输出面板151上显示要显示的图像,则反向要显示的图像的上下部分,且因此可以在输入/输出面板151上精确地显示图像的上下部分。
另外,在该示例中,在通过显示控制单元176的显示处理期间基于来自姿势检测单元130的姿势信息连续地确定图像捕捉装置100的姿势(步骤S922),且基于所确定的姿势顺序地控制图像转换单元172。但是,可以基于来自姿势检测单元130的姿势信息确定当开始运动图像的记录时图像捕捉装置100的姿势,且此后,可以继续使用确定的结果。
在该示例中,在显示单元150上显示图像。这里,在将存储单元180中存储的图像输出到外部显示装置的情况下,不执行上述图像转换处理。也就是说,由于假定外部显示装置具有恒定姿势而无论图像捕捉装置100的姿势如何,因此在要显示的图像与在外部显示装置上显示的图像之间不反向纵横或者上下部分,而无论图像捕捉装置100的姿势如何。因此,不需要执行上述图像转换处理。
如上所述,在本公开的第一实施例中,即使当设置平面图像捕捉模式时在图像捕捉期间的图像捕捉装置100具有垂直姿势或者反向姿势的情况下,也可以记录其中被摄体的上下部分与用户的上下部分彼此一致的图像。但是,由图像捕捉单元190产生的图像作为通过图像显示在图像捕捉装置100的输入/输出面板151上。因此,可以显示其中被摄体的上下部分与用户的上下部分彼此一致的通过图像。
另外,在当设置再现模式时显示平面图像的情况下,即使图像捕捉装置100具有垂直姿势或者反向姿势,也可以显示其中被摄体的上下部分与用户的上下部分彼此一致的图像。
另外,外部显示装置的姿势不受图像捕捉装置100的姿势的影响。因此,在将图像输出到外部显示装置的情况下,可以显示其中被摄体的上下部分与用户的上下部分彼此一致的图像而不执行上述图像转换处理。
另外,在本公开的第一实施例中,当设置立体图像捕捉模式时,不执行上述图像转换处理。因此,可以恰当地记录能够从立体图像获得立体视觉的图像内容。也就是说,即使在设置平面图像捕捉模式和立体图像捕捉模式中的任意一个图像捕捉模式的情况下,也可以根据图像捕捉模式恰当地执行图像处理,并可以记录适当的图像。另外,如果在设置再现模式的情况下要显示的图像是立体图像(立体图像内容),则不执行上述图像转换处理。因此,可以从显示的立体图像恰当地获得立体视觉。也就是说,即使关于以平面图像捕捉模式和立体图像捕捉模式中的任意一个图像捕捉模式记录的图像内容,也可以根据图像捕捉模式执行适当的图像处理,并可以显示适当的图像。
在本公开的第一实施例中,示例了在图像捕捉装置100的存储单元180中存储由图像捕捉单元190产生的图像(图像数据)。但是,例如,即使关于图像(图像数据)通过通信单元160存储在外部存储装置中的情况,也可以应用本公开的第一实施例。
另外,在本公开的第一实施例中,示例了在再现期间从图像捕捉装置100的存储单元180读取图像(图像数据)。但是,例如,即使关于通过通信单元160从外部存储单元读取图像(图像数据)且读取的图像成为要显示的图像的情况,也可以应用本公开的第一实施例。
另外,在本公开的第一实施例中,示例了由添加到图像内容的元数据确定图像的种类。但是,例如,元数据可以记录在存储单元180中分开地准备的属性文件中,且可以使用元数据确定图像的种类。
<2.修改>
在本公开的第一实施例中,示例了图像捕捉装置(所谓的双眼类型3D相机)具有两个图像捕捉单元。但是,即使关于可以通过一个图像捕捉单元产生立体图像和平面图像的图像捕捉装置(所谓的单眼类型3D相机),也可以应用本公开的第一实施例。
另外,在本公开的实施例中,示例了图像捕捉装置作为图像处理设备的示例。但是,本公开的实施例可以应用于能够处置各种图像(平面图像、立体图像等)的便携式电话、导航***、比如便携式媒体播放器等的图像处理装置(例如,具有拍照功能的电子仪器)。
本公开的实施例示出了用于实现本公开的示例,并且如由本公开的实施例清楚地指示的那样,本公开的实施例中的各项和权利要求中的指定项相互对应。以同样方式,权利要求中的指定项和本公开的实施例中具有相同名称的项相互对应。但是,本公开不局限于实施例,且在不脱离本公开的范围的情况下可以做出各种修改。
另外,如本公开的实施例中描述的处理可以作为具有这一系列处理的方法而掌握,且可以作为用于使得计算机执行这一系列处理的程序,或者存储该程序的记录介质而掌握。作为记录介质,可以使用CD(致密盘)、MD(迷你盘)、DVD(数字多用途盘)、存储卡、蓝光盘(注册商标)等。
本公开包括与2010年12月28日在日本专利局提交的日本优先权专利申请JP 2010-292027中公开的主题相关的主题,将其全部内容通过引用包含于此。
本领域技术人员应该理解,取决于设计要求及其他因素,可以进行各种修改、组合、部分组合和变更,只要它们在所附权利要求或其等效物的范围内即可。

Claims (10)

1.一种图像处理设备,包括:
姿势检测单元,检测所述图像处理设备的姿势;
图像捕捉单元,捕捉被摄体并产生包括被摄体的平面图像或者用于被摄体的立体观测的立体图像;
模式设置单元,基于用户操作设置用于记录平面图像的平面图像捕捉模式和用于记录立体图像的立体图像捕捉模式中的任意一个;
图像转换单元,通过关于图像执行纵横转换处理和缩小处理来转换由所述图像捕捉单元产生的图像;和
控制单元,进行操作以便如果设置所述立体图像捕捉模式,则在记录介质上记录立体图像而无论所述图像处理设备的检测到的姿势如何,而如果设置所述平面图像捕捉模式,则基于所述图像处理设备的检测到的姿势在所述记录介质上记录平面图像和已转换图像中的任意一个,所述已转换图像是通过经由所述图像转换单元转换所述平面图像而获得的图像。
2.根据权利要求1所述的图像处理设备,其中,所述控制单元进行操作以便在设置所述平面图像捕捉模式的情况下,如果检测到第一姿势,则在所述记录介质上记录所述平面图像,而如果检测到第二姿势,则在所述记录介质上记录所述已转换图像,所述第一姿势是其中所述图像处理设备的外壳的长度方向和水平方向彼此一致的姿势,而第二姿势是其中所述外壳的长度方向和垂直方向彼此一致的姿势。
3.根据权利要求2所述的图像处理设备,其中,所述图像转换单元通过将所述平面图像或者所述已转换图像旋转180°来转换图像,和
所述控制单元进行操作以便在设置所述平面图像捕捉模式的情况下,如果检测到作为其中所述图像处理设备的外壳的上下方向基于所述第一姿势反向的姿势的反向姿势,则在所述记录介质上记录通过经由所述图像转换单元旋转所述平面图像而获得的图像,而在设置所述平面图像捕捉模式的情况下,如果检测到作为其中所述图像处理设备的外壳的上下方向基于所述第二姿势反向的姿势的反向姿势,则在所述记录介质上记录通过经由所述图像转换单元旋转所述已转换图像而获得的图像。
4.根据权利要求1所述的图像处理设备,其中,所述图像捕捉单元包括产生用于显示所述立体图像的第一图像的第一图像捕捉单元和产生用于显示所述立体图像的第二图像的第二图像捕捉单元,和
所述控制单元进行操作以便如果设置所述立体图像捕捉模式,则在所述记录介质上记录所述第一图像和第二图像作为立体图像,而如果设置所述平面图像捕捉模式,则在所述记录介质上记录所述第一图像和所述已转换图像中的任意一个,所述已转换图像是通过经由所述图像转换单元转换所述第一图像而获得的图像。
5.根据权利要求1所述的图像处理设备,其中,所述图像捕捉单元产生由所述平面图像形成的运动图像或者由所述立体图像形成的运动图像,且进一步包括接收运动图像的记录操作开始的指令操作的操作接收单元,和
所述控制单元在设置所述平面图像捕捉模式的情况下,基于当接收到指令操作时检测的所述图像处理设备的姿势,确定是否在所述记录介质上记录所述平面图像和所述已转换图像中的任意一个作为关于所述指令操作的运动图像。
6.根据权利要求1所述的图像处理设备,其中,所述模式设置单元基于用户操作,设置用于在所述显示单元上显示所述记录介质上记录的平面图像、所述已转换图像和所述立体图像中的任意一个的再现模式,
所述图像转换单元通过关于对应图像执行纵横转换处理和放大处理来转换记录在所述记录介质上的图像,和
在设置再现模式的情况下,如果要显示的图像是立体图像,则所述控制单元控制显示单元以显示所述立体图像而无论所述图像处理设备的检测到的姿势如何,而如果要显示的图像不是立体图像,则所述控制单元控制所述显示单元以基于所述图像处理设备的检测到的姿势和要显示的图像是否是已转换图像来显示平面图像、已转换图像和由所述图像转换单元新转换的图像中的任意一个。
7.一种图像处理设备,包括:
姿势检测单元,检测所述图像处理设备的姿势;
图像捕捉单元,捕捉被摄体并产生包括被摄体的平面图像或者用于被摄体的立体观测的立体图像;
模式设置单元,基于用户操作设置用于记录平面图像的平面图像捕捉模式和用于记录立体图像的立体图像捕捉模式中的任意一个;
图像转换单元,通过关于图像执行纵横转换处理和缩小处理来转换由所述图像捕捉单元产生的图像;和
控制单元,进行操作以便如果设置所述立体图像捕捉模式,则将用于显示所述立体图像的立体图像信息发送到显示装置而无论所述图像处理设备的检测到的姿势如何,而如果设置所述平面图像捕捉模式,则基于所述图像处理设备的检测到的姿势将用于显示所述平面图像和已转换图像中的任意一个图像的图像信息发送到所述显示装置,所述已转换图像是通过经由所述图像转换单元转换所述平面图像而获得的图像。
8.一种图像处理设备,包括:
姿势检测单元,检测所述图像处理设备的姿势;
图像转换单元,在设置再现模式的情况下,通过关于要显示的图像执行纵横转换处理和放大处理来转换所述要显示的图像,所述再现模式用于使得显示单元显示包括要捕捉的被摄体的平面图像、通过关于所述平面图像执行纵横转换处理和缩小处理而获得的已转换图像和从记录用于被摄体的立体观测的立体图像的记录介质获取的要显示的图像;和
控制单元,在设置再现模式的情况下,如果要显示的图像是立体图像,则控制显示单元以显示所述立体图像而无论所述图像处理设备的检测到的姿势如何,而如果要显示的图像不是立体图像,则控制所述显示单元以基于所述图像处理设备的检测到的姿势和要显示的图像是否是已转换图像来显示平面图像、已转换图像和由所述图像转换单元新转换的图像中的任意一个。
9.一种控制图像处理设备的方法,包括:
检测具有图像捕捉单元的所述图像处理设备的姿势,所述图像捕捉单元捕捉被摄体并产生包括被摄体的平面图像或者用于被摄体的立体观测的立体图像;
确定是否设置用于记录平面图像的平面图像捕捉模式和用于记录立体图像的立体图像捕捉模式中的任意一个图像捕捉模式;和
执行控制以便如果设置立体图像捕捉模式,则在记录介质上记录立体图像而无论所述图像处理设备的检测到的姿势如何,而如果设置平面图像捕捉模式,则基于图像处理设备的检测到的姿势在记录介质上记录平面图像和已转换图像中的任意一个,所述已转换图像是通过经由由图像转换单元执行纵横转换处理和缩小处理来转换平面图像而获得的图像。
10.一种使得计算机执行以下步骤的程序:
检测具有图像捕捉单元的所述图像处理设备的姿势,所述图像捕捉单元捕捉被摄体并产生包括被摄体的平面图像或者用于被摄体的立体观测的立体图像;
确定是否设置用于记录平面图像的平面图像捕捉模式和用于记录立体图像的立体图像捕捉模式中的任意一个图像捕捉模式;和
执行控制以便如果设置立体图像捕捉模式,则在记录介质上记录立体图像而无论所述图像处理设备的检测到的姿势如何,而如果设置平面图像捕捉模式,则基于图像处理设备的检测到的姿势在记录介质上记录平面图像和已转换图像中的任意一个,所述已转换图像是通过经由由图像转换单元执行纵横转换处理和缩小处理来转换平面图像而获得的图像。
CN201110446741.9A 2010-12-28 2011-12-28 图像处理设备及其控制方法 Expired - Fee Related CN102572481B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2010292027A JP5668466B2 (ja) 2010-12-28 2010-12-28 画像処理装置、その制御方法およびプログラム
JPJP2010-292027 2010-12-28
JP2010-292027 2010-12-28

Publications (2)

Publication Number Publication Date
CN102572481A true CN102572481A (zh) 2012-07-11
CN102572481B CN102572481B (zh) 2017-05-24

Family

ID=46316195

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110446741.9A Expired - Fee Related CN102572481B (zh) 2010-12-28 2011-12-28 图像处理设备及其控制方法

Country Status (3)

Country Link
US (1) US20120162381A1 (zh)
JP (1) JP5668466B2 (zh)
CN (1) CN102572481B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104796597A (zh) * 2014-01-17 2015-07-22 奥林巴斯映像株式会社 显示设备以及显示方法
CN107087150B (zh) * 2017-04-26 2019-05-21 成都通甲优博科技有限责任公司 一种基于双目立体和光度立体的三维摄像方法、***及装置

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022015597A (ja) 2020-07-09 2022-01-21 キヤノン株式会社 電子機器およびその制御方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000312329A (ja) * 1999-02-26 2000-11-07 Canon Inc 画像処理装置、画像処理システム、画像処理制御方法、及び記憶媒体
CN1403867A (zh) * 2001-08-30 2003-03-19 佳能株式会社 图像处理装置、图像处理方法以及记录有程序的记录媒体
JP2005341087A (ja) * 2004-05-26 2005-12-08 Sharp Corp 動画撮像装置
US20060029292A1 (en) * 2004-08-04 2006-02-09 Canon Kabushiki Kaisha Image processing apparatus and method, and image sensing apparatus
US20080158384A1 (en) * 2006-12-27 2008-07-03 Fujifilm Corporation Image management method

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3407169B2 (ja) * 1995-10-12 2003-05-19 富士写真光機株式会社 超音波画像立体表示装置及び超音波画像立体表示方法
US7062722B1 (en) * 2000-08-22 2006-06-13 Bruce Carlin Network-linked interactive three-dimensional composition and display of saleable objects in situ in viewer-selected scenes for purposes of promotion and procurement
EP1345422A1 (en) * 2002-03-14 2003-09-17 Creo IL. Ltd. A device and a method for determining the orientation of an image capture apparatus
JP2004145291A (ja) * 2002-10-03 2004-05-20 Casio Comput Co Ltd 画像表示装置、画像表示方法及びプログラム
JP4771671B2 (ja) * 2004-07-16 2011-09-14 シャープ株式会社 撮影装置及び撮影表示装置
KR100703332B1 (ko) * 2005-06-07 2007-04-03 삼성전자주식회사 휴대단말기의 동작모드 전환방법
JP2007258989A (ja) * 2006-03-22 2007-10-04 Eastman Kodak Co デジタルカメラ、構図補正装置、および、構図補正方法
JP4802077B2 (ja) * 2006-09-29 2011-10-26 富士フイルム株式会社 携帯機器
JP4730616B2 (ja) * 2006-12-01 2011-07-20 富士フイルム株式会社 複眼デジタルカメラ
KR101276605B1 (ko) * 2007-06-19 2013-06-19 한국전자통신연구원 스테레오스코픽 데이터의 저장 및 재생을 위한 메타데이터구조 및 이를 이용하는 스테레오스코픽 콘텐츠 파일의 저장방법
JP5383356B2 (ja) * 2009-07-08 2014-01-08 キヤノン株式会社 撮像装置、情報処理装置、撮像装置の制御方法、情報処理装置の制御方法、及びコンピュータプログラム
JP5249149B2 (ja) * 2009-07-17 2013-07-31 富士フイルム株式会社 立体画像記録装置及び方法、立体画像出力装置及び方法、並びに立体画像記録出力システム
KR20110020082A (ko) * 2009-08-21 2011-03-02 엘지전자 주식회사 이동 단말기의 제어 장치 및 그 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000312329A (ja) * 1999-02-26 2000-11-07 Canon Inc 画像処理装置、画像処理システム、画像処理制御方法、及び記憶媒体
CN1403867A (zh) * 2001-08-30 2003-03-19 佳能株式会社 图像处理装置、图像处理方法以及记录有程序的记录媒体
JP2005341087A (ja) * 2004-05-26 2005-12-08 Sharp Corp 動画撮像装置
US20060029292A1 (en) * 2004-08-04 2006-02-09 Canon Kabushiki Kaisha Image processing apparatus and method, and image sensing apparatus
US20080158384A1 (en) * 2006-12-27 2008-07-03 Fujifilm Corporation Image management method

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104796597A (zh) * 2014-01-17 2015-07-22 奥林巴斯映像株式会社 显示设备以及显示方法
CN104796597B (zh) * 2014-01-17 2018-02-13 奥林巴斯株式会社 显示设备以及显示方法
CN107087150B (zh) * 2017-04-26 2019-05-21 成都通甲优博科技有限责任公司 一种基于双目立体和光度立体的三维摄像方法、***及装置

Also Published As

Publication number Publication date
JP5668466B2 (ja) 2015-02-12
US20120162381A1 (en) 2012-06-28
CN102572481B (zh) 2017-05-24
JP2012142663A (ja) 2012-07-26

Similar Documents

Publication Publication Date Title
KR102077967B1 (ko) 전자 기기
CN1901625B (zh) 捕捉图像作为数字数据的电子摄像装置
JP5042850B2 (ja) 撮像装置、表示制御装置、表示装置および画像表示システム
CN101917579B (zh) 显示控制设备和显示控制方法
CN102112918B (zh) 复眼成像设备
JP5851766B2 (ja) 携帯機器
CN101573971B (zh) 图像记录装置和图像记录方法
JP5276536B2 (ja) 3次元画像表示装置及び3次元画像表示方法
CN105580349A (zh) 图像处理装置、摄像装置、图像处理方法及图像处理程序
CN102511013A (zh) 摄像装置及其控制方法和程序
JP4236986B2 (ja) 撮影装置および方法並びにプログラム
CN105430263A (zh) 长曝光全景图像拍摄装置和方法
JP5231771B2 (ja) 立体画像撮影装置
US20120098946A1 (en) Image processing apparatus and methods of associating audio data with image data therein
CN102540689A (zh) 摄像装置
CN104365089A (zh) 摄像装置及图像显示方法
JP2006135782A (ja) 撮像装置、表示制御装置および表示装置
JP2009103980A (ja) 撮影装置、画像処理装置、及び撮影システム
JP2006121229A (ja) ステレオカメラ
JP2005229291A (ja) 画像記録装置及び撮像装置並びに画像ファイル保存方法
JP5322817B2 (ja) 3次元画像撮像装置及び3次元画像表示方法
CN102572481A (zh) 图像处理设备、其控制方法和程序
JP4217182B2 (ja) 撮影装置
JP2011172092A (ja) 撮像装置、画像再生方法、画像再生プログラム、画像再生プログラムを記録した記録媒体および画像再生装置
JP4887461B2 (ja) 3次元画像撮像装置及び3次元画像表示方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20170524

Termination date: 20171228