CN113491103B - 摄像设备及其控制方法和存储介质 - Google Patents

摄像设备及其控制方法和存储介质 Download PDF

Info

Publication number
CN113491103B
CN113491103B CN202080016877.3A CN202080016877A CN113491103B CN 113491103 B CN113491103 B CN 113491103B CN 202080016877 A CN202080016877 A CN 202080016877A CN 113491103 B CN113491103 B CN 113491103B
Authority
CN
China
Prior art keywords
image
image data
control unit
system control
raw image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202080016877.3A
Other languages
English (en)
Other versions
CN113491103A (zh
Inventor
西口达也
大森昇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2019036396A external-priority patent/JP7185563B2/ja
Priority claimed from JP2019085969A external-priority patent/JP7313893B2/ja
Application filed by Canon Inc filed Critical Canon Inc
Priority to CN202311008646.XA priority Critical patent/CN116962609A/zh
Publication of CN113491103A publication Critical patent/CN113491103A/zh
Application granted granted Critical
Publication of CN113491103B publication Critical patent/CN113491103B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95—Computational photography systems, e.g. light-field imaging systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/92—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/92—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N5/926—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback by pulse code modulation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50—Control of the SSIS exposure
    • H04N25/57—Control of the dynamic range

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

根据本发明，即使在记录RAW图像数据时，摄像设备也将与选择的动态范围相对应的显像图像数据记录到RAW图像文件中。为此，该摄像设备包括：摄像单元；选择单元，用于选择动态范围；显像单元，用于对由摄像单元获得的RAW图像数据进行显像处理；以及控制单元，用于在将由摄像单元获得的RAW图像数据记录为RAW图像文件时进行控制，使得如果选择单元选择了第一动态范围，则通过显像单元对RAW图像数据进行用于第一动态范围的显像处理而获得的图像数据与RAW图像数据一起被记录为RAW图像文件，并且如果选择单元选择了第二动态范围，则通过显像单元对RAW图像数据进行用于第二动态范围的显像处理而获得的图像数据与RAW图像数据一起被记录为RAW图像文件。

Description

摄像设备及其控制方法和存储介质
技术领域
本发明涉及摄像设备及其控制方法和程序。
背景技术
近来的诸如数字照相机的摄像设备能够拍摄HDR图像并将HDR图像记录在记录介质上。HDR是高动态范围，并且是生成动态范围比SDR(标准动态范围)更宽的图像的技术。此外，RAW图像是指未显像的原始图像。
当记录HDR视频的内容时，该内容与指示该内容是否为HDR视频的标识信息一起记录(例如，专利文献l)。
引用列表
专利文献
专利文献l：日本特开2018-7194
发明内容
技术问题
通常的RAW图像文件可以包含作为显示图像的显像图像的JPEG压缩数据。然而，因为JPEG图像不对应于HDR图像质量，所以无法以HDR图像质量来保存该显示图像。因此，即使在HDR显示器上显示通过HDR拍摄的RAW图像时，也必须对该RAW图像进行一次显像，以检查具有HDR图像质量的图像。
考虑到以上问题做出本发明，并且本发明提供了如下技术，通过该技术，即使在支持诸如SDR和HDR的多个动态范围的摄像设备中记录RAW图像数据时，与所选动态范围相对应的显像图像数据也被记录在RAW图像文件中，因此，在回放RAW图像文件时也可以检查具有所选动态范围的图像。
解决问题的技术手段
为了解决上述问题，本发明的摄像设备例如具有以下布置。即，摄像设备包括：摄像部件；选择部件，用于选择动态范围；显像部件，用于对由所述摄像部件获得的RAW图像数据进行显像处理；以及控制部件，用于在将由所述摄像部件获得的RAW图像数据记录为RAW图像文件时进行控制，使得如果所述选择部件选择了第一动态范围，则通过所述显像部件对RAW图像数据进行用于所述第一动态范围的显像处理而获得的图像数据与RAW图像数据一起记录为RAW图像文件，以及如果所述选择部件选择了第二动态范围，则通过所述显像部件对RAW图像数据进行用于所述第二动态范围的显像处理而获得的图像数据与RAW图像数据一起记录为RAW图像文件。
本发明的有利效果
根据本发明，即使在支持诸如SDR和HDR的多种类型的动态范围的摄像设备中记录RAW图像数据时，与所选动态范围相对应的显像图像数据也被记录在RAW图像文件中，因此，例如当进行简单的显示(诸如文件列表显示)时，可以检查具有所选动态范围的图像。
此外，根据本发明，即使在支持诸如SDR和HDR的多种类型的动态范围的摄像设备中记录RAW图像数据时，与所选动态范围相对应的显像图像数据也被记录在RAW图像文件中。因此，例如当进行简单的显示(诸如文件列表显示)时，可以检查具有所选动态范围的图像。
另选地，当在支持多种类型的动态范围的摄像设备中记录多种类型的文件时，本发明可以防止管理的复杂性并保持回放兼容性。
通过以下结合附图的描述，本发明的其他特征和优点将更加清楚。注意，遍及附图，相同的附图标记表示相同或相似的部件。
附图说明
包含在说明书中并构成说明书的一部分的附图例示了本发明的实施例，并且与文字说明一起用来说明本发明的原理。
图1A是根据实施例的摄像/显示设备的外观图；
图1B是根据实施例的摄像/显示设备的外观图；
图2是示出根据实施例的摄像/显示设备的配置的框图；
图3是示出与外部设备的连接配置的图；
图4A-1是根据实施例的LV拍摄模式处理的流程图；
图4A-2是根据实施例的LV拍摄模式处理的流程图；
图4A-3是根据实施例的LV拍摄模式处理的流程图；
图4A-4是根据实施例的LV拍摄模式处理的流程图；
图4B-1是快速回看的流程图；
图4B-2是快速回看的流程图；
图5A是根据实施例的HDMI连接处理的序列图；
图5B是根据实施例的HDMI连接处理的序列图；
图5C是根据实施例的HDMI连接处理的序列图；
图6A-1是根据实施例的HDR拍摄菜单处理的流程图；
图6A-2是根据实施例的HDR拍摄菜单处理的流程图；
图6B-1是根据实施例的HDR拍摄菜单处理的流程图；
图6B-2是根据实施例的HDR拍摄菜单处理的流程图；
图7A是根据实施例的HDR拍摄处理的流程图；
图7B是根据实施例的HDR拍摄处理的流程图；
图8A是示出根据实施例的RAW文件的配置的图；
图8B是示出RAW文件中的ImageData(图像数据)区域的示例的图；
图8C是示出RAW文件中的ImageData区域的示例的图；
图8D是示出RAW文件中的ImageData区域的示例的图；
图8E是示出RAW文件中的ImageData区域的示例的图；
图9A是根据实施例的回放模式处理的流程图；
图9B是根据实施例的回放模式处理的流程图；
图9C是根据实施例的回放模式处理的流程图；
图9D是根据实施例的回放模式处理的流程图；
图9E-1是根据实施例的回放模式处理的流程图；
图9E-2是根据实施例的回放模式处理的流程图；
图9F是根据实施例的回放模式处理的流程图；
图9G是根据实施例的回放模式处理的流程图；
图9H是根据实施例的回放模式处理的流程图；
图10A是根据实施例的HDMI回放处理的流程图；
图10B是根据实施例的HDMI回放处理的流程图；
图11A是根据实施例的回放菜单处理的流程图；
图11B是根据实施例的回放菜单处理的流程图；
图12是根据实施例的显像处理的流程图；
图13是示出CxCy平面的图；
图14A是色调校正参数生成处理的流程图；
图14B是色调校正参数生成处理的流程图；
图15A是示出色调校正量的图；
图15B是示出色调校正量的图；
图16A是示出SDR的外观的示例的图；
图16B是示出HDR的外观的示例的图；
图17A是示出HEIF文件的配置的图；
图17B是示出HEIF文件中的ImageData区域的示例的图；
图17C是示出HEIF文件中的ImageData区域的示例的图；
图17D是示出HEIF文件中的ImageData区域的示例的图；
图18是示出JPEG文件的配置的图；
图19A是根据变型例的拍摄处理的流程图；以及
图19B是根据变型例的拍摄处理的流程图。
具体实施方式
下文中将参照附图详细描述实施例。注意，以下实施例并不意图限制本发明的范围。在实施例中描述了多个特征，但并不限于需要所有这些特征的发明，而是可以适当组合这些特征。此外，在附图中，对相同或相似的配置赋予相同的附图标记，并将省略其冗余描述。
图1A和图1B示出了作为根据本发明的设备的示例的数字照相机100的外观。图1A是数字照相机100的前立体图。图1B是数字照相机100的后立体图。参照图1A和图1B，显示单元28是设置在照相机背面的显示单元，并显示图像和各种信息。取景器外显示单元43是设置在照相机顶面的显示单元，并且显示用于照相机的各种设置值，诸如快门速度和f值。快门按钮61是用户用来发出拍摄指令的操作单元。模式开关60是用于在各种类型的模式之间切换的操作单元。端子罩40是用于保护连接器(未示出)(诸如用于将外部设备连接到数字照相机100的连接线缆)的罩。主电子拨盘71是包括在操作单元70中的旋转操作构件。例如，用户可以通过旋转主电子拨盘71来改变诸如快门速度或f值的设置值。电源开关72是用于开启和关闭数字照相机100的电源的操作构件。子电子拨盘73是包括在操作单元70中并用于进行诸如移动选择框和图像给送的操作的旋转操作构件。十字键74(四向键)包括在操作单元70中。用户可以按下十字键74的上、下、右和左部。按下十字键74可以进行与十字键74的按下部分相对应的操作。设置按钮75是包括在操作单元70中的按钮，并且主要用于决定选择项目。LV按钮76是包括在操作单元70中并用于在静止图像拍摄模式下开启和关闭实时取景(以下称为LV)的操作按钮。在运动图像拍摄模式下，该按钮用于发出开始或停止运动图像拍摄(记录)的指令。放大按钮77是包括在操作单元70中并用于在拍摄模式中开启和关闭实时取景显示中的放大模式以及在放大模式中改变放大率的操作按钮。在回放模式下，该按钮用作用于放大回放图像并增加放大率的放大按钮。缩小按钮78是包括在操作单元70中并用于减少所放大的回放图像的放大率并缩小显示图像的操作按钮。回放按钮79是包括在操作单元70中并且用于在拍摄模式与回放模式之间切换的操作按钮。在拍摄模式期间按下回放按钮79将转变到回放模式，以使显示单元28或外部设备300显示记录在记录介质200上的图像中的最新图像。根据来自***控制单元50的指令，通过致动器(未示出)使快速返回镜12上下移动。通信端子10允许数字照相机100与镜头侧(可拆卸)通信。目镜取景器16是观察取景器，用于通过观察聚焦屏13来检查通过镜头单元150获得的被摄体的光学图像的焦点和构图。盖202是容纳记录介质200的槽的盖。抓握部95是保持单元，其形状允许用户在保持数字照相机100时容易用他/她的右手进行抓握。
图2是示出根据本实施例的数字照相机100的布置的示例的框图。
参照图2，镜头单元150包括可更换镜头。
尽管透镜103通常由多个透镜构成，但是为了简单起见，图2仅示出了一个透镜作为透镜103。通信端子6是镜头单元150用来与数字照相机100侧进行通信的通信端子。通信端子10是数字照相机100用来与镜头单元150侧进行通信的通信端子。镜头单元150经由通信端子6和10与***控制单元50通信，并使内部透镜***控制电路4经由光阑驱动电路2控制光阑1，并通过经由AF驱动电路3移动透镜103的位置来调整焦点。
AE传感器17通过镜头单元150测量被摄体的明亮度。焦点检测单元11向***控制单元50输出散焦量信息。***控制单元50基于输入的散焦量信息，控制镜头单元150进行相位差AF。
在曝光、实时取景拍摄和运动图像拍摄时，根据来自***控制单元50的的指令，通过致动器(未示出)使快速返回镜12(以下称为反射镜12)上下移动。反射镜12是用于在目镜取景器16侧与摄像单元22侧之间切换来自透镜103的入射光束的反射镜。反射镜12通常用来反射光束，以将其引导至目镜取景器16。在拍摄或实时取景显示时，反射镜12向上翻转并从光束退避(反射镜上升)以将光束引导至摄像单元22。另外，反射镜12的中心部分是半透半反射镜以透射部分光。反射镜12透射部分光束以使其入射到用于进行焦点检测的焦点检测单元11。
用户(摄影者)可以通过经由五棱镜14和目镜取景器16观察聚焦屏13，来检查通过镜头单元150获得的被摄体的光学图像的焦点和构图。
快门101是可以在***控制单元50的控制下自由控制摄像单元22的曝光时间的焦平面快门。
摄像单元22是由将光学图像转换成电信号的CCD或CMOS器件形成的图像传感器。颜色分量R、G和B的滤波器在摄像单元22的摄像面上二维地周期性地布置。在彼此相邻的2×2滤波器中，G分量滤波器被布置为具有对角关系的两个滤波器，R分量滤波器和B分量滤波器被布置为剩下的两个滤波器。这些2×2滤波器排列在摄像单元22的摄像面上。该阵列一般称为拜耳阵列。因此，由从摄像单元22输出的信号(模拟信号)表示的图像也是具有拜耳阵列的像素信号。A/D转换器23将从摄像单元22输出的1像素模拟信号转换为例如10位数字信号。注意，该阶段的图像数据是如上所述的拜耳阵列图像数据(一个像素具有一个分量，且每个分量具有10位)，并且是未显像的图像数据。因此，该阶段的图像数据称为RAW图像数据。注意，补偿缺陷像素后的拜耳阵列图像数据也可以称为RAW图像数据。还要注意，在本实施例中，A/D转换器23将模拟信号转换为10位数字数据，但位数没有特别限制，只要位数超过8位即可。位数越多，表达的色调就越高。
图像处理单元24对来自A/D转换器23的数据或来自存储器控制单元15的数据进行尺寸调整处理(诸如预定像素插值或缩小)和颜色转换处理。另外，图像处理单元24使用拍摄的图像数据进行预定的算术处理。***控制单元50然后基于获得的算术结果进行曝光控制和聚焦控制。通过该操作，***控制单元50进行TTL(通过镜头)AF(自动聚焦)处理、TTLAE(自动曝光)处理和TTL EF(电子闪光灯预发光)处理。图像处理单元24还通过使用拍摄的图像数据进行预定算术处理，并基于获得的算术结果执行TTL AWB(自动白平衡)处理。此外，图像处理单元24在***控制单元50的控制下对图像数据进行编码/解码。该编码包括JPEG和HEVC。JPEG用于对每个颜色分量具有8位的图像数据进行编码，而HEVC用于对每个颜色分量多于8位的图像数据进行编码。
来自A/D转换器23的输出数据经由图像处理单元24和存储器控制单元15写入存储器32，或经由存储器控制单元15直接写入存储器32。存储器32存储通过摄像单元22获得并通过A/D转换器23转换成数字数据的图像数据、以及要显示在显示单元28或外部设备300上的图像数据。存储器32具有足够大的存储容量以存储预定数量的静止图像、以及持续预定时间的运动图像和声音。
存储器32还用作用于图像显示的存储器(视频存储器)。D/A转换器19将存储在存储器32中的用于图像显示的数据转换成模拟信号并将其提供给显示单元28。以此方式，经由D/A转换器19，通过显示单元28来显示写入存储器32的用于显示的图像数据。显示单元28在诸如LCD的显示装置上显示与来自D/A转换器19的模拟信号相对应的图像。D/A转换器19将经过A/D转换器23的一次A/D转换并存储在存储器32中的数字信号转换成模拟信号，并依次将这些信号传输到显示单元28以显示图像，从而用作电子取景器并进行直通图像显示(实时取景显示)。
取景器内液晶显示单元41经由取景器内显示单元驱动电路42来显示指示当前进行自动聚焦的聚焦点的框(AF框)、指示照相机的设置状态的图标等。取景器外显示单元43经由取景器外显示单元驱动电路44显示照相机的各种设置值，诸如快门速度和f值。
数字输出I/F 90以数字信号的形式将存储在存储器32中的用于显示的图像数据直接提供给外部设备300。例如，数字输出I/F 90根据符合(高清晰度多媒体接口)标准的通信协议，以流形式输出运动图像数据。外部设备300因此显示写入存储器32中的用于显示的图像数据。
非易失性存储器56是能够电擦除和记录数据的存储器。例如，EEPROM等用作非易失性存储器56。非易失性存储器56存储用于***控制单元50的操作的常数、程序等。这种情况下的程序是用于执行稍后在本实施例中描述的各种流程图的程序。
***控制单元50是具有至少一个处理器的控制器，并控制整个数字照相机100。***控制单元50通过执行记录在上述非易失性存储器56上的程序来实现(稍后描述的)本实施例中的各个处理。***存储器52是RAM。在***存储器52中展开用于***控制单元50的操作的常数、变量、从非易失性存储器56读出的程序等。***控制单元50还通过控制存储器32、D/A转换器19、数字输出I/F 90、显示单元28等，来进行显示控制。此外，***控制单元50将拍摄的图像数据转换成要记录在记录介质200上的形式，并进行记录控制，以经由记录介质I/F 18将图像数据记录在记录介质200上。
***计时器53是时间测量单元，其用于测量用于各种类型的控制的时间和内置计时器的时间。
模式开关60、第一快门开关62、第二快门开关64和操作单元70是用于向***控制单元50输入各种类型的操作指令的操作部件。
模式开关60将***控制单元50的操作模式切换为例如静止图像记录模式、运动图像拍摄模式和回放模式中的一个。静止图像记录模式包括以下模式：自动拍摄模式、自动场景判别模式、手动模式、光圈优先模式(Av模式)和快门速度优先模式(Tv模式)。静止图像记录模式还包括具有特定于拍摄场景的拍摄设置的各种类型的场景模式、程序AE模式和自定义模式。模式开关60直接将操作模式切换为这些模式中的一个。另选地，在利用模式开关60暂时切换到拍摄模式的列表画面后，用户可以选择多个显示模式中的一个，并通过使用其他操作部件切换到所选择的模式。同样，运动图像拍摄模式可以包括多种模式。
由用户操作的快门按钮61包括第一快门开关62和第二快门开关64。当用户将快门按钮操作一半，即进行所谓的半按下操作(预拍摄指令)时，接通第一快门开关62以生成第一快门开关信号SWl 61。在接收到第一快门开关信号SW1时，***控制单元50开始诸如AF(自动聚焦)处理、AE(自动曝光)处理、AWB(自动白平衡)处理和EF(电子闪光灯预发光)处理的操作。当用户完全操作快门按钮61，即进行所谓的全按下操作(拍摄指令)时，接通第二快门开关64以生成第二快门开关信号SW2。***控制单元50响应于第二快门开关信号SW2，开始从摄像单元22读出信号到将图像数据写入记录介质200的一系列拍摄处理。
当用户选择性地操作显示单元28或外部设备300上显示的各种功能图标时，操作单元70的各个操作构件被分配与场景对应的适当功能并且用作各种功能按钮。功能按钮的示例是结束按钮、返回按钮、图像给送按钮、跳转按钮、缩小按钮和属性改变按钮。例如，当按下菜单按钮70e时，显示单元28或外部设备300显示可以进行各种设置的菜单画面。用户可以通过使用显示单元28或外部设备300上显示的该菜单画面、用于上、下、左和右的四向按钮以及设置按钮，来直观地进行各种设置。
注意，根据本实施例的显示单元28具有SDR质量图像显示功能，即，可以以8位(256个色调)显示颜色分量R、G和B中的各个。还要注意，当外部设备300连接到数字照相机100时，代替显示单元28，外部设备300被设置为拍摄图像或实时图像的输出目标装置。此外，当用户通过操作操作单元70来明确选择显示单元28和外部设备300中的一个时，被选择的一个被设置为输出目标装置。
操作单元70是用作用于接受来自用户的操作的输入单元的操作构件。操作单元70至少包括以下操作单元：快门按钮61、主电子拨盘71、电源开关72、子电子拨盘73、十字键74、设置按钮75、LV按钮76、放大按钮77、缩小按钮78和回放按钮79。十字键74是用户可以按下十字键74的上、下、右和左部的方向按钮。在本实施例中，十字键74被说明为一体化的操作单元，但是上、下、右、左按钮也可以是独立的按钮。在以下说明中，上部或下部将被称为上/下键，而左部或右部将被称为左/右键。操作单元70还包括以下操作单元。
AF-ON按钮70b是包括在操作单元70中的按钮开关。用户可以通过按下AF-ON按钮70b来指定AF的执行。AF-ON按钮70b的按下方向平行于从透镜103入射到摄像单元22的被摄体光的方向(光轴)。
快速设置按钮70c(以下称为Q按钮70c)是包括在操作单元70中的下压按钮开关。当按下Q按钮70c时，显示作为在各个操作模式中可设置的设置项目列表的快速设置菜单。例如，在实时取景拍摄的拍摄待机状态下按下Q按钮70c时，诸如电子前帘快门、监视器的明亮度、LV画面的WB、两点放大、无声拍摄的设置项目以这些设置项目叠加在LV上的方式以列表的形式显示成一列。用户通过使用上/下键选择快速设置菜单中的任意项目并按下设置按钮。用户因此可以改变与所选择的设置项目相对应的设置并且前进到与该项目相对应的操作模式。
活动框开关按钮70d是包括在操作单元70中的按钮开关。当在两点放大处理(稍后描述)中按下活动框开关按钮70d时，可以切换两个放大部分作为活动放大位置(框)。此外，对应于操作模式，活动框切换按钮70d被分配不同的功能。当在回放模式中按下活动框切换按钮70d时，可以对显示的图像赋予保护属性。
菜单按钮70e是包括在操作单元70中的按钮开关，并且可以进行各种设置的菜单画面被显示在显示单元28或外部设备300上。
功能按钮70f是包括在操作单元70中的三个按钮开关，并且被分配不同的功能。功能按钮70f中的各个布置在可以由保持抓握部95的右手的手指(中指、无名指或小指)操作的位置。按下方向平行于从透镜103入射到摄像单元22的被摄体光的方向(光轴)。
信息按钮70g是包括在操作单元70中并且用于切换各种信息显示操作的按钮开关。
电源控制单元80包括例如电池检测电路、DC-DC转换器和用于切换要被供应电力的块的开关电路，并且检测电池的存在/不存在、电池类型和电池剩余电量。基于检测结果和来自***控制单元50的指令，电源控制单元80控制DC-DC转换器，并在所需的时间段内向包括记录介质200的单元提供所需的电压。
电源单元30由一次电池(诸如碱性电池或锂电池)、二次电池(诸如NiCd电池、NiMH电池或Li电池)、AC适配器等构成。记录介质I/F 18是与诸如存储卡或硬盘的记录介质200的接口。记录介质200是用于记录拍摄图像的记录介质(诸如存储卡)，并由半导体存储器、磁盘等形成。
通信单元54无线地或经由有线线缆连接到外部设备，并且发送和接收视频信号和音频信号。通信单元54还可以连接到无线LAN(局域网)和因特网。通信单元54可以发送由摄像单元22拍摄的图像(包括直通图像)和记录在记录介质200上的图像，并且可以从外部设备接收图像数据和其他各种信息。
姿势检测单元55检测数字照相机100在重力方向上的姿势。可以基于由姿势检测单元55检测到的姿势来辨别由摄像单元22拍摄的图像是在水平方向还是垂直方向保持数字照相机100时拍摄的图像。***控制单元50可以将与由姿势检测单元55检测到的姿势相对应的方向信息添加到由摄像单元22拍摄的图像的图像文件中，或者在旋转图像时记录该图像。作为姿势检测单元55，可以使用加速度传感器、陀螺仪传感器等。
注意，操作单元70还包括可以检测对显示单元28的触摸的触摸面板70a。触摸面板70a和显示单元28可以一体化。例如，触摸面板70a被配置为防止光的透射阻碍显示单元28上的显示，并且安装在显示单元28的显示面的上层。触摸面板70a上的输入坐标与显示单元28上的显示坐标相关联。这可以形成允许用户直接操作显示单元28上显示的画面的GUI(图形用户界面)。***控制单元50可以检测对触摸面板70a的以下操作或其状态：
·用未对面板触摸的手指或笔在触摸面板70a上新触摸，即开始触摸(以下称为“触及”)；
·用户正在用他/她的手指或笔触摸触摸面板70a的状态(以下称为“触摸持续”)；
·在用户用他/她的手指或笔触摸触摸面板70a的同时移动手指或笔(以下称为“触摸移动”)；
·从触摸面板70a释放手指或笔，即结束触摸(以下称为“触摸停止”)；以及
·没有任何东西触摸触摸面板70a的状态(以下称为“未触摸”)。
在检测到“触及”时，***控制单元50同时检测到“触摸持续”。在“触及”之后，***控制单元50通常持续检测到“触摸持续”，除非检测到“触摸停止”。当检测到“触摸持续”时，***控制单元50也检测“触摸移动”。即使当***控制单元50检测到“触摸持续”时，该单元也不会检测到“触摸移动”，除非触摸位置移动。在检测到触摸了触摸面板的所有手指或笔的“触摸停止”时，***控制单元50检测到“未触摸”。
指示这种操作或状态的信息以及手指或笔在触摸面板70a上触摸的位置的坐标经由内部总线被通知给***控制单元50。***控制单元50基于通知的信息确定已经在触摸面板70a上进行的特定操作(触摸操作)。***控制单元50可以基于位置坐标的变化，针对触摸面板70a上的各个垂直分量和各个水平分量，来确定包括在触摸面板上移动的手指或笔的移动方向的“触摸移动”。如果检测到预定距离的“触摸移动”，则***控制单元50确定为进行了滑动操作。在触摸触摸面板70a的同时将手指快速移动一定距离然后释放手指的操作被称为“轻拂”。换句话说，“轻拂”是在触摸面板70a上快速描画就好像用手指轻拂了触摸面板70a的操作。在检测到预定速度以上且预定距离以上的“触摸移动”并且连续检测到“触摸停止”时，***控制单元50可以确定为用户进行了“轻拂”(可以确定在滑动操作之后进行了“轻拂”)。此外，同时触摸多个部分(例如两点)并使触摸位置彼此靠近的触摸操作称为“捏合”，使触摸位置彼此远离的触摸操作称为“捏分”。“捏分”和“捏合”通常称为捏操作(或简称为捏)。作为触摸面板70a，可以使用以下任何一种类型的触摸面板：电阻膜型、电容型、表面声波型、红外线型、电磁感应型、图像识别型、光电传感器型等。一些类型被设计为通过检测对触摸面板的接触来检测触摸。其他类型被设计为通过检测手指或笔与触摸面板的接近来检测触摸。可以使用这些类型中的任何一种。
注意，本发明不限于摄像设备主体，还适用于通过有线或无线通信与摄像设备(包括网络照相机)进行通信并远程控制摄像设备的控制设备。远程控制摄像设备的设备的示例是智能电话、平板PC和台式PC。基于在控制设备侧进行的操作或处理，控制设备可以通过将用于使摄像设备进行各种操作或设置的命令通知给摄像设备来远程控制摄像设备。还可以经由有线或无线通信接收由摄像设备拍摄的实时取景图像，并将接收到的图像显示在控制设备侧。
注意，通过以将本发明应用于数字照相机的情况为例说明了实施例，但是本发明不限于此。例如，本发明适用于包括显示单元的任何设备，诸如PDA、便携式电话终端、便携式图像查看器、包括显示器的打印机设备、数字相框、音乐播放器、游戏机、或电子书阅读器。
图3是示出数字照相机100和外部设备300的连接示例的图。当数字照相机100和外部设备300通过连接线缆302连接时，关闭数字照相机100的显示单元28，并且外部设备300的显示器301显示已经在数字照相机100上显示的内容。
图4A-1至图4A-4是示出数字照相机100的LV拍摄模式处理的流程图。该处理是通过在***存储器52中展开记录在非易失性存储器56中的程序并由***控制单元50执行该程序来实现的。
首先，将说明根据本实施例的HDR拍摄模式和SDR拍摄模式。在本实施例的数字照相机100中，可以通过来自用户的菜单操作等来设置HDR拍摄模式或SDR拍摄模式。这些模式允许用户设置最终获得HDR质量的图像数据还是SDR质量的图像数据，并根据设置的模式在以下处理中进行各种控制操作。在下文中，在某些情况下将在HDR拍摄模式和SDR拍摄模式下进行拍摄称为“HDR拍摄”和“SDR拍摄”。但是，如后所述，也可以设置为仅使用RAW格式进行记录，因此在HDR拍摄模式下进行拍摄时，不一定要记录HDR图像。
在S401中，***控制单元50确定用户在操作单元70上进行的设置是否为HDR拍摄模式。如果确定为设置了HDR拍摄模式，则***控制单元50使处理前进到S402，并且如果确定为设置了SDR拍摄模式，则使处理前进到S422。
在S402中，***控制单元50确定外部设备300是否连接到数字照相机100。如果确定为连接了外部设备300，则***控制单元50使处理前进到S403，并且如果确定为未连接外部设备300，则使处理前进到S404。
在S403中，***控制单元50进行连接数字照相机100和外部设备300的处理。然后，***控制单元50使处理前进到S404。该连接处理的细节将在后面参照图5A至图5C进行描述。请注意，如果外部设备支持HDR连接，则进行HDR连接，否则进行SDR连接。
在S404中，***控制单元50通过使用图像处理单元24对由摄像单元22拍摄并由A/D转换器23转换为数字信号的实时RAW图像数据进行HDR质量显像处理。通过HDR质量显像处理获得的图像将称为HDR图像。
注意，本实施例的HDR图像数据是如下数据，其中一个像素由三个分量(例如，Luv或YCbCr)形成，并且在本实施例中各个分量由10位(1024个色调)表示。将HDR图像的伽马曲线(例如，ITU-R的推荐BT.2100的PQ或HLG)应用于HDR图像数据。
在S405中，***控制单元50确定用于显示LV图像的装置(显示单元28或外部设备300)是否支持HDR。如果确定为装置不支持HDR，则***控制单元50使处理前进到S406，并且如果确定为装置支持HDR，则使处理前进到S409。
在S406中，***控制单元50检查HDR辅助显示设置。如果确定为设置了辅助1，则***控制单元50使处理前进到S407，并且如果设置了辅助2，则使处理前进到S408。辅助1是用于检查HDR图像的高亮度区域的设置，并且进行将许多色调(代码值)分配给HDR图像的高亮度范围的处理。辅助2是用于检查HDR图像的中间亮度范围的设置，并且进行将许多色调分配给HDR图像的中间亮度区域的处理。
在S407中，***控制单元50根据辅助1的设置，对通过S404中的显像处理获得的HDR图像数据进行HDR→SDR的转换处理。另外，***控制单元50显示通过进行到适合于输出目标装置(显示单元28或外部设备300)的尺寸的尺寸调整处理而获得的SDR质量LV图像数据，并且使处理前进到S410。
在S408中，***控制单元50根据辅助2的设置，对通过S404中的显像处理获得的HDR图像数据进行HDR→SDR的转换处理。另外，***控制单元50显示通过进行到适合于输出目标装置(显示单元28或外部设备300)的尺寸的尺寸调整处理而获得的SDR质量LV图像数据，并且使处理前进到S410。
S407和S408中的SDR质量图像数据(SDR图像数据)是每一个分量具有8位的图像数据。SDR图像的伽马曲线(例如，sRGB标准的伽马曲线)应用于SDR质量图像数据。注意，sRGB标准的伽马曲线一般是暗部是直的、而明部是2.4次幂的曲线，但也可以仅使用作为2.2次幂的曲线。
在S409中，***控制单元50进行将通过S404中的显像处理获得的HDR图像数据的尺寸调整为适合于输出目标装置(显示单元28或外部设备300)的尺寸的处理，显示调整尺寸后的HDR质量图像(以下称为HDL_LV图像)作为实时图像，并将处理前进到S410。
在S410中，***控制单元50确定菜单显示按钮70e是否被按下。如果确定为按钮被按下，则***控制单元50使处理前进到S411，并且如果确定为按钮没有被按下，则使处理前进到S412。在S411中，***控制单元50进行拍摄菜单处理并且使处理前进到S412。该拍摄菜单处理的细节将在后面参照图6A-1和图6A-2以及图6B-1和图6B-2进行描述。
在S412中，***控制单元50确定信息显示按钮70g是否被按下。如果确定为按钮被按下，则***控制单元50使处理前进到S413，并且如果确定为按钮没有被按下，则使处理前进到S414。在S413中，***控制单元50切换拍摄信息的显示，并使处理进入S414。拍摄信息的示例是直方图和高光警告表(highlight warning table)。
在S414中，***控制单元50基于是否接收到信号SWl来确定快门按钮61是否被半按下。如果确定为没有半按下按钮，则***控制单元50使处理前进到S420，并且如果确定为按钮被半按下，则使处理前进到S415。
在S415中，***控制单元50进行参照图2说明的AE/AF处理，并使处理前进到S416。在S416中，***控制单元50基于是否接收到信号SW2来确定快门按钮61是否被完全按下。如果确定为按钮没有被完全按下，则***控制单元50使处理前进到S417，并且如果确定为按钮被完全按下，则将处理前进到S418。在S417中，***控制单元50确定快门按钮61的半按下状态是否被保持。如果保持半按下状态，则***控制单元50使处理返回到S415，并且如果确定为未保持半按下状态，则使处理前进到S420。在S418中，***控制单元50进行HDR拍摄处理，并将与预设记录格式相对应的图像数据文件记录在记录介质上。图8A示出了要记录的文件的数据结构。然后，***控制单元50使处理前进到S419。请注意，稍后将参照图7A和图7B描述该HDR拍摄处理的细节。在S419中，***控制单元50进行快速回看显示处理，并且使处理前进到S420。该快速回看显示处理的细节将在后面参照图4B-1和图4B-2进行描述。
在S420中，***控制单元50确定LV按钮76是否被按下。如果确定为按钮被按下，则***控制单元50使处理前进到S421，并且如果确定为按钮没有被按下，则将处理前进到S422。
在S421中，***控制单元50通过HEVC(H.265)压缩来压缩在S404中显像为HDR图像质量的图像数据(一个像素具有三个分量、且每个分量具有10位的图像数据)，将压缩数据记录为HDR运动图像文件，并将处理前进到S438。
在S422中，***控制单元50确定外部设备300是否连接到数字照相机100。如果确定为连接了外部设备300，则***控制单元50使处理前进到S423，并且如果确定为未连接外部设备300，则使处理前进到S424。在S423中，***控制单元50进行连接数字照相机100和外部设备300的处理，并且使处理前进到S424。该连接处理的细节将在后面参照图5A至图5C进行描述。请注意，由于设置了SDR拍摄模式，因此外部设备通过SDR连接进行连接。
在S424中，***控制单元50使图像处理单元24将由摄像单元22拍摄并由A/D转换器23转换成数字信号的图像显像为SDR图像质量(一个像素具有三个分量，且每个分量具有8位(256个色调)，并将处理前进到S425。注意，在下文中，SDR质量显像图像将被称为SDR图像。
在S425中，***控制单元50通过进行将通过S424中的显像处理获得的SDR图像的尺寸调整为适合于输出目的地装置(显示单元28或外部设备300)的分辨率的尺寸的处理来生成SDR质量的实时图像(SDR_LV图像)，并显示所生成的SDR_LV图像。
在S426中，***控制单元50确定菜单显示按钮70e是否被按下。如果确定为按钮被按下，则***控制单元50使处理前进到S427，并且如果确定为按钮没有被按下，则将处理前进到S428。在S427中，***控制单元50进行拍摄菜单处理，并使处理前进到S428。S427中的该拍摄菜单处理的细节将在后面参照图6A-1和图6A-2以及图6B-1和图6B-2进行描述。
在S428中，***控制单元50确定信息显示按钮70g是否被按下。如果确定为按钮被按下，则***控制单元50使处理前进到S429，并且如果确定为按钮没有被按下，则将处理前进到S430。在S429中，***控制单元50切换拍摄信息的显示，并使处理进入S430。拍摄信息的示例是直方图和高光警告表。
在S430中，***控制单元50确定快门按钮61是否处于半按下状态。如果确定为按钮未处于半按下状态，则***控制单元50使处理前进到S436，并且如果确定为按钮处于半按下状态，则将处理前进到S431。
在S431中，***控制单元50进行参照图2说明的AF/AE处理，并且使处理前进到S432。在S432中，***控制单元50基于是否接收到信号SW2来确定快门按钮61是否处于全按下状态。如果确定为按钮未处于全按下状态，则***控制单元50使处理前进到S433，并且如果确定为按钮处于全按下状态，则使处理前进到S434。在S433中，***控制单元50基于是否接收到信号SW1来确定是否保持快门按钮61的半按下状态。如果确定为保持半按下状态，则***控制单元50将处理返回到S431，并且如果确定为未保持半按下状态，则使处理前进到S436。
在S434中，***控制单元50进行SDR拍摄处理并且使处理前进到S435。在该SDR拍摄处理中，***控制单元50以SDR图像质量对通过SDR拍摄获得的RAW图像数据进行显像，通过以JPEG对SDR质量图像进行编码来生成JPEG图像数据，并将该数据作为具有JPEG格式的JPEG文件记录在记录介质上。如果作为记录设置，设置了仅将SDR图像记录为JPEG文件，则仅记录JPEG文件。如果作为记录设置，设置了记录JPEG文件和RAW图像文件二者，则记录JPEG文件，并将通过对通过SDR拍摄获得的RAW图像数据进行编码而获得的数据和JPEG图像数据记录在记录介质上，作为具有图8A所示的RAW图像文件格式的RAW图像文件。在该RAW图像文件中，图8A所示的数据结构中的ImageData 809具有图8B所示的格式。即，用于显示的各尺寸图像以8位精度通过JPEG编码，并且编码数据被整合并存储为一个文件。然后，在S435中，***控制单元50进行快速回看显示处理，并且使处理前进到S436。该快速回看显示处理的细节将在后面参照图4B-1和图4B-2进行描述。
在S436中，***控制单元50确定LV按钮76是否被按下。如果确定为按钮被按下，则***控制单元50使处理前进到S437，并且如果确定为按钮没有被按下，则将处理前进到S438。在S437中，***控制单元50通过H264压缩来压缩通过S425中的SDR质量显像处理获得的SDR图像，将压缩图像记录为SDR运动图像文件，并且使处理前进到S438。
在S438中，***控制单元50确定回放按钮79是否被按下。如果确定为回放按钮79被按下，则***控制单元50使处理前进到S439，并且如果确定为回放按钮79没有被按下，则将处理前进到S440。在S439中，***控制单元50进行回放模式处理并将处理前进到S440。该回放模式处理的细节将在后面参照图9A至图9H和图10A和图10B进行描述。
在S440中，***控制单元50确定是否存在LV模式终止指令。如果确定为不存在LV模式终止指令，则***控制单元50将处理返回到S401，并且如果确定为存在终止指令，则终止处理。
图4B-1和图4B-2是示出***控制单元50的快速回看显示处理的流程图。该处理是通过在***存储器52中展开记录在非易失性存储器56中的程序并由***控制单元50执行该程序来实现的。
在S451中，***控制单元50确定是否设置了快速回看显示。如果确定为设置了快速回看显示，则***控制单元50使处理前进到S452，并且如果确定为没有设置快速回看显示，则终止处理。
在S452中，***控制单元50确定是否在HDR拍摄模式下进行拍摄。如果确定为在HDR拍摄模式下进行拍摄，则***控制单元50使处理进入S453，并且如果确定为在SDR拍摄模式下进行拍摄，则使处理进入S460。
在S453中，***控制单元50确定用于快速回看显示的装置(显示单元28或外部设备300)是否支持HDR。如果确定为装置不支持HDR，则***控制单元50使处理进入S454，并且如果确定为装置支持HDR，则使处理进入S457。
在S454中，***控制单元50确定是否通过RAW静止图像拍摄进行拍摄。如果确定为通过RAW静止图像拍摄进行拍摄，则***控制单元50使处理进入S455，并且如果确定为通过HEIF静止图像拍摄进行拍摄，则使处理进入S456。
在S455中，***控制单元50通过与S406至S408中相同的处理对HDR RAW图像中的用于显示的HDR图像828进行HDR→SDR转换，将图像尺寸调整为适合于输出目标装置(显示器单元28或外部设备300)的尺寸，以SDR图像质量显示图像，并将处理前进到S463。
在S456中，***控制单元50通过与S406至S408中相同的处理对HEIF图像中的用于显示的HDR图像进行HDR→SDR转换，将图像尺寸调整为适合于输出目标装置(显示单元28或外部设备300)的尺寸，以SDR图像质量显示图像，并将处理前进到S463。
在S457中，***控制单元50确定是否通过RAW静止图像拍摄进行拍摄。如果确定为通过RAW静止图像拍摄进行拍摄，则***控制单元50使处理进入S458，并且如果确定为通过HEIF静止图像拍摄进行拍摄，则将处理进行到S459。在S458中，***控制单元50将HDR RAW图像中的用于显示的HDR图像828的尺寸调整为适合于输出目标装置(显示单元28或外部设备300)的尺寸，以HDR图像质量显示图像，并使处理进入S463。在S459中，***控制单元50将HEIF图像中的用于显示的HDR图像的尺寸调整为适合于输出目标装置(显示单元28或外部设备300)的尺寸，以HDR图像质量显示图像，并使处理进入S463。
在S460中，外部设备300确定是否通过RAW静止图像拍摄进行拍摄。如果确定为通过RAW静止图像拍摄进行拍摄，则外部设备300使处理前进到S461，并且如果确定为通过HEIF静止图像拍摄进行拍摄，则使处理前进到S462。在S461中，***控制单元50将SDR RAW图像中的用于显示的SDR图像823的尺寸调整为适合于输出目标装置(显示单元28或外部设备300)的尺寸，以SDR图像质量显示图像，并使处理进入S463。在S462中，***控制单元50将JPEG图像中的用于显示的SDR图像的尺寸调整为适合于输出目标装置(显示单元28或外部设备300)的尺寸，以SDR图像质量显示图像，并且使处理前进到S463。
在S463中，***控制单元50确定快门按钮61是否被按下。如果确定为没有按下按钮，则***控制单元50使处理进入S464，并且如果确定为按钮被按下，则终止处理。
在S464中，***控制单元50确定是否经过了设置为快速回看显示时间的时间。如果确定为尚未经过该时间，则***控制单元50使处理返回到S463，并且如果确定为经过了该时间，则终止处理。
图5A是示出当数字照相机100和外部设备300被连接时数字照相机100和外部设备300的控制过程的序列图。将通过假设数字照相机100和外部设备300通过HDMI连接进行连接来进行说明。
在S501中，***控制单元50指示数字输出I/F 90开始发送+5V信号。结果，数字输出I/F 90开始发送+5V信号。发送的+5V信号通过连接线缆302的+5V信号线(未示出)被发送到外部设备300。外部设备300接收连接线缆302的+5V信号，并且使处理前进到S502。
在S502中，外部设备300确定数字照相机100已经确认了外部设备300的连接，并且使处理前进到S503。
在S503中，外部设备300开始从连接线缆302的HPD信号线(未示出)发送HPD信号。数字照相机100的数字输出I/F 90经由连接线缆302接收所发送的HPD信号。在接收到HPD信号时，数字输出I/F 90将HPD接收通知给***控制单元50。
在S504中，***控制单元50通过HPD的通知检测来自外部设备300的连接响应，并且使处理前进到S505。
在S505中，***控制单元50控制数字输出I/F 90从连接线缆302发送EDID请求信号。发送的EDID请求信号通过连接线缆302的EDID信号线(未示出)发送到外部设备300。外部设备300接收该EDID请求信号并且使处理前进到S506。
在S506中，外部设备300从连接线缆302的EDID信号线(未示出)发送EDID。数字照相机100的数字输出I/F 90经由连接线缆302接收该EDID。在接收到EDID时，数字输出I/F90将EDID的接收通知给***控制单元50。
在S507中，***控制单元50接收到EDID接收的通知，并指示数字输出I/F 90将在S506中接收到的EDID复制到存储器32中。在该复制完成后，***控制单元50分析在存储器32中展开的EDID，确定外部设备300可接受的视频信号的性能，并使处理进入S508。
在S508中，如果主体设置是HDR有效并且在S507中确定的外部设备300可接受的视频信号的性能对应于HDR信号，则***控制单元50确定向外部设备300输出HDR信号，在其他情况下确定输出SDR信号，并将处理前进到S509。
在S509中，***控制单元50指示数字输出I/F 90开始发送在S508中确定的HDR或SDR视频信号。已经接收到该视频信号发送开始指令的数字输出I/F 90开始通过连接线缆302发送视频信号，并且使处理前进到S510。
在S510中，数字照相机100将视频信号输出到连接线缆302的TMDS信号线(未示出)。外部设备300经由连接线缆302的TMDS信号线(未示出)接收视频信号，并且使处理前进到S511。
在S511中，外部设备300分析在S510中接收到的视频信号，将显示器301的驱动条件切换到能够显示视频信号的设置，并且使处理前进到S512。在S512中，外部设备300在外部设备300的显示器301上显示在S510中接收到的视频信号。
图5B是示出将数字照相机100和外部设备300的视频输出从SDR图像切换到HDR图像的处理的序列图。
在该序列中，假设在参照图5A说明的序列中完成数字照相机100和外部设备300之间的连接。
在S521中，***控制单元50指示数字输出I/F 90发送SDR视频信号，并且使处理前进到S522。
在S522中，数字照相机100将SDR视频信号输出到连接线缆302的TMDS信号线(未示出)。外部设备300经由连接线缆302的TMDS信号线(未示出)接收SDR视频信号，并使处理进入S523。
在S523中，外部设备300在外部设备300的显示器301上显示在S522中接收到的SDR视频。
当数字照相机100正在输出SDR信号时，外部设备300的显示器301通过重复S521至S523来显示SDR图像。
当数字照相机100将输出到外部设备300的视频从SDR图像切换为HDR图像时，执行从S524开始的处理。
在S524中，***控制单元50指示数字输出I/F 90停止SDR视频信号，并且使处理前进到S525。
在S525中，***控制单元50停止向连接线缆302的TMDS信号线(未示出)的视频信号。外部设备300停止经由连接线缆302的TMDS信号线(未示出)接收SDR视频信号，并且使处理前进到S526。
在S526中，因为对来自数字照相机100的视频的接收已经停止，所以外部设备300停止在外部设备300的显示器301上显示视频。
在S527中，***控制单元50指示数字输出I/F 90发送HDR视频信号，并且使处理前进到S528。
在S528中，***控制单元50将HDR视频信号输出至连接线缆302的TMDS信号线(未示出)。外部设备300经由连接线缆302的TMDS信号线(未示出)接收HDR视频信号，并且使处理前进到S529。
在S529中，外部设备300分析在S528中接收到的视频信号，将显示器301的驱动条件切换到能够显示HDR视频信号的设置，并且使处理前进到S530。
在S530中，外部设备300在外部设备300的显示器301上显示在S528中接收的HDR视频信号。
从S529到S530的处理时间根据外部设备300的性能而变化，因此在显示视频之前大约需要1到5秒。
图5C是示出将数字照相机100和外部设备300的视频输出从HDR图像切换到SDR图像的处理的序列图。
在该序列中，假设在参照图5A说明的序列中完成数字照相机100和外部设备300之间的连接。
在S541中，***控制单元50指示数字输出I/F 90发送HDR视频信号，并且使处理前进到S542。在S542中，***控制单元50将HDR视频信号输出到连接线缆302的TMDS信号线(未示出)。此外，外部设备300经由连接线缆302的TMDS信号线(未示出)接收HDR视频信号，并将处理前进到S543。
在S543中，外部设备300在外部设备300的显示器301上显示在S542中接收到的HDR视频。
当数字照相机100正在输出HDR信号时，外部设备300的显示器301通过重复S541至S543来显示HDR信号。
当数字照相机100将输出到外部设备300的视频从HDR图像切换为SDR图像时，执行从S544开始的处理。
在S544中，***控制单元50指示数字输出I/F 90停止HDR视频信号，并且使处理前进到S545。在S545中，***控制单元50停止向连接线缆302的TMDS信号线(未示出)的视频信号。外部设备300停止经由连接线缆302的TMDS信号线(未示出)接收HDR视频信号，并且使处理前进到S546。
在S546中，因为对来自数字照相机100的视频的接收已经停止，所以外部设备300停止在外部设备300的显示器301上显示视频。
在S547中，***控制单元50指示数字输出I/F 90发送SDR视频信号，并且使处理前进到S548。
在S548中，***控制单元50将SDR视频信号输出到连接线缆302的TMDS信号线(未示出)。外部设备300经由连接线缆302的TMDS信号线(未示出)接收SDR视频信号，并且使处理前进到S549。
在S549中，外部设备300分析在S548中接收的视频信号，将显示器301的驱动条件切换到能够显示SDR视频信号的设置，并且使处理前进到S550。在S550中，外部设备300在外部设备300的显示器301上显示在S528中接收到的SDR视频信号。
注意，从S549到S550的处理时间根据外部设备300的性能而变化，因此在显示视频之前大约需要1到5秒。
图6A-1和图6A-2以及图6B-1和图6B-2是示出图4A-1至图4A-4的S411和S427中的拍摄菜单处理的细节的流程图。该处理是通过在***存储器52中展开记录在非易失性存储器56中的程序并由***控制单元50执行该程序来实现的。
在S601中，***控制单元50基于用户是否使HDR拍摄模式有效来确定是否进行HDR拍摄。如果确定为不进行HDR拍摄，则***控制单元50使处理前进到S602并显示用于通常SDR拍摄的菜单。如果确定为进行HDR拍摄，则***控制单元50使处理前进到S603并显示用于HDR拍摄的菜单。在S603中，***控制单元50在菜单上以诸如灰化状态的无效状态显示在HDR拍摄中不使用的功能。
在S604中，***控制单元50确定用户是否选择了指示是否进行HDR拍摄的设置项目。如果确定为选择了该项目，则***控制单元50使处理前进到S605，否则，使处理前进到S611。在S605中，***控制单元50确定用户是否将指示是否进行HDR拍摄的设置切换为“有效”。如果确定为设置被切换为“有效”，则***控制单元50使处理前进到S606，否则，使处理前进到S607。在S606中，***控制单元50将指示是否进行HDR拍摄的设置改变为“有效”，并将该设置值存储在***存储器52中。
如果指示是否进行HDR拍摄的设置为“有效”，则***控制单元50在S607中确定用户是否已将HDR辅助显示设置切换为“改变”。如果确定为设置被切换为“改变”，则***控制单元50使处理前进到S608，否则，使处理前进到S609。请注意，如果指示是否进行HDR拍摄的设置为“无效”，则期望HDR辅助显示设置不可更改。
在S608中，***控制单元50将用于拍摄的HDR辅助显示设置改变为是“进行”还是“不进行”，并将设置值存储在***存储器52中。“进行”HDR辅助设置可以有两个或更多的变化。
请注意，当在菜单画面上改变HDR拍摄设置或HDR辅助显示设置时，也可以在菜单画面已改变为实时取景画面的定时在显示器上反映显示设置的改变结果。当这些设置不是在菜单画面上而是在实时取景画面上通过例如使用操作单元70的特定按钮来改变时，也可以在改变的定时(按下按钮的定时)反映改变结果。
在S609中，***控制单元50确定用户是否已经发出对HDR设置菜单显示处理的终止指令。如果确定为发出了终止指令，则***控制单元50使处理前进到S610。
在S610中，***控制单元50确定用户是否选择了静止图像记录图像质量的设置项目。如果确定为做出了选择，则***控制单元50使处理前进到S611，否则，使处理前进到S651。
在S611中，***控制单元50确定用户是否输入了HDR拍摄指令。如果确定为发出了用于HDR拍摄的指令输入，则***控制单元50使处理前进到S612，并且如果确定为没有指令输入，则使处理前进到S614。
***控制单元50在S612中显示用于HDR拍摄的画面，并且在S613中接受对用于HDR拍摄的记录图像质量的用户选择。作为所设置的用于HDR拍摄的记录图像质量，可以准备RAW、HDR静止图像文件和RAW+HDR静止图像文件的两个图像同时输出作为文件格式。图像尺寸的示例是接近传感器读取时的像素数量的Large(大)、比Large稍小的Middle(中)、以及比Large更小的Small(小)。用于压缩文件大小容量的压缩率的示例是高图像质量(低压缩率)、标准(高压缩率)和低图像质量(高压缩率)。
***控制单元50在S614中显示用于SDR拍摄的画面，并且在S615中接受对用于SDR拍摄的记录图像质量的用户选择。同样准备与用于HDR拍摄的选项相同的选项作为用于SDR拍摄的设置记录图像质量。
在S651中，***控制单元50确定用户是否选择了运动图像记录图像质量的设置项目。如果确定为选择了运动图像记录图像质量的设置项目，则***控制单元50使处理前进到S652，否则，使处理前进到S657。
在S652中，***控制单元50检查指示是否由用户进行HDR拍摄的设置。如果设置为“是”，则***控制单元50使处理进入S653，否则，使处理进入S655。
***控制单元50在S653中显示用于HDR拍摄的画面，并且在S654中接受对用于HDR拍摄的记录图像质量的用户选择。作为所设置的用于HDR拍摄的记录图像质量，准备了RAW运动图像、RAW运动图像+代理运动图像、HDR运动图像文件、以及RAW+代理运动图像+HDR运动图像文件的三个运动图像同时输出。图像尺寸的示例是8K、4K、FullHD、HD和VGA。用于减小文件大小的压缩率的示例是诸如ALL-I的高图像质量(低压缩率)和诸如IPB的标准到低图像质量(高压缩率)。还可以选择帧速率和诸如NTSC/PAL的广播***。
***控制单元50以与S653中相同的方式在S655中显示用于SDR拍摄的画面，并且在S656中接受对用于SDR拍摄的记录图像质量的用户选择。同样准备与用于HDR拍摄的选项相同的选项作为用于SDR拍摄的设置记录图像质量。
在S657中，***控制单元50确定用户是否选择了HDR输出的设置项目。如果确定为用户已经选择了HDR输出的设置项目，则***控制单元50使处理前进到S658，否则，使处理前进到S660。在S658中，***控制单元50确定用户是否已将HDR输出设置切换为“有效”。如果确定为设置被切换为“有效”，则***控制单元50使处理前进到S659，否则，使处理前进到S660。在S659中，***控制单元50将HDR输出设置改变为“有效”，并将设置值存储在***存储器52中。
在S660中，***控制单元50确定用户是否选择了回放观看辅助的设置项目。如果确定为选择了回放观看辅助的设置项目，则***控制单元50使处理前进到S661，否则，使处理前进到S663。在S661中，***控制单元50确定用户是否已将回放观看辅助的设置切换为“有效”。如果确定为设置被切换为“有效”，则***控制单元50使处理前进到S662，否则，使处理前进到S663。在S662中，***控制单元50将用于回放观看辅助的设置改变为“有效”，并将设置值存储在***存储器52中。
在S663中，***控制单元50确定用户是否选择了用于传输的SDR转换的设置项目。如果确定为做出了该选择，则***控制单元50使处理前进到S664，否则，使处理前进到S665。在S663中，***控制单元50确定用户是否已将用于传输的SDR转换的设置切换为“有效”。如果确定为设置被切换为“有效”，则***控制单元50在S664中将用于传输的SDR转换设置改变为“有效”，并且使处理前进到S665。
在S665中，***控制单元50确定用户是否选择了与其他HDR拍摄相关的设置项目。如果确定为做出了选择，则***控制单元50使处理前进到S666，否则，使处理前进到S667。在S666中，***控制单元50将其他处理改变为“有效”，并使处理进入S667。
在S667中，***控制单元50确定用户是否已指示离开菜单。如果确定为“不离开”，则***控制单元50将处理返回到S660，并且如果确定为“离开”，则终止该处理。
图7A和图7B是示出***控制单元50的HDR拍摄处理的细节的流程图。在该流程中，写入存储器32的RAW数据在图像处理单元24中通过HDR显像。
诸如数字照相机或数字摄像机的摄像设备具有根据拍摄中使用的光源来校正拍摄图像的色调的白平衡功能。白平衡功能校正根据光源(诸如晴朗的天空和多云的天空的自然光源、以及诸如荧光灯和白炽灯的人造光源)而变化的色调之间的差异，使得无论光源如何白色看起来都一样。在S701至S703中，计算白平衡处理所需的白平衡系数。在本实施例中，为了防止诸如天空的高亮度区域的高光细节丢失，假设通过比人物等的明亮度恰当的曝光低的曝光来进行拍摄。
首先，在S701中，***控制单元50经由存储器控制单元15获得RAW图像数据。
在S702中，***控制单元50对获得的RAW图像数据进行用于确定似乎白色的像素的白色搜索框内确定处理，以计算白平衡系数。
在S703中，***控制单元50基于白色搜索框内确定的结果，计算白平衡系数。
将参照图12所示的流程图来说明S702和S703中的处理的细节。
如前所述，RAW图像数据的各个像素仅具有R、G和B中的一个的信号分量。为了进行白色搜索，***控制单元50进行解拜耳(DeBayer)处理S1201(因为需要进行到颜色信号的转换)，从而针对各个像素生成R、G和B的所有通道信号。解拜耳处理有多种方法，并且例如可以通过使用低通滤波器的线性插值来进行信号生成。RAW图像数据一般受噪声影响，因此光学黑(Optical Black)不是0而是具有值。因此，***控制单元50进行从解拜耳后的信号中减去OB值的处理(S1202)。然后，***控制单元50根据获得的RGB信号通过以下等式来计算颜色信号Cx和Cy(S1203)。
其中，G1和G2是拜耳阵列中2×2个像素中的两个G分量值。Cx代表色温，Cy代表绿色方向校正量，并且Yi是亮度值。
图13示出了Cx-Cy平面。如图13所示，可以通过摄像设备从高色温(例如白天)到低色温(例如，日落时)预先拍摄白色、并在坐标上标绘颜色评价值Cx和Cy，来获得作为用于检测白色的基准的白色轴1200。由于实际光源具有轻微的白色变化，因此***控制单元50将一定程度的宽度赋予白色轴1200的两侧(S1204)。通过这样加宽白色轴而获得的框被称为白色搜索框1201。
在S1205中，***控制单元50在Cx-Cy坐标系中标绘解拜耳后的像素，并确定这些像素是否存在于白色搜索框中。在S1206中，***控制单元50进行明暗排除处理，该明暗排除处理用于在存在于白色搜索框中的像素中，在亮度方向上限制作为积分对象的像素。进行该处理是为了防止白平衡系数的计算精度由于太暗的颜色容易受到噪声的影响而降低。同样地，进行该处理是为了防止白平衡系数的计算精度由于如下原因而降低：太明亮的颜色会由于其中一个通道的传感器饱和而破坏R/G比或B/G比的平衡，并与正确的颜色分离。作为明暗排除处理对象的像素的亮度值在SDR与HDR之间不同。即，要在白平衡系数计算(稍后描述)中使用的像素在SDR与HDR之间不同。这是因为与SDR相比，HDR的高亮度区域的再现性较高。在本实施例中，在SDR中，例如到+1EV的明亮度是明亮侧的对象，而在HDR中，到+2EV的明亮度是对象。这使得能够计算针对HDR优化的白平衡系数。
在S1207中，***控制单元50根据存在于白色搜索框中并经过明暗排除处理的Cx和Cy，来计算颜色评价值的积分值SumR、SumG和SumB。然后，在S1208中，***控制单元50根据计算的积分值，通过以下等式计算白平衡系数WBCoR、WBCoG和WBCoB。
各个等式右侧的“1024”指示一个颜色分量的精度为10位。
注意，作为白平衡系数，可以计算用于用户设置的拍摄模式(SDR拍摄或HDR拍摄)的值，或者用于SDR和HDR两者的值。
说明将返回到图7A。在S704至S706中，***控制单元50计算色调校正处理所需的色调校正表。色调校正的细节将参照图14A和图14B中所示的流程图进行说明。
在S1221中，***控制单元50通过使用由图7A的S701至S703中的处理生成的WB系数来进行WB处理。在S1222中，***控制单元50进行直方图检测。更具体地，***控制单元50将在S1221中获得的白平衡增益值应用于整个图像数据，并且针对经过了伽马校正处理的像素值生成作为亮度信息的直方图。伽马校正处理可以是使用公知的查找表的方法，但是优选使用与显像中使用的伽马特性相同的伽马特性。然而，也可以使用简化的伽马特性，诸如利用线近似的伽马特性，以节省处理时间和存储量。注意，图像端部的部分通常在许多情况下并不重要，并且还受到取决于摄像镜头的边缘照明降低的影响，因此也可以通过排除周边部分的像素来形成直方图。
在S1223中，***控制单元50进行面部检测预处理。该处理通过对图像数据进行缩小处理、伽马处理等使面部更容易检测。在S1224中，***控制单元50通过使用公知的方法对预处理后的图像数据执行面部检测处理。在该面部检测处理中，可以获得类面部区域(面部区域)的位置和大小、以及检测的可靠度。
在S1225中，***控制单元50计算用于补偿曝光校正量(减少量)的色调校正量(色调校正量(A))作为第一色调校正量。在该步骤中，***控制单元50计算具有如下输入/输出特性的色调校正量，其中，通过该输入/输出特性，图像的暗部被恰当地曝光并且具有预定亮度等级以上的高亮度像素不被校正(至少未完全补偿曝光校正量)。这使得可以进一步抑制经过色调校正的明部的高光细节损失。可以准备该色调校正量，作为与曝光校正量相对应的多个校正表。
在S1226中，如果在通过S1224中的面部检测处理检测到的面部区域中存在可靠度高于预设评价阈值的面部区域，则***控制单元50确定为检测到面部。如果确定为检测到面部，则***控制单元50使处理前进到S1227，并且如果确定为没有检测到面部，则使处理前进到S1231。
在S1227中，***控制单元50计算检测到的面部区域的部分区域作为面部亮度获得区域。面部亮度获得区域是用于获得面部的明部的亮度的区域，并且该区域的数量、位置等没有特别限制。在S1228中，***控制单元50针对各个面部亮度获得区域计算该区域中包含的R、G和B像素的各类型的平均值。此外，***控制单元50通过以与直方图检测相同的方式应用白平衡增益值来对R、G和B像素的各个平均值进行伽马校正，并通过以下等式将结果转换为亮度值Y。
Y＝0.299×R+0.587×G+0.114×B
注意，作为在直方图检测和面部检测中要应用的白平衡增益值，优选使用在针对同一图像数据的WB处理中使用的增益值。理想地，也优选使用与显像中使用的亮度伽马相同的亮度伽马，但是也可以使用简化的伽马特性，诸如利用线近似的伽马特性，以节省处理时间和存储量。
在S1229中，***控制单元50将在S1228中针对各个面部亮度获得区域获得的亮度值转换为与恰当曝光对应的值。这是校正面部亮度的处理，其中，由于图像数据是通过低于恰当曝光的曝光拍摄的，因此检测到该面部亮度低于通过恰当曝光拍摄图像时的亮度。可以进行亮度值的转换以补偿由曝光控制确定的曝光校正量(减少量)，也可以通过使用在S1225中计算的色调校正量来进行亮度值的转换。
在S1230中，***控制单元50计算检测到的面部亮度值的典型值。作为典型值，例如可以获得检测到的面部区域的各个面部亮度获得区域中的亮度值的最大值。
当***控制单元50在S1226中确定为没有检测到面部区域时，进行S1231中的处理。在S1231中，***控制单元50检测直方图特征量。直方图特征量可以是例如从暗部侧起累积频率为1％的像素所属的等级(SD)，或者从明部侧起累积频率为1％的像素所属的等级(HL)。随后，在S1232中，***控制单元50将在S1231中计算出的直方图特征量转换为与通过恰当曝光的摄像相对应的值。这是校正直方图特征量的处理，其中，由于图像数据是通过低于恰当曝光的曝光拍摄的，因此检测到该直方图特征量低于通过恰当曝光拍摄图像时的直方图特征量。可以进行亮度值的转换以补偿由曝光控制确定的曝光校正量(减少量)，也可以通过使用在S1225中计算的色调校正量来进行亮度值的转换。
在S1233中，***控制单元50计算目标校正量。***控制单元50计算面部的典型亮度值或相对于直方图特征量的目标亮度等级。然后，***控制单元50通过使用样条插值，根据目标亮度等级以及图像数据中的亮度的最小值和最大值，来生成定义相对于输入亮度等级的输出亮度等级的查找表(输入/输出特性)，作为色调校正量(B)。色调校正量(B)是第二色调校正量。
HDR的目标色调校正量可以不同于SDR的目标色调校正量。例如，图16A示出了SDR的外观，以及图16B示出了HDR的外观。尽管被摄体(人)的亮度值相同，但背景在SDR中最多为100dc/m2，但在HDR中超过100cd/m2。因此，尽管被摄体的亮度值相同，但被摄体有时在HDR中看起来较暗。这称为明度对比，并且是人类视觉特性引起的现象。例如，被摄体的亮度值在图16A和图16B中是相同的，但是与图16A相比，在图16B中，被摄体亮度与背景亮度之间的差更大。在这种情况下，用户感觉图16B中的被摄体比图16A中的被摄体更暗。也就是说，HDR可以将诸如天空的高亮度区域表现得更明亮，而这增加了被摄体看起来比SDR中更暗的可能性。因此，在本实施例中，在SDR的情况下使用如图15A所示的色调特性。然而，在HDR的情况下，通过使用如图15B所示的色调特性来应用提高暗部的色调校正量，因此可以获得良好的外观。注意，以补偿曝光不足的校正为例说明了本实施例的色调校正。然而，出于图像制作的目的，可以在明亮度校正中进行类似的色调校正。
可以将相对于面部的典型亮度值和图像数据的直方图特征量的目标亮度等级设置为在经验上可能有利的固定值。然而，也可以根据典型亮度值和直方图特征量的值来设置不同的目标亮度等级。在这种情况下，可以针对设置了目标亮度等级的各个参数(典型亮度值和直方图特征量)，来准备定义输入等级与目标亮度等级之间的关系的查找表。
通过诸如样条插值的方法来获得用于实现到上述定义的目标亮度等级的转换的校正特性，并且需要时，将该校正特性保存为应用了色调校正量(B)的查找表(或关系表达式)。
在S1234中，***控制单元50合成在S1225中计算出的色调校正量(A)和在S1233中计算出的色调校正量(B)。例如，***控制单元50首先将色调校正量(A)应用于各输入亮度等级，然后将色调校正量(B)应用于校正后的亮度等级，从而获得结果亮度值并形成相对于各个输入亮度等级的输出亮度值的查找表。
在S1235中，***控制单元50进行限制在S1234中获得的合成校正量(合成色调校正量)的上限的处理(限制器处理)。合成色调校正量(A)和色调校正量(B)增加了校正量并使校正后的图像中的噪声量显著，因此限制整体校正量。该限制器处理可以通过如下处理来实现：以表的形式准备各个亮度值允许的最大校正量，并利用与最大校正量相对应的输出等级来替换在S1234中形成的查找表中的值中的、超过最大校正量的输出等级。请注意，作为色调校正量，可以计算用于用户设置的拍摄模式(SDR拍摄或HDR拍摄)的值，或者用于SDR和HDR二者的值。
说明将返回到图7A和图7B。在S707中，***控制单元50通过使用计算出的白平衡系数、色调校正参数和各种HDR参数进行显像。通过使用例如颜色矩阵、照相机OETF曲线数据、颜色调整参数、降噪参数和锐度参数作为其他显像参数，来生成HDR显像图像。作为照相机OETF(伽马曲线)的示例，假设ITU-R的推荐BT.2100的PQ(感知量化)的EOTF(电光传递函数)的反向特性。但是，也可以结合OOTF(光光传递函数)作为照相机侧的体验。另选地，可以使用ITU-R的相同推荐BT.2100的HLG(混合对数伽马)的OETF。
在S708中，***控制单元50通过调整在S707中显像的图像的尺寸来生成用于简单显示的MPF(多图片格式)图像(诸如两画面比较图像)，并且通过HEVC格式对生成的图像进行压缩编码。
在S709中，***控制单元50进一步调整在S708中生成的MPF图像的尺寸，从而生成像素数小于MPF图像的像素数的用于索引显示等的缩略图图像，并且压缩生成的图像。
在S710中，***控制单元50将在S707中显像的HDR图像压缩为主图像。在该压缩中可以使用各种方法。例如，10位YUV422数据可以通过H.265(ISO/IEC 23008-2HEVC)进行压缩。
在S711中，***控制单元50确定用户设置的记录图像质量。如果确定为设置仅记录RAW图像，则***控制单元50使处理进入S712，如果确定为设置仅记录HDR图像，则***控制单元50使处理进入S713，并且如果确定为设置记录RAW图像和HDR图像，则***控制单元50使处理进入S714。
在S712中，***控制单元50通过压缩RAW图像并添加报头来生成具有如图8A所示结构的RAW图像文件，并经由记录介质I/F 18将该文件记录在记录介质200上。可以使用多种方法作为压缩方法，并且可以使用例如无劣化可逆无损压缩或不可逆但减小文件大小的有损压缩。此外，在S1205中获得的白平衡白色搜索框内确定结果、在S704中获得的直方图和在S705中获得的面部检测结果被记录在报头中。这里要检测的白色搜索框内确定结果是在S1206中进行明暗排除处理之前的确定结果。因此，在HDR拍摄和SDR拍摄中记录相同的确定结果。另外，当用户设置了HDR拍摄模式时，HDR显像参数(诸如图12中获得的白平衡系数和图14A和图14B中获得的色调校正量)、以及通过以HEVC格式对HDR显像的图像数据进行编码而在S708中生成的用于显示的MPF图像也被记录为如图8C所示的元数据。如前所述，这些数据的内容根据拍摄模式是HDR拍摄还是SDR拍摄而变化。注意，在SDR拍摄中，记录通过使用上述用于SDR的白色搜索框内确定和色调特性而获得的显像参数。注意，即使在进行HDR拍摄时，也可以通过对SDR进行S702至S706中的处理来生成SDR显像参数，并记录这两个参数。还要注意，当生成HDR和SDR二者的显像参数时处理负荷会增加，因此当处理负荷相对有余裕时，诸如不进行连续拍摄而是进行单次拍摄时，也可以进行该处理。
当处理负荷有余裕时，诸如在执行单次拍摄时，除了HDR显示图像之外，还可以通过使用SDR显像参数生成SDR质量主图像、MPF图像和缩略图图像，并将HDR显示图像和SDR显示图像记录在同一个文件中(图8D)。
当显示缩略图图像时，图像较小，因此只需可识别图像的类型即可。因此，可以在S709中仅形成并保存缩略图图像作为SDR显像图像(图8E)。在这样的布置中，不与作为HDR压缩方法的H.265的解码相对应的显示装置或PC可以仅显示缩略图图像。
在S713中，***控制单元50通过以HECV格式对显像的HDR图像进行压缩编码来添加静态或动态元数据，并经由记录介质I/F 18将编码图像作为HEIF(高效率图像文件格式)文件记录在记录介质200上。静态元数据的示例是符合CEA-861.3的显示器的三基色和白点的x坐标和y坐标，以及母版显示器(mastering display)的最大亮度值、最小亮度值、最大内容亮度等级以及最大帧平均亮度等级。动态元数据的示例是由SMPTE ST 2094定义的颜色容量转换的动态色调映射元数据。注意，当通过PQ信号表达HDR特性时，10位以上的深度是优选的。然而，由于传统的JPEG格式只有8位，因此需要针对静止图像HDR采用新的容器。本实施例使用HEIF的容器作为由MPEG(运动图像专家组)开发并由MPEG-H Part 12(ISO/IEC 23008-12)定义的图像文件格式。HEIF的特点是，它在一个文件中不仅可以存储主图像，还可以存储缩略图、多个时间相关的图像以及诸如EXIF或XMP的元数据。这使得HEIF很方便，这是因为还可以存储由HEVC编码的10位图像序列。
在S714和S715中，依次进行S712和S713中的处理，从而记录RAW图像和HDR图像二者。
图8A示出了在上述记录处理中要记录在记录介质200上的静止RAW图像数据的RAW图像文件的结构。下面要说明的RAW图像文件的容器文件格式是ISO/IEC14496-12定义的ISO基础媒体文件格式。因此，该文件的容器格式具有树结构并且具有各自被称为盒(box)的节点。此外，各个盒可以具有多个盒作为子元素。
RAW图像数据文件801在头部具有用于描述文件类型的盒ftyp 802，并且还具有包含所有元数据的盒moov 803、轨道媒体数据主体(图像数据)的盒mdat 808和其他的盒807。盒moov 803具有用于存储MetaData(元数据)805的盒uuid 804和用于存储参照ImageData的信息的trak盒806作为子元素。MetaData 805描述了图像的元数据，例如图像的形成日期/时间、拍摄条件、指示是通过HDR还是SDR进行拍摄的信息、上述检测元数据以及其他拍摄信息。盒mdat 808具有作为拍摄的静止图像数据的ImageData 809作为子元素。
注意，要记录在由SDR拍摄的RAW图像的ImageData 809中的图像数据不同于由HDR拍摄的RAW图像的图像数据。
图8B示出了要记录在由SDR拍摄的RAW图像中的ImageData 809。图8B中所示的ImageData 809具有THM图像821、MPF图像822和主图像823(这些图像各自以SDR图像质量显像并通过JPEG压缩)、以及RAW图像824和RAW显像参数825。各SDR质量图像是各个颜色分量具有8位(256个色调)的图像。注意，图8B所示的RAW显像参数825至少包括用于SDR显像的显像参数。
图8C示出了当通过HDR进行拍摄时要记录在仅以HDR图像作为显示图像的RAW图像中的ImageData 809。图8C中所示的ImageData 809具有THM图像826、MPF图像827和主图像828(这些图像各自以HDR图像质量显像并通过HEVC压缩)、以及RAW图像824和RAW显像参数825。各个HDR质量图像是各个颜色分量具有10位(1024个色调)的图像。图8C、图8D和图8E所示的RAW显像参数825至少具有用于HDR显像的显像参数。
图8D示出了当通过HDR进行拍摄时要记录在以HDR图像和SDR图像二者作为显示图像的RAW图像中的ImageData 809。图8D中所示的ImageData 809具有THM图像821、MPF图像822和主图像823(这些图像各自以SDR图像质量显像并通过JPEG压缩)、THM图像826、MPF图像827和主图像828(这些图像各自以HDR图像质量显像并通过HEVC压缩)、以及RAW图像824和RAW显像参数825。
图8E示出了当通过HDR进行拍摄时要记录在RAW图像中的ImageData 809，该RAW图像仅以THM图像作为SDR图像，并以MPF图像和主图像作为HDR质量显示图像。图8E所示的ImageData 809具有：以SDR图像质量显像并通过JPEG压缩的THM图像821，各自以HDR图像质量显像并通过HEVC压缩的MPF图像827和主图像828，以及RAW图像824和RAW显像参数825。
该示例中说明的各文件格式是一个实施例，根据需要还可以有其他的盒。另外，显示图像也可以存储在moov 803的盒或者其他的盒807中。
由于使用了如上所述的文件格式，因此用于SDR图像的显像参数被记录在被拍摄为SDR的RAW图像文件中，并且用于HDR图像的显像参数被记录在被拍摄为HDR的RAW图像文件中。因此，即使在以后显像RAW图像时，也可以通过反映拍摄设置来进行显像。例如，用于进行RAW显像的设备(该设备可以是数字照相机100，也可以是诸如PC的其他设备)参照RAW图像的MetaData 805，并确定该图像被拍摄为HDR还是SDR。如果确定为RAW图像被拍摄为HDR，则通过使用文件中包含的用于HDR图像的显像参数将RAW图像显像为HDR图像。如果确定为RAW图像被拍摄为SDR，则通过使用文件中包含的用于SDR图像的显像参数将RAW图像显像为SDR图像。为了使这样的处理成为可能，数字照相机100将用于SDR图像的显像参数记录在作为SDR拍摄的RAW图像文件中，并且将用于HDR图像的显像参数记录在作为HDR拍摄的RAW图像文件中。注意，用于进行RAW显像的设备可以记录通过使用上述HEIF容器显像的静止HDR图像。
此外，相同的确定结果被记录为用于HDR拍摄和SDR拍摄的检测元数据。因此，通过使用记录的检测数据，甚至可以将通过HDR拍摄模式拍摄的RAW图像文件显像为SDR图像。因此，即使是仅支持SDR图像的设备也可以适当地显示由HDR拍摄模式拍摄的RAW图像文件。
图9A是示出使用***控制单元50的显示单元28的回放模式处理的细节的流程图。通过在***存储器52中展开记录在非易失性存储器56中的程序并由***控制单元50执行该程序来实现该处理。
在S901中，***控制单元50确定回放是索引回放还是正常回放。如果在S901中确定为回放是索引回放，则***控制单元50使处理前进到S902。在S902中，***控制单元50决定要回放的图像数量。
在S903中，***控制单元50决定要回放的图像。在S904中，***控制单元50进行绘制要回放的图像的处理。
在S905中，***控制单元50确定要显示的所有图像的绘制是否完成。如果确定为绘制未完成，则***控制单元50将处理返回到S903并继续绘制处理。如果确定为绘制处理完成，则***控制单元50使处理前进到S906。在S906中，***控制单元50在显示单元28上进行S906的图像输出处理，并终止显示处理。之后，***控制单元50进行操作接受处理。
图9B是示出使用***控制单元50的显示单元28的回放模式处理中的绘制处理的细节的流程图。
在S911中，***控制单元50获得要回放的图像的信息。在S912中，***控制单元50决定要回放的图像。在S913中，***控制单元50从记录介质200中读出要回放的图像。在S914中，***控制单元50进行对要回放的图像进行解压缩的处理。在S915中，***控制单元50从在S914中经过解压缩处理的图像数据中收集各个像素的数据。该图像数据是亮度数据等，并用于直方图处理或高光警告处理。
在S916中，***控制单元50确定要回放的图像是HDR图像还是SDR图像。如果确定为要回放的图像是HDR图像，则***控制单元50使处理前进到S917，并且如果确定为要回放的图像是SDR图像，则使处理前进到S920。在S917中，***控制单元50检查用于回放的HDR辅助显示设置。如果设置了辅助1，则***控制单元50使处理前进到S918，如果设置了辅助2，则使处理前进到S919。在S918中，***控制单元50根据辅助1的设置对在S914中解压缩的图像进行HDR→SDR转换处理。在S919中，***控制单元50根据辅助2的设置对在S914中解压缩的图像进行HDR→SDR转换处理。
在S920中，***控制单元50进行将在S914中解压缩的图像或在S918或S919中经过SDR转换处理的图像的尺寸增大或减小到适合于显示单元28的尺寸的处理。然后，在S921中，***控制单元50决定生成图像的放置，并终止绘制处理。
图9C至图9H是示出***控制单元50的读取对象图像选择处理的细节的流程图。
在S926中，***控制单元50检查获得的图像的信息并确定是否可以回放图像。如果确定为可以回放图像，则***控制单元50使处理前进到S927，并且如果确定为不能回放图像，则将处理前进到S936。
在S927中，***控制单元50确定要回放的图像是否是静止图像。如果确定为要回放的图像是静止图像，则***控制单元50使处理前进到S928，否则，使处理前进到S935。
在S928中，***控制单元50确定要回放的图像是否是RAW图像。如果确定为要回放的图像是RAW图像，则***控制单元50使处理前进到S929，如果不是，则使处理前进到S930。
在S929中，***控制单元50确定RAW图像是由HDR拍摄的RAW图像还是由SDR拍摄的RAW图像。***控制单元50通过使用参照图8A至图8E说明的RAW文件中的元数据来进行该确定。如果确定为RAW图像是由HDR拍摄的RAW图像，则***控制单元50使处理前进到S931，并且如果确定为RAW图像是SDR图像，则使处理前进到S932。
在S930中，***控制单元50确定被发现不是RAW图像的静止图像是由HDR拍摄的图像还是由SDR拍摄的图像。在本实施例中，由HDR拍摄的图像通过HEIF记录，并且由SDR拍摄的图像通过JPEG记录，因此图像是HDR图像还是SDR图像由格式是HEIF还是JPEG来确定。但是，也可以通过使用HEIF中的元数据来确定图像是HDR图像还是SDR图像。
在S931中，***控制单元50从由HDR拍摄的RAW图像中选择要在回放中使用的图像数据。在S932中，***控制单元50从由SDR拍摄的RAW图像中选择要在回放中使用的图像数据。在S933中，***控制单元50从由HDR显像的静止图像中选择要在回放中使用的图像数据。在S934中，***控制单元50从由SDR拍摄的静止图像中选择要在回放中使用的图像数据。在S935中，***控制单元50从运动图像文件中选择要显示的图像数据。在S936中，***控制单元50进行回放图像非显示处理。在该处理中，显示指示图像不可播放的信息以通知用户不能回放图像。
图9D是***控制单元50从由HDR拍摄的RAW图像中选择要在回放中使用的图像数据的流程图。
在S941中，***控制单元50确定回放是索引回放还是正常回放。如果确定为回放是索引回放，则***控制单元50使处理前进到S942，并且如果确定为回放是正常回放，则使处理前进到S943。
在S942中，***控制单元50根据要通过索引回放回放的图像的数量来确定要使用的图像数据。虽然在本实施例中阈值为36，但该数量仅是示例，因此该数量可以由用户适当设置，也可以根据显示单元28的大小来决定。如果确定为要显示的图像数量为36或更多，则***控制单元50使处理进入S945，并且如果确定为数量小于36，则使处理进入S944。
在S943中，***控制单元50决定“用于显示的HDR主图像(HEVC)”(828)作为要在回放中使用的图像数据。在S944中，***控制单元50决定“用于显示的HDR MPF图像(HEVC)”(827)作为要在回放中使用的图像数据。在S945中，***控制单元50决定“用于显示的HDRTHM图像(HEVC)”(826)作为要在回放中使用的图像数据。
图9E-1和图9E-2是示出当RAW图像具有用于显示的SDR图像时从由HDR拍摄的RAW图像中选择要在回放中使用的图像数据的处理的流程图。
在S951中，***控制单元50确定回放是索引回放还是正常回放。如果确定为回放是索引回放，则***控制单元50使处理前进到S952，并且如果确定为回放是正常回放，则将处理前进到S953。
在S952中，***控制单元50根据用于索引回放的回放图像的数量确定要使用的图像数据。假设在这种情况下确定的阈值为36。如果确定为回放图像的数量为36或更多，则***控制单元50使处理前进到S955，并且如果确定为该数量小于36，则使处理前进到S954。
在S953、S954和S955中，***控制单元50确定要回放的RAW图像是否包含SDR图像。该确定使用参照图8A至图8E说明的RAW文件中的元数据。
在S956中，***控制单元50决定“用于显示的HDR主图像(HEVC)”(828)作为要在回放中使用的图像数据。在S957中，***控制单元50决定“用于显示的SDR主图像(JPEG)”(823)作为要在回放中使用的图像数据。在S958中，***控制单元50决定“用于显示的HDRMPF图像(HEVC)”(827)作为要在回放中使用的图像数据。在S959中，***控制单元50决定“用于显示的SDR MPF图像(JPEG)”(822)作为要在回放中使用的图像数据。在S960中，***控制单元50决定“用于显示的HDR THM图像(HEVC)”(826)作为要在回放中使用的图像数据。在S961中，***控制单元50决定“用于显示的SDR THM图像(JPEG)”(821)作为要在回放中使用的图像数据。
图9F是***控制单元50从由HDR显像的静止图像中选择要在回放中使用的图像数据的流程图。
在S971中，***控制单元50确定回放是索引回放还是正常回放。如果确定为回放是索引回放，则***控制单元50使处理前进到S972，并且如果确定为回放是正常回放，则使处理前进到S973。
在S972中，***控制单元50根据要在索引回放中回放的图像的数量来确定要使用的图像数据。在本实施例中，数量的阈值为36。如果确定为回放图像的数量是36或更多，则***控制单元50使处理前进到S975，并且如果确定为数量小于36，则***控制单元50使处理前进到S974。
在S973中，***控制单元50决定“HDR主图像(HEVC)”(未示出)作为要在回放中使用的图像数据。在S974中，***控制单元50决定“HDR MPF图像(HEVC)”(未示出)作为要在回放中使用的图像数据。在S975中，***控制单元50决定“HDR THM图像(HEVC)”(未示出)作为要在回放中使用的图像数据。
图9G是用于从由SDR拍摄的RAW图像中选择要在回放中使用的图像数据的流程图。
在S981中，***控制单元50确定回放是索引回放还是正常回放。如果确定为回放是索引回放，则***控制单元50将处理前进到S982，并且如果确定为回放是正常回放，则将处理前进到S983。
在S982中，***控制单元50根据索引回放中的回放图像的数量确定要使用的图像数据。在本实施例中，数量的阈值为36。如果确定为要显示的图像数量为36或更多，则***控制单元50使处理前进到S985，并且如果确定为数量小于36，则使处理前进到S984。
在S983中，***控制单元50决定“用于显示的SDR主图像(JPEG)”(823)作为要在回放中使用的图像数据。在S984中，***控制单元50决定“用于显示的SDR MPF图像(JPEG)”(822)作为要在回放中使用的图像数据。在S985中，***控制单元50决定“用于显示的SDRTHM图像(JPEG)”(821)作为要在回放中使用的图像数据。
图9H是用于从由SDR显像的静止图像中选择要在回放中使用的图像数据的流程图。
在S991中，***控制单元50确定回放是索引回放还是正常回放。如果确定为回放是索引回放，则***控制单元50使处理前进到S992，并且如果确定为回放是正常回放，则将处理前进到S993。
在S992中，***控制单元50根据要在索引回放中回放的图像的数量来确定要使用的图像数据。在本实施例中，数量的阈值为36。如果确定为回放图像的数量为36或更多，则***控制单元50将处理前进到S995，并且如果确定为回放图像的数量小于36，则***控制单元50将处理前进到S994。
在S993中，***控制单元50决定“SDR主图像(JPEG)”(未示出)作为要在回放中使用的图像数据。在S994中，***控制单元50决定“SDR MPF图像(JPEG)”(未示出)作为要在回放中使用的图像数据。在S995中，***控制单元50决定“SDR THM图像(JPEG)”(未示出)作为要在回放中使用的图像数据。
图10A是示出使用外部设备300的回放模式处理的细节的流程图。该处理通过在***存储器52中展开记录在非易失性存储器56中的程序并由***控制单元50执行该程序来实现。
在S1001中，***控制单元50确定外部设备300是否连接到数字照相机100。如果确定为连接了外部设备300，则***控制单元50使处理前进到S1002，并且如果确定为未连接外部设备300，则使处理前进到S1005。
在S1002中，***控制单元50确定回放HDR设置是否有效。作为回放设置，可以选择“进行HDR回放”、“不进行HDR回放”或“与拍摄模式同步”。当设置了“进行HDR回放”时，如果外部设备300支持HDR，则模式为HDR输出模式，而不管要回放的图像是HDR图像还是SDR图像。“不进行HDR回放”是SDR输出模式。“与拍摄模式同步”是回放输出与拍摄模式同步的模式。即，在“HDR拍摄”被设置为“进行”的HDR拍摄模式下，在回放中进行HDR输出。在“HDR拍摄”被设置为“不进行”的SDR拍摄模式下，在回放中进行SDR输出。注意，“与拍摄模式同步”被设置为默认模式，并且即使用户改变了拍摄模式，也维持“与拍摄模式同步”。仅当用户将回放设置从“与拍摄模式同步”更改为“进行HDR回放”或“不进行HDR回放”时，才会取消此同步。也可以使用诸如“HEIF(回放)”和“JPEG(回放)”的文件格式作为选项，以替代“进行HDR回放”和“不进行HDR回放”。同样，诸如“HEIF(拍摄)”和“JPEG(拍摄)”的文件格式也可以用作选项，以替代“进行HDR拍摄”和“不进行HDR拍摄”。
在S1002中，如果选择“进行HDR回放”，则***控制单元50使处理进入S1003，而如果选择“不进行HDR回放”，则使处理进入S1005。此外，如果选择“与拍摄模式同步”并且在S606中设置的“HDR拍摄”是“进行”，则***控制单元50将处理前进到S1003，并且如果“HDR拍摄”是“不进行”，则将处理前进到S1005。
在S1003中，***控制单元50确定外部设备300是否是支持HDR的显示器。如果确定为外部设备300是支持HDR的显示器，则***控制单元50使处理前进到S1004，如果不是，则使处理前进到S1005。
在S1004中，***控制单元50向外部设备300输出HDR信号。在S1005中，***控制单元50向外部设备300输出SDR信号。
S1006至S1011与图9A的S901至S906相同，因此将省略其说明。
图10B是示出当HDR信号被输出到外部设备300时的绘制处理(S1009)的细节的流程图。
S1021至S1025、S1028和S1029与参照图9B说明的S911至S915、S920和S921相同，因此将省略其说明。
在S1026中，***控制单元50确定要回放的图像是HDR图像还是SDR图像。如果确定为要回放的图像是HDR图像，则***控制单元50使处理前进到S1028，并且如果确定为要回放的图像是SDR图像，则使处理前进到S1027。
在S1027中，***控制单元50进行SDR→HDR转换处理。之后的S1028和S1029与图9B中的S920和S921相同。注意，当SDR信号被输出到外部设备300时的绘制处理(S1009)的细节与图9B相同，因此将省略其说明。
图11A是示出回放菜单处理的细节的流程图。该处理是通过在***存储器52中展开记录在非易失性存储器56中的程序并由***控制器50执行该程序来实现的。
在S1101中，***控制单元50确定用户是否已经通过RAW显像的设置项目(未示出)设置了RAW显像。如果确定为未设置RAW显像，则***控制单元50使处理前进到S1103，并且如果确定为设置了RAW显像，则使处理前进到S1102。
在S1103中，***控制单元50确定是否通过针对HDR文件的SDR转换的设置项目(未示出)设置了HDR→SDR转换。如果确定为没有设置HDR→SDR转换，则***控制单元50使处理前进到S1105，并且如果确定为设置了HDR→SDR转换，则使处理前进到S1104。
在S1105中，***控制单元50确定是否通过文件传输的设置项(未示出)设置了文件传输。如果确定为未设置文件传输，则***控制单元50使处理前进到S1107，并且如果确定为设置了文件传输，则将处理前进到S1106。
在S1107中，***控制单元50确定是否离开菜单。如果确定为“不离开”，则***控制单元50将处理返回到S1101，并且如果确定为“离开”，则***控制单元50终止回放菜单处理。
在S1106中，***控制单元50对用户指定的图像文件进行传输处理。如果在要传输HDR图像文件时接收目的地只能显示SDR，则可以在照相机中进行S1104所示的HDR→SDR转换，并将HDR图像文件作为SDR图像文件传输。
在S1102中，***控制单元50对用户指定的RAW图像文件进行RAW显像。下面将参照图11B中所示的框图说明该RAW显像处理的细节。注意，图像处理单元24包括图11B所示的各个处理单元，但是各个处理单元也可以由***控制单元50要执行的程序来实现。
***控制单元50使图像处理单元24对记录在记录介质200上的拍摄RAW图像1101进行RAW显像处理。RAW图像是一组具有拜耳阵列的像素，因此一个像素具有仅一个颜色分量的强度数据。请注意，RAW图像包括进行SDR拍摄时获得的RAW(SDR)和进行HDR拍摄时获得的RAW(HDR)。此外，RAW(SDR)可以通过SDR显像或HDR显像进行显像。相反，RAW(HDR)可以通过HDR显像或SDR显像进行显像。白平衡单元1102进行使白色变白的处理。在对RAW(HDR)进行HDR显像时，通过使用HDR白平衡系数作为记录在文件中的HDR显像元来进行白平衡处理。另一方面，当进行SDR显像时，通过根据白色搜索框内确定结果生成SDR白平衡系数作为存储在文件中的检测元，来进行白平衡处理。当HDR和SDR二者的白平衡系数都记录在RAW中时，当然可以适当地使用所需的一者。
颜色插值单元1103插值降噪和彩色马赛克图像，从而生成所有像素各自具有三个分量(例如，R、G和B的颜色信息)的彩色图像。生成的彩色图像由矩阵转换单元1104和伽马转换单元1105处理，从而生成基本彩色图像。之后，颜色亮度调整单元1106对生成的彩色图像进行改善图像外观的处理。例如，根据场景进行检测夜景并强调饱和度的图像校正。色调校正也以相同的方式进行。然而，当对RAW(HDR)进行HDR显像时，通过使用用于HDR的色调校正量作为存储在文件中的HDR显像元来执行色调校正。相反，当执行SDR显像时，通过使用面部检测结果和直方图作为记录在文件中的检测元而计算用于SDR的色调校正量来执行色调校正。当HDR和SDR二者的色调校正量都以RAW记录时，当然可以适当使用所需的一者。
对于经过期望颜色调整的图像，压缩单元1107通过诸如JPEG或HEVC的方法压缩高分辨率图像，并且记录单元1108生成将被记录在诸如闪存的记录介质上的显像图像。注意，前面描述的HEIF容器可以存储多个图像，因此除了HDR显像图像之外，还可以存储SDR显像图像。
在S1104中，***控制单元50对用户指定的HDR图像文件进行SDR转换。由于HDR图像是在OETF为PQ、色域为BT.2020的颜色空间中生成的图像，因此需要在诸如SDR的γ2.2或sGRB的颜色空间中进行色调映射和色域映射。作为实用的方法，可以使用公知的方法。例如，当执行将恰当曝光与SDR匹配的色调映射时，可以获得与SDR相比增加明亮度的结果。
(变型例)
在上述实施例中通过HDR拍摄来记录RAW图像时，将通过HDR显像的主图像、通过HDR显像的用于显示的MPF图像和通过HDR显像的THM(缩略图)图像与RAW图像数据一起记录在RAW图像中文件中，如图8C所示。另选地，如图8D所示，不仅通过HDR显像的主图像、MPF图像和THM图像，而且通过SDR显像的主图像、MPF图像和THM图像也与RAW图像一起记录。否则，如图8E所示，由HDR显像的主图像和MPF图像以及由SDR显像的THM图像与RAW图像一起记录。
在本变型例中，在拍摄处理中，HDR图像文件或SDR图像文件与RAW图像文件相关联，并与RAW图像文件一起记录。当将RAW图像文件与HDR图像文件或SDR图像文件相关联地记录时，如果在RAW中包含的HDR图像或SDR图像与在同RAW图像文件相关联的图像文件中包含的HDR图像或SDR图像之间，存在显像方法或压缩编码方法的差异，则管理变得复杂，或者无法保持回放兼容性。因此，在本变型例中，对于RAW图像文件和与该RAW图像文件相关联的图像文件，通过相同方法显像并通过相同压缩编码方法编码而生成的图像被记录为主图像、MPF图像和THM图像。
图19A和图19B是根据该变型例的拍摄处理的流程图，其对应于S418中的HDR拍摄处理(图7A和图7B)和S434中的SDR拍摄处理。该处理是通过在***存储器52中展开记录在非易失性存储器56中的程序并由***控制单元50执行该程序来实现的。
首先，在S1901中，***控制单元50获得RAW数据。该处理与S701相同。
然后，在S1902中，***控制单元50确定拍摄图像质量的设置是否为HDR拍摄模式。如果确定为设置了HDR拍摄模式，则***控制单元50使处理前进到S1903，并且如果确定为设置了SDR拍摄模式，则使处理前进到S1909。
在S1903中，***控制单元50进行与S702至S710相同的处理。即，通过使用S1901中获得的RAW数据，计算各种参数并进行检测处理，并且通过对获得的RAW数据进行HDR显像处理，来生成HDR主图像、HDR MPF图像和HDR THM图像。然后，通过HECV格式对HDR主图像、HDRMPF图像和HDR THM图像各自的10位数据进行压缩编码，从而生成HDR压缩图像数据(HEVC)。
随后，在S1904中，***控制单元50以与S711中相同的方式确定由用户设置的记录图像质量。如果确定为通过设置仅记录RAW图像文件，则***控制单元50使处理进入S1905，并且如果确定为通过设置仅记录HDR图像文件，则使处理进入S1906，并且如果确定为通过设置记录RAW图像文件和HDR图像文件，则使处理进入S1907。
在S1905中，***控制单元50以与S712中相同的方式将在S1901中获得的RAW图像数据记录为具有如图8A所示的容器文件格式的RAW图像文件。在S1905中，将S1903中通过HEVC格式生成并压缩编码的HDR主图像、HDR MPF图像和HDR THM图像与ImageData 809中的RAW图像数据一起记录为用于显示的图像，如图8C所示。
在S1906中，***控制单元50以与S713中相同的方式将在S1903中生成并压缩编码的HDR主图像、HDR MPF图像和HDR THM图像记录为具有HEIF格式的图像文件。即，将HDR主图像记录为HEIF文件的主图像，并将HDR MPF图像和HDR THM图像记录在HEIF文件中作为用于显示的图像。
将说明HEIF文件。图17A示出了具有HEIF格式的图像文件的结构。下面举例说明的图像文件的容器文件格式是ISO/IEC14496-12定义的ISO基础媒体文件格式。因此，该文件的容器格式具有树结构，并且具有称为盒的节点。此外，各个盒可以具有多个盒作为子元素。HEIF图像数据文件1701在头部具有用于描述文件类型的盒ftyp 1702，并且还具有包含元数据的盒meta 1703和包含轨道的媒体数据主体(图像数据)的盒mdat 1708。盒meta1703具有作为子元素的用于存储参照ImageData的信息的trak盒1706和用于存储除由EXIF定义的元数据之外的元数据的盒MetaData 1705-1。盒mdat 1708具有作为子元素的盒MetaData 1705-2和ImageData 1709，盒MetaData 1705-2用于存储诸如由EXIF定义的图像的拍摄日期/时间和拍摄条件的元数据，ImageData 1709作为拍摄的静止图像数据。ImageData 1709存储图像数据。通过SDR拍摄而要记录在ImageData 1709中的图像数据与通过HDR拍摄而要记录的图像数据不同。在S1906中，如图17C所示的图像被记录在ImageData 1709中。在这种情况下，各自以HDR图像质量显像并由HEVC压缩的用于显示的THM图像1726和用于显示的MPF图像1727、以及以HDR图像质量显像并由HEVC压缩的主图像1728被记录在ImageData 1709中。
在S1907中，***控制单元50以与S1905中相同的方式，将在S1901中获得的RAW图像数据记录为具有如图8A所示的容器文件格式的RAW图像文件。然后，在S1908中，***控制单元50以与S1906中相同的方式，将各自在S1903中通过HEVC格式生成并压缩编码的HDR主图像、HDR MPF图像和HDR THM图像记录为具有HEIF格式的图像文件。即，在记录RAW图像数据的RAW文件和通过HDR显像的图像文件(HEIF文件)时，经过相同显像处理并以相同编码格式(HEVC)编码的相同图像被记录为用于显示的MPF图像和用于显示的THM图像。此外，要被记录为RAW图像文件的用于显示的主图像的图像数据和要被记录为显像图像文件(HEIF文件)的主图像的图像数据是由相同编码格式(HEVC)编码的相同图像。注意，***控制单元50将要在S1907中记录的RAW图像文件与要在S1908中记录的显像图像文件(HEIF文件)相关联。
如上所述，在相互关联的同时记录的RAW文件和HEIF文件中，经过相同HDR显像处理并以相同编码格式(HEVC)编码的相同图像被记录为用于显示的图像。这使得可以防止管理复杂，并保持回放兼容性。
此外，作为要记录在S1905中记录的RAW文件和S1906中记录的HEIF文件中的用于显示的图像，记录经过与S1907和S1908中相同的HDR显像处理和相同格式(HEVC)的编码处理的图像。因此，即使当记录格式改变时，也可以防止其他回放设备等无法回放通过相同HDR拍摄设置所拍摄的图像文件中的特定图像文件中的图像的不便，因此可以保持回放兼容性。
在S1909中，***控制单元50使图像处理单元24对在S701中获得的RAW图像数据进行SDR显像处理，从而生成SDR主图像、SDR MPF图像和SDR THM图像。然后，通过以JPEG格式对各个图像进行压缩编码来生成SDR压缩图像数据(JPEG)。由于图像是SDR图像，因此显像和压缩编码的图像数据为8位YUV420数据。此外，各种参数的计算和检测处理也与HDR拍摄中相同的方式进行。
随后，在S1910中，***控制单元50确定用户设置的记录图像质量。如果确定为通过设置仅记录了RAW图像文件，则***控制单元50使处理前进到S1911，并且如果确定为通过设置仅记录SDR图像文件，则使处理前进到S1912。此外，如果确定为通过设置而记录了RAW图像文件和SDR图像文件，则***控制单元50使处理前进到S1913，并且如果确定为通过设置而记录了RAW图像文件和多种类型的SDR图像文件，则使处理前进到S1914。
在S1911中，***控制单元50对RAW图像进行压缩，添加报头，并且以与S1905中相同的方式，将RAW图像作为具有图8A所示的容器文件结构的RAW图像文件，经由记录介质I/F18记录在记录介质200上。在S1911中，与S1905不同，在S1909中生成的SDR图像被记录为用于显示的图像数据，并且在S1909中生成的SDR显像参数被记录为RAW显像参数。即，在S1911中，如图8B所示，数据被记录在RAW图像文件的ImageData 809中。在S1911中，将在S1901中获得的原始图像数据(无损压缩或有损压缩)824和在S1909中生成的SDR RAW显像参数记录在RAW图像文件801的ImageData 809中。此外，各自在S1909中生成的SDR THM图像(JPEG)821、SDR MPF图像(JPEG)822和SDR主图像(JPEG)823作为用于显示的图像记录在RAW图像文件801的ImageData 809中。
在S1912中，***控制单元50将在S1909中通过JPEG生成并压缩编码的SDR显像图像数据(THM图像、MPF图像和主图像)作为JPEG文件，经由记录介质I/F 18记录在记录介质200上。图18示出JPEG格式的文件结构。具有JPEG格式的图像数据文件1800在头部具有诸如EXIF的元数据1804，并且还具有各自具有SDR图像质量并且通过JPEG压缩的THM图像1801、MPF图像1802和主图像1803。本示例中所示的文件格式为一个实施例，根据需要还可以具有其他信息。
在S1913中，***控制单元50以与S1911中相同的方式，经由记录介质I/F18将在S1901中获得的RAW图像数据和在S1909中通过JPEG生成并压缩的SDR图像数据作为JPEG图像文件记录在记录介质200上。然后，在S1914中，***控制单元50以与S1912中相同的方式，经由记录介质I/F 18将在S1909中通过JPEG生成并压缩的SDR图像数据作为JPEG图像文件记录在记录介质200上。如上所述，当记录RAW图像数据的RAW图像文件和由SDR显像的图像文件(JPEG文件)时，经过相同显像处理并以相同编码格式(JPEG)编码的相同图像被记录为用于显示的MPF图像和用于显示的THM图像。此外，要记录为RAW图像文件的用于显示的图像的图像数据和要记录为显像图像文件(JPEG文件)的主图像的图像数据是经过相同显像处理并通过相同的编码格式(JPEG)编码的相同图像。注意，***控制单元50将要在S1913中记录的RAW图像文件与要在S1914中记录的显像图像文件(JPEG文件)相关联，并记录它们。
如上所述，在相互关联的同时记录的RAW文件和JPEG文件中，经过相同SDR显像处理并以相同编码格式(JPEG)编码的相同图像被记录为用于显示的图像。这使得可以防止管理复杂，并保持回放兼容性。
在S1915中，***控制单元50以与S1911中相同的方式，经由记录介质I/F18将在S1901中获得的RAW图像数据和在S1909中生成的JPEG压缩SDR图像数据作为JPEG文件记录在记录介质200上。然后，在S1916中，***控制单元50以与S1912中相同的方式，经由记录介质I/F 18将在S1909中生成的JPEG压缩SDR图像数据作为JPEG图像文件记录在记录介质200上。此外，在S1917中，***控制单元50通过记录介质I/F 18将在S1909中生成的JPEG压缩SDR图像数据作为HEIF文件记录在记录介质200上。在S1917中，与S1906不同，图像数据被记录在ImageData 1709中，如图17B所示。即，在S1909中生成的SDR THM图像(JPEG)1721和SDRMPF图像(JPEG)1722被记录为用于显示的图像，并且在S1909中生成的SDR主图像(JPEG)1723被记录为主图像。
注意，***控制单元50将要在S1915中记录的RAW文件、要在S1916中记录的JPEG文件和要在S1917中记录的HEIF文件相互关联。如上所述，在相互关联的同时记录的RAW、JPEG和HEIF文件中，经过相同SDR显像处理并以相同编码格式(JPEG)编码的相同图像被记录为用于显示的图像。这使得可以防止管理复杂，并保持回放兼容性。另外，在S1911、S1913和S1915中要记录的RAW文件、S1912、S1914和S1916中要记录的JPEG文件、以及S1917中要记录的HEIF文件中，记录经过相同的HDR显像处理并以相同格式(JPEG)编码的用于显示的图像。因此，即使记录格式发生变化，也可以防止其他回放设备等无法回放通过相同SDR拍摄设置所拍摄的图像文件中的特定图像文件中的图像的不便，因此可以保持回放兼容性。
请注意，在上述说明中，SDR图像在S1912和S1914中记录在JPEG文件中，但SDR图像也可以以与S1917中相同的方式记录为HEIF文件。
还要注意，在以上说明中，要在S1907中记录在RAW文件中的用于显示的HDR THM图像和HDR MPF图像与要在S1908中记录在HEIF文件中的用于显示的HDR THM图像和HDR MPF图像是相同的图像数据。然而，这些图像不必是完全相同的图像，只要这些图像是通过使用相同的编码格式对经过HDR显像处理的图像进行编码而生成的即可。同样，要在S1913中记录在RAW文件中的用于显示的图像和要在S1914中记录在JPEG文件中的用于显示的图像不需要是完全相同的图像，只要这些图像是通过使用相同的编码格式对经过SDR显像处理的图像进行编码而生成的即可。这也适用于S1915。
此外，在S1907中，将在S1908中作为主图像记录在HEIF文件中的HDR主图像数据记录为RAW图像文件的用于显示的图像。然而，还可以记录例如具有不同尺寸的图像数据而不记录相同的图像数据。类似地，在S1913中，在S1914中要被记录在JPEG文件中作为主图像的SDR主图像数据不需要被记录为RAW图像文件的用于显示的图像，而是可以记录不同的图像数据。这也适用于S1915。
此外，当记录HEIF文件时，可以将JPEG图像记录为用于显示的缩略图图像，而不记录HEVC图像，如图17D所示。当JPEG图像被记录为用于显示的缩略图时，即使是不支持作为HDR压缩方法的H.265的解码的显示装置或PC也能仅显示缩略图图像。
(其他实施例)
以上对本发明的优选实施例进行了说明，但本发明不限于这些实施例，在本发明的精神和范围内可以进行各种变型和改变。例如，在上述实施例中，采用HEVC(高效率视频编码)对一个颜色分量超过8位的图像数据进行编码。然而，方法的类型没有特别限制，只要该方法可以对一个颜色分量超过8位的图像进行编码即可。此外，已经通过假设本发明应用于数字照相机来说明了上述实施例。然而，本发明不限于上述实施例，并且也可应用于具有摄像功能的计算机(诸如智能电话或具有照相机的膝上型PC)。
本发明不限于上述实施例，并且可以在本发明的精神和范围内进行各种改变和变型。因此，做出了所附的权利要求以公开本发明的范围。
本申请要求2019年2月28日提交的日本专利申请2019-36396、以及2019年4月26日提交的日本专利申请2019-85969的优先权，这些申请的全部内容通过引用并入本文。

Claims (15)

1.一种摄像设备，其特征在于，包括：
摄像部件；
选择部件，用于选择动态范围；
显像部件，用于对所述摄像部件所获得的RAW图像数据进行显像处理；
编码部件，用于对经过了所述显像部件所进行的显像处理的图像数据进行编码；以及
控制部件，用于在将所述摄像部件所获得的RAW图像数据记录为RAW图像文件时进行控制，使得根据所述选择部件所选择的动态范围，来切换要与所述RAW图像数据一起记录在所述RAW图像文件中的用于显示的图像的编码格式，
其中，在所述选择部件选择了第一动态范围的情况下，所述控制部件控制所述编码部件以对通过所述显像部件对所述RAW图像数据进行用于所述第一动态范围的显像处理而获得的图像数据进行编码来生成具有第一编码格式的第一编码数据，并且将所述第一编码数据与所述RAW图像数据记录为所述RAW图像文件，以及
其中，在所述选择部件选择了第二动态范围的情况下，所述控制部件控制所述编码部件以对通过所述显像部件对所述RAW图像数据进行用于所述第二动态范围的显像处理而获得的图像数据进行编码来生成具有与所述第一编码格式不同的第二编码格式的第二编码数据，并且将所述第二编码数据与所述RAW图像数据记录为所述RAW图像文件。
2.根据权利要求1所述的摄像设备，其特征在于，在将显像图像数据记录为与所述RAW图像文件不同的图像文件时，
所述控制部件进行控制，使得在所述选择部件选择了所述第一动态范围的情况下，通过所述显像部件对所述摄像部件所获得的RAW图像数据进行用于所述第一动态范围的显像处理而获得的图像数据被所述编码部件编码以生成具有所述第一编码格式的第一编码数据，并且所述第一编码数据被记录为具有第一格式的图像文件，以及
在所述选择部件选择了所述第二动态范围的情况下，通过所述显像部件对所述RAW图像数据进行用于所述第二动态范围的显像处理而获得的图像数据被所述编码部件编码以生成具有所述第二编码格式的第二编码数据，并且所述第二编码数据被记录为具有第二格式的图像文件。
3.根据权利要求2所述的摄像设备，其特征在于，
所述具有第一格式的图像文件是JPEG文件，以及
所述具有第二格式的图像文件是HEIF文件。
4.根据权利要求1所述的摄像设备，其特征在于，所述第一编码格式是JPEG格式，以及所述第二编码格式是HEVC格式。
5.根据权利要求1所述的摄像设备，其特征在于，所述第二动态范围比所述第一动态范围宽。
6.根据权利要求5所述的摄像设备，其特征在于，所述第一动态范围是SDR，以及所述第二动态范围是HDR。
7.根据权利要求1所述的摄像设备，其特征在于，
在选择了所述第一动态范围的情况下，所述显像部件进行用于所述第一动态范围的显像处理，使得生成一个颜色分量具有8位的图像数据，以及
在选择了所述第二动态范围的情况下，所述显像部件进行用于所述第二动态范围的显像处理，使得生成一个颜色分量超过8位的图像数据。
8.根据权利要求1所述的摄像设备，其特征在于，还包括：
生成部件，用于根据通过显像处理所获得的图像数据来生成具有多个尺寸的图像数据，
其中，在将所述摄像部件所获得的RAW图像数据记录为RAW图像文件时，所述控制部件将作为用于显示的图像数据的、所述生成部件所生成的具有多个尺寸的图像数据与所述RAW图像数据一起记录为所述RAW图像文件。
9.根据权利要求8所述的摄像设备，其特征在于，所述生成部件要生成的多个尺寸至少包括缩略图尺寸和由RAW图像数据表示的图像尺寸。
10.根据权利要求1所述的摄像设备，其特征在于，在记录所述RAW图像文件和与所述RAW图像文件不同的图像文件时，
其中，在所述选择部件选择了所述第一动态范围的情况下，所述控制部件控制所述显像部件以通过所述显像部件对所述RAW图像数据进行用于所述第一动态范围的显像处理，控制所述编码部件以根据所述显像部件所获得的图像数据生成具有所述第一编码格式的所述第一编码数据，以及将所述编码部件所生成的所述第一编码数据存储在所述RAW图像文件和与所述RAW图像文件不同的所述图像文件两者中，以及
其中，在所述选择部件选择了所述第二动态范围的情况下，所述控制部件控制所述显像部件以通过所述显像部件对所述RAW图像数据进行用于所述第二动态范围的显像处理，控制所述编码部件以根据所述显像部件所获得的图像数据生成具有所述第二编码格式的所述第二编码数据，以及将所述编码部件所生成的所述第二编码数据存储在所述RAW图像文件和与所述RAW图像文件不同的所述图像文件二者中。
11.根据权利要求10所述的摄像设备，其特征在于，所述控制部件进行控制，使得：
所述第一编码数据被记录为具有与所述RAW图像数据不同的第一文件格式的图像文件，以及
所述第二编码数据被记录为具有与所述RAW图像数据不同的第二文件格式的图像文件。
12.根据权利要求10所述的摄像设备，其特征在于，
其中，所述控制部件将作为用于显示的图像的所述第一编码数据或所述第二编码数据记录在所述RAW图像文件和与所述RAW图像文件不同的所述图像文件二者中。
13.根据权利要求10所述的摄像设备，其特征在于，
其中，所述控制部件将所述第一编码数据或所述第二编码数据记录为与所述RAW图像文件不同的所述图像文件的主图像。
14.一种摄像设备的控制方法，所述摄像设备包括摄像部件，所述控制方法的特征在于包括：
选择步骤，用于选择动态范围；
显像步骤，用于对所述摄像部件所获得的RAW图像数据进行显像处理；
编码步骤，用于对经过了在所述显像步骤中所进行的显像处理的图像数据进行编码；以及
控制步骤，用于在将所述摄像部件所获得的RAW图像数据记录为RAW图像文件时进行控制，使得根据在所述选择步骤中所选择的动态范围，来切换要与所述RAW图像数据一起记录在所述RAW图像文件中的用于显示的图像的编码格式，
其中，在所述选择步骤中选择了第一动态范围的情况下，所述控制步骤控制所述编码步骤以对通过在所述显像步骤中对所述RAW图像数据进行用于所述第一动态范围的显像处理而获得的图像数据进行编码来生成具有第一编码格式的第一编码数据，并且将所述第一编码数据与所述RAW图像数据记录为所述RAW图像文件，以及
其中，在所述选择步骤中选择了第二动态范围的情况下，所述控制步骤控制所述编码步骤以对通过在所述显像步骤中对所述RAW图像数据进行用于所述第二动态范围的显像处理而获得的图像数据进行编码来生成具有与所述第一编码格式不同的第二编码格式的第二编码数据，并且将所述第二编码数据与所述RAW图像数据记录为所述RAW图像文件。
15.一种存储程序的计算机可读存储介质，所述程序要被加载到包括摄像部件的计算机中并且被所述计算机执行，由此使所述计算机执行：
选择步骤，用于选择动态范围；
显像步骤，用于对所述摄像部件所获得的RAW图像数据进行显像处理；
编码步骤，用于对经过了在所述显像步骤中所进行的显像处理的图像数据进行编码；以及
控制步骤，用于在将所述摄像部件所获得的RAW图像数据记录为RAW图像文件时进行控制，使得根据在所述选择步骤中所选择的动态范围，来切换要与所述RAW图像数据一起记录在所述RAW图像文件中的用于显示的图像的编码格式，
其中，在所述选择步骤中选择了第一动态范围的情况下，所述控制步骤控制所述编码步骤以对通过在所述显像步骤中对所述RAW图像数据进行用于所述第一动态范围的显像处理而获得的图像数据进行编码来生成具有第一编码格式的第一编码数据，并且将所述第一编码数据与所述RAW图像数据记录为所述RAW图像文件，以及
其中，在所述选择步骤中选择了第二动态范围的情况下，所述控制步骤控制所述编码步骤以对通过在所述显像步骤中对所述RAW图像数据进行用于所述第二动态范围的显像处理而获得的图像数据进行编码来生成具有与所述第一编码格式不同的第二编码格式的第二编码数据，并且将所述第二编码数据与所述RAW图像数据记录为所述RAW图像文件。
CN202080016877.3A 2019-02-28 2020-02-18 摄像设备及其控制方法和存储介质 Active CN113491103B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202311008646.XA CN116962609A (zh) 2019-02-28 2020-02-18 摄像设备及其控制方法和存储介质

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2019-036396 2019-02-28
JP2019036396A JP7185563B2 (ja) 2019-02-28 2019-02-28 撮像装置及びその制御方法及びプログラム
JP2019085969A JP7313893B2 (ja) 2019-04-26 2019-04-26 撮像装置及び記録制御方法及びプログラム
JP2019-085969 2019-04-26
PCT/JP2020/006201 WO2020175231A1 (ja) 2019-02-28 2020-02-18 撮像装置及びその制御方法及びプログラム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN202311008646.XA Division CN116962609A (zh) 2019-02-28 2020-02-18 摄像设备及其控制方法和存储介质

Publications (2)

Publication Number Publication Date
CN113491103A CN113491103A (zh) 2021-10-08
CN113491103B true CN113491103B (zh) 2023-08-15

Family

ID=72239889

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202311008646.XA Pending CN116962609A (zh) 2019-02-28 2020-02-18 摄像设备及其控制方法和存储介质
CN202080016877.3A Active CN113491103B (zh) 2019-02-28 2020-02-18 摄像设备及其控制方法和存储介质

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202311008646.XA Pending CN116962609A (zh) 2019-02-28 2020-02-18 摄像设备及其控制方法和存储介质

Country Status (5)

Country Link
US (2) US11871124B2 (zh)
CN (2) CN116962609A (zh)
DE (1) DE112020001019T5 (zh)
GB (1) GB2597141B (zh)
WO (1) WO2020175231A1 (zh)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1929535A (zh) * 2005-09-07 2007-03-14 索尼株式会社 成像装置、图像处理装置、图像处理方法及计算机程序
CN101155261A (zh) * 2006-09-28 2008-04-02 精工爱普生株式会社 图像显示控制装置、摄影装置、图像显示方法及其程序
CN101365071A (zh) * 2007-09-27 2009-02-11 豪威科技有限公司 双模式相机方案、设备、***及方法
CN102970549A (zh) * 2012-09-20 2013-03-13 华为技术有限公司 图像处理方法及装置
JP2014150370A (ja) * 2013-01-31 2014-08-21 Canon Inc 撮像装置、その制御方法及びプログラム
CN105528776A (zh) * 2015-08-07 2016-04-27 上海仙梦软件技术有限公司 针对jpeg图像格式的显著性细节保持的质量评价方法
CN105794193A (zh) * 2013-12-25 2016-07-20 佳能株式会社 图像处理设备、图像处理方法和程序
CN108540781A (zh) * 2017-03-03 2018-09-14 扬智科技股份有限公司 影像信号处理装置与影像信号处理方法

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4560422B2 (ja) * 2005-02-16 2010-10-13 キヤノン株式会社 撮像装置及びその制御方法
US8269852B2 (en) * 2007-09-14 2012-09-18 Ricoh Company, Ltd. Imaging apparatus and imaging method
JP2009147549A (ja) * 2007-12-12 2009-07-02 Samsung Techwin Co Ltd 動画像記録装置、動画像再生装置及びプログラム
JP5383360B2 (ja) * 2009-07-15 2014-01-08 キヤノン株式会社 画像処理装置およびその制御方法
US9036042B2 (en) * 2011-04-15 2015-05-19 Dolby Laboratories Licensing Corporation Encoding, decoding, and representing high dynamic range images
JP6335563B2 (ja) * 2014-03-18 2018-05-30 キヤノン株式会社 撮像装置及びその制御方法
JP6373056B2 (ja) * 2014-05-14 2018-08-15 キヤノン株式会社 撮像装置、撮像装置の制御方法及び画像処理方法
PT3394850T (pt) * 2015-12-21 2020-08-14 Koninklijke Philips Nv Otimização de imagens de alta gama dinâmica para monitores específicos
JP6647162B2 (ja) 2016-07-08 2020-02-14 三菱電機株式会社 映像記録装置、映像再生装置、記録方法、及び再生方法
US10148871B2 (en) * 2016-12-07 2018-12-04 Microsoft Technology Licensing, Llc Advanced raw conversion to produce high dynamic range, wide color gamut output
JP2019036396A (ja) 2017-08-10 2019-03-07 株式会社東海理化電機製作所 コネクタ
JP6935272B2 (ja) * 2017-08-29 2021-09-15 キヤノン株式会社 ハイダイナミックレンジ画像を作成する装置、方法、及びプログラム
JP6836492B2 (ja) 2017-11-09 2021-03-03 株式会社神戸製鋼所 液冷式スクリュ圧縮機

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1929535A (zh) * 2005-09-07 2007-03-14 索尼株式会社 成像装置、图像处理装置、图像处理方法及计算机程序
CN101155261A (zh) * 2006-09-28 2008-04-02 精工爱普生株式会社 图像显示控制装置、摄影装置、图像显示方法及其程序
CN101365071A (zh) * 2007-09-27 2009-02-11 豪威科技有限公司 双模式相机方案、设备、***及方法
CN102970549A (zh) * 2012-09-20 2013-03-13 华为技术有限公司 图像处理方法及装置
JP2014150370A (ja) * 2013-01-31 2014-08-21 Canon Inc 撮像装置、その制御方法及びプログラム
CN105794193A (zh) * 2013-12-25 2016-07-20 佳能株式会社 图像处理设备、图像处理方法和程序
CN105528776A (zh) * 2015-08-07 2016-04-27 上海仙梦软件技术有限公司 针对jpeg图像格式的显著性细节保持的质量评价方法
CN108540781A (zh) * 2017-03-03 2018-09-14 扬智科技股份有限公司 影像信号处理装置与影像信号处理方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
HDRI高动态视频拍摄与数字制作分析;崔伟全;;明日风尚(第05期);全文 *

Also Published As

Publication number Publication date
US20210385375A1 (en) 2021-12-09
CN113491103A (zh) 2021-10-08
US20240080574A1 (en) 2024-03-07
GB2597141A (en) 2022-01-19
WO2020175231A1 (ja) 2020-09-03
GB2597141B (en) 2022-10-26
CN116962609A (zh) 2023-10-27
DE112020001019T5 (de) 2021-11-18
US11871124B2 (en) 2024-01-09

Similar Documents

Publication Publication Date Title
CN113491104B (zh) 摄像设备和图像处理设备及其控制方法和存储介质
JP7313893B2 (ja) 撮像装置及び記録制御方法及びプログラム
JP7365133B2 (ja) 通信装置およびその制御方法、プログラム
JP2021124638A (ja) 表示制御装置、表示制御方法、プログラムおよび記憶媒体
US11050943B2 (en) Electronic apparatus
JP2024015185A (ja) 撮像装置及びその制御方法及びプログラム
CN113491103B (zh) 摄像设备及其控制方法和存储介质
JP7091068B2 (ja) 電子機器
US11165970B2 (en) Image processing apparatus, imaging apparatus, image processing method, and non-transitory computer readable medium
JP2020141334A (ja) 撮像装置及びその制御方法及びプログラム
JP7493984B2 (ja) 電子機器
JP7005340B2 (ja) 電子機器
JP2019122029A (ja) 電子機器
JP2019118058A (ja) 電子機器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant