CN115699788A - 动态图像控制装置、动态图像记录装置、动态图像控制方法、动态图像记录方法及动态图像控制程序 - Google Patents

Abstract

本发明提供一种能够根据与去马赛克处理前的像素数据的记录的有无对应的适当的曝光值来进行拍摄的动态图像控制装置、动态图像记录装置、动态图像控制方法、动态图像记录方法及动态图像控制程序。临时存储部(106)临时存储从摄像部(119)输出的像素数据。显影处理部(107)输出对存储于临时存储部(106)中的像素数据进行包括去马赛克处理的显影处理而得的动态图像数据。输出控制部(109)切换仅以动态图像数据及像素数据中的动态图像数据为记录数据的第一记录模式和以动态图像数据及像素数据为记录数据的第二记录模式。并且，输出控制部(109)以使摄像部(119)在第一记录模式和第二记录模式下根据不同的曝光值进行拍摄的方式进行控制。

Description

动态图像控制装置、动态图像记录装置、动态图像控制方法、 动态图像记录方法及动态图像控制程序

技术领域

本发明涉及一种动态图像控制装置、动态图像记录装置、动态图像控制方法、动态图像记录方法及动态图像控制程序。

背景技术

专利文献1中记载了一种相机***，其具有记录模式，该记录模式存储RA W数据和从RAW数据转换的缩略图像用YC数据。

专利文献2中记载了一种摄像装置，其中，若使用者在对FullHD(Full HighDefinition(全高清))动态图像进行录像的期间按下RAW动态图像录像开始按钮，则继续进行FullHD动态图像的录像，同时开始RAW动态图像的录像。

专利文献3中记载了一种摄像装置，其切换与图像的RAW数据一并记录基于数字显影图像的动态图像文件的第1模式和记录数字显影图像的第2模式。

以往技术文献

专利文献

专利文献1：日本特开2007-166193号公报

专利文献2：日本特开2017-28466号公报

专利文献3：日本特开2010-21710号公报

发明内容

本发明的技术所涉及的一个实施方式提供一种能够根据与去马赛克处理前的像素数据的记录的有无对应的适当的曝光值来进行拍摄的动态图像控制装置、动态图像记录装置、动态图像控制方法、动态图像记录方法及动态图像控制程序。

用于解决技术课题的手段

本发明的技术所涉及的一个实施方式的动态图像摄像装置具备：存储部，临时存储从摄像部输出的像素数据；显影处理部，输出对存储于上述存储部中的像素数据进行包括去马赛克处理的显影处理而得的动态图像数据；及模式切换控制部，切换仅以上述动态图像数据及存储于上述存储部中的像素数据中的上述动态图像数据为记录数据的第一记录模式和以上述动态图像数据及存储于上述存储部中的像素数据为记录数据的第二记录模式，并且以使上述摄像部在上述第一记录模式和上述第二记录模式下根据不同的曝光值进行拍摄的方式进行控制。

本发明的技术所涉及的一个实施方式的动态图像记录装置具备：上述动态图像控制装置；及记录部，记录从上述显影处理部输出的记录数据。

本发明的技术所涉及的一个实施方式的动态图像控制方法为具备临时存储从摄像部输出的像素数据的存储部的动态图像控制装置的动态图像控制方法，包括如下步骤：输出对存储于上述存储部中的像素数据进行包括去马赛克处理的显影处理而得的动态图像数据；及切换仅以上述动态图像数据及存储于上述存储部中的像素数据中的上述动态图像数据为记录数据的第一记录模式和以上述动态图像数据及存储于上述存储部中的像素数据为记录数据的第二记录模式，并且以使上述摄像部在上述第一记录模式和上述第二记录模式下根据不同的曝光值进行拍摄的方式进行控制。

本发明的技术所涉及的一个实施方式的动态图像记录方法在上述动态图像控制方法中记录从上述显影处理部输出的记录数据。

本发明的技术所涉及的一个实施方式的动态图像控制程序为具备临时存储从摄像部输出的像素数据的存储部的动态图像控制装置的动态图像控制程序，用于使上述动态图像控制装置的处理器执行如下处理：输出对存储于上述存储部中的像素数据进行包括去马赛克处理的显影处理而得的动态图像数据；及切换仅以上述动态图像数据及存储于上述存储部中的像素数据中的上述动态图像数据为记录数据的第一记录模式和以上述动态图像数据及存储于上述存储部中的像素数据为记录数据的第二记录模式，并且以使上述摄像部在上述第一记录模式和上述第二记录模式下根据不同的曝光值进行拍摄的方式进行控制。

发明效果

根据本发明的技术所涉及的一个实施方式，能够提供一种能够根据与去马赛克处理前的像素数据的记录的有无对应的适当的曝光值来进行拍摄的动态图像控制装置、动态图像记录装置、动态图像控制方法、动态图像记录方法及动态图像控制程序。

附图说明

图1是表示第1实施方式所涉及的摄像装置100的一例的图。

图2是表示由第1实施方式所涉及的摄像装置100进行的处理的一例的流程图。

图3是表示BT.709的伽马特性的一例的图。

图4是表示图3所示的伽马特性31中的被摄体反射率与伽马校正后的信号值之间的关系的图。

图5是表示由第2实施方式所涉及的摄像装置100进行的处理的一例的流程图。

图6是表示比BT.709的伽马特性亮的伽马特性的一例的图。

图7是表示图6所示的伽马特性61中的被摄体反射率与伽马校正后的信号值之间的关系的图。

图8是表示比BT.709的伽马特性亮的伽马特性的另一例的图。

图9是表示图8所示的伽马特性81中的被摄体反射率与伽马校正后的信号值之间的关系的图。

图10是表示由第3实施方式所涉及的摄像装置100进行的处理的一例的流程图。

图11是表示第4实施方式所涉及的摄像装置100的一例的图。

具体实施方式

以下，参考附图对本发明的实施方式进行说明。

(第1实施方式)

＜第1实施方式所涉及的摄像装置100＞

图1是表示第1实施方式所涉及的摄像装置100的一例的图。摄像装置100为能够通过进行连续拍摄来生成动态图像的动态图像控制装置。但是，除生成动态图像的功能以外，摄像装置100还可以具有生成静态图像的功能。

外部记录装置120设置于摄像装置100的外部，记录从摄像装置100输出的后述的RAW像素数据及动态图像数据。摄像装置100的数据输出端子例如经由HDMI(High-Definition Multimedia Interface：高清晰度多媒体接口)等通信接口与外部记录装置120的输入端子连接。另外，HDMI为注册商标。来自摄像装置100的数据输出并不限于HDMI，也可以使用无线通信(例如，UWB(Ultra Wide Band(超宽带))或无线HDMI-SDI(High-Definition MultimediaInterface-Serial Digital Interface(高清晰度多媒体接口-串行数字接口))来输出。

摄像装置100具备摄像部119、摄像控制部104、RAW校正部105、临时存储部106、显影处理部107、监视器108、输出控制部109及外部输出I/F110。

摄像部119通过进行连续拍摄以在时间上连续的多个RAW像素数据的形式生成动态图像的图像数据。具体而言，摄像部119具有成像透镜***101、成像元件102及ADC(Analog/Digital Converter(模数转换器))103。ADC103也可以内置于成像元件102。

成像透镜***101包括用于使来自被摄体的光透射并成像于成像元件102上的透镜。并且，成像透镜***101可以包括光圈、ND(Neutral Density(中性密度))滤波器、聚焦透镜、变焦透镜、移位透镜等。这些成像透镜***101的可动部由摄像控制部104控制。

成像元件102将由成像透镜***101形成的光学像转换为模拟图像信号，并向ADC103输出转换后的模拟图像信号。成像元件102例如由CMOS(Complem entary Metal-Oxide-Semiconductor(互补金属氧化物半导体))型图像传感器或CCD(Charge-CoupledDevice(电荷耦合器件))型图像传感器等成像元件构成。

并且，成像元件102具备作为用于调整曝光时间的快门的电子快门。由成像元件102进行的拍摄由摄像控制部104控制。例如，成像元件102在拍摄动态图像时在摄像控制部104的控制下在时间上连续进行拍摄，并向ADC103依次输出由此而得的模拟图像信号。

ADC103将来自成像元件102的模拟图像信号转换为数字RAW像素数据，并向RAW校正部105输出转换后的RAW像素数据。从ADC103连续输出的RAW像素数据为去马赛克处理前的像素数据。

摄像控制部104通过控制成像透镜***101及成像元件102来控制由摄像部119进行的拍摄。例如，摄像控制部104根据来自使用者的指示来控制由摄像部119进行的拍摄的焦点或曝光等。并且，摄像控制部104也可以根据通过后述的显影处理部107得到的去马赛克图像来自动控制由摄像部119进行的拍摄的曝光等。

并且，摄像控制部104生成表示由成像透镜***101及成像元件102进行的拍摄的条件的元数据，并向临时存储部106输出生成的元数据。临时存储部106基本上由存储器(任何种类)构成。元数据在进行显影处理时使用，该显影处理中，根据RAW像素数据来生成去马赛克图像。例如，元数据中有黑色偏移电平、将RAW数值转换为表色系的系数、白平衡参数、透镜校正参数、颜色转换参数、伽马校正参数、噪声校正参数、时间码、拍摄日期和时间、产品名等。

RAW校正部105对从ADC103输出的RAW像素数据进行校正。由RAW校正部105进行的校正为对去马赛克处理前的RAW像素数据进行的校正，例如为与成像元件102的特性等对应的像素值校正、缺陷像素校正、阴影校正等。RAW校正部105向临时存储部106输出经校正的RAW像素数据。

临时存储部106临时存储从RAW校正部105输出的RAW像素数据和从摄像控制部104输出的元数据。例如，临时存储部106由RAM(Random Access Mem ory(随机存取存储器))等存储器来实现。并且，临时存储部106可以由多个存储器来实现。例如，临时存储部106可以由存储RAW像素数据的存储器和存储元数据的存储器来实现。

显影处理部107通过根据由临时存储部106存储的RAW像素数据及元数据进行包括去马赛克处理的显影处理来生成去马赛克动态图像，并向监视器108输出生成的去马赛克动态图像。在经缺陷像素校正或阴影校正等的RAW像素数据中，各像素分别仅为与各颜色R、G、B中的某一颜色。因此，从周边的像素补充其他两种颜色，使得各像素具有三种颜色的数据。例如，若为仅具有R色的像素，则不存在G和B的数据，因此通过从周边的G像素的数据补充或根据周边的G像素预测来作为该像素的G色的数据。由此，所有像素分别可具有R、G、B这三种颜色。将此称为去马赛克处理。

并且，显影处理部107通过对通过去马赛克处理生成的图像数据进行各种图像处理来生成动态图像数据，并向监视器108输出生成的动态图像数据。由显影处理部107在去马赛克处理后进行的图像处理例如为增益校正、伽马校正、周边光量衰减校正、色彩校正、轮廓强调、降噪、轮廓强调、去拜耳处理、压缩等处理。

作为一例，显影处理部107通过对图像数据进行各种图像处理来生成与BT.709对应的动态图像数据。BT.709为在一般的电视或监视器中采用的影像标准。在该情况下，作为图像处理之一，显影处理部107进行基于与BT.709对应的伽马特性的伽马校正。

监视器108向使用者显示基于从显影处理部107输出的动态图像数据的动态图像。由此，使用者能够在拍摄动态图像时以实时图像的形式确认正在拍摄的动态图像。

输出控制部109控制经显影处理部107的校正的去马赛克处理后的动态图像数据和存储于临时存储部106中的去马赛克处理前的RAW像素数据的输出。并且，输出控制部109构成切换第一记录模式和第二记录模式的本发明的技术所涉及的一个实施方式的模式切换控制部。

第一记录模式为仅以动态图像数据及RAW像素数据中的动态图像数据为记录数据(要记录的数据)的模式。第二记录模式为以动态图像数据及RAW像素数据为记录数据的模式。记录数据是指要记录到后述的记录介质123中的数据。例如，输出控制部109可以根据来自使用者的指示来进行第一记录模式和第二记录模式的切换，也可以根据后述的记录介质123的空闲容量等各种数据来自动进行第一记录模式和第二记录模式的切换。

在第一记录模式下，输出控制部109从外部输出I/F110向外部记录装置120输出经显影处理部107的校正的去马赛克处理后的动态图像数据。并且，在第一记录模式下，输出控制部109不向外部记录装置120输出存储于临时存储部106中的RAW像素数据。

在第二记录模式下，输出控制部109从外部输出I/F110向外部记录装置120输出经显影处理部107的校正的去马赛克处理后的动态图像数据和存储于临时存储部106中的去马赛克处理前的RAW像素数据。并且，在从外部输出I/F110输出RAW像素数据时，输出控制部109将存储于临时存储部106中的元数据附加于RAW像素数据。

并且，输出控制部109以使摄像部119在第一记录模式和第二记录模式下根据不同的曝光值进行拍摄的方式进行控制。具体而言，输出控制部109经由摄像控制部104以使第二记录模式下的拍摄的曝光值低于第一记录模式下的拍摄的曝光值的方式控制摄像部119。曝光值的控制例如可以通过调整光圈值(F值)、曝光时间(快门速度)及ISO(International Organization for Stan dardization(国际标准化组织))灵敏度中的至少任一个来进行。

作为一例，输出控制部109控制摄像部119在第一记录模式下根据第一曝光值进行拍摄。第一曝光值例如为生成BT.709的动态图像数据时可获得适当的亮度的动态图像数据的曝光值。

并且，输出控制部109控制摄像部119在第二记录模式下根据比第一曝光值低的(暗的)第二曝光值进行拍摄。第二曝光值例如为比第一曝光值低由在第二记录模式下进行的后述的增益校正产生的亮度的增加量的曝光值。

并且，输出控制部109以使由显影处理部107进行的显影处理在第一记录模式和第二记录模式下不同的方式进行控制。例如，输出控制部109以使由显影处理部107进行的与亮度相关的图像处理在第一记录模式和第二记录模式下不同的方式进行控制。

由显影处理部107进行的与亮度相关的图像处理例如为伽马校正、增益校正、查找表(LUT：Lookup Table)处理或它们中的多个处理的组合。LUT处理为以RGB三原色为输入值按输入值转换为预先设定的输出值的处理。例如，有以光亮度Y为输入和输出的LUT和以RGB为输入和输出的三维(3D)LUT。并且，该与亮度相关的图像处理可以为由显影处理部107进行的显影处理中在去马赛克处理之前进行的处理，也可以为在去马赛克处理之后进行的处理。

输出控制部109以使由在第二记录模式下由显影处理部107进行的与亮度相关的图像处理产生的动态图像数据的亮度的增加量多于由在第一记录模式下由显影处理部107进行的与亮度相关的图像处理产生的动态图像数据的亮度的增加量的方式进行控制。

亮度的增加量多例如是指相对于所有输入值的输出值的增加量多。但是，亮度的增加量多例如可以为相对于输入值的输出值的平均增加量多的情况，也可以使相对于一部分输入值的输出值少。

例如，输出控制部109在第一记录模式及第二记录模式下均使显影处理部107执行使用与BT.709对应的伽马特性的相同的伽马校正。并且，输出控制部109在第二记录模式下使显影处理部107进一步执行增加亮度的增益校正，而在第一记录模式下不使显影处理部107执行该增益校正。由此，第二记录模式下的动态图像数据的亮度的增加量比第一记录模式下的动态图像数据的亮度的增加量多相当于增益校正的量。

例如，该增益校正为供在第二记录模式下根据RAW像素数据来获得适当的亮度的BT.709的动态图像数据的增益校正，该RAW像素数据通过比第一曝光值低的第二曝光值的拍摄而得。

外部输出I/F110为用于与外部记录装置120进行通信的通信接口。作为一例，外部输出I/F110通过HDMI进行通信。外部输出I/F110在输出控制部109的控制下向外部记录装置120输出RAW像素数据及动态图像数据。

另外，摄像装置100可以具备存储通过显影处理部107得到的动态图像数据等的内部存储器。并且，摄像装置100可以具备受理来自使用者的各种指示或向使用者输出各种数据的使用者界面。

并且，摄像装置100可以具备将周边的声音转换为电信号的麦克风。在该情况下，通过麦克风得到的电信号可以转换为数字声音数据，与RAW像素数据及动态图像数据一并从外部输出I/F110输出至外部记录装置120，并由外部记录装置120记录。

外部记录装置120具备外部输入I/F121、记录控制部122及记录介质123。外部输入I/F121读入从摄像装置100的外部输出I/F110输出的RAW像素数据及动态图像数据，并向记录控制部122输出读入的RAW像素数据及动态图像数据。

记录控制部122进行将从外部输入I/F121输出的RAW像素数据及动态图像数据记录到记录介质123中的控制。记录介质123为能够进行高速写入以能够实时记录从摄像装置100连续输出的大容量的RAW像素数据及动态图像数据的大容量的记录介质。例如，记录介质123可以由存储卡或SSD(Solid State Drive(固态驱动器))来实现。

在第一记录模式下，动态图像数据依次记录于记录介质123中，而不记录RAW像素数据。在第二记录模式下，动态图像数据及RAW像素数据同时记录于记录介质123中。例如，在第二记录模式下，可以将动态图像数据及RAW像素数据同时记录于记录介质123中，也可以隔开时间差记录动态图像数据及RAW像素数据，也可以交替记录动态图像数据及RAW像素数据。

并且，尽管省略图示，但外部记录装置120具有向与摄像装置100及外部记录装置120不同的外部的数据处理装置(例如，个人计算机)输出存储于记录介质123中的RAW像素数据及动态图像数据的外部输出I/F。由此，能够在数据处理装置中进行存储于记录介质123中的RAW像素数据及动态图像数据的管理或基于RAW像素数据的显影处理。

或者，外部记录装置120也可以为具有用于进行显影处理的处理器及存储器的数据处理装置(例如，个人计算机)。在该情况下，外部记录装置120能够进行存储于记录介质123中的RAW像素数据及动态图像数据的管理或基于RA W像素数据的显影处理。

＜摄像装置100的硬件结构＞

摄像装置100中的摄像控制部104、RAW校正部105、显影处理部107及输出控制部109由以与摄像装置100的存储器协作的方式动作的处理器来实现。

该处理器例如为CPU(Central Processing Unit(中央处理单元))、MP U(MicroProcessing Unit(微处理单元))、FPGA(Field Programmable Gate Array(现场可编程门阵列))、PLD(Programmable Logic Device(可编程逻辑器件))或ASIC(ApplicationSpecific Integrated Circuit(专用集成电路))等处理器。该处理器通过读取存储于存储器中的程序来执行而发挥摄像装置100中的上述处理部的功能。更具体而言，上述各种处理器的结构为组合半导体元件等电路元件而成的电路。另外，该处理器可以为相同种类或不同种类的多个处理器的组合。

存储器由RAM、ROM(Read Only Memory(只读存储器))、闪存等来实现。存储器存储由处理器执行的程序或由处理器使用的数据等。另外，该存储器可以为相同种类或不同种类的多个存储器的组合。

＜由第1实施方式所涉及的摄像装置100进行的处理＞

图2是表示由第1实施方式所涉及的摄像装置100进行的处理的一例的流程图。摄像装置100例如在拍摄动态图像时针对拍摄的每1帧执行图2所示的处理。图2所示的处理例如由输出控制部109执行。

首先，输出控制部109判断当前的模式是否为第一记录模式(步骤S21)。在第一记录模式的情况下(步骤S21：是)，输出控制部109经由摄像控制部104控制摄像部119，由此以与BT.709对应的上述第一曝光值进行1帧拍摄(步骤S22)。

接着，输出控制部109通过控制显影处理部107，根据通过步骤S22得到的RAW像素数据来进行包括使用BT.709的伽马特性的伽马校正的显影处理，生成BT.709的动态图像数据(步骤S23)。

接着，输出控制部109记录通过步骤S23生成的动态图像数据(步骤S24)，结束与该帧相关的一连串的处理。在步骤S24中，输出控制部109通过从外部输出I/F110向外部记录装置120输出动态图像数据，将该动态图像数据记录到外部记录装置120的记录介质123中。

在步骤S21中，在不是第一记录模式的情况下(步骤S21：否)，即，在第二记录模式的情况下，输出控制部109经由摄像控制部104控制摄像部119，由此以比第一曝光值低的第二曝光值进行1帧拍摄(步骤S25)。

接着，输出控制部109记录通过步骤S25得到的RAW像素数据(步骤S26)。在步骤S26中，输出控制部109通过从外部输出I/F110向外部记录装置120输出RAW像素数据，将该RAW像素数据记录到外部记录装置120的记录介质123中。

并且，输出控制部109对通过步骤S25得到的RAW像素数据进行增加亮度的增益校正(步骤S27)。接着，输出控制部109通过控制显影处理部107，根据通过步骤S27进行增益校正的RAW像素数据来进行包括使用BT.709的伽马特性的伽马校正的显影处理，生成BT.709的动态图像数据(步骤S28)。接着，输出控制部109进入步骤S24，记录通过步骤S28生成的动态图像数据，结束与该帧相关的一连串的处理。

＜BT.709的伽马特性＞

图3是表示BT.709的伽马特性的一例的图。在图3中，横轴表示RAW像素数据的信号值，纵轴表示BT.709的伽马校正后的动态图像数据的信号值。伽马特性31为BT.709的伽马校正中的伽马特性。在图2所示的步骤S23、S28的显影处理中，摄像装置100例如进行使用伽马特性31的伽马校正。

图4是表示图3所示的伽马特性31中的被摄体反射率与伽马校正后的信号值之间的关系的图。在图4中，横轴表示被摄体反射率[％](即，拍摄的被摄体的亮度)，纵轴表示BT.709的伽马校正后的动态图像数据的信号值。

信号值特性41为以与BT.709对应的上述第一曝光值进行拍摄时的BT.709的伽马校正后的动态图像数据的信号值的特性。信号值特性41在例如18％灰度的被摄体反射率43下的信号值在0.5附近，成为适当的亮度的特性。

作为参考，信号值特性42表示进行比上述第一曝光值低的第二曝光值的拍摄时的BT.709的伽马校正后的动态图像数据的信号值的特性。信号值特性42的拍摄的曝光值低，相应地具有比信号值特性41暗的特性。

在第一记录模式下，以第一曝光值进行拍摄，因此可获得如信号值特性41那样的适当的亮度的动态图像数据。

在第二记录模式下，以比第一曝光值低的第二曝光值进行拍摄，但与基于伽马特性31的伽马校正另行地进行增加亮度的增益校正，因此与第一记录模式相同地，可记录适当的亮度的动态图像数据。并且，关于RAW像素数据，可记录如信号值特性42那样的宽动态范围的RAW像素数据。由此，存储到记录介质123中之后的显影处理中的加工自由度变高。

如此，根据第1实施方式所涉及的摄像装置100，摄像部119在仅以动态图像数据及RAW像素数据中的动态图像数据为记录数据的第一记录模式和以动态图像数据及RAW像素数据为记录数据的第二记录模式下根据不同的曝光值进行拍摄。

由此，能够在不存储RAW像素数据的第一记录模式下，根据适当的第一曝光值进行拍摄，在存储RAW像素数据的第二记录模式下，根据可获得显影处理中的加工自由度高的RAW像素数据的较低的第二曝光值进行拍摄。因此，能够根据与RAW像素数据的记录的有无对应的适当的曝光值进行拍摄。

通过获得动态范围宽且加工自由度高的RAW像素数据，例如能够通过随后的显影处理来生成如HLG(Hybrid Log Gamma(混合对数伽马))那样的能够表现出宽亮度范围的动态图像数据。

并且，摄像装置100可以使用于生成去马赛克后的动态图像数据的显影处理在第一记录模式和第二记录模式下不同。例如，摄像装置100使包括在显影处理中的与亮度相关的图像处理在第一记录模式和第二记录模式下不同。

由此，能够使由第二记录模式下的与亮度相关的图像处理产生的动态图像数据的亮度的增加量多于由第一记录模式下的与亮度相关的图像处理产生的动态图像数据的亮度的增加量，因此能够抑制在第二记录模式下获得的动态图像数据的亮度下降。即，能够在第二记录模式下获得显影处理中的加工自由度高的RAW像素数据，同时抑制动态图像数据的亮度下降。

另外，说明了对去马赛克处理前的RAW像素数据进行第二记录模式下的增益校正(例如，图2的步骤S27)的结构，但摄像装置100也可以对去马赛克处理后的图像数据进行第二记录模式下的增益校正。

(第2实施方式)

关于第2实施方式，对与第1实施方式不同的部分进行说明。

＜由第2实施方式所涉及的摄像装置100进行的处理＞

图5是表示由第2实施方式所涉及的摄像装置100进行的处理的一例的流程图。第2实施方式所涉及的摄像装置100例如在拍摄动态图像时针对拍摄的每1帧执行图5所示的处理。图5所示的处理例如由输出控制部109执行。

图5所示的步骤S51～S57与图2所示的步骤S21～S26、S28相同。但是，在步骤S57的显影处理中，输出控制部109根据通过步骤S55得到的RAW像素数据来进行使用比BT.709的伽马特性亮的伽马特性的伽马校正，生成BT.709的动态图像数据(步骤S57)。比BT.709的伽马特性亮的伽马特性例如是指输出值与输入值的平均比高于BT.709的伽马特性的伽马特性(例如，参考图6)。

即，在图5所示的处理中，代替进行对RAW像素数据进行增益校正的处理(例如，图2的步骤S27)，使用于第二记录模式的显影处理的伽马特性比用于第一记录模式的显影处理的伽马特性亮。

＜比BT.709的伽马特性亮的伽马特性＞

图6是表示比BT.709的伽马特性亮的伽马特性的一例的图。在图6中，对与图3所示的部分相同的部分标注相同的符号，并省略说明。伽马特性61为比BT.709的伽马特性31亮的伽马特性。具体而言，伽马特性61在横轴方向上压缩伽马特性31而成。

例如，输出控制部109在图5所示的步骤S53的显影处理(即，第一记录模式的显影处理)的校正中使用伽马特性31，在图5所示的步骤S57的显影处理(即，第二记录模式的显影处理)的校正中使用伽马特性61。

图7是表示图6所示的伽马特性61中的被摄体反射率与伽马校正后的信号值之间的关系的图。在图7中，对与图4所示的部分相同的部分标注相同的符号，并省略说明。

信号值特性71为进行比第一曝光值低的第二曝光值的拍摄且使用伽马特性61的伽马校正后的动态图像数据的信号值的特性。信号值特性71成为与以与BT.709对应的上述第一曝光值进行拍摄时的信号值特性41相同的特性。因此，与第1实施方式相同地，在第二记录模式下也可记录适当的亮度的动态图像数据。

图8是表示比BT.709的伽马特性亮的伽马特性的另一例的图。在图8中，对与图3所示的部分相同的部分标注相同的符号，并省略说明。伽马特性81为比BT.709的伽马特性31亮的伽马特性。具体而言，伽马特性81为暗部的上升比伽马特性31陡峭的伽马特性。

例如，输出控制部109在图5所示的步骤S53的显影处理(即，第一记录模式的显影处理)的校正中使用伽马特性31，在图5所示的步骤S57的显影处理(即，第二记录模式的显影处理)的校正中使用伽马特性81。

图9是表示图8所示的伽马特性81中的被摄体反射率与伽马校正后的信号值之间的关系的图。在图9中，对与图4所示的部分相同的部分标注相同的符号，并省略说明。

信号值特性91为进行比上述第一曝光值低的第二曝光值的拍摄且使用伽马特性81的伽马校正后的动态图像数据的信号值的特性。信号值特性91具有适合BT.709的亮度，同时具有宽动态范围。因此，与第1实施方式相同地，在第二记录模式下也可记录适当的亮度的动态图像数据。进而，该动态图像数据具有宽动态范围，并且显影处理中的加工自由度高。

如此，根据第2实施方式所涉及的摄像装置100，通过在第一记录模式和第二记录模式下进行不同的伽马校正，与第1实施方式所涉及的摄像装置100相同地，能够在第二记录模式下获得显影处理中的加工自由度高的RAW像素数据，同时抑制动态图像数据的亮度下降。

(第3实施方式)

关于第3实施方式，对与第1实施方式和第2实施方式不同的部分进行说明。

＜由第3实施方式所涉及的摄像装置100进行的处理＞

图10是表示由第3实施方式所涉及的摄像装置100进行的处理的一例的流程图。第3实施方式所涉及的摄像装置100例如在拍摄动态图像时针对拍摄的每1帧执行图10所示的处理。图10所示的处理例如由输出控制部109执行。

图10所示的步骤S101～S108与图2所示的步骤S21～S28相同。但是，在步骤S103、S108的显影处理中，输出控制部109进行降噪及轮廓强调的各处理。

并且，输出控制部109在步骤S108的显影处理中进行降噪效果比步骤S103的显影处理中的降噪强的降噪。由此，能够对因步骤S107的增益校正而被放大的噪声进行适当的降噪。

并且，输出控制部109在步骤S108的显影处理中进行轮廓强调效果比步骤S103的显影处理中的轮廓强调弱的降噪。由此，能够抑制噪声因步骤S107的增益校正而被放大的图像的画质因轮廓强调而进一步劣化。

如此，第3实施方式所涉及的摄像装置100在第一记录模式和第二记录模式下进行不同的噪声处理。由此，能够对比第一记录模式多的第二记录模式下的噪声进行适当的降噪。

并且，第3实施方式所涉及的摄像装置100在第一记录模式和第二记录模式下进行不同的轮廓处理。由此，能够抑制噪声比第一记录模式多的第二记录模式下的动态图像数据的画质因轮廓强调而劣化。

(第4实施方式)

关于第4实施方式，对与第1实施方式～第3实施方式不同的部分进行说明。

＜第4实施方式所涉及的摄像装置100＞

图11是表示第4实施方式所涉及的摄像装置100的一例的图。在图11中，对与图1所示的部分相同的部分标注相同的符号，并省略说明。

第4实施方式所涉及的摄像装置100为代替图1所示的外部输出I/F110而具备内部输出I/F124、内部输入I/F125、记录控制部122及记录介质123的动态图像记录装置。

内部输出I/F124为与图1所示的外部输出I/F110相同的HDMI等接口，但其与外部输出I/F110的不同点在于，与摄像装置100的内部的内部输入I/F125进行通信。内部输入I/F125为与图1所示的外部记录装置120的外部输入I/F121相同的HDMI等接口，但其与外部输入I/F121的不同点在于，设置于摄像装置100的内部。

图11所示的记录控制部122及记录介质123为与图1所示的记录控制部122及记录介质123相同的结构，但设置于摄像装置100的内部。即，图11所示的摄像装置100内置有高速且大容量的记录介质123，并且使用摄像装置100的内部的接口向记录介质123输出RAW像素数据及动态图像数据。

在该情况下，例如，在图2所示的步骤S24中，输出控制部109通过从内部输出I/F124向内部输入I/F125输出动态图像数据，将该动态图像数据记录到摄像装置100的记录介质123中。并且，在图2所示的步骤S26中，输出控制部109通过从内部输出I/F124向内部输入I/F125输出RAW像素数据，将该RAW像素数据记录到摄像装置100的记录介质123中。

如此，在摄像装置100内置记录RAW像素数据及动态图像数据的记录介质123的结构中，也能够获得与第1实施方式所涉及的摄像装置100相同的效果。

(各实施方式的组合)

上述各实施方式也可以通过进行组合来实现。例如，可以在第2实施方式中，在第一记录模式和第二记录模式下进行不同的伽马校正，同时进行如第1实施方式那样的增益校正。并且，可以在第2实施方式中进行如第3实施方式那样的噪声处理和轮廓处理。并且，也可以在第4实施方式所涉及的摄像装置100的结构中实现与第2实施方式、第3实施方式相同的处理。

(变形例)

作为动态图像数据的影像标准，以BT.709为例进行了说明，但动态图像数据的影像标准并不限于BT.709，可以设为各种影像标准。

如上所述，本说明书中至少记载有以下事项。

(1)一种动态图像控制装置，其具备：

存储部，临时存储从摄像部输出的像素数据；

显影处理部，输出对存储于上述存储部中的像素数据进行包括去马赛克处理的显影处理而得的动态图像数据；及

模式切换控制部，切换仅以上述动态图像数据及存储于上述存储部中的像素数据中的上述动态图像数据为记录数据的第一记录模式和以上述动态图像数据及存储于上述存储部中的像素数据为记录数据的第二记录模式，并且以使上述摄像部在上述第一记录模式和上述第二记录模式下根据不同的曝光值进行拍摄的方式进行控制。

(2)根据(1)所述的动态图像控制装置，其中，

上述模式切换控制部以使上述第二记录模式下的上述拍摄的曝光值低于上述第一记录模式下的上述拍摄的曝光值的方式进行控制。

(3)根据(1)或(2)所述的动态图像控制装置，其中，

上述模式切换控制部以使上述显影处理在上述第一记录模式和上述第二记录模式下不同的方式进行控制。

(4)根据(3)所述的动态图像控制装置，其中，

上述模式切换控制部以使包括在上述显影处理中的与亮度相关的图像处理在上述第一记录模式和上述第二记录模式下不同的方式进行控制。

(5)根据(4)所述的动态图像控制装置，其中，

上述模式切换控制部以使由上述第二记录模式下的上述与亮度相关的图像处理产生的上述动态图像数据的亮度的增加量多于由上述第一记录模式下的上述与亮度相关的图像处理产生的上述动态图像数据的亮度的增加量的方式进行控制。

(6)根据(4)或(5)所述的动态图像控制装置，其中，

上述与亮度相关的图像处理包括伽马校正。

(7)根据(4)至(6)中任一项所述的动态图像控制装置，其中，

上述与亮度相关的图像处理包括增益校正。

(8)根据(4)至(7)中任一项所述的动态图像控制装置，其中，

上述与亮度相关的图像处理包括LUT处理。

(9)根据(1)至(8)中任一项所述的动态图像控制装置，其中，

上述模式切换控制部以使上述显影处理部在上述第一记录模式和上述第二记录模式下对上述像素数据进行不同的噪声处理的方式进行控制。

(10)根据(1)至(9)中任一项所述的动态图像控制装置，其中，

上述模式切换控制部以使上述显影处理部在上述第一记录模式和上述第二记录模式下对上述像素数据进行不同的轮廓处理的方式进行控制。

(11)根据(1)至(10)中任一项所述的动态图像控制装置，其具备输出上述记录数据的输出部。

(12)一种动态图像记录装置，其具备：

(1)至(10)中任一项所述的动态图像控制装置；及

记录部，记录上述记录数据。

(13)一种动态图像控制方法，其为具备临时存储从摄像部输出的像素数据的存储部的动态图像控制装置的动态图像控制方法，包括如下步骤：

输出对存储于上述存储部中的像素数据进行包括去马赛克处理的显影处理而得的动态图像数据；及

切换仅以上述动态图像数据及存储于上述存储部中的像素数据中的上述动态图像数据为记录数据的第一记录模式和以上述动态图像数据及存储于上述存储部中的像素数据为记录数据的第二记录模式，并且以使上述摄像部在上述第一记录模式和上述第二记录模式下根据不同的曝光值进行拍摄的方式进行控制。

(14)根据(13)所述的动态图像控制方法，其中，

以使上述第二记录模式下的上述拍摄的曝光值低于上述第一记录模式下的上述拍摄的曝光值的方式进行控制。

(15)根据(13)或(14)所述的动态图像控制方法，其中，

以使上述显影处理在上述第一记录模式和上述第二记录模式下不同的方式进行控制。

(16)根据(15)所述的动态图像控制方法，其中，

以使上述显影处理中与亮度相关的图像处理在上述第一记录模式和上述第二记录模式下不同的方式进行控制。

(17)根据(16)所述的动态图像控制方法，其中，

以使由上述第二记录模式下的上述与亮度相关的图像处理产生的上述动态图像数据的亮度的增加量多于由上述第一记录模式下的上述与亮度相关的图像处理产生的上述动态图像数据的亮度的增加量的方式进行控制。

(18)根据(16)或(17)所述的动态图像控制方法，其中，

上述与亮度相关的图像处理包括伽马校正。

(19)根据(16)至(18)中任一项所述的动态图像控制方法，其中，

上述与亮度相关的图像处理包括增益校正。

(20)根据(16)至(19)中任一项所述的动态图像控制方法，其中，

上述与亮度相关的图像处理包括LUT处理。

(21)根据(13)至(20)中任一项所述的动态图像控制方法，其中，

包括在上述显影处理中的噪声处理在上述第一记录模式和上述第二记录模式下不同。

(22)根据(13)至(21)中任一项所述的动态图像控制方法，其中，

包括在上述显影处理中的轮廓处理在上述第一记录模式和上述第二记录模式下不同。

(23)根据(13)至(22)中任一项所述的动态图像控制方法，其包括输出上述记录数据的输出部。

(24)一种动态图像记录方法，其包括在(13)至(22)中任一项所述的动态图像控制方法中记录上述记录数据。

(25)一种动态图像控制程序，其为具备临时存储从摄像部输出的像素数据的存储部的动态图像控制装置的动态图像控制程序，用于使上述动态图像控制装置的处理器执行如下处理：

输出对存储于上述存储部中的像素数据进行包括去马赛克处理的显影处理而得的动态图像数据；及

切换仅以上述动态图像数据及存储于上述存储部中的像素数据中的上述动态图像数据为记录数据的第一记录模式和以上述动态图像数据及存储于上述存储部中的像素数据为记录数据的第二记录模式，并且以使上述摄像部在上述第一记录模式和上述第二记录模式下根据不同的曝光值进行拍摄的方式进行控制。

符号说明

31、61、81-伽马特性，41、42、71、91-信号值特性，43-被摄体反射率，100-摄像装置，101-成像透镜***，102-成像元件，103-ADC，104-摄像控制部，105-RAW校正部，106-临时存储部，107-显影处理部，108-监视器，109-输出控制部，110-外部输出I/F，119-摄像部，120-外部记录装置，121-外部输入I/F，122-记录控制部，123-记录介质，124-内部输出I/F，125-内部输入I/F。

Claims (25)

1.一种动态图像控制装置，其具备：

存储部，临时存储从摄像部输出的像素数据；

显影处理部，输出对存储于所述存储部中的像素数据进行包括去马赛克处理的显影处理而得的动态图像数据；及

模式切换控制部，切换仅以所述动态图像数据及存储于所述存储部中的像素数据中的所述动态图像数据为记录数据的第一记录模式和以所述动态图像数据及存储于所述存储部中的像素数据为记录数据的第二记录模式，并且以使所述摄像部在所述第一记录模式和所述第二记录模式下根据不同的曝光值进行拍摄的方式进行控制。

2.根据权利要求1所述的动态图像控制装置，其中，

所述模式切换控制部以使所述第二记录模式下的所述拍摄的曝光值低于所述第一记录模式下的所述拍摄的曝光值的方式进行控制。

3.根据权利要求1或2所述的动态图像控制装置，其中，

所述模式切换控制部以使所述显影处理在所述第一记录模式和所述第二记录模式下不同的方式进行控制。

4.根据权利要求3所述的动态图像控制装置，其中，

所述模式切换控制部以使包括在所述显影处理中的与亮度相关的图像处理在所述第一记录模式和所述第二记录模式下不同的方式进行控制。

5.根据权利要求4所述的动态图像控制装置，其中，

所述模式切换控制部以使由所述第二记录模式下的所述与亮度相关的图像处理产生的所述动态图像数据的亮度的增加量多于由所述第一记录模式下的所述与亮度相关的图像处理产生的所述动态图像数据的亮度的增加量的方式进行控制。

6.根据权利要求4或5所述的动态图像控制装置，其中，

所述与亮度相关的图像处理包括伽马校正。

7.根据权利要求4至6中任一项所述的动态图像控制装置，其中，

所述与亮度相关的图像处理包括增益校正。

8.根据权利要求4至7中任一项所述的动态图像控制装置，其中，

所述与亮度相关的图像处理包括查找表处理。

9.根据权利要求1至8中任一项所述的动态图像控制装置，其中，

所述模式切换控制部以使所述显影处理部在所述第一记录模式和所述第二记录模式下对所述像素数据进行不同的噪声处理的方式进行控制。

10.根据权利要求1至9中任一项所述的动态图像控制装置，其中，

所述模式切换控制部以使所述显影处理部在所述第一记录模式和所述第二记录模式下对所述像素数据进行不同的轮廓处理的方式进行控制。

11.根据权利要求1至10中任一项所述的动态图像控制装置，其具备输出所述记录数据的输出部。

12.一种动态图像记录装置，其具备：

权利要求1至10中任一项所述的动态图像控制装置；及

记录部，记录所述记录数据。

13.一种动态图像控制方法，其为具备临时存储从摄像部输出的像素数据的存储部的动态图像控制装置的动态图像控制方法，包括如下步骤：

输出对存储于所述存储部中的像素数据进行包括去马赛克处理的显影处理而得的动态图像数据；及

切换仅以所述动态图像数据及存储于所述存储部中的像素数据中的所述动态图像数据为记录数据的第一记录模式和以所述动态图像数据及存储于所述存储部中的像素数据为记录数据的第二记录模式，并且以使所述摄像部在所述第一记录模式和所述第二记录模式下根据不同的曝光值进行拍摄的方式进行控制。

14.根据权利要求13所述的动态图像控制方法，其中，

以使所述第二记录模式下的所述拍摄的曝光值低于所述第一记录模式下的所述拍摄的曝光值的方式进行控制。

15.根据权利要求13或14所述的动态图像控制方法，其中，

以使所述显影处理在所述第一记录模式和所述第二记录模式下不同的方式进行控制。

16.根据权利要求15所述的动态图像控制方法，其中，

以使所述显影处理中与亮度相关的图像处理在所述第一记录模式和所述第二记录模式下不同的方式进行控制。

17.根据权利要求16所述的动态图像控制方法，其中，

以使由所述第二记录模式下的所述与亮度相关的图像处理产生的所述动态图像数据的亮度的增加量多于由所述第一记录模式下的所述与亮度相关的图像处理产生的所述动态图像数据的亮度的增加量的方式进行控制。

18.根据权利要求16或17所述的动态图像控制方法，其中，

所述与亮度相关的图像处理包括伽马校正。

19.根据权利要求16至18中任一项所述的动态图像控制方法，其中，

所述与亮度相关的图像处理包括增益校正。

20.根据权利要求16至19中任一项所述的动态图像控制方法，其中，

所述与亮度相关的图像处理包括查找表处理。

21.根据权利要求13至20中任一项所述的动态图像控制方法，其中，

包括在所述显影处理中的噪声处理在所述第一记录模式和所述第二记录模式下不同。

22.根据权利要求13至21中任一项所述的动态图像控制方法，其中，

包括在所述显影处理中的轮廓处理在所述第一记录模式和所述第二记录模式下不同。

23.根据权利要求13至22中任一项所述的动态图像控制方法，其包括输出所述记录数据的输出部。

24.一种动态图像记录方法，其包括在权利要求13至22中任一项所述的动态图像控制方法中记录所述记录数据。

25.一种动态图像控制程序，其为具备临时存储从摄像部输出的像素数据的存储部的动态图像控制装置的动态图像控制程序，用于使所述动态图像控制装置的处理器执行如下处理：

输出对存储于所述存储部中的像素数据进行包括去马赛克处理的显影处理而得的动态图像数据；及

切换仅以所述动态图像数据及存储于所述存储部中的像素数据中的所述动态图像数据为记录数据的第一记录模式和以所述动态图像数据及存储于所述存储部中的像素数据为记录数据的第二记录模式，并且以使所述摄像部在所述第一记录模式和所述第二记录模式下根据不同的曝光值进行拍摄的方式进行控制。

Images