CN104917940B - 摄像装置、摄像方法和数据记录装置 - Google Patents

Abstract

本发明提供摄像装置、摄像方法和数据记录装置，即使在摄像装置异常结束的情况下或者在记录介质与摄像装置之间的连接或通信被切断等情况下，也不会继续残留有文件。具有：摄像元件(103)，其取得图像数据；SDRAM(127)，其暂时存储图像数据；图像合成部(109c)，其对暂时存储的图像数据进行图像合成；记录介质(131)，其能够记录暂时存储的图像数据中的至少一部分退避数据；管理信息存储部，其存储用于管理退避数据的管理信息；以及微型计算机(121)，其在将退避数据存储到记录介质(131)中时，使用管理信息进行退避数据的管理。

Description

摄像装置、摄像方法和数据记录装置

技术领域

本发明涉及如下摄像装置、摄像方法和数据记录装置：在进行图像处理时，暂时存储多个图像数据，使用该暂时存储的图像数据来进行图像处理。

背景技术

在数字照相机等摄像装置中，有些搭载有如下图像处理功能：拍摄多个图像，实现在1张图像中不能表现的画质。例如，在日本公开专利2008-271240号公报(以下，称作专利文献1)中，提出了如下摄像装置：使用移动焦点位置而拍摄到的多个图像数据，进行被摄体的位置对齐和图像合成，由此，能够生成全部焦点图像和控制了模糊的图像。

此外，在日本公开专利2011-004353号公报(以下，称作专利文献2)中，提出了如下HDR(High Dynamic Range：高动态范围)效果技术：拍摄灰度不同的多个图像，对多个图像合成，由此再现出仅靠单个图像不能再现的灰度特性。在日本专利第4325625号公报(以下，称作专利文献3)中，提出了如下技术：对多个图像进行合成，生成分辨率比原图像高的图像。

此外，在数字照相机等摄像装置中，将记录图像文件到闪存介质等非易失性存储器中。在将数据记录到闪存介质的情况下，通常通过以簇为单位写入数据，并在表(以下，记作FAT(文件分配表))中进行记录，其中，该表管理所述数据被记录到哪个簇中。

用于对闪存中记录的数据进行管理的FAT及目录信息随着文件的变更而频繁地读写，因此，文件的改写性能劣化。因此，在日本公开专利2005-108304号公报(以下，称作专利文献4)中提出了，使用用于记录管理信息的不同种类的非易失性存储器，防止劣化导致的速度下降。

发明内容

发明要解决的问题

在对图像进行合成的情况下，通常在合成中使用的图像张数越多，则得到越好的结果。因此，从画质的观点来看，期望能够尽量增加拍摄张数。另一方面，因安装空间及部件成本的制约等，数字照相机等摄像装置中搭载的易失性暂时存储用的存储器(例如，SDRAM(Synchronous Dynamic Random Access Memory：同步动态随机存取存储器))能够安装的容量是有限的，因此，能够同时存储的图像的数量有限。

因此，考虑利用如下技术：将数据作为文件暂时退避记录到传送速度比SDRAM低的大容量的非易失性记录介质中，在进行必要处理时再次读入。但是，在作为文件而记录到非易失性记录介质中时，在摄像装置因电池用尽等而异常结束的情况下、或者在记录介质与摄像装置的连接或通信被切断的情况下，不能删除暂时记录的文件，因此，作为文件残留在记录介质中，使得记录拍摄到的图像的区域减少。

本发明是鉴于这样的情况而完成的，目的在于提供如下摄像装置、摄像方法和数据记录装置：即使在摄像装置异常结束的情况下或者在记录介质与摄像装置之间的连接或通信被切断等情况下，也不会继续残留有暂时记录的文件，从而不会对记录拍摄到的图像的区域产生影响。

用于解决问题的手段

本发明的摄像装置包括：图像数据取得电路，其取得图像数据；暂时存储器，其暂时存储上述图像数据；图像处理电路，其对上述暂时存储的图像数据进行图像处理；记录介质，其能够记录上述暂时存储的图像数据中的至少一部分退避数据；管理信息存储器，其存储用于管理上述退避数据的管理信息；以及控制电路，在将上述退避数据存储到上述记录介质时，该控制电路使用上述管理信息进行上述退避数据的管理。

此外，本发明的摄像装置包括：摄像电路，其拍摄被摄体而得到图像数据；存储器，其暂时存储上述图像数据；图像合成电路，其对多个图像数据进行合成，生成合成后的图像数据；记录控制电路，其控制数据记录；控制电路，其控制摄像装置，其中，上述控制电路指示上述摄像电路连续地取得多个图像数据，指示上述记录控制电路以第1记录方式记录上述多个图像数据中的至少一部分，指示在上述图像合成电路中对上述多个图像数据进行合成，指示上述记录控制电路以第2记录方式记录由上述图像合成电路生成的图像数据。

此外，本发明的摄像方法包括以下步骤：取得图像数据；暂时存储上述图像数据；将上述暂时存储的图像数据中的至少一部分作为退避数据进行退避；存储用于管理上述退避数据的管理信息；在将上述退避数据存储到上述记录介质时，使用上述管理信息进行上述退避数据的管理，使用所退避的上述退避数据进行图像处理。

此外，本发明的数据记录装置是用于记录从摄像装置输出的图像数据的图像数据记录装置，该图像数据记录装置具有：数据取得电路，其经由通信电路，同时取得退避数据和删除时间；记录介质，其能够记录上述退避数据；管理信息存储器，其存储上述删除时间；以及控制电路，在从经由上述通信电路的通信路径断开起经过了上述删除时间的情况下，该控制电路删除上述退避数据。

发明的效果

根据本发明，能够提供如下摄像装置、摄像方法和数据记录装置：即使在摄像装置异常结束的情况下或者在记录介质与摄像装置之间的连接或通信被切断等情况下，也不会继续残留有文件，从而不会对记录拍摄到的图像的区域产生影响。

附图说明

图1是示出本发明的第1实施方式的照相机的主要电气结构的框图。

图2是示出本发明的第1实施方式的照相机的主动作的流程图。

图3是示出本发明的第1实施方式的照相机的主动作的流程图。

图4是示出本发明的第1实施方式的照相机的拍摄/图像处理的动作的流程图。

图5是示出本发明的第1实施方式的照相机的拍摄/图像处理的动作的流程图。

图6是对在本发明的第1实施方式的照相机中来自SDARAM的数据退避的动作进行说明的图。

图7是对在本发明的第1实施方式的照相机中针对记录介质的数据结构进行说明的图。

图8是对在本发明的第1实施方式的照相机中记录介质的数据退避的动作进行说明的图。

图9是示出在本发明的第2实施方式中能够与照相机进行通信的外部设备的结构的框图。

图10是示出本发明的第2实施方式的照相机的拍摄/图像处理的动作的流程图。

图11是示出本发明的第2实施方式的外部设备的主动作的流程图。

具体实施方式

下面，作为本发明的实施方式，对应用于数字照相机的例子进行说明。该数字照相机具有摄像部，通过该摄像部将被摄体像转换为图像数据，根据该转换后的图像数据，在配置于主体的背面的显示部中实时取景显示被摄体像。拍摄者通过观察实时取景显示，确定构图和快门时机。在进行快门释放操作时，图像数据记录在记录介质中。当选择再现模式时，能够在显示部中再现显示记录介质中记录的图像数据。

此外，大体上，第1实施方式的数字照相机能够控制用于数据记录的FAT，能够在照相机内的暂时存储用存储器(SDRAM)中存储将退避数据记录到了记录介质的哪个位置(哪个簇等)。但是，在记录介质中，不对记录退避数据的位置(哪个簇等)进行记录。因此，能够从记录介质的FAT中识别出退避数据被记录在哪个位置(哪个簇)中，即使记录介质中残留有退避数据，在数据管理上也视作未记录有退避数据，从而即使在摄像装置异常结束的情况下或者在记录介质与摄像装置之间的通信被切断等情况下，在实质上，不会继续残留有退避数据(文件)。

图1是示出本发明的第1实施方式的照相机的主要电气结构的框图。该照相机由照相机主体100和能够相对于该照相机主体100进行拆装的更换式镜头200构成。另外，在本实施方式中，设摄影镜头为更换镜头式，但是不限于此，当然也可以是在照相机主体上固定有摄影镜头的类型的数字照相机。

更换式镜头200由摄影镜头201、光圈203、驱动器205、微型计算机207、闪存209构成，在与后述照相机主体100之间具有接口199。

摄影镜头201由用于形成被摄体像的多个光学镜头构成，是单焦点镜头或变焦镜头。在该摄影镜头201的光轴的后方配置有光圈203，光圈203的数值孔径可变，限制穿过摄影镜头201后的被摄体光束的光量。并且，摄影镜头201能够通过驱动器205而在光轴方向上移动，根据来自微型计算机207的控制信号对摄影镜头201的焦点位置进行控制，在变焦镜头的情况下，还对焦距进行控制。并且，驱动器205还进行光圈203的数值孔径的控制。

与驱动器205连接的微型计算机207与接口199和闪存209连接。微型计算机207按照闪存209中存储的程序代码进行动作，与后述照相机主体100内的微型计算机121进行通信，根据来自微型计算机121的控制信号进行更换式镜头200的控制。

在闪存209中，除了所述程序代码以外，还存储有更换式镜头200的光学特性和调整值等各种信息。接口199是用于进行更换式镜头200内的微型计算机207和照相机主体100内的微型计算机121的相互间的通信的接口。

在照相机主体100内，在摄影镜头201的光轴上配置有机械快门101。该机械快门101对被摄体光束的穿过时间进行控制，采用公知的焦面式快门等。在该机械快门101的后方，在由摄影镜头201形成被摄体像的位置配置有摄像元件103。

摄像元件103发挥作为摄像电路的功能，在摄像元件103中以二维方式呈矩阵状配置有构成各像素的光电二极管，各光电二极管产生与受光量对应的光电转换电流，该光电转换电流通过与各光电二极管连接的电容进行电荷蓄积。在各像素的前表面配置有拜耳排列的RGB滤镜。并且，摄像元件103具有电子快门。电子快门通过对从摄像元件103的电荷蓄积到电荷读出的时间进行控制，从而进行曝光时间的控制。另外，摄像元件103不限于拜耳排列，例如当然也可以是Foveon(注册商标)这样的层叠形式。

摄像元件103与模拟处理电路105连接，该模拟处理电路105在针对从摄像元件103中读出的光电转换信号(模拟图像信号)降低复位噪声等之后进行波形整形，进而进行增益放大以成为适当亮度。

模拟处理电路105与A/D转换器107连接，该A/D转换器107对模拟图像信号进行模拟数字转换，将数字图像信号(以后称为图像数据)输出到总线110。另外，在本说明书中，将在图像处理电路109中进行图像处理之前的原始图像数据称为RAW数据。

A/D转换器107与RAW数据压缩电路108连接，该RAW数据压缩电路108进行从A/D转换器107输出的RAW数据的压缩，在取入基准图像以外的RAW数据时使用。基准图像是指在对多张图像数据进行合成时作为基准的图像。RAW数据压缩电路108使用折线或表将A/D转换后的RAW数据转换为数据量比输入数据小的数据。可以是单纯舍去下位比特位或乘以小于1的系数那样的转换方法，不过，考虑图像处理电路109中的伽马转换，使用折线或表的转换的方式能够减少画质劣化。

总线110是用于将在照相机主体100的内部读出或生成的各种数据转送到照相机主体100的内部的转送路径。在总线110上，除了连接有所述的A/D转换器107和RAW数据压缩电路108以外，还连接有图像处理电路109、AE(Auto Exposure：自动曝光)处理电路111、AF(Auto Focus：自动对焦)处理电路113、图像压缩电路115、图像解压缩电路117、微型计算机121、SDRAM 127、存储器接口129、显示驱动器133、通信电路141。

图像处理电路109具有将压缩的RAW数据解压缩的RAW数据解压缩电路109a、进行通常的图像处理的基本图像处理电路109b和进行图像合成的图像合成电路109c。在对多个图像进行合成的情况下，使用RAW数据解压缩电路109a、基本图像处理电路109b和图像合成电路109c。

基准图像以外的图像数据由RAW数据压缩电路108压缩，RAW数据解压缩电路109a进行压缩的RAW数据的解压缩。RAW数据解压缩电路109a应用了RAW数据压缩电路108的逆特性，转换为与刚进行A/D转换后相同的数据。如果压缩是可逆的，则为同一数据，此外，如果为不可逆压缩，则转换为同样的数据。通常，A/D转换后的数据对曝光量具有线性的特性，因此，将SDRAM中存储的压缩的RAW数据转换为线性的RAW数据。

基本图像处理电路109a对RAW数据进行光学黑体(OB)减法处理、白平衡(WB)校正、拜耳数据的情况下进行的同时化处理、颜色再现处理、伽马校正处理、颜色矩阵运算、降噪(NR)处理、边缘强调处理等。在拍摄一张且未设定特殊效果等情况下，仅通过该基本图像处理电路109a的处理而完成图像处理。

图像合成电路109c根据设定的合成模式等而进行各种图像合成。在本实施方式中，能够设定HDR合成、深度合成和超分辨合成这3种合成模式。在设定了HDR合成模式的情况下，图像合成电路109c针对基于多个曝光量拍摄到的多个图像数据与基准图像进行位置对齐和合成，由此，生成动态范围比单拍更大的图像。

此外，在设定了深度合成模式的情况下，图像合成电路109c针对在多个对焦位置拍摄到的多个图像数据与基准图像进行位置对齐和合成，由此，生成景深与单拍不同的图像。在设定了超分辨合成模式的情况下，图像合成电路109c针对多个图像数据与基准图像进行位置对齐和合成，生成比单拍更具有表观分辨率的图像。

AE处理电路111根据经由总线110输入的图像数据测定被摄体亮度，经由总线110将该被摄体亮度信息输出到微型计算机121。可以设置专用的测光传感器以用于进行被摄体亮度的测定，但是，在本实施方式中，根据图像数据计算被摄体亮度。

AF处理电路113从图像数据中提取高频成分的信号，通过累积处理取得对焦评价值，经由总线110输出到微型计算机121。在本实施方式中，通过所谓的对比度法进行摄影镜头201的对焦。在该实施方式中，以基于对比度法的AF控制为例进行了说明，但是，也可以对被摄体光束进行分割，在其光路上设置相位差传感器或者在摄像元件上设置相位差传感器，通过基于相位差AF的AF控制进行对焦。

在将图像数据记录在记录介质131中时，在静态图像的情况下，图像压缩电路115按照JPEG压缩方式等各种压缩方式对从SDRAM 127中读出的图像数据进行压缩，并且，在动态图像的情况下，图像压缩电路115按照MPEG等各种压缩方式对从SDRAM 127中读出的图像数据进行压缩。

并且，图像解压缩缩电路117还进行JPEG图像数据和MPEG图像数据的解压缩缩，以用于进行图像再现显示。在解压缩缩时，读出记录介质131中记录的文件，在图像解压缩缩电路117中实施解压缩缩处理后，将解压缩缩后的图像数据暂时存储在SDRAM 127中。另外，在本实施方式中，作为图像压缩方式，采用JPEG压缩方式和MPEG压缩方式，但是，压缩方式不限于此，当然也可以是TIFF、H.264等其他压缩方式。并且，压缩方式既可以是可逆压缩，也可以是非可逆压缩。

微型计算机121发挥作为该照相机整体的控制电路的功能，根据闪存125中存储的程序代码，总括地控制照相机的各种时序。在微型计算机121上，除了所述接口199以外，还连接有操作部件123和闪存125。

操作部件123包括电源按钮、快门释放按钮、动态图像按钮、再现按钮、菜单按钮、十字键、OK按钮等各种输入按钮和各种输入键等的操作部件，检测这些操作部件的操作状态，将检测结果输出到微型计算机121。微型计算机121根据来自操作部件123的检测结果，执行与用户操作对应的各种时序。电源按钮是用于指示该数字照相机的电源的接通/断开的操作部件。当按下电源按钮时，该数字照相机的电源接通，当再次按下电源按钮时，该数字照相机的电源断开。

快门释放按钮具有两种开关。即，快门释放按钮由半按时接通的第一释放开关、半按后进一步按入而全按时接通的第二释放开关构成。当第一释放开关接通后，微型计算机121执行AE动作、AF动作等拍摄准备时序。并且，当第二释放开关接通后，对机械快门101等进行控制，执行从摄像元件103等取得基于被摄体图像的图像数据并将该图像数据记录在记录介质131中的一连串的拍摄时序，进行拍摄。

动态图像按钮是用于指示动态图像拍摄的开始和结束的操作按钮，当最初操作动态图像按钮时，开始进行动态图像拍摄，当再次操作时，结束动态图像拍摄。再现按钮是用于设定和解除再现模式的操作按钮，当设定了再现模式时，从记录介质131中读出拍摄图像的图像数据，在显示面板135中再现显示拍摄图像。

菜单按钮是用于使显示面板135显示菜单画面的操作按钮。能够在菜单画面上进行各种照相机设定。作为照相机设定，例如具有HDR合成、深度合成和超分辨合成等合成模式。

闪存125为非易失性存储器，存储用于执行微型计算机121的各种时序的程序代码、白平衡增益及颜色矩阵等图像处理所需的参数等。微型计算机121基于该程序代码，进行照相机整体的控制。

SDRAM 127是图像数据等的暂时存储用的可电擦写的易失性存储器。该SDRAM 127暂时存储从A/D转换器107输出的图像数据，以及图像处理电路109、图像压缩电路115、图像解压缩电路117等中进行处理后的图像数据。

存储器接口129与记录介质131连接，进行在记录介质131中写入和读出图像数据或图像数据中添加的头信息等数据的控制。记录介质131例如是相对于照相机主体100拆装自如的存储卡等记录介质，但是不限于此，也可以是内置于照相机主体100中的硬盘等。

显示驱动器133与显示面板135连接，根据从SDRAM 127或记录介质131中读出并通过图像解压缩缩电路117进行解压缩缩后的图像数据，在显示面板135中显示图像。显示面板135配置在照相机主体100的背面等，进行图像显示。由于在背面等照相机主体的外装部配置显示面，所以，显示面板135是容易受到外光影响的显示部，但是，能够设定大型的显示面板。另外，作为显示部，可以采用液晶显示面板(LCD、TFT)、有机EL等各种显示面板。

作为显示面板135中的图像显示，包括在刚刚拍摄之后在短时间内显示要记录的图像数据的记录浏览显示、记录介质131中记录的静态图像或动态图像的图像文件的再现显示、以及实时取景显示等动态图像显示。

通信电路141通过基于USB、LAN等的有线通信、无线通信等，与外部进行通信，将实时取景图像或从记录介质131中读出的再生图像发送给PC(个人计算机)、智能手机或电视等外部的显示部。此外，当在图像合成电路109c中使用多个图像进行图像合成时，通信电路141针对暂时存储的图像数据的全部或一部分，与外部的存储介质(例如，PC、智能手机、网络上的服务器等存储器)之间进行图像数据的收发。

接下来，使用图2和图3所示的流程图，对本实施方式的照相机的主流程的处理进行说明。此外，图2、图3和后述的图4、图5、图10所示的流程图是按照闪存125中存储的程序代码，由微型计算机121控制各部来执行的。

在操作操作部件123内的电源按钮而接通电源时，按照图2所示的主流程，微型计算机121开始动作。当开始进行动作后，首先，执行初始化(S1)。作为初始化，进行机械性初始化和各种标志等的初始化等电气性初始化。作为各种标志之一，将表示是否处于动态图像记录中的记录中标志重置为关闭(参照步骤S13、S15、S31等)。

当进行初始化后，接下来，判定是否按下了再现按钮(S3)。这里，检测操作部件123内的再现按钮的操作状态并进行判定。在该判定结果为按下了再现按钮的情况下，执行再现/编辑(S5)。这里，从记录介质131中读出图像数据，在LCD135中显示静态图像和动态图像的一览。用户通过操作十字键，从一览中选择图像，通过OK按钮确定图像。并且，能够进行正在选择的图像的编辑。

当执行步骤S5中的再现/编辑后、或步骤S3中的判定结果为未按下再现按钮的情况下，判定是否进行照相机设定(S7)。在操作了操作部件123内的菜单按钮时，在菜单画面中进行照相机设定。因此，在该步骤中，根据该菜单按钮是否被按下来进行判定。

在步骤S7中的判定结果为按下菜单按钮的情况下，进行照相机设定(S9)。如上所述，能够在菜单画面中进行各种照相机设定。作为照相机设定，如上所述，例如能够设定通常拍摄、HDR合成、深度合成、超分辨合成等模式作为拍摄模式。并且，作为静态图像记录模式，能够设定JPEG记录、TIFF记录、JPEG-RAW记录、RAW记录等模式。作为动态图像记录模式，能够设定Motion JPEG记录、H.264记录等模式。作为画质模式，能够设定精致(Fine)、正常(Normal)等模式。

当在步骤S9中进行照相机设定后、或步骤S7中的判定结果不是照相机设定的情况下，接下来，判定是否按下了动态图像按钮(S11)。这里，微型计算机121从操作部件123输入动态图像按钮的操作状态并进行判定。

在步骤S11中的判定结果为按下了动态图像按钮的情况下，进行记录中标志的反转(S13)。在动态图像拍摄中，记录中标志设定为打开(1)，在未拍摄动态图像的情况下，记录中标志重置为关闭(0)。在该步骤中，使标志进行反转，即，在设定为打开(1)的情况下反转为关闭(0)，在设定为关闭(0)的情况下反转为打开(1)。

当在步骤S13中进行记录中标志的反转后，接下来，判定是否处于动态图像记录中(S15)。这里，根据步骤S13中反转后的记录中标志是设定为打开还是设定为关闭来进行判定。

在步骤S15中的判定结果为处于动态图像记录中的情况下，生成动态图像文件(S19)。在后述步骤S61中进行动态图像的记录，但是，在该步骤中，生成动态图像记录用的动态图像文件，进行准备以使得能够记录动态图像的图像数据。

另一方面，在判定结果为不处于动态图像记录中的情况下，关闭动态图像文件(S17)。由于操作了动态图像按钮而使动态图像拍摄结束，所以，在该步骤中关闭动态图像文件。在关闭动态图像文件时，通过在动态图像文件的头中记录帧数等，设为能够作为动态图像文件进行再现的状态，结束文件写入。

当在步骤S17中关闭动态图像文件后、或在步骤S19中生成动态图像文件后、或步骤S11中的判定结果为未按下动态图像按钮的情况下，接下来，判定是否处于动态图像记录中(S31)。在该步骤中，与步骤S15同样，根据记录中标志的打开或关闭来进行判定。

在步骤S31中的判定结果为未处于动态图像记录中的情况下，判定是否半按了快门释放按钮，换言之，判定第一释放开关是否从断开状态变成接通状态(S33)。通过操作部件123来检测与快门释放按钮联动的第一释放开关的状态，根据该检测结果进行该判定。在检测结果为第一释放开关从断开状态转变到接通状态的情况下判定结果为“是”，另一方面，在维持接通状态或断开状态的情况下判定结果为“否”。

在步骤S33中的判定结果为半按了快门释放按钮而从断开状态转变到第一释放开关接通的情况下，执行AE/AF动作(S35)。这里，AE处理电路111根据由摄像元件103取得的图像数据检测被摄体亮度，根据该被摄体亮度计算成为适当曝光的快门速度、光圈值等。

并且，在步骤S35中进行AF动作。这里，驱动器205经由更换式镜头200内的微型计算机207使摄影镜头201的焦点位置移动，以使得由AF处理电路113取得的对焦评价值成为峰值。因此，在未进行动态图像拍摄的情况下，当半按了快门释放按钮后，在该时刻进行摄影镜头201的对焦。然后，进入步骤S37。

在步骤S31中的判定结果为快门释放按钮未从断开状态转变到第一释放开关接通的情况下，接下来，判定是否全按了快门释放按钮而使第二释放开关变为接通状态(S41)。在该步骤中，通过操作部件123来检测与快门释放按钮联动的第二释放开关的状态，根据该检测结果进行判定。

在步骤S41中的判定结果为全按了快门释放按钮而使第二释放开关变为接通状态的情况下，进行拍摄/图像处理(S43)。这里，利用步骤S35中运算出的光圈值来控制光圈203，并且，利用运算出的快门速度来控制机械快门101的快门速度。然后，当经过与快门速度对应的曝光时间后，从摄像元件103中读出图像信号，将由模拟处理电路105和A/D转换器107处理后的RAW数据输出到总线110。

并且，在步骤S43中，在进行拍摄后进行图像处理。读出由摄像元件103取得的RAW数据，通过图像处理电路109进行图像处理。并且，在设定了图像合成模式的情况下，在该步骤中，根据图像合成模式进行多次拍摄，将图像合成时使用的图像数据暂时退避到记录介质133等中。该拍摄/图像处理的详细动作使用图4和图5在后面叙述。

在进行了拍摄/图像处理后，接下来，进行静态图像记录(S45)。这里，将实施了图像处理后的静态图像的图像数据记录在记录介质131中。在静态图像记录时，以所设定的形式进行记录。在设定了JPEG的情况下，在图像压缩电路115中对图像处理后的数据进行JPEG压缩并进行记录。并且，在TIFF形式的情况下，转换为RGB数据并以RGB形式进行记录。并且，在设定了RAW记录的情况下，在与通过拍摄而取得的RAW数据进行了合成的情况下，还记录合成RAW数据。图像数据的记录目的地可以是照相机主体内的记录介质131，也可以经由通信电路141记录在外部的设备中。

在步骤S41中的判定结果为没有全按快门释放按钮的情况下、或步骤S31中的判定结果为处于动态图像记录中的情况下，接下来，进行AE(S51)。在所述步骤S41的判定为“否”的情况下，是未对快门释放按钮进行任何操作的情况，该情况下，在后述步骤S57中进行实时取景显示。并且，在所述步骤S31的判定为“是”的情况下，处于动态图像记录中。在该步骤中，计算用于以适当曝光进行实时取景显示或动态图像拍摄的摄像元件103的电子快门的快门速度和ISO感光度。

当进行AE后，接着进行基于电子快门的拍摄(S53)。在这里将被摄体像转换为图像数据。即，在由摄像元件103的电子快门确定的曝光时间内进行电荷蓄积，当经过曝光时间后读出蓄积电荷，由此取得图像数据。

当进行基于电子快门的拍摄后，接下来，对所取得的图像数据进行图像处理(S55)。在该步骤中，通过基本图像处理电路109b进行WB校正、颜色矩阵运算、伽马转换、边缘强调、降噪等基本图像处理。

在进行了基本图像处理后，接下来，进行实时取景显示(S57)。在该步骤中，使用步骤S55中的进行基本图像处理后的图像数据，在显示面板135中进行实时取景显示。即，由于在步骤S53中取得图像数据并进行了图像处理，所以，使用该处理后的图像进行实时取景显示的更新。拍摄者通过观察该实时取景显示，能够确定构图和快门释放时机。

当在步骤S57中进行实时取景显示后，接下来，判定是否处于动态图像记录中(S59)。这里，判定记录中标志是否为打开。在该判定结果为处于动态图像记录中的情况下，进行动态图像记录(S61)。这里，将从摄像元件103中读出的摄像数据作为动态图像用的图像数据进行图像处理，将其记录在动态图像文件中。

在步骤S61中进行了动态图像记录后、或步骤S59中的判定结果为未处于动态图像记录中的情况下、或在步骤S45中进行了静态图像记录后、或在步骤S35中进行了AE/AF后，接下来，判定电源是否断开(S37)。在该步骤中，判定是否再次按下了操作部件123的电源按钮。在该判定结果为电源未断开的情况下，返回步骤S3。另一方面，在判定结果为电源断开的情况下，在进行主流程的结束动作后，结束该主流程。

这样，在本发明的第1实施方式的主流程中，能够设定图像合成模式等(S9)，在设定了图像合成模式后，在拍摄/图像处理中，根据图像合成模式，进行多次拍摄(S43)，记录下合成的图像数据(S45)。在进行图像合成时，能够将图像数据中的至少一部分暂时退避到记录介质131等。

接下来，使用图4和图5所示的流程图，对步骤S43的拍摄/图像处理的详细动作进行说明。在进入拍摄/图像处理的流程时，首先，进行合适曝光拍摄(S101)。此处，在快门释放按钮被半押时，根据在步骤S35中计算出的曝光条件进行拍摄。此外，根据拍摄模式等，该步骤中的拍摄可以不是适正曝光。

在进行了合适曝光拍摄后，接下来，进行RAW取入(S103)。步骤S101中的拍摄为基准图像，为了是画质优先，不由RAW数据压缩电路108进行数据压缩，而以非压缩方式取入RAW图像数据，并将其存储到SDRAM 127中。

在进行了RAW取入后，接下来，判定是否为HDR合成(S105)。判定在步骤S9的照相机设定中，是否设定了HDR合成模式作为拍摄模式。如上述那样，HDR合成模式为如下模式：使用通过以不同的曝光量依次拍摄而取得的多个图像数据，生成动态范围比单拍更大的图像。

在步骤S105中的判定结果为HDR合成的情况下，进行曝光量变更(S111)。例如将曝光量相对于在步骤S35中确定的合适曝光条件而依次变更为-1级(相对于合适曝光条件，曝光量变为一半)、+1级(相对于合适曝光条件，曝光量变为2倍)。在变更了曝光量后，进行拍摄(S113)。此处，按照在步骤S111中变更后的曝光量，进行拍摄。

在进行了拍摄后，进行RAW压缩取入(S115)。由于变更曝光量而拍摄到的图像不是基准图像，因此，容许画质略微劣化。因此，为了减小图像数据的容量，由RAW数据压缩电路108对读出的图像数据进行数据压缩。

在进行了RAW压缩取入后，接下来，判定是否进行了规定张数的拍摄(S117)。此处，判定为了进行HDR合成而设定的张数例如基准图像以外的拍摄图像的张数是否达到2张。在该判定的结果为未达到规定张数的情况下，返回到步骤S111，继续进行用于HDR合成的拍摄。

在步骤S105中的判定结果不是HDR合成的情况下，接下来，判定是否为深度合成(S121)。判定在步骤S9的照相机设定中，作为拍摄模式，是否设定了深度合成模式。如上述那样，深度合成模式是如下模式：使用通过将对焦镜头移动到不同的位置并依次拍摄而取得的多个图像数据，生成景深与单拍不同的图像。

在步骤S121中的判定结果为深度合成的情况下，进行定焦镜头的移动(S123)。此处，对交换式镜头200内的微型计算机207进行指示，使摄影镜头201依次移动到规定对焦位置。作为规定位置，例如可以是从最近侧到无限远而以1/8步逐次变更的位置。

在进行了对焦移动后，接下来，进行合适曝光拍摄(S125)。此处，按照在步骤S35中确定的合适曝光条件设定曝光量，进行拍摄。在进行了合适曝光拍摄后，接下来，与步骤S115同样地进行RAW压缩取入(S127)。此处，由RAW数据压缩电路108对读出的图像数据进行数据压缩。

在进行了RAW压缩取入后，接下来，判定是否进行了规定张数的拍摄(S129)。此处，针对为了进行深度合成而设定的张数，例如在将对焦位置的步骤数设定为1/8的情况下，判定基准图像以外的拍摄图像的张数是否达到8张。在该判定的结果为未达到规定张数的情况下，返回到步骤S123，继续进行用于深度合成的拍摄。

在步骤S121中的判定结果不是深度合成的情况下，接下来，判定是否为超分辨合成(S131)。判定在步骤S9的照相机设定中，是否设定了超分辨合成模式作为拍摄模式。如上述那样，超分辨合成模式为如下模式：使用多个图像数据生成比单拍更具有表观分辨率的图像。具体而言，在传感器抖动校正的情况下，使传感器(摄像元件103)偏移规定像素数的量(例如，传感器的1个像素的量)，此外，在镜头抖动校正的情况下，使校正用镜头偏移规定像素数的量(例如，传感器的1个像素的量)，并依次进行多个拍摄。且为如下模式：在取得了多个图像数据后，使用这些图像数据，生成与单拍不同的高分辨率的图像。

在步骤S131中的判定结果为超分辨合成的情况下，进行光轴微移动(S133)。此处，在传感器抖动校正的情况下，以使摄像元件103例如移动1个像素的量的方式，使传感器的位置在与光轴垂直的面内微移动。此外，在镜头抖动校正的情况下，例如以光轴在传感器上移动1个像素的量的方式，对校正用的镜头的状态进行微修正。

在进行了光轴微移动后，与步骤S125同样地进行合适曝光拍摄(S135)。此处，按照在步骤S35中确定的合适曝光条件设定曝光量，进行拍摄。在进行了合适曝光拍摄后，接下来，与步骤S115同样地进行RAW压缩取入(S137)。此处，由RAW数据压缩电路108对读出的图像数据进行数据压缩。

在进行了RAW压缩取入后，接下来，判定是否进行了规定张数的拍摄(S139)。此处，关于为了进行超分辨合成而设定的规定张数，例如进行如下判定：在基准图像以外，是否拍摄到从拍摄基准图像的位置起分别朝左偏移1个像素、朝下偏移1个像素、朝左下偏移1个像素而得到的3张图像。在该判定的结果为未达到规定张数的情况下，返回到步骤S133，继续进行用于超分辨合成的拍摄。

在步骤S117、S129、S139中的判定结果为达到了规定张数时，接下来，进行数据退避(S141)。使从摄像元件103读出的RAW数据保持非压缩或进行压缩后，存储到SDRAM 127中。图像合成电路109c使用SDRAM 127中存储的多个图像数据(RAW数据)进行HDR合成等图像合成，不过，此时为了在SDRAM 127中确保图像合成所需的存储区域，使SDRAM 127中存储的图像数据(RAW数据)的至少一部分退避到存储介质131中。关于该数据退避的详细动作，将在后面使用图7和图8进行记述。

在进行了数据退避后，在步骤S151以后进行图像合成。首先，与步骤S105同样地，判定是否为HDR合成(S151)。在该判定的结果为是HDR合成的情况下，接下来，进行RAW取得和解压缩(S153)。从SDRAM 127或退避目的地的记录介质131中取得基准图像的RAW数据和合成用图像的RAW数据。在该情况下，基准图像的RAW数据为非压缩，而合成用图像的RAW数据是压缩的，因此，在RAW数据解压缩电路109a中，对合成用图像的RAW数据进行解压缩处理。将取得的基准图像的RAW数据和解压缩后的合成用图像的RAW数据存储到SDRAM 127的作业用区域中。

在进行了RAW取得和解压缩后，接下来，进行位置对齐(S155)。此处，从SDRAM127中读出步骤S153中取得的基准图像的RAW数据和合成用图像的RAW数据，基于图像合成电路109c读出的基准图像和合成用图像的部分进行位置对齐。

在进行了位置对齐后，接下来，进行HDR合成(S157)。此处，图像合成电路109c使基准图像的RAW数据与以不同的曝光量依次拍摄到的合成用的RAW数据进行合成，或者，如果为该重复处理的第2次以后的合成，则使之前的合成结果与以不同的曝光量依次拍摄到的合成用的RAW数据进行合成，生成动态范围比单拍更大的图像。

在进行了HDR合成后，接下来，判定是否进行了规定张数的图像合成(S159)。此处，判定是否对合成用图像的张数、即用于HDR合成而拍摄到的张数的图像进行了HDR合成。在该判定的结果为未达到规定张数的情况下，返回到步骤S153，继续进行HDR合成。

步骤S151中的判定结果为不是HDR合成的情况下，接下来，与步骤S121同样地，判定是否为深度合成(S161)。在该判定的结果为深度合成的情况下，与步骤S153同样地进行RAW取得和解压缩(S163)。接下来，与步骤S155同样地进行位置对齐(S165)。

在进行了位置对齐后，接下来，进行深度合成(S167)。此处，使基准图像的RAW数据与在不同的对焦位置依次拍摄到的合成用的RAW数据进行合成，或者，如果为该重复处理的第2次以后的合成，则使之前的合成结果与在不同的对焦位置依次拍摄到的合成用的RAW数据进行合成，生成景深与单拍不同的图像。

在进行了深度合成后，接下来，判定是否进行了规定张数的图像合成(S169)。此处，判定是否对合成用图像的张数、即用于深度合成而拍摄到的张数进行了深度合成。在该判定的结果为未达到规定张数的情况下，返回到步骤S163，继续进行深度合成。

在步骤S161中的判定结果不是深度合成的情况下，接下来，与步骤S131同样地，判定是否为超分辨合成(S171)。在该判定的结果为超分辨合成的情况下，与步骤S153同样地进行RAW取得和解压缩(S173)。接下来，与步骤S155同样地进行位置对齐(S175)。

在进行了位置对齐后，接下来，进行超分辨合成(S177)。此处，使基准图像的RAW数据与在不同的光轴位置依次拍摄到的合成用的RAW数据进行合成，或者，如果为该重复处理的第2次以后的合成，则使之前的合成结果与在不同的光轴位置依次拍摄到的合成用的RAW数据进行合成，生成与单拍不同的表观分辨率的图像。

在进行了超分辨合成后，接下来，判定是否进行了规定张数的图像合成(S179)。此处，判定是否对合成用图像的张数、即用于超分辨合成而拍摄到的张数的图像进行了超分辨合成。在该判定的结果为未达到规定张数的情况下，返回到步骤S173，继续进行超分辨合成。

步骤S159、S169、S179中的判定结果如果为达到了规定张数，则接下来，进行基本图像处理(S181)。此处，基本图像处理电路109b对在步骤S157、S167、S177中合成的RAW数据进行基本图像处理即WB校正、颜色矩阵运算、伽马转换、边缘强调、降噪等图像处理。在进行了基本图像处理后，结束拍摄/图像处理的流程，返回到原流程。此外，在基本图像处理中使用的白平衡增益、颜色矩阵和伽马等各种图像处理参数可以在各合成模式中进行变更。

这样，在本实施方式的拍摄/图像处理的流程中，在进行了符合设定的拍摄模式(合成模式)的拍摄后(S101～S139)，暂且使RAW数据退避到记录介质131中

(S141)。由此，在SDRAM 127中确保图像合成用的存储区域，使用该确保的存储区域进行图像合成。因此，能够取得用于图像合成的多个图像，能够提高合成图像的画质。

此外，在本实施方式中，合成用图像数据在RAW数据压缩电路108中进行压缩后(S115、S127、S137)被存储到SDRAM 127中，在进行图像合成时，在RAW数据解压缩电路109a中进行解压缩(S153、S163、S173)。但是，关于合成用图像数据，也可以以非压缩方式存储到SDRAM 127中，在进行图像合成时直接使用。在该情况下，需要较大的存储器容量，但能够缩短压缩和解压缩所需的时间。

接下来，使用图6～图8，对数据退避进行说明。图6对SDRAM 127内的数据的存储状态进行说明。此外，在图6中，除去程序区域等而仅示出了数据部分。

在图6中，状态6a示出了拍摄前的数据区域的数据存储状态，尚未存储RAW数据。状态6b示出了SDRAM 127内的拍摄后的RAW数据的存储状态。在状态6b所示的例中，存储有基准RAW数据、合成用RAW数据A～合成用RAW数据G、共计8个数据。此外，在进行拍摄时(图4的S113、S125、S135)，尽量在短时间内完成合成用的图像的拍摄，这能够防止被摄体的抖动等带来的合成失败。

状态6c示出了使SDRAM 127中存储的RAW数据的一部分在记录介质131中进行数据退避的状态。即，由于SDRAM 127中存储的合成用RAW数据D～G在记录介质131中进行数据退避，由此，合成所需的作业区域127a为空闲状态。在作业区域127a空闲时，图像合成电路109c在作业区域127a中执行与设定的拍摄模式(合成模式)对应的合成处理。此外，合成用RAW数据的退避可以与拍摄合成用的RAW数据的处理并行地进行。

状态6d示出由图像合成电路109c使用基准RAW数据和合成用RAW数据A～C进行了图像合成的状态。在该状态下，在曾经存储基准RAW数据的区域中存储有使用基准RAW数据和合成用RAW数据A～C生成的合成RAW数据。

状态6e示出了使退避到记录介质131中的合成用RAW数据D返回到SDRAM127的空闲区域中的状态。在该状态下，图像合成电路109c在作业区域127a中，进行合成RAW数据和合成用RAW数据D的合成处理，并置换为合成后的合成RAW数据。此外，针对恢复退避到记录介质131中的合成用RAW数据的处理和合成处理，可以按时间顺序进行处理，此外，也可以并行地对两者进行处理。此外，在状态图6e所示的例中，仅使合成用RAW数据D返回到空闲区域，但不限于合成RAW数据D，也可以将合成用RAW数据E、F等多个合成用RAW数据返回。

状态6f示出了图像合成完成的状态。即，在状态6e中，从记录介质131使合成用RAW数据依次返回到SDRAM 127，反复进行图像合成，在使用全部合成用RAW数据进行了图像合成后，如状态6f所示，生成合成完成RAW数据。

图7是示出记录介质131的数据的记录区域的图。如图7所示，作为记录介质131的记录区域，具有文件分配表(FAT)区域131a、目录项记录区域131b、数据记录区域131c。

文件分配表(FAT)区域131a是如下区域：在记录文件中的数据时，记录和管理以怎样的顺序来使用1个以上的哪些簇。此外，目录项记录区域131b是表示记录有何种文件的区域。数据记录区域131c是用于记录数据的区域，按照每一簇记录数据。

在FAT中记录有如下数据：该数据表示在数据记录区域中怎样使用作为进行记录的单位的簇。由于1个簇能够记录的最大容量是确定的，因此，在1个簇不能记录完的情况下，检索空闲的簇，在FAT中记录表示接着空闲的簇进行记录的信息。在不再继续有簇的情况下，记录表示没有簇的数值。将表示数据怎样使用簇的簇的连接信息称作簇链。簇链的起始可以根据相对于目录项的文件的起始簇编号(图8中的131s)来判别。

在将数据记录到数据区域131c的情况下，检索FAT内，检测出未使用的簇而写入数据。在数据较大而不能全部写入该簇的情况下，检索下一空闲簇，将数据继续写入空闲簇的情况记录到FAT中，向空闲簇写入数据。反复进行该处理，在能够写入全部数据时，在FAT中写入表示不再连接有簇的数据(在图8中，为“末尾”)。然后，将文件名信息、数据大小、起始簇编号(图8中的131s)记录到目录项中。

在从数据区域131c读入数据的情况下，根据目录项记录区域131b中记录的文件名，取得大小和起始簇。在掌握了起始簇后，从数据记录区域131c中读出与起始簇对应的数据，在未达到大小的情况下，反复从FAT取得下一簇而进行读入。

通常，对记录介质的写入较耗费时间，因此，暂且将FAT记录区域及目录项记录区域的数据读取到照相机内的SDRAM中，在进行所需的编辑后写入到记录介质中。

在本实施方式中，如图8所示，在将进行了退避的数据写入记录介质的情况下，在照相机内的FAT 127t(记录在SDRAM 127中)中，与现有相同地记录有簇链，但除了该记录之外，还记录有管理信息，该管理信息表明是退避数据的簇链。在图8所示的例中，在记录介质131的数据记录区域的簇编号127s所指示的编号9～11中记录有退避数据，作为管理信息，将掩码位127u设为“1”而进行记录。此外，在没有记录退避数据簇中，作为掩码位127u，记录有“0”。

此外，在SDRAM 127内的目录项127v中记录有记录了数据的簇编号、文件名、大小。但是，进行了退避的数据不在目录项进行存储和管理，而在退避数据的入口区域127w中进行存储和管理。在记录介质131中，在FAT中记录有退避数据的簇作为空闲簇记录在目录项131v中，而没有记录退避数据用入口。

在读入退避到记录介质131中的数据的情况下，从退避数据用入口127w取得记录有所需的数据的起始簇(在图8的例子中，为簇9)，参照SDRAM内的FAT 127t，从记录介质131中读入数据，直到“末尾”为止。在图8所示的例中，读入簇9、10、11中记录的数据。

这样将退避数据的管理信息存储在SDRAM 127中，使得即便使数据退避到记录介质131中，也不记录管理信息。因此，作为记录介质131中的管理信息，不存在记录有退避数据的文件。即，在记录介质131中的目录131v及FAT 131t中，没有记录与记录了退避数据的文件相关的信息，因此，即使发生异常结束(照相机的电池用尽、记录介质的拆装等)，也能够避免在记录介质131中残留有用户不期待的文件的问题。

在本实施方式中，通过进行多次拍摄，将多个图像数据暂时存储在SDRAM 127中(图3的S43、图4的S101～S139)，在使用该暂时存储的多个图像数据进行图像合成时(图5的S151～S179)，使多个图像数据的至少一部分退避到记录介质131中(图5的S141)，在进行图像合成时，使退避数据返回到SDRAM 127来使用(参照图5的S153、S163、S173、图6的状态6e等)。因此，即使SDRAM 127的容量较小，也能够使用多个图像数据来进行图像合成，能够提高合成图像的画质。

此外，在使图像数据退避到记录介质131中时，将退避用的管理信息(退避数据录入127w和FAT 127t中的掩码位127u中被设定为1的部分)存储在SDRAM 127内中，而不记录在记录介质131中。因此，即使在照相机异常结束而使退避数据返回到SDRAM 127的情况下，在记录介质131中未记录有退避数据的管理信息，因此，实质上不会继续残留有退避数据。

接下来，使用图9～图11，对本发明的第2实施方式进行说明。在第1发明中，能够直接访问照相机内的记录介质131的文件***，因此，能够控制退避数据的管理信息(退避数据用入口127w及FAT 127t、掩码位127u中的信息)。与此相对，在第2实施方式中，记录介质是经由通信电路141连接的外部数据记录装置。照相机不能针对照相机外部的设备直接访问文件，照相机主体不能控制退避数据的管理信息。因此，在照相机与外部数据记录装置之间的连接中断的情况下，在一定时间后，使退避数据自动消除。即，在外部数据记录装置侧，执行数据接收、传送、文件删除。

本实施方式的照相机侧的结构与图1所示的第1实施方式的照相机相同。此外，外部数据记录装置为PC、智能手机、网络存储器等。使用图9，对外部数据记录装置的一例的结构进行说明。

外部记录装置300具有通信电路301、存储器303、控制电路305、用户接口307。通信电路301能够通过照相机主体100内的通信电路141、有线通信或无线通信等进行数据收发。

存储器303是能够以电子方式擦写的易失性或非易失性的存储器，能够记录经由通信电路301输入的图像数据。此外，还存储有用于控制外部数据记录装置的程序代码等。该存储器303具有与图7和图8所示的记录介质131相同的记录区域。

控制电路305按照存储器303中存储的程序代码，进行外部记录装置300的整体控制。用户接口307具有显示部和操作部等，向用户显示信息等，并从用户输入指示。此外，外部记录装置300仅为存储器，如果能够通过通信等进行控制，则也可以不设置用户接口307。

接下来，使用图10和图11，对本实施方式的动作进行说明。照相机中的主动作与图2和图3所示的流程图相同，因而省略详细说明。不过，在图3的步骤S45中，不指定后述的删除时间，而发送在后述的外部数据记录装置300中记录的静态图像数据，在外部数据记录装置300中，以经过了规定时间后也不删除的形式记录为文件。此外，图3的步骤S43中的拍摄/图像处理中的动作的不同之处在于，在图4和图5所示的流程图中，将图5置换为图10(图4所示的流程图相同)。因此，使用图10，以不同点为中心进行说明。

图10所示的流程图仅在图5所示的流程图中追加了步骤S154、S164、S174，其它步骤与图5的流程图相同。因此，以该不同点为中心进行说明。

在本实施方式中，在开始拍摄/图像处理的动作后，首先，在图4的S101～S139中进行拍摄，取得多个图像数据。在取得了多个图像数据后，进行数据退避(S141)。此处，暂且使数据退避到外部数据记录装置300内的存储器303，确保合成所需的存储区域。即，经由通信电路141与通信电路301，使数据退避到外部数据记录装置、例如网络上的存储器、智能手机、PC。

在步骤S141中进行数据退避时，指定在照相机主体100与外部数据记录装置300的通信中断后到成为可以删除退避数据的状况为止的时间，将该删除时间的信息也一并发送。外部数据记录装置300将从照相机主体100输入的删除时间存储在存储器303中。在图10和图11所示的例中，将在接收进行了退避的数据时发生通信中断的情况下到恢复为止的超时设为30秒，因此，删除时间为该超时时间(30秒)以上的时间(例如，40秒)。如果指定为小于超时时间，则成为即使恢复也不存在文件状况。此外，在合成所需的处理时间较长的情况下，也可以考虑其长度，根据在合成处理中使用的RAW数据的顺序等而变更删除时间。

在步骤S141中进行了数据退避后，判定是否为HDR合成(S151)，在该判定的结果为HDR合成的情况下，进行RAW取得和解压缩(S153)。在进行了RAW取得和解压缩后，接下来，进行是否失败的判定(S154)。在对外部数据记录装置300进行通信的情况下，与向照相机主体100内的记录介质131进行数据退避的情况相比，容易发生通信错误。因此，在本实施方式中，根据RAW取得和解压缩是否成功，判定是否发生通信错误。

在步骤S154的是否失败的判定中，在进行RAW取得时不能与发送来退避数据的外部数据记录装置300进行通信的情况下，以规定时间(例如，30秒)待机，在不能建立通信路径的情况下，判定为失败。

在步骤S154中的判定结果为失败的情况下，进行错误显示(S183)。在该步骤中，在显示面板135中显示表示合成失败的文字或图标等，向拍摄者传达合成失败的情况。在进行了错误显示后，返回到原流程。另一方面，在步骤S154中的判定结果没有失败的情况下，进入步骤S155，与第1实施方式同样地进行HDR合成。

当在步骤S161中判定为深度合成的情况下，在步骤S163中，与步骤S154同样地，在不能建立通信路径状态下，根据是否经过了超时时间来进行是否失败的判定，在失败的情况下，进行错误显示(S183)，在进行了错误显示后，返回到原流程。另一方面，在步骤S164中的判定结果为没有失败的情况下，进入步骤S165，与第1实施方式同样地进行深度合成。

当在步骤S171中判定为超分辨合成的情况下，在步骤S173中，与步骤S154同样地，在不能建立通信路径状态下，根据是否经过了超时时间来进行是否失败的判定，在失败的情况下，进行错误显示(S183)，在进行了错误显示后，返回到原流程。另一方面，在步骤S174中的判定结果没有失败的情况下，进入步骤S175，与第1实施方式同样地进行超分辨合成。

这样，在本实施方式的拍摄/图像处理的流程中，与第1实施方式同样地，为了进行图像合成而进行数据退避，因此，即使SDRAM 127的容量较小，也能够取得大容量的图像数据。因此，能够提高合成图像的画质。

接下来，使用图11，对外部数据记录装置300中的数据退避的动作进行说明。在根据图11所示的外部数据记录装置的主流程而开始程序的执行时，首先，进行是否能够通信的判定(S201)。此处，检查是否为能够通信的状态。如果能够进行无线通信或有线通信，则判定通信路径是否建立。此外，即使在同一设备内配置有存储器303的情况下，也采用能够本方式，在该情况下，检查照相机功能是否动作。

如果步骤S201中的判定结果为能够通信的状态，接下来，判定是否进行数据接收(S203)。此处，判定是否从照相机主体100接收数据。在同一设备内的情况下，判定是否存在数据退避请求。

在步骤S203中的判定结果为接收到数据的情况下，接下来，接收退避数据(S205)。在进行了数据接收后，接下来，进行文件记录(S207)。此处，将退避数据记录到外部数据记录装置300内的存储器303中。如果文件名不重复，则可以使用任意的文件名。

在进行了文件记录后，接下来，判定是否存在删除时间(S209)。在图10的S141的数据退避的步骤中，从照相机主体100向外部数据记录装置300发送删除时间(在图10的例子中，为40秒)，该删除时间是根据通信中断的情况下到恢复为止的超时时间而决定的。在该步骤中，判定是否从照相机主体100发送了删除时间。在步骤S209中的判定结果为存在删除时间的情况下，存储删除时间(S211)。

在步骤S203中的判定结果为没有数据接收的情况下，判定是否存在数据请求(S213)。当照相机主体100在图像合成中使用退避到外部数据记录装置300的存储器303中的数据的情况下，向外部数据记录装置300发送数据请求。在该步骤中，判定是否存在该数据请求信号。

在步骤S213中的判定结果为存在数据请求的情况下，进行数据传送(S215)。此处，读出存在数据请求的合成用RAW数据，将其发送给照相机主体100。

在进行了数据传送后，接下来，进行文件删除(S217)。此处，从存储器303中删除读出并发送给照相机主体100的合成用RAW数据。在进行了文件删除后，将附带于合成用RAW数据而输出的删除时间删除(S219)。

在步骤S201中的判定结果为不能通信的状态的情况下，检查删除时间(S221)。与退避数据的数量对应地存储有删除时间，因此，针对各删除时间，确认是否从不能通信的状态起经过了该时间。

在检查了删除时间后，判定是否经过了指定的删除时间(S223)。在该步骤中，判定是否从不能通信的状态起经过了指定的删除时间。

在步骤S223中的判定结果为经过了指定时间时，进行文件删除(S225)。由于经过了指定时间，因此成为不能通信的状态，将记录到存储器303的合成用RAW数据全部删除。在步骤S225中，在进行了文件删除后，接下来，将删除时间删除(S227)。

在步骤S227中将删除时间删除后，接下来，判定是否结束(S229)；在步骤S223中的判定结果为未经过指定时间时，接下来，判定是否结束(S229)；在步骤S219中将删除时间删除后，接下来，判定是否结束(S229)；在步骤S213中的判定结果为不存在数据请求的情况下，接下来，判定是否结束(S229)；在步骤S209中的判定结果为在不存在删除时间的情况下，接下来，判定是否结束(S229)；在步骤S211中存储了删除时间后，接下来，判定是否结束(S229)。作为结束条件，在用户通过某个操作部件等进行了结束指示时，外部设备的电源有时会断开或再起动等。在该判定的结果不为结束的情况下，返回到步骤S201，继续进行动作，另一方面，在为结束的情况下，结束主流程的动作。

这样，在第2实施方式中，在照相机主体100侧，不能控制存储器303的文件***，因此，在与外部数据记录装置300的连接被切断的情况下，在一定时间后(删除时间后)，自动消除外部数据记录装置300内的合成用RAW数据。

例如，在照相机主体100中连续拍摄多张(例如，拍摄8张)，将其中的一部分数据(4张)记录到照相机主体100内的SDRAM 127中，并使其它一部分的数据(4张)退避到外部数据记录装置300内的存储器303中。在从照相机主体100向外部数据记录装置300发送退避数据时，还发送删除时间，在因照相机主体100异常结束等而结束通信的情况下，外部数据记录装置300使用该删除时间而删除退避数据。

如以上说明的那样，在本发明的各实施方式中，具有：图像数据取得电路(例如，摄像元件103)，其取得图像数据；暂时存储器(例如，SDRAM 127)，其暂时存储图像数据；图像处理电路(例如，图像合成电路109c)，其对暂时存储的图像数据进行图像处理；记录介质(例如，记录介质131、存储器303)，其能够记录暂时存储的图像数据中的至少一部分退避数据；管理信息存储器(例如，退避数据用入口127w)，其存储用于管理退避数据的管理信息；以及控制电路(例如，微型计算机121)，其在将退避数据存储到记录介质中时，使用管理信息进行退避数据的管理。因此，即使在摄像装置异常结束的情况下或者在记录介质与摄像装置之间的通信被切断等情况下，也不会继续残留有不需要的文件。

此外，在本发明的实施方式中，在通过图像处理电路进行图像处理时，控制电路(例如，微型计算机121)将退避数据记录到记录介质中，此时，将表示记录到记录介质中的记录位置的管理信息存储在管理信息存储器(例如，SDRAM 127的退避数据用入口127w)中，但在记录介质(例如，记录介质131)中不记录管理信息(参照例如图8)。即，在记录介质(例如，记录介质131、存储器303)上，在管理上，不存在文件。

此外，在本发明的实施方式中，摄像装置具有用于将退避数据从暂时存储器(例如，SDRAM 127)发送给记录介质(例如，存储器303)的通信电路(例如，通信电路141)，经由通信电路，将退避数据与删除时间信息(例如，图10的S141)一同发送给记录介质侧的控制电路(例如，控制电路305)。因此，在记录介质存在于拍摄装置的外部的情况下，即使在摄像装置异常结束的情况下或者在记录介质与摄像装置之间的连接或通信被切断等情况下，也不会继续残留有不需要的文件。

此外，在本发明的实施方式中，在经过了删除时间后，控制电路(例如，控制电路305)将记录介质(例如，存储器303)中暂时存储的退避数据删除(例如，图11的S225)。因此，即使在摄像装置异常结束的情况下或者在记录介质与摄像装置之间的连接或通信被切断等情况下，文件也会被删除而不会继续残留。

此外，在本发明的实施方式中，图像数据记录装置(例如，图像数据记录装置300)记录从摄像装置(例如，照相机主体100)输出的图像数据。此外，具有：数据取得电路(例如，通信电路301)，其经由通信电路，将退避数据与删除时间一同取得；记录介质(例如，存储器303)，其能够记录退避数据；管理信息存储器(例如，存储器303，此外，也可以设为与存储器303分开)，其存储删除时间；以及控制电路(例如，控制电路305)，在从经由通信电路的通信路径断开起经过了删除时间的情况下，删除退避数据。因此，即使在摄像装置异常结束的情况下或者在记录介质与摄像装置之间的通信被切断等情况下，也不会在图像数据记录装置中继续残留有不需要的文件。

此外，在本发明的各实施方式中，具有：摄像电路(例如，摄像元件103)，其拍摄被摄体而得到图像数据；存储器(例如，SDRAM 127)，其暂时存储图像数据；图像合成电路(例如，图像合成电路109c)，其对多个图像数据进行合成，生成合成后的图像数据；记录控制电路(例如，微型计算机121)，其控制数据记录；以及控制电路(例如，微型计算机121)，其控制摄像装置，控制电路对摄像电路进行指示(例如，图4的S101～S139)，以连续地取得多个图像数据，对记录控制电路进行指示(例如，图8的记录介质131中的记录方式)，以第1记录方式记录多个图像数据的至少一部分，对图像合成电路进行指示，以合成多个图像数据，对记录控制电路进行指示(例如，图8的SDRAM 127中的记录方式)，以第2记录方式记录由图像合成电路生成的图像数据。因此，即使在摄像装置异常结束的情况下或者在记录介质与摄像装置之间的连接或通信被中断等情况下，也不会继续残留有不需要的文件。此外，第1记录方式是如下记录图像数据的方式：在经过了至少规定时间后，该图像数据不作为文件而被观察到，第2记录方式是如下记录图像数据的方式：在经过了至少规定时间后，该图像数据作为文件存在。

此外，在本发明的各实施方式中，具有非易失性存储器(例如，记录介质131)，记录控制电路对针对非易失性存储器的数据记录进行控制，在第1记录方式中，将数据记录到到非易失性存储器的数据记录用的簇中，在管理区域中不记录作为文件的信息(例如，图8的记录介质131中的记录方式)，在第2记录方式中，将数据记录到非易失性存储器的数据记录用的簇中，在管理区域中进行作为文件的管理信息的记录。因此，即使在摄像装置异常结束的情况下或者在记录介质与摄像装置之间的连接或通信被切断等情况下，也不会继续残留有不需要的文件。

此外，在本发明的实施方式中，具有文件删除控制电路，在第1记录方式中，指定从异常检测后到删除为止的删除时间而记录数据(例如，图11的S211)，在第2记录方式中，不进行删除时间的指定而记录数据，文件删除控制电路在检测出异常后，删除经过了删除时间的文件(图11的S225)。因此，即使在摄像装置异常结束的情况下或者在记录介质与摄像装置之间的连接或通信中断等情况下，也不会继续残留有不需要的文件。

此外，在本发明的各实施方式中，取得图像数据(例如，图4的S101、S113、S125、S135)，暂时存储图像数据(例如，图4的S103、S115、S127、S137、图6的状态6b)，将暂时存储的图像数据的至少一部分作为退避数据进行退避(例如，图5的S141、图6的状态6c～6e)，存储用于管理退避数据的管理信息(例如，图8的退避数据用入口127w)，在将退避数据存储到记录介质时，使用管理信息进行退避数据的管理(例如，图8)，使用所退避的退避数据进行图像处理(例如，图6的状态6c～6e)。因此，即使在摄像装置异常结束的情况下或者在记录介质与摄像装置之间的连接或通信被切断等情况下，也不会继续残留有不需要的文件。

此外，在本发明的实施方式中，将退避数据与删除时间一同取得(例如，图11的S205)，存储退避数据和删除时间(例如，图11的S207、S211)，在从输入退避数据的通信路径断开起经过了删除时间的情况下，将退避数据消除(例如，图11的S223、S225)。因此，即使在摄像装置与图像数据记录装置的通信被切断等情况下，也不会继续残留有不需要的文件。

此外，在本发明的第1实施方式中，记录介质131被配置在照相机主体100内，但如果能够在照相机主体100中进行外部的记录介质的文件管理，则记录介质131的位置也可以是照相机主体外。此外，在本发明的第2实施方式中，存储器303被配置在照相机主体100外，但如果能够在照相机主体100内进行外部的记录介质(存储器303)的文件管理，则存储器303也可以设在照相机主体内。此外，关于在本发明的第1实施方式中说明的不记录与退避数据相关的管理信息的文件管理方法，也可以通过在本发明的第2实施方式中说明的外部数据记录装置300来进行。

此外，在本发明的各实施方式中，进行多次拍摄，使用此时取得的多个图像数据进行图像合成，但也可以将通过1次拍摄取得的1个图像数据分割成多个来进行图像合成。此外，使用多个RAW数据来进行图像合成，但不限于RAW数据，也可以暂且转换为JPEG数据等，然后进行图像合成。此外，使用多个图像数据来进行图像合成，但不限于图像合成，只要是处理多个图像数据的图像处理即可。

此外，在本实施方式中，作为用于拍摄的设备，使用数字照相机进行了说明，但作为照相机，也可以是数字单反照相机、紧凑型数字照相机或摄像机、电影摄影机那样的动态图像用的照相机，此外，也可以是便携电话、智能手机、便携信息终端(PDA：PersonalDigital Assist)、个人计算机(PC)、平板型计算机、游戏设备等中内置的照相机。无论哪种设备，只要使用多个图像数据来进行图像处理的设备，即可应用本发明。

并且，关于本说明书中说明的技术中主要利用流程图说明的控制，多数情况下能够利用程序进行设定，有时也收纳在记录介质或记录部中。关于记录在该记录介质、记录部中的记录方法，可以在产品出厂时进行记录，也可以利用发布的记录介质，还可以经由因特网进行下载。

并且，关于权利要求书、说明书和附图中的动作流程，为了简便而使用“首先”、“接下来”等表现顺序的词语进行了说明，在没有特别说明的部分，不意味着必须按照该顺序进行实施。

本发明不限于上述实施方式，能够在实施阶段在不脱离其主旨的范围内对结构要素进行变形而具体化。并且，通过上述实施方式所公开的多个结构要素的适当组合，能够形成各种发明。例如，也可以删除实施方式所示的全部结构要素中的若干个结构要素。进而，还可以适当组合不同实施方式中的结构要素。

Claims (8)

1.一种摄像装置，其包括：

图像数据取得部，其取得图像数据；

暂时存储部，其暂时存储所述图像数据；

图像处理部，其对暂时存储的所述图像数据进行图像处理；

记录介质，其能够记录暂时存储的所述图像数据中的至少一部分退避数据；

管理信息存储部，其存储用于管理所述退避数据的管理信息；以及

控制部，在将所述退避数据存储到所述记录介质时，该控制部使用所述管理信息进行所述退避数据的管理，

其中，在通过所述图像处理部进行图像处理时，所述控制部将所述退避数据记录到所述记录介质中，此时，将表示记录到所述记录介质中的记录位置的管理信息存储在管理信息存储部中，但在所述记录介质中不记录所述管理信息。

2.根据权利要求1所述的摄像装置，其中，

所述摄像装置还具有通信部，该通信部用于将所述退避数据从所述暂时存储部发送到所述记录介质，

经由所述通信部，将删除时间信息与所述退避数据一同发送到所述记录介质。

3.根据权利要求2所述的摄像装置，其中，

在经过了删除时间后，所述控制部删除所述记录介质中暂时存储的所述退避数据。

4.一种摄像装置，其包括：

摄像部，其拍摄被摄体而得到图像数据；

存储部，其暂时存储所述图像数据；

图像合成部，其对多个图像数据进行合成，生成合成后的图像数据；

记录控制部，其控制数据记录；以及

控制部，其控制摄像装置，

其中，

所述控制部指示所述摄像部连续地取得多个图像数据，指示所述记录控制部以第1记录方式记录所述多个图像数据中的至少一部分，指示在所述图像合成部中对所述多个图像数据进行合成，指示所述记录控制部以第2记录方式记录由所述图像合成部生成的图像数据，

在所述第1记录方式中，按如下方式记录图像数据：在经过了至少规定时间后，不会作为文件而看到该图像数据，

在所述第2记录方式中，按如下方式记录图像数据：在经过了至少规定时间后，该图像数据作为文件而存在。

5.根据权利要求4所述的摄像装置，其中，

所述摄像装置还具有非易失性存储器，

所述记录控制部控制针对所述非易失性存储器的数据记录，

在所述第1记录方式中，将数据记录到所述非易失性存储器的数据记录用的簇中，在管理区域中不记录作为文件的信息，

在所述第2记录方式中，将数据记录到所述非易失性存储器的数据记录用的簇中，在管理区域中记录作为文件的管理信息。

6.根据权利要求4所述的摄像装置，其中，

所述摄像装置还具有文件删除控制部，

在所述第1记录方式中，指定从检测出异常后到进行删除为止的超时时间，并记录数据，

在所述第2记录方式中，不进行所述超时时间的指定而记录数据，

在检测出异常后，所述文件删除控制部删除经过了所述超时时间的文件。

7.一种摄像方法，其包括以下步骤：

取得图像数据；

暂时存储所述图像数据；

将暂时存储的所述图像数据中的至少一部分作为退避数据进行退避；

存储用于管理所述退避数据的管理信息；

在将所述退避数据存储到记录介质时，使用所述管理信息进行所述退避数据的管理；以及

使用所退避的所述退避数据进行图像处理，并将所述退避数据记录到所述记录介质中，此时，将表示记录到所述记录介质中的记录位置的管理信息进行存储，但在所述记录介质中不记录所述管理信息。

8.一种数据记录装置，用于记录从摄像装置输出的图像数据，该图像数据记录装置具有：

数据取得部，其经由通信部，同时取得作为所述图像数据的至少一部分的退避数据和删除时间；

记录介质，其能够记录所述退避数据；

管理信息存储部，其存储所述删除时间；以及

控制部，在从经由所述通信部的通信路径断开起经过了所述删除时间的情况下，该控制部删除所述退避数据。