CN104065857A - 摄像装置以及影像内容生成方法 - Google Patents

Abstract

本发明提供一种摄像装置以及影像内容生成方法。摄像装置(1)的CPU(21)通过摄像部(11)在间隔拍摄时，在每一次的拍摄中进行间隔运动图像的拍摄，并且基于面部图像、模糊、变化的有无来从构成该间隔运动图像的多个帧中选择要保存静止图像的帧，还将这些静止图像与间隔运动图像建立对应地保存。CPU(21)在以超过预先设定的保存时间的容量进行记录的情况下，首先删除评价低的间隔运动图像，即便如此还不足够的情况下，通过删除评价低的静止图像来留下所期望的时间内的图像文件(运动图像和静止图像混合存在的文件)。

Description

摄像装置以及影像内容生成方法

技术领域

本发明涉及摄像装置以及影像内容生成方法。

背景技术

以往，存在具有间隔拍摄功能的摄像装置。在这样的摄像装置中，不用按快门按钮，每隔一定的时间间隔就会自动对静止图像进行拍摄。因而，拍摄者较多情况在全部拍摄后，在记录图像的确认阶段才察觉有不适于保存的静止图像(例如风景、被写体模糊的静止图像、风景倾斜的静止图像)。而且，当不适于保存的静止图像介于通过间隔拍摄获取到的多个静止图像之间的情况下，若将该不适于保存的静止图像删除，则在进行重现显示时，有可能会失去时间上的连续性。

为此，提出在间隔拍摄时极力不获取不适于保存的静止图像的技术。

例如，在日本特开2003-244614号公报中提出根据间隔拍摄到的多个静止图像来生成运动图像文件的技术，进而公开了关于通过用户操作而被设为删除对象的静止图像，则不使其包含在运动图像文件中。

发明内容

本发明的目的在于降低选择设为删除对象的图像的工夫，生成在重现时有适当变化的影像内容。

本发明的第1观点所涉及的摄像装置，其特征在于，具备：获取单元，其获取给定张数的图像；运动图像生成单元，其生成基于由该获取单元获取到的给定张数的图像的运动图像；评价单元，其基于给定的评价内容来分别对由所述获取单元获取到的给定张数的图像进行评价；静止图像生成单元，其基于由该评价单元评价出的结果来生成静止图像；和生成单元，其生成包括由所述静止图像生成单元生成的多个静止图像、和由所述运动图像生成单元生成的多个运动图像在内的影像内容。

本发明的第2观点所涉及的影像内容生成方法，其特征在于，包括：获取步骤，获取给定张数的图像；运动图像生成步骤，生成基于由该获取步骤获取到的给定张数的图像的运动图像；评价步骤，基于给定的评价内容来分别对由所述获取步骤获取到的给定张数的图像进行评价；静止图像生成步骤，基于由该评价步骤评价出的结果来生成静止图像；和生成步骤，生成包括由所述静止图像生成步骤生成的多个静止图像、和由所述运动图像生成步骤生成的多个运动图像在内的影像内容。

附图说明

图1是表示基于本发明的实施方式的摄像装置1的构成的框图。

图2是用于说明本实施方式的摄像装置1所进行的间隔拍摄时的动作的流程图。

图3是用于说明本实施方式的摄像装置1所进行的间隔拍摄时的动作的流程图。

图4是用于说明本实施方式的摄像装置1所进行的间隔拍摄时的动作的时序图。

图5是用于说明本实施方式的摄像装置1所进行的间隔拍摄时的动作的时序图。

具体实施方式

下面，参考附图来说明本发明的实施方式。

A.实施方式的构成

图1是表示基于本发明的实施方式的摄像装置1的构成的框图。在该图中，摄像装置1具备：通信控制部10、摄像部11、图像处理部14、加速度传感器17、外部存储器18、闪存19、SDRAM20、CPU21、按键操作部22、声音控制部23、扬声器24、麦克风25、电源(蓄电池)26、以及电源控制部27。

通信控制部10经由因特网上的服务器或因特网而将被摄像到的图像数据传输给个人的个人计算机等的信息处理装置等。摄像部11具备：由光学透镜组构成的透镜块12、以及CCD或CMOS等的摄像元件13。摄像元件13将从透镜块12进入的图像变换成数字信号。图像处理电路14对图像数据执行图像处理(像素插补处理、γ修正、亮度色差信号的生成、白平衡处理、曝光修正处理等)、图像数据的压缩/解压缩(例如JPEG形式、Motion-JPEG形式或MPEG形式的压缩/解压缩)。

加速度传感器17例如由3轴加速度传感器等构成，尤其在本实施方式中用于检测间隔拍摄时的该摄像装置1的运动(晃动)。外部存储器18是能装卸的记录介质，保存由摄像部11摄像到的图像数据等。闪存19是预先保存由摄像部11摄像到的图像数据等的记录介质。SDRAM20在由摄像部11摄像之后作为暂时存储送到CPU21的图像数据的缓冲存储器来使用，并且作为CPU21的工作内存来使用。

CPU21是控制摄像装置1各部的单片微机，执行由摄像部11所进行的静止图像拍摄、运动图像的录影开始/停止、静止图像拍摄和运动图像拍摄的切换。

特别在本实施方式中，CPU21在间隔拍摄时，在每一次的拍摄中进行间隔运动图像的拍摄，并且基于面部图像、模糊、变化的有无而从构成该间隔运动图像的多个帧中选择要保存的帧，与该间隔运动图像建立对应地将这些选择出的帧保存为静止图像。

进而，CPU21在以超过预先设定的保存时间的容量进行了记录的情况下，首先删除评价低的间隔运动图像，即便如此还超过预先设定的保存时间的情况下，执行通过删除评价低的静止图像(帧)来留下收敛于所期望的保存时间内的图像文件(运动图像和静止图像混合存在的文件)的处理。另外，这样生成的图像文件(运动图像和静止图像混合存在的文件)遵循其拍摄顺序对运动图像直接进行运动图像重现，对多个静止图像以幻灯片放映进行重现。

按键操作部22按照用户的触摸操作来输入动作模式、拍摄开始、暂时停止、停止等的动作指示等。声音控制部23遵循CPU13的控制将摄像运动图像重现时的声音(通知音等)变换成模拟信号，并从扬声器24输出，另一方面，将间隔摄像时由麦克风25集音到的环境音数字化并取入。电源(蓄电池)26是充电式的二次电池。电源控制部27使电源(蓄电池)26的输出电压稳定化，将驱动用电力提供给各部。

B.实施方式的动作

接下来，说明本实施方式的动作。

图2是用于说明本实施方式的摄像装置1所进行的间隔拍摄时的动作的流程图。当用户操作摄像装置1的按键操作部22而设为间隔模式时，摄像装置1的CPU21启动间隔计时器，执行图2所示的流程图。间隔计时器是用来对用于进行间隔拍摄的时间间隔进行计时的计时器。另外，在间隔模式下，基本上直至进行间隔拍摄为止，为了省电力而停止摄像元件13的驱动等。

CPU21首先判断是否到达了预先规定的间隔拍摄的拍摄开始定时(步骤S10)。然后，直至到达拍摄开始定时为止(步骤S10“否”)，因重复步骤S10而待机。另一方面，当到达了拍摄开始定时(步骤S10“是”)时，CPU21启动摄像元件13，执行运动图像暂时记录处理(步骤S12)。接下来，判断是否到达了拍摄结束定时(步骤S14)，在不是拍摄结束定时(即未经过给定的录影时间)的情况下(步骤S14“否”)，返回步骤S12，继续运动图像暂时记录处理。

另一方面，在到达了拍摄结束定时的情况下(步骤S14“是”)，CPU21停止运动图像暂时记录，停止摄像元件13(步骤S16)。在该时点记录给定的录影时间的间隔运动图像。接下来，使计数递增1(步骤S18)，CPU21判断该计数数是否达到总帧数(步骤S20)。在此，所谓总帧数，是在1次的运动图像拍摄中能拍摄的间隔运动图像的总帧数。然后，在计数数未达到总帧数的情况下(步骤S20“否”)，CPU21判断是否从通过运动图像暂时记录处理所拍摄到的间隔运动图像的处理对象帧之中检测到面部图像(步骤S22)。

而且，在从处理对象帧中检测到面部图像的情况下(步骤S22“是”)，CPU21按每帧根据有面部图像、面部图像的检测位置、面部图像的大小、面部图像的数量进行分数化(步骤S24)。接下来，CPU21判断是否检测到笑脸(步骤S26)。而且，在从处理对象帧中检测到笑脸的情况下(步骤S26“是”)，CPU21按每帧根据笑脸的程度来进行分数化(步骤S28)。

另一方面，在从处理对象帧中未检测到面部图像的情况下(步骤S22“否”)，不进行基于面部检测的分数化。另外，在虽然检测到面部图像但不是笑脸的情况下(步骤S26“否”)，虽然进行基于面部图像的分数化，但不进行基于笑脸的分数化。不管在进行分数化的情况下还是在不进行分数化的情况下，接下来CPU21都根据处理对象帧而与前后的帧进行比较，根据是否为I帧候补(即图像的变化程度的有无)来进行分数化(步骤S30)。接下来，CPU21针对处理对象帧而根据模糊的程度、锐度等的图像的内容来进行分数化(步骤S32)。进而，CPU21根据各帧的记录时的周围声音的大小来进行分数化(步骤S34)。然后，CPU21将分数化的内容与帧建立对应地存储(步骤S36)。之后，返回步骤S18，通过重复上述的处理来对通过1次的运动图像拍摄所拍摄到的各帧进行分数化。

而且，当计数数到达总帧数时、即针对通过1次的运动图像拍摄所拍摄到的全部帧的分数化结束时(步骤S20“是”)，移转到图3的流程图，CPU21使帧计数器复位(＝0)(步骤S38)。接下来，CPU21根据赋予各帧的分数另行生成居上位的给定数(例如5帧)作为静止图像(步骤S40)，对暂时记录的间隔运动图像进行压缩编码，与所生成的静止图像建立对应地存储(步骤S42)。接下来，CPU21判断是否到达了预先设定的记录日期时间(步骤S44)，在未到达记录日期时间的情况下(步骤S44“否”)，返回图2的步骤S10，遵循上述的处理进行下一间隔运动图像的拍摄。

如此，直至到达预先设定的记录日期时间为止，以给定的间隔拍摄的间隔来拍摄由给定的录影时间构成的运动图像，每当结束运动图像的拍摄时都对通过1次的运动图像拍摄所拍摄到的各帧进行分数化。

而且，在到达了预先设定的记录日期时间的情况下(步骤S44“是”)，CPU21读出预先设定的容量(或时间)(步骤S46)，判断记录时间是否收敛于预先设定的容量(时间)内(步骤S48)。而且，在记录时间未收敛于预先设定的容量(时间)的情况下(步骤S48“否”)，CPU21判断是否记录了间隔运动图像(步骤S50)。而且，在记录了间隔运动图像的情况下(步骤S50“是”)，CPU21对间隔拍摄到的各间隔运动图像进行评价(步骤S52)。

作为关于各间隔运动图像的评价，与帧评价相同，既可以以间隔运动图像的各帧的变化程度、可见性等来评价，也可以借用各帧的评价内容(分数)。接下来，CPU21仅删除评价低的间隔运动图像(步骤S54)。即，留下对应的静止图像。之后，返回步骤S48，删除评价低的间隔运动图像。而且，在不断删除评价低的间隔运动图像的过程中，若记录时间收敛于预先设定的容量(时间)内(步骤S48“是”)，则结束该处理。

另一方面，若即使删除评价低的间隔运动图像，记录时间仍未收敛于预先设定的容量(时间)内(步骤S50“否”)，则从评价低的间隔运动图像起优先评价由该间隔运动图像生成的各静止图像(的分数)(步骤S56)。然后，删除评价低的静止图像(步骤S58)。但是，在剩余变为1张的情况下，由于在重现时跳过而不会成为顺畅的重现，因此不删除该静止图像。如此，在没有了要删除的间隔运动图像的情况下，开始删除静止图像。然后，在不断删除评价低的静止图像的过程中，若记录时间收敛于预先设定的容量(时间)内(步骤S48“否”)，则结束该处理。

图4是用于说明本实施方式的摄像装置1所进行的间隔拍摄动作(步骤S24～S42)的时序图。在图4中，在最上部分示出间隔拍摄的间隔1T，以预先确定的间隔录影时间RT对间隔运动图像M1、M2、……进行拍摄，并保存为保存运动图像M。间隔运动图像M1由多个帧F1(F、F、……)构成，对各个帧进行评价来进行分数化。

在图示的示例中，按每个帧F来评价面部检测E1、图像的变化E2、声音的变化E3、剧烈晃动E4。另外，图像的变化E2除了有无上述的I帧候补以外，也可以是对比度的变化、亮度的变化、色调的变化等。此外，(周围)声音的变化E3是在间隔运动图像拍摄时由麦克风25所集音到的声音，在由此集音到的内容中示出用户不经意发出的声音、感叹、意图拍摄的语言、或者突然发生的环境音(碰撞声或***声等)。由于与此相伴而发生的事件是按快门的时机的可能性高，因此在收集到这些声音的情况下，评价变高。另外，剧烈晃动E4是由加速度传感器17检测到的该图像处理装置的晃动的程度。例如，间隔运动图像M1的最初的帧F作为评价点而按如下那样进行分数化，即：面部检测E1为“+0”、图像的变化E2为“+1”、声音的变化E3为“+1”、剧烈晃动E4为“-2”、合计ET为“+1”。同样地，对各帧F、F、F……而合计按如下那样进行分数化，即：“+4”、“-5”、“+1”、“+3”、……、“-5”、“+3”、“+3”、“+3”。而且，选择保存居上位的高得分的5帧。针对在间隔拍摄结束之前所拍摄到的全部间隔运动图像，执行这样的对帧的分数化。其结果，当间隔拍摄结束时，记录多个间隔运动图像M1、M2、……、和从各个间隔运动图像选择出的5帧(F、F、F、F、F)的静止图像F2。

图5是用于说明图4的步骤S50～S58的时序图。在图5中，在最上部分示出间隔拍摄的间隔IT，作为以预先确定的间隔录影时间RT录影的运动图像M，拍摄并保存间隔运动图像M1、M2、……。在图5中，作为各间隔运动图像M1、M2、……的评价，示出比较从各个间隔运动图像选择出的帧(5帧)之中合计得分最高的帧的分数，并从评价低的间隔运动图像起进行删除的示例。即，在图示的示例中，按照间隔运动图像M3、M6、M1、M4、M2的顺序被删除。而且，在不断删除评价低的间隔运动图像的过程中，若记录时间收敛于预先设定的容量(时间)内，则在该时点结束该处理。

此外，如此生成的图像文件(运动图像和静止图像混合存在的文件)遵循其拍摄顺序，对运动图像进行运动图像重现，对静止图像进行幻灯片放映重现。

根据上述的实施方式，在间隔拍摄时，在每一次的拍摄中进行间隔运动图像的拍摄，并且基于面部图像、模糊、有无的变化而从构成该间隔运动图像的多个帧中选择要保存静止图像的帧，还将这些静止图像与间隔运动图像建立对应地保存，在以超过预先设定的保存时间的容量进行记录的情况下，首先删除评价低的间隔运动图像，即便如此仍然不够的情况下，执行通过删除评价低的静止图像来留下所期望的时间内的图像文件(运动图像和静止图像混合存在的文件)的处理，因此降低了选择设为删除对象的图像的工夫，能生成在重现时有适当变化的运动图像。

另外，根据上述的实施方式，由于编辑最终的图像文件(运动图像和静止图像混合存在的文件)以收敛于预先设定的容量内，因此不管所需要的工序时间如何，都能收敛于用户所期望的时间内。

另外，根据上述的实施方式，由于基于评价结果来删除运动图像，因此省去了变得迟缓的没有变化的运动图像，能留下有趣味的运动图像。

另外，根据上述的实施方式，由于基于评价结果来删除静止图像，因此省去了变得迟缓的没有变化的静止图像，能留下有趣味的静止图像。

另外，根据上述的实施方式，由于作为给定的评价内容而将有无检测到面部图像包含在内，因此省去了变得迟缓的没有变化的静止图像，能留下有趣味的静止图像。

另外，根据上述的实施方式，由于作为给定的评价内容而将面部图像的笑脸的程度包含在内，因此省去了变得迟缓的没有变化的静止图像，能留下有趣味的静止图像。

另外，根据上述的实施方式，由于作为给定的评价内容而将多个图像之间的变化的程度包含在内，因此省去了变得迟缓的没有变化的静止图像，能留下有趣味的静止图像。

另外，根据上述实施方式，由于作为给定的评价内容而将关于多个图像的内容的评价包含在内，因此省去了变得迟缓的没有变化的静止图像，能留下有趣味的静止图像。

另外，根据上述的实施方式，由于作为给定的评价内容而将在拍摄定时之时获取到的周围环境的内容包含在内，因此省去了变得迟缓的没有变化的静止图像，能留下有趣味的静止图像。

以上，虽然说明了本发明的几个实施方式，但是本发明并不限定于此，还包含权利要求的范围内所记载的发明和与其等同的范围。

Claims (11)

1.一种摄像装置，其特征在于，具备：

获取单元，其获取给定张数的图像；

运动图像生成单元，其生成基于由该获取单元获取到的给定张数的图像的运动图像；

评价单元，其基于给定的评价内容来分别对由所述获取单元获取到的给定张数的图像进行评价；

静止图像生成单元，其基于由该评价单元评价出的结果来生成静止图像；和

生成单元，其生成包括由所述静止图像生成单元生成的多个静止图像、和由所述运动图像生成单元生成的多个运动图像在内的影像内容。

2.根据权利要求1所述的摄像装置，其特征在于，

所述生成单元包括：编辑单元，其对所述影像内容进行编辑以收敛于预先设定的容量内。

3.根据权利要求2所述的摄像装置，其特征在于，

所述编辑单元基于所述评价单元的评价结果来删除所述运动图像。

4.根据权利要求2所述的摄像装置，其特征在于，

所述编辑单元基于所述评价单元的评价结果来删除所述静止图像。

5.根据权利要求1所述的摄像装置，其特征在于，

所述给定的评价内容包括有无检测到面部图像。

6.根据权利要求1所述的摄像装置，其特征在于，

所述给定的评价内容包括面部图像的笑脸的程度。

7.根据权利要求1所述的摄像装置，其特征在于，

所述给定的评价内容包括多个图像之间的变化的程度。

8.根据权利要求1所述的摄像装置，其特征在于，

所述给定的评价内容包括关于多个图像的内容的评价。

9.根据权利要求1所述的摄像装置，其特征在于，

所述给定的评价内容包括在拍摄定时之时获取到的周围环境的内容。

10.根据权利要求1所述的摄像装置，其特征在于，

所述获取单元每当检测到拍摄定时之时获取给定张数的图像。

11.一种影像内容生成方法，其特征在于，包括：

获取步骤，获取给定张数的图像；

运动图像生成步骤，生成基于由该获取步骤获取到的给定张数的图像的运动图像；

评价步骤，基于给定的评价内容来分别对由所述获取步骤获取到的给定张数的图像进行评价；

静止图像生成步骤，基于由该评价步骤评价出的结果来生成静止图像；和

生成步骤，生成包括由所述静止图像生成步骤生成的多个静止图像、和由所述运动图像生成步骤生成的多个运动图像在内的影像内容。