JP3621684B2 - Digital camera - Google Patents

Digital camera Download PDF

Info

Publication number
JP3621684B2
JP3621684B2 JP2002038747A JP2002038747A JP3621684B2 JP 3621684 B2 JP3621684 B2 JP 3621684B2 JP 2002038747 A JP2002038747 A JP 2002038747A JP 2002038747 A JP2002038747 A JP 2002038747A JP 3621684 B2 JP3621684 B2 JP 3621684B2
Authority
JP
Japan
Prior art keywords
file
image file
shooting
still
moving image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2002038747A
Other languages
Japanese (ja)
Other versions
JP2003244614A (en
Inventor
晃 福田
建 佛崎
慎也 奈良
真 有岡
勝仁 新川
Original Assignee
コニカミノルタフォトイメージング株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by コニカミノルタフォトイメージング株式会社 filed Critical コニカミノルタフォトイメージング株式会社
Priority to JP2002038747A priority Critical patent/JP3621684B2/en
Publication of JP2003244614A publication Critical patent/JP2003244614A/en
Application granted granted Critical
Publication of JP3621684B2 publication Critical patent/JP3621684B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Studio Devices (AREA)
  • Television Signal Processing For Recording (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、デジタルカメラにおいて連続撮影した静止画像に基づいて静止画ファイルおよび動画ファイルを生成する技術に関する。
【0002】
【従来の技術】
従来、デジタルカメラにおいて、静止画像および動画を撮影することができることが知られている。例えば、特開平7−264530号公報および特開2000−92437号公報においては、連続撮影した静止画像に基づいて動画をファイルを生成するデジタルカメラが示されているが、静止画像と動画のいずれか一方のみしか記録することができず、静止画像のみを撮影した場面に関しては動画を取得することができない。
【0003】
また、特開2000−352759号公報においては、動画撮影中に、特定のシーンに対してユーザーの操作に対応して静止画像を取得するデジタルカメラが示されているが、動画撮影中に静止画像を連続して撮影できる構成にはなっておらず、シャッターチャンスを逃した場合には、低解像度の動画から最適な画像を選択するという妥協を強いられる。
【0004】
これに対して、静止画像と動画とを同時に取得するには、静止画像を連続して撮影し、連続撮影した静止画像に基づいて静止画ファイルと動画ファイルとを生成するようにすれば良い。
【0005】
【発明が解決しようとする課題】
しかしながら、この場合には、多量の静止画ファイルと動画ファイルとを生成するため、これらの画像ファイルの生成等に長時間を要し、撮影動作に関わる諸動作が妨げられ、ユーザーが撮影したいときに撮影動作を行うことができなくなるといった問題が生じる。
【0006】
また、多量の画像ファイルを生成するため、ユーザーが画像ファイルの内容を区別する際に混乱を招くなど、取得したファイルを整理するのに手間がとられるといった問題も生じる。
【0007】
以上のように、従来のデジタルカメラでは、静止画像と動画とを同時に取得することによって、種々の弊害が発生するという問題があった。
【0008】
本発明は、上記課題に鑑みてなされたものであり、静止画像と動画とを同時に取得することによって発生する種々の弊害を取り除いたデジタルカメラを提供することを第1の目的とする。
【0009】
本発明の第2の目的は、ユーザーの撮影を妨げることなく静止画像と動画とを同時に取得可能なデジタルカメラを提供することである。
【0010】
本発明の第3の目的は、静止画像と動画とを同時に取得した際に、取得した画像ファイルを容易に整理可能なデジタルカメラを提供することである。
【0011】
【課題を解決するための手段】
上記の課題を解決するために、請求項1の発明は、連続撮影した静止画像の組に基づいて動画ファイルを生成可能なデジタルカメラにおいて、撮影によって生成される画像ファイルを記録する記録手段と、前記記録手段の残容量を撮影可能枚数に換算して表示する撮影可能枚数表示手段と、前記連続撮影の際に、連続撮影した静止画像に基づいて静止画ファイルを各々生成するとともに、前記静止画像の組に基づいて動画ファイルをあわせて生成するファイル生成手段と、生成される動画ファイルの容量を考慮して前記撮影可能枚数表示手段に撮影可能枚数を表示するための表示制御手段とを備えることを特徴とする。
【0012】
また、請求項2の発明は、連続撮影した静止画像の組に基づいて動画ファイルを生成可能なデジタルカメラにおいて、連続撮影によって得られた静止画像の組を一時的に記憶する一時記憶手段と、前記一時記憶手段に記憶された静止画像の組に基づいて静止画ファイルおよび動画ファイルを生成するファイル生成手段と、ユーザーの操作に基づいて、前記一時記憶手段に記憶された静止画像の組のうちの少なくとも一つの静止画像に対して削除を指示する削除指示手段とを備え、前記ファイル生成手段が、前記静止画像の組のうち前記削除の指示を受けた静止画像は、前記静止画ファイルおよび前記動画ファイルの生成には使用しないことを特徴とする。
【0013】
また、請求項3の発明は、連続撮影した静止画像の組に基づいて動画ファイルを生成可能なデジタルカメラにおいて、連続撮影によって得られた静止画像の組を一時的に記憶する一時記憶手段と、前記静止画像の組に基づいて静止画ファイルと動画ファイルとを生成可能なファイル生成手段と、前記静止画像の組に含まれる少なくとも一つの静止画像に対応した静止画表示を撮影モード下で撮影結果として表示する結果表示手段とを備えることを特徴とする。
【0014】
また、請求項4の発明は、連続撮影した静止画像の組に基づいて動画ファイルを生成可能なデジタルカメラにおいて、事前に決定されたタイミングでの連続撮影によって複数の静止画像を順次に取得する取得手段と、前記複数の静止画像に基づいて静止画ファイルおよび動画ファイルを生成するファイル生成手段と、前記連続撮影中に前記ファイル生成が新規な静止画ファイルを生成した後に、前記動画ファイルを構成する静止画像群に前記新規な静止画像を追加して前記動画ファイルを更新するファイル更新手段とを備えることを特徴とする。
【0015】
また、請求項5の発明は、連続撮影した静止画像の組に基づいて動画ファイルを生成可能なデジタルカメラにおいて、連続撮影によって複数の静止画像を順次に取得する取得手段と、連続撮影期間内に前記複数の静止画像に基づいて静止画ファイルおよび動画ファイルを生成可能なファイル生成手段と、前記連続撮影における画像取得タイミングを避けて、前記動画ファイル生成に関する処理を前記ファイル生成手段に行わせる制御手段とを備えることを特徴とする。
【0016】
【発明の実施の形態】
以下、本発明の実施形態を図面に基づいて説明する。
【0017】
<デジタルカメラの要部構成>
図1、図2および図3は、本発明の実施形態に係るデジタルカメラ1の要部構成を示す図であり、図1は正面図、図2は上面図、図3は背面図に相当する。これらの図は必ずしも三角図法に則っているものではなく、デジタルカメラ1の要部構成を概念的に例示することを主眼としている。
【0018】
図2に示すように、デジタルカメラ1は、撮影レンズであるマクロ機能付きレンズ群(以下、単に「レンズ」とも称する)30を含む撮像部3を備えている。また、デジタルカメラ1は、ズーム機能を有しており、ズームリング33を回転させることなどにより、撮影倍率の変更を行うことができる。さらに、デジタルカメラ1は、マクロ切替えレバー34を備えており、マクロ撮影と通常撮影とを切り換えることができる。また、デジタルカメラ1の上面にはシャッターボタン9が設けられている。
【0019】
また、デジタルカメラ1の上面には、「撮影モード」と「再生モード」と「通信モード」とを切替設定するモード切替えダイヤル14が設けられている。撮影モードは、写真撮影を行なうモードであり、再生モードは、メモリカード8に記録された撮影画像データを背面LCD10に再生表示するモードである。また、通信モードは、デジタルカメラ1の側面に設けられるUSB端子226を介して、外部のパーソナルコンピュータ225などにデータ転送するモードである。また、デジタルカメラ1の上面には、データパネル36がさらに設けられており、このデータパネル36において各種モードの設定状況等が表示される。
【0020】
さらに、デジタルカメラ1の上面には、各種設定を変更するためのダイヤル17が設けられている。
【0021】
また、デジタルカメラ1の側面上方には、「画像サイズ」と「画質」と「露出モード」と「ドライブモード」と「ホワイトバランス」と「撮影感度」(6項目)の撮影条件および撮影方法を設定および変更するためのファンクションダイヤル15およびファンクションボタン16が設けられており、撮影モードにおいて、ファンクションダイヤル15を回転させて6項目のうちからいずれかの項目を選択し、ファンクションボタン16を押下することによって選択された項目の撮影条件または撮影方法が設定または変更可能な状態となる。そして、ファンクションボタン16の押下状態を維持したまま上述したダイヤル17を回転させることによって、選択された項目の撮影条件または撮影方法を設定または変更することができる。具体的には、ドライブモードが選択された場合には、後述する「連写撮影」および「インターバル撮影」といった連続撮影の撮影方法を設定することができる。
【0022】
図3に示すように、デジタルカメラ1の背面左方には、撮影画像のライブビュー表示及び記録画像の再生表示等を行なうための液晶ディスプレイ(背面LCD)10と電子ビューファインダ(EVF)20とが設けられている。この背面LCD10およびEVF20では、カラーで画像表示が行われる。
【0023】
デジタルカメラ1の背面右方には、カーソルボタン(十字キー)U、D、L、R、および実行ボタン32を含むコントロールボタン35が設けられており、このコントロールボタン35を用いて各種操作が行われる。また、デジタルカメラ1の背面には、メニューボタン37が設けられている。このメニューボタン37が押下されることにより、各種のメニューが背面LCD10に表示される。
【0024】
また、デジタルカメラ1の背面には、クイックビューボタン38が設けられている。撮影モード下で撮影後にこのクイックビューボタン38が押下されることにより、直近の撮影結果(静止画像)が背面LCD10またはEVF20に表示される(クイックビュー表示)。さらに、その状態からコントロールボタン35の操作とクイックビューボタン38の押下とによって選択した画像の削除を行うことができる。また、撮影後にアフタービューが背面LCD10またはEVF20に表示される場合も同様に、コントロールボタン35の操作とクイックビューボタン38の押下とによって選択した画像の削除を行うことができる。この画像の削除についてはさらに後述する。
【0025】
また、デジタルカメラ1の背面右下方には、音声入力状態とするための録音ボタン39が設けられている。撮影後、背面LCD10またはEVF20にクイックビューまたはアフタービューが表示されている状態で録音ボタン39が押下されると、デジタルカメラ1の正面上方に設けられたマイクMから音声が入力され、背面LCD10またはEVF20に表示されている画像に音声が関連づけられてメモリカード8に記録される。
【0026】
また、デジタルカメラ1の背面には、ディスプレイ切換レバー31とビデオ出力端子222とが設けられている。ディスプレイ切換レバー31は、背面LCD10の表示とEVF20の表示との切換等を行うレバーである。ビデオ出力端子222は、外部モニタ223と通信線を介して接続するための端子である。
【0027】
デジタルカメラ1の側面には、メモリカード8を挿入して装着できるメモリスロット81が設けられている。
【0028】
また、デジタルカメラ1では、モード切替えダイヤル14で撮影モードが選択される場合、背面LCD10にライブビュー画像とともにAFカーソルAKを表示できる構成となっている。このAFカーソルAKは、十字キーU、D、L、Rを操作することによって、背面LCD10内を上下左右に移動できる。そして、AFカーソルAKを中心に設定されるAFエリアについてAF処理(後で詳述)が可能となる。
【0029】
<デジタルカメラ1の機能ブロック>
図4は、デジタルカメラ1の機能ブロック図である。同図において、CCD303は、1280×960画素を有し、レンズ群30により結像された被写体の光像を、R(赤),G(緑),B(青)の色成分の画像信号(各画素で受光された画素信号の信号列からなる信号)に光電変換して出力する。タイミングジェネレータ314は、CCD303の駆動を制御するための各種のタイミングパルスを生成するものである。
【0030】
撮像部3における露出制御は、レンズ駆動部306によるレンズ群30の絞りと、CCD303の露光量、つまり、シャッタスピードに相当するCCD303の電荷蓄積時間を調節して行なわれる。ここで、被写体輝度が低輝度時に適切なシャッタスピードが設定できない場合は、CCD303から出力される画像信号のレベル調整を行なうことにより露光不足による不適正露出が補正される。すなわち、低輝度時は、絞りとシャッタスピードと信号処理回路313のゲイン調整とを組み合わせて露出制御が行なわれることとなる。
【0031】
タイミングジェネレータ314は、全体制御部211から送信される基準クロック基づきCCD303の駆動制御信号を生成するものである。このタイミングジェネレータ314は、例えば積分開始/終了(露出開始/終了)のタイミング信号、各画素の受光信号の読出制御信号(水平同期信号,垂直同期信号,転送信号等)等のクロック信号を生成し、CCD303に出力する。
【0032】
信号処理回路313は、CCD303から出力される画像信号(アナログ信号)に所定のアナログ信号処理を施すものである。この信号処理回路313は、CDS(相関二重サンプリング)回路とAGC(オートゲインコントロール)回路とを有し、CDS回路により画像信号のノイズ低減処理を行ない、AGC回路でゲインを調整することにより画像信号のレベル調整を行なう。
【0033】
A/D変換器205は、画像信号の各画素信号を12ビットのデジタル信号に変換するものである。A/D変換器205は、タイミング発生回路から入力されるA/D変換用のクロックに基づいて各画素信号(アナログ信号)を12ビットのデジタル信号に変換する。
【0034】
WB(ホワイトバランス)回路207は、R,G,Bの各色成分の画素データのレベル変換を行なうものである。このWB回路207は、全体制御部211で記憶されるレベル変換テーブルを用いてR,G,Bの各色成分の画素データのレベルを変換する。なお、レベル変換テーブルの各色成分のパラメータ(特性の傾き)は全体制御部211により、オートまたはマニュアルで、撮影画像毎に設定される。γ補正回路208は、画素データの階調を補正するものである。
【0035】
色変換・色補正回路231は、γ補正回路208から入力される画像データに対して、例えばYCrCb系に色空間を変換し、色再現性を向上させる色補正を行うものである。
【0036】
解像度変換部232は、ライブビュー撮影時に、CCD303で取得される画像データを1/4に間引いた画像データ(320×240画素)を生成する。
【0037】
AF評価値演算部233は、シャッターボタン9が半押し状態(S1)になった場合に、コントラスト方式のAFを行うための評価値演算動作が行われる。ここでは、撮影画像データのうち上記のAFエリアに相当するデータに関して、隣接する各画素に関する差分の絶対値の和である評価値が演算される。そして、レンズ群30を駆動し、この評価値の最も高いレンズ位置が合焦位置とされる。これにより、AFエリアに対してレンズ群30を駆動し合焦を行うため、主被写体などを狙ってピントを合わせることができる。なお、デジタルカメラ1では、AFカーソルAKにより合焦位置を指定せず、背面LCD10の画面中央部にAFエリアを設定する撮影モードも備えている。
【0038】
測光演算部234では、解像度変換部232から出力される画像データを例えば300(20×15)ブロックに分割し、各ブロックごとに測光データを算出する多分割測光を行うことができる。
【0039】
画像メモリ209は、CCD303で取得され、上記の画像処理が施された画像データ(静止画像)を一時的に記憶するメモリである。画像メモリ209は、少なくとも数フレーム分の記憶容量を有している。すなわち、画像メモリ209は、CCD303画素数に対応する1280×960画素分の画素データ数フレーム分の記憶容量を少なくとも有し、各画素データが対応する画素位置に記憶されるようになっている。
【0040】
EVF/背面LCD切替え部235は、ディスプレイ切替えレバー31の設定に基づいて、背面LCD10とEVF20との表示切替えを行う。
【0041】
デジタルカメラ1の撮影待機状態では、CCD303により1/30(秒)毎に撮像された画像の各画素信号がA/D変換器205〜解像度変換部232により所定の信号処理を施された後、全体制御部211を介してEVF/LCD切替え部235に転送され、背面LCD10やEVF20に表示される(ライブビュー表示)。これにより、ユーザはCCD303で撮像される被写体像を視認することができることとなる。また、再生モードにおいては、メモリカード8から読み出された画像が全体制御部211で所定の信号処理が施された後、EVF/LCD切替え部235に転送され、背面LCD10やEVF20に再生表示される。
【0042】
カードI/F212は、メモリスロット81に装着されるコンピュータ読み取り可能な記録媒体であるメモリカード8への画像データおよび音声データの読み書きを行なうためのインターフェースである。このメモリカード8への画像データの読み書きでは、静止画像については、圧縮・伸張部236において例えばJPEG方式で画像の圧縮・伸張が行われる。なお、メモリカード8の記録容量などのカード情報はカード自身に格納されている。
【0043】
また、USBI/F224は、外部のパーソナルコンピュータ225と通信可能にするための、USB規格に準拠した通信用インターフェースである。これらのカードI/F212、USBI/F224を介して、メモリカード8やパーソナルコンピュータ225にセットされるCD−ROMなどの記録媒体に記録されている制御プログラムを、全体制御部211のROM211b内に取り込むことができる。
【0044】
操作部250は、上述したシャッターボタン9、ディスプレイ切換レバー31、ファンクションダイヤル15、ファンクションボタン16、ダイヤル17、コントロールボタン35、クイックビューボタン38、録音ボタン39などの各種ボタン、レバーなどで構成されている。
【0045】
シャッターボタン9は、銀塩カメラで採用されているような半押し状態(S1)と押し込んだ状態(S2)とが検出可能な2段階スイッチになっている。待機状態でシャッターボタン9をS1状態にすると、AFのためのレンズ駆動を開始し、AF評価値演算部233で画像のコントラストを評価しながら、コントラストがもっとも高くなるようにレンズを駆動し停止させる。一方、シャッターボタン9をS2状態にすると、CCD303で取得され画像処理が施された画像データが圧縮・伸張部236でデータ圧縮されるとともに、そのサムネイル画像が全体制御部211で生成される。そして、生成された画像データとサムネイル画像データとが、一般的に画像メモリ209に記憶された後に、カードI/F212を介してメモリカード8に画像ファイル化されて記録される。
【0046】
また、撮影モード下において、撮影後に、アフタービュー表示またはクイックビュー表示を行う場合には、画像メモリ209に一時的に記憶されている静止画であるサムネイル画像が撮影結果としてEVF/LCD切替え部235に転送され、背面LCD10やEVF20に表示される。
【0047】
また、連続撮影の一つである連写撮影を行う際には、シャッターボタンをS2状態にすると、毎秒7コマのタイミングで連続した撮影を開始し、シャッターボタンのS2状態が解除されると連写撮影を終了する。そして、連写撮影によってCCD303で取得され画像処理が施された静止画像は画像メモリ209に一時的に記憶され、背面LCD10またはEVF20にアフタービューまたはクイックビューが表示されている間に、コントロールボタン35の操作とクイックビューボタン38の押下とによって画像メモリ209に一時的に記憶されている静止画像を削除することができる。つまり、画像メモリ209に一時的に記憶された静止画像を削除するというユーザーの編集操作に基づいた編集結果によって、削除されなかった静止画像に基づいて静止画ファイルおよび動画ファイルを生成することができる。なお、ここで言う「編集」とは、連続撮影されて一時的に記憶された静止画像の一部若しくは全部の削除、つまりは、撮影画像情報(画像ファイルなど)を記録しないという選択や、後述する連続撮影されて一時的に記憶された静止画像に対して音声情報などの付加情報を付加することなどを言う。連写撮影についてはデジタルカメラ1の動作説明においてさらに詳述する。
【0048】
また、連続撮影の一つであるインターバル撮影を行う際には、シャッターボタンをS2状態にすると、ユーザーによって撮影前に予め設定されたタイミングにしたがって全体制御部211の制御の下で、複数回撮影する連続撮影が実施され、ユーザーによって設定されたコマ数の画像の取得が行われるとインターバル撮影を終了する。つまり、ここでは、インターバル撮影前に予め設定されたタイミングで複数回撮影することによって、CCD303で取得され画像処理が施された画像データ(静止画像)を取得し、画像メモリ209に一時的に記憶する。なお、本実施形態では、インターバル撮影の開始から終了までと、すべての画像取得後に省電力または電源オフの状態となっている時間を含めた期間を「インターバル撮影(連続撮影)期間」と呼ぶこととする。インターバル撮影についてはデジタルカメラ1の動作説明においてさらに詳述する。
【0049】
マイクMは、ユーザーが必要に応じて録音ボタン39を押下した際に音声を入力する。入力された音声はマイクMでアナログ音声データ化され、操作部250を介して全体制御部211へ送られ、全体制御部211でデジタル音声データ化された後に、圧縮・伸張部236において圧縮処理されてカードI/F212を介してメモリカード8に音声ファイルとして記録される。なお、アナログ音声データをデジタル音声データ化する方式としては、例えば、PCM(パルス符号変調)方式などが挙げられ、音声ファイルとしては、例えば、WAV形式などが挙げられ、また、圧縮・伸張方式としては、例えば、ADPCM(適応差分パルス符号変調)方式などが挙げられる。
【0050】
外部モニタI/F221は、EVF/LCD切替え部235から転送される画像データを、例えばNTSC方式に信号変換を行うインターフェースであり、ビデオ出力端子222を介して外部モニタ223に画像信号を送信する。
【0051】
全体制御部211は、マイクロコンピュータ(CPU)、RAM211aおよびROM211bを有しており、上述したカメラの各部材の駆動を有機的に制御してデジタルカメラ1の動作を統括制御する。
【0052】
電源280は、デジタルカメラ1全体に電力を供給するためのものであり、例えば、ニッケル水素電池等が挙げられる。そして、電源280は、電力制御部281を介してデジタルカメラ1全体に電力を供給する。
【0053】
リアルタイムクロック260は、時刻情報を管理するための回路であり、電源280とは異なる電源によって電力が供給されている。また、リアルタイムクロック260は、ユーザーによって事前に決定された所定のタイミングで複数の静止画像を順次に取得するインターバル撮影を実施する際にはタイマとして働き、所定のタイミングの前になると電力制御部281に信号を送り、電源280からデジタルカメラ1全体に電力が供給されていない場合には、電力制御部281が電源280からデジタルカメラ1全体に対して電力を供給するように制御する。また、リアルタイムクロック260は、上記所定のタイミングの前になると全体制御部211にも信号を送り、全体制御部211は電力制御部281からの電力の供給を受けて所定のタイミングで撮影動作を行うべくデジタルカメラ1全体を制御する。
【0054】
また、全体制御部211は、連続撮影(連写撮影またはインターバル撮影)において取得され画像メモリ209に一時的に記憶された画像データ(静止画像)から動画を生成する際には、画像メモリ209に一時的に記憶された静止画像に対して画素数1280×960から間引き処理を施して画素数640×480に解像度を低減する。その後、解像度を下げた静止画像に基づいて、動画を生成し、圧縮・伸張部236において圧縮して、カードI/F212を介してメモリカード8に動画ファイルを生成して記録する。なお、動画ファイルとしては、例えば、AVIファイルが挙げられ、圧縮・伸張する方式としてはMotion JPEG方式などが挙げられる。
【0055】
また、全体制御部211は、メモリカード8に記録可能な容量である残容量を読み出し、これから撮影する画像データの解像度に基づいてデジタルカメラ1の上面に設けられたデータパネル36に撮影可能枚数を表示する。そして、連写撮影の際には、静止画像の組を取得を開始した後、静止画ファイルおよび動画ファイルの生成前に、全体制御部211は、生成される動画ファイルの容量を考慮して、画像ファイル生成・記録後のメモリカード8に記録可能な残容量を算出し、その値を撮影可能枚数に換算してデータパネル36に表示する。なお、撮影可能枚数の表示についてはさらに後述する。
【0056】
<メモリカード8に記録された各種ファイル>
デジタルカメラ1における撮影によって取得された画像データおよびマイクMより入力された音声データはそれぞれ画像ファイル化(静止画ファイル化、および動画ファイル化)および音声ファイル化されてメモリカード8に記録される。以下、本発明にかかるデジタルカメラ1によってメモリカード8に記録された画像ファイル(静止画ファイル、および動画ファイル)および音声ファイルについて以下説明する。
【0057】
<ファイル名の付け方>
図5(a)は、本発明の実施形態にかかるデジタルカメラ1で撮影された画像データに基づいてメモリカード8内に記録された静止画ファイルおよび動画ファイルを示す模式図である。図5(b)は比較のために、従来、デジタルカメラなどで取得された静止画ファイルをコンピューター等に持ち込んで生成した動画ファイルと静止画ファイルとが記録された記録媒体内の画像ファイルを示す模式図である。
【0058】
図5(b)では、静止画ファイル1,静止画ファイル2,・・・,静止画ファイル99に対してファイル名がPIC00001.jpg,PIC00002.jpg,・・・,PIC00099.jpgと付され、動画ファイル1に対してファイル名がPIC00100.AVIと付されている。また、静止画ファイル100,静止画ファイル101,・・・,静止画ファイル140に対してファイル名がPIC00101.jpg,PIC00102.jpg,・・・,PIC00141.jpgと付され、動画ファイル2に対してファイル名がPIC00142.AVIと付されている。ここでは、静止画ファイルと動画ファイルのファイル名が連番となっているため、動画ファイルがどの静止画ファイルに基づいて生成されたのか判断がつかない。例えば、動画ファイル1が静止画ファイル1〜静止画ファイル99に基づいて生成されているのか、静止画ファイル51〜静止画ファイル99に基づいて生成されているのかファイル名を見ただけでは判断がつかない。
【0059】
これに対して、本発明にかかるデジタルカメラ1で撮影された画像データに基づいてメモリカード8内に記録された静止画ファイルおよび動画ファイルは、図5(a)に示すように、静止画ファイル1,静止画ファイル2,・・・,静止画ファイル99に対してファイル名がB0010001.jpg,B0010002.jpg,・・・,B0010099.jpgと付され、動画ファイル1に対してファイル名がB0010100.AVIと付されている。また、静止画ファイル100,静止画ファイル101,・・・,静止画ファイル140に対してファイル名がB0020001.jpg,B0020002.jpg,・・・,B0020041.jpgと付され、動画ファイル2に対してファイル名がB0020042.AVIと付されている。
【0060】
図6(a)および図6(b)は、それぞれ静止画ファイルおよび動画ファイルのファイル名について説明している図である。図6(a)および図6(b)に示すように、静止画ファイルおよび動画ファイルのファイル名のうち左から2番目〜4番目の文字は”連写系列番号”を示しており、左から6番目〜8番目の文字は”ファイル番号”を示しており、右から1〜3番目の文字は”拡張子”を示している。
【0061】
連写系列番号は、一連の連続撮影をした結果得られたファイルであることを示しており、例えば、連続撮影をした順に連写系列番号が001,002,・・・,099というように付される。また、ファイル番号は、一連の連続撮影をした結果得られたファイルの順に番号が付されたものであり、例えば、一連の連続撮影の結果得られたファイルの順に001,002,・・・,100というように番号が付される。また、拡張子については周知のごとく図6(a)では静止画ファイルのJPEG形式に対応するjpgが付されており、図6(b)では動画ファイルのAVI形式に対応するAVIが付されている。
【0062】
したがって、図5(a)に示すように、動画ファイル1(B0010100.AVI)が、静止画ファイル1(B0010001.jpg)〜静止画ファイル99(B0010099.jpg)の静止画像に基づいて生成しているとファイル名を見ただけで判断することができ、また、動画ファイル2(B0020042.AVI)が、静止画ファイル100(B0020001.jpg)〜静止画ファイル140(B0010041.jpg)の静止画像に基づいて生成しているとファイル名(主に連写系列番号)を見ただけで判断することができる。
【0063】
なお、連続撮影でない単独の撮影を行った場合には、従来通りのファイル名を付与する。
【0064】
<画像ファイル内の記録内容>
図7は、1つの静止画ファイル内の記録内容を説明する図であり、図示するように1つの静止画ファイルにはタグ情報、高解像度の画像データ、およびサムネイル画像データとから構成される。
【0065】
図8は、1つの動画ファイル内の記録内容を説明する図であり、例えば、図示するように1つの動画ファイル1は、静止画ファイル1〜静止画ファイル99に係る静止画像から生成されているため、静止画ファイル1〜静止画ファイル99に対応する画像データ1〜画像データ99の99フレームの画像データから構成される。
【0066】
<音声ファイルの記録>
図9は、連続撮影後に撮影結果に対して音声情報(ボイスメモ)を付した場合に、記録される音声ファイルと撮影結果との関連づけについて示した模式図である。例えば、図示するように、音声ファイル1は連続撮影を行って静止画ファイル1〜静止画ファイル99を得る際にボイスメモを付した結果得られた音声ファイルであり、音声ファイル1は、関係のある静止画ファイル1〜静止画ファイル99と関連づけて記録するために、連続撮影された最後の静止画ファイル(静止画ファイル99)と同じ連写系列番号およびファイル番号が付され、音声ファイル1のファイル名はB0010099.WAVとなる。そして、図9に示すように、連続撮影された最後の静止画ファイルであるタグ情報内に、関係するボイスメモが存在していること、および、関係するボイスメモのファイル名が記述される。具体的には、静止画ファイル99のタグ情報として「ボイスメモあり、B0010099.WAV」と記述される。
【0067】
<デジタルカメラ1の動作>
以下では、デジタルカメラ1の動作のうち、主に連続撮影(連写撮影およびインターバル撮影)に関する動作を説明する。連続撮影の動作は、ユーザーによる各種設定ならびに操作部250の各種操作に基づいて、全体制御部211の制御のもとで自動的に実行される。なお、連続撮影以外の動作については、デジタルカメラの一般的な動作が行われる。
【0068】
<連続撮影前の各種設定>
図10は、連続撮影前に、連続撮影によって取得した静止画像に基づいて動画ファイルを自動的に生成するか否かを設定する動画設定画面を示している。なお、図10では、背面LCD10に表示される動画設定画面を示している。切替えダイヤル14を操作することによって「撮影モード」とし、メニューボタン37を押下した後に、コントロールボタン35を種々操作することによって、図10(a)に示す動画設定画面が背面LCD10に表示される。そして、カーソルKS1を十字キーU、Dを押下することによって動画生成の「あり」「なし」のいずれかに合わせて、実行ボタン32を押下することによって、動画生成の有無を設定できる。具体的には、図10(a)に示すように動画生成の「あり」にカーソルKS1を合わせて実行ボタン32を押下することによって、図10(b)に示すように、動画生成の「あり」が選択設定される。
【0069】
図11は、撮影後にアフタービュー(撮影結果)を背面LCD10またはEVF20に表示するか否かを設定するアフタービュー設定画面を示す模式図である。なお、図11では、背面LCD10に表示されるアフタービュー設定画面を示している。動画設定画面を表示させる動作と同様に「撮影モード」とし、メニューボタン37を押下した後に、コントロールボタン35を種々操作することによって、図11に示す動画設定画面が背面LCD10に表示される。そして、カーソルKRを十字キーU、Dを押下することによってアフタービューの表示の有無および表示時間を設定することができる。具体的には、図11に示すように、カーソルKRを「なし」「2秒」「10秒」のいずれかに合わせて実行ボタン32を押下することによって、アフタービューの表示なし、撮影後アフタービューを2秒間表示、または、撮影後アフタービューを10秒間表示、のいずれかを設定することができる。
【0070】
<連写撮影>
<連写撮影のフロー>
図12から図14は、デジタルカメラ1の連写撮影の動作を示すフローチャートである。
【0071】
切替えダイヤル14を操作することによって「撮影モード」とし、ファンクションダイヤル15を回転させて、ドライブモードを選択し、ファンクションボタン16を押下して押下状態を維持したままダイヤル17を回転させることによって、撮影方法を「連写撮影」に設定すると、ステップS1へ進む。
【0072】
ステップS1では、シャッターボタン9が半押しされてS1状態となったか否かについて全体制御部211が判断を行う。そして、S1状態となったと判断するとステップS2へ進み、S1状態となっていないと判断されるとフローチャートの最初に戻る。
【0073】
ステップS2では、自動露出制御(AE)、オートフォーカス(AF)、自動ホワイトバランス調整(AWB)を実施し、ステップS3へ進む。なお、AE、AF、AWBについては、全体制御部211の制御の下で実施し、その機能については簡単に上述したとおりで、動作については一般的なデジタルカメラと同様な動作となるため、ここでは、説明を省略する。
【0074】
ステップS3では、シャッターボタン9が押し込まれてS2状態となったか否かについて全体制御部211が判断を行う。具体的には、S2状態となったと判断するとステップS4へ進み、S2状態となっていないと判断するとステップS1へ戻る。
【0075】
ステップS4では、画像メモリ209の容量に空きがあるか否かについて全体制御部211が判断を行う。具体的には、取得しようとする画像データ1つ分以上の空き容量が画像メモリ209にある場合にはステップS5へ進み、取得しようとする画像データ1つ分以上の空き容量が画像メモリ209にない場合には図13のステップS12へ進む。
【0076】
ステップS5では、被写体の撮像を行う。つまり、CCD303が、撮影レンズ30により結像された被写体の光像を画像信号として出力することにより、1280×960画素数の画像信号を取得し、ステップS6へ進む。なお、ここでは、連写間隔を短くするため、シャッタスピードの上限を8分の1秒程度に制限しても構わない。
【0077】
ステップS6では、ステップS5において取得した画像信号に対してフィルタ処理、各種補正(補間)、画像サイズ変換等の画像処理を実施する。具体的には、信号処理回路313において、ステップS5において取得した画像信号(アナログ信号)に対してCDS回路によるノイズ低減処理、AGC回路でゲインを調整することにより画像信号のレベル調整を行なう。その後、A/D変換器205においてデジタル信号に変換し、WB回路207においてR,G,Bの各色成分の画素データのレベルを変換し、γ補正回路208において画素データの階調を補正し、色変換・色補正回路231において色補正を行う。そして、解像度変換部232において必要に応じて画像サイズの変換を行い、ステップS7へ進む。
【0078】
ステップS7では、ステップS6で得られた画像データに基づいて全体制御部211においてサムネイル画像を生成し、ステップS8へ進む。
【0079】
ステップS8では、ステップS6で得られた画像データに対して圧縮・伸張部236で圧縮処理を行い、ステップS9へ進む。
【0080】
ステップS9では、ステップS7およびステップS8で得られたサムネイル画像および圧縮処理された静止画像を画像メモリ209に一時記憶し、ステップS10へ進む。
【0081】
ステップS10では、S2状態が継続されているか否かを全体制御部211が判断する。つまり、S2状態が継続されていれば連写撮影の動作を継続するためにステップS11へ進み、S2状態が継続されていなければ連写撮影の動作を終了するため、ステップS12へ進む。
【0082】
ステップS11では、連写撮影の動作を継続するため、次の撮像の準備のために、ステップS2と同様にAE、AF、AWBを実施し、ステップS4へ進む。
【0083】
ステップS12では、全体制御部211が連写撮影によって得られた画像メモリ209に記憶されている画像データ(静止画像)から生成すべき静止画ファイルの記録に必要な容量と、画像メモリ209に記憶された画像データ(静止画像)から動画を生成することを設定されている場合は、生成すべき動画ファイルの記録に必要な容量とを考慮してメモリカード8の残容量を算出し、その値を撮影可能枚数に換算してデータパネル36に表示する。ステップS12のデータ処理の流れについては、図14にフローチャートを示す。以下、図14にしたがってステップS12のデータ処理の流れについて説明する。
【0084】
ステップS141では、メモリカード8の残容量を確認する。つまり、全体制御部211がメモリカード8の残容量を読み出して確認し、ステップS142へ進む。
【0085】
ステップS142では、画像メモリ209内に記憶されている画像コマ数を確認する。つまり、連写撮影によって何コマの静止画像が画像メモリ209内に記憶されているかについて確認を行い、ステップS143へ進む。
【0086】
ステップS143では、ユーザーによって動画ファイルの生成の設定がなされているか否かについて判断する。ここでは、動画ファイルの生成の設定がなされている場合はステップS144へ進み、動画ファイルの生成の設定がなされていない場合はステップS145へ進む。
【0087】
ステップS144では、画像メモリ209に記憶されている静止画像、および生成すべき動画の解像度をもとに生成すべき静止画ファイルおよび動画ファイルの記録に必要な容量を算出し、ステップS146へ進む。
【0088】
ステップS145では、画像メモリ209に記憶されている静止画像に基づいて生成すべき静止画ファイルの記録に必要な容量を算出し、ステップS146へ進む。
【0089】
ステップS146では、ステップS144から進んできた場合は、ステップS141において読み出して確認したメモリカード8の残容量と、ステップS144で算出した画像ファイルの容量との差分を算出して、画像ファイル生成・記録後のメモリカード8内の残容量を算出し、ステップS147へ進む。また、ステップS145から進んできた場合は、ステップS141において読み出して確認したメモリカード8の残容量と、ステップS145で算出した画像ファイルの容量との差分を算出して、画像ファイル生成・記録後のメモリカード8内の残容量を算出し、その値を撮影可能枚数に換算して、ステップS147へ進む。
【0090】
ステップS147では、ステップS146で算出した残容量に基づいてデータパネル36に表示を行い、ステップS12の残容量表示処理を終了する。
【0091】
以上説明したステップS12におけるメモリカード8の残容量の算出および撮影可能枚数の表示について、以下、具体的な一例を挙げて説明する。
【0092】
例えば、フォーマットしたばかりの16MBのメモリカード8を使用して、解像度が1280×960画素の静止画像100枚を連写撮影した場合、生成すべき100個の静止画ファイルを記録するためには、メモリカード8には約8MBの容量が必要となる。そして、上記100枚の静止画像から生成される動画(640×480画素)ファイルの容量は約1MBとなる。したがって、この場合、ステップS144において算出される画像ファイルの容量は約9MBとなり、ステップS145において算出される画像ファイルの容量は約8MBとなる。さらに、ステップS146では、動画ファイルの生成の設定がなされている場合には、メモリカード8の残容量を約7MBと算出し、動画ファイルの生成の設定がなされていない場合には、メモリカード8の残容量を約8MBと算出する。そして、ステップS147では、動画ファイルの生成の設定の有無に対応して、それぞれ撮影可能枚数を79枚、および102枚とデータパネル36に表示する。
【0093】
図15は、その後の連写撮影中において、メモリカード8の残容量に基づいた表示がなされているデータパネル36を示した図である。図15に示すように、データパネル36の右下には静止画像の撮影可能なフレーム数36bを示す。
【0094】
したがって、ここでは、静止画像を撮影した後であって、動画ファイルを生成する前に、生成すべき静止画ファイルおよび動画ファイルの容量分も考慮して、メモリカード8内の残容量に基づいた表示をするため、ユーザーは、メモリカード8への記録限界を正確に把握することができる。また、ここでは、連写撮影中に1コマの静止画像を取得するごとに残容量を算出することなく、一連の連写撮影によって静止画像を取得した後、つまり、複数の静止画像の取得後に残容量を算出し、残容量の算出の回数を減じることによって、算出に要する負担を低減することができるため、その分だけ撮影に要する処理能力を向上されることができ、連写速度の向上を図ることができる。また、データパネル36の表示を短時間の間に激しく変化させることがないため、表示を見やすくすることができる。
【0095】
図13に戻って説明を続ける。
【0096】
ステップS12において、メモリカード8の残容量の表示処理を行った後、ステップS13へ進む。
【0097】
ステップS13では、連写撮影前のユーザーの設定にしたがってアフタービューを表示するか否かについて全体制御部211が判断を行う。具体的には、アフタービューを表示する場合にはステップS15へ進み、アフタービューを表示しない場合にはステップS14へ進む。
【0098】
ステップS14では、クイックビューボタン38が押下されたか否かを全体制御部211が判断する。具体的には、ユーザーによってクイックビューボタン38が押下された場合にはステップS15へ進み、ユーザーによってクイックビューボタン38が押下されなった場合にはステップS21へ進む。なお、ステップS14では、S2状態が解除された時点から10秒以内にクイックビューボタン38が押下されなければ自動的にステップS22へ進む。
【0099】
ステップS15では、背面LCD10にサムネイル画像を表示し、ステップS16へ進む。なお、ここで表示されるサムネイル画像は一連の連写撮影において最後に得られた静止画像に対応するサムネイル画像であり、アフタービューの表示の場合は撮影前に設定されたアフタービューの表示時間の間にステップS16において削除操作がなされなければ、ステップS19に進む。
【0100】
ステップS16では、画像メモリ209内に一時的に記憶されている画像データを削除するか否かについて全体制御部211が判断する。具体的には、背面LCD10に表示されたサムネイル画像によってユーザーが撮影結果を確認し、背面LCD10にサムネイル画像が表示されている間にクイックビューボタン38等を押下すると、図16に示す画面が背面LCD10に表示され、コントロールボタン35を種々押下操作することによってカーソルKR2を移動させて、画像メモリ209内に一時的に記憶されている画像データを削除するか否かを選択指示することができる。つまり、画像メモリ209内に一時的に記憶されている画像データの削除がユーザーによって指示されるとステップS17へ進み、画像メモリ209内に一時的に記憶されている画像データの削除がユーザーによって指示されなかった場合はステップS19へ進む。
【0101】
ステップS17では、画像メモリ209内に一時的に記憶された画像データを全て削除して、ステップS18へ進む。つまり、ここでは、ステップS16において、指示されたユーザーの選択操作に基づいた編集内容が、画像メモリ209内に一時的に記憶されている画像データ(静止画像)の組の削除であり、画像メモリ209内に一時的に記憶された画像データは全て削除されるため、削除された静止画像に基づいては動画ファイルを生成しないこととなる。
【0102】
したがって、ここでは、連写撮影後に撮影モード下で表示される撮影結果として静止画像(サムネイル画像)を背面LCD10に表示することによって、動画像を生成する前に撮影結果を素早く確認することができ、必要な静止画ファイルおよび動画ファイルのみを選択的に生成することができるため、画像ファイルの生成にかかる負担を最小限に抑えることができる。また、ステップS16において画像メモリ209に一時的に記憶されている画像データの削除がユーザーによって指示されると、画像メモリ209内に一時的に記憶された画像データが全て削除されるため、静止画ファイルおよび動画ファイルのいずれも生成しないことをステップS16の操作において同時に選択できるため、操作効率を向上させることができる。
【0103】
また、ここでは、画像メモリ209に一時的に記憶されている画像データ(静止画像)の削除という編集結果に基づいて、削除されなかった静止画像のみに基づいて静止画ファイルおよび動画ファイルを生成し、動画ファイルを構成する画像データに対応する静止画ファイルが必ず生成されるため、図5(a)に示したように、対応する静止画ファイルと動画ファイルについて、対応づけてファイル名を付すことによって、静止画ファイルと動画ファイルとの対応関係を明確化することができる。
【0104】
ステップS18では、画像メモリ209内の画像データに基づいて画像ファイルを生成することがなくなるため、全体制御部211の制御によってデータパネル36に表示する残容量表示を変更する。具体的には、ステップS141において確認したメモリカード8内の残容量に基づいて表示し、ステップS1へ戻る。
【0105】
ステップS19では、録音ボタン39が押下されたか否かを全体制御部211の制御の下で判断する。具体的には、サムネイル画像が背面LCD10に表示されている間に、ユーザーによって録音ボタン39が押下されるとステップS20へ進み、サムネイル画像が背面LCD10に表示されている間に、ユーザーによって録音ボタン39が押下されないとステップS22へ進む。
【0106】
ステップS20では、マイクMから入力される音声に基づいて全体制御部211において音声データを生成し、RAM211aに一時的に記憶して、ステップS21へ進む。
【0107】
ステップS21では、ステップS12において算出された残容量と、ステップS20において生成された音声データが音声ファイルとされた場合の容量との差分を全体制御部211が算出し、算出された値に基づいてデータパネル36に表示される残容量表示を変更して、ステップS22へ進む。
【0108】
ステップS22では、画像メモリ209に一時的に記憶されている画像データ(静止画像)と、RAM211aに一時的に記憶されている音声データとから静止画像データおよび音声データを順次生成してメモリカード8に記録し、ステップS23へ進む。
【0109】
図17に画像メモリ209に一時的に記憶された画像データから画像ファイルが生成されてメモリカード8に記録される様子を説明する図を示しているが、ステップS22では、図17に示すように、画像メモリ209内の1コマ分の撮影画像データとサムネイル画像データとから1つの静止画ファイルを生成してメモリカード8に記録する。
【0110】
また、ここでは、図9において図示したように、音声ファイルを一連の連写撮影の最後の静止画ファイルに関連づけてメモリカード8に記録し、音声ファイルには、最後の静止画ファイルと同じファイル番号を付し、最後の静止画ファイルのタグ情報には、関連する音声ファイル(ボイスメモ)が存在していることと、その音声ファイルのファイル名とを記述する。つまり、ここではユーザーの操作による編集内容が撮影後の音声情報の付加であり、音声情報を静止画ファイルにのみ関連づけてメモリカード8に記録する。
【0111】
したがって、ここでは、生成された静止画ファイルに音声情報等の画像内容の識別や説明を主眼とした付加情報を付加する静止画像の編集をすることができるため、付加情報の付加によって生成後の静止画ファイルの内容を容易に把握可能な状態とすることができる。また、付加情報としての音声情報を静止画ファイルにのみ付加することによって、動画ファイルに、付加情報としての音声情報が付加されることにより生じる、あたかも動画像に同期して記録された音声データと錯覚してしまうというユーザーの予期せぬ混乱を防止することができる。さらに、本実施形態にかかるデジタルカメラ1においては、静止画ファイルのみを生成して、動画ファイルを生成しない場合もあるため、どの画像ファイルに付加情報を付加するのかといった設定に依存する切換操作の煩雑さを防止する効果もある。
【0112】
ステップS23では、撮影前に設定したユーザーの設定にしたがって動画ファイルを生成するか否かを全体制御部211が判断する。具体的には、動画ファイルの生成が設定されている場合はステップS24へ進み、動画ファイルの生成が設定されていない場合はステップS1へ戻る。
【0113】
ステップS24では、全体制御部211の制御のもとで解像度変換部232において、画像メモリ209に一時的に記憶されている静止画データ(画素数1280×960)の解像度を一旦画素数640×480に下げ、全体制御部211で解像度を下げた静止画データに基づいて動画データ(画素数640×480)を生成して動画ファイルとしてメモリカード8に記録し、ステップS1へ戻る。ここでは、図17に示すように、連写撮影されて画像メモリ209に一時的に記憶されているNコマの画像データ(静止画データ)に基づいて、動画データを生成し、1つの動画ファイルを生成する。したがって、例えば、連写撮影によって40コマの画像データを画像メモリ209に一時的に記憶している場合は、40コマの画像データに基づいて、40フレームの動画データを生成して動画ファイルを生成する。また、ここでは、連続撮影された静止画像(第1の静止画像の組)の解像度を下げた第2の静止画像の組から動画ファイルを生成して記録させることによって、動画ファイルの生成時および記録後の再生時の処理に要する負荷を低減することができるため、処理時間の短縮を図ることができる。
【0114】
以上、本発明にかかるデジタルカメラ1においては、連写撮影を実施する際に、撮影後であって、動画ファイルの生成前においても、生成すべき動画ファイルおよび静止画ファイルの容量も考慮して残容量表示を行うために、動画ファイルおよび静止画ファイルの記録後の撮影可能限界を素早く把握することができるとともに、静止画ファイルおよび動画ファイルを生成するか否かを判断する際の指標とすることができ、また、撮影後の撮影結果の表示を静止画像で行うことによって、動画生成前に取得した画像データの取捨選択を実施することができるため、無駄な動画生成時間を低減することができ、さらに、取得した静止画像から解像度を下げて動画を生成することによって、動画生成時間を低減することができるため、次の撮影等を妨げることなく静止画像と動画とを同時に取得可能とすることができる。
【0115】
また、静止画ファイルにユーザーの入力によって音声情報などの付加情報を付加することによって、付加情報の付加によって生成後の画像ファイルの内容を容易に把握することができるため、静止画像と動画とを同時に取得した際に、取得した画像ファイルを容易に整理可能とすることができる。
【0116】
したがって、ここでは、デジタルカメラにおいて、静止画像と動画とを同時に取得することによって発生する種々の弊害を取り除くことができる。
【0117】
なお、本実施形態においてはアフタービュー表示中の編集の例として、撮影画像情報(画像ファイル)をメモリカード8に記録しないという選択や、音声情報の付加を示したが、その他、トリミング画変換や、テキスト入力などであっても構わない。
【0118】
<インターバル撮影>
<インターバル撮影前の各種設定>
図18は、インターバル撮影前に、インターバル撮影の撮影タイミングと撮影枚数を設定する設定画面を示す図であり、図18(a)は、撮影タイミングを設定する撮影間隔設定画面を示し、図18(b)は、撮影枚数を設定する撮影数設定画面を示している。なお、図18では、背面LCD10に表示される設定画面を示している。
【0119】
ここでは、切替えダイヤル14を操作することによって「撮影モード」とし、メニューボタン37を押下した後に、コントロールボタン35を種々操作することによって、図18(a)に示す撮影間隔設定画面が背面LCD10に表示される。そして、十字キーU、Dを押下することによって、1分、5分、10分、30分、60分のうち所望の撮影間隔を撮影間隔表示エリアE1に表示させ、実行ボタン32を押下することによって、所望の撮影間隔を設定することができる。また、後程詳述するが、インターバル撮影中に、新規な静止画像が取得されるごとに新規な静止画像に基づいて動画ファイルを更新するような構成となっており、新規な静止画像に基づいて動画ファイルを更新するために要する時間よりも、各静止画像を取得する時間間隔の方が長くなっている。つまり、ここでは、動画ファイルの更新に要する時間は1分以内であり、動画ファイルを更新するための処理が、連続撮影の動作の妨げとならないため、連続撮影前に予め設定された時間間隔で正確に静止画像を連続して撮影することができる。
【0120】
また、撮影間隔を設定する場合と同様に、切替えダイヤル14を操作することによって「撮影モード」とし、メニューボタン37を押下した後に、コントロールボタン35を種々操作することによって、図18(b)に示す撮影数設定画面が背面LCD10に表示される。そして、十字キーU、Dを押下することによって、2枚〜99枚のうち所望の撮影枚数を枚数表示エリアE2に表示させ、実行ボタン32を押下することによって、所望の撮影枚数を設定することができる。
【0121】
したがって、ここでは、例えば、撮影間隔を1分と設定し、撮影枚数を40枚と設定すると、1分間隔で40枚の撮影を行うインターバル撮影が行われることとなる。
【0122】
インターバル撮影は、図18で示した設定画面における設定に基づいて自動的に撮影を行うが、以下の動作フローの説明では、説明を簡単にするためにインターバル撮影によって得られた静止画像に基づいて動画ファイルを生成し、アフタービューを表示するように設定されている場合のデジタルカメラ1の動作について以下説明する。
【0123】
<インターバル撮影のフロー>
図19から図21は、デジタルカメラ1のインターバル撮影の動作を示すフローチャートである。
【0124】
切替えダイヤル14を操作することによって「撮影モード」とし、ファンクションダイヤル15を回転させて、ドライブモードを選択し、ファンクションボタン16を押下して押下状態を維持したままダイヤル17を回転させることによって、撮影方法を「インターバル撮影」に設定し、全体制御部211が画像メモリ209の容量に1枚以上の静止画像を記憶するだけの空き容量があると判断した場合にステップS31へ進む。
【0125】
ステップS31では、シャッターボタン9が半押しされてS1状態となったか否かについて全体制御部211が判断を行う。具体的には、S1状態となったと判断するとステップS32へ進み、S1状態となっていないと判断するとフローチャートの最初に戻り、再びステップS31の判断動作を行うこととなる。
【0126】
ステップS32では、自動露出制御(AE)、オートフォーカス(AF)、自動ホワイトバランス調整(AWB)を実施し、ステップS33へ進む。なお、AE、AF、AWBについては、全体制御部211の制御の下で実施し、その機能については簡単に上述したとおりで、動作については一般的なデジタルカメラと同様な動作となるため、ここでは、説明を省略する。
【0127】
ステップS33では、シャッターボタン9が押し込まれてS2状態となったか否かについて全体制御部211が判断を行う。具体的には、S2状態となったと判断するとステップS34へ進み、S2状態となっていないと判断するとステップS31へ戻る。
【0128】
ステップS34では、全体制御部211が1回目の撮影動作を開始することを意味するカウント行い、ステップS35へ進む。なお、このカウントによって得られた情報は、後述するステップS65において予め設定された撮影枚数に達しているか否かを判断する際に使用される。
【0129】
ステップS35では、被写体の撮像を行う。つまり、CCD303が、撮影レンズ30により結像された被写体の光像を画像信号として出力することにより、1280×960画素数の画像信号を取得し、ステップS36へ進む。
【0130】
ステップS36では、インターバル撮影の撮影間隔を調節するためのタイマーをスタートし、ステップS37へ進む。具体的には、撮像を行ったことを示す信号を全体制御部211がリアルタイムクロック260に送信することによって、リアルタイムクロック内で撮影間隔を調節するためのタイマーをスタートさせる。
【0131】
ステップS37では、ステップS35において取得した画像信号に対してフィルタ処理、各種補正(補間)、画像サイズ変換等の画像処理を実施する。具体的には、信号処理回路313において、ステップS35において取得した画像信号(アナログ信号)に対してCDS回路によるノイズ低減処理、AGC回路でゲインを調整することにより画像信号のレベル調整を行なう。その後、A/D変換器205においてデジタル信号に変換し、WB回路207においてR,G,Bの各色成分の画素データのレベルを変換し、γ補正回路208において画素データの階調を補正し、色変換・色補正回路231において色補正を行う。そして、解像度変換部232において必要に応じて画像サイズの変換を行い、ステップS38へ進む。
【0132】
ステップS38では、ステップS37で得られた画像データに基づいて全体制御部211においてサムネイル画像を生成し、背面LCD10にアフタービューを表示し、ステップS8へ進む。なお、ここでは、アフタービューを表示するように設定されている場合を例に挙げて説明しているが、これに限られるものではなく、アフタービュー表示をしないように設定され、ステップS38においてアフタービューを表示しないようにしたものであっても良い。
【0133】
ステップS39では、ステップS37で得られた画像データに対して圧縮・伸張部236で圧縮処理を行い、ステップS40へ進む。
【0134】
ステップS40では、ステップS38およびステップS39で得られたサムネイル画像および圧縮処理された静止画像を画像メモリ209に一時的に記憶し、ステップS41へ進む。
【0135】
ステップS41では、ステップS40において画像メモリ209に一時的に記憶したサムネイル画像および静止画像から全体制御部211の制御の下で、1個目の静止画ファイルを生成してメモリカード8に記録して、ステップS42へ進む。
【0136】
ステップS42では、全体制御部211の制御のもとで解像度変換部232において画像メモリ209に一時的に記憶されている静止画データ(画素数1280×960)の解像度を一旦画素数640×480に下げ、全体制御部211で解像度を下げた静止画データに基づいて動画データ(画素数640×480)を生成し、動画ファイルとしてメモリカード8に記録し、ステップS43へ進む。ここでは、1コマの静止画像から1フレームの動画データを生成する。なお、ステップS42においては、一連のインターバル撮影では1コマしか静止画像を得ていない状況なので、ステップS42において生成される動画ファイルは1フレームの動画データのみから構成される。
【0137】
ステップS43では、画像メモリ209内のすべての画像データを削除し、ステップS44へ進む。つまり、次の撮影の準備のために画像メモリ209内に十分な空き容量をつくるために、画像メモリ209内のすべての画像データを削除する。
【0138】
ステップS44では、メモリカード8内に、次の撮影によって得られる静止画像に基づいて生成される静止画ファイルおよび動画ファイルを記録するための残容量が足りないか否かを判断する。具体的には、メモリカード内8の残容量を全体制御部211が読み出し、次の撮影で得られる静止画像とサムネイル画像と動画像の解像度は、撮影前に設定されているため、その解像度から全体制御部211が次の撮影で得られる静止画像に基づいて生成される静止画ファイルおよび動画ファイルの容量を算出して、メモリカード内8の残容量と、算出した静止画ファイルおよび動画ファイルの容量とから、メモリカード8内に、次の撮影によって得られる静止画像に基づいて生成される静止画ファイルおよび動画ファイルを記録するための残容量が足りないか否かを判断する。そして、ここでは、残容量が足りないと判断するとインターバル撮影を終了し、残容量が足りていると判断すると図20のステップS51へ進む。
【0139】
ステップS51では、全体制御部211が一連のインターバル撮影においてN回目の撮影動作を開始することを意味するカウントを行い、ステップS52へ進む。具体的には、ステップS51の処理を初めて行う際には、前回のカウントがステップS34においてされたN=1であるため、ステップS51では、これに1を加算したN=2回目の撮影動作を開始することを意味するカウントを行う。また、前回のカウントがN回目であったとすると、ステップS51では、これに1を加算したN+1回目の撮影動作を開始することを意味するカウントを行う。
【0140】
ステップS52では、全体制御部211および電力制御部281の制御の下、デジタルカメラ1の各機能のうちリアルタイムクロック260を除くほとんどの機能に対する電力の供給を停止した状態となる省電力モードとし、ステップS53へ進む。
【0141】
ステップS53では、一連のインターバル撮影における次回の撮影動作の準備を開始するための設定時間jを経過しているか否かの判断を行う。具体的には、ステップS36においてリアルタイムクロック260内で次回の撮影動作の準備を開始するための設定時間jまでのカウントダウンを行うタイマーがスタートし、設定時間jを経過するとリアルタイムクロック260が電力制御部281に対して信号を送って、ステップS54へ進み、設定時間jを経過するまではステップS53の判断を繰り返す。したがって、ここでは、設定時間jが経過したか否かの判断は、リアルタイムクロック260のタイマー機能が判断していることとなる。
【0142】
ステップS54では、ステップS53において、設定時間jを経過すると送られてくるリアルタイムクロック260からの信号を電力制御部281が受けて、デジタルカメラ1全体の各部に電力の供給を再開してデジタルカメラ1は省電力モードから復帰し、ステップS55へ進む。
【0143】
ステップS55では、N回目の撮影を実施するため、次の撮像の準備のために、ステップS32と同様にAE、AF、AWBを実施し、ステップS56へ進む。
【0144】
ステップS56では、N回目の被写体の撮像を行い、ステップS57へ進む。具体的な動作についてはステップS35と同様となる。
【0145】
ステップS57では、インターバル撮影の撮影間隔を調節するためのタイマーをスタートし、ステップS58へ進む。具体的な動作は、ステップS36と同様であり、リアルタイムクロック260内で次回の撮影動作までの撮影間隔を調節するためのタイマーをスタートさせる。
【0146】
ステップS58では、ステップS56において取得した画像信号に対してフィルタ処理、各種補正(補間)、画像サイズ変換等の画像処理を実施して、ステップS59へ進む。ここでの具体的な動作は、ステップS37と同様となる。
【0147】
ステップS59では、ステップS56で得られた画像データに基づいて全体制御部211においてサムネイル画像を生成し、背面LCD10にアフタービューを表示し、ステップS60へ進む。なお、ここでも、ステップS38と同様にアフタービュー表示をしないように設定され、ステップS38においてアフタービューを表示しないようにしたものであっても良い。
【0148】
ステップS60では、ステップS56で得られた画像データに対して圧縮・伸張部236で圧縮処理を行い、ステップS61へ進む。
【0149】
ステップS61では、ステップS59およびステップS60で得られたサムネイル画像および圧縮処理された静止画像を画像メモリ209に一時的に記憶し、ステップS62へ進む。
【0150】
ステップS62では、ステップS61において画像メモリ209に一時的に記憶したサムネイル画像および静止画像から全体制御部211の制御の下で、N個目の静止画ファイルを生成してメモリカード8に記録する。
【0151】
ステップS63では、ステップS42と同様に画像メモリ209に一時的に記憶されている静止画像データ(画素数1280×960)から動画データ(画素数640×480)を生成して、全体制御部211の制御のもとで、これまでの一連のインターバル撮影によって得られている動画ファイル1に、ここで新たに生成した動画データを追加して動画ファイル1を更新し、図21のステップS64へ進む。つまり、ここでは、予め設定されたタイミングで複数回撮影する連続撮影によって静止画像を取得し、取得された静止画像に基づいて静止画ファイルおよび動画ファイルを生成し、連続した撮影中に新規な静止画ファイルを生成した後に、新規な静止画像に基づいて動画ファイルを更新する。
【0152】
図22は、動画ファイルを更新する際のメモリカード8内に記録されている画像ファイルについて説明するための模式図である。図22(a)は、一連のインターバル撮影においてN回の撮影によってN個の静止画ファイルと、静止画ファイル1〜静止画ファイルN内の静止画像に基づいて生成された動画データである画像データ1〜画像データNから構成される動画ファイル1が記録されている様子を示している。そして、ここで、新たにN+1回目の撮影が行われると図22(b)に示すように、メモリカード8には静止画ファイルN+1が新たに追加記録され、N+1回目の撮影によって得られた静止画データから動画データである画像データN+1を生成して動画ファイル1に追加し、メモリカード8内の動画ファイル1を更新記録する。
【0153】
また、ステップS42およびステップS63の動画ファイルの生成および更新処理といった動画ファイルの生成に関する処理は、インターバル撮影の画像を取得するタイミングを避けて行うように、全体制御部211によって制御されている。
【0154】
ステップS64では、画像メモリ209内のすべての画像データを削除し、ステップS65へ進む。ここでは、ステップS43と同様に、次の撮影の準備のために画像メモリ209内に十分な空き容量をつくるために、画像メモリ209内のすべての画像データを削除する。
【0155】
ステップS65では、次回の撮影があるか否かについて全体制御部211が判断を行う。ここでは、インターバル撮影前に図18の撮影数設定画面においてユーザーによって設定された撮影枚数と、ステップS51においてカウントされた撮影回数とが同じ値になっていれば、次回の撮影はないため、ステップS67へ進み、設定された撮影枚数と、ステップS51においてカウントされた撮影回数とが同じ値になっていなければ、次回の撮影があるため、ステップS66へ進む。
【0156】
ステップS66では、ステップS44と同様に、メモリカード8内に、次回の撮影によって得られる静止画ファイルおよび動画ファイルを記録するための残容量が足りないか否かを判断し、メモリカード8内の残容量が足りないと判断するとステップS67へ進み、残容量が足りていると判断するとステップS51へ戻る。
【0157】
ステップS67では、インターバル撮影を終了する旨の終了表示が背面LCD10に表示されてインターバル撮影を終了する。そして、インターバル撮影が終了すると、全体制御部211および電力制御部281の制御の下、デジタルカメラ1の各部への電力の供給が停止し、デジタルカメラ1は電源オフ状態となる。
【0158】
以上、本発明にかかるデジタルカメラ1においては、インターバル撮影における所定のタイミングで複数回撮影する連続撮影中に、新規な静止画像を取得するごとに、新規な静止画像に基づいて動画ファイルを更新記録するような構成とすることによって、インターバル撮影中に連続した撮影を中断しても、撮影を中断した時点まで撮影した静止画像に基づいた動画ファイルが記録されているため、連続撮影中断後に、改めて動画ファイルを生成する必要性がなく、すぐに次の撮影等を行うことができる。
【0159】
また、連続撮影期間において、静止画ファイルおよび動画ファイルを生成し、連続撮影における画像を取得するタイミングを避けて、画像を取得するタイミングの合間に、動画ファイルの生成および更新といった動画ファイル生成に関する処理を行うことによって、画像を取得するタイミング以外の時間を有効利用して動画ファイルに関するデータ処理を行うため、動画ファイルに関するデータ処理が連続撮影および新規撮影における画像の取得を妨げず、撮影したいタイミングで撮影を実施することができる。
【0160】
したがって、静止画像と動画とを同時に取得することによって発生する種々の弊害を取り除くことができる。
【0161】
<変形例>
以上、この発明の実施形態について説明したが、この発明は上記説明した内容のものに限定されるものではない。
【0162】
例えば、以上に示した実施形態では、図8に示したように、動画ファイルに音声データを含まないが、これに限られるものではなく、動画ファイルに音声データを含むようなものであっても良い。図23は、動画ファイルに音声データを含む場合の動画ファイル内の記録内容を説明する図であり、例えば、図示するように1つの動画ファイル1は、静止画ファイル1〜静止画ファイル99に係る静止画像から生成されて、画像データ1〜画像データ99の99フレームの画像データから構成され、また、それぞれの画像データに対する音声データが記録されて、フレーム1は音声データ1と画像データ1、フレーム2は音声データ2と画像データ2、・・・、フレーム99は音声データ99と画像データ99とから構成されるといったようにしたものでも良い。
【0163】
また、以上に示した実施形態では、静止画ファイルに付加される付加情報が音声情報であったが、これに限られるものではなく、文字情報や画像情報などを付加情報として付加するものであっても良い。
【0164】
また、以上に示した実施形態では、静止画ファイルにのみ付加情報を付加していたが、これに限られるものではなく動画ファイルに文字情報や画像情報などを付加情報として付加するものであっても良い。このように、動画ファイルにユーザーの入力による付加情報を付加するような構成とすることによって、付加情報の付加によって生成後の動画ファイルの内容を容易に把握可能な状態とすることができる。さらに、静止画ファイルおよび動画ファイルの双方に付加情報を付加しても良い。
【0165】
また、以上に示した実施形態では、静止画ファイルおよび動画ファイルがメモリカード8内に直接記録されていたが、これに限られるものではなく、当該デジタルカメラ1の電源を入れ直して撮影動作を開始するごとに、メモリカード8内に新規なフォルダを生成し、そのフォルダ内に静止画ファイルおよび動画ファイルを記録するようなものであっても良い。
【0166】
また、以上に示した実施形態では、連写撮影後に一時的に画像メモリ209に記憶された画像データを削除する際には、すべての画像データを削除していたが、これに限られるものではなく、画像メモリ209内に一時的に記憶されている画像データを1コマずつ削除するようなものであっても良い。
【0167】
また、以上に示した実施形態では、連続撮影後に画像メモリ209に一時的に画像データを記憶していたが、これに限られるものではなく、メモリカード8などの記録媒体に一時的に記録するようなものであっても良い。
【0168】
また、以上に示した実施形態では、一連の連写撮影後に、メモリカード8内の残容量を算出して表示していたが、これに限られるものではなく、一連の連写撮影の途中で、複数の撮影毎に、メモリカード8内の残容量を算出して表示するようなものであっても良い。
【0169】
また、以上に示した実施形態では、インターバル撮影の画像取得タイミングの合間で、動画ファイルの生成および更新を行っているが、これに限られるものではなく、インターバル撮影における全ての画像取得が終わった後で、インターバル撮影期間内(例えば、電源オフとなる前)に動画ファイルの生成や更新を行うようなものであっても良い。
【0170】
なお、上述した具体的実施形態には以下の構成を有する発明が含まれている。
【0171】
(1) 請求項1に記載のデジタルカメラにおいて、前記表示制御手段が、複数の静止画像の取得後に前記の表示制御を行うことを特徴とするデジタルカメラ。
【0172】
(1)の発明によれば、生成すべき静止画ファイルと動画ファイルの容量分も考慮した記録媒体の残容量の算出の回数を減じることによって、算出に要する負担を低減することができるため、その分だけ撮影に要する処理能力を向上させることができ、連写速度の向上を図ることができる。また、表示を短時間の間に激しく変化させることがないため、表示を見やすくすることができる。
【0173】
(2) 請求項2に記載のデジタルカメラにおいて、前記編集手段による編集内容が前記静止画像の組に含まれる少なくとも一つの静止画像の削除指示である場合には、前記ファイル生成手段は、前記削除指示された静止画像に基づいて前記静止画ファイルと前記動画ファイルとのいずれをも生成しないことを特徴とするデジタルカメラ。
【0174】
(2)の発明によれば、静止画ファイルおよび動画ファイルのいずれも生成しないことを同時に選択できるため、操作効率を向上させることができる。
【0175】
(3) 請求項2に記載のデジタルカメラにおいて、前記編集手段による編集内容が撮影後の音声情報の付加である場合には、前記ファイル生成手段は、前記音声情報を前記静止画ファイルにのみ関連づけることを特徴とするデジタルカメラ。
【0176】
(3)の発明によれば、付加情報としての音声情報を静止画ファイルにのみ付加することによって、動画ファイルに、付加情報としての音声情報が付加されることにより生じる、あたかも動画像に同期して記録された音声データと錯覚してしまうというユーザーの予期せぬ混乱を防止することができる。
【0177】
(4) 連続撮影した第1の静止画像の組に基づいて動画ファイルを生成可能なデジタルカメラにおいて、前記第1の静止画像の組の解像度を下げることにより、第2の静止画像の組を生成可能な解像度変換手段と、前記第1の静止画像の組に基づいて静止画ファイルを生成するとともに、前記第2の静止画像の組に基づいて動画ファイルを生成可能なファイル生成手段と、前記静止画ファイルと前記動画ファイルとを記録媒体に記録させる手段と、を備えることを特徴とするデジタルカメラ。
【0178】
(4)の発明によれば、連続撮影した静止画像(第1の静止画像の組)の解像度を下げた第2の静止画像の組から動画ファイルを生成して記録させることによって、動画ファイルの生成時および記録後の再生時の処理に要する負荷を低減することができるため、処理時間の短縮を図ることができる。
【0179】
(5) 請求項4に記載のデジタルカメラにおいて、前記連続撮影の各撮影間の時間間隔が、前記ファイル更新手段において前記新規な静止画像に基づいて前記動画ファイルを更新するために要する時間よりも長いことを特徴とするデジタルカメラ。
【0180】
(5)の発明によれば、連続撮影中に、取得した新規な静止画像に基づいて動画ファイルを更新するために要する時間よりも、各静止画像を取得する時間間隔の方が長くなるようにすることによって、動画ファイルを更新するための処理が、連続撮影の撮影動作を妨げないようにすることができるため、連続撮影前に予め設定された時間間隔で正確に連続撮影することができる。
【0181】
【発明の効果】
以上説明したように、請求項1の発明によれば、静止画像を撮影した後であって、動画ファイルを生成する前に、生成すべき静止画ファイルおよび動画ファイルの容量分も考慮して、記録媒体の残容量に基づいた表示をするため、ユーザーは、記録限界を正確に把握することができる。
【0183】
また、請求項3の発明によれば、撮影モード下で表示される撮影結果として静止画像を表示することによって、動画像を生成する前に撮影結果を素早く確認することができる。したがって、必要な動画ファイルのみを生成することができる。
【0184】
また、請求項4の発明によれば、連続撮影中に、新規な静止画像を取得するごとに、新規な静止画像に基づいて動画ファイルを更新記録することによって、連続撮影の途中で撮影を中断しても、撮影を中断した時点まで撮影した静止画像に基づいた動画ファイルが記録されているため、連続撮影中断後に、改めて動画ファイルを生成する必要性がなく、すぐに次の撮影等の動作を行うことができる。
【0185】
また、請求項5の発明によれば、連続撮影期間において、静止画ファイルおよび動画ファイルを生成し、連続撮影における画像取得タイミングを避けて、動画ファイル生成に関する処理を行うことによって、画像を取得するタイミング以外の時間を有効利用して動画ファイルに関するデータ処理を行うため、動画ファイルに関するデータ処理が連続撮影および新規撮影における画像の取得を妨げず、撮影したいタイミングで撮影を実施することができる。
【図面の簡単な説明】
【図1】本発明の実施形態に係るデジタルカメラの要部構成を示す正面図である。
【図2】図1に示すデジタルカメラの要部構成を示す上面図である。
【図3】図1に示すデジタルカメラの要部構成を示す背面図である。
【図4】本発明の実施形態に係るデジタルカメラの機能ブロック図である。
【図5】静止画ファイル名および動画ファイル名について説明する図である。
【図6】静止画ファイル名および動画ファイル名について説明する図である。
【図7】静止画ファイル内の記録内容を説明する図である。
【図8】動画ファイル内の記録内容を説明する図である。
【図9】音声ファイルと撮影結果との関連づけについて示した模式図である。
【図10】動画設定画面を示す模式図である。
【図11】アフタービュー設定画面を示す模式図である。
【図12】連写撮影の動作を示すフローチャートである。
【図13】連写撮影の動作を示すフローチャートである。
【図14】連写撮影の動作を示すフローチャートである。
【図15】連写撮影中のメモリカードの残容量に基づいた表示を示した図である。
【図16】画像データを削除するか否かを選択指示する画面を示す図である。
【図17】画像ファイルの生成とメモリカードへの記録を説明する図である。
【図18】インターバル撮影の撮影タイミングと撮影枚数を設定する設定画面を示す図である。
【図19】インターバル撮影の動作を示すフローチャートである。
【図20】インターバル撮影の動作を示すフローチャートである。
【図21】インターバル撮影の動作を示すフローチャートである。
【図22】動画ファイルの更新について説明するための模式図である。
【図23】動画ファイルに音声データを含む場合を説明するための図である。
【符号の説明】
1 デジタルカメラ
3 撮像部
8 メモリカード
10 背面LCD
20 EVF
35 コントロールボタン
36 データパネル
38 クイックビューボタン
209 画像メモリ
211 全体制御部
232 解像度変換部
236 圧縮・伸張部
260 リアルタイムクロック
281 電力制御部
M マイク
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a technique for generating a still image file and a moving image file based on still images taken continuously by a digital camera.
[0002]
[Prior art]
Conventionally, it is known that still images and moving images can be taken with a digital camera. For example, in Japanese Patent Laid-Open Nos. 7-264530 and 2000-92437, a digital camera that generates a file of a moving image based on still images taken continuously is shown, but either a still image or a moving image is shown. Only one of them can be recorded, and a moving image cannot be acquired for a scene where only a still image is taken.
[0003]
Japanese Laid-Open Patent Publication No. 2000-352759 discloses a digital camera that acquires a still image corresponding to a user operation for a specific scene during moving image shooting. If you miss a photo opportunity, you will be forced to make a compromise by selecting the best image from the low-resolution video.
[0004]
On the other hand, in order to obtain a still image and a moving image at the same time, it is only necessary to continuously shoot still images and generate a still image file and a moving image file based on the continuously captured still images.
[0005]
[Problems to be solved by the invention]
However, in this case, since a large amount of still image files and moving image files are generated, it takes a long time to generate these image files, etc., and various operations related to the shooting operation are hindered, and the user wants to shoot. This causes a problem that the photographing operation cannot be performed.
[0006]
In addition, since a large amount of image files are generated, there is a problem that it takes time to organize the acquired files, such as causing confusion when the user distinguishes the contents of the image files.
[0007]
As described above, the conventional digital camera has a problem in that various adverse effects are caused by simultaneously acquiring a still image and a moving image.
[0008]
The present invention has been made in view of the above problems, and a first object of the present invention is to provide a digital camera that eliminates various adverse effects caused by simultaneously acquiring still images and moving images.
[0009]
A second object of the present invention is to provide a digital camera that can simultaneously acquire a still image and a moving image without interfering with shooting by a user.
[0010]
A third object of the present invention is to provide a digital camera that can easily organize acquired image files when a still image and a moving image are acquired simultaneously.
[0011]
[Means for Solving the Problems]
In order to solve the above problems, the invention of claim 1 is a digital camera capable of generating a moving image file based on a set of continuously shot still images, and a recording means for recording an image file generated by shooting, The number-of-shootable number display means for converting the remaining capacity of the recording means into the number of shootable images and displaying, and at the time of the continuous shooting, each of the still image files is generated based on the continuously shot still images, and the still image A file generation unit that generates a moving image file based on the set, and a display control unit that displays the number of shootable images on the shootable number display unit in consideration of the capacity of the generated moving image file. It is characterized by.
[0012]
According to a second aspect of the present invention, there is provided a digital camera capable of generating a moving image file based on a set of continuously shot still images, and still images obtained by continuous shooting. Set of Temporary storage means for temporarily storing A set of still images stored in the temporary storage means A file generation means for generating a still image file and a video file based on Deletion instruction means for instructing deletion of at least one still image of a set of still images stored in the temporary storage means based on a user operation, and the file generation means includes the still image The still image that received the deletion instruction is not used to generate the still image file and the moving image file. It is characterized by that.
[0013]
Further, the invention of claim 3 is a temporary storage means for temporarily storing a set of still images obtained by continuous shooting in a digital camera capable of generating a moving image file based on a set of still images taken continuously. A file generation unit capable of generating a still image file and a moving image file based on the set of still images, and a still image display corresponding to at least one still image included in the set of still images in a shooting mode. As a result display means.
[0014]
According to a fourth aspect of the present invention, in a digital camera capable of generating a moving image file based on a set of continuously shot still images, a plurality of still images are acquired sequentially by continuous shooting at a predetermined timing. Means for generating a still image file and a moving image file based on the plurality of still images, and forming the moving image file after the file generation generates a new still image file during the continuous shooting. File update means for adding the new still image to the still image group and updating the moving image file.
[0015]
According to a fifth aspect of the present invention, in a digital camera capable of generating a moving image file based on a set of continuously shot still images, acquisition means for sequentially acquiring a plurality of still images by continuous shooting, and within a continuous shooting period File generating means capable of generating still image files and moving image files based on the plurality of still images, and control means for causing the file generating means to perform processing relating to the moving image file generation while avoiding image acquisition timing in the continuous shooting. It is characterized by providing.
[0016]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
[0017]
<Main components of digital camera>
1, 2, and 3 are views showing the main configuration of a digital camera 1 according to an embodiment of the present invention. FIG. 1 is a front view, FIG. 2 is a top view, and FIG. 3 is a rear view. . These figures are not necessarily in accordance with the triangulation method, and are mainly intended to conceptually illustrate the main configuration of the digital camera 1.
[0018]
As shown in FIG. 2, the digital camera 1 includes an imaging unit 3 including a macro function-equipped lens group (hereinafter also simply referred to as “lens”) 30 that is a photographing lens. In addition, the digital camera 1 has a zoom function, and the photographing magnification can be changed by rotating the zoom ring 33 or the like. Furthermore, the digital camera 1 includes a macro switching lever 34, and can switch between macro photography and normal photography. A shutter button 9 is provided on the upper surface of the digital camera 1.
[0019]
On the top surface of the digital camera 1, a mode switching dial 14 that switches between “shooting mode”, “playback mode”, and “communication mode” is provided. The shooting mode is a mode for taking a picture, and the playback mode is a mode for playing back and displaying the shot image data recorded on the memory card 8 on the rear LCD 10. The communication mode is a mode in which data is transferred to an external personal computer 225 or the like via a USB terminal 226 provided on the side surface of the digital camera 1. In addition, a data panel 36 is further provided on the upper surface of the digital camera 1, and various mode setting statuses and the like are displayed on the data panel 36.
[0020]
Further, a dial 17 for changing various settings is provided on the upper surface of the digital camera 1.
[0021]
In addition, on the upper side of the side of the digital camera 1, the shooting conditions and shooting method of “image size”, “image quality”, “exposure mode”, “drive mode”, “white balance”, and “shooting sensitivity” (six items) are displayed. A function dial 15 and a function button 16 for setting and changing are provided. In the shooting mode, the function dial 15 is rotated to select one of the six items, and the function button 16 is pressed. The shooting condition or shooting method of the item selected by the button can be set or changed. Then, by rotating the dial 17 described above while maintaining the pressed state of the function button 16, the shooting condition or the shooting method of the selected item can be set or changed. Specifically, when the drive mode is selected, continuous shooting methods such as “continuous shooting” and “interval shooting” described later can be set.
[0022]
As shown in FIG. 3, a liquid crystal display (rear LCD) 10 and an electronic viewfinder (EVF) 20 for live view display of recorded images, reproduction display of recorded images, and the like are disposed on the left side of the back of the digital camera 1. Is provided. The rear LCD 10 and EVF 20 display images in color.
[0023]
A control button 35 including cursor buttons (cross keys) U, D, L, R, and an execution button 32 is provided on the right side of the back of the digital camera 1, and various operations are performed using the control button 35. Is called. A menu button 37 is provided on the back of the digital camera 1. When this menu button 37 is pressed, various menus are displayed on the rear LCD 10.
[0024]
A quick view button 38 is provided on the back of the digital camera 1. When the quick view button 38 is pressed after shooting in the shooting mode, the latest shooting result (still image) is displayed on the rear LCD 10 or the EVF 20 (quick view display). Furthermore, the selected image can be deleted from the state by operating the control button 35 and pressing the quick view button 38. Similarly, when the after view is displayed on the rear LCD 10 or the EVF 20 after shooting, the selected image can be deleted by operating the control button 35 and pressing the quick view button 38. The deletion of this image will be described later.
[0025]
In addition, a recording button 39 for making a voice input state is provided at the lower right rear of the digital camera 1. After shooting, when the recording button 39 is pressed while the quick view or the after view is displayed on the rear LCD 10 or the EVF 20, sound is input from the microphone M provided at the upper front of the digital camera 1, and the rear LCD 10 or Audio is associated with the image displayed on the EVF 20 and recorded on the memory card 8.
[0026]
A display switching lever 31 and a video output terminal 222 are provided on the back of the digital camera 1. The display switching lever 31 is a lever for switching between the display on the rear LCD 10 and the display on the EVF 20. The video output terminal 222 is a terminal for connecting to the external monitor 223 via a communication line.
[0027]
A memory slot 81 into which a memory card 8 can be inserted and mounted is provided on the side surface of the digital camera 1.
[0028]
In addition, the digital camera 1 is configured to display the AF cursor AK together with the live view image on the rear LCD 10 when the shooting mode is selected with the mode switching dial 14. The AF cursor AK can be moved up, down, left and right in the rear LCD 10 by operating the cross keys U, D, L, and R. Then, AF processing (detailed later) can be performed for the AF area set around the AF cursor AK.
[0029]
<Functional block of digital camera 1>
FIG. 4 is a functional block diagram of the digital camera 1. In the figure, a CCD 303 has 1280 × 960 pixels, and an optical image of a subject formed by the lens group 30 is converted into image signals (R (red), G (green), and B (blue) color components). Photoelectrically converted into a signal consisting of a signal sequence of pixel signals received by each pixel and output. The timing generator 314 generates various timing pulses for controlling the driving of the CCD 303.
[0030]
The exposure control in the imaging unit 3 is performed by adjusting the aperture of the lens group 30 by the lens driving unit 306 and the exposure amount of the CCD 303, that is, the charge accumulation time of the CCD 303 corresponding to the shutter speed. Here, if the appropriate shutter speed cannot be set when the subject brightness is low, the improper exposure due to insufficient exposure is corrected by adjusting the level of the image signal output from the CCD 303. That is, when the brightness is low, exposure control is performed by combining the aperture, shutter speed, and gain adjustment of the signal processing circuit 313.
[0031]
The timing generator 314 generates a drive control signal for the CCD 303 based on a reference clock transmitted from the overall control unit 211. The timing generator 314 generates a clock signal such as a timing signal for integration start / end (exposure start / end) and a light reception signal read control signal (horizontal synchronization signal, vertical synchronization signal, transfer signal, etc.) of each pixel. , Output to the CCD 303.
[0032]
The signal processing circuit 313 performs predetermined analog signal processing on the image signal (analog signal) output from the CCD 303. The signal processing circuit 313 includes a CDS (correlated double sampling) circuit and an AGC (auto gain control) circuit, performs noise reduction processing of the image signal by the CDS circuit, and adjusts the gain by the AGC circuit. Adjust the signal level.
[0033]
The A / D converter 205 converts each pixel signal of the image signal into a 12-bit digital signal. The A / D converter 205 converts each pixel signal (analog signal) into a 12-bit digital signal based on the A / D conversion clock input from the timing generation circuit.
[0034]
A WB (white balance) circuit 207 performs level conversion of pixel data of R, G, and B color components. The WB circuit 207 uses the level conversion table stored in the overall control unit 211 to convert pixel data levels of R, G, and B color components. Note that the parameters (characteristic gradients) of each color component in the level conversion table are set for each captured image by the overall control unit 211, either automatically or manually. The γ correction circuit 208 corrects the gradation of pixel data.
[0035]
The color conversion / color correction circuit 231 converts the color space of the image data input from the γ correction circuit 208 into, for example, a YCrCb system and performs color correction to improve color reproducibility.
[0036]
The resolution conversion unit 232 generates image data (320 × 240 pixels) obtained by thinning image data acquired by the CCD 303 to ¼ at the time of live view shooting.
[0037]
The AF evaluation value calculation unit 233 performs an evaluation value calculation operation for performing contrast AF when the shutter button 9 is half-pressed (S1). Here, an evaluation value that is the sum of absolute values of differences regarding adjacent pixels is calculated for data corresponding to the AF area in the captured image data. Then, the lens group 30 is driven, and the lens position with the highest evaluation value is set as the in-focus position. Accordingly, since the lens group 30 is driven and focused on the AF area, it is possible to focus on the main subject. The digital camera 1 also has a shooting mode in which an in-focus position is not designated by the AF cursor AK and an AF area is set at the center of the screen of the rear LCD 10.
[0038]
The photometric calculation unit 234 can divide the image data output from the resolution conversion unit 232 into, for example, 300 (20 × 15) blocks and perform multi-division photometry for calculating photometric data for each block.
[0039]
The image memory 209 is a memory that temporarily stores image data (still image) obtained by the CCD 303 and subjected to the above-described image processing. The image memory 209 has a storage capacity for at least several frames. That is, the image memory 209 has at least a storage capacity corresponding to the number of frames of 1280 × 960 pixels corresponding to the number of pixels of the CCD 303, and each pixel data is stored in the corresponding pixel position.
[0040]
The EVF / rear LCD switching unit 235 performs display switching between the rear LCD 10 and the EVF 20 based on the setting of the display switching lever 31.
[0041]
In the shooting standby state of the digital camera 1, after each pixel signal of the image captured by the CCD 303 every 1/30 (seconds) is subjected to predetermined signal processing by the A / D converter 205 to the resolution conversion unit 232, The data is transferred to the EVF / LCD switching unit 235 via the overall control unit 211 and displayed on the rear LCD 10 or the EVF 20 (live view display). As a result, the user can visually recognize the subject image captured by the CCD 303. In the playback mode, the image read from the memory card 8 is subjected to predetermined signal processing by the overall control unit 211, then transferred to the EVF / LCD switching unit 235, and reproduced and displayed on the rear LCD 10 and the EVF 20. The
[0042]
The card I / F 212 is an interface for reading and writing image data and audio data to and from the memory card 8 that is a computer-readable recording medium mounted in the memory slot 81. In the reading / writing of the image data to / from the memory card 8, the compression / decompression unit 236 compresses / decompresses the image of the still image by the JPEG method, for example. Note that card information such as the recording capacity of the memory card 8 is stored in the card itself.
[0043]
The USB I / F 224 is a communication interface compliant with the USB standard for enabling communication with an external personal computer 225. A control program recorded on a recording medium such as a CD-ROM set in the memory card 8 or the personal computer 225 is taken into the ROM 211b of the overall control unit 211 via the card I / F 212 and the USB I / F 224. be able to.
[0044]
The operation unit 250 includes the above-described shutter button 9, display switching lever 31, function dial 15, function button 16, dial 17, control button 35, quick view button 38, recording button 39, and other various buttons and levers. Yes.
[0045]
The shutter button 9 is a two-stage switch that can detect a half-pressed state (S1) and a pressed-in state (S2) as used in a silver halide camera. When the shutter button 9 is set to the S1 state in the standby state, lens driving for AF is started, and the lens is driven and stopped so that the contrast becomes the highest while the AF evaluation value calculation unit 233 evaluates the contrast of the image. . On the other hand, when the shutter button 9 is set to the S2 state, the image data acquired by the CCD 303 and subjected to image processing is compressed by the compression / expansion unit 236 and the thumbnail image is generated by the overall control unit 211. The generated image data and thumbnail image data are generally stored in the image memory 209 and then converted into an image file and recorded in the memory card 8 via the card I / F 212.
[0046]
In addition, when after-view display or quick view display is performed after shooting in the shooting mode, a thumbnail image, which is a still image temporarily stored in the image memory 209, is displayed as an EVF / LCD switching unit 235 as a shooting result. And displayed on the rear LCD 10 and the EVF 20.
[0047]
Also, when performing continuous shooting, which is one of the continuous shooting, if the shutter button is set to the S2 state, continuous shooting is started at a timing of 7 frames per second, and when the S2 state of the shutter button is released, continuous shooting is started. Stop shooting. The still image acquired by the CCD 303 by continuous shooting and subjected to image processing is temporarily stored in the image memory 209, and the control button 35 is displayed while the rear view 10 or the EVF 20 is displaying the after view or the quick view. The still image temporarily stored in the image memory 209 can be deleted by the operation of and the pressing of the quick view button 38. That is, a still image file and a moving image file can be generated based on a still image that has not been deleted based on an editing result based on a user editing operation of deleting a still image temporarily stored in the image memory 209. . Note that “editing” as used herein refers to the selection of not deleting a part or all of a still image that has been continuously captured and temporarily stored, that is, not to record captured image information (such as an image file), or to be described later. This refers to adding additional information such as audio information to still images that are continuously shot and temporarily stored. The continuous shooting will be further described in detail in the operation of the digital camera 1.
[0048]
Further, when performing interval shooting, which is one of continuous shooting, if the shutter button is set to the S2 state, shooting is performed a plurality of times under the control of the overall control unit 211 in accordance with a timing preset by the user before shooting. When the continuous shooting is performed and an image having the number of frames set by the user is acquired, the interval shooting is ended. That is, here, image data (still image) acquired by the CCD 303 and subjected to image processing is acquired by shooting a plurality of times at a preset timing before interval shooting, and temporarily stored in the image memory 209. To do. In the present embodiment, the period from the start to the end of interval shooting and the period including the time during which power saving or power is turned off after acquiring all images are referred to as “interval shooting (continuous shooting) period”. And The interval shooting will be further described in detail in the operation of the digital camera 1.
[0049]
The microphone M inputs sound when the user presses the recording button 39 as necessary. The input audio is converted into analog audio data by the microphone M, sent to the overall control unit 211 via the operation unit 250, converted to digital audio data by the overall control unit 211, and then compressed by the compression / decompression unit 236. And recorded as an audio file in the memory card 8 via the card I / F 212. As a method for converting analog audio data into digital audio data, for example, a PCM (pulse code modulation) method or the like can be mentioned. As an audio file, for example, a WAV format or the like can be given, and as a compression / decompression method. For example, an ADPCM (Adaptive Differential Pulse Code Modulation) method can be used.
[0050]
The external monitor I / F 221 is an interface that converts image data transferred from the EVF / LCD switching unit 235 into, for example, the NTSC system, and transmits an image signal to the external monitor 223 via the video output terminal 222.
[0051]
The overall control unit 211 includes a microcomputer (CPU), a RAM 211a, and a ROM 211b, and organically controls the operation of each member of the above-described camera to comprehensively control the operation of the digital camera 1.
[0052]
The power source 280 is for supplying electric power to the entire digital camera 1 and includes, for example, a nickel metal hydride battery. The power source 280 supplies power to the entire digital camera 1 via the power control unit 281.
[0053]
The real time clock 260 is a circuit for managing time information, and is supplied with power by a power source different from the power source 280. The real-time clock 260 functions as a timer when performing interval shooting in which a plurality of still images are sequentially acquired at a predetermined timing determined in advance by the user, and the power control unit 281 comes before the predetermined timing. When the power is not supplied from the power source 280 to the entire digital camera 1, the power control unit 281 controls to supply power from the power source 280 to the entire digital camera 1. The real-time clock 260 also sends a signal to the general control unit 211 before the predetermined timing, and the general control unit 211 receives a supply of power from the power control unit 281 and performs a photographing operation at a predetermined timing. Therefore, the entire digital camera 1 is controlled.
[0054]
In addition, when generating a moving image from image data (still image) acquired in continuous shooting (continuous shooting or interval shooting) and temporarily stored in the image memory 209, the overall control unit 211 stores the image in the image memory 209. The resolution is reduced to the number of pixels of 640 × 480 by performing a thinning process on the temporarily stored still image from the number of pixels of 1280 × 960. Thereafter, a moving image is generated based on the still image with a reduced resolution, compressed by the compression / decompression unit 236, and a moving image file is generated and recorded in the memory card 8 via the card I / F 212. The moving image file includes, for example, an AVI file, and the compression / decompression method includes a Motion JPEG method.
[0055]
Further, the overall control unit 211 reads the remaining capacity, which is a capacity that can be recorded in the memory card 8, and sets the number of images that can be photographed on the data panel 36 provided on the upper surface of the digital camera 1 based on the resolution of image data to be photographed. indicate. In continuous shooting, after starting to acquire a set of still images, before generating the still image file and the moving image file, the overall control unit 211 considers the capacity of the generated moving image file, The remaining capacity that can be recorded in the memory card 8 after image file generation / recording is calculated, and the value is converted into the number of shootable images and displayed on the data panel 36. The display of the number of shootable images will be further described later.
[0056]
<Various files recorded on the memory card 8>
The image data acquired by photographing with the digital camera 1 and the audio data input from the microphone M are converted into an image file (still image file and moving image file) and an audio file, respectively, and recorded in the memory card 8. Hereinafter, image files (still image files and moving image files) and audio files recorded on the memory card 8 by the digital camera 1 according to the present invention will be described.
[0057]
<How to name the file>
FIG. 5A is a schematic diagram showing still image files and moving image files recorded in the memory card 8 based on image data captured by the digital camera 1 according to the embodiment of the present invention. For comparison, FIG. 5B shows an image file in a recording medium on which a moving image file generated by bringing a still image file acquired by a digital camera or the like into a computer or the like and a still image file are recorded. It is a schematic diagram.
[0058]
In FIG. 5B, the file names of the still image file 1, still image file 2,..., Still image file 99 are PIC00001. jpg, PIC00002. jpg,..., PIC00099. jpg and the file name is PIC00100. It is attached with AVI. The file names of the still image file 100, the still image file 101,. jpg, PIC00102. jpg,..., PIC00141. jpg and the file name is PIC00142. It is attached with AVI. Here, since the file names of the still image file and the moving image file are serial numbers, it is impossible to determine which still image file the moving image file is generated based on. For example, whether the moving image file 1 is generated based on the still image file 1 to the still image file 99 or whether the moving image file 1 is generated based on the still image file 51 to the still image file 99 is determined only by looking at the file name. Not stick.
[0059]
On the other hand, as shown in FIG. 5A, a still image file and a moving image file recorded in the memory card 8 based on image data photographed by the digital camera 1 according to the present invention. 1, still image file 2,..., Still image file 99 has a file name B0010001. jpg, B0010002. jpg, ..., B0010099. jpg and the file name is B0010100. It is attached with AVI. The file names of the still image file 100, the still image file 101,..., And the still image file 140 are B0020001. jpg, B0020002. jpg,..., B0020041. jpg and the file name is B0020042. It is attached with AVI.
[0060]
FIGS. 6A and 6B are diagrams illustrating file names of still image files and moving image files, respectively. As shown in FIGS. 6A and 6B, the second to fourth characters from the left in the file names of the still image file and the moving image file indicate “continuous shooting sequence numbers”, and from the left. The sixth to eighth characters indicate “file number”, and the first to third characters from the right indicate “extension”.
[0061]
The continuous shooting sequence number indicates a file obtained as a result of a series of continuous shooting. For example, the continuous shooting sequence number is assigned as 001, 002,. Is done. The file numbers are numbered in the order of files obtained as a result of a series of continuous shooting, for example, 001, 002,..., In the order of files obtained as a result of a series of continuous shooting. A number is assigned such as 100. As is well known, in FIG. 6A, the extension corresponding to the JPEG format of the still image file is added, and in FIG. 6B, the AVI corresponding to the AVI format of the moving image file is added. Yes.
[0062]
Accordingly, as shown in FIG. 5A, the moving image file 1 (B0010100.AVI) is generated based on the still images of the still image file 1 (B0010001.jpg) to the still image file 99 (B0010099.jpg). The video file 2 (B0020042.AVI) is converted into still images from the still image file 100 (B0020001.jpg) to the still image file 140 (B0010041.jpg). Based on the file name (mainly the continuous shooting sequence number), it can be determined that the file is generated based on this.
[0063]
In addition, when a single shooting that is not continuous shooting is performed, a conventional file name is assigned.
[0064]
<Recorded contents in image file>
FIG. 7 is a diagram for explaining the recorded contents in one still image file. As shown in the figure, one still image file is composed of tag information, high-resolution image data, and thumbnail image data.
[0065]
FIG. 8 is a diagram for explaining the recorded contents in one moving image file. For example, as illustrated, one moving image file 1 is generated from still images related to still image file 1 to still image file 99. Therefore, the image data is composed of 99 frames of image data 1 to 99 corresponding to the still image file 1 to the still image file 99.
[0066]
<Recording audio files>
FIG. 9 is a schematic diagram showing the association between the recorded audio file and the shooting result when voice information (voice memo) is attached to the shooting result after continuous shooting. For example, as shown in the figure, the audio file 1 is an audio file obtained as a result of attaching a voice memo when continuous shooting is performed to obtain the still image file 1 to the still image file 99, and the audio file 1 is related. In order to record in association with the still image file 1 to the still image file 99, the same continuous shooting sequence number and file number as the last still image file (still image file 99) continuously shot are attached, and the file of the audio file 1 The name is B0010099. It becomes WAV. Then, as shown in FIG. 9, the presence of the related voice memo and the file name of the related voice memo are described in the tag information which is the last still image file continuously shot. Specifically, the tag information of the still image file 99 is described as “With voice memo, B0010099.WAV”.
[0067]
<Operation of Digital Camera 1>
Hereinafter, operations related to continuous shooting (continuous shooting and interval shooting) among operations of the digital camera 1 will be described. The continuous shooting operation is automatically executed under the control of the overall control unit 211 based on various settings by the user and various operations on the operation unit 250. For operations other than continuous shooting, general operations of the digital camera are performed.
[0068]
<Various settings before continuous shooting>
FIG. 10 shows a moving image setting screen for setting whether to automatically generate a moving image file based on still images acquired by continuous shooting before continuous shooting. FIG. 10 shows a moving image setting screen displayed on the rear LCD 10. By operating the switching dial 14 to set the “shooting mode” and pressing the menu button 37 and then operating the control button 35 variously, the moving image setting screen shown in FIG. 10A is displayed on the rear LCD 10. Then, by pressing the cursor KS1 with the cross keys U and D and setting “Yes” or “No” for moving image generation, and pressing the execution button 32, the presence or absence of moving image generation can be set. Specifically, as shown in FIG. 10A, by moving the cursor KS1 to “Yes” for moving image generation and pressing the execute button 32, “Yes” for moving image generation is displayed as shown in FIG. "Is selected and set.
[0069]
FIG. 11 is a schematic diagram showing an after view setting screen for setting whether or not to display an after view (photographing result) on the rear LCD 10 or the EVF 20 after shooting. FIG. 11 shows an after-view setting screen displayed on the rear LCD 10. As in the operation for displaying the moving image setting screen, the “shooting mode” is set, and the menu button 37 is pressed, and then the control button 35 is operated variously to display the moving image setting screen shown in FIG. Then, the presence / absence and display time of the after view can be set by pressing the cursor KR with the cross keys U and D. Specifically, as shown in FIG. 11, the cursor KR is set to any one of “none”, “2 seconds”, and “10 seconds” and the execution button 32 is pressed. Either the view can be displayed for 2 seconds, or the after view after shooting can be displayed for 10 seconds.
[0070]
<Sequential shooting>
<Flow of continuous shooting>
12 to 14 are flowcharts showing the continuous shooting operation of the digital camera 1.
[0071]
By operating the switching dial 14, the “shooting mode” is set, the function dial 15 is rotated, the drive mode is selected, the function button 16 is pressed, and the dial 17 is rotated while the pressed state is maintained. When the method is set to “continuous shooting”, the process proceeds to step S1.
[0072]
In step S1, the overall control unit 211 determines whether or not the shutter button 9 is half-pressed to enter the S1 state. If it is determined that the S1 state is reached, the process proceeds to step S2, and if it is determined that the S1 state is not reached, the process returns to the beginning of the flowchart.
[0073]
In step S2, automatic exposure control (AE), autofocus (AF), and automatic white balance adjustment (AWB) are performed, and the process proceeds to step S3. Note that AE, AF, and AWB are performed under the control of the overall control unit 211, and the functions thereof are simply as described above, and the operations are similar to those of a general digital camera. Then, explanation is omitted.
[0074]
In step S3, the overall control unit 211 determines whether or not the shutter button 9 has been pressed to enter the S2 state. Specifically, if it is determined that the state is the S2 state, the process proceeds to step S4, and if it is determined that the state is not the S2 state, the process returns to step S1.
[0075]
In step S4, the overall control unit 211 determines whether or not the capacity of the image memory 209 is empty. Specifically, when there is a free space in the image memory 209 for one or more pieces of image data to be acquired, the process proceeds to step S5, and a free space for one or more pieces of image data to be acquired is stored in the image memory 209. If not, the process proceeds to step S12 in FIG.
[0076]
In step S5, the subject is imaged. That is, the CCD 303 outputs a light image of the subject imaged by the photographing lens 30 as an image signal, thereby obtaining an image signal of 1280 × 960 pixels, and the process proceeds to step S6. Here, in order to shorten the continuous shooting interval, the upper limit of the shutter speed may be limited to about 1/8 second.
[0077]
In step S6, image processing such as filter processing, various corrections (interpolation), and image size conversion is performed on the image signal acquired in step S5. Specifically, the signal processing circuit 313 performs noise reduction processing by the CDS circuit on the image signal (analog signal) acquired in step S5 and adjusts the level of the image signal by adjusting the gain by the AGC circuit. After that, the A / D converter 205 converts it into a digital signal, the WB circuit 207 converts the R, G, B pixel data levels, the γ correction circuit 208 corrects the gradation of the pixel data, The color conversion / color correction circuit 231 performs color correction. Then, the resolution conversion unit 232 performs image size conversion as necessary, and the process proceeds to step S7.
[0078]
In step S7, the overall control unit 211 generates a thumbnail image based on the image data obtained in step S6, and the process proceeds to step S8.
[0079]
In step S8, the compression / decompression unit 236 performs compression processing on the image data obtained in step S6, and the process proceeds to step S9.
[0080]
In step S9, the thumbnail image obtained in steps S7 and S8 and the compressed still image are temporarily stored in the image memory 209, and the process proceeds to step S10.
[0081]
In step S10, the overall control unit 211 determines whether or not the S2 state is continued. That is, if the S2 state is continued, the process proceeds to step S11 to continue the continuous shooting operation. If the S2 state is not continued, the continuous shooting operation is terminated, and the process proceeds to step S12.
[0082]
In step S11, in order to continue the continuous shooting operation, AE, AF, and AWB are performed in the same manner as in step S2 to prepare for the next imaging, and the process proceeds to step S4.
[0083]
In step S12, the overall control unit 211 stores in the image memory 209 the capacity necessary for recording a still image file to be generated from the image data (still image) stored in the image memory 209 obtained by continuous shooting. If it is set to generate a moving image from the processed image data (still image), the remaining capacity of the memory card 8 is calculated in consideration of the capacity required for recording the moving image file to be generated, and the value Is converted into the number of shootable images and displayed on the data panel 36. FIG. 14 shows a flowchart of the data processing flow in step S12. Hereinafter, the flow of data processing in step S12 will be described with reference to FIG.
[0084]
In step S141, the remaining capacity of the memory card 8 is confirmed. That is, the overall control unit 211 reads and confirms the remaining capacity of the memory card 8, and proceeds to step S142.
[0085]
In step S142, the number of image frames stored in the image memory 209 is confirmed. That is, it is confirmed how many still images are stored in the image memory 209 by continuous shooting, and the process proceeds to step S143.
[0086]
In step S143, it is determined whether or not the user has set generation of a moving image file. Here, if the setting for generating a moving image file has been made, the process proceeds to step S144, and if the setting for generating a moving image file has not been made, the process proceeds to step S145.
[0087]
In step S144, the still image stored in the image memory 209, the still image file to be generated based on the resolution of the moving image to be generated, and the capacity necessary for recording the moving image file are calculated, and the process proceeds to step S146.
[0088]
In step S145, the capacity required for recording the still image file to be generated based on the still image stored in the image memory 209 is calculated, and the process proceeds to step S146.
[0089]
In step S146, if the process proceeds from step S144, a difference between the remaining capacity of the memory card 8 read and confirmed in step S141 and the capacity of the image file calculated in step S144 is calculated, and image file generation / recording is performed. The remaining capacity in the subsequent memory card 8 is calculated, and the process proceeds to step S147. If the process has proceeded from step S145, the difference between the remaining capacity of the memory card 8 read and confirmed in step S141 and the capacity of the image file calculated in step S145 is calculated, and after the image file is generated and recorded. The remaining capacity in the memory card 8 is calculated, the value is converted into the number of shootable images, and the process proceeds to step S147.
[0090]
In step S147, display is performed on the data panel 36 based on the remaining capacity calculated in step S146, and the remaining capacity display process in step S12 is terminated.
[0091]
The calculation of the remaining capacity of the memory card 8 and the display of the number of shootable images in step S12 described above will be described below with a specific example.
[0092]
For example, when 100 still images having a resolution of 1280 × 960 pixels are shot continuously using a 16 MB memory card 8 just formatted, in order to record 100 still image files to be generated, The memory card 8 needs a capacity of about 8 MB. The capacity of a moving image (640 × 480 pixels) file generated from the 100 still images is about 1 MB. Therefore, in this case, the capacity of the image file calculated in step S144 is about 9 MB, and the capacity of the image file calculated in step S145 is about 8 MB. Further, in step S146, when the setting for generating the moving image file is made, the remaining capacity of the memory card 8 is calculated to be about 7 MB, and when the setting for generating the moving image file is not made, the memory card 8 is set. Is calculated to be about 8 MB. In step S147, the number of shootable images is displayed on the data panel 36 as 79 and 102, respectively, in accordance with the presence / absence of the setting for generating the moving image file.
[0093]
FIG. 15 is a diagram showing the data panel 36 that is displayed based on the remaining capacity of the memory card 8 during subsequent continuous shooting. As shown in FIG. 15, the number of frames 36b in which a still image can be taken is shown in the lower right of the data panel 36.
[0094]
Therefore, here, based on the remaining capacity in the memory card 8 in consideration of the capacity of the still image file and the moving image file to be generated after the still image is shot and before the moving image file is generated. Since the display is performed, the user can accurately grasp the recording limit on the memory card 8. Also, here, after acquiring a still image by a series of continuous shooting without calculating the remaining capacity each time a still image of one frame is acquired during continuous shooting, that is, after acquiring a plurality of still images By calculating the remaining capacity and reducing the number of remaining capacity calculations, the calculation burden can be reduced, so the processing capacity required for shooting can be improved by that amount, and the continuous shooting speed can be improved. Can be achieved. Further, since the display on the data panel 36 is not changed drastically in a short time, the display can be easily seen.
[0095]
Returning to FIG.
[0096]
In step S12, after the remaining capacity of the memory card 8 is displayed, the process proceeds to step S13.
[0097]
In step S <b> 13, the overall control unit 211 determines whether or not to display the after view according to the user setting before continuous shooting. Specifically, when the after view is displayed, the process proceeds to step S15, and when the after view is not displayed, the process proceeds to step S14.
[0098]
In step S14, the overall control unit 211 determines whether or not the quick view button 38 has been pressed. Specifically, when the quick view button 38 is pressed by the user, the process proceeds to step S15, and when the quick view button 38 is not pressed by the user, the process proceeds to step S21. In step S14, if the quick view button 38 is not pressed within 10 seconds from the time when the S2 state is released, the process automatically proceeds to step S22.
[0099]
In step S15, the thumbnail image is displayed on the rear LCD 10, and the process proceeds to step S16. Note that the thumbnail image displayed here is a thumbnail image corresponding to the last still image obtained in a series of continuous shooting, and in the case of after-view display, the display time of the after-view set before shooting is displayed. If no deletion operation is performed in step S16, the process proceeds to step S19.
[0100]
In step S <b> 16, the overall control unit 211 determines whether or not to delete the image data temporarily stored in the image memory 209. Specifically, when the user confirms the shooting result with the thumbnail image displayed on the rear LCD 10 and presses the quick view button 38 or the like while the thumbnail image is displayed on the rear LCD 10, the screen shown in FIG. The cursor KR2 is moved by various pressing operations of the control button 35 displayed on the LCD 10, and it is possible to select and instruct whether to delete the image data temporarily stored in the image memory 209. In other words, when the user instructs to delete the image data temporarily stored in the image memory 209, the process proceeds to step S17, and the user instructs to delete the image data temporarily stored in the image memory 209. If not, the process proceeds to step S19.
[0101]
In step S17, all the image data temporarily stored in the image memory 209 is deleted, and the process proceeds to step S18. That is, here, in step S16, the editing content based on the instructed user's selection operation is deletion of a set of image data (still images) temporarily stored in the image memory 209. Since all image data temporarily stored in 209 is deleted, a moving image file is not generated based on the deleted still image.
[0102]
Therefore, by displaying a still image (thumbnail image) on the rear LCD 10 as a shooting result displayed in the shooting mode after continuous shooting, it is possible to quickly check the shooting result before generating a moving image. Since only necessary still image files and moving image files can be selectively generated, the burden on the generation of the image file can be minimized. In addition, when the user instructs to delete the image data temporarily stored in the image memory 209 in step S16, all the image data temporarily stored in the image memory 209 is deleted. Since it can be simultaneously selected in the operation of step S16 that neither file nor moving image file is generated, the operation efficiency can be improved.
[0103]
Further, here, based on the editing result of deleting the image data (still image) temporarily stored in the image memory 209, the still image file and the moving image file are generated based only on the still image that has not been deleted. Since a still image file corresponding to the image data constituting the moving image file is always generated, the corresponding still image file and the moving image file are associated with each other as shown in FIG. Thus, the correspondence between the still image file and the moving image file can be clarified.
[0104]
In step S18, since no image file is generated based on the image data in the image memory 209, the remaining capacity display displayed on the data panel 36 is changed under the control of the overall control unit 211. Specifically, the display is based on the remaining capacity in the memory card 8 confirmed in step S141, and the process returns to step S1.
[0105]
In step S19, it is determined under the control of the overall control unit 211 whether or not the recording button 39 has been pressed. Specifically, when the user presses the record button 39 while the thumbnail image is displayed on the rear LCD 10, the process proceeds to step S20, and while the thumbnail image is displayed on the rear LCD 10, the user presses the record button. If 39 is not pressed, the process proceeds to step S22.
[0106]
In step S20, sound data is generated in the overall control unit 211 based on the sound input from the microphone M, temporarily stored in the RAM 211a, and the process proceeds to step S21.
[0107]
In step S21, the overall control unit 211 calculates a difference between the remaining capacity calculated in step S12 and the capacity when the audio data generated in step S20 is an audio file, and based on the calculated value. The remaining capacity display displayed on the data panel 36 is changed, and the process proceeds to step S22.
[0108]
In step S22, still image data and audio data are sequentially generated from the image data (still image) temporarily stored in the image memory 209 and the audio data temporarily stored in the RAM 211a to generate the memory card 8. And proceed to step S23.
[0109]
FIG. 17 shows a diagram for explaining how an image file is generated from the image data temporarily stored in the image memory 209 and recorded in the memory card 8. In step S22, as shown in FIG. Then, one still image file is generated from the captured image data and thumbnail image data for one frame in the image memory 209 and recorded in the memory card 8.
[0110]
Also, here, as illustrated in FIG. 9, the audio file is recorded in the memory card 8 in association with the last still image file of a series of continuous shooting, and the same file as the last still image file is included in the audio file. A number is assigned, and the tag information of the last still image file describes the presence of a related audio file (voice memo) and the file name of the audio file. That is, here, the edited content by the user's operation is addition of audio information after shooting, and the audio information is recorded in the memory card 8 in association with only the still image file.
[0111]
Therefore, since it is possible to edit a still image that adds additional information mainly for identification and explanation of image contents such as audio information to the generated still image file, it is possible to add a post-generation by adding additional information. The content of the still image file can be easily grasped. Also, by adding the audio information as additional information only to the still image file, the audio data recorded as if synchronized with the moving image is generated by adding the audio information as additional information to the moving image file. It can prevent the user's unexpected confusion of illusion. Further, in the digital camera 1 according to the present embodiment, only a still image file may be generated and a moving image file may not be generated. Therefore, a switching operation depending on a setting such as which image file is added with additional information. There is also an effect of preventing complexity.
[0112]
In step S <b> 23, the overall control unit 211 determines whether to generate a moving image file in accordance with the user settings set before shooting. Specifically, when the generation of the moving image file is set, the process proceeds to step S24, and when the generation of the moving image file is not set, the process returns to step S1.
[0113]
In step S24, the resolution of the still image data (number of pixels 1280 × 960) temporarily stored in the image memory 209 is set to the number of pixels 640 × 480 in the resolution conversion unit 232 under the control of the overall control unit 211. The moving image data (number of pixels 640 × 480) is generated based on the still image data whose resolution has been lowered by the overall control unit 211, recorded as a moving image file in the memory card 8, and the process returns to step S1. Here, as shown in FIG. 17, moving image data is generated based on N frames of image data (still image data) that has been continuously shot and temporarily stored in the image memory 209, and one moving image file is generated. Is generated. Therefore, for example, when 40 frames of image data are temporarily stored in the image memory 209 by continuous shooting, 40 frames of moving image data are generated based on the 40 frames of image data to generate a moving image file. To do. Also, here, by generating and recording a moving image file from the second still image set in which the resolution of the continuously shot still images (first still image set) is reduced, Since the load required for the processing at the time of reproduction after recording can be reduced, the processing time can be shortened.
[0114]
As described above, in the digital camera 1 according to the present invention, when continuous shooting is performed, the capacity of the moving image file and the still image file to be generated is taken into consideration even after the shooting and before the generation of the moving image file. In order to display the remaining capacity, it is possible to quickly grasp the shooting limit after recording a moving image file and a still image file, and as an index for determining whether to generate a still image file and a moving image file. In addition, by displaying the shooting result after shooting as a still image, it is possible to perform selection of image data acquired before moving image generation, thereby reducing useless moving image generation time. In addition, since the moving image generation time can be reduced by generating a moving image by reducing the resolution from the acquired still image, the next shooting or the like can be performed. Still images and moving at the same time can be obtainable without gel.
[0115]
Also, by adding additional information such as audio information to the still image file by user input, it is possible to easily grasp the contents of the generated image file by adding the additional information. When acquired simultaneously, the acquired image files can be easily organized.
[0116]
Therefore, here, in the digital camera, it is possible to eliminate various problems caused by simultaneously acquiring still images and moving images.
[0117]
In the present embodiment, as an example of editing during the after view display, the selection not to record captured image information (image file) in the memory card 8 and the addition of audio information are shown. Or text input.
[0118]
<Interval shooting>
<Various settings before interval shooting>
18 is a diagram showing a setting screen for setting the shooting timing and the number of shots for interval shooting before interval shooting. FIG. 18A shows a shooting interval setting screen for setting shooting timing, and FIG. b) shows a shooting number setting screen for setting the number of shots. FIG. 18 shows a setting screen displayed on the rear LCD 10.
[0119]
Here, the “shooting mode” is set by operating the switching dial 14, and after pressing the menu button 37, various operations are performed on the control button 35, whereby the shooting interval setting screen shown in FIG. 18A is displayed on the rear LCD 10. Is displayed. Then, by pressing the cross keys U and D, a desired shooting interval of 1 minute, 5 minutes, 10 minutes, 30 minutes, and 60 minutes is displayed in the shooting interval display area E1, and the execution button 32 is pressed. Thus, a desired shooting interval can be set. As will be described in detail later, during the interval shooting, each time a new still image is acquired, the video file is updated based on the new still image. The time interval for acquiring each still image is longer than the time required for updating the moving image file. That is, here, the time required for updating the moving image file is less than one minute, and the process for updating the moving image file does not hinder the operation of continuous shooting. Therefore, at a preset time interval before continuous shooting. Accurate still images can be taken continuously.
[0120]
Further, as in the case of setting the shooting interval, the “shooting mode” is set by operating the switching dial 14, and after pressing the menu button 37, various operations are performed on the control button 35, thereby FIG. A shooting number setting screen is displayed on the rear LCD 10. Then, by pressing the cross keys U and D, the desired number of shots is displayed in the number display area E2 from 2 to 99, and the desired number of shots is set by pressing the execution button 32. Can do.
[0121]
Therefore, here, for example, when the shooting interval is set to 1 minute and the number of shots is set to 40, interval shooting is performed in which 40 shots are taken at 1-minute intervals.
[0122]
Interval shooting automatically shoots based on the setting on the setting screen shown in FIG. 18, but in the following description of the operation flow, based on a still image obtained by interval shooting for the sake of simplicity. An operation of the digital camera 1 when a moving image file is generated and set to display after view will be described below.
[0123]
<Flow of interval shooting>
19 to 21 are flowcharts showing the interval shooting operation of the digital camera 1.
[0124]
By operating the switching dial 14, the “shooting mode” is set, the function dial 15 is rotated, the drive mode is selected, the function button 16 is pressed, and the dial 17 is rotated while the pressed state is maintained. If the method is set to “interval shooting” and the overall control unit 211 determines that there is enough free space in the image memory 209 to store one or more still images, the process proceeds to step S31.
[0125]
In step S31, the overall control unit 211 determines whether or not the shutter button 9 is half-pressed to enter the S1 state. Specifically, if it is determined that the S1 state is reached, the process proceeds to step S32. If it is determined that the S1 state is not reached, the process returns to the beginning of the flowchart, and the determination operation of step S31 is performed again.
[0126]
In step S32, automatic exposure control (AE), autofocus (AF), and automatic white balance adjustment (AWB) are performed, and the process proceeds to step S33. Note that AE, AF, and AWB are performed under the control of the overall control unit 211, and the functions thereof are simply as described above, and the operations are similar to those of a general digital camera. Then, explanation is omitted.
[0127]
In step S33, the overall control unit 211 determines whether or not the shutter button 9 has been pressed to enter the S2 state. Specifically, if it is determined that the state is the S2 state, the process proceeds to step S34, and if it is determined that the state is not the S2 state, the process returns to step S31.
[0128]
In step S34, the control means 211 counts to start the first photographing operation, and the process proceeds to step S35. Note that the information obtained by this count is used when determining whether or not the preset number of shots has been reached in step S65 described later.
[0129]
In step S35, the subject is imaged. That is, the CCD 303 outputs a light image of the subject imaged by the photographing lens 30 as an image signal, thereby obtaining an image signal of 1280 × 960 pixels, and the process proceeds to step S36.
[0130]
In step S36, a timer for adjusting the shooting interval of interval shooting is started, and the process proceeds to step S37. Specifically, the overall control unit 211 transmits a signal indicating that imaging has been performed to the real-time clock 260, thereby starting a timer for adjusting the imaging interval within the real-time clock.
[0131]
In step S37, image processing such as filter processing, various corrections (interpolation), and image size conversion is performed on the image signal acquired in step S35. Specifically, the signal processing circuit 313 adjusts the level of the image signal by performing noise reduction processing by the CDS circuit on the image signal (analog signal) acquired in step S35 and adjusting the gain by the AGC circuit. After that, the A / D converter 205 converts it into a digital signal, the WB circuit 207 converts the R, G, B pixel data levels, the γ correction circuit 208 corrects the gradation of the pixel data, The color conversion / color correction circuit 231 performs color correction. Then, the resolution converter 232 performs image size conversion as necessary, and the process proceeds to step S38.
[0132]
In step S38, a thumbnail image is generated in the overall control unit 211 based on the image data obtained in step S37, an after view is displayed on the rear LCD 10, and the process proceeds to step S8. Note that here, the case where the after view is set to be displayed is described as an example, but the present invention is not limited to this, and the setting is made so that the after view is not displayed, and the after view is displayed in step S38. The view may not be displayed.
[0133]
In step S39, the compression / decompression unit 236 performs compression processing on the image data obtained in step S37, and the process proceeds to step S40.
[0134]
In step S40, the thumbnail image obtained in steps S38 and S39 and the compressed still image are temporarily stored in the image memory 209, and the process proceeds to step S41.
[0135]
In step S41, the first still image file is generated from the thumbnail image and still image temporarily stored in the image memory 209 in step S40 under the control of the overall control unit 211, and is recorded in the memory card 8. The process proceeds to step S42.
[0136]
In step S42, the resolution of the still image data (pixel number 1280 × 960) temporarily stored in the image memory 209 in the resolution conversion unit 232 under the control of the overall control unit 211 is temporarily changed to the pixel number 640 × 480. The moving image data (number of pixels 640 × 480) is generated based on the still image data whose resolution has been lowered by the overall control unit 211, and is recorded in the memory card 8 as a moving image file, and the process proceeds to step S43. Here, one frame of moving image data is generated from one frame of still image. In step S42, since only one frame is obtained in a series of interval shooting, the moving image file generated in step S42 includes only one frame of moving image data.
[0137]
In step S43, all the image data in the image memory 209 are deleted, and the process proceeds to step S44. That is, all image data in the image memory 209 is deleted in order to create a sufficient free space in the image memory 209 for preparation for the next shooting.
[0138]
In step S44, it is determined whether or not there is a remaining capacity in the memory card 8 for recording a still image file and a moving image file generated based on a still image obtained by the next shooting. Specifically, the overall control unit 211 reads the remaining capacity of the memory card 8 and the resolutions of still images, thumbnail images, and moving images obtained in the next shooting are set before shooting. The overall control unit 211 calculates the capacity of the still image file and the moving image file generated based on the still image obtained in the next shooting, and the remaining capacity in the memory card 8 and the calculated still image file and moving image file From the capacity, it is determined whether or not the remaining capacity for recording the still image file and the moving image file generated based on the still image obtained by the next shooting is insufficient in the memory card 8. If it is determined that the remaining capacity is insufficient, the interval shooting is terminated. If it is determined that the remaining capacity is sufficient, the process proceeds to step S51 in FIG.
[0139]
In step S51, the overall control unit 211 performs a count indicating that the N-th shooting operation is started in a series of interval shootings, and the process proceeds to step S52. Specifically, when the process of step S51 is performed for the first time, since the previous count is N = 1 that was performed in step S34, in step S51, the N = 2th photographing operation in which 1 is added thereto is performed. Do a count that means start. Further, if the previous count is the Nth time, in step S51, a count is performed, which means that the (N + 1) th shooting operation in which 1 is added to this is started.
[0140]
In step S52, under the control of the overall control unit 211 and the power control unit 281, a power saving mode is set in which the supply of power to most of the functions of the digital camera 1 except the real time clock 260 is stopped. Proceed to S53.
[0141]
In step S53, it is determined whether or not a set time j for starting preparation for the next shooting operation in a series of interval shootings has elapsed. Specifically, in step S36, a timer for counting down to a set time j for starting preparation for the next shooting operation is started in the real time clock 260, and when the set time j elapses, the real time clock 260 is switched to the power control unit. A signal is sent to 281 to proceed to step S54, and the determination in step S53 is repeated until the set time j has elapsed. Therefore, here, the determination as to whether or not the set time j has elapsed is made by the timer function of the real-time clock 260.
[0142]
In step S54, the power control unit 281 receives a signal from the real-time clock 260 sent when the set time j elapses in step S53, and restarts the supply of power to each part of the entire digital camera 1 to start the digital camera 1. Returns from the power saving mode and proceeds to step S55.
[0143]
In step S55, AE, AF, and AWB are performed in the same manner as in step S32 to prepare for the next imaging in order to perform the N-th shooting, and the process proceeds to step S56.
[0144]
In step S56, the Nth subject is imaged, and the process proceeds to step S57. The specific operation is the same as step S35.
[0145]
In step S57, a timer for adjusting the shooting interval of interval shooting is started, and the process proceeds to step S58. The specific operation is the same as step S36, and a timer for adjusting the shooting interval until the next shooting operation is started in the real-time clock 260.
[0146]
In step S58, image processing such as filter processing, various corrections (interpolation), and image size conversion is performed on the image signal acquired in step S56, and the process proceeds to step S59. The specific operation here is the same as step S37.
[0147]
In step S59, a thumbnail image is generated in the overall control unit 211 based on the image data obtained in step S56, an after view is displayed on the rear LCD 10, and the process proceeds to step S60. In this case as well, it may be set not to display the after view as in step S38 and not to display the after view in step S38.
[0148]
In step S60, the compression / decompression unit 236 performs compression processing on the image data obtained in step S56, and the process proceeds to step S61.
[0149]
In step S61, the thumbnail image obtained in steps S59 and S60 and the compressed still image are temporarily stored in the image memory 209, and the process proceeds to step S62.
[0150]
In step S62, an Nth still image file is generated and recorded on the memory card 8 from the thumbnail image and still image temporarily stored in the image memory 209 in step S61 under the control of the overall control unit 211.
[0151]
In step S63, moving image data (pixel number 640 × 480) is generated from still image data (pixel number 1280 × 960) temporarily stored in the image memory 209 in the same manner as in step S42, and the overall control unit 211 Under the control, the moving image file 1 newly added here is added to the moving image file 1 obtained by the series of interval shooting so far to update the moving image file 1, and the process proceeds to step S64 in FIG. That is, here, a still image is acquired by continuous shooting that is shot a plurality of times at a preset timing, a still image file and a moving image file are generated based on the acquired still image, and a new still image is acquired during continuous shooting. After the image file is generated, the moving image file is updated based on the new still image.
[0152]
FIG. 22 is a schematic diagram for explaining the image file recorded in the memory card 8 when the moving image file is updated. FIG. 22A shows image data as moving image data generated based on N still image files and still images in still image files 1 to N by N shootings in a series of interval shootings. 1 shows a state in which a moving image file 1 composed of 1 to image data N is recorded. When the N + 1th shooting is newly performed, a still image file N + 1 is additionally recorded in the memory card 8 as shown in FIG. 22B, and the still image obtained by the N + 1 shooting is performed. Image data N + 1, which is moving image data, is generated from the image data, added to the moving image file 1, and the moving image file 1 in the memory card 8 is updated and recorded.
[0153]
Also, the process related to the generation of the moving image file, such as the generation and update processing of the moving image file in step S42 and step S63, is controlled by the overall control unit 211 so as to be performed while avoiding the timing of acquiring the interval shooting image.
[0154]
In step S64, all the image data in the image memory 209 are deleted, and the process proceeds to step S65. Here, as in step S43, all image data in the image memory 209 is deleted in order to create a sufficient free space in the image memory 209 for preparation for the next shooting.
[0155]
In step S65, the overall control unit 211 determines whether there is a next shooting. Here, if the number of shots set by the user on the shooting number setting screen of FIG. 18 before the interval shooting and the number of shootings counted in step S51 are the same value, there is no next shooting, and therefore, step The process proceeds to S67, and if the set number of shots and the number of shots counted in step S51 are not the same value, the next shot is taken, and the process proceeds to step S66.
[0156]
In step S 66, as in step S 44, it is determined whether or not there is sufficient remaining capacity for recording the still image file and the moving image file obtained by the next shooting in the memory card 8. If it is determined that the remaining capacity is insufficient, the process proceeds to step S67, and if it is determined that the remaining capacity is sufficient, the process returns to step S51.
[0157]
In step S67, an end display to end the interval shooting is displayed on the rear LCD 10, and the interval shooting is ended. When the interval shooting is completed, the supply of power to each unit of the digital camera 1 is stopped under the control of the overall control unit 211 and the power control unit 281, and the digital camera 1 is turned off.
[0158]
As described above, in the digital camera 1 according to the present invention, each time a new still image is acquired during continuous shooting in which multiple shots are taken at a predetermined timing in interval shooting, a moving image file is updated and recorded based on the new still image. By adopting such a configuration, even if continuous shooting is interrupted during interval shooting, a video file based on the still image taken up to the point when shooting was interrupted is recorded. There is no need to generate a movie file, and the next shooting can be performed immediately.
[0159]
In addition, during the continuous shooting period, still image files and moving image files are generated, and the processing related to moving image file generation such as generation and update of moving image files is performed between the timings of acquiring images while avoiding the timing of acquiring images in continuous shooting. By doing this, data processing related to video files is performed effectively using time other than the timing for acquiring images, so the data processing related to video files does not interfere with acquisition of images in continuous shooting and new shooting, and at the timing when shooting is desired. Shooting can be carried out.
[0160]
Therefore, it is possible to remove various harmful effects caused by acquiring a still image and a moving image at the same time.
[0161]
<Modification>
As mentioned above, although embodiment of this invention was described, this invention is not limited to the thing of the content demonstrated above.
[0162]
For example, in the embodiment described above, as shown in FIG. 8, the moving image file does not include audio data, but the present invention is not limited to this, and the moving image file may include audio data. good. FIG. 23 is a diagram for explaining the recorded contents in a moving image file when the moving image file includes audio data. For example, one moving image file 1 relates to still image file 1 to still image file 99 as shown in FIG. It is generated from a still image and is composed of 99 frames of image data of image data 1 to image data 99, and audio data for each image data is recorded. Frame 1 is audio data 1, image data 1, frame 2 may be composed of audio data 2 and image data 2,..., And frame 99 may be composed of audio data 99 and image data 99.
[0163]
In the embodiment described above, the additional information added to the still image file is audio information. However, the information is not limited to this, and character information, image information, and the like are added as additional information. May be.
[0164]
In the embodiment described above, the additional information is added only to the still image file. However, the present invention is not limited to this, and character information, image information, and the like are added to the moving image file as additional information. Also good. In this way, by adopting a configuration in which additional information according to user input is added to the moving image file, the content of the generated moving image file can be easily grasped by adding the additional information. Further, additional information may be added to both the still image file and the moving image file.
[0165]
In the embodiment described above, the still image file and the moving image file are directly recorded in the memory card 8, but the present invention is not limited to this, and the digital camera 1 is turned on again to start the shooting operation. A new folder may be generated in the memory card 8 each time a still image file and a moving image file are recorded in the folder.
[0166]
Further, in the embodiment described above, when deleting image data temporarily stored in the image memory 209 after continuous shooting, all image data is deleted. However, the present invention is not limited to this. Alternatively, the image data temporarily stored in the image memory 209 may be deleted one frame at a time.
[0167]
In the embodiment described above, the image data is temporarily stored in the image memory 209 after continuous shooting. However, the present invention is not limited to this, and is temporarily recorded on a recording medium such as the memory card 8. It may be something like this.
[0168]
In the embodiment described above, the remaining capacity in the memory card 8 is calculated and displayed after a series of continuous shooting, but the present invention is not limited to this. The remaining capacity in the memory card 8 may be calculated and displayed for each of a plurality of shots.
[0169]
Further, in the embodiment described above, the generation and update of the moving image file are performed between intervals of the image acquisition timing of the interval shooting. However, the present invention is not limited to this, and all image acquisition in the interval shooting has been completed. Later, a moving image file may be generated or updated within an interval shooting period (for example, before the power is turned off).
[0170]
The specific embodiment described above includes an invention having the following configuration.
[0171]
(1) The digital camera according to claim 1, wherein the display control unit performs the display control after acquiring a plurality of still images.
[0172]
According to the invention of (1), the burden required for calculation can be reduced by reducing the number of times of calculation of the remaining capacity of the recording medium in consideration of the capacity of still image files and moving image files to be generated. Accordingly, the processing capability required for shooting can be improved, and the continuous shooting speed can be improved. In addition, since the display is not changed drastically in a short time, the display can be easily viewed.
[0173]
(2) In the digital camera according to claim 2, when the editing content by the editing unit is an instruction to delete at least one still image included in the set of still images, the file generation unit A digital camera characterized in that neither the still image file nor the moving image file is generated based on an instructed still image.
[0174]
According to the invention of (2), since it is possible to simultaneously select that neither a still image file nor a moving image file is generated, the operation efficiency can be improved.
[0175]
(3) In the digital camera according to claim 2, when the editing content by the editing unit is addition of audio information after shooting, the file generation unit associates the audio information only with the still image file. A digital camera characterized by that.
[0176]
According to the invention of (3), by adding the audio information as the additional information only to the still image file, the audio information as the additional information is added to the moving image file as if synchronized with the moving image. It is possible to prevent an unexpected confusion of the user that is illusion with the recorded audio data.
[0177]
(4) In a digital camera capable of generating a moving image file based on a set of first still images taken continuously, a second set of still images is generated by lowering the resolution of the first set of still images. A resolution converting unit capable of generating a still image file based on the first set of still images, a file generating unit capable of generating a moving image file based on the second set of still images, and the still image And a means for recording the image file and the moving image file on a recording medium.
[0178]
According to the invention of (4), by generating and recording a moving image file from a second set of still images in which the resolution of continuously shot still images (first set of still images) is reduced, Since the load required for processing at the time of generation and playback after recording can be reduced, the processing time can be shortened.
[0179]
(5) In the digital camera according to claim 4, the time interval between the continuous shootings is longer than the time required for updating the moving image file based on the new still image in the file update unit. A digital camera characterized by its long length.
[0180]
According to the invention of (5), the time interval for acquiring each still image is longer than the time required for updating the moving image file based on the acquired new still image during continuous shooting. By doing so, the process for updating the moving image file can be prevented from disturbing the shooting operation of continuous shooting, and therefore, continuous shooting can be performed accurately at a preset time interval before continuous shooting.
[0181]
【The invention's effect】
As described above, according to the invention of claim 1, after taking a still image and before generating a moving image file, taking into account the capacity of the still image file and the moving image file to be generated, Since the display is based on the remaining capacity of the recording medium, the user can accurately grasp the recording limit.
[0183]
According to the invention of claim 3, by displaying a still image as a photographing result displayed in the photographing mode, it is possible to quickly confirm the photographing result before generating a moving image. Therefore, only a necessary moving image file can be generated.
[0184]
Further, according to the invention of claim 4, every time a new still image is acquired during continuous shooting, the moving image file is updated and recorded based on the new still image, thereby interrupting the shooting in the middle of continuous shooting. However, since a movie file based on the still image taken until the time when shooting was interrupted is recorded, there is no need to generate a movie file again after interruption of continuous shooting, and the next shooting etc. It can be performed.
[0185]
According to the invention of claim 5, a still image file and a moving image file are generated in a continuous shooting period, and an image is acquired by performing processing related to moving image file generation while avoiding image acquisition timing in continuous shooting. Since data processing related to a moving image file is performed by effectively using a time other than the timing, the data processing related to the moving image file does not hinder acquisition of images in continuous shooting and new shooting, and shooting can be performed at a timing when shooting is desired.
[Brief description of the drawings]
FIG. 1 is a front view showing a main configuration of a digital camera according to an embodiment of the present invention.
FIG. 2 is a top view showing a main configuration of the digital camera shown in FIG.
FIG. 3 is a rear view showing a main configuration of the digital camera shown in FIG. 1;
FIG. 4 is a functional block diagram of a digital camera according to an embodiment of the present invention.
FIG. 5 is a diagram illustrating a still image file name and a moving image file name.
FIG. 6 is a diagram for describing a still image file name and a moving image file name.
FIG. 7 is a diagram for explaining recorded contents in a still image file.
FIG. 8 is a diagram for explaining recorded contents in a moving image file.
FIG. 9 is a schematic diagram showing association between an audio file and a photographing result.
FIG. 10 is a schematic diagram showing a moving image setting screen.
FIG. 11 is a schematic diagram showing an after-view setting screen.
FIG. 12 is a flowchart showing an operation of continuous shooting.
FIG. 13 is a flowchart illustrating an operation of continuous shooting.
FIG. 14 is a flowchart showing an operation of continuous shooting.
FIG. 15 is a diagram showing a display based on the remaining capacity of the memory card during continuous shooting.
FIG. 16 is a diagram showing a screen for instructing whether or not to delete image data.
FIG. 17 is a diagram for explaining generation of an image file and recording on a memory card.
FIG. 18 is a diagram showing a setting screen for setting the shooting timing and the number of shots for interval shooting.
FIG. 19 is a flowchart showing an interval shooting operation;
FIG. 20 is a flowchart illustrating an interval shooting operation.
FIG. 21 is a flowchart showing an interval shooting operation;
FIG. 22 is a schematic diagram for explaining updating of a moving image file.
FIG. 23 is a diagram for explaining a case where audio data is included in a moving image file.
[Explanation of symbols]
1 Digital camera
3 Imaging unit
8 Memory card
10 Rear LCD
20 EVF
35 Control button
36 Data Panel
38 Quick view button
209 Image memory
211 Overall control unit
232 resolution converter
236 Compression / decompression unit
260 Real time clock
281 Power control unit
M microphone

Claims (5)

連続撮影した静止画像の組に基づいて動画ファイルを生成可能なデジタルカメラにおいて、
撮影によって生成される画像ファイルを記録する記録手段と、
前記記録手段の残容量を撮影可能枚数に換算して表示する撮影可能枚数表示手段と、
前記連続撮影の際に、連続撮影した静止画像に基づいて静止画ファイルを各々生成するとともに、前記静止画像の組に基づいて動画ファイルをあわせて生成するファイル生成手段と、
生成される動画ファイルの容量を考慮して前記撮影可能枚数表示手段に撮影可能枚数を表示するための表示制御手段と、
を備えることを特徴とするデジタルカメラ。
In a digital camera that can generate a video file based on a set of still images taken continuously,
Recording means for recording an image file generated by shooting;
Shootable number display means for displaying the remaining capacity of the recording means in terms of the number of shootable images;
A file generating means for generating each of the still image files based on the still images taken continuously during the continuous shooting, and generating a moving image file based on the set of the still images;
Display control means for displaying the number of shootable images on the shootable number display means in consideration of the capacity of the generated video file;
A digital camera comprising:
連続撮影した静止画像の組に基づいて動画ファイルを生成可能なデジタルカメラにおいて、
連続撮影によって得られた静止画像の組を一時的に記憶する一時記憶手段と
前記一時記憶手段に記憶された静止画像の組に基づいて静止画ファイルおよび動画ファイルを生成するファイル生成手段と、
ユーザーの操作に基づいて、前記一時記憶手段に記憶された静止画像の組のうちの少なくとも一つの静止画像に対して削除を指示する削除指示手段と、
を備え、
前記ファイル生成手段が、
前記静止画像の組のうち前記削除の指示を受けた静止画像は、前記静止画ファイルおよび前記動画ファイルの生成には使用しないことを特徴とするデジタルカメラ。
In a digital camera that can generate a video file based on a set of still images taken continuously,
Temporary storage means for temporarily storing a set of still images obtained by continuous shooting ;
File generating means for generating a still image file and a moving image file based on a set of still images stored in the temporary storage means ;
A deletion instruction means for instructing deletion of at least one still image of the set of still images stored in the temporary storage means based on a user operation;
With
The file generation means is
The digital camera according to claim 1, wherein a still image for which the deletion instruction has been received from the set of still images is not used to generate the still image file and the moving image file .
連続撮影した静止画像の組に基づいて動画ファイルを生成可能なデジタルカメラにおいて、
連続撮影によって得られた静止画像の組を一時的に記憶する一時記憶手段と、
前記静止画像の組に基づいて静止画ファイルと動画ファイルとを生成可能なファイル生成手段と、
前記静止画像の組に含まれる少なくとも一つの静止画像に対応した静止画表示を撮影モード下で撮影結果として表示する結果表示手段と、
を備えることを特徴とするデジタルカメラ。
In a digital camera that can generate a video file based on a set of still images taken continuously,
Temporary storage means for temporarily storing a set of still images obtained by continuous shooting;
File generation means capable of generating a still image file and a moving image file based on the set of still images;
A result display means for displaying a still image display corresponding to at least one still image included in the set of still images as a shooting result under a shooting mode;
A digital camera comprising:
連続撮影した静止画像の組に基づいて動画ファイルを生成可能なデジタルカメラにおいて、
事前に決定されたタイミングでの連続撮影によって複数の静止画像を順次に取得する取得手段と、
前記複数の静止画像に基づいて静止画ファイルおよび動画ファイルを生成するファイル生成手段と、
前記連続撮影中に前記ファイル生成手段が新規な静止画ファイルを生成した後に、前記動画ファイルを構成する静止画像群に前記新規な静止画像を追加して前記動画ファイルを更新するファイル更新手段と、
を備えることを特徴とするデジタルカメラ。
In a digital camera that can generate a video file based on a set of still images taken continuously,
An acquisition means for sequentially acquiring a plurality of still images by continuous shooting at a predetermined timing;
File generation means for generating a still image file and a moving image file based on the plurality of still images;
A file updating unit for updating the moving image file by adding the new still image to a group of still images constituting the moving image file after the file generating unit generates a new still image file during the continuous shooting;
A digital camera comprising:
連続撮影した静止画像の組に基づいて動画ファイルを生成可能なデジタルカメラにおいて、
連続撮影によって複数の静止画像を順次に取得する取得手段と、
連続撮影期間内に前記複数の静止画像に基づいて静止画ファイルおよび動画ファイルを生成可能なファイル生成手段と、
前記連続撮影における画像取得タイミングを避けて、前記動画ファイル生成に関する処理を前記ファイル生成手段に行わせる制御手段と、
を備えることを特徴とするデジタルカメラ。
In a digital camera that can generate a video file based on a set of still images taken continuously,
Acquisition means for sequentially acquiring a plurality of still images by continuous shooting;
File generation means capable of generating still image files and moving image files based on the plurality of still images within a continuous shooting period;
Avoiding the image acquisition timing in the continuous shooting, control means for causing the file generation means to perform processing related to the moving image file generation;
A digital camera comprising:
JP2002038747A 2002-02-15 2002-02-15 Digital camera Expired - Fee Related JP3621684B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002038747A JP3621684B2 (en) 2002-02-15 2002-02-15 Digital camera

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002038747A JP3621684B2 (en) 2002-02-15 2002-02-15 Digital camera

Publications (2)

Publication Number Publication Date
JP2003244614A JP2003244614A (en) 2003-08-29
JP3621684B2 true JP3621684B2 (en) 2005-02-16

Family

ID=27779981

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002038747A Expired - Fee Related JP3621684B2 (en) 2002-02-15 2002-02-15 Digital camera

Country Status (1)

Country Link
JP (1) JP3621684B2 (en)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006180089A (en) * 2004-12-21 2006-07-06 Olympus Corp Digital camera and searching system
JP4574504B2 (en) * 2005-09-09 2010-11-04 キヤノン株式会社 Imaging apparatus and control method thereof
JP2007235195A (en) * 2006-02-27 2007-09-13 Canon Inc Image recorder and image display method
JP4830797B2 (en) * 2006-11-07 2011-12-07 株式会社ニコン Electronic camera
JP4772012B2 (en) * 2007-08-14 2011-09-14 日本放送協会 Still image extraction apparatus and still image extraction program
US8228393B2 (en) * 2009-02-25 2012-07-24 Panasonic Corporation Imaging apparatus capable of recording a moving image and a still image
JP5348285B2 (en) * 2012-07-06 2013-11-20 カシオ計算機株式会社 Image / audio recording apparatus, image / audio recording method, and image / audio recording control program
JP5888614B2 (en) 2013-03-21 2016-03-22 カシオ計算機株式会社 IMAGING DEVICE, VIDEO CONTENT GENERATION METHOD, AND PROGRAM
JP6235944B2 (en) 2014-03-19 2017-11-22 カシオ計算機株式会社 Imaging apparatus, imaging method, and program
JP6598661B2 (en) * 2015-12-02 2019-10-30 キヤノン株式会社 Imaging control apparatus, control method, and program

Also Published As

Publication number Publication date
JP2003244614A (en) 2003-08-29

Similar Documents

Publication Publication Date Title
JP4126640B2 (en) Electronic camera
JP4730667B2 (en) Automatic regeneration method and apparatus
JP4730553B2 (en) Imaging apparatus and exposure control method
JP2002218384A (en) Digital camera
JP2004128587A (en) Digital camera
JP2004312495A (en) Image processing program and image processor
JP5494744B2 (en) Imaging apparatus, control method, and program
JP3621684B2 (en) Digital camera
JP2004023747A (en) Electronic camera
JP2005323162A (en) Imaging apparatus and method for recording image
JP2005117369A (en) Moving image recorder, moving image reproducer and digital camera
JP4049291B2 (en) Digital still camera
JP3864407B2 (en) Digital camera
JP2003324651A (en) Digital camera
JP4902365B2 (en) Image composition apparatus and program
JP2003219325A (en) Imaging apparatus
JP2005244769A (en) Digital camera
JP2004221650A (en) Electronic camera
US20050195294A1 (en) Method of controlling digital photographing apparatus for adaptive image compositing, and digital photographing apparatus using the method
JP2007110221A (en) Imaging apparatus
JP4433297B2 (en) Imaging apparatus and image reproduction apparatus
JP4182427B2 (en) Imaging device
JP4193691B2 (en) Imaging apparatus, moving image file recording method, and program
JP2005109979A (en) Photographing device and its photographing method
JP2007221237A (en) Camera

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20040401

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20040706

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20040827

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040901

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20040901

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20041116

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20041118

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20071126

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081126

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081126

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091126

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091126

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101126

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101126

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111126

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111126

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121126

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131126

Year of fee payment: 9

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees