JP2003092724A - 画像処理装置、並びに画像処理方法、及びプログラム、記憶媒体 - Google Patents

Abstract

(57)【要約】 【課題】 静止画とこの静止画の前後数フレーム分の動
画を撮影し、撮影された静止画と動画を関連づけて保持
すること。また、撮影された静止画とこの静止画の前後
数フレームの動画を再生表示すること。 【解決手段】 ＳＷ１１３が押されていない場合、取り
込んだ１フレーム分の画像データに対して、ＭＰＥＧ圧
縮処理が実行され、バッファ１０７ｄへ一時的に格納さ
れる。ＳＷ１１３が押された場合、取り込んだ１フレー
ム分の画像データに対して、ＪＰＥＧ圧縮処理が実行さ
れ、次のフレーム以降の画像データに対して、ＭＰＥＧ
圧縮処理が実行され、バッファ１０７ｄの最後尾へ追加
格納する。そして、タイムアップした場合、ＪＰＥＧ圧
縮されたデータに基づいて、ＪＰＥＧファイルを作成
し、バッファ１０７ｄに格納されている複数フレームの
ＭＰＥＧ圧縮データに基づいてＭＰＥＧファイルを作成
する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、動画の撮影を行
う、もしくは、静止画及び／又は動画を再生する画像処
理装置及び、画像処理方法、並びにプログラム、記憶媒
体に関するものである。

【０００２】

【従来の技術】静止画の撮影を行うデジタルカメラにお
いては、モーションＪＰＥＧフォーマットを用いた動画
撮影機能が搭載され始めている。また、デジタルビデオ
カメラにおいても、動画撮影中に任意のタイミングで静
止画撮影を行うことができる機能がある機種も一部にあ
る。これらの機能を搭載したカメラを使うことによっ
て、撮影シーンや目的に応じて静止画撮影と動画撮影を
使い分けることができ、利用者は好みに応じた撮影デー
タ形式を選ぶことができる。

【０００３】

【発明が解決しようとする課題】しかしながら、デジタ
ルカメラにおける撮影機能は、静止画撮影か動画撮影か
のどちらかを一意的に決めた上で撮影を行うものであ
り、静止画と動画を同時に記録することはできない。ま
た、デジタルカメラで使用されている記録メディアは、
コンパクトフラッシュ（登録商標）カード（以下ＣＦカ
ードと呼ぶ）やスマートメディアカード（以下ＳＭカー
ドと呼ぶ）などの半導体メモリカードが主であり、記録
容量にも限りがあり市販価格も安くはない。従って、モ
ーションＪＰＥＧによる動画撮影では、長時間のデータ
の記録や、複数の動画データを記録することが難しい。

【０００４】また、デジタルビデオカメラでは連続した
動画撮影中に任意に静止画撮影が可能であるが、動画デ
ータはテープメディアへストリームデータとして記録さ
れ、静止画データはテープ上、または別の記録メディア
に保存される。テープ上に静止画が記録されるような場
合には静止画記録の時間帯だけ動画が途切れて記録され
るという問題がある。また、別の記録メディアに保存さ
れる場合には、記録メディアが分かれているため、あと
で動画と静止画の対応を取りにくいという欠点がある。

【０００５】本発明は以上の問題に鑑みて成されたもの
であり、静止画とこの静止画の前後数フレーム分の動画
を撮影し、撮影された静止画と動画を関連づけて保持す
る画像処理装置及びその方法を提供することを目的とす
る。

【０００６】また、本発明は更に、撮影された静止画と
この静止画の前後数フレームの動画を再生表示する画像
処理装置及び画像処理方法を提供することを目的とす
る。

【０００７】

【課題を解決するための手段】本発明の目的を達成する
ために、例えば本発明の画像処理装置は以下の構成を備
える。

【０００８】すなわち、連続的なフレーム画像によって
構成される動画像データを入力する入力手段と、前記入
力手段により入力された動画像データから所望の前記フ
レーム画像を指示する指示手段と、前記指示手段により
指示された前記フレーム画像のサムネイル画像を生成す
るサムネイル画像生成手段と、前記動画像データと、前
記指示手段により指示されたフレーム画像の画像データ
と、前記サムネイル画像生成手段により生成されたサム
ネイル画像の画像データとを夫々関連付けて格納する格
納手段とを有することを特徴とする画像処理装置。

【０００９】本発明の目的を達成するために、例えば本
発明の画像処理装置は以下の構成を備える。

【００１０】すなわち、静止画及び／又は動画を再生す
る画像処理装置であって、少なくとも一つ以上の静止
画、及び当該静止画に対応するサムネイル画像、及び当
該静止画のうち、いずれかの静止画に対応する動画を格
納する格納手段と、前記サムネイル画像を一覧表示する
表示手段と、前記表示手段に表示されたサムネイル画像
のうち、いずれか１つを選択する選択手段とを備え、前
記表示手段は、前記選択手段により選択されたサムネイ
ル画像に対応する静止画を前記格納手段から選択して表
示すると共に、当該静止画に対応する動画が前記格納手
段に格納されている場合、当該動画を再生表示すること
を特徴とする画像処理装置。

【００１１】

【発明の実施の形態】以下添付図面を参照して、本発明
を好適な実施形態に従って詳細に説明する。

【００１２】［第１の実施形態］本実施形態では、静止
画、動画の撮影が可能なカメラモジュールを搭載してお
り、撮影されたデータで、静止画像はＪＰＥＧ圧縮、動
画像はＭＰＥＧ４圧縮データとして格納できる画像処理
装置について説明する。

【００１３】図１は、本実施形態における画像処理装置
の基本構成を示すブロック図である。同図において、１
０１はＣＰＵ（中央演算処理装置）であり、本画像処理
装置の動作はこのＣＰＵ１０１により制御される。ＣＰ
Ｕ１０１には、静止画コーディック部１０２、動画コー
ディック部１０３、画像処理部１０４、後述の制御プロ
グラムを記憶しているＲＯＭ（リードオンリーメモリ）
１０６、ＲＡＭ（ランダムアクセスメモリ）１０７、デ
ータ格納部１０８、タブレットコントロール部１０９、
ＬＣＤコントロール部１１１、シャッターＳＷ１１３、
制御キー群１１４、電源を供給するためのＤＣ／ＤＣコ
ンバータ１１５、タイマ１１７がそれぞれ接続されてい
る。

【００１４】そして、画像処理部１０４にはカメラ部１
０５、タブレットコントロール部１０９には手書きタブ
レット１１０、ＬＣＤコントロール部１１１には表示部
（ＴＦＴカラー液晶等の表示画面とその駆動部）１１２
が接続されている。また、ＤＣ／ＤＣコンバータ１１５
には電池１１６から電源が供給されている。表示部１１
２と手書きタブレット１１０は、表示部１１２の上部に
透明タブレット１１０が積層された一体構造となってお
り、表示部１１２に表示されているグラフィックデータ
を参照しながら、対応する位置をペンタッチすることに
より後述の各種制御操作ができるようになっている。

【００１５】ＣＰＵ１０１はＲＯＭ１０６内の制御プロ
グラムに基づいて各種制御を行う。これらの制御の中に
は以下のようなものが含まれる。

【００１６】・画像処理部１０４から出力された動画お
よび静止画の撮影画像信号を読み込み、ＲＡＭ１０７へ
ＤＭＡ転送を行う処理 ・ＲＡＭ１０７よりＬＣＤコントロール部へ動画、及び
静止画のデータをＤＭＡ転送する処理 ・画像処理部１０４から送られてきた画像データをＪＰ
ＥＧ圧縮またはＭＰＥＧ圧縮処理して、ファイル形式で
データ格納部１０４へ格納する処理 ・ＪＰＥＧ圧縮、ＭＰＥＧ圧縮処理を行うために静止画
コーディック部１０２、動画コーディック部１０３を駆
動する処理 ・手書きタブレット１１０から入力された情報に従った
各種アプリケーションの実行 ・シャッターＳＷ１１４の操作に伴う撮影動作の指示 ・アプリケーション実行中の制御キー群１１５による制
御指示による、対応する制御処理の実行 ・各素子への電源の供給をコントロールするための制御
信号を、ＤＣ／ＤＣコンバーター１１７に対して出力す
る処理 また、ＲＡＭ１０７は画像展開エリア１０７ａ、ワーク
エリア１０７ｂ、ＶＲＡＭ１０７ｃ、動画バッファ１０
７ｄ、一時退避エリア１０７ｅを備えている。画像展開
エリア１０７ａは、画像処理部１０４より連続的に送ら
れてくる撮影画像（ＹＵＶデジタル信号）やデータ格納
部１０８から読み出されたＪＰＥＧ圧縮画像データ、お
よびＭＰＥＧ圧縮画像データの一部を一時的に格納する
ためのテンポラリバッファとして、あるいは、画像圧縮
処理、伸張処理のための画像専用ワークエリアとして使
用される。ワークエリア１０７ｂは、各種プログラムの
ためのワークエリアで、ＣＰＵ１０１で実行される各種
アプリケーションプログラムが使用するものである。Ｖ
ＲＡＭ１０７ｃは表示部１１２へ表示する表示データを
格納するＶＲＡＭとして使用される。動画バッファ１０
７ｄは、動画コーディック部１０３によって動画圧縮さ
れたフレームデータを所定時間分だけ一時的に格納して
おく領域である。また、一時退避エリア１０７ｅは各種
データを一時退避させるためのエリアである。

【００１７】データ格納部１０８は、画像データ格納エ
リア１０８ａとして利用され、ＪＰＥＧ圧縮された撮影
静止画データ、およびＭＰＥＧ圧縮された撮影動画デー
タ、さらにアプリケーションより参照される各種付属デ
ータ等のファイル、および、フォルダなどを格納してお
くための領域として使用される。本実施形態ではデータ
格納部１０８としてフラッシュメモリは構成されるが、
これに限定されるものではない。

【００１８】カメラ部１０５は、レンズ群、ＣＣＤ、Ｃ
ＣＤコントロール部などを含んでいる。レンズ群は被写
体像を光学的にＣＣＤへ投影するために複数枚のレンズ
で構成されており、ＣＣＤ（光電変換素子）はレンズ群
によって投影された撮影画像をアナログ電気信号に変換
するための素子である。また、ＣＣＤコントロール部
は、ＣＣＤに転送クロック信号やシャッター信号を供給
するためのタイミングジェネレータ、ＣＣＤ出力信号の
ノイズ除去、ゲイン処理を行うための回路、さらに、ア
ナログ信号を１０ビットデジタル信号に変換するための
Ａ／Ｄ変換回路などを含んでいる。

【００１９】また、画像処理部１０４は、カメラ部１０
５より出力された１０ビットデジタル信号をガンマ変
換、色空間変換、また、ホワイトバランス、ＡＥ、フラ
ッシュ補正等の画像処理を行い、ＹＵＶ（４：２：２）
フォーマット、あるいはＹＵＶ（４：２：０）フォーマ
ットの各８ビットデジタル信号出力を行うものである。

【００２０】静止画コーディック部１０２は、カメラ部
１０５、画像処理部１０４によって得られた静止画デー
タ（ＹＵＶデジタル画像データ）に対してＪＰＥＧ圧縮
処理を行い、ＪＰＥＧ静止画データを作成するためのＪ
ＰＥＧエンコーダ（作成された静止画データはデータ格
納部１０８の画像データ格納エリア１０８ａに格納され
る）と、この静止画コーディック部１０２によってＪＰ
ＥＧエンコードされ、データ格納部１０８に格納されて
いる静止画データを受け取り、ＪＰＥＧ伸張処理によっ
てＹＵＶデジタル静止画データへ変換するためのＪＰＥ
Ｇデコーダを含んでいる。

【００２１】また、動画コーディック部１０３は、カメ
ラ部１０５、画像処理部１０４により得られた動画デー
タ（ＹＵＶデジタル画像データ）に対してＭＰＥＧ圧縮
処理を行い、ＭＰＥＧ動画データを作成するためのＭＰ
ＥＧエンコーダ（作成された動画データはデータ格納部
１０８の画像データ格納エリア１０８ａに格納される）
と、この動画コーディック部１０３によってＭＰＥＧエ
ンコードされ、データ格納部１０８に格納されている動
画データを受け取り、ＭＰＥＧ伸張処理によってＹＵＶ
デジタル動画データへ変換するためのＭＰＥＧデコーダ
を含んでいる。

【００２２】タブレットコントロール部１０９は、手書
きタブレット１１０の駆動制御とペンタッチにより手書
きタブレット１１０から入力された各種情報をデジタル
信号へ変換してＣＰＵ１０１へ転送するための制御を行
う。

【００２３】ＬＣＤコントロール部１１１は、画像処理
部１０４から転送されたＹＵＶデジタル画像データ、あ
るいはデータ格納部１０８中の画像ファイルに対してＪ
ＰＥＧおよびＭＰＥＧ伸張を行ったＹＵＶデジタル画像
データを受け取り、ＲＧＢデジタル信号へ変換したあと
表示部１１２へ出力する処理、あるいは、ＶＲＡＭ１０
７ｃに格納されているＲＧＢデジタルデータを同様に表
示部１１２へ出力する処理を行う。表示部１１２は画像
を表示するための表示器であり、撮影時の電子ビューフ
ァインダーとして撮影画像のモニター画像の出力、ある
いは撮影された静止画、動画のデータの再生表示、さら
にアプリケーション動作時のＧＵＩ画面の出力などが行
われる。この表示部は本実施形態ではＶＧＡ規格（６４
０×４８０ドット）ＴＦＴ液晶表示装置とする。

【００２４】シャッターＳＷ１１３は、撮影動作の開始
を指示するためのシャッターである。このシャッターＳ
Ｗ１１３はスイッチの押下圧によって２段階のスイッチ
ポジションが有り、１段目のポジション（弱押下圧−以
下「半押しポジション」と呼ぶ）の検出で、ホワイトバ
ランス、ＡＥ等のカメラ設定のロック動作が行われ、２
段目のポジション（強押下圧−以下「シャッターＯＮポ
ジション」と呼ぶ）の検出で、撮影が行われる。

【００２５】制御キー群１１４は、アプリケーション実
行中におけるオペレーションをタブレットからのペン入
力に限定せずに、簡単な機能の制御が行えるようにした
補助的キーであり、たとえば、カーソルキー、スクロー
ルキー、決定キー、キャンセルキーなどを含んでいる。

【００２６】電池１１６はリチャーチャブルの２次電池
あるいは乾電池である。また、ＤＣ／ＤＣコンバータ１
１５は、電池１１６からの電源供給を受け、昇圧、レギ
ュレーションを行うことにより複数の電源を作り出し、
ＣＰＵ１０１を初めとする各素子に必要な電圧の電源を
供給している。このＤＣ／ＤＣコンバータ１１５はＣＰ
Ｕ１０１からの制御信号により、各々の電圧の供給の開
始、停止を制御できる。

【００２７】タイマー１１７は、動画撮影時間を計測す
るためものであり、タイマー値をセットした後起動する
とタイマーカウントが始まり、セットしたタイマー値に
なるとタイムアップ信号がＣＰＵ１０１に伝えられる。

【００２８】以上の構成を備える本実施形態における画
像処理装置の動作を、図２に示す同処のフローチャート
を用いて以下、説明する。図２は、本実施形態における
画像処理装置が行うメインの処理のフローチャートであ
る。

【００２９】同図において、ステップＳ２０１で本体の
電源が投入されると、ステップＳ２０２において、現在
のモードが再生モードかどうかのチェックを行う。ここ
で再生モードの場合には処理をステップＳ２０３に移行
し、ステップＳ２０３において、本体に格納されている
静止画像、動画像データの再生処理を実行する。この再
生処理の詳細については、後述する。また、ステップＳ
２０２において再生モードでない場合には処理をステッ
プＳ２０４に移行し、ステップＳ２０４において、内蔵
のカメラモジュールによる静止画像、動画像の撮影処理
が実行される。この撮影処理の詳細についても、後述す
る。また、ステップＳ２０４において撮影モードではな
い場合には処理をステップＳ２０６に移行し、ステップ
Ｓ２０６において、その他の処理が実行される。その他
の処理とは、例えば、画像処理装置本体のシステム設定
や環境設定などの管理用アプリケーションなどである。

【００３０】ステップＳ２０３、Ｓ２０５、Ｓ２０６の
それぞれの処理が終了すると、ステップＳ２０７におい
て、電源ＯＦＦ操作が実行されたかどうかのチェックを
行う。電源ＯＦＦ操作が実行されている場合には、ステ
ップＳ２０８において、電源ＯＦＦ処理が実行される。
また、電源ＯＦＦ操作でない場合には、モード切り替え
操作が実行されているものとみなし、再び、ステップＳ
２０２の再生モードかどうかのチェック処理へ戻る。

【００３１】次に、上述のステップＳ２０３における静
止画、動画再生処理の詳細な説明を図３を用いて以下、
説明する。図３は、ステップＳ２０３における処理の詳
細を表すフローチャートである。

【００３２】同図においてまず、ステップＳ３０１で、
データ格納部１０８に格納されている各種静止画に対応
するサムネイル画像データの一覧表示を行い、オペレー
ターによる操作が行われるまでウエイトしている。この
サムネイル画像データは、静止画像データに対してサム
ネイルサイズ（８０×６０ｄｏｔ）への縮小処理を行
い、ＪＰＥＧ圧縮して作成されたデータである。表示例
についての詳細は後述する。

【００３３】オペレーターによる画像の選択操作は、表
示部１１２と一体になっているタブレット１１０に対す
るペン操作によって指定されたり、制御キー群１１４に
含まれる上下左右カーソルキーの操作によるフォーカス
移動と決定キーによって行うことができる。ここで、ス
テップＳ３０２において、サムネイル画像が選択された
場合には、ステップＳ３０３において、選択されたサム
ネイル画像に対応する動画データが存在しているかどう
かのチェックを行う。このチェック方法についての詳細
は後述する。動画像が存在している場合には処理をステ
ップＳ３０４に移行する。

【００３４】ステップＳ３０４においてはまず、選択さ
れたサムネイル画像に対応する静止画データをデータ格
納部１０８から読み出し、読み出された静止画データを
静止画コーディック部１０２によりＪＰＥＧ伸張処理
し、伸張された静止画データをＱＶＧＡサイズ（３２０
ｘ２４０ｄｏｔ）に縮小処理を行った後表示を行う。さ
らにステップＳ３０５において、選択表示された静止画
像に対応する動画データをデータ格納部１０８より読み
出し、動画コーディック部１０３によるＭＰＥＧ伸張処
理が実行され、さらにＱＱＶＧＡサイズ（１６０ｘ１２
０ｄｏｔ）に縮小処理を行った後、動画再生処理が行わ
れる。つまり、静止画表示、動画再生表示がひとつの画
面で同時に行われるものである。これらの表示例につい
ての詳細も後述する。

【００３５】ここで、ステップＳ３０６において、表示
されている静止画データをペン操作、あるいはカーソル
キー操作によって指示された場合には処理をステップＳ
３０７に移行する。ステップＳ３０７では、この静止画
データをＶＧＡサイズで画面全体に表示が行われる。ま
た、同様に、ステップＳ３０８において、再生されてい
る動画データが指示された場合には、動画データをやは
りＶＧＡサイズで画面全体に再生表示が行われる。それ
から、ステップＳ３１０において、ステップＳ３０７、
Ｓ３０８における再生表示の状態で、この画面がペンタ
ッチされると、再びステップＳ３０４以降の静止画、動
画の同時再生画面の処理へ戻る。また、ステップＳ３１
１において、ペンタッチ操作などにより「戻る」指示が
なされた場合には、再びステップＳ３０１のサムネイル
画像データの一覧表示へ戻る。

【００３６】また、ステップＳ３０３において、選択さ
れた画像に対応する動画データが存在していない場合に
は、ステップＳ３１２において、選択された画像に対応
する静止画データをデータ格納部１０８から読み出し、
静止画コーディック部１０２によるＪＰＥＧ伸張処理が
実行され、伸張された静止画データをＶＧＡサイズ（６
４０ｘ４８０ｄｏｔ）で画面全体に表示が行われる。そ
れからこの画面がペンタッチされると、再びステップＳ
３０１のサムネイル画像データの一覧表示へ戻る。

【００３７】また、ステップＳ３０２において、画像の
選択が行われなかった場合には、ステップＳ３１４にお
いて、削除操作、つまり後述の削除ボタンアイコンへの
ペンタッチが行われた場合には、ステップＳ３１５にお
いて、画像データの削除処理が行われる。

【００３８】次に、上述のステップＳ２０５における静
止画、動画の撮影処理の詳細な説明を図４を用いて以下
説明する。図４は、ステップＳ２０５における処理の詳
細を表すフローチャートである。

【００３９】同図において、ステップＳ４０１では、ま
ず動画撮影モードかどうかのチェックを行い、動画撮影
モードの場合には、ステップＳ４０２以降の動画撮影処
理へ進む。また、動画撮影モードでない場合には通常の
静止画撮影モードということで、ステップＳ４１６以降
の静止画撮影処理へ進む。ここで、動画撮影モードと
は、静止画の撮影（キャプチャー）時に、前後の任意の
時間分の動画を同時に撮影し、記録するような動作モー
ドのことである。

【００４０】動画撮影処理では、まずステップＳ４０２
において、カメラ部１０５から画像処理部１０４を通じ
て出力される１フレーム分のＹＵＶデジタル画像データ
を、ＲＡＭ１０７の画像展開エリア１０７ａに取り込む
処理を行う。次にステップＳ４０３において、キャプチ
ャー指示がなされたかどうか、つまりシャッターＳＷ１
１３が押された（シャッターＳＷ１１３がシャッターＯ
Ｎポジションの状態）かどうかのチェックを行い、ここ
でキャプチャー指示がなされた場合には、ステップＳ４
０６以降の処理へ進む。また、キャプチャー指示がない
場合には、ステップＳ４０４において、ステップＳ４０
２で取り込んだ１フレーム分の画像データに対して、動
画コーディック部１０３によってＭＰＥＧ圧縮処理が実
行され、ＭＰＥＧ圧縮された１フレーム分のデータは、
ステップＳ４０５において、動画バッファ１０７ｄへ一
時的に格納される。動画バッファ１０７ｄはリングバッ
ファとなっており、新しいフレームのＭＰＥＧ圧縮デー
タが作成されるたびに、バッファの最終位置に順次追加
され、バッファがいっぱいになると古いフレームデータ
から捨てられていく。バッファのサイズは動画記録時間
の設定に応じて任意に可変とすることができる。

【００４１】また、ステップＳ４０３において、キャプ
チャー指示がなされた場合には、ステップＳ４０６にお
いて、静止画キャプチャー処理、つまり、ステップＳ４
０２で取り込んだ１フレーム分の画像データに対して、
静止画コーディック部１０２によってＪＰＥＧ圧縮処理
が実行される。次にステップＳ４０７において、時間計
測のためにタイマー１１７にタイマー値（動画撮影時
間）をセットし、タイマー１１７をスタートさせる処理
を実行する。このタイマー値の設定方法は特には限定し
ないが例えば、制御キー群１１４に含まれる「左右」の
カーソルキーを用いてその値を増減させ（増減させた値
は表示部１１２に表示されている）、決定キーを押下す
ることで設定しても良い。

【００４２】ステップＳ４０８では、ステップＳ４０２
と同様に、カメラ部１０５から画像処理部１０４を通じ
て出力される１フレーム分のＹＵＶデジタル画像データ
を、ＲＡＭ１０７の画像展開エリア１０７ａに取り込む
処理を行う。さらにステップＳ４０９において、ステッ
プＳ４０４と同様に、ステップＳ４０８で取り込んだ１
フレーム分の画像データに対して、動画コーディック部
１０３によってＭＰＥＧ圧縮処理が実行される。ＭＰＥ
Ｇ圧縮された１フレーム分のデータは、ステップＳ４１
０において、動画バッファ１０７ｄの最後尾へ追加格納
される。それからステップＳ４１１において、ステップ
Ｓ４０７で起動したタイマー１１７がタイムアップした
かどうかをチェックし、まだタイムアップしていない場
合、つまり、動画撮影時間がまだ残っている場合には、
再びステップＳ４０８へ戻り、フレームデータのＭＰＥ
Ｇ圧縮処理を繰り返す。

【００４３】ステップＳ４１１においてタイマー１１７
がタイムアップした場合には、ステップＳ４１２におい
て、まず、ステップＳ４０６でＪＰＥＧ圧縮されたデー
タに対して、所定のＪＰＥＧヘッダなどのデータを付加
し、ＪＰＥＧファイルとして画像データ格納エリア１０
８ａに保存する処理を実行する。同時にステップＳ４１
３において、キャプチャーされた静止画データに対して
縮小処理を行い、さらにＪＰＥＧ圧縮処理によるサムネ
イルデータの作成を行い、同様にＪＰＥＧファイルとし
て画像データ格納エリア１０８ａに保存する。次に、ス
テップＳ４１４において、ステップＳ４０５、Ｓ４１０
において格納されている複数フレームのＭＰＥＧ圧縮デ
ータに対して、所定のＭＰＥＧヘッダーなどのデータを
付加し、ＭＰＥＧファイルとして画像データ格納エリア
１０８ａに同様に保存する処理を実行する。これらのＪ
ＰＥＧファイル、ＭＰＥＧファイルは同じファイル名
で、拡張子がそれぞれ「．ＪＰＧ」「．ＭＰ４」として
保存される。以上のような処理の流れにより、ＪＰＥＧ
静止画ファイルとその前後の任意の時間のＭＰＥＧ動画
ファイルとして、同じファイル名で関連付けられて作成
されることとなる。

【００４４】また、サムネイルデータには、作成するの
に用いた静止画データのファイル名の情報を付加する
（ステップＳ４１３における処理）。このようにするこ
とで、ステップＳ３０３においてサムネイル画像を選択
すると、選択されたサムネイル画像のデータに付加され
た情報を参照することで、静止画データ（動画像デー
タ）のファイル名を特定できるので、特定したファイル
名と同じファイル名を有する動画データが存在するか否
かのチェックを行うことができる。以下、サムネイルデ
ータから対応する静止画データや動画データを特定す
る、もしくはその存在のチェックを行う際にはこのよう
にして行う。

【００４５】それから、ステップＳ４１５において、オ
ペレーターによる終了操作が行われた場合には（例えば
画面に「メイン画面に戻る」アイコンを設け、このアイ
コンをペンタッチした場合には）、撮影処理を終了す
る。終了操作が行われなかった場合には、ステップＳ４
０２へ戻り、フレームデータの読み込み処理が再び開始
される。

【００４６】一方、ステップＳ４０１において動画撮影
モードでない場合、ステップＳ４１６において、カメラ
部１０５から画像処理部１０４を通じて出力されるＹＵ
Ｖデジタル画像データを、連続的に表示部１１２へ出力
する処理が行われ、電子ビューファインダーによる撮影
対象画像のモニター表示となる。ここで、ステップＳ４
１７において、キャプチャー指示がなされたかどうか、
つまりシャッターＳＷ１１３が押された（シャッターＳ
Ｗ１１３がシャッターＯＮポジションの状態）かどうか
のチェックを行い、ここでキャプチャー指示がなされた
場合には、ステップＳ４１８において、静止画キャプチ
ャー処理が行われる。つまり、シャッターＳＷ１１３が
押下された時点で表示部１１２に表示されている１フレ
ームの画像データをＲＡＭ１０７の画像展開エリア１０
７ａに格納する処理が実行される。次にステップＳ４１
９において、画像展開エリア１０７ａに格納されている
１フレーム画像データに対して、静止画コーディック部
１０２によってＪＰＥＧ圧縮処理が実行される。ＪＰＥ
Ｇ圧縮された１フレーム分のデータは、ステップＳ４２
０において画像データ格納部１０８へＪＰＥＧファイル
として上述の通り作成され、格納される。そして、ステ
ップＳ４２１において、キャプチャーされた静止画デー
タに対して縮小処理を行い、さらにＪＰＥＧ圧縮処理に
よるサムネイルデータの作成を行い、同様にＪＰＥＧフ
ァイルとして画像データ格納エリア１０８ａに保存す
る。このとき、サムネイルデータには静止画データのフ
ァイル名の情報を添付する。そして、ステップＳ４２２
において、オペレータによる終了操作が行われた場合に
は、撮影処理を終了する。終了操作が行われなかった場
合には、ステップＳ４１６へ戻り、電子ビューファイン
ダーによるモニター処理が再び開始される。

【００４７】図５は、ステップＳ３０１におけるサムネ
イル画像データの一覧表示の画面表示例を表わす図であ
る。同図に示す画面は表示部１１２に表示される。この
サムネイル画像データは、データ格納部１０８に格納さ
れている各種静止画に対応するサムネイル静止画像であ
り、８０×６０ｄｏｔの縮小画像のＪＰＥＧ圧縮データ
である。また、これらは、図４を用いて説明したよう
に、静止画撮影処理の過程で同時作成され、データ格納
部１０８に格納されるものである。

【００４８】同図において、５０１はサムネイル画像の
一覧表示領域であり、各静止画像データに対するサムネ
イル静止画データが、作成された日時順（この順序に限
定されるものではない）に格子状に並べて表示されてい
る。この表示領域において、５０２は動画データを持つ
（拡張子は異なるが、同じファイル名の動画像データが
存在する）静止画データに対するサムネイル画像データ
が表示される領域で、対象画像が動画データを持つこと
を示すマーク５０４が重ねて表示されている。しかし、
動画像を持つ静止画を示す方法は同図に示すマークによ
る方法に限定されるものではない。

【００４９】また、５０３は静止画データのみのデータ
に対するサムネイル画像データが表示される領域であ
り、対象画像が動画データを持っていないのでマーク表
示は行われない。このマーク表示５０４が表示されてい
るかどうかを見ることにより、オペレータはサムネイル
画像に対応するデータが動画データを持つ静止画データ
なのかどうかを容易に判断することができる。

【００５０】５０５はサムネイル画像データのひとつが
指定されている状態であることを表わすためのフォーカ
ス表示である。このフォーカス表示は、制御キー群１１
４に含まれる上下左右カーソルキーを操作することによ
り、上下、左右に任意に移動することができ、フォーカ
スをあてて決定キーを押下、または、フォーカスが当た
っているサムネイル画像領域をペンによりタッチするこ
とで、フォーカスが当たっているサムネイル画像の選択
を行うことができる。あるいはペンによって、表示画面
上の任意のサムネイル画像が表示されている領域をダブ
ルタッチしても、同様にサムネイル画像の選択を行うこ
とができる。

【００５１】５０６、５０７はそれぞれ上下スクロール
を指示する矢印表示を表わす部分であり、サムネイル画
像データが１画面に入りきれない場合には、この矢印を
ペンタッチするとサムネイル画像一覧が上スクロール、
下スクロールするものである。

【００５２】また、５０８は削除ボタンアイコンであ
る。このアイコンをペンタッチすると、選択されている
画像（フォーカスの当たっている画像）の削除を実行す
る。

【００５３】次に、図６に、図５に示すサムネイル画像
一覧表示から動画データを持つ静止画データに対するサ
ムネイル画像が選択された場合の画面表示例を表わす。
図６に示す画面は表示部１１２に表示される。

【００５４】同図において６０１は静止画表示領域で、
選択されたサムネイル画像に対応する静止画像データを
読み出し、ＪＰＥＧ伸張処理を行った後縮小処理を行
い、ＱＶＧＡサイズ（３２０ｘ２４０ｄｏｔ）でこの領
域に表示する。また、６０２は静止画像データに対応す
る動画像データの再生表示が行われる領域で、対象とな
る動画像データを読み出し、ＭＰＥＧ伸張処理を行った
後縮小処理を行い、ＱＱＶＧＡサイズ（１６０ｘ１２０
ｄｏｔ）でこの領域に連続的に動画再生表示を行う。

【００５５】６０３は「戻る」アイコンの表示領域であ
り、このアイコンをペンタッチすることにより、図５の
サムネイル一覧表示へ戻る。また、６０４は再生ボタン
アイコンの表示領域であり、このアイコンをペンタッチ
することにより、動画再生がスタートする。さらに、６
０５は停止ボタンアイコンの表示領域であり、このアイ
コンをペンタッチすることにより、動画再生が停止す
る。

【００５６】この画面において、静止画表示領域６０１
をペンタッチすると、ＶＧＡサイズ（６４０ｘ４８０ｄ
ｏｔ）で画面いっぱいに静止画データが表示される。ま
た、動画表示領域６０２をペンタッチすると、本来記録
されている動画サイズで動画データが再生表示される。

【００５７】本実施形態では、静止画としてＪＰＥＧ圧
縮によるデジタルデータ、動画としてＭＰＥＧ４圧縮に
よるデジタルデータを例にあげ説明したが、他の静止
画、動画圧縮方式、あるいは非圧縮によるデータを利用
しても同様な効果が得られるのは言うまでもない。例え
ば、静止画としては、ＲＧＢビットマップデータ、ＧＩ
Ｆ圧縮データ、ＰＩＮＧ圧縮データなど各種フォーマッ
ト、また、動画としては、静止画より圧縮率の高いＭＰ
ＥＧ１、ＭＰＥＧ２圧縮データなども含まれる。

【００５８】さらに本実施形態では、アプリケーション
を実行するためのオペレーションとして、手書きタブレ
ットをペン操作することによって行うような場合につい
て説明したが、これに限定されず、キー操作によるオペ
レーションでもよい。例えば、サムネイル画像の指定、
選択などの操作は、上下左右カーソルキーによってフォ
ーカス枠を移動させることにより、選択されているサム
ネイル画像を切り替え、さらに決定キーで選択されたサ
ムネイル画像データを指定するようなユーザーインター
フェースも考えられる。

【００５９】［第２の実施形態］第１の実施形態は、静
止画データの圧縮方式としてＪＰＥＧ圧縮、動画データ
の圧縮方式としてＪＰＥＧよりも圧縮率の高いＭＰＥＧ
圧縮を用いた。しかし、これに限定されるものではな
く、動画データの格納ファイルサイズを小さくするため
には、画質を落として圧縮率を上げる方法だけではな
く、画像の大きさを縮小する方法も考えられる。本実施
形態では、フレームデータの取り込み時に画素数を間引
きして、画像の縮小処理を行った後に動画圧縮処理を行
うような実施形態について説明する。

【００６０】図７は、本実施形態における静止画、動画
データの撮影処理の詳細を表わすフローチャートであ
る。

【００６１】同図においてステップＳ７０１、Ｓ７０
２，Ｓ７０３は夫々、ステップＳ４０１，Ｓ４０２，Ｓ
４０３と同じ処理である。そして、ステップＳ７０３に
おいて、キャプチャー指示がなされた場合には、ステッ
プＳ７０７以降の処理へ進む。また、キャプチャー指示
がない場合には、ステップＳ７０４において、ステップ
Ｓ７０２で取り込んだ１フレーム分の画像データに対し
て、縮小処理を行い、ＱＱＶＧＡサイズ（１６０ｘ１２
０ｄｏｔ）の画像データへ変換する処理を実行する。そ
してステップＳ７０５において、縮小された画像データ
に対して、静止画コーディック部１０２によってＪＰＥ
Ｇ圧縮処理が実行される。ＪＰＥＧ圧縮された１フレー
ム分のデータは、ステップＳ７０６において、動画バッ
ファ１０７ｄへ一時的に格納される。

【００６２】また、ステップＳ７０３において、キャプ
チャー指示がなされた場合には、ステップＳ７０７にお
いて、静止画キャプチャー処理、つまり、ステップＳ７
０２で取り込んだ１フレーム分の画像データに対して、
静止画コーディック部１０２によってＪＰＥＧ圧縮処理
が実行される。次にステップＳ７０８において、時間計
測のためにタイマー１１７にタイマー値（動画撮影時
間）をセットし、タイマーをスタートさせる処理を実行
する。

【００６３】ステップＳ７０９では、ステップＳ７０２
と同様に、カメラ部１０５から画像処理部１０４を通じ
て出力される１フレーム分のＹＵＶデジタル画像データ
を、ＲＡＭ１０７の画像展開エリア１０７ａに取り込む
処理を行う。さらにステップＳ７１０において、ステッ
プＳ７０４と同様に、ステップＳ７０９で取り込んだ１
フレーム分の画像データに対して、縮小処理を行い、Ｑ
ＱＶＧＡサイズ（１６０ｘ１２０ｄｏｔ）の画像データ
へ変換する処理を実行する。そしてステップＳ７１１に
おいて、縮小された画像データに対して、静止画コーデ
ィック部１０３によってＪＰＥＧ圧縮処理が実行され、
ＪＰＥＧ圧縮された１フレーム分のデータは、ステップ
Ｓ７１２において、動画バッファ１０７ｄの最後尾へ追
加格納される。それからステップＳ７１３において、ス
テップＳ７０８で起動したタイマー１１７がタイムアッ
プしたかどうかをチェックし、まだタイムアップしてい
ない場合、つまり、動画撮影時間がまだ残っている場合
には、再びステップＳ７０９へ戻り、フレームデータの
ＪＰＥＧ圧縮処理を繰り返す。

【００６４】ステップＳ７１３においてタイマー１１７
がタイムアップした場合には、ステップＳ７１４におい
て、まず、ステップＳ７０７でＪＰＥＧ圧縮されたデー
タに対して、所定のＪＰＥＧヘッダーなどのデータを付
加し、ＪＰＥＧファイルとして画像データ格納エリア１
０８ａに保存する処理を実行する。同時にキャプチャー
された静止画データに対して縮小処理を行い、さらにス
テップＳ７１５において、ＪＰＥＧ圧縮処理によるサム
ネイルデータの作成を行い、同様に画像データ格納エリ
ア１０８ａに保存される。次に、ステップＳ７１６にお
いて、ステップＳ７０６、Ｓ７１２において格納されて
いる複数フレームのＪＰＥＧ圧縮データに対して、所定
のＪＰＥＧヘッダーやファイルフォーマットに関するデ
ータなどを付加し、Ｍｏｔｉｏｎ−ＪＰＥＧ（以下Ｍ−
ＪＰＥＧと呼ぶ）ファイルとして画像データ格納エリア
１０８ａに同様に保存する処理を実行する。これらのＪ
ＰＥＧファイル、Ｍ−ＪＰＥＧファイルは同じファイル
名で、拡張子がそれぞれ「．ＪＰＧ」「．ＭＪＰＧ」と
して保存される。以上のような処理の流れにより、１つ
のＪＰＥＧ静止画ファイルとその前後の任意の時間のＭ
−ＪＰＥＧ動画ファイルとして、同じファイル名で関連
付けられて作成されることとなる。

【００６５】また第１の実施形態と同様に、サムネイル
データには、このデータを作成するのに用いた静止画デ
ータのファイル名の情報を付加する。このようにするこ
とで、サムネイルデータを選択すると、選択されたサム
ネイルデータに付加された情報を参照することで、動画
像データのファイル名を特定できるので、特定したファ
イル名と同じファイル名を有する動画データが存在する
か否かのチェックを行うことができる。

【００６６】それから、ステップＳ７１７において、ス
テップＳ４１５と同様に、オペレーターによる終了操作
が行われた場合には、撮影処理を終了する。終了操作が
行われなかった場合には、ステップＳ７０２へ戻り、フ
レームデータの読み込み処理が再び開始される。

【００６７】ステップＳ７０１の動画撮影モードのチェ
ックにおいて、動画撮影モードでない場合には、ステッ
プＳ７１８において、通常の静止画撮影処理が実行され
る。処理の内容は、ステップＳ４１６〜Ｓ４２２と同様
の処理である。

【００６８】［第３の実施形態］本実施形態では、削除
アイコンが操作された場合の処理（ステップＳ３１５に
おける処理）について説明する。

【００６９】図８は、ステップＳ３１５における削除処
理の詳細を表わすフローチャートである。同図におい
て、ステップＳ８０１では、削除指定されたサムネイル
データに対して、動画データが存在するかどうかをチェ
ックする。チェックする方法としては第１の実施形態で
も説明したように、指定したサムネイルデータに付加さ
れた情報を参照して、ファイル名を特定し、特定したフ
ァイル名の動画像データが存在するか否かをチェックす
る。

【００７０】動画データが存在した場合、ステップＳ８
０２において、削除モードの選択メニュー表示を行う。
この削除モードとは、動画データ、静止画データをすべ
て削除するような「全削除モード」、および動画データ
のみを削除するような「動画削除モード」の２つのモー
ドであり、これらのモードがメニュー表示されている。
ここで、ステップＳ８０３において、全削除モードが選
択された場合には、ステップＳ８０４において、まず指
定されたサムネイルデータに対応する動画データファイ
ルを読み出し、その削除処理が実行される。続いてステ
ップＳ８０５において、動画データと関連付けられた静
止画データファイル（同じファイル名で拡張子が．ＪＰ
Ｇのファイル）を読み出し、その削除処理が実行され
る。また、削除された動画データ、静止画データに対応
するサムネイルデータに付加された情報も同様に削除
し、処理が終了する。

【００７１】ステップＳ８０３において、全削除モード
が選択されなかった場合には、ステップＳ８０６におい
て、動画削除モードが選択されたかどうかをチェック
し、選択された場合には、ステップＳ８０７において、
ステップＳ８０４と同様に動画データファイルの削除処
理が実行され、処理を終了する。また、ステップＳ８０
６において、動画削除モードが選択されなかった場合に
は、ステップＳ８０８において、削除キャンセル操作が
行われたかどうかをチェックし、キャンセル操作が行わ
れた場合には、削除処理を終了し、行われなかった場合
には再びオペレータによる操作アクション待ちへ戻る。
また、ステップＳ８０１において、動画データが存在し
なかった場合には、ステップＳ８０５において、静止画
データファイルを読み出し、その削除処理を実行し終了
する。

【００７２】［第４の実施形態］第１乃至３の実施形態
では、図５で示したサムネイル画像データの一覧表示に
おいては、静止画データに対するサムネイル画像のみが
一覧表示されるだけであった。

【００７３】本実施形態では、サムネイル画像一覧表示
において、静止画データ、および動画データの所定フレ
ームのサムネイル画像が同時に一覧表示されるような実
施形態について説明する。

【００７４】図９は、本実施形態による、サムネイル画
像データの一覧表示の画面表示例を表わす図である。こ
のサムネイル静止画データは、データ格納部１０８に格
納されている各種静止画に対応するサムネイル画像と、
動画に対応するサムネイル画像であり、図４において説
明したように、静止画撮影処理の過程で同時作成され、
データ格納部１０８に格納されているものである。ま
た、動画サムネイルデータについては、サムネイル表示
の際に、データ格納部１０８に格納されている動画デー
タを読み出し、所定のフレームに対してサムネイルサイ
ズに縮小処理を行った後、静止画サムネイルデータとし
て表示を行っている。

【００７５】図９において９０１はサムネイル画像の一
覧表示領域であり、静止画像データ、あるいは動画デー
タが作成された日時順に格子状に並べて表示されてい
る。この表示領域において、９０２は静止画データに対
するサムネイルデータが表示されている部分であり、１
２０×９０ｄｏｔのサムネイルサイズである。また、９
０３、９０４は動画データに対するサムネイルデータが
表示されている部分であり、９０３は動画の先頭フレー
ムに対するサムネイルデータ、９０４は動画の最終フレ
ームに対するサムネイルデータを示している。しかしこ
れに限定されるものではなく、任意のフレームに対する
サムネイルデータでもよい。この動画に対するサムネイ
ルデータは６０×４５ｄｏｔのサムネイルサイズとなっ
ている。また、９０５は静止画サムネイルのみが表示さ
れている領域を示しており、このデータには動画データ
が存在してないことを示すものである。

【００７６】９０６、９０７はそれぞれ上下スクロール
を指示する矢印表示を表わす部分であり、サムネイル画
像データが１画面に入りきれない場合には、この矢印を
ペンタッチするとサムネイル画像一覧が上スクロール、
下スクロールするものである。

【００７７】また、９０８は削除ボタンアイコンであ
る。このアイコンをペンタッチすると、選択されている
画像の削除を実行する。

【００７８】［第５の実施形態］第１乃至４の実施形態
では、静止画データ、動画データの関連付けは、同じフ
ァイル名で拡張子を違えたファイルとすることにより行
っていた。しかし、撮影データ間の関連付けについては
これに限定されるものではなく、例えば、それぞれ別の
名称で保存されたファイルに対して、その関連を記述し
た管理ファイルなどを作成することによっても実現でき
る。この管理ファイルの構成例を図１０に示す。同図に
おいて同行に記載された静止画データのファイル、動画
データのファイルが関連したものであることを示す。ま
た、静止画データ、動画データを多重化した上で一つの
ファイルに保存するような方法も考えられることは言う
までもない。

【００７９】また、サムネイルデータにおいても、第１
乃至４の実施形態では、静止画データ、動画データのフ
ァイル名を添付することで、選択したサムネイルデータ
に対応する静止画データ、動画データを特定することが
できたが、これに限定されるものではない。つまり、上
述の管理ファイルにこのサムネイルデータを含ませ、サ
ムネイルデータ、静止画データ、動画データの夫々の関
連づけを行っても良い。具体的には図１０に例示した管
理ファイルの構成において、対応する静止画データのフ
ァイル、もしくは動画データのファイルと同行にサムネ
イル画像のファイル名を記載すればよい。また上述の通
り、サムネイルデータ、静止画データ、動画データを１
つのファイルに多重化してもよい。

【００８０】尚、以上の管理ファイル、もしくはサムネ
イルデータ、静止画データ、動画データを一つのファイ
ルに多重化する処理は、ＣＰＵ１０１により、行われ
る。

【００８１】［その他の実施の形態］さらに、本発明は
上記実施形態を実現するための装置及び方法のみに限定
されるものではなく、上記システム又は装置内のコンピ
ュータ（CPUあるいはMPU）に、上記実施形態を実現する
ためのソフトウエアのプログラムコードを供給し、この
プログラムコードに従って上記システムあるいは装置の
コンピュータが上記各種デバイスを動作させることによ
り上記実施形態を実現する場合も本発明の範疇に含まれ
る。

【００８２】またこの場合、前記ソフトウエアのプログ
ラムコード自体が上記実施形態の機能を実現することに
なり、そのプログラムコード自体、及びそのプログラム
コードをコンピュータに供給するための手段、具体的に
は上記プログラムコードを格納した記憶媒体は本発明の
範疇に含まれる。

【００８３】この様なプログラムコードを格納する記憶
媒体としては、例えばフロッピー（登録商標）ディス
ク、ハードディスク、光ディスク、光磁気ディスク、CD
-ROM、磁気テープ、不揮発性のメモリカード、ROM等を
用いることができる。

【００８４】また、上記コンピュータが、供給されたプ
ログラムコードのみに従って各種デバイスを制御するこ
とにより、上記実施形態の機能が実現される場合だけで
はなく、上記プログラムコードがコンピュータ上で稼働
しているOS(オペレーティングシステム)、あるいは他の
アプリケーションソフト等と共同して上記実施形態が実
現される場合にもかかるプログラムコードは本発明の範
疇に含まれる。

【００８５】更に、この供給されたプログラムコード
が、コンピュータの機能拡張ボードやコンピュータに接
続された機能拡張ユニットに備わるメモリに格納された
後、そのプログラムコードの指示に基づいてその機能拡
張ボードや機能格納ユニットに備わるCPU等が実際の処
理の一部または全部を行い、その処理によって上記実施
形態が実現される場合も本発明の範疇に含まれる。

【００８６】

【発明の効果】以上説明したように、本発明によれば、
静止画（フレーム画像）、前記静止画のサムネイル画
像、及び前記静止画に対応する動画像とを夫々関連づけ
て格納することができるので、関連する前記動画像、前
記静止画、サムネイル画像を瞬時に再生することができ
る。また、前記再生処理により所望する動画像データの
サーチを瞬時に行うことができるという効果も奏する。

【図面の簡単な説明】

【図１】本発明の第１の実施形態における画像処理装置
の基本構成を示すブロック図である。

【図２】本発明の第１の実施形態における画像処理装置
が行うメインの処理のフローチャートである。

【図３】ステップＳ２０３における静止画、動画の再生
処理の詳細を示すフローチャートである。

【図４】ステップＳ２０５における静止画、動画の撮影
処理の詳細を示すフローチャートである。

【図５】ステップＳ３０１におけるサムネイル画像デー
タの一覧表示の画面表示例を表す図である。

【図６】図５に示すサムネイル画像一覧表示から動画デ
ータを持つ静止画データに対するサムネイル画像が選択
された場合の画面表示例を示す図である。

【図７】本発明の第２の実施形態における静止画、動画
データの撮影処理の詳細を表すフローチャートである。

【図８】ステップＳ３１５における削除処理の詳細を表
すフローチャートである。

【図９】本発明の第４の実施形態におけるサムネイル画
像データの一覧表示の画面表示例を表す図である。

【図１０】本発明の第５の実施形態における管理ファイ
ルの構成を示す図である。

Claims (39)

【特許請求の範囲】
1. 【請求項１】 連続的なフレーム画像によって構成され
   る動画像データを入力する入力手段と、 前記入力手段により入力された動画像データから所望の
   前記フレーム画像を指示する指示手段と、 前記指示手段により指示された前記フレーム画像のサム
   ネイル画像を生成するサムネイル画像生成手段と、 前記動画像データと、前記指示手段により指示されたフ
   レーム画像の画像データと、前記サムネイル画像生成手
   段により生成されたサムネイル画像の画像データとを夫
   々関連付けて格納する格納手段とを有することを特徴と
   する画像処理装置。
2. 【請求項２】 更に、前記動画像データの各フレームを
   圧縮する動画圧縮手段を備え、 前記格納手段は、前記動画圧縮手段によるフレーム毎の
   圧縮データを格納することを特徴とする請求項１に記載
   の画像処理装置。
3. 【請求項３】 前記動画圧縮手段は、動画像像データの
   各フレームに対してＭＰＥＧ圧縮処理を行うことを特徴
   とする請求項２に記載の画像処理装置。
4. 【請求項４】 更に、前記動画像データの各フレームの
   サイズを縮小し、縮小した各フレームに対して圧縮を行
   う動画縮小圧縮手段を備え、 前記格納手段は、前記動画縮小圧縮手段によるフレーム
   毎の圧縮データを格納することを特徴とする請求項１に
   記載の画像処理装置。
5. 【請求項５】 前記動画縮小圧縮手段は、前記動画像デ
   ータの各フレームの画像の画素数を間引くことで当該画
   像のサイズを縮小し、縮小した各フレームに対してＪＰ
   ＥＧ圧縮処理を行うことを特徴とする請求項４に記載の
   画像処理装置。
6. 【請求項６】 更に、前記指示手段により指示されたフ
   レーム画像の画像データ、前記サムネイル画像の画像デ
   ータを圧縮する静止画圧縮手段を備えることを特徴とす
   る請求項１乃至５のいずれか１項に記載の画像処理装
   置。
7. 【請求項７】 前記静止画圧縮手段は、前記指示手段に
   より指示されたフレーム画像の画像データ、前記サムネ
   イル画像の画像データに対してＪＰＥＧ圧縮を行うこと
   を特徴とする請求項６に記載の画像処理装置。
8. 【請求項８】 更に、前記動画像データのファイルを作
   成する第１のファイル作成手段と、 前記指示手段により指示されたフレーム画像の画像デー
   タと、前記サムネイル画像の画像データのファイルを作
   成する第２のファイル作成手段とを備えることを特徴と
   する請求項１に記載の画像処理装置。
9. 【請求項９】 前記第１のファイル作成手段により作成
   されるファイルはＭＰＥＧファイルであることを特徴と
   する請求項８に記載の画像処理装置。
10. 【請求項１０】 前記第１のファイル作成手段により作
    成されるファイルはＭｏｔｉｏｎ−ＪＰＥＧであること
    を特徴とする請求項８に記載の画像処理装置。
11. 【請求項１１】 前記第２のファイル作成手段により作
    成されるファイルはＪＰＥＧファイルであることを特徴
    とする請求項８に記載の画像処理装置。
12. 【請求項１２】 前記第１のファイル作成手段、及び前
    記第２のファイル作成手段は、同じファイル名を、前記
    第１のファイル作成手段により作成される動画のファイ
    ル、前記第２のファイル作成手段により作成される静止
    画のファイルに対して付けることで、関連づけることを
    特徴とする請求項８乃至１１のいずれか１項に記載の画
    像処理装置。
13. 【請求項１３】 更に、前記第２のファイル作成手段
    は、前記第２のファイル作成手段により作成されるサム
    ネイル画像のファイルに、当該サムネイル画像を作成す
    るのに用いたフレーム画像を特定する情報を付加するこ
    とで、関連づけることを特徴とする請求項８乃至１２の
    いずれか１項に記載の画像処理装置。
14. 【請求項１４】 更に、前記第１のファイル作成手段に
    より作成されたファイル、前記第２のファイル作成手段
    により作成されたファイルとの関連を記述した管理ファ
    イルを作成する管理ファイル作成手段を備え、 前記管理ファイルにより、前記第１のファイル作成手段
    により作成されたファイルと、前記第２のファイル作成
    手段により作成されたファイルとを関連づけることを特
    徴とする請求項８乃至１１のいずれか１項に記載の画像
    処理装置。
15. 【請求項１５】 更に、前記第１のファイル作成手段に
    より作成されたファイルと、前記第２のファイル作成手
    段により作成されたファイルとを多重化して一つのファ
    イルにする多重化手段を備えることを特徴とする請求項
    ８乃至１１のいずれか１項に記載の画像処理装置。
16. 【請求項１６】 前記入力手段には動画像データを一時
    記憶する記憶手段を有し、前記記憶手段に記憶される動
    画像データのデータサイズが、前記記憶手段の記憶容量
    を越えた場合、 前記記憶手段は、記憶しているフレーム毎の動画像デー
    タのうち、記憶したタイミングの古い順にフレームのデ
    ータを破棄することを特徴とする請求項１に記載の画像
    処理装置。
17. 【請求項１７】 前記入力手段は、前記動画像データを
    一時記憶する記憶手段を含み、前記格納手段は、前記サ
    ムネイル画像が生成された後、前記記憶手段に記憶され
    た動画像データと、前記指示手段により指示されたフレ
    ーム画像の画像データと、前記サムネイル画像生成手段
    により生成されたサムネイル画像の画像データとを夫々
    関連付けて格納することを特徴とする請求項１乃至１６
    のいずれか１項に記載の画像処理装置。
18. 【請求項１８】 前記入力手段は被写体像を撮像して前
    記動画像データを出力する撮像手段を含むことを特徴と
    する請求項１乃至１７のいずれか１項に記載の画像処理
    装置。
19. 【請求項１９】 静止画及び／又は動画を再生する画像
    処理装置であって、 少なくとも一つ以上の静止画、及び当該静止画に対応す
    るサムネイル画像、及び当該静止画のうち、いずれかの
    静止画に対応する動画を格納する格納手段と、 前記サムネイル画像を一覧表示する表示手段と、 前記表示手段に表示されたサムネイル画像のうち、いず
    れか１つを選択する選択手段とを備え、 前記表示手段は、前記選択手段により選択されたサムネ
    イル画像に対応する静止画を前記格納手段から選択して
    表示すると共に、当該静止画に対応する動画が前記格納
    手段に格納されている場合、当該動画を再生表示するこ
    とを特徴とする画像処理装置。
20. 【請求項２０】 前記格納手段が格納する、少なくとも
    一つ以上の静止画、及び当該静止画に対応するサムネイ
    ル画像、及び当該静止画のうち、いずれかの静止画に対
    応する動画はいずれも圧縮されており、 圧縮された静止画、圧縮されたサムネイル画像、圧縮さ
    れた動画を伸長する伸長手段を更に備え、 前記表示手段は、伸長された静止画、サムネイル画像、
    動画のうち、少なくとも一つ以上を表示することを特徴
    とする請求項１９に記載の画像処理装置。
21. 【請求項２１】 前記表示手段に表示されるサムネイル
    画像に対応する静止画に、対応する動画が前記格納手段
    に存在する場合、 前記表示手段は、前記サムネイル画像にマークを付加し
    て表示することを特徴とする請求項１９又は２０に記載
    の画像処理装置。
22. 【請求項２２】 前記表示手段に表示されるサムネイル
    画像に対応する静止画に、対応する動画が前記格納手段
    に存在する場合、 更に、前記動画の所定フレームのサムネイル画像を作成
    するサムネイル画像作成手段を備え、 前記表示手段は前記サムネイル画像、前記静止画、前記
    動画と共に、前記サムネイル作成手段により作成された
    サムネイル画像を表示することを特徴とする請求項１９
    乃至２１のいずれか１項に記載の画像処理装置。
23. 【請求項２３】 更に、前記表示手段は、前記選択手段
    により選択されたサムネイル画像に対応する静止画に対
    応する動画が前記格納手段に格納されていない場合、前
    記静止画を拡大表示することを特徴とする請求項１９乃
    至２２のいずれか１項に記載の画像処理装置。
24. 【請求項２４】 更に、前記選択手段により選択された
    サムネイル画像に対応した静止画と当該静止画に対応す
    る動画を削除するか、もしくは当該動画のみを削除する
    かを指示する削除指示手段と、 前記削除指示手段による指示に基づいて、前記選択手段
    により選択されたサムネイル画像に対応した静止画と当
    該静止画に対応する動画、もしくは当該動画のみを削除
    する削除手段とを備えることを特徴とする請求項１９乃
    至２３のいずれか１項に記載の画像処理装置。
25. 【請求項２５】 連続的なフレーム画像によって構成さ
    れる動画像データを入力する入力工程と、 前記入力工程で入力された動画像データから所望の前記
    フレーム画像を指示する指示工程と、 前記指示工程で指示された前記フレーム画像のサムネイ
    ル画像を生成するサムネイル画像生成工程と、 前記動画像データと、前記指示工程で指示されたフレー
    ム画像の画像データと、前記サムネイル画像生成工程で
    生成されたサムネイル画像の画像データとを夫々関連付
    けて格納する格納工程とを有することを特徴とする画像
    処理方法。
26. 【請求項２６】 更に、前記動画像データの各フレーム
    を圧縮する動画圧縮工程を備え、 前記格納工程では、前記動画圧縮工程によるフレーム毎
    の圧縮データを格納することを特徴とする請求項２５に
    記載の画像処理方法。
27. 【請求項２７】 更に、前記動画像データの各フレーム
    のサイズを縮小し、縮小した各フレームに対して圧縮を
    行う動画縮小圧縮工程を備え、 前記格納工程では、前記動画縮小圧縮工程によるフレー
    ム毎の圧縮データを格納することを特徴とする請求項２
    ５に記載の画像処理方法。
28. 【請求項２８】 更に、前記指示工程で指示されたフレ
    ーム画像の画像データ、前記サムネイル画像の画像デー
    タを圧縮する静止画圧縮工程を備えることを特徴とする
    請求項２５乃至２７のいずれか１項に記載の画像処理方
    法。
29. 【請求項２９】 更に、前記動画像データのファイルを
    作成する第１のファイル作成工程と、 前記指示工程で指示されたフレーム画像の画像データ
    と、前記サムネイル画像の画像データのファイルを作成
    する第２のファイル作成工程とを備えることを特徴とす
    る請求項２５に記載の画像処理方法。
30. 【請求項３０】 前記第１のファイル作成工程、及び前
    記第２のファイル作成工程では、同じファイル名を、前
    記第１のファイル作成工程で作成される動画のファイ
    ル、前記第２のファイル作成工程で作成される静止画の
    ファイルに対して付けることで、関連づけることを特徴
    とする請求項２９に記載の画像処理方法。
31. 【請求項３１】 更に、前記第２のファイル作成工程で
    は、前記第２のファイル作成工程で作成されるサムネイ
    ル画像のファイルに、当該サムネイル画像を作成するの
    に用いたフレーム画像を特定する情報を付加すること
    で、関連づけることを特徴とする請求項２９又は３０に
    記載の画像処理方法。
32. 【請求項３２】 更に、前記第１のファイル作成工程で
    作成されたファイル、前記第２のファイル作成工程で作
    成されたファイルとの関連を記述した管理ファイルを作
    成する管理ファイル作成工程を備え、 前記管理ファイルにより、前記第１のファイル作成工程
    で作成されたファイルと、前記第２のファイル作成工程
    で作成されたファイルとを関連づけることを特徴とする
    請求項２９に記載の画像処理方法。
33. 【請求項３３】 更に、前記第１のファイル作成工程で
    作成されたファイルと、前記第２のファイル作成工程で
    作成されたファイルとを多重化して一つのファイルにす
    る多重化工程を備えることを特徴とする請求項２９に記
    載の画像処理方法。
34. 【請求項３４】 静止画及び／又は動画を再生する画像
    処理方法であって、 少なくとも一つ以上の静止画、及び当該静止画に対応す
    るサムネイル画像、及び当該静止画のうち、いずれかの
    静止画に対応する動画を所定の格納手段に格納する格納
    工程と、 前記サムネイル画像を一覧表示する表示工程と、 前記表示工程で表示されたサムネイル画像のうち、いず
    れか１つを選択する選択工程とを備え、 前記表示工程では、前記選択工程で選択されたサムネイ
    ル画像に対応する静止画を前記格納手段から選択して表
    示すると共に、当該静止画に対応する動画が前記格納手
    段に格納されている場合、当該動画を再生表示すること
    を特徴とする画像処理方法。
35. 【請求項３５】 前記格納手段が格納する、少なくとも
    一つ以上の静止画、及び当該静止画に対応するサムネイ
    ル画像、及び当該静止画のうち、いずれかの静止画に対
    応する動画はいずれも圧縮されており、圧縮された静止
    画、圧縮されたサムネイル画像、圧縮された動画を伸長
    する伸長工程を更に備え、 前記表示工程では、伸長された静止画、サムネイル画
    像、動画のうち、少なくとも一つ以上を表示することを
    特徴とする請求項３４に記載の画像処理方法。
36. 【請求項３６】 前記表示工程で表示されるサムネイル
    画像に対応する静止画に、対応する動画が前記格納手段
    に存在する場合、 更に、前記動画の所定フレームのサムネイル画像を作成
    するサムネイル画像作成工程を備え、 前記表示工程では前記サムネイル画像、前記静止画、前
    記動画と共に、前記サムネイル作成工程で作成されたサ
    ムネイル画像を表示することを特徴とする請求項３４又
    は３５に記載の画像処理方法。
37. 【請求項３７】 更に、前記選択工程で選択されたサム
    ネイル画像に対応した静止画と当該静止画に対応する動
    画を削除するか、もしくは当該動画のみを削除するかを
    指示する削除指示工程と、 前記削除指示工程での指示に基づいて、前記選択工程で
    選択されたサムネイル画像に対応した静止画と当該静止
    画に対応する動画、もしくは当該動画のみを削除する削
    除工程とを備えることを特徴とする請求項３４乃至３６
    のいずれか１項に記載の画像処理方法。
38. 【請求項３８】 請求項２５乃至３７のいずれか１項に
    記載の画像処理方法を実行するプログラム。
39. 【請求項３９】 請求項３８に記載のプログラムを格納
    し、コンピュータが読み取り可能な記憶媒体。