JP5296062B2 - リンク情報生成装置、画像記録装置、画像再生装置、リンク情報生成方法、画像記録方法、及び画像再生方法 - Google Patents

Description

本発明は、可搬性の記録媒体に記録した静止画と動画及び音声とのリンク情報を生成するリンク情報生成装置やリンク情報生成方法、静止画と動画及び音声とを記録する画像記録装置や画像記録方法、及び記録した静止画と動画及び音声とを再生する画像再生装置や画像再生方法に関する。

静止画、動画、または音声を撮影して記録媒体に記録し、記録された静止画、動画、または音声を再生する従来のデジタルビデオカメラにおいては、静止画と動画の同時撮影機能、すなわち動画の撮影中に同時に静止画を撮影する機能を持つものがある。

この機能を利用して、静止画記録時刻を含む静止画記録時間情報と、動画記録時刻を含む動画記録時間情報とが記録された記録媒体を再生する際に、選択された静止画の静止画撮影時刻を含む動画を特定し、特定された動画のうちの静止画を撮影した時刻の近傍のみを再生する装置が提案されている。このような装置においては、静止画からユーザの見たい動画の場面を素早く見つけ出すことが出来る（例えば、特許文献１参照）。

さらに、静止画と動画とを同一記録媒体に記録する際に、静止画データ、及び音声を伴う動画データを圧縮形式別に異なるフォルダに蓄積する画像記録再生装置であって、静止画データを保存するとき、当該静止画データと動画データとを関連付けるリンク情報ファイルを、動画データを作成するフォルダ内に作成する装置が提案されている。

図２４にこのような装置が記録媒体上に作成したファイル構成例を示す。

記録媒体のルートフォルダには、「ＤＣＩＭ（Ｄｉｇｉｔａｌ Ｃａｍｅｒａ ＩＭａｇｅｓ）」という名前のフォルダと、「ＶＩＤＥＯ」という名前のフォルダが作成される。ここで、「ＤＣＩＭ」はＤＣＦ（Ｄｅｓｉｇｎ ｒｕｌｅ ｆｏｒ Ｃａｍｅｒａ Ｆｉｌｅ ｓｙｓｔｅｍ）ルールに則り静止画ファイルを保存するための親フォルダである。

この下に３桁の番号＋“任意の文字列”を名称とするサブフォルダを作成し、このサブフォルダの中に静止画ファイルを生成する。静止画ファイル名は“任意の文字列”＋４桁の番号＋．ＪＰＧである。例えば、「ＡＢＣＤ０００１．ＪＰＧ」のような静止画ファイル５００が生成される。

一方、「ＶＩＤＥＯ」は動画ファイルを保存するための親フォルダである。この下に“任意の文字列”＋３桁の番号を名称とするサブフォルダを作成し、このサブフォルダの中に動画ファイルを生成する。動画ファイル名は“任意の文字列”＋３桁の番号＋．ＭＰＧである。例えば「ＥＦＧ００２．ＭＰＧ」のような動画ファイル５０２が生成される。

静止画を撮影する際には、動画ファイル５０２を保存するためのフォルダの中にリンク情報ファイル５０１を生成する。例えば、「ＥＦＧ００１．ｌｎｋ」のようなリンク情報ファイル５０１が生成される。「ＥＦＧ００１．ｌｎｋ」は静止画ファイル５００を指し示す連係情報を記録している。これにより、静止画データと動画像データとの関連付けを容易にすることができ、時系列順のファイル閲覧等の機能を実現することができるという効果があった（例えば、特許文献２参照）。

特開２００７−１８１１６４号公報

しかしながら、従来の技術においては、動画データのうち静止画撮影時刻に対応する部分を特定するために、再生時に静止画記録時間情報と動画記録時間情報とを検索して対応付けする必要がある。そのため、静止画を表示した状態から、表示している静止画に対応する動画の再生が開始されるまで時間がかかるという問題があった。特に、近年は記録媒体の容量が大幅に拡大しているため、これに伴って静止画ファイル及び動画ファイルの数が非常に多くなる。この様な場合には全ファイルの撮影時刻の関係を確認するだけでも処理時間が膨大になり、動画の再生開始までの時間が非常に長くなる。

また、動画データを作成するフォルダ内に、静止画データとの関連付けを示すリンク情報ファイル５０１を作成するため、この装置で記録された記録媒体をリンク情報ファイル対応機能の無い従来の動画記録規格に準拠した再生装置に装着すると誤動作の恐れがある。例えば、図２４において、リンク情報ファイル５０１は動画ファイルを保存するフォルダの中に存在する。そのため、リンク情報ファイル５０１に対応しない動画再生装置はこのファイルを認識できず、最悪の場合は動画ファイルを保存するフォルダ構成自体を規格違反とみなして再生できなくなる可能性がある。さらに、静止画記録再生機能のみ、もしくは動画記録再生機能のみを持った記録再生装置でファイル操作を行うと、リンク情報ファイル５０１と動画像データまたは静止画データとの整合が取れなくなる恐れがあった。

そこで、本発明は前記問題に鑑みてなされたものであり、静止画ファイルに対応する動画ファイルを特定する処理を高速化すると共に、リンク情報ファイル対応機能の無い再生装置で再生する場合であっても、当該再生装置の誤動作を防止できるリンク情報生成装置、画像記録装置、画像再生装置、記録媒体、リンク情報生成方法、画像記録方法、画像再生方法、プログラム、及び集積回路を提供することを目的とする。

本発明に係るリンク情報生成装置は、静止画データ及び当該静止画データの撮影時刻である静止画撮影時刻情報を含む静止画ファイルを保持する第１のフォルダと、各々が動画データを含む１以上の動画ファイルを保持する第２のフォルダとが互いに包含関係にない位置関係で記録されている記録媒体に、前記静止画データと前記動画データとを関連付ける情報であるリンク情報を含むリンク情報ファイルを記録する。具体的には、前記１以上の動画ファイルそれぞれに含まれる前記動画データのうち、前記静止画データの前記静止画撮影時刻情報を含む時間帯に撮影された静止画連携動画を特定する動画特定部と、前記静止画撮影時刻情報に対応する前記静止画連携動画内の時間的な位置を示す静止画相当位置情報を取得する位置情報取得部と、前記静止画データを識別する静止画識別情報、前記静止画連携動画を識別する動画識別情報、及び前記静止画相当位置情報を含む前記リンク情報を生成し、当該リンク情報を含む前記リンク情報ファイルを、前記記録媒体中の前記第１及び第２のフォルダのいずれにも包含されない位置に記録するリンク情報生成部とを備える。

上記構成のように、静止画相当位置情報をリンク情報ファイルに記録しておくことにより、静止画連携動画内における静止画データに対応する部分を瞬時に特定して、再生することが可能となる。また、リンク情報ファイルを第１及び第２のフォルダのいずれにも包含されない位置に記録することにより、リンク情報ファイル対応機能のない装置に上記の記録媒体を読み取らせた場合でも、誤動作の心配がない。なお、本明細書において、フォルダに保持（保存）されるファイルは、当該フォルダの直下に存在する場合のみならず、当該フォルダのサブフォルダ内に存在していてもよいものとする。

さらに、該リンク情報生成装置は、前記リンク情報ファイルの更新日時が前記静止画ファイルの更新日時より過去であった場合に、前記動画特定部、前記位置情報取得部、及び前記リンク情報生成部を制御して、当該リンク情報ファイルを更新させるリンク情報更新制御部を備えてもよい。

さらに、該リンク情報生成装置は、前記リンク情報ファイルに含まれる前記リンク情報を順次読み出すリンク情報読み出し部と、前記リンク情報読み出し部によって順次読み出された前記リンク情報それぞれについて、前記静止画識別情報によって識別される前記静止画データが前記第１のフォルダに存在しない、又は前記動画識別情報によって識別される前記動画データが前記第２のフォルダに存在しない場合に、当該リンク情報を前記リンク情報ファイルから削除するリンク情報削除部とを備えてもよい。

さらに、該リンク情報生成装置は、前記第１のフォルダに保持される前記静止画ファイルを監視する静止画ファイル監視部と、前記静止画ファイル監視部によって前記静止画ファイルの削除が検出されたことに応じて、当該静止画ファイルに対応する前記静止画識別情報を含む前記リンク情報を前記リンク情報ファイルから削除するリンク情報削除部とを備えてもよい。

例えば、リンク情報ファイル対応機能のない装置で記録媒体内のファイル操作（作成、編集、削除等）を行った場合、記録媒体に実際に記録されているファイル（静止画ファイル、動画ファイル）とリンク情報ファイルの内容との間に不整合を生じる虞がある。そこで、上記の各構成のように、リンク情報ファイルの更新、及びリンク情報の削除等を行うことにより、リンク情報ファイルの内容を常に最新の状態に保つことができる。

また、前記動画データは、所定の時間間隔で撮像された複数のフレームで構成される。さらに、前記記録媒体には、さらに、前記１以上の動画ファイルそれぞれに１対１に対応し、隣接する前記フレームの間の時間帯に撮像された補助フレームを含む高速撮影補助ファイルを保持する第３のフォルダが、前記第１及び第２のフォルダのいずれとも包含関係にない位置に記録されている。そして、動画特定部は、さらに、前記静止画連携動画を含む前記動画ファイルに対応する前記高速撮影補助ファイルを特定し、前記リンク情報生成部は、前記動画特定部によって特定された前記高速撮影補助ファイルを識別する高速動画識別情報をさらに含む前記リンク情報を生成してもよい。これにより、静止画動画の通常再生だけでなく、高画質のスロー再生にも対応することができる。

また、前記第２のフォルダには、前記１以上の動画ファイルそれぞれに１対１に対応し、対応する前記動画ファイルに含まれる前記動画データの撮影開始時刻情報及び撮影終了時刻情報を含む１以上の動画撮影情報ファイルが保持されている。そして、前記動画特定部は、前記撮影開始時刻情報と前記撮影終了時刻情報との間の時間帯に前記静止画撮影時刻情報を含む前記動画データを、前記静止画関連動画として特定してもよい。

また、前記静止画撮影時刻情報は、当該静止画ファイルの更新日時である。前記撮影開始時刻情報は、当該動画の記録開始日時と、当該動画データを構成する複数のフレームのうちの先頭フレームに付与された先頭フレームＰＴＳ（Ｐｒｅｓｅｎｔａｔｉｏｎ Ｔｉｍｅ Ｓｔａｍｐ）である。そして、前記位置情報取得部は、前記静止画撮影時刻情報、前記記録開始日時、及び前記先頭フレームＰＴＳに基づいて算出される静止画相当ＰＴＳを前記静止画相当位置情報として取得してもよい。

本発明に係る画像記録装置は、撮像した静止画データ及び動画データを記録媒体に記録する。具体的には、光を電気信号に変換する撮像部と、前記撮像部から出力される電気信号を動画データに変換し、当該動画データを含む動画ファイルを前記記録媒体に記録する動画記録部と、前記動画記録部によって前記動画データが記録されている時間帯の任意のタイミングで、前記撮像部から出力される電気信号を静止画データに変換し、当該静止画データを含む静止画ファイルを前記記録媒体に記録する静止画記録部と、前記静止画記録部によって記録された前記静止画データの前記動画データ内における時間的な位置を示す静止画相当位置情報を取得する位置情報取得部と、前記静止画データを識別する静止画識別情報、前記動画データである静止画連携動画を識別する動画識別情報、及び前記静止画相当位置情報を含む前記リンク情報を生成し、当該リンク情報を含むリンク情報ファイルを前記記録媒体に記録するリンク情報生成部とを備える。そして、前記静止画ファイルは、前記記録媒体の第１のフォルダに記録され、前記動画ファイルは、前記記録媒体の前記第１のフォルダと包含関係にない第２のフォルダに記録され、前記リンク情報ファイルは、前記記録媒体の前記第１及び第２のフォルダのいずれにも包含されない位置に記録される。

上記構成のように、静止画相当位置情報をリンク情報ファイルに記録しておくことにより、静止画連携動画内における静止画データに対応する部分を瞬時に特定して、再生することが可能となる。また、リンク情報ファイルを第１及び第２のフォルダのいずれにも包含されない位置に記録することにより、リンク情報ファイル対応機能のない装置に上記の記録媒体を読み取らせた場合でも、誤動作の心配がない。なお、上記のリンク情報生成装置との相違点は、静止画データ及び動画データの撮影中にリアルタイムにリンク情報を生成することができる点である。

本発明に係る画像再生装置は、上記記載の記録媒体に記録されている静止画データ及び動画データを再生する。具体的には、前記記録媒体から読み出した前記静止画ファイルに含まれる前記静止画データを再生する静止画再生部と、ユーザからの静止画連携動画再生要求に応じて、前記静止画データの前記静止画識別情報を含む前記リンク情報を、前記リンク情報ファイルから読み出すリンク情報読み出し部と、前記リンク情報読み出し部によって読み出された前記リンク情報に含まれる前記動画識別情報で識別される前記静止画連携動画のうち、前記静止画相当位置情報を含む連携再生区間のみを再生する動画再生部とを備える。

上記構成のように、静止画相当位置情報に基づいて連携再生区間を決定することができるので、従来と比較して静止画連携動画再生要求を受け付けた後の処理を大幅に軽減することができる。

さらに、前記リンク情報には、対応する前記静止画連携動画を再生するか否かを示す再生フラグが含まれている。そして、前記動画再生部は、前記リンク情報の前記再生フラグに再生を示す情報が設定されている場合にのみ前記連携再生区間を再生してもよい。このように、予め再生フラグに「再生」又は「再生不可」を設定しておくことにより、ユーザにとって面白くない連携再生区間の再生をスキップすることができる。

さらに、前記リンク情報読み出し部は、ユーザからのダイジェスト再生要求に応じて、前記リンク情報ファイルに含まれる前記リンク情報を順次読み出す。そして、前記動画再生部は、前記リンク情報読み出し部によって読み出された順に、前記リンク情報に関連付けられた前記静止画関連動画の前記連携再生区間のみを再生してもよい。

静止画データが撮影された時間帯の動画データには、ユーザにとって重要なシーンが記録されている場合が多い。そこで、この時間帯に撮影された連携再生区間のみを抽出して再生することにより、ユーザにとって興味のあるシーンを効率よく再生することができる。

さらに、前記リンク情報には、対応する前記静止画連携動画のダイジェスト再生を行うか否かを示すダイジェスト再生フラグが含まれている。そして、前記動画再生部は、前記リンク情報の前記ダイジェスト再生フラグに再生を示す情報が設定されている場合にのみ前記連携再生区間を再生してもよい。複数の連携再生区間のうち、ユーザにとって面白くない区間のダイジェスト再生フラグを「再生不可」とすることにより、次回以降当該区間の再生をスキップすることができる。

また、前記動画データは、画面内予測符号化によって符号化されたＩフレームと、画面間予測符号化によって符号化されるＰフレームとを含む複数のフレームによって構成される。そして、前記連携再生区間は、前記静止画相当位置情報を起点として前記静止画連携動画内を第１の区間だけ過去に遡った位置に最も近い前記Ｉフレームを再生開始フレームとし、当該Ｉフレームから前記第１の区間より大きい第２の区間だけ未来に進んだ位置のフレームを再生終了フレームとする区間であってもよい。

さらに、前記記録媒体には、前記１以上の動画ファイルそれぞれに１対１に対応し、隣接する前記フレームの間の時間帯に撮像された補助フレームを含む高速撮影補助ファイルを保持する第３のフォルダが、前記第１及び第２のフォルダのいずれとも包含関係にない位置に記録されている。そして、前記動画再生部は、前記連携再生区間に含まれる前記フレームを前記動画ファイルから読み出し、前記再生開始フレームと前記再生終了フレームとの間の時間帯に撮像された前記補助フレームを前記高速撮影補助ファイルから読み出し、読み出された前記フレーム及び前記補助フレームを時系列に並べ替えて再生してもよい。これにより、連携再生区間の通常再生だけでなく、高画質のスロー再生にも対応することができる。

本発明に係る記録媒体は、静止画データ及び当該静止画データの撮影時刻である静止画撮影時刻情報を含む静止画ファイルを保持する第１のフォルダと、各々が動画データを含む１以上の動画ファイルを保持する第２のフォルダと、前記静止画データと前記動画データとを関連付ける情報であるリンク情報を含むリンク情報ファイルとが記録されている。具体的には、前記第１及び第２のフォルダは、互いに包含関係にない位置関係で記録され、前記リンク情報は、前記静止画データを識別する静止画識別情報、前記１以上の動画ファイルそれぞれに含まれる前記動画データのうち、前記静止画データの前記静止画撮影時刻情報を含む時間帯に撮影された静止画連携動画を識別する動画識別情報、及び前記静止画撮影時刻情報に対応する前記静止画連携動画内の時間的な位置を示す静止画相当位置情報を含み、且つ前記第１及び第２のフォルダのいずれにも包含されない位置に記録されている。

上記構成の記録媒体を読み取った再生装置は、静止画連携動画内における静止画データに対応する部分を瞬時に特定して、再生することが可能となる。また、リンク情報ファイル対応機能のない装置に上記の記録媒体を読み取らせた場合でも、誤動作の心配がない。

本発明に係るリンク情報生成方法は、静止画データ及び当該静止画データの撮影時刻である静止画撮影時刻情報を含む静止画ファイルを保持する第１のフォルダと、各々が動画データを含む１以上の動画ファイルを保持する第２のフォルダとが互いに包含関係にない位置関係で記録されている記録媒体に、前記静止画データと前記動画データとを関連付ける情報であるリンク情報を含むリンク情報ファイルを記録する。具体的には、前記１以上の動画ファイルそれぞれに含まれる前記動画データのうち、前記静止画データの前記静止画撮影時刻情報を含む時間帯に撮影された静止画連携動画を特定する動画特定ステップと、前記静止画撮影時刻情報に対応する前記静止画連携動画内の時間的な位置を示す静止画相当位置情報を取得する位置情報取得ステップと、前記静止画データを識別する静止画識別情報、前記静止画連携動画を識別する動画識別情報、及び前記静止画相当位置情報を含む前記リンク情報を生成し、当該リンク情報を含む前記リンク情報ファイルを、前記記録媒体中の前記第１及び第２のフォルダのいずれにも包含されない位置に記録するリンク情報生成ステップとを含む。

本発明に係る画像記録方法は、撮像した静止画データ及び動画データを記録媒体に記録する。具体的には、光を電気信号に変換する撮像ステップと、前記撮像ステップで出力される電気信号を動画データに変換し、当該動画データを含む動画ファイルを前記記録媒体に記録する動画記録ステップと、前記動画記録ステップで前記動画データが記録されている時間帯の任意のタイミングで、前記撮像ステップで出力される電気信号を静止画データに変換し、当該静止画データを含む静止画ファイルを前記記録媒体に記録する静止画記録ステップと、前記静止画記録ステップで記録された前記静止画データの前記動画データ内における時間的な位置を示す静止画相当位置情報を取得する位置情報取得ステップと、前記静止画データを識別する静止画識別情報、前記動画データである静止画連携動画を識別する動画識別情報、及び前記静止画相当位置情報を含む前記リンク情報を生成し、当該リンク情報を含むリンク情報ファイルを前記記録媒体に記録するリンク情報生成ステップとを含む。そして、前記静止画ファイルは、前記記録媒体の第１のフォルダに記録され、前記動画ファイルは、前記記録媒体の前記第１のフォルダと包含関係にない第２のフォルダに記録され、前記リンク情報ファイルは、前記記録媒体の前記第１及び第２のフォルダのいずれにも包含されない位置に記録される。

本発明に係る画像再生方法は、上記記載の記録媒体に記録されている静止画データ及び動画データを再生する。具体的には、前記記録媒体から読み出した前記静止画ファイルに含まれる前記静止画データを再生する静止画再生ステップと、ユーザからの静止画関連動画再生要求に応じて、前記静止画データの前記静止画識別情報を含む前記リンク情報を、前記リンク情報ファイルから読み出すリンク情報読み出しステップと、前記リンク情報読み出しステップで読み出された前記リンク情報に含まれる前記動画識別情報で識別される前記静止画連携動画のうち、前記静止画相当位置情報を含む連携再生区間のみを再生する動画再生ステップとを含む。

本発明に係るプログラムは、静止画データ及び当該静止画データの撮影時刻である静止画撮影時刻情報を含む静止画ファイルを保持する第１のフォルダと、各々が動画データを含む１以上の動画ファイルを保持する第２のフォルダとが互いに包含関係にない位置関係で記録されている記録媒体に、前記静止画データと前記動画データとを関連付ける情報であるリンク情報を含むリンク情報ファイルを記録する処理を、コンピュータに実行させる。具体的には、前記１以上の動画ファイルそれぞれに含まれる前記動画データのうち、前記静止画データの前記静止画撮影時刻情報を含む時間帯に撮影された静止画連携動画を特定する動画特定ステップと、前記静止画撮影時刻情報に対応する前記静止画連携動画内の時間的な位置を示す静止画相当位置情報を取得する位置情報取得ステップと、前記静止画データを識別する静止画識別情報、前記静止画連携動画を識別する動画識別情報、及び前記静止画相当位置情報を含む前記リンク情報を生成し、当該リンク情報を含む前記リンク情報ファイルを、前記記録媒体中の前記第１及び第２のフォルダのいずれにも包含されない位置に記録するリンク情報生成ステップとを含む。

本発明に係る集積回路は、静止画データ及び当該静止画データの撮影時刻である静止画撮影時刻情報を含む静止画ファイルを保持する第１のフォルダと、各々が動画データを含む１以上の動画ファイルを保持する第２のフォルダとが互いに包含関係にない位置関係で記録されている記録媒体に、前記静止画データと前記動画データとを関連付ける情報であるリンク情報を含むリンク情報ファイルを記録する。具体的には、前記１以上の動画ファイルそれぞれに含まれる前記動画データのうち、前記静止画データの前記静止画撮影時刻情報を含む時間帯に撮影された静止画連携動画を特定する動画特定部と、前記静止画撮影時刻情報に対応する前記静止画連携動画内の時間的な位置を示す静止画相当位置情報を取得する位置情報取得部と、前記静止画データを識別する静止画識別情報、前記静止画連携動画を識別する動画識別情報、及び前記静止画相当位置情報を含む前記リンク情報を生成し、当該リンク情報を含む前記リンク情報ファイルを、前記記録媒体中の前記第１及び第２のフォルダのいずれにも包含されない位置に記録するリンク情報生成部とを備える。

なお、本発明は、上記の各装置として実現できるだけでなく、各装置の機能を実現する集積回路として実現したり、そのような機能をコンピュータに実行させるプログラムとして実現したりすることもできる。そして、そのようなプログラムは、ＣＤ−ＲＯＭ等の記録媒体及びインターネット等の伝送媒体を介して流通させることができるのは言うまでもない。

本発明によれば、静止画ファイルを保存する第１フォルダと、動画ファイルを保存する第２フォルダとが同階層に配置される記録媒体に、静止画ファイルと動画ファイルとを直接関連付ける情報を、上記第１フォルダ及び上記第２フォルダのいずれにも包含されない位置に生成することで、従来の動画または静止画記録規格に準拠しつつ、現在表示している静止画ファイルのファイル名から動画ファイルの再生箇所の情報を、リンク情報ファイルを基に直接的に取得することが可能となる効果を奏する。

図１は、本発明の実施の形態１における記録再生装置の外観を示す斜視図である。 図２は、本発明の実施の形態１における静止画動画連携機能の概要を示す図である。 図３Ａは、本発明の実施の形態１における記録再生装置のハードウェア構成を示す図である。 図３Ｂは、図３Ａの制御部の機能ブロック図である。 図４は、本発明の実施の形態１における記録媒体に記録されているファイル構成例を示す図である。 図５は、本発明の実施の形態１におけるリンク情報ファイルに格納されるリンク情報テーブルの構成例を示す図である。 図６は、記録再生装置が動画撮影から同時撮影機能を用いて静止画撮影を行う処理を示したフローチャートである。 図７は、本発明の実施の形態１における静止画動画連携機能の処理内容を説明する図である。 図８は、記録再生装置に記録媒体が装着された際、記録媒体に保存されるリンク情報ファイルを基に、静止画ファイルを再生・表示している状態から静止画動画連携機能を用いて動画ファイルを再生する再生動作を示すフローチャートである。 図９は、記録再生装置に記録媒体が装着されている際、記録媒体に保存される静止画ファイルが削除された際のリンク情報ファイルの修正動作を示すフローチャートである。 図１０は、記録再生装置に記録媒体が装着された際、記録媒体にリンク情報ファイルがあるかどうかを確認し、ファイルが無いとき、またはリンク情報と静止画ファイル、動画ファイルとの間に不整合があるときにリンク情報ファイルを修復する動作を示す第１フローチャートである。 図１１は、記録再生装置に記録媒体が装着された際、記録媒体にリンク情報ファイルがあるかどうかを確認し、ファイルが無いとき、またはリンク情報と静止画ファイル、動画ファイルとの間に不整合があるときにリンク情報ファイルを修復する動作を示す第２フローチャートである。 図１２は、本発明の実施の形態１におけるダイジェスト再生機能の概要を示す図である。 図１３は、ダイジェスト再生機能に対応したリンク情報ファイルの例を示す図である。 図１４は、ダイジェスト再生処理を示すフローチャートである。 図１５は、本発明の実施の形態１におけるリンク情報生成装置のハードウェア構成を示す図である。 図１６は、本発明の実施の形態２における記録再生装置のハードウェア構成を示す図である。 図１７は、本発明の実施の形態２における画像信号処理部、第１の圧縮多重部、第２の圧縮多重部での処理の概要を示す図である。 図１８は、本発明の実施の形態２における記録媒体に記録されているファイル構成例を示す図である。 図１９は、本発明の実施の形態２におけるリンク情報ファイルに格納されるリンク情報テーブルの構成例を示す図である。 図２０は、図１８のファイル構成におけるＢＤＭＶフォルダ以下のファイルの関係を説明する図である。 図２１は、図１８のファイル構成におけるＢＤＭＶフォルダ以下のファイルとＨＩＧＨＲＡＴＥフォルダ以下のファイルの関係を説明する図である。 図２２は、静止画動画連携機能ではなく、プレイリストを用いて再生を行う場合の高速撮影に対応した再生処理を示すフローチャートである。 図２３は、記録再生装置に記録媒体が装着された際、記録媒体にリンク情報ファイルがあるかどうかを確認し、ファイルが無いとき、またはリンク情報と静止画ファイル、通常動画ファイル、高速撮影補助ファイルとの間に不整合があるときにリンク情報ファイルを修復する動作を示すフローチャートである。 図２４は、従来の記録再生装置が作成したファイル構成例を示す図である。

以下、本発明における実施の形態について図面を参照しながら説明する。

（実施の形態１）
以下、本発明の実施の形態１における記録再生装置１００について図面を参照しながら説明する。

図１は、本発明の実施の形態１における記録再生装置１００の外観を示す斜視図である。

記録再生装置１００は、撮像される静止画ファイル及び動画ファイルを、記録媒体１０に記録する。具体的には、静止画ファイルは、静止画ファイルの従来規格であるＤＣＦ規格によって予め設定されるＤＣＩＭメインフォルダ内のサブフォルダに記録される。また、動画ファイルは、従来の動画記録規格によって予め設定されるＭＯＶＩＥフォルダ内のサブフォルダに記録される。

また、記録再生装置１００は、記録媒体１０に記録されている静止画ファイル、および動画ファイルを再生する機能を備える。また、記録再生装置１００は、静止画ファイルと動画ファイルとの同時撮影機能、すなわち動画ファイルを撮影中に静止画ファイルを撮影し、記録媒体１０に記録する機能を持つ。さらに、記録媒体１０から読み出して表示している静止画ファイルの撮影時刻を含む時間帯に撮影された動画ファイルのうち、表示している静止画ファイルの撮影時刻近傍のみを再生する機能（以下、静止画動画連携機能と称す。）を備える。

図２は、静止画動画連携機能の概要を示す図である。撮像された動画データを動画ファイル３０として記録媒体１０に記録するのと同時に、同時撮影機能を用いて撮像された静止画データを静止画ファイル２１及び静止画ファイル２２として記録媒体１０に記録している状態を示す。また、静止画データは、同時撮影機能を利用せずに単独で撮影されることもある。例えば、静止画ファイル２３には、単独で撮影され、記録媒体１０に記録された静止画データが含まれている。

記録再生装置１００において、例えば静止画ファイル２１が再生される際は、液晶画面上、もしくは接続された外部表示機器上に静止画表示画面３１のように表示される。記録媒体１０に記録されている静止画ファイル２１、２２、２３は、ユーザのボタン等の操作、もしくはスライドショー再生機能により順次再生されて、静止画表示画面３１、３２、３３の順に表示されていく。

このとき、同時撮影機能により撮影され、静止画ファイル２１、２２の撮影時刻（静止画撮影時刻情報）を含む時間に撮影された動画ファイル３０が存在する静止画表示画面３１、３２には、静止画動画連携機能が使用可能であることを示すアイコン４１、４２が表示されるものとする。なお、単独で撮影された静止画ファイル２３の静止画表示画面３３にはこのアイコンは表示しない。

なお、この静止画表示画面３１、３２、３３については、ここで説明したような表示形態にする必要は無い。例えば、静止画表示画面３１、３２にはアイコン４１、４２を表示せず、代わりに、同時撮影機能を使用していない旨を示すメッセージを、静止画表示画面３３に表示する構成にしても構わない。

ユーザは、アイコン４１が表示されている静止画表示画面３１を再生している際に、例えば、ボタン操作、タッチパネル操作等で動画ファイル３０を再生する動画再生操作（静止画連携動画再生要求）をすることにより、動画ファイル３０のうち、静止画ファイル２１が撮影された撮影時刻を含んだ近傍（以下、「連携再生区間」と称す。）を動画として記録再生装置１００に再生させることが可能となる。

図３Ａは、実施の形態１における記録再生装置１００のハードウェア構成を示す図である。また、図３Ｂは、図３Ａの制御部１１０の機能ブロック図である。

記録再生装置１００は、図３Ａに示されるように、レンズ群１０１、撮像部１０２、Ａ／Ｄ変換部１０３、画像信号処理部１０４、静止画圧縮多重部１３０、動画圧縮多重部１０５、記録処理部１０６、記録制御部１０８、入力部１０９、制御部１１０、画像生成部１１１、表示部１１２、画像信号処理部１１３、静止画分離伸張部１３１、動画分離伸張部１１４、再生処理部１１５等を備える。

レンズ群１０１は、複数の光学レンズから構成される。

撮像部１０２は、例えばＣＣＤ素子等の撮像素子等から構成され、レンズ群１０１を介して入力された画像を撮像する。撮像した画像をアナログ信号としてＡ／Ｄ変換部１０３に出力する。なお、撮像装置はＣＣＤ素子に限定されるものではなく、ＣＭＯＳ素子を利用した構成にしても構わない。

Ａ／Ｄ変換部１０３は、撮像部１０２から出力されたアナログ信号をデジタル信号に変換する。また、変換して得られたデジタル信号を画像信号処理部１０４に出力する。

画像信号処理部１０４は、Ａ／Ｄ変換部１０３から出力されたデジタル信号に対してノイズ除去や画質調整等の処理を施す。そして、静止画撮影の場合は静止画信号を静止画圧縮多重部１３０に出力する。また、動画撮影の場合は動画信号を動画圧縮多重部１０５に出力する。

なお、本実施の形態１において、画像信号処理部１０４は、静止画信号と動画信号とを同時に出力可能に構成したものとして説明するが、これに限定されない。例えば、静止画信号を出力するときに短時間だけ動画信号の出力が止まるように構成されていても同様の効果が得られる。

静止画圧縮多重部１３０は、画像信号処理部１０４から出力された静止画信号を、従来の静止画圧縮規格であるＪＰＥＧ規格等の符号化方法に基づいて圧縮し、画像サイズ、ビット深さ等の付属情報と多重化する。多重化して得られた静止画データを記録処理部１０６に出力する。または、非圧縮のＲＡＷ信号と付加情報とを多重化してもよい。

動画圧縮多重部１０５は、画像信号処理部１０４から出力された動画信号を、従来の圧縮規格であるＭＰＥＧ−２規格や、Ｈ．２６４規格等の符号化方法に基づいて圧縮し、付属情報や音声信号と多重化する。多重方法は特に限定されないが、例えば、ＭＰＥＧ−２ Ｓｙｓｔｅｍｓ ＴＳ（Ｔｒａｎｓｐｏｒｔ Ｓｔｒｅａｍ）、もしくはＰＳ（Ｐｒｏｇｒａｍ Ｓｔｒｅａｍ）等の多重方法を採用することができる。また、多重化して得られた動画データを記録処理部１０６に出力する。

記録処理部１０６は、静止画圧縮多重部１３０から出力された静止画データ、および動画圧縮多重部１０５から出力された動画データを、それぞれの規格に設定されているファイル構成に従って記録媒体１０に書き込む。さらに、制御部１１０からリンク情報ファイルの生成、更新、編集、または削除の操作信号が入力された場合、記録媒体１０に記録されているリンク情報ファイルに対し、上記操作信号で指示されたファイル操作を行う。

記録制御部１０８は、記録媒体１０を駆動するドライブ装置、あるいは、記録アドレス入力手順等の記録プロトコルを制御する。

入力部１０９は、入力デバイスを介してユーザ操作を受け付ける。受け付けたユーザ操作を操作情報（「静止画連携動画再生要求」及び「ダイジェスト再生要求」等）として制御部１１０に出力する。この入力部１０９に入力されるユーザ操作は、例えば、タッチパッド入力装置、ポインティングデバイス、タブレット等を利用して入力される。

制御部１１０は、画像信号処理部１０４、静止画圧縮多重部１３０、動画圧縮多重部１０５、記録処理部１０６、記録制御部１０８、画像生成部１１１、画像信号処理部１１３、静止画分離伸張部１３１、動画分離伸張部１１４、及び再生処理部１１５を制御して、記録再生装置１００における記録処理、再生処理等を実行する。例えば、ソフトウェアを実行可能なＣＰＵ等で構成されていても構わない。なお、制御部１１０は、一時的にデータを記録可能な内部メモリを備える。

図３Ｂに示されるように、制御部１１０は、記録制御部１１１０と、再生制御部１１２０と、リンク情報制御部１１３０と、ファイル監視部１１４０とを備える。

記録制御部１１１０は、レンズ群１０１、撮像部１０２、Ａ／Ｄ変換部１０３、画像信号処理部１０４、静止画圧縮多重部１３０、動画圧縮多重部１０５、及び記録処理部１０６、記録制御部１０８等を制御して、撮像した静止画データ、動画データを記録媒体１０に記録するとともにリンク情報を書き込む。具体的には、動画記録部１１１１、静止画記録部１１１２およびリンク情報書き込み部１１１３を備える。

動画記録部１１１１は、撮像部１０２から出力される電気信号を動画データに変換し、当該動画データを含む動画ファイルを記録媒体１０に記録する。静止画記録部１１１２は、撮像部１０２から出力される電気信号を静止画データに変換し、当該静止画データを含む静止画ファイルを記録媒体１０に記録する。リンク情報書き込み部１１１３は、リンク情報制御部１１３０から取得したリンク情報を、リンク情報ファイルとして記録媒体１０に書き込む。

再生制御部１１２０は、画像生成部１１１、表示部１１２、画像信号処理部１１３、静止画分離伸張部１３１、動画分離伸張部１１４、及び再生処理部１１５等を制御して、記録媒体１０に記録されている静止画データ、動画データを再生するとともにリンク情報を読み出す。具体的には、動画再生部１１２１、静止画再生部１１２２およびリンク情報読み出し部１１２３を備える。

動画再生部１１２１は、記録媒体１０から読み出した動画ファイルに含まれる動画データを再生し、表示部１１２に表示する。静止画再生部１１２２は、記録媒体１０から読み出した静止画ファイルに含まれる静止画データを再生し、表示部１１２に表示する。

リンク情報読み出し部１１２３は、ユーザからの「静止画連携動画再生要求」に応じて、リンク情報をリンク情報ファイルから読み出す。または、記録媒体１０が新たに装着されたことを検出すると、リンク情報ファイルが記録されているかどうかを確認する。既にリンク情報ファイルが記録されていることを検出した場合は、その更新日時情報、およびリンク情報を読み出し、リンク情報更新制御部１１３４およびリンク情報削除部１１３５に出力する。

リンク情報制御部１１３０は、記録制御部１１１０、再生制御部１１２０およびファイル監視部１１４０を制御して、リンク情報ファイルの生成、更新、編集、及び削除等を行う。具体的には、動画特定部１１３１、位置情報取得部１１３２、リンク情報生成部１１３３、リンク情報更新制御部１１３４、リンク情報削除部１１３５を備える。

動画特定部１１３１は、動画記録部１１１１から動画データの撮影開始及び終了に関する情報を、また静止画記録部１１１２から静止画データの撮影に関する情報をそれぞれ取得し、静止画データが撮影された時刻に記録中であった動画データを静止画連携動画と特定する。そして、当該静止画連携動画の動画識別情報をリンク情報生成部１１３３に出力する。このことはすなわち、動画ファイルそれぞれに含まれる動画データのうち、動画ファイルに記録されている撮影開始時刻情報と撮影終了時刻情報との間の時間帯に、静止画ファイルに記録されている静止画撮影時刻情報を含む動画データを、静止画連携動画として特定することに等しい。

位置情報取得部１１３２は、静止画撮影時刻情報に対応する静止画連携動画内の時間的な位置を示す静止画相当位置情報を取得する。具体的には、下記のような処理を行う。

動画記録部１１１１は、動画データの記録時に、当該動画データの表示時刻を管理するためのＰＴＳ（Ｐｒｅｓｅｎｔａｔｉｏｎ Ｔｉｍｅ Ｓｔａｍｐ）を動画データと合わせて記録媒体１０に記録している。そこで、位置情報取得部１１３２は、この記録中のＰＴＳを動画記録部１１１１から取得する。また、静止画記録部１１１２から静止画データの撮像情報を取得し、静止画データを撮像した時刻に相当する動画データのＰＴＳを静止画相当位置情報（静止画相当ＰＴＳ）として取得し、リンク情報生成部１１３３に出力する。

なお、静止画ファイルに記録されている静止画撮影時刻情報と、動画ファイルに記録されている記録開始日時、及び先頭フレームＰＴＳ等を記録媒体１０から読み込むか、あるいは動画記録部１１１１及び静止画記録部１１１２から取得する。そして、位置情報取得部１１３２は、これらから下記式２を用いて算出される静止画相当ＰＴＳを静止画相当位置情報としてリンク情報生成部１１３３に出力してもよい。

リンク情報生成部１１３３は、静止画記録部１１１２から取得した静止画データを識別する静止画識別情報、動画特定部１１３１から取得した静止画連携動画を識別する動画識別情報、及び位置情報取得部１１３２から取得した静止画相当位置情報を含むリンク情報を生成し、リンク情報書き込み部１１１３に出力する。リンク情報書き込み部１１１３は当該リンク情報を含むリンク情報ファイルを、記録媒体１０に書き込む。

リンク情報更新制御部１１３４は、リンク情報読み出し部１１２３から取得したリンク情報ファイルの更新日時が、静止画ファイル監視部１１４２から取得した静止画ファイルの更新日時より過去であった場合に、動画特定部１１３１、位置情報取得部１１３２、及びリンク情報生成部１１３３を制御して、当該リンク情報ファイルを更新（再作成）させる。

リンク情報削除部１１３５は、リンク情報読み出し部１１２３から取得したリンク情報に含まれる静止画識別情報と一致する静止画識別情報が、静止画ファイル監視部１１４２から取得した静止画識別情報の中に存在しない場合に、リンク情報生成部１１３３を制御して、当該リンク情報をリンク情報ファイルから削除する。

また、リンク情報読み出し部１１２３から取得したリンク情報に含まれる動画識別情報と一致する動画識別情報が、動画ファイル監視部１１４１から取得した動画識別情報の中に存在しない場合に、リンク情報生成部１１３３を制御して、当該リンク情報をリンク情報ファイルから削除する。

さらには、後述する動画ファイル監視部１１４１によって動画ファイルの削除が検出されたことに応じて、リンク情報生成部１１３３を制御して、当該動画ファイルに対応する動画識別情報を含むリンク情報をリンク情報ファイルから削除する。または、後述する静止画ファイル監視部１１４２によって静止画ファイルの削除が検出されたことに応じて、リンク情報生成部１１３３を制御して、当該静止画ファイルに対応する静止画識別情報を含むリンク情報をリンク情報ファイルから削除する。

ファイル監視部１１４０は、記録制御部１０８、再生処理部１１５等を制御して、記録媒体１０に記録されている動画ファイル、静止画ファイルおよびリンク情報ファイルの更新状況を監視し、必要な情報を読み出してリンク情報制御部１１３０に出力する。具体的には、動画ファイル監視部１１４１、および静止画ファイル監視部１１４２を備える。

動画ファイル監視部１１４１は、記録媒体１０が新たに装着されたことを検出すると、動画ファイルが記録されているかどうかを確認する。動画ファイルを検出した場合は、その更新日時情報、および動画識別情報を読み出し、リンク情報更新制御部１１３４およびリンク情報削除部１１３５に出力する。また、動画ファイルの削除を監視し、削除を検出した場合は削除検出情報、および削除された動画ファイルの動画識別情報をリンク情報削除部１１３５に出力する。

静止画ファイル監視部１１４２は、記録媒体１０が新たに装着されたことを検出すると、静止画ファイルが記録されているかどうかを確認する。静止画ファイルを検出した場合は、その更新日時情報、および静止画識別情報を読み出し、リンク情報更新制御部１１３４およびリンク情報削除部１１３５に出力する。また、静止画ファイルの削除を監視し、削除を検出した場合は削除検出情報、および削除された静止画ファイルの静止画識別情報をリンク情報削除部１１３５に出力する。

なお、制御部１１０に含まれる各機能ブロックの役割はこれらに限定されない。また、図３Ｂでは、各機能ブロックを記録制御部１１１０、再生制御部１１２０、リンク情報制御部１１３０、およびファイル監視部１１４０に分類した例を示したが、分類方法はこれらに限定されない。さらには、図３Ｂに示される全ての機能ブロックを有している必要はない。例えば、記録制御部１１１０及びリンク情報制御部１１３０のみを有する画像記録装置であってもよいし、再生制御部１１２０のみを有する画像再生装置であってもよいし、リンク情報書き込み部１１１３、リンク情報読み出し部１１２３、リンク情報制御部１１３０およびファイル監視部１１４０のみを有するリンク情報生成装置であってもよい。

画像生成部１１１は、記録媒体１０に記録されている静止画ファイルや動画ファイルが一覧できるメニュー画像や、再生表示画面に多重化して表示するアイコン等を生成する。

表示部１１２は、画像信号処理部１１３から出力された画像信号をモニタ等に表示する。この表示部１１２は、静止画分離伸張部１３１において出力される静止画信号や、動画分離伸張部１１４において出力される動画データを表示可能な装置であればどのようなものを用いてもよい。例えば、例えばＰＤＰ（Ｐｌａｓｍａ Ｄｉｓｐｌａｙ Ｐａｎｅｌ）、液晶ディスプレイ、有機ＥＬ（Ｅｌｅｃｔｒｏ Ｌｕｍｉｎｅｓｃｅｎｃｅ）等を利用しても構わない。

画像信号処理部１１３は、静止画分離伸張部１３１が静止画データを伸張して出力する静止画信号に、表示用画質調整等の処理を施して表示部１１２に出力する。また、動画分離伸張部１１４が動画データを伸張して出力する動画信号に、表示用画質調整等の処理を施して表示部１１２に出力する。さらに、必要に応じて画像生成部１１１が生成したメニュー画像等をそのまま、もしくは静止画分離伸張部１３１から出力された伸張後の静止画信号や、動画分離伸張部１１４から出力された伸張後の動画信号に多重化して、画像信号として表示部１１２に出力する。

静止画分離伸張部１３１は、再生処理部１１５から出力された静止画データを、静止画圧縮多重部１３０が施したＪＰＥＧ等の符号化方法に基づいて分離して伸張する。伸張して得られた静止画信号を画像信号処理部１１３に出力する。

動画分離伸張部１１４は、再生処理部１１５から出力された動画データを、動画圧縮多重部１０５が施したＭＰＥＧ−２や、Ｈ．２６４等の符号化方法に基づいて分離して伸張する。伸張して得られた動画信号を画像信号処理部１１３に出力する。

再生処理部１１５は、制御部１１０から静止画データ又は動画データの再生信号に基づいて、再生対象となるファイルを記録媒体１０から読み出し、再生する。具体的には、再生対象の静止画データを記録媒体１０から読み出し、静止画分離伸張部１３１に出力する。また、再生対象の動画データを記録媒体１０から読み出し、動画分離伸張部１１４に出力する。なお、再生処理部１１５は、記録処理部１０６と独立して設けられる構成に限定されるものではなく、２つの機能を備える記録再生処理部として構成しても構わない。

以下、本発明の実施の形態１における記録媒体１０のファイル構造について、図面を参照しながら説明する。

図４は、実施の形態１における記録媒体１０に記録されているファイル構成例を示す図である。図４に示されるように、ここでは一例として、記録媒体１０は、静止画ファイル７０を保存するためのＤＣＦ規格に対応したファイル構成と、動画ファイルを保存するための従来規格に対応したファイル構成とを備えるものとする。

静止画ファイル７０は、ＤＣＦ規格で定められるようにＤＣＩＭメインフォルダ（第１のフォルダ）４０１の配下に保存される。ＤＣＦ規格においては、ＤＣＩＭメインフォルダ４０１の下に３桁の番号＋“任意の文字列”を名称とするサブフォルダを作成し、この中に静止画ファイル７０を生成する。静止画ファイル７０のファイル名は、例えば静止画ファイル７０の圧縮形式にＪＰＥＧを使用した場合、“任意の文字列”＋４桁の番号＋．ＪＰＧとなる。

さらに、この静止画ファイル７０は、ＪＰＥＧ等の静止画圧縮規格によって圧縮された静止画データに加えて、ファイル変更日時情報を含む付加情報が多重化されている。このファイル変更日時情報は、年月日（ＹＹＹＹ：ＭＭ：ＤＤ、ＹはＹｅａｒを示す４桁の数字、ＭはＭｏｎｔｈを示す２桁の数字、ＤはＤａｙを示す２桁の数字）、及び時分秒（ＨＨ：ＭＭ：ＳＳ、ＨはＨｏｕｒを示す４桁の数字、ＭはＭｉｎｕｔｅを示す２桁の数字、ＳはＳｅｃｏｎｄを示す２桁の数字）から構成されている。

このファイル変更日時情報は、撮影後に編集されていない限り、静止画ファイルの撮影時刻（静止画撮影時刻情報）を示す。本発明の実施の形態１においては、サブフォルダとして「１０１ＣＤＰＦＰ」を備え、その中にＪＰＥＧ規格によって圧縮された静止画ファイル７０（ＩＭＧＡ００１１．ＪＰＧ）が保存されている例を示している。

動画ファイルは（ストリームファイル１５、クリップインフォファイル１４、プレイリストファイル１３）、動画データと、ＰＳＩ（Ｐｒｏｇｒａｍ Ｓｐｅｃｉｆｉｃ Ｉｎｆｏｒｍａｔｉｏｎ）やカメラ情報などの付属情報と、音声信号とが、ＭＰＥＧ−２ Ｓｙｓｔｅｍｓに基づいて多重化されるファイルであって、ＭＯＶＩＥメインフォルダ４０２の配下に保存される。

このＭＯＶＩＥメインフォルダ４０２のフォルダ構造は、下位階層にサムネイルフォルダ（ＴＨＵＭＢ）および、コンテンツフォルダ（ＢＤＭＶ）を有するものとなっている。さらに、ＢＤＭＶコンテンツフォルダのフォルダ構造は、下位階層にインフォファイル１１（ｉｎｆｏ）、メニューファイル１２（ｍｅｎｕ）、プレイリストフォルダ（ＰＬＡＹＬＩＳＴ）、クリップインフォフォルダ（ＣＬＩＰＩＮＦ）、ストリームフォルダ（ＳＴＲＥＡＭ）、バックアップフォルダ（ＢＡＣＫＵＰ）等を有するものとなっている。

なお、ＭＰＥＧ２ Ｓｙｓｔｅｍｓにおいては、圧縮後の動画データを細かなパケットに分割して、他の情報と多重化する構成となっている。さらに、動画データの各フレームを表示する時刻を管理するためにＰＴＳが各フレームに付与される。このＰＴＳは、時間軸を管理するためのＳＴＣ（Ｓｙｓｔｅｍ Ｔｉｍｅ Ｃｌｏｃｋ）によりカウントされた値をタイムスタンプとして付与したものである。

ＢＤＭＶフォルダの下位階層に配置されるインフォファイル１１（ｉｎｆｏ）には、ＢＤＭＶコンテンツフォルダ全体の管理情報が記録されている。さらに、メニューファイル１２（ｍｅｎｕ）には、メニューを構成する情報等が含まれる。

また、クリップインフォフォルダ（ＣＬＩＰＩＮＦ）の配下には、クリップインフォファイル１４（０１０００．ｃｌｐｉ）等が格納されている。クリップインフォファイル１４（０１０００．ｃｌｐｉ）には、動画ファイルにおけるＩフレーム（「ピクチャ」と読み替えることができる。以下同じ。）の位置と、時間情報とを対応付けるタイムテーブルが記録される。より具体的には、タイムテーブルには、Ｉフレームの先頭データが格納されたパケットの、ファイル先頭から数えたパケット番号と、そのＩフレームに付与されたＰＴＳとが対応付けられている。

さらに、ストリームフォルダ（ＳＴＲＥＡＭ）の配下には、ストリームファイル１５（０１０００．ｍ２ｔｓ）等が格納されている。ストリームファイル１５（０１０００．ｍ２ｔｓ）には、ＡＶデータ（動画データ）が含まれる。このストリームファイル１５は、クリップインフォファイル１４に含まれるタイムテーブル等の情報と１対１対応になっており、まとめてクリップという単位とみなされる。

さらに、プレイリストフォルダ（ＰＬＡＹＬＩＳＴ）の配下には、プレイリストファイル１３（０１００１．ｐｌｓｔ）等が格納されている。プレイリストファイル１３（０１００１．ｐｌｓｔ）には、動画ファイルの再生順序に関する情報、対応するクリップの開始フレーム８０に対応する開始フレームＰＴＳ、記録開始日時情報（静止画ファイル７０におけるファイル変更日時情報と同様の年月日時分秒からなる情報）、及び対応するクリップの終了フレーム８１に対応する終了フレームＰＴＳ等が含まれる。

このプレイリストファイル１３は、大きく２種類に分かれている。一つはクリップ全体の情報を網羅したものである。もう一つは、編集作業のためにクリップの部分を複数個つなぎ合わせて再生順序を制御するためのものである。なお、本発明の実施の形態１におけるプレイリストファイル１３は、クリップインフォファイル１４に対応するクリップの情報を網羅したプレイリストファイルとする。

また、バックアップフォルダ（ＢＡＣＫＵＰ）の配下の使用方法は、上記記録媒体１０を接続する機器に任されている。例えば、編集途中での電源断によって動画ファイルが再生不可能な状態になることを防ぐために、インフォファイル１１（ｉｎｆｏ）、メニューファイル１２（ｍｅｎｕ）、プレイリストフォルダ（ＰＬＡＹＬＩＳＴ）、クリップインフォフォルダ（ＣＬＩＰＩＮＦ）のコピーを保存する使用方法等がある。

（１．未使用媒体装着時のリンク情報ファイル生成方法）
以下、本発明の実施の形態１における記録再生装置１００に、静止画データ、及び動画データがまだ記録されていない記録媒体１０が装着されたときの、画像記録動作について図面を参照しながら説明する。より具体的には、静止画ファイル７０を保存するサブフォルダを含むＤＣＩＭメインフォルダ４０１と、動画ファイルを保存する複数のサブフォルダを含むＭＯＶＩＥフォルダ４０２とを記録媒体１０の同階層（互いに包含関係にない位置であればよい。以下同じ。）に作成する。そして、上記静止画データ、上記動画データ、及び上記静止画データを撮影した際の撮影情報を関連付けしたリンク情報ファイル１９を、ＤＣＩＭメインフォルダ４０１及び、ＭＯＶＩＥフォルダ４０２とは別の位置（ＤＣＩＭメインフォルダ４０１及びＭＯＶＩＥフォルダ４０２のいずれにも包含されない位置）に生成する動作である。

実施の形態１においては、ＬＩＮＫＣＴＬメインフォルダを生成し、そのＬＩＮＫＣＴＬメインフォルダの配下にリンク情報ファイル１９（０００００．ｌｉｎｋ）を生成するものとする。このリンク情報ファイル１９は、ＤＣＩＭメインフォルダ４０１以下に保存される静止画ファイル７０と、ＭＯＶＩＥメインフォルダ４０２以下に保存される動画ファイルとの連係情報を示すリンク情報を記録するものであって、図５に示すようなリンク情報テーブルとして生成される。

リンク情報テーブルの各リンク情報（エントリー）には、静止画ファイル名９１、動画クリップインフォファイル名９２、静止画ファイルが撮影された時刻に相当する動画ファイルのＰＴＳ（以下、「静止画相当ＰＴＳ」と略する）９３、及び再生するか否かを示す再生フラグ情報９４が含まれているものとする。

さらに、このリンク情報ファイル１９には、リンク情報テーブルに加えて、ファイル変更日時情報を含む付加情報が多重化されている。このファイル変更日時情報は、静止画ファイル７０のファイル変更日時情報と同様の年月日（ＹＹＹＹ：ＭＭ：ＤＤ）及び時分秒（ＨＨ：ＭＭ：ＳＳ）から構成されている。

まず、記録再生装置１００に、静止画データ及び動画データがまだ記録されていない記録媒体１０が装着されると、制御部１１０は、記録処理部１０６を介して図４に示したＤＣＩＭメインフォルダ４０１と、ＭＯＶＩＥメインフォルダ４０２のサブフォルダと、ＬＩＮＫＣＴＬフォルダとを生成する。この時点では静止画データ、及び動画データとも録画されていないため、静止画ファイル７０、動画のプレイリストファイル１３、クリップインフォファイル１４、ストリームファイル１５などは存在しない。同様に、リンク情報も生成されていないので、リンク情報ファイル１９も存在しない。

以下、この状態から記録再生装置１００が動画データを撮影中に、ユーザが同時撮影機能の操作を行うことで静止画データを撮影し、当該動画データを含む動画ファイルと当該静止画データを含む静止画ファイル７０とを記録媒体１０に記録するときの動作について説明する。

図６は、記録再生装置１００が動画撮影中に同時撮影機能を用いて静止画撮影を行う処理を示したフローチャートである。

（ステップＳ２０００）制御部１１０は、入力部１０９経由でユーザの動画撮影開始操作を受け付け、動画撮影を開始する。

（ステップＳ２００１）制御部１１０は、記録処理部１０６を介して、動画データのストリームファイル１５、クリップインフォファイル１４、及びプレイリストファイル１３を作成し、動画データの記録を開始する。その後、ステップＳ２００２に進む。このとき、制御部１１０は、ストリームファイル１５、クリップインフォファイル１４、及びプレイリストファイル１３のファイル名を内部メモリに記憶する。

（ステップＳ２００２）制御部１１０は、記録処理部１０６を介して、プレイリストファイル１３に記録開始日時情報、開始フレームＰＴＳを書き込む。その後、ステップＳ２００３に進む。

（ステップＳ２００３）制御部１１０は、ユーザが入力部１０９経由で静止画同時撮影操作を行ったかどうかを判定する。そして、静止画同時撮影操作が行われていればステップＳ２０１０へ、行われていなければステップＳ２００４へ進む。

（ステップＳ２００４）制御部１１０は、ユーザが入力部１０９経由で動画撮影完了操作を行ったかどうかを判定する。そして、動画撮影完了操作が行われていればステップＳ２００５へ進み、行われていなければステップＳ２００３及びステップＳ２００４のユーザ操作判定を繰り返す。

（ステップＳ２００５）制御部１１０は、動画データの記録を完了する。その後、ステップＳ２００６に進む。

（ステップＳ２００６）制御部１１０は、記録処理部１０６を介してプレイリストファイル１３に終了フレームＰＴＳを書き込む。そして、画像記録処理を終了する（ステップＳ２００７）。

（ステップＳ２０１０）ステップＳ２００３でユーザの静止画同時撮影操作を受け付けると、制御部１１０は、ステップＳ２０１０からステップＳ２０１３のリンク情報追加処理を行う。まず、制御部１１０は、静止画データを撮影すると同時に、撮影時の動画ＰＴＳを静止画相当ＰＴＳとして内部メモリに記憶する。その後、ステップＳ２０１１に進む。

（ステップＳ２０１１）制御部１１０は、静止画ファイル７０を作成し、静止画データを書き込む。その後、ステップＳ２０１２に進む。このとき、制御部１１０は内部メモリに静止画ファイル７０のファイル名を記憶する。

（ステップＳ２０１２）制御部１１０は、静止画ファイル７０の付加情報にファイル変更日時情報を書き込む。その後、ステップＳ２０１３に進む。

（ステップＳ２０１３）制御部１１０は、記録処理部１０６を介して、リンク情報ファイル１９を作成する。そして、静止画ファイル名９１、動画クリップインフォファイル名９２、静止画相当ＰＴＳ９３、及び再生フラグ情報９４を含むリンク情報を、当該リンク情報ファイル１９に書き込む。その後、ステップＳ２００４に進んでステップＳ２００３及びステップＳ２００４のユーザ操作判定ループに戻る。なお、この時点では、再生フラグ情報９４に再生を示すフラグ値「１」をデフォルト値として設定する。

以上の処理により、動画データの撮影中に静止画データの同時撮影が行われたとき、リンク情報ファイル１９が作成され、リンク情報が付け加えられる。

本発明の実施の形態１においては、上記の構成により、静止画ファイルを保存する静止画フォルダを含むＤＣＩＭメインフォルダ４０１（第１フォルダ）と、動画ファイルを保存する動画フォルダを含むＭＯＶＩＥメインフォルダ４０２（第２フォルダ）とが、同階層に配置される記録媒体１０に対し、同時撮影が実行された時点の静止画ファイル７０のファイル名、動画クリップインフォファイル１４のファイル名、静止画相当ＰＴＳ、及び再生フラグ情報をまとめてリンク情報ファイル１９の１つのリンク情報（エントリー）として生成することが出来る。

これにより、動画記録の従来規格にも静止画記録の従来規格にも存在しないリンク情報ファイル１９が、記録媒体１０上のＤＣＩＭメインフォルダ４０１（静止画フォルダ）、およびＭＯＶＩＥメインフォルダ４０２（動画フォルダ）内に存在しないため、従来規格のみに対応した動画記録装置、もしくは静止画記録再生装置に装着しても誤作動が発生しない。

また、これによって、再生中の静止画データに相当する動画データの再生位置を、静止画ファイル名をキーとしてリンク情報ファイル１９から対応するリンク情報を抽出し、当該リンク情報の動画クリップインフォファイル名９２及び静止画相当ＰＴＳ９３とから直接的に特定することができるので、ファイル検索の高速処理が可能となる効果を奏する。特にファイル数が増加したとしても、図５のリンク情報テーブルの行数が増えるだけである。つまり、従来のように、処理の度に静止画データに付加されている情報から動画ファイルもしくは付加情報を検索して動画位置を特定する必要がないため、処理速度が低下するおそれがない。

上記の説明においては、リンク情報ファイル１９は、再生フラグ情報９４をデフォルト値として再生を意味する「１」を設定するように説明したが、画像内容を確認したうえでユーザ操作により「０（再生不可）」か「１（再生）」かを選択して設定できる構成にしても構わない。このように、リンク情報ファイル１９に再生フラグ情報９４を設けることで、動画ファイルを再生する際に個々のシーンを再生するか否かを編集することができる。つまり、静止画データを同時撮影したが、動画データとしては見ても余り面白くないシーンをスキップして再生することが可能となる効果を奏する。

ここで、静止画データを同時撮影した動画部分（連携再生区間）を意図的にスキップして再生する目的は、単にリンク情報ファイル１９から対応するリンク情報を削除するだけでも実現可能ではある。しかし、この方法では、後述する整合性確認及び修復動作において、静止画ファイル７０が存在するが対応するリンク情報の無いことが検出されたときに、それがスキップする目的で意図的に削除されたものか、それとも静止画動画連携機能に非対応の機器で記録されたために生じた不整合なのかが区別できない。これに対し、ユーザの意図によるスキップを、再生フラグ情報９４として再生不可を示す「０」を記録することで、ユーザの意図と関係なく発生した不整合のみを正確に修復することが可能になる。

さらに、ここで再生フラグ情報９４を設けておき、後述するダイジェスト再生機能を搭載する際に、さらにダイジェスト再生フラグ９５（図５では図示省略）を別途設けることもできる。これにより、ダイジェスト再生として再生するかしないかの設定と、静止画動画連携機能で再生するかしないかの設定とをそれぞれ別々に指定することが可能となる。

また、この目的を、例えばプレイリストフォルダ（ＰＬＡＹＬＩＳＴ）の配下に格納されているプレイリストファイル１３（０１００１．ｐｌｓｔ）を編集することで実現しようとすると、動画データの再生順序に関する情報の複雑な編集、及び記録を行う必要があり、携帯性を重視した記録再生装置１００においては処理負荷が重くなる。一方、実施の形態１の構成であれば少ない処理負荷で実現することが可能である。

なお、リンク情報ファイル１９は、再生フラグ情報９４を含まない構成にしても構わない。

なお、リンク情報ファイル１９を、ＤＣＩＭメインフォルダ４０１及びＭＯＶＩＥメインフォルダ４０２と同階層のＬＩＮＫＣＴＬメインフォルダに保存するのではなく、ルートフォルダ直下にＤＣＩＭメインフォルダ４０１及びＭＯＶＩＥメインフォルダ４０２と並置する形で保存しても構わない。この場合、記録媒体１０を記録再生装置１００に挿入した際、ＬＩＮＫＣＴＬメインフォルダが記録媒体１０に存在するか否かを判定する必要がないため、記録再生装置１００の処理量を低減することが可能となる効果を奏する。

なお、本発明の実施の形態１における記録媒体１０が備えるフォルダ構造は、静止画データを記録するための従来規格に対応した記録フォーマットにおけるフォルダ構造と、動画データを記録するための従来規格に対応した記録フォーマットにおけるフォルダ構造とを備えるものであればよく、どのようなフォーマット形式を利用しても構わない。

なお、リンク情報ファイル１９は、テーブル形式のデータ構成に限定するものではなく、静止画ファイル名９１と、動画クリップインフォファイル名９２と、静止画ファイルが撮影された時刻に相当する動画ファイルの静止画相当ＰＴＳ９３とが１対１に対応しているデータ形式であればどのようなものを利用しても構わない。

なお、リンク情報ファイル１９は、静止画相当ＰＴＳ９３に代えて、静止画ファイルのファイル変更日時情報を含む構成にしても構わない。さらには、静止画データの撮影時刻に対応する動画データ内の時間的な位置を示す情報（静止画相当位置情報）であれば、時刻情報以外の情報（例えば、パケットナンバー等）であってもよい。

（２．リンク情報ファイルを用いた動画ファイル再生方法）
以下、本発明の実施の形態１における記録再生装置１００の静止画動画連携機能による再生動作について図面を参照しながら説明する。より具体的には、静止画ファイル７０を保存するサブフォルダを含むＤＣＩＭメインフォルダ４０１と、動画ファイルを保存する複数のサブフォルダを含むＭＯＶＩＥフォルダ４０２と、本発明の実施の形態１における記録再生装置１００によって生成されたリンク情報ファイル１９とが、同階層に配置される記録媒体１０を装着している際、再生している静止画ファイル７０の撮影時刻付近に撮影された動画データ（静止画連携動画）を再生する動作である。

なお、記録媒体１０内のＭＯＶＩＥフォルダ４０２以下に保存される動画ファイルは、ＭＰＥＧ−２やＨ．２６４等の符号化方法に基づいて圧縮されるものとする。つまり、動画ファイルに含まれる動画データは、画面内予測符号化（フレーム内符号化）されたＩフレーム５０、５１、５２、５３、５４、５５、５６、５７、５８、５９と、画面間予測符号化されたＰフレーム（Ｐフレーム及びＢフレーム）とを含む。

これらの符号化方法において圧縮された動画ファイルを再生する際、記録再生装置１００は、動画ファイルのどのフレームからでも伸張処理を開始できるわけではなく、一般にＩフレームと呼ばれるフレーム内符号化されたフレームからのみ伸張処理を開始可能である。

そこで、記録再生装置１００は、図７に示されるように、静止画ファイル２１の静止画相当ＰＴＳ６１を起点として連携再生区間を決定する。なお、図７に示される静止画ファイル２１は、図５に示されるリンク情報ファイル１９に含まれるリンク情報テーブルにおける静止画ファイル７０（ＩＭＧＡ００１２．ＪＰＧ）に対応している。

以下、本発明の実施の形態１における記録再生装置１００のリンク情報ファイル１９を用いた動画ファイルの再生動作について、図面を参照しながら説明する。

図８は、記録再生装置１００に記録媒体１０が装着された際、記録媒体１０に保存されるリンク情報ファイル１９を基に、静止画ファイル２１を再生・表示している状態から静止画動画連携機能を用いて動画ファイルを再生する再生動作を示すフローチャートである。

（ステップＳ３００１）まず、制御部１１０は、入力部１０９を介して、図７に示す静止画ファイル７０を再生・表示する。その後、ステップＳ３００２に進む。なお、制御部１１０は、この際に静止画ファイル２１のファイル名を内部メモリに記憶する。

（ステップＳ３００２）制御部１１０は、ユーザが入力部１０９経由で静止画動画連携機能操作を行ったかどうかを判定する。そして、静止画動画連携機能操作が行われていればステップＳ３０１０へ、行われていなければステップＳ３００３へ進む。

（ステップＳ３００３）制御部１１０は、ユーザが入力部１０９経由で静止画表示完了操作を行ったかどうかを判定する。そして、静止画表示完了操作が行われていれば静止画表示を完了し（ステップＳ３００４）、行われていなければステップＳ３００１に戻って、次の静止画ファイルを再生・表示するところから処理を繰り返す。

（ステップＳ３０１０）ステップＳ３００２においてユーザが静止画動画連携機能の開始を指示していることを制御部１１０が検出したとき、制御部１１０は、ステップＳ３０１０〜ステップＳ３０１２の静止画動画連携再生処理を実行する。まず、制御部１１０は、再生処理部１１５を介してＬＩＮＫＣＴＬメインフォルダの配下のリンク情報ファイル１９（０００００．ｌｉｎｋ）を読み出す。そして、再生している静止画ファイル７０のファイル名（ＩＭＧＡ００１１．ＪＰＧ）を基に、当該リンク情報ファイル１９の動画クリップインフォファイル名９２の項目から動画クリップインフォファイル１４のファイル名（０１２０００．ｃｌｐｉ）と、静止画相当ＰＴＳ９３の項目から静止画相当ＰＴＳ６１（０ｘ００００２３００３）とを取得する。その後、ステップＳ３０１１に進む。

（ステップＳ３０１１）制御部１１０は、動画クリップインフォファイル１４を読み出し、格納されているタイムテーブルを検索できるようにする。前述したように、タイムテーブルには、Ｉフレームの先頭データが格納されたパケットのファイル先頭から数えたパケット番号と、そのＩフレームに付与されたＰＴＳとが対応付けられている。

制御部１１０は、図７に示すように、静止画相当ＰＴＳ６１を元に所定の連携再生区間を決定する。具体的には、静止画相当ＰＴＳ６１を起点として動画データ内を第１の区間６２だけ過去に遡った位置に最も近いＩフレーム５４を再生開始フレームとし、当該再生開始フレームのパケット番号を取得する。さらに、当該Ｉフレーム５４から第１の区間６２より大きい第２の区間６３だけ未来に進んだ位置のフレーム５７を再生終了フレームとし、当該再生終了フレームのパケット番号を取得する。なお、第１及び第２の区間６２、６３は、時間情報（例えば、３秒、６秒等）であってもよいし、フレーム数やパケット数等であってもよい。

（ステップＳ３０１２）そして、制御部１１０は、再生処理部１１５を介して、取得した連携再生区間だけ動画クリップインフォファイル１４（０２０００．ｃｌｐｉ）に対応したストリームファイル１５を再生・表示する。その後、ステップＳ３００３に戻る。

本発明の実施の形態１においては、上記の構成により、静止画ファイル７０を保存する静止画フォルダを含むＤＣＩＭメインフォルダ４０１と、動画ファイルを保存する動画フォルダを含むＭＯＶＩＥフォルダ４０２と、リンク情報ファイル１９を含むＬＩＮＫＣＴＬフォルダとが、同階層に配置される記録媒体１０に対して、静止画動画連携機能を用いて動画ファイルの再生を行うことができる。

具体的には、記録再生装置１００は、静止画動画連携機能を指示されたことを検出したとき、再生している静止画ファイル７０（ＩＭＧＡ００１１．ＪＰＧ）に対応する静止画相当ＰＴＳ６１（０ｘ００００１０５０００９）をリンク情報ファイル１９から取得する。次に、取得した静止画相当ＰＴＳ６１から、所定の第１の区間６２だけタイムテーブルを遡る範囲で一番前のオブジェクトのＰＴＳ値を持つＩフレーム５４のパケット番号を取得する。そして、取得したパケット番号から第２の区間６３だけ未来に進んだ位置まで動画ファイルを再生する。

以上のような動作により、静止画ファイル７０を指定すると、図５に示したリンク情報テーブルと、クリップインフォファイル１４中のタイムテーブルとから、再生すべき連携再生区間を算出して再生することが可能である。

なお、ここではクリップインフォファイル１４中のタイムテーブルを利用したが、図５のリンク情報テーブルにパケット番号を含めるようにし、同時撮影を行ったときにＩフレームのパケット番号を直接リンク情報テーブルに書き込むようにしても良い。この場合、タイムテーブルを検索しない分だけ、動画再生開始までの処理時間が短くなるという効果を奏する。

（３．ファイル削除時のリンク情報ファイル修正方法）
以下、本発明の実施の形態１における記録再生装置１００の静止画ファイル７０もしくは動画のファイル削除動作について図面を参照しながら説明する。より具体的には、静止画ファイル７０を保存するサブフォルダを含むＤＣＩＭメインフォルダ４０１と、動画ファイルを保存する複数のサブフォルダを含むＭＯＶＩＥフォルダ４０２と、本発明の実施の形態１における記録再生装置１００によって生成されたリンク情報ファイル１９とが、同階層に配置される記録媒体１０を装着している際に、リンク情報ファイル１９を修正する動作である。

以下、本発明の実施の形態１における記録再生装置１００のリンク情報ファイル１９の修正動作について、図面を参照しながら説明する。

図９は、記録再生装置１００に記録媒体１０が装着されている際、記録媒体１０に保存される静止画ファイル７０が削除された際のリンク情報ファイル１９の修正動作を示すフローチャートである。

（ステップＳ４００１）まず、制御部１１０は、入力部１０９経由で静止画ファイルの削除を行う操作信号を検出すると、記録媒体１０にリンク情報ファイル１９（０００００．ｌｉｎｋ）があるか否かを判定する。そして、リンク情報ファイル１９がある場合は、ステップＳ４００２に進む。無い場合は、そのまま動作を終了する。

（ステップＳ４００２）次に、制御部１１０は、削除した静止画ファイル７０のファイル名をキーとするリンク情報が、リンク情報ファイル１９に含まれているか否かを判定する。当該リンク情報がリンク情報ファイル１９に含まれている場合、ステップＳ４００３に進む。無い場合は、そのまま動作を終了する。

（ステップＳ４００３）次に、リンク情報ファイル１９から、削除した静止画ファイル７０に関係するリンク情報を削除し、動作を終了する。例えば、図５においてＩＭＧＡ００１５．ＪＰＧが削除されたことを検出したときは一番下の行を削除する。

なお、動画ファイルを削除する際にも、上記静止画ファイル７０と同様の処理を行ってリンク情報ファイルを修正する。

（４．記録済みメディア装着時のリンク情報ファイルの整合性確認及び修復方法）
以下、本発明の実施の形態１における記録再生装置１００のリンク情報ファイル１９の整合性チェック及び不整合を検出した場合の修復動作について、図面を参照しながら説明する。

図１０及び図１１は、記録再生装置１００に記録媒体１０が装着された際、記録媒体１０にリンク情報ファイル１９があるかどうかを確認し、リンク情報ファイル１９が無いとき、またはリンク情報と静止画ファイル、又はリンク情報と動画ファイルとの間に不整合があるときにリンク情報ファイル１９を修復する動作を示すフローチャートである。

（ステップＳ１０００）記録再生装置１００は、例えば、起動処理完了後、すぐにこの処理を開始する。

（ステップＳ１００１）記録再生装置１００は、ＤＣＩＭメインフォルダ４０１と、ＭＯＶＩＥフォルダ４０２とを同階層に配置している記録媒体１０が装着されたか否かを検出する。そして、装着されたことを検出した場合はステップＳ１００２に進む。

（ステップＳ１００２）記録再生装置１００は、記録媒体１０にＬＩＮＫＣＴＬメインフォルダがあるかどうかを検出する。そして、当該フォルダがあればステップＳ１００４に進む。一方、ＬＩＮＫＣＴＬメインフォルダが無ければ、当該フォルダを作成し（ステップＳ１００３）、ステップＳ１００９に進む。

（ステップＳ１００４）さらに、ＬＩＮＫＣＴＬメインフォルダの配下にリンク情報ファイル１９があるかどうかを検出する。そして、リンク情報ファイル１９があればステップＳ１００５に進む。一方、リンク情報ファイル１９が無ければ、ステップＳ１００９に進む。

（ステップＳ１００５）次に、制御部１１０は、再生処理部１１５を介して、リンク情報ファイル１９の付加情報からファイル変更日時情報を読み出す。その後、ステップＳ１００６に進む。

（ステップＳ１００６）次に、制御部１１０は、再生処理部１１５を介して、静止画ファイル７０の付加情報からファイル変更日時情報を読み出す。その後、ステップＳ１００７に進む。

（ステップＳ１００７）制御部１１０は、リンク情報ファイル１９と静止画ファイル７０とのファイル変更日時情報を比較する。リンク情報ファイル１９のファイル変更日時情報が、静止画ファイル７０のファイル変更日時情報よりも古ければステップＳ１０１０に進み、新しければステップＳ１００８に進む。

（ステップＳ１００８）制御部１１０は、各静止画ファイル７０についてステップＳ１００６及びステップＳ１００７を繰り返し、全静止画ファイル７０の処理が完了すれば、図１１の処理に進む（ステップＳ１０１７）。

（ステップＳ１００９）リンク情報ファイル１９が無かった場合、制御部１１０はリンク情報ファイル１９を作成する。その後、ステップＳ１０１０に進む。

（ステップＳ１０１０）制御部１１０は、再生処理部１１５を介して、プレイリストファイル１３をファイル番号の小さいものから順番に読み出して、ステップＳ１０１０〜ステップＳ１０１６のループ処理を行う。まず、プレイリストファイル１３から記録開始日時情報、開始フレームＰＴＳ、及び終了フレームＰＴＳを読み出す。そして、読み出した各情報に基づいてＭＯＶＩＥメインフォルダ４０２に保存される動画データにおける秒単位の記録終了日時情報を式１によって算出する。その後、ステップＳ１０１１に進む。なお、制御部１１０が再生処理部１１５を介してプレイリストファイル１３を読み出す方法は、ファイル番号の大きいものから順番に読み出す構成にしても構わない。

（ステップＳ１０１１）次に、制御部１１０は、再生処理部１１５を介して、静止画ファイル７０の付加情報からファイル変更日時情報を読み出す。その後、ステップＳ１０１２に進む。なお、ステップＳ１００６で読み出した情報をメモリ等に保持しておいて使うようにしても良い。

（ステップＳ１０１２）制御部１１０は、ステップＳ１０１０において読み出された記録開始日時情報と、同じくステップＳ１０１０によって算出された記録終了日時情報と、ステップＳ１０１１において読み出された静止画ファイル７０のファイル変更日時情報とを付き合わせることで、プレイリストファイル１３に対応したクリップが、静止画ファイル７０の撮影時刻を含むか否かを判定する。含むと判定された場合はステップＳ１０１３に進み、含まないと判定された場合は次の静止画ファイル７０についてステップＳ１０１１に戻って処理を行う。

（ステップＳ１０１３）制御部１１０は、記録処理部１０６を介して、静止画ファイル７０のファイル変更日時情報に対応する静止画相当ＰＴＳを式２から算出する。その後、ステップＳ１０１４に進む。

（ステップＳ１０１４）制御部１１０は、ステップＳ１０１３において算出された静止画相当ＰＴＳ（０ｘ００１０５０００９）と、静止画ファイル７０のファイル名（ＩＭＧＡ００１１．ＪＰＧ）と、動画ファイルのクリップインフォファイル１４のファイル名（０１０００．ｃｌｐｉ）と、再生フラグ情報９４とをリンク情報ファイル１９のリンク情報として生成する。なお、再生フラグ情報９４としては、再生を示すフラグ値「１」をデフォルト値として用いるか、もしくは予めメニュー画面などで設定しておくようにする。

（ステップＳ１０１５）以下、ＤＣＩＭメインフォルダ４０１に含まれる静止画ファイル７０に対し、ステップＳ１０１１からのエントリー生成処理を繰り返し行う。

（ステップＳ１０１６）エントリー生成処理を全てのプレイリストファイル１３について行うと、リンク情報ファイル１９の生成及び不足リンク情報の追加処理を終了して、図１１の処理に進む（ステップＳ１０１７）。

図１１は、図１０で行われたリンク情報ファイル１９の生成及び不足リンク情報の追加処理を受けて、対応する静止画ファイル７０及び動画ファイルが存在しないリンク情報を削除する処理を示すフローチャートである。

（ステップＳ１０２１）制御部１１０は、リンク情報ファイル１９を読み出し、静止画ファイル名９１、動画クリップインフォファイル名９２、及び静止画相当ＰＴＳ９３を読み取る。その後、ステップＳ１０２２に進む。

（ステップＳ１０２２）制御部１１０は、ＤＣＩＭメインフォルダ４０１以下の静止画ファイル７０に、ステップＳ１０２１で読み出した静止画ファイル名９１と同じファイルがあるかを検索する。該当するファイルがあるかどうかを判定して（ステップＳ１０２３）、ある場合にはステップＳ１０２４へ進み、無い場合にはステップＳ１０２８へ進む。

（ステップＳ１０２４）制御部１１０は、ＭＯＶＩＥメインフォルダ４０２以下のクリップインフォファイル１４に、ステップＳ１０２１で読み出した動画クリップインフォファイル名９２と同じファイルがあるかを検索する。該当するファイルがあるかどうかを判定して（ステップＳ１０２５）、ある場合にはステップＳ１０２６へ進み、無い場合にはステップＳ１０２８へ進む。

（ステップＳ１０２６）制御部１１０は、ステップＳ１０２１で読み出したファイル名のクリップインフォファイル１４のタイムテーブルに、ステップＳ１０２１で読み出した静止画相当ＰＴＳに対応するＰＴＳがあるかを検索する。対応するＰＴＳがあるかどうかを判定し（ステップＳ１０２７）、対応するＰＴＳがある場合にはステップＳ１０２１で読み出したリンク情報は有効であると判定してステップＳ１０２９へ進み、無い場合にはステップＳ１０２８へ進む。

（ステップＳ１０２８）ステップＳ１０２３、ステップＳ１０２５、及びステップＳ１０２７において対応するファイル名もしくはＰＴＳ値が無いと判定された場合、制御部１１０は、そのリンク情報をリンク情報ファイル１９から削除する。その後、ステップＳ１０２９に進む。

（ステップＳ１０２９）以下、リンク情報ファイル１９の各リンク情報について順次ステップＳ１０２１からの処理を繰り返し行う。全リンク情報の読み出しを完了すると、リンク情報ファイル１９の整合性チェック・修復処理を終了する（ステップＳ１０３０）。

以上の処理により、装着された記録媒体１０には、装着時点のＤＣＩＭメインフォルダ４０１、及びＭＯＶＩＥフォルダ４０２の内容を正しく反映したリンク情報ファイル１９が記録された状態になっている。

上記の構成の記録再生装置１００は、すでに静止画ファイル７０及び動画ファイルが保存されている記録媒体１０が装着されたとき、静止画ファイル７０の付加情報から撮影時刻を示すファイル変更日時情報を読み出す。次に、プレイリストファイル１３に含まれる記録開始日時情報と、開始フレームＰＴＳと、終了フレームＰＴＳとから、動画の記録終了日時情報を算出する。

次に、記録開始日時情報と、記録終了日時情報と、静止画のファイル変更日時情報とから、プレイリストファイル１３に対応したクリップが静止画ファイル７０の撮影時刻を含むか否かを判定する。次に、撮影時刻を含むと判定された場合は、静止画ファイル７０のファイル変更日時情報に対応する静止画相当ＰＴＳを算出する。そして、算出された静止画相当ＰＴＳ９３と、静止画ファイル名９１と、動画クリップインフォファイル名９２と、再生フラグ情報９４とをまとめてリンク情報ファイル１９の１つのリンク情報として生成もしくは編集する。

また、上記の構成により、記録媒体１０に記録されているフォルダやファイルを、従来の静止画記録規格のみに対応した静止画記録再生装置で削除したとき、もしくは従来の動画記録規格のみに対応した動画記録再生装置で削除や編集を行ったときも、従来規格準拠部分には矛盾を生じないとともに、静止画動画連携機能を実現可能な状態に容易に修復することが出来る。

なお、本発明の実施の形態１における記録再生装置１００が、リンク情報ファイル１９の生成開始もしくは修復開始の指示をユーザから受け付ける開始ボタン等を備えてもよい。この開始ボタンがユーザによって操作されると、図１０及び図１１に示したフローチャートの通り、記録媒体１０が装着されているか否かを判定する。そして、記録媒体１０が装着されている場合は、ステップＳ１００２からステップＳ１０２９を実行する構成にしても構わない。これにより、ユーザが指定する任意の時間にリンク情報ファイル１９が生成もしくは修復可能となる。

（５．リンク情報ファイルを用いたダイジェスト再生）
記録再生装置１００は、連携再生区間を順次再生し、その間の区間をスキップすることで見たいシーンのみを再生するダイジェスト再生機能に対応することが可能である。この例について以下に説明する。

図１２は、ダイジェスト再生機能の概要を示す図である。動画ファイル３０を撮影しているときに同時撮影した静止画ファイル２１、２２の撮影時刻は、動画ファイル３０としても見たい内容が含まれている時間帯であると考えられる。従って、動画ファイル３０のうち、同時撮影が行われた前後の時間帯、すなわち連携再生区間を順次再生し、その間の区間をスキップすることで見たいシーンのみを再生するダイジェスト再生機能を実現することが可能である。

本発明の実施の形態１においては、図５のリンク情報テーブルに再生フラグ情報９４を設けている。同時撮影の実行時には、この再生フラグ情報９４を常に「再生」を示す値（ここでは「１」とする）に設定する。ダイジェスト再生を実行する際には、この再生フラグ情報９４が「１」になっているリンク情報を取得し、図８と同様の手順で順次再生していくことでダイジェスト再生を実現できる。

あるいは、図１３に示すように、図５のリンク情報テーブルに加えてダイジェスト再生フラグ９５を別途設けても良い。この場合、再生フラグ情報９４は動画ファイルを再生する際に個々のシーンを再生するか否かを編集する目的の専用フラグとなり、ダイジェスト再生するかどうかをこれとは別途設定することが可能となるという効果を奏する。

このダイジェスト再生に対応したフローチャートを図１４に示す。以下の説明においては、リンク情報テーブルとして図５に示したものを用いる前提で説明する。

（ステップＳ５００１）まず、制御部１１０は、再生処理部１１５を介して、ＬＩＮＫＣＴＬメインフォルダの配下のリンク情報ファイル１９（０００００．ｌｉｎｋ）を読み出し、先頭のリンク情報に格納されている動画クリップインフォファイル名９２（０１０００．ｃｌｐｉ）、静止画相当ＰＴＳ９３（０ｘ００１０５０００９）、及び再生フラグ情報９４（０）を取得する。その後、ステップＳ５００２に進む。

（ステップＳ５００２）制御部１１０は、再生フラグ情報９４の値を確認し、再生を示す「１」であればステップＳ５０１０に進み、再生不可を示す「０」であればステップＳ５００３に進む。

（ステップＳ５００３）制御部１１０は、全リンク情報の読み出しが完了していなければステップＳ５００１に戻って次のリンク情報を読み出す。一方、全リンク情報の読み出しが完了していればダイジェスト再生処理を完了する（ステップＳ５００４）。

例えば、図５に示したリンク情報テーブルの場合は、最初のリンク情報の再生フラグ情報９４は「０」であるためステップＳ５００３に進む。そして、全てのリンク情報を読み出していないのでＳ５００１に戻って次のリンク情報を読み出す。再生フラグ情報が「１」である３番目のリンク情報を読み出したとき、制御部１１０は、その動画クリップインフォファイル名９２（０２０００．ｃｌｐｉ）と、静止画相当ＰＴＳ９３（０ｘ００００５６０２７）とを内部メモリに記憶してステップＳ５０１０に進む。

（ステップＳ５０１０）制御部１１０は、再生フラグ情報９４が「１」であるリンク情報からファイル名を取得したクリップインフォファイル１４を読み出し、格納されているタイムテーブルを検索できるようにする。前述したように、タイムテーブルには、Ｉフレームの先頭データが格納されたパケットのファイル先頭から数えたパケット番号と、そのＩフレームに付与されたＰＴＳとが対応付けられている。制御部１１０は、図７に示すように、静止画相当ＰＴＳ６１を基に第１の区間６２だけタイムテーブルを遡って、一番前の（最小の）ＰＴＳ値を持つＩフレーム５４を再生開始Ｉフレームとし、そのパケット番号を取得してステップＳ５０１１に進む。

（ステップＳ５０１１）そして、制御部１１０は、再生処理部１１５を介して、取得したパケット番号から第２の区間６３だけ動画クリップインフォファイル１４（０２０００．ｃｌｐｉ）に対応したストリームファイル１５を再生・表示する。その後、ステップＳ５００３に戻る。

このように実現することで、実際にダイジェスト再生したときに、静止画データを同時撮影したものの、動画データとしては見ても余り面白くないシーンがあった場合、記録再生装置１００を操作して、再生フラグ情報９４を「０」に書き換えることで、次回以降のダイジェスト再生時にスキップすることが可能となるという効果を奏する。

また、このダイジェスト再生の実現のための情報は、記録媒体１０を従来の静止画規格、動画規格のみにしか対応していない他の記録再生装置に装着したときの動作に悪影響を与えない効果を奏する。

さらに、リンク情報テーブルに再生フラグ情報９４を設けることで、ダイジェスト再生の際に個々のシーンを再生するかどうかを編集することができる。このような編集を、例えばプレイリストフォルダ（ＰＬＡＹＬＩＳＴ）の配下に格納されているプレイリストファイル１３（０１００１．ｐｌｓｔ）を編集することで実現しようとすると、動画データの再生順序に関する情報の複雑な編集及び記録を行う必要があり、携帯性を重視した記録再生装置１００においては処理負荷が重くなる。一方、実施の形態１の構成であれば少ない処理負荷で実現することが可能であるという効果を奏する。

なお、連携再生区間は、ユーザが記録再生装置１００を介して任意に設定できる値であっても構わないし、記録再生装置１００の性能から予め設定される値であっても構わない。

以上、実施の形態１における記録再生装置１００によれば、静止画データを順次表示している最中において、気に入った静止画データの表示中にボタンを押すなどの操作を行うことにより、その近傍の動画データの再生を開始する静止画動画連携機能を実現することができる。

また、静止画データから、それに相当する動画位置を、動画クリップインフォファイル名９２と静止画相当ＰＴＳ９３とから直接的に特定することができるので、高速処理が可能である。ファイル数が増加したとしても、図５のリンク情報テーブルの行数が増えるだけである。すなわち、従来のように静止画データに付加されている情報から動画ファイルもしくは付加情報を検索して動画位置を特定する必要がないため、処理速度が低下するおそれがない。

また、記録再生装置１００で記録した記録媒体１０を、従来の静止画規格、動画規格のみにしか対応していない機器で再生、編集、及びファイル削除しても、従来規格準拠部分には矛盾が生じないとともに、静止画動画連携機能についても記録媒体１０の装着時に容易に修復することができる。

さらには、静止画撮影したシーンの周辺を順に再生していくことで、ダイジェスト再生機能を実現することができる。このダイジェスト再生の実現のための情報は、記録媒体１０を従来の静止画規格、動画規格のみにしか対応していない記録再生装置に装着したときの動作に悪影響を与えない。

さらに、リンク情報テーブルに再生フラグ情報９４もしくはダイジェスト再生フラグ９５を設けることで、ダイジェスト再生の際に個々のシーンを再生するかどうかを編集することができる。このような編集を、例えばプレイリストフォルダ（ＰＬＡＹＬＩＳＴ）の配下に格納されているプレイリストファイル１３（０１００１．ｐｌｓｔ）を編集することで実現しようとすると、動画データの再生順序に関する情報の複雑な編集及び記録を行う必要があり、携帯性を重視した記録再生装置１００においては処理負荷が重くなる。一方、実施の形態１の構成であれば少ない処理負荷で実現することが可能である。

なお、上記の説明では記録再生装置１００をビデオカメラとして説明したが、記録再生装置の形態はこれに限るものではない。また、静止画撮影や動画撮影も含めた全機能を持っている必要は無い。以下にその一例として、編集機能のみをもった据え置き型のリンク情報生成装置として実現した例を示す。

図１５は、本発明の実施の形態１におけるリンク情報生成装置２００のハードウェア構成を示す図である。ここでは、同時撮影機能を持った記録再生装置１００によって静止画と、動画及び音声とが記録された記録媒体１０を装着し、リンク情報を生成するための装置について説明する。

図１５に示されるように、リンク情報生成装置２００は、画像生成表示部２０１、入力処理部２０２、制御部２０３、記録再生処理部２０４、記録制御部２０５、静止画分離伸張部２０６、動画分離伸張部２０７などを備える。また、装置外部に表示装置２１０、入力装置２１１などを接続して使用する。

リンク情報生成装置２００の各部は、制御部２０３の制御により動作する。制御部２０３は、例えばソフトウェアを実行可能なＣＰＵで構成できる。画像生成表示部２０１は、ユーザに操作を選択させるためのＧＵＩ画面を生成して、外部の表示装置２１０に出力する。入力処理部２０２は、ユーザからの入力操作を外部の入力装置２１１経由で取得し、制御部２０３に出力する。

制御部２０３の機能ブロックは、図３Ｂと同様である。但し、動画記録部１１１１、静止画記録部１１１２等は省略することができる。

記録再生処理部２０４は、記録媒体１０に対して制御部２０３から指示されたファイル操作を行う。また、再生対象の静止画データを記録媒体１０から読み出し、静止画分離伸張部２０６に出力する。また、再生対象の動画データを記録媒体１０から読み出し、動画分離伸張部２０７に出力する。

記録制御部２０５は、記録媒体１０を駆動するドライブ装置、あるいは、記録アドレス入力手順などの記録プロトコルを制御する。

静止画分離伸張部２０６は、記録再生処理部２０４から出力された静止画データを、記録時に施されたＪＰＥＧなどの符号化方法に基づいて分離して伸張する。伸張して得られた静止画信号を画像生成表示部２０１に出力する。

動画分離伸張部２０７は、記録再生処理部２０４から出力された動画データを、記録時に施されたＭＰＥＧ−２やＨ．２６４などの符号化方法に基づいて、分離して伸張する。伸張して得られた動画データを画像生成表示部２０１に出力する。

このように構成したリンク情報生成装置２００は、撮像部１０２などを持たないため、静止画データ及び動画データを撮影する機能は持たない。しかしながら、静止画動画連携機能による再生、ファイルの削除や編集及びこれに伴うリンク情報ファイル修正、記録済みメディア装着時のリンク情報ファイルの整合性確認及び修復、リンク情報ファイルを用いたダイジェスト再生、再生フラグ情報やダイジェスト再生フラグの編集といった操作は可能である。携帯型の記録再生装置１００に対して、このようなリンク情報生成装置２００は、例えば、ユーザインターフェースの充実したＰＣ編集システムとして構築することが可能である。

なお、リンク情報生成装置２００においては静止画分離伸張部２０６、及び動画分離伸張部２０７を独立した処理手段として説明している。これらをハードウェア（集積回路）として実現することで、画像表示にかかる時間を短縮することが可能となり、特に動画分離伸張部２０７においてはＨＤＴＶなどの高精細な動画をリアルタイム表示することが可能となるという効果を奏する。

その一方で、それぞれを制御部２０３上で実行するソフトウェアとして実現しても良い。このように構成することで、動画データのリアルタイム表示を行うには処理性能が非常に高い制御部２０３を必要とする代わりに、リンク情報生成装置２００を一般的なパーソナルコンピュータによって実現することが可能であるという効果を奏する。

（実施の形態２）：高速撮影対応
以下、本発明の実施の形態２における記録再生装置３００について、図面を参照しながら説明する。実施の形態２における記録再生装置３００は、実施の形態１における記録再生装置１００に備えられる動作に加えて高速撮影画像への対応を可能とする構成となっている。

図１６は、本発明の実施の形態２における記録再生装置３００のハードウェア構成を示す図である。なお、実施の形態１におけるハードウェア構成と同じものは同一符号を使用し、その詳細な説明は省略する。

本実施の形態２における記録再生装置３００と、実施の形態１における記録再生装置１００との相違点は、高速度撮影に対応する画像信号処理部３０１、記録処理部３０２、第２の動画圧縮多重部３０３、制御部３０４、画像信号処理部３０５、再生処理部３０６、第２の動画分離伸張部３０７を備えることである。なお、第１の動画圧縮多重部１０５及び第１の動画分離伸張部１１４は、図３Ａの動画圧縮多重部１０５及び動画分離伸張部１１４と同一である。

画像信号処理部３０１は、Ａ／Ｄ変換部１０３から出力されたデジタル信号に対してノイズ除去や画質調整等の処理を施す。そして、静止画撮影の場合は静止画信号を静止画圧縮多重部１３０に出力する。また、動画撮影の場合は動画信号を第１及び第２の動画圧縮多重部１０５、３０３に出力する。

通常速度での撮影の場合は、第１の動画圧縮多重部１０５にのみ出力する。このときの動画信号は、図１７に示すように毎秒３００フレームのプログレッシブ走査画像（以下、３００ｐ画像と称す。）から５フレーム置きに１フレームを取り出し、取り出したフレームについて交互に偶数ラインのみ、もしくは奇数ラインのみを抜き出すことで得られる毎秒６０フィールドのインタレース画像（以下、６０ｉ画像と称す。）であってもよい。または、毎秒３００フィールドのインタレース走査画像（以下、３００ｉ画像と称す。）から５フィールド置きに１フィールド分の画像を抜き取ることで得られる６０ｉ画像であってもよい。

なお、この６０ｉ画像はＢＤ、ＡＶＣＨＤ等の従来規格に準拠した映像信号であるため、第１の動画圧縮多重部１０５で従来規格準拠の圧縮符号化を施し、そのまま動画ファイルとして従来規格に対応した記録フォーマットで記録媒体１０に記録することが可能である。

一方、高速撮影の場合は、６０ｉ画像を第１の動画圧縮多重部１０５に出力し、３００ｐ画像の高速撮影画像から上記の６０ｉ画像を抜き出した残りを第２の動画圧縮多重部３０３に出力する。すなわち、５フレーム置きに４フレーム分の画像信号から交互に偶数ラインのみ、もしくは奇数ラインのみを抜き出すことで毎秒２４０フィールドのインタレース画像（以下、２４０ｉ画像と称す。）を第２の動画圧縮多重部３０３に出力する。

なお、図１７が示しているように、この毎秒２４０フィールドは等間隔ではなく変則２４０ｉ画像となる。あるいは３００ｉ画像の高速撮影画像から上記の６０ｉ画像を抜き出した残り、すなわち５フィールド置きに４フィールドを抜き出すことで変則２４０ｉ画像を得ることができる。

この変則２４０ｉ画像は従来規格には整合しないが、フレーム／フィールド間の相関性が残っているため、ＭＰＥＧ−２、Ｈ．２６４等のいわゆるハイブリッド符号化を用いて、第２の動画圧縮多重部３０３で圧縮符号化を施し、高速撮影補助ファイルとして独自フォーマットで記録媒体１０に記録することが可能である。

第２の動画圧縮多重部３０３は、画像信号処理部３０１から出力された、高速撮影時に第１の動画圧縮多重部１０５により圧縮されなかったフレームにより構成される画像信号を、ＭＰＥＧ−２やＨ．２６４等の符号化方法に基づいて圧縮して多重化する。多重化して得られた画像信号を高速撮影補助ファイルとして記録処理部３０２に出力する。

記録処理部３０２は、静止画圧縮多重部１３０から出力された静止画データ、第１の動画圧縮多重部１０５から出力された動画データ、および第２の動画圧縮多重部３０３から出力された高速撮影補助データをそれぞれの規格に設定されているファイル構成に従って記録媒体１０に書き込む。

制御部３０４は、画像信号処理部３０１、静止画圧縮多重部１３０、第１の動画圧縮多重部１０５、記録処理部３０２、第２の動画圧縮多重部３０３、記録制御部１０８、画像生成部１１１、画像信号処理部３０５、静止画分離伸張部１３１、第１の動画分離伸張部１１４、再生処理部３０６、第２の動画分離伸張部３０７を制御して、記録再生装置３００における記録処理、再生処理等を実行する。

なお、制御部２０３の機能ブロックは、図３Ｂと同様である。但し、動画特定部１１３１は、上記の機能に加えて、静止画連携動画を含む動画ファイルに対応する高速撮影補助ファイルを特定する。同様に、リンク情報生成部１１３３は、上記の機能に加えて、動画特定部１１３１によって特定された高速撮影補助ファイルを識別する高速動画識別情報を含めたリンク情報を生成する。

画像信号処理部３０５は、静止画分離伸張部１３１が静止画データを伸張して出力する静止画信号に表示用画質調整等の処理を施し、表示部１１２に出力する。また、第１の動画分離伸張部１１４が動画データ（通常再生用データ）を伸張して出力する動画信号に表示用画質調整等の処理を施し、表示部１１２に出力する。第２の動画分離伸張部３０７から高速撮影補助データが得られる場合には、必要に応じて動画信号と高速撮影補助データとを用いて滑らかなスロー再生画像を生成し、表示部１１２に出力する。さらに、必要に応じて画像生成部１１１が生成したメニュー画像等をそのまま、もしくは静止画分離伸張部１３１から出力された伸張後の静止画信号や、第１の動画分離伸張部１１４から出力された伸張後の動画信号に多重化して、画像信号として表示部１１２に出力する。

第２の動画分離伸張部３０７は、再生処理部３０６から出力された高速撮影補助データを、第２の動画圧縮多重部３０３が施したＭＰＥＧ−２やＨ．２６４等の符号化方法に基づいて分離して伸張する。伸張して得られた高速撮影補助データを画像信号処理部３０５に出力する。

再生処理部３０６は、再生対象の動画ファイルを記録媒体１０から読み出し、第１の動画分離伸張部１１４に出力する。また、再生対象の動画データに関連した高速撮影補助ファイルを記録媒体１０から読み出し、第２の動画分離伸張部３０７に出力する。

以下、本発明の実施の形態２における、記録媒体１０のファイル構造について、図面を参照しながら説明する。

図１８は、実施の形態２における記録媒体１０に記録されているファイル構成例を示す図である。図１８に示されるように、ここでは一例として、ＤＣＦ規格によって静止画ファイル７０が保存されるファイル構成を備えるものとする。なお、実施の形態１と同じであるため詳細な説明は省略する。

動画ファイルは、実施の形態１と同様に、動画データと、付属情報と、音声信号とが、ＭＰＥＧ−２ Ｓｙｓｔｅｍｓに基づいて多重化されるファイルであって、ＭＯＶＩＥメインフォルダの配下に保存される。このＭＯＶＩＥメインフォルダのフォルダ構造は、下位階層にサムネイルフォルダ（ＴＨＵＭＢ）と、通常動画ファイルを保存するコンテンツフォルダ（ＢＤＭＶ）と、高速撮影補助ファイルを保存するＨＩＧＨＲＡＴＥフォルダとを有するものとなっている。

なお、実施の形態２においては、ＨＩＧＨＲＡＴＥフォルダがＭＯＶＩＥメインフォルダ直下に置かれる構成に限定されるものではなく、ＨＩＧＨＲＡＴＥフォルダをルートフォルダ直下、すなわちＤＣＩＭフォルダ、ＭＯＶＩＥフォルダ及びＬＩＮＫＣＴＬフォルダと同一階層に作成する構成にしても構わない。

通常動画ファイルを保存する場合、ＢＤＭＶフォルダのファイル構成は、実施の形態１における図４を用いて説明したのと同様であるため、その詳細な説明は省略する。

ＨＩＧＨＲＡＴＥフォルダのフォルダ構造は、ＢＤＭＶフォルダのフォルダ構造と同様にプレイリストフォルダ（ＥＸＴＰＬＡＹＬＩＳＴ）、クリップインフォフォルダ（ＥＸＴＣＬＩＰＩＮＦ）、ストリームフォルダ（ＥＸＴＳＴＲＥＡＭ）、バックアップフォルダ（ＢＡＣＫＵＰ）等を有するものとなっている。

さらに、プレイリストフォルダ（ＥＸＴＰＬＡＹＬＩＳＴ）の下位階層には、プレイリストファイル１６（０１００１．ｐｌｓｅ）等が記録されている。また、クリップインフォフォルダ（ＥＸＴＣＬＩＰＩＮＦ）の下位階層には、クリップインフォファイル１７（０１０００．ｃｌｐｅ）等が記録されている。そして、ストリームフォルダ（ＥＸＴＳＴＲＥＡＭ）の下位階層には、ストリームファイル１８（０１０００．ｍ２ｔｅ）等が記録されている。

プレイリストファイル１６（０１００１．ｐｌｓｅ）には、高速撮影画像に関する画像フレームまたは、フィールドの再生順序に関する情報等が含まれる。

クリップインフォファイル１７（０１０００．ｃｌｐｅ）には、時間情報と画像データとの位置を対応付け、部分再生、特殊再生を実現するタイムテーブル等が含まれる。

ストリームファイル１８（０１０００．ｍ２ｔｅ）には、高速撮影補助ファイルが含まれる。

さらに、ＤＣＩＭメインフォルダに保存される静止画ファイルと、ＭＯＶＩＥメインフォルダに保存される動画ファイルと、ＨＩＧＨＲＡＴＥフォルダに保存される高速撮影補助ファイルとの連係情報を記録するため、ＬＩＮＫＣＴＬメインフォルダを備える。そして、ＬＩＮＫＣＴＬメインフォルダの配下にリンク情報ファイル２０（０００００．ｌｉｎｋ）が格納されている。なお、ＬＩＮＫＣＴＬメインフォルダを設けず、リンク情報ファイル２０をルートフォルダ直下にＤＣＩＭメインフォルダ及びＭＯＶＩＥメインフォルダと並置する構成にしても構わない。

図１９は、リンク情報ファイル２０に格納されるリンク情報テーブルの構成例を示す図である。リンク情報テーブルの各リンク情報には、実施の形態１で示した静止画ファイル名９１、動画クリップインフォファイル名９２、静止画相当ＰＴＳ９３、再生フラグ情報９４に加えて、高速撮影補助ファイル名９６が登録されている。この高速撮影補助ファイル名９６をリンク情報に加えることで、静止画ファイル７０から、それに相当する高速撮影補助ファイルの再生位置を、高速撮影補助ファイル名９６と静止画相当ＰＴＳ９３とから直接的に特定することができるので、ファイル検索の高速処理が可能となる効果を奏する。また、図２に示した静止画データの表示画面に、滑らかなスロー再生表示が可能である「高速撮影」アイコンを表示することが可能になる。さらには高速撮影アイコン表示のあるときに、通常再生かスロー再生かを操作で選択して動画再生することも可能である。

（１．高速撮影対応の記録再生装置における未使用媒体装着時のリンク情報ファイル生成方法）
以下、本発明の実施の形態２における記録再生装置３００に、静止画データ及び動画データがまだ記録されていない記録媒体１０が装着されたときの、画像記録動作について説明する。

実施の形態２においては、撮影を行う前に通常撮影か高速撮影かを選択して撮影することを想定する。この場合、高速撮影を行ったとき、動画データの１つのクリップに対応した高速撮影補助データが作成される。高速撮影補助データのプレイリストファイル１６には、動画データに対応して再生時に利用可能な高速撮影補助データのクリップインフォファイル１７と再生時間が記載されている。なお、ここでは再生時間は高速撮影のフレーム単位まで記載している。

この場合の基本的な処理は、実施の形態１において図６を用いて説明した処理と同一である。実施の形態２における相違は下記の２点のみである。

（１）動画を記録する処理（ステップＳ２００１、ステップＳ２００２、ステップＳ２００６）において、ＢＤＭＶメインフォルダ以下に通常動画ファイル（ストリームファイル１５、クリップインフォファイル１４、プレイリストファイル１３）を保存するのと同時に、ＨＩＧＨＲＡＴＥメインフォルダ以下に高速撮影補助ファイル（ストリームファイル１８、クリップインフォファイル１７、プレイリストファイル１６）を記録する。

このとき、通常動画ファイルの各ファイルと、これに対応する高速撮影補助ファイルの各ファイルとは、ファイル名の拡張子を除いた部分を同一にしておく。例えば、図１８においては通常動画ファイルのプレイリストファイル１３が０１００１．ｐｌｓｔというファイル名であるとき、これに対応した高速撮影補助ファイルのプレイリストファイル１６は０１００１．ｐｌｓｅというファイル名で作成する。クリップインフォファイル、ストリームファイルも同様である。

（２）ステップＳ２０１３のリンク情報ファイル２０にエントリーを書き込む際に、あわせて高速撮影補助ファイル名９６を書き込む。高速撮影ではなく、通常撮影中に静止画動画同時撮影を行う場合には、高速撮影補助ファイル名９６を「Ｎｏ＿ｆｉｌｅ」とする。

上記の構成により、大幅な処理の追加を行うことなく、高速撮影対応の記録再生装置３００においてもリンク情報ファイル２０を生成することができるという効果を奏する。

（２．高速撮影対応の記録再生装置におけるリンク情報ファイルを用いた動画ファイル再生方法）
以下、本発明の実施の形態２における、図１８に示すファイル構造を持つ記録媒体１０を装着している際、再生している静止画データの撮影時刻付近に撮影された通常動画ファイル、または高速撮影された動画ファイルの再生を行う記録再生装置３００について図面を参照しながら説明する。なお、記録媒体１０には図１９に示されるようなリンク情報ファイル２０が含まれているものとする。

まず、通常動画ファイルの再生について図面を参照しながら説明する。

図２０は、図１８のファイル構成におけるＢＤＭＶフォルダ以下のファイルの関係を説明する図である。通常動画ファイルのみを再生する場合、制御部３０４は、再生制御を行うために、プレイリストファイル１３、クリップインフォファイル１４、ストリームファイル１５を使用する。

プレイリストファイル１３には、再生したいクリップインフォファイル１４と再生時間とが記載されている。このプレイリストファイル１３を再生すると、指示されたクリップインフォファイル１４が参照されて、そのタイムテーブル等の情報を用いて指定されたストリームファイル１５が再生される。

例えば、プレイリストファイル１３（０１００１．ｐｌｓｔ）には、クリップ（＃１）、クリップ（＃２）等の順に再生されることが示されている。このとき、クリップ（＃１）については、クリップインフォファイル１４（０１０００．ｃｌｐｉ）によって対応付けられているストリームファイル１５（０１０００．ｍ２ｔｓ）が再生される。クリップ（＃２）については、クリップインフォファイル１４（０２０００．ｃｌｐｉ）によって対応付けられているストリームファイル１５（０２０００．ｍ２ｔｓ）が再生される。

このＢＤＭＶフォルダ以下のファイル構成を従来規格のフォルダ構造に合わせることで、記録媒体１０を高速撮影に対応していない従来規格準拠の画像再生装置で再生した場合でも、毎秒３０フレーム相当の動画を再生することができるとともに、プレイリスト編集等の機能も従来通りに使用できる。

次に、高速撮影補助ファイルを用いて、高速撮影された動画ファイルの再生について図面を参照しながら説明する。

図２１は、図１８のファイル構成におけるＢＤＭＶフォルダ以下のファイルとＨＩＧＨＲＡＴＥフォルダ以下のファイルの関係を説明する図である。

高速撮影補助ファイルを用いて滑らかなスロー再生を行う場合、制御部３０４は、ＢＤＭＶフォルダ以下のプレイリストファイル１３を参照する。例えば、プレイリストファイル１３（０１００１．ｐｌｓｔ）を参照する場合は、ＨＩＧＨＲＡＴＥメインファイル以下のＥＸＴＰＬＡＹＬＩＳＴフォルダを確認して、同じファイル番号を持つプレイリストファイル１６（０１００１．ｐｌｓｅ）をあわせて参照する。

図２２は、静止画動画連携機能ではなく、プレイリストを用いて再生を行う場合のフローチャートである。

（ステップＳ６００１）まず、制御部３０４は、ユーザにより入力部１０９を介して設定された再生モードを判定する。そして、再生モードが通常再生モードの場合はステップＳ６０１３へ進み、再生モードが高速撮影モードの場合はステップＳ６００２に進む。

（ステップＳ６０１３）ステップＳ６０１３〜ステップＳ６０１６は、通常再生モードにおける処理である。再生処理部３０６は、再生対象の通常動画ファイルを記録媒体１０から読み出す。

（ステップＳ６０１４）第１の動画分離伸張部１１４は、再生処理部３０６により読み出された通常動画ファイルに含まれる動画データを、分離して伸張する。

（ステップＳ６０１５）画像信号処理部３０５は、第１の動画分離伸張部１１４から出力された伸張後通常動画データに表示用画質調整などの画像信号処理を施し、通常再生画像を生成する。

（ステップＳ６０１６）表示部１１２は、画像信号処理部３０５により生成された通常再生画像を再生し、再生した画像をモニタなどに表示する。

以上のように、記録再生装置３００は、通常再生モード時には、従来規格に準拠した毎秒３０フレームに相当する画像データをＢＤＭＶメインフォルダから読み出し、再生する。

（ステップＳ６００２）一方、再生モードが高速再生モードの場合、制御部３０４は、再生対象の通常動画ファイルに対応する高速撮影補助ファイルが記録媒体１０に記録されているか否かを判定する。そして、高速撮影補助ファイルがあればステップＳ６００３に進み、なければステップＳ６０１３に進む。

高速撮影モードの場合、記録処理部３０２は、通常動画ファイルの１つのクリップに対応した高速撮影補助ファイルをＨＩＧＨＲＡＴＥメインフォルダに記録する。高速撮影補助ファイルのプレイリストファイル１６には、通常動画ファイルに対応して再生時に利用可能な高速撮影補助ファイルのクリップインフォファイル１７と再生時間とが記載されている。なお、プレイリストファイル１６に記載される再生時間は、高速撮影のフレーム単位まで記載される。

再生処理部３０６は、まず、通常動画ファイルのプレイリストファイル１３及び高速撮影補助ファイルのプレイリストファイル１６を参照する。

以下、プレイリストファイル１３に含まれる最初のクリップ（＃１）を再生する場合を説明する。ここでは、クリップ（＃１）の再生時間に対応するクリップが高速撮影補助ファイルのプレイリストファイル１６に存在しない。つまり、クリップ（＃１）は、通常撮影モードで記録された画像データ、又は高速撮影に対応していない従来規格の画像記録装置により記録された画像データである。なお、クリップ（＃１）に対応する高速撮影補助ファイルが無いことは、リンク情報ファイル２０を読み出して、高速撮影補助ファイル名９６のところに「Ｎｏ＿Ｆｉｌｅ」という値が入っていることから確認することも出来る。

高速撮影補助ファイルが記録されていないので（ステップＳ６００２でＮｏ）、記録再生装置３００は、通常再生モードと同様の処理（ステップＳ６０１３〜ステップＳ６０１６）を行う。なお、記録媒体１０に対応する高速撮影補助ファイルが記録されていない場合（ステップＳ６００２でＮｏ）、制御部３０４は、ユーザにエラーの内容等を表示し、再生処理を終了してもよい。また、記録再生装置３００は、通常動画ファイルを通常のフレーム間隔でスロー再生してもよい。

続いて、クリップ（＃２）を再生する処理を説明する。クリップ（＃２）の再生時間に対応するクリップ（＃１１）が高速撮影補助ファイルのプレイリストファイル１６に存在する。つまり、クリップ（＃２）は、高速撮影モードで記録された画像データである。

（ステップＳ６００３）高速撮影補助ファイルが記録されているので（Ｓ６００２でＹｅｓ）、再生処理部３０６は、再生対象の通常動画ファイルと、当該通常動画ファイルに関連した高速撮影補助ファイルとを記録媒体１０から読み出す。具体的には、再生処理部３０６は、クリップインフォファイル１７（０２０００．ｃｌｐｅ）によって対応付けられている高速撮影補助ファイルのストリームファイル１８（０２０００．ｍ２ｔｅ）を読み出す。また、再生処理部３０６は、クリップインフォファイル１４（０２０００．ｃｌｐｉ）によって対応付けられている通常動画ファイルのストリームファイル１５（０２０００．ｍ２ｔｓ）を読み出す。

（ステップＳ６００４）次に、第１の動画分離伸張部１１４は、再生処理部３０６により読み出された通常動画ファイルに含まれる動画データを分離及び伸張する。同様に、第２の動画分離伸張部３０７は、再生処理部３０６により読み出された高速撮影補助ファイルに含まれる高速撮影補助データを分離及び伸張する。

（ステップＳ６００５）次に、画像信号処理部３０５は、伸張後の通常動画データと伸張後の高速撮影補助データとを合成（すなわち、フレーム単位で時系列に並べ替える）することで、毎秒３００フィールドの画像信号を復元する。画像信号処理部３０５は、復元した毎秒３００フィールドの画像信号から、滑らかなスロー再生画像を生成する。

（ステップＳ６００６）表示部１１２は、画像信号処理部３０５により生成されたスロー再生画像を再生し、再生した画像をモニタなどに表示する。

以上のように、記録再生装置３００は、高速再生モード時には、従来規格に準拠した毎秒３０フレームに相当する画像データをＢＤＭＶメインフォルダから読み出し、高速撮影補助ファイルをＨＩＧＨＲＡＴＥメインフォルダから読み出す。記録再生装置３００は、読み出した毎秒３０フレームに相当する画像データと高速撮影補助ファイルとを用いて、高速画像を復元し再生する。

なお、上述した再生処理部３０６、第１の動画分離伸張部１１４、第２の動画分離伸張部３０７、及び画像信号処理部３０５による処理は、制御部３０４の制御により行われる。

本発明の実施の形態２における静止画ファイルの再生中に、通常動画ファイル及び高速撮影補助ファイルを使用してスロー再生する場合の再生動作は、実施の形態１において図７及び図８を用いて説明した動作とほぼ同一である。特に、ユーザの指定により動画再生を通常再生に限定されている場合はＢＤＭＶフォルダの動画データのみを再生するので全く同一になる。

一方、高速撮影された動画については、ユーザの指定によりスロー再生する設定も可能である。この場合、図１９のリンク情報テーブルの各リンク情報に高速撮影補助ファイル名９６が登録されている。そこで、通常動画ファイルの連携再生区間を再生する際に、あわせて高速撮影補助ファイルを再生してもよい。つまり、通常動画ファイルと、高速撮影補助ファイルとから連続する高速撮影画像を復元し、滑らかなスロー再生画像を出力するようにしてもよい。

（３．ファイル削除時のリンク情報ファイル修正方法）
以下、本発明の実施の形態２における記録再生装置３００の静止画ファイルもしくは動画ファイルのファイル削除動作について説明する。この場合は、実施の形態１において図９を用いて説明した動作との違いは特に無く、単に動画ファイルを削除する際に、一緒に対応する高速撮影補助ファイルが削除されるだけである。

（４．記録済みメディア装着時のリンク情報ファイルの整合性確認及び修復方法）
以下、本発明の実施の形態２における記録再生装置３００のリンク情報ファイル２０の整合性チェック及び不整合を検出した場合の修復動作について、図面を参照しながら説明する。

記録再生装置３００に記録媒体１０が装着された際、記録媒体１０にリンク情報ファイル２０があるかどうかを確認する。リンク情報ファイル２０が無いとき、またはリンク情報と、静止画ファイル及び動画ファイルとの間に不整合があるときにリンク情報ファイル２０を修復する動作は、基本的には実施の形態１において図１０および図１１を用いて説明した動作と同様になる。ただし、高速撮影補助データへの対応が必要であり、図１０のステップＳ１０１４だけ処理が変化する。このステップＳ１０１４を高速撮影補助データ対応に変更した場合のフローチャートを図２３に示す。

（ステップＳ１０５１）図１０のステップＳ１０１３の処理が終了した後、ＥＸＴＰＬＡＹＬＩＳＴフォルダ以下のファイル名を確認して、ステップＳ１０１０で確認した通常動画ファイルのプレイリストファイル１３に対応する高速撮影補助ファイルのプレイリストファイル１６があるかどうかを判定する。ある場合はステップＳ１０５２に進み、無い場合はステップＳ１０５５に進む。

（ステップＳ１０５２）高速撮影補助ファイルのプレイリストファイル１６を読み出す。その後、ステップＳ１０５３に進む。

（ステップＳ１０５３）ステップＳ１０１３で求めた静止画相当ＰＴＳを含む通常動画ファイルのクリップインフォファイル１４の再生時間に対応する高速撮影補助ファイルのクリップインフォファイル１７が存在するかどうかを確認する。そして、存在すればステップＳ１０５４へ進み、存在しなければステップＳ１０５５に進む。

（ステップＳ１０５４）高速撮影補助ファイルのクリップインフォファイル１７が存在した場合、静止画ファイル名９１、通常動画ファイルの動画クリップインフォファイル名９２、静止画相当ＰＴＳ９３、高速撮影補助ファイル名９６（クリップインフォファイル１７のファイル名）、及び再生フラグ情報９４を含むリンク情報をリンク情報ファイル２０に書き込む。その後、ステップＳ１０１５へ進む。

（ステップＳ１０５５）高速撮影補助ファイルのクリップインフォファイル１７が存在しない場合、静止画ファイル名９１、通常動画ファイルの動画クリップインフォファイル名９２、静止画相当ＰＴＳ９３、高速撮影補助ファイル名９６（この場合、「Ｎｏ＿ｆｉｌｅ」とする）、及び再生フラグ情報９４を含むリンク情報をリンク情報ファイル２０に書き込む。その後、ステップＳ１０１５へ進む。

上記の構成により、すでに静止画ファイル７０及び動画ファイルが保存されている記録媒体１０が装着されたとき、記録媒体１０のリンク情報ファイル２０と、静止画ファイル７０、通常動画ファイルおよび高速撮影補助ファイルとの整合性を確認して、不整合があった場合にはリンク情報ファイル２０のリンク情報を修復することが出来る。

従って、記録媒体１０を、従来の静止画記録規格のみに対応した静止画記録再生装置でファイル削除したとき、もしくは従来の動画記録規格のみに対応した動画記録再生装置でファイル削除や編集作業を行ったときも、従来規格準拠部分には矛盾を生じないとともに、高速撮影補助データに対応した静止画動画連携機能を実現可能な状態に容易に修復することが出来る。

なお、本発明の実施の形態２における記録再生装置３００は、さらに、リンク情報ファイル２０の生成開始もしくは修復開始の指示をユーザから受け付ける開始ボタン等を備えてもよい。この開始ボタンがユーザによって操作された際、記録再生装置３００は、図１０、図１１および図２３に示したフローチャートの通り、記録媒体１０が装着されているか否かを判定する。そして、装着されている場合は、ステップＳ１００２からステップＳ１０２９を実行する構成にしても構わない。これにより、ユーザが指定する任意の時間にリンク情報ファイル２０が生成もしくは修復可能となる。

以上、実施の形態２における記録再生装置３００によれば、静止画データを順次表示している最中において、気に入った静止画データの表示中にボタンを押すなどの操作を行うことにより、その近傍の動画再生を開始することができる。さらには、その動画データが高速撮影されていた場合には滑らかなスロー再生画像を表示する高速撮影対応静止画動画連携機能を実現することができる。

また、静止画データから、それに相当する動画位置を、動画クリップインフォファイル名９２と静止画相当ＰＴＳ９３とから直接的に特定することができるので、高速処理が可能である。ファイル数が増加したとしても、図１９のリンク情報テーブルの行数が増えるだけである。つまり、従来のように静止画データに付加されている情報から動画ファイルもしくは付加情報を検索して動画位置を特定する必要がないため、処理速度が低下するおそれがない。

また、記録再生装置３００で記録した記録媒体１０を、従来の静止画規格、動画規格のみにしか対応していない機器で再生、編集、及びファイル削除しても、従来規格準拠部分には矛盾が生じないとともに、静止画動画連携機能についても高速撮影した動画の滑らかなスロー再生も含めて、記録媒体１０の装着時に容易に修復することができる。

以上、実施の形態２における記録再生装置３００によれば、高速撮影した画像を記録媒体１０に記録し、滑らかなスロー再生画像を再生することが可能な記録再生装置３００を実現することができる。さらに、静止画動画連携機能においても、滑らかなスロー再生画像を再生することが可能である。

なお、通常動画ファイルの１フォルダに対して、高速撮影補助ファイルの１フォルダが対応するものとして説明したが、高速撮影補助ファイルが複数に分割されていてもよく、それらが複数のフォルダに分かれて記録されていてもよい。

本発明の実施の形態１と実施の形態２においては、記録再生装置１００、３００で記録した記録媒体１０を、高速再生画像の再生に対応していない従来規格に準拠した画像再生装置に装着して再生した場合は、毎秒３０フレーム相当の画像が画面縮小や画面分割多重されることなく再生することができる。

また、高速撮影には対応していないが、静止画動画連携機能には対応している記録再生装置においても動画データのみで静止画動画連携機能を実現することが可能である。

また、本発明に係わる記録再生装置は、ＣＰＵ（Central Processing Unit）、システムＬＳＩ（Large Scale Integration）、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、ＨＤＤ（Hard Disk Drive）、ネットワークインターフェース等を備えるとしてもよい。さらに、ＤＶＤ−ＲＡＭ、Ｂｌｕ−ｒａｙディスク、ＳＤ（Secure Digital）メモリカードのような可搬性の記録媒体に対して読み書き可能なドライブ装置を備えるとしてもよい。

なお、記録再生装置は、デジタルビデオカメラ、デジタルレコーダ、デジタルテレビ、ゲーム機、ＩＰ電話機、携帯電話機等のような組み込みシステムとしてもよい。

さらに、ＨＤＤまたはＲＯＭ等に、記録再生装置を制御するプログラム（以下、記録再生プログラムと呼称する。）がインストールされており、記録再生プログラムが実行されることによって、記録再生装置の各機能が実現されるとしてもよい。

なお、記録再生プログラムは、コンピュータシステム、組み込みシステム等のようなハードウェアシステムに読み取り可能な記録媒体に記録されているとしてもよい。さらに、記録媒体を介して他のハードウェアシステムに読み出されて実行されるとしてもよい。これによって、記録再生装置の各機能を他のハードウェアシステムに実現することができる。ここで、コンピュータシステム読み取り可能な記録媒体として、光学記録媒体（例えば、ＣＤ−ＲＯＭ等。）、磁気記録媒体（例えば、ハードディスク等。）、光磁気記録媒体（例えば、ＭＯ等。）、半導体メモリ（例えば、メモリカード等。）等がある。

また、記録再生プログラムは、インターネット、ローカルエリアネットワーク等のようなネットワークに接続されているハードウェアシステムに保持されているとしてもよい。さらに、ネットワークを介して他のハードウェアシステムにダウンロードされて実行されるとしてもよい。これによって、記録再生装置の各機能を他のハードウェアシステムに実現することができる。ここで、ネットワークとして、地上放送網、衛星放送網、ＰＬＣ（Power Line Communication）、移動電話網、有線通信網（例えば、ＩＥＥＥ８０２．３等。）、無線通信網（例えば、ＩＥＥＥ８０２．１１等。）がある。

または、記録再生装置に実装される記録再生回路によって、記録再生装置の各機能が実現されるとしてもよい。

なお、記録再生回路は、フルカスタムＬＳＩ（Large Scale Integration）、ＡＳＩＣ（Application Specific Integrated Circuit）等のようなセミカスタムＬＳＩ、ＦＰＧＡ（Field Programmable Gate Array）やＣＰＬＤ（Complex Programmable Logic Device）等のようなプログラマブル・ロジック・デバイス、動的に回路構成が書き換え可能なダイナミック・リコンフィギュラブル・デバイスに形成されるとしてもよい。

さらに、記録再生装置の各機能を記録再生回路に形成する設計データは、ハードウェア記述言語によって記述されたプログラム（以下、ＨＤＬプログラムと呼称する。）としてもよい。さらに、ＨＤＬプログラムを論理合成して得られるゲート・レベルのネットリストとしてもよい。また、ゲート・レベルのネットリストに、配置情報、プロセス条件等を付加したマクロセル情報としてもよい。また、寸法、タイミング等が規定されたマスクデータとしてもよい。ここで、ハードウェア記述言語として、ＶＨＤＬ（Very high speedintegrated circuit Hardware Description Language）、Ｖｅｒｉｌｏｇ−ＨＤＬ、ＳｙｓｔｅｍＣがある。

さらに、設計データは、コンピュータシステム、組み込みシステム等のようなハードウェアシステムに読み取り可能な記録媒体に記録されているとしてもよい。さらに、記録媒体を介して他のハードウェアシステムに読み出されて実行されるとしてもよい。そして、これらの記録媒体を介して他のハードウェアシステムに読み取られた設計データが、ダウンロードケーブルを介して、プログラマブル・ロジック・デバイスにダウンロードされるとしてもよい。

または、設計データは、インターネット、ローカルエリアネットワーク等のようなネットワークに接続されているハードウェアシステムに保持されているとしてもよい。さらに、ネットワークを介して他のハードウェアシステムにダウンロードされて実行されるとしてもよい。そして、これらのネットワークを介して他のハードウェアシステムに取得された設計データが、ダウンロードケーブルを介して、プログラマブル・ロジック・デバイスにダウンロードされるとしてよい。

または、設計データは、通電時にＦＰＧＡに転送され得るように、シリアルＲＯＭに記録しておくとしてもよい。そして、シリアルＲＯＭに記録された設計データは、通電時に、直接、ＦＰＧＡにダウンロードされるとしてもよい。

または、設計データは、通電時に、マイクロプロセッサによって生成されて、ＦＰＧＡにダウンロードされるとしてもよい。

以上、図面を参照してこの発明の実施形態を説明したが、この発明は、図示した実施形態のものに限定されない。図示した実施形態に対して、この発明と同一の範囲内において、あるいは均等の範囲内において、種々の修正や変形を加えることが可能である。

本発明は、可搬性の記録媒体に静止画や動画及び音声を記録し、記録した静止画や動画及び音声を再生する記録再生装置等として、特に、半導体メモリや光ディスク等の記録媒体に静止画とＡＶデータを記録するとともに、必要に応じて高速撮影画像を記録し、再生時に静止画を指定することで、その静止画が撮影された前後の時間帯に撮影されていたＡＶデータを再生したり、滑らかなスロー再生画像を表示するビデオカメラ等として、利用することができる。

１０ 記録媒体
１１ インフォファイル
１２ メニューファイル
１３，１６ プレイリストファイル
１４，１７ クリップインフォファイル
１５，１８ ストリームファイル
１９，２０，５０１ リンク情報ファイル
２１，２２，２３，７０，５００ 静止画ファイル
３０，５０２ 動画ファイル
３１，３２，３３ 静止画表示画面
４１，４２ アイコン
５０，５１，５２，５３，５４，５５，５６，５７，５８，５９ フレーム
６１，９３ 静止画相当ＰＴＳ
６２ 第１の区間
６３ 第２の区間
８０ 開始フレーム
８１ 終了フレーム
９１ 静止画ファイル名
９２ 動画クリップインフォファイル名
９４ 再生フラグ情報
９５ ダイジェスト再生フラグ
９６ 高速撮影補助ファイル名
１００ 記録再生装置
１０１ レンズ群
１０２ 撮像部
１０３ Ａ／Ｄ変換部
１０４ 画像信号処理部
１０５ 動画圧縮多重部
１０６ 記録処理部
１０８ 記録制御部
１０９ 入力部
１１０ 制御部
１１１ 画像生成部
１１２ 表示部
１１３ 画像信号処理部
１１４ 動画分離伸張部
１１５ 再生処理部
１３０ 静止画圧縮多重部
１３１ 静止画分離伸張部
２００ リンク情報生成装置
２０１ 画像生成表示部
２０２ 入力処理部
２０３ 制御部
２０４ 記録再生処理部
２０５ 記録制御部
２０６ 静止画分離伸張部
２０７ 動画分離伸張部
２１０ 表示装置
２１１ 入力装置
３００ 記録再生装置
３０１ 画像信号処理部
３０２ 記録処理部
３０３ 第２の動画圧縮多重部
３０４ 制御部
３０５ 画像信号処理部
３０６ 再生処理部
３０７ 第２の動画分離伸張部
１１１０ 記録制御部
１１１１ 動画記録部
１１１２ 静止画記録部
１１１３ リンク情報書き込み部
１１２０ 再生制御部
１１２１ 動画再生部
１１２２ 静止画再生部
１１２３ リンク情報読み出し部
１１３０ リンク情報制御部
１１３１ 動画特定部
１１３２ 位置情報取得部
１１３３ リンク情報生成部
１１３４ リンク情報更新制御部
１１３５ リンク情報削除部
１１４０ ファイル監視部
１１４１ 動画ファイル監視部
１１４２ 静止画ファイル監視部

Claims (6)

1. 静止画データ及び当該静止画データの撮影時刻である静止画撮影時刻情報を含む静止画ファイルを保持する第１のフォルダと、各々が動画データを含む１以上の動画ファイルを保持する第２のフォルダとが互いに包含関係にない位置関係で記録されている記録媒体に、前記静止画データと前記動画データとを関連付ける情報であるリンク情報を含むリンク情報ファイルを記録するリンク情報生成装置であって、
   前記１以上の動画ファイルそれぞれに含まれる前記動画データのうち、前記静止画データの前記静止画撮影時刻情報を含む時間帯に撮影された静止画連携動画を特定する動画特定部と、
   前記静止画撮影時刻情報に対応する前記静止画連携動画内の時間的な位置を示す静止画相当位置情報を取得する位置情報取得部と、
   前記静止画データを識別する静止画識別情報、前記静止画連携動画を識別する動画識別情報、及び前記静止画相当位置情報を含む前記リンク情報を生成し、当該リンク情報を含む前記リンク情報ファイルを、前記記録媒体中の前記第１及び第２のフォルダのいずれにも包含されない位置に記録するリンク情報生成部とを備え、
   前記動画データは、所定の時間間隔で撮像された複数のフレームで構成され、
   前記記録媒体には、さらに、前記１以上の動画ファイルそれぞれに１対１に対応し、隣接する前記フレームの間の時間帯に撮像された補助フレームを含む高速撮影補助ファイルを保持する第３のフォルダが、前記第１及び第２のフォルダのいずれとも包含関係にない位置に記録されており、
   動画特定部は、さらに、前記静止画連携動画を含む前記動画ファイルに対応する前記高速撮影補助ファイルを特定し、
   前記リンク情報生成部は、前記動画特定部によって特定された前記高速撮影補助ファイルを識別する高速動画識別情報をさらに含む前記リンク情報を生成する
   リンク情報生成装置。
2. 撮像した静止画データ及び動画データを記録媒体に記録する画像記録装置であって、
   光を電気信号に変換する撮像部と、
   前記撮像部から出力される電気信号を動画データに変換し、当該動画データを含む動画ファイルを前記記録媒体に記録する動画記録部と、
   前記動画記録部によって前記動画データが記録されている時間帯の任意のタイミングで、前記撮像部から出力される電気信号を静止画データに変換し、当該静止画データを含む静止画ファイルを前記記録媒体に記録する静止画記録部と、
   前記静止画記録部によって記録された前記静止画データの前記動画データ内における時間的な位置を示す静止画相当位置情報を取得する位置情報取得部と、
   前記静止画データを識別する静止画識別情報、前記動画データである静止画連携動画を識別する動画識別情報、及び前記静止画相当位置情報を含む前記リンク情報を生成し、当該リンク情報を含むリンク情報ファイルを前記記録媒体に記録するリンク情報生成部とを備え、
   前記静止画ファイルは、前記記録媒体の第１のフォルダに記録され、
   前記動画ファイルは、前記記録媒体の前記第１のフォルダと包含関係にない第２のフォルダに記録され、
   前記リンク情報ファイルは、前記記録媒体の前記第１及び第２のフォルダのいずれにも包含されない位置に記録され、
   前記動画データは、所定の時間間隔で撮像された複数のフレームで構成され、
   前記記録媒体には、さらに、前記１以上の動画ファイルそれぞれに１対１に対応し、隣接する前記フレームの間の時間帯に撮像された補助フレームを含む高速撮影補助ファイルを保持する第３のフォルダが、前記第１及び第２のフォルダのいずれとも包含関係にない位置に記録されており、
   前記リンク情報生成部は、前記静止画連携動画を含む前記動画ファイルに対応する前記高速撮影補助ファイルを識別する高速動画識別情報をさらに含む前記リンク情報を生成する
   画像記録装置。
3. 請求項１または２に記載の記録媒体に記録されている静止画データ及び動画データを再生する画像再生装置であって、
   前記記録媒体から読み出した前記静止画ファイルに含まれる前記静止画データを再生する静止画再生部と、
   ユーザからの静止画関連動画再生要求に応じて、前記静止画データの前記静止画識別情報を含む前記リンク情報を、前記リンク情報ファイルから読み出すリンク情報読み出し部と、
   前記リンク情報読み出し部によって読み出された前記リンク情報に含まれる前記動画識別情報で識別される前記静止画連携動画のうち、前記静止画相当位置情報を含む連携再生区間のみを再生する動画再生部とを備え、
   前記動画データは、画面内予測符号化によって符号化されたＩフレームと、画面間予測符号化によって符号化されるＰフレームとを含む複数のフレームによって構成され、
   前記連携再生区間は、前記静止画相当位置情報を起点として前記静止画連携動画内を第１の区間だけ過去に遡った位置に最も近い前記Ｉフレームを再生開始フレームとし、当該Ｉフレームから前記第１の区間より大きい第２の区間だけ未来に進んだ位置のフレームを再生終了フレームとする区間であり、
   前記動画再生部は、前記連携再生区間に含まれる前記フレームを前記動画ファイルから読み出し、前記再生開始フレームと前記再生終了フレームとの間の時間帯に撮像された前記補助フレームを前記高速撮影補助ファイルから読み出し、読み出された前記フレーム及び前記補助フレームを時系列に並べ替えて再生する
   画像再生装置。
4. 静止画データ及び当該静止画データの撮影時刻である静止画撮影時刻情報を含む静止画ファイルを保持する第１のフォルダと、各々が動画データを含む１以上の動画ファイルを保持する第２のフォルダとが互いに包含関係にない位置関係で記録されている記録媒体に、前記静止画データと前記動画データとを関連付ける情報であるリンク情報を含むリンク情報ファイルを記録するリンク情報生成方法であって、
   前記１以上の動画ファイルそれぞれに含まれる前記動画データのうち、前記静止画データの前記静止画撮影時刻情報を含む時間帯に撮影された静止画連携動画を特定する動画特定ステップと、
   前記静止画撮影時刻情報に対応する前記静止画連携動画内の時間的な位置を示す静止画相当位置情報を取得する位置情報取得ステップと、
   前記静止画データを識別する静止画識別情報、前記静止画連携動画を識別する動画識別情報、及び前記静止画相当位置情報を含む前記リンク情報を生成し、当該リンク情報を含む前記リンク情報ファイルを、前記記録媒体中の前記第１及び第２のフォルダのいずれにも包含されない位置に記録するリンク情報生成ステップとを含み、
   前記動画データは、所定の時間間隔で撮像された複数のフレームで構成され、
   前記記録媒体には、さらに、前記１以上の動画ファイルそれぞれに１対１に対応し、隣接する前記フレームの間の時間帯に撮像された補助フレームを含む高速撮影補助ファイルを保持する第３のフォルダが、前記第１及び第２のフォルダのいずれとも包含関係にない位置に記録されており、
   動画特定ステップでは、さらに、前記静止画連携動画を含む前記動画ファイルに対応する前記高速撮影補助ファイルを特定し、
   前記リンク情報生成ステップでは、前記動画特定ステップにおいて特定された前記高速撮影補助ファイルを識別する高速動画識別情報をさらに含む前記リンク情報を生成する
   リンク情報生成方法。
5. 撮像した静止画データ及び動画データを記録媒体に記録する画像記録方法であって、
   光を電気信号に変換する撮像ステップと、
   前記撮像ステップで出力される電気信号を動画データに変換し、当該動画データを含む動画ファイルを前記記録媒体に記録する動画記録ステップと、
   前記動画記録ステップで前記動画データが記録されている時間帯の任意のタイミングで、前記撮像ステップで出力される電気信号を静止画データに変換し、当該静止画データを含む静止画ファイルを前記記録媒体に記録する静止画記録ステップと、
   前記静止画記録ステップで記録された前記静止画データの前記動画データ内における時間的な位置を示す静止画相当位置情報を取得する位置情報取得ステップと、
   前記静止画データを識別する静止画識別情報、前記動画データである静止画連携動画を識別する動画識別情報、及び前記静止画相当位置情報を含む前記リンク情報を生成し、当該リンク情報を含むリンク情報ファイルを前記記録媒体に記録するリンク情報生成ステップとを含み、
   前記静止画ファイルは、前記記録媒体の第１のフォルダに記録され、
   前記動画ファイルは、前記記録媒体の前記第１のフォルダと包含関係にない第２のフォルダに記録され、
   前記リンク情報ファイルは、前記記録媒体の前記第１及び第２のフォルダのいずれにも包含されない位置に記録され、
   前記動画データは、所定の時間間隔で撮像された複数のフレームで構成され、
   前記記録媒体には、さらに、前記１以上の動画ファイルそれぞれに１対１に対応し、隣接する前記フレームの間の時間帯に撮像された補助フレームを含む高速撮影補助ファイルを保持する第３のフォルダが、前記第１及び第２のフォルダのいずれとも包含関係にない位置に記録されており、
   前記リンク情報生成ステップでは、前記静止画連携動画を含む前記動画ファイルに対応する前記高速撮影補助ファイルを識別する高速動画識別情報をさらに含む前記リンク情報を生成する
   画像記録方法。
6. 請求項１または２に記載の記録媒体に記録されている静止画データ及び動画データを再生する画像再生方法であって、
   前記記録媒体から読み出した前記静止画ファイルに含まれる前記静止画データを再生する静止画再生ステップと、
   ユーザからの静止画関連動画再生要求に応じて、前記静止画データの前記静止画識別情報を含む前記リンク情報を、前記リンク情報ファイルから読み出すリンク情報読み出しステップと、
   前記リンク情報読み出しステップで読み出された前記リンク情報に含まれる前記動画識別情報で識別される前記静止画連携動画のうち、前記静止画相当位置情報を含む連携再生区間のみを再生する動画再生ステップとを含み、
   前記動画データは、画面内予測符号化によって符号化されたＩフレームと、画面間予測符号化によって符号化されるＰフレームとを含む複数のフレームによって構成され、
   前記連携再生区間は、前記静止画相当位置情報を起点として前記静止画連携動画内を第１の区間だけ過去に遡った位置に最も近い前記Ｉフレームを再生開始フレームとし、当該Ｉフレームから前記第１の区間より大きい第２の区間だけ未来に進んだ位置のフレームを再生終了フレームとする区間であり、
   前記動画再生ステップでは、前記連携再生区間に含まれる前記フレームを前記動画ファイルから読み出し、前記再生開始フレームと前記再生終了フレームとの間の時間帯に撮像された前記補助フレームを前記高速撮影補助ファイルから読み出し、読み出された前記フレーム及び前記補助フレームを時系列に並べ替えて再生する
   画像再生方法。

Images