JP2005020351A - サムネイル画像作成機能付きビデオ再生装置及びサムネイル画像記録媒体 - Google Patents
サムネイル画像作成機能付きビデオ再生装置及びサムネイル画像記録媒体 Download PDFInfo
- Publication number
- JP2005020351A JP2005020351A JP2003182283A JP2003182283A JP2005020351A JP 2005020351 A JP2005020351 A JP 2005020351A JP 2003182283 A JP2003182283 A JP 2003182283A JP 2003182283 A JP2003182283 A JP 2003182283A JP 2005020351 A JP2005020351 A JP 2005020351A
- Authority
- JP
- Japan
- Prior art keywords
- thumbnail image
- information
- video
- character data
- thumbnail
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Television Signal Processing For Recording (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
- Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
- Management Or Editing Of Information On Record Carriers (AREA)
Abstract
【課題】記録媒体の複数の記録領域から再生されるビデオ情報の選択が、各記録領域を代表するサムネイル画像によって、より容易に出来るサムネイル画像作成機能付きビデオ再生装置及びサムネイル画像記録媒体を提供する。
【解決手段】表示手段の画面上に夫々のビデオ情報の代表画としてのサムネイル画像を表示するサムネイル表示制御手段１７と、ビデオ情報からサムネイル画像を生成する手段２１と、字幕情報から文字補助情報を取得する手段２３と、サムネイル画像に文字補助情報を埋め込む手段２２と、表示デバイスからサムネイル画像を選択する手段１９とで構成した。
【選択図】 図１
【解決手段】表示手段の画面上に夫々のビデオ情報の代表画としてのサムネイル画像を表示するサムネイル表示制御手段１７と、ビデオ情報からサムネイル画像を生成する手段２１と、字幕情報から文字補助情報を取得する手段２３と、サムネイル画像に文字補助情報を埋め込む手段２２と、表示デバイスからサムネイル画像を選択する手段１９とで構成した。
【選択図】 図１
Description
【０００１】
【発明の属する技術分野】
本発明は、サムネイル画像作成機能付きビデオ再生装置及びサムネイル画像記録媒体に係り、特に記録媒体の複数の記録領域から再生されるビデオ情報の選択が、各記録領域を代表するサムネイル画像によって、より容易に出来るサムネイル画像作成機能付きビデオ再生装置及びサムネイル画像記録媒体に関する。
【０００２】
【従来の技術】
周知のように、近年ではデジタル映像や音声、字幕等のデータを記録した、例えばＤＶＤのようなディスクを再生する動画対応のディスク再生装置が開発されている。
その再生装置に搭載されるディスクに記録されている映像や音声の圧縮フォーマットとしては、映像ではＭＰＥＧ２（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｉｍａｇｅ Ｃｏｄｉｎｇ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）映像圧縮方式、音声ではＡＣ（Ａｕｄｉｏ Ｃｏｍｐｒｅｓｓｉｏｎ）３オーディオ圧縮方式やＭＰＥＧオーディオ圧縮方式が用いられている。
【０００３】
さらに、映画やカラオケ等の字幕用としてＥＩＡ−７０８より規定された副映像データ圧縮方式が取り入れられている。また、これら映像、音声、字幕のデータはＭＰＥＧ２システムレイヤに従って多重化されてディスク内に記録されている。
【０００４】
そして、複数のプログラムが記録されたディスクに対して複数の再生開始位置と再生区間、再生順序を定義することが出来る。この複数の定義位置はディスクに記録されたデータとしては、プログラムという形で設定され記録される。
このプログラムは動画作成者が定義してディスク内にデータとして記録することも出来るし、またそのディスクを再生するユーザーが任意に設定しディスクに記録することも出来る。
【０００５】
このように、多数のプログラムが記録されたディスクに対して、ユーザーは簡単にそのプログラムにアクセスして再生するためにプログラムを代表するサムネイル画像を用いて表示装置に代表化させて表示し、ユーザーがその静止画像を選択することで各プログラムを簡単に再生することが出来る（例えば、特許文献１参照。）。
【０００６】
【特許文献１】
特開２００２‐１５０７５７号公報（図６）
【０００７】
従来例のサムネイル画像作成機能付きビデオ再生装置のブロック構成について、図１１と共に説明する。
図１１に示すこのサムネイル画像作成機能付きビデオ再生装置１Ａは、駆動装置１１、バッファ１２、デコーダ１４、ビデオ表示信号制御手段１５、サムネイル表示制御手段１７Ａ、表示デバイス１８、選択手段（文字データ生成手段）１９、字幕表示信号制御手段２０、サムネイル画像生成手段２１、フレームメモリ２４、サムネイル画像用メモリ２５Ａ、及び画像表示制御手段２６より構成されている。
【０００８】
駆動装置１１は、ビデオファイルやデータファイルの記憶が可能な情報記憶媒体であるディスク１０Ａを回転駆動し、前記ディスク１０Ａに対して情報の読み書きを実行する。
バッファ１２は、前記ディスク１０Ａより前記駆動装置１１を介して読み出したデータを一時貯めておく。
デコーダ１４は、前記読み出したデータの復号動作を行う。
ビデオ表示信号制御手段１５は、前記デコーダ１４を制御し、ビデオ画像イメージデータをフレームメモリ２４へ出力する。
字幕表示信号制御手段２０は、前記デコーダ１４を制御し、字幕画像イメージデータをフレームメモリ２４へ出力する。
【０００９】
フレームメモリ２４は、前記デコーダ１４から出力されたビデオ画像イメージデータ及び字幕画像イメージデータを格納する。
サムネイル画像生成手段２１は、選択手段１９を用いて表示デバイス１８より指定された箇所に対して前記フレームメモリ２４からビデオ画像イメージデータを取得し、このビデオ画像イメージデータを変換して、サムネイル画像を生成する。
サムネイル画像用メモリ２５Ａは、その変換して生成されたサムネイル画像を保存する。
画像表示制御手段２６は、フレームメモリ２４に格納されている画像イメージデータを表示デバイス１８に表示する。
【００１０】
サムネイル表示制御手段１７Ａは、サムネイル画像用メモリ２５Ａに保存されているサムネイル画像を表示デバイス１８に表示する。
表示デバイス１８は、前記フレームメモリ２４の出力及びサムネイル画像用メモリ２５Ａの出力とを１つの画面上に表示する。
【００１１】
サムネイル画像に対する補助文字情報を作成する場合、ユーザーは選択手段１９を用いて表示手段１８に表示されているサムネイル画像の中から所望のサムネイル画像を選択する。
選択されたサムネイル画像に対する補助文字情報を選択手段（文字データ入力手段）１９を用いることで、テキストとしてユーザーが作成する。
作成した補助文字情報は、サムネイル画像とは別の図示せぬテキスト情報保存用メモリに保存される。
【００１２】
記録可能な記録媒体の場合、前記図示せぬテキスト情報保存用メモリに保存されたテキスト情報は、選択したサムネイル画像データに対応したサムネイル属性情報ファイルの一部にテキストとして書き込まれ、サムネイル属性情報ファイルとして記録媒体１０Ａに保存される。
選択手段１９により、前記表示デバイス１８の表示画面に表示されたサムネイル画像の中からユーザーが所定のサムネイル画像を選択する。
【００１３】
【発明が解決しようとする課題】
ところで、ビデオ再生装置では、記録媒体の記憶容量が大きいことから、複数のプログラム（チャプターやブックマークあるいはタイトル）を記録することが可能である。
複数のプログラムが記録された記録媒体に対して、ユーザーは複数のプログラムを簡単にアクセスするためにその複数の各プログラムを代表する複数のサムネイル画像を表示装置に表示することで、ユーザーが選択したプログラムを容易にアクセス出来るようになる。
【００１４】
しかし、画面の領域は限られており、その中で複数のサムネイル画像を表示するため、各サムネイル画像をある程度小さなサイズにせざるを得ず、従ってサムネイル画像が代表するプログラムの内容がわかりづらく、所望のサムネイル画像を正確に選択出来ないという問題があった。
【００１５】
また、サムネイル画像を補佐する補助情報としてユーザーが文字データを入力することが出来るが、一般に市販されているビデオ再生装置では文字データ入力手段（選択手段）としてパネルボタンまたはリモコンしか付随していないため、サムネイル画像に対して補助的な文字データを入力するのは、ユーザーにとって面倒で労力と時間を要するという問題があった。
【００１６】
そこで、本発明は以上の問題に鑑みてなされたもので、サムネイル画像に対する補助的な文字データを簡単に入力することが可能なサムネイル画像作成機能付きビデオ再生装置、及びその装置に搭載されるサムネイル画像記録媒体を提供することを目的とする。
【００１７】
【課題を解決するための手段】
上記課題を解決するために、
請求項１に記載された発明は、
ビデオ情報が記録されたビデオ情報記録領域、前記ビデオ情報に付随した字幕情報が記録された字幕情報記録領域、及び前記ビデオ情報を代表するサムネイル画像が記録された補助情報記録領域を少なくとも有する記録媒体から、前記サムネイル画像を再生表示するサムネイル画像作成機能付きビデオ再生装置において、
再生して得られる各領域毎のビデオ情報の中から指定した箇所の画像を変換して各サムネイル画像を生成するサムネイル画像生成手段２１と、
前記各領域毎のビデオ情報に付随して再生して得られた字幕情報の中から各文字データを取得する文字データ取得手段２３と、
前記各サムネイル画像を順次記憶すると共に前記各文字データを前記各サムネイル画像に埋め込んで記憶するサムネイル画像記憶手段２５と、
前記各文字データを埋め込んだ各サムネイル画像を前記補助情報記録領域に順次記録する補助情報記録手段１１，１２と、
前記補助情報記録領域より再生した前記各サムネイル画像の中から所定のサムネイル画像を選択する選択手段１９とを備え、
前記サムネイル画像を前記字幕情報から選択した文字データと共に表示することを特徴としたサムネイル画像作成機能付きビデオ再生装置を提供し、
請求項２に記載された発明は、
ビデオ情報が記録されたビデオ情報記録領域、前記ビデオ情報に付随した字幕情報が記録された字幕情報記録領域、及び前記ビデオ情報を代表するサムネイル画像が記録された補助情報記録領域を少なくとも有するサムネイル画像記録媒体において、
前記サムネイル画像記録領域には、前記ビデオ情報記録領域を複数に区分した各領域に対応したビデオ情報に付随して記録された字幕情報から選択した文字データが前記各サムネイル画像に対応付けて埋め込まれて記録されていることを特徴としたサムネイル画像記録媒体を提供するものである。
【００１８】
【発明の実施の形態】
本発明の実施の形態につき、好ましい実施例により、以下に図と共に説明する。
なお、参照符号については、従来例における構成と同一の構成については同一の参照符号を付して、その説明は省略する。
＜実施例＞
図１は本発明のサムネイル画像作成機能付きビデオ再生装置の実施例を示すブロック図である。
図２はＭＰＥＧ２のシーケンスを説明した図である。
図３はＪＰＥＧのヘッダ構造図である。
図４はＭＰＥＧ２のトランスポートストリームの構成を説明した図である。
図５は本発明のサムネイル画像作成機能付きビデオ再生装置の実施例で使用するサムネイル画像に補助文字データを埋め込む手順を示したフローチャートである。
図６は本発明のサムネイル画像作成機能付きビデオ再生装置の実施例で使用する文字データを取得する手順を示したフローチャートである。
図７は本発明のサムネイル画像作成機能付きビデオ再生装置の実施例で使用するビデオパケットと字幕パケットとの関係を模式的に示した図である。
図８は本発明のサムネイル画像作成機能付きビデオ再生装置の実施例で使用するサムネイル画像を文字データと共に画面に表示する手順を示したフローチャートである。
図９は本発明のサムネイル画像作成機能付きビデオ再生装置の実施例に塔載される記録媒体（ディスク）の構成について説明した図である。
図１０は本発明のサムネイル画像作成機能付きビデオ再生装置の実施例における字幕文字表示付きサムネイル表示画面を示した図である。
【００１９】
図１の本実施例のサムネイル画像作成機能付きビデオ再生装置１は、駆動装置１１、バッファ１２、デコーダ１４、ビデオ表示信号制御手段１５、サムネイル表示制御手段１７、表示デバイス１８、選択手段１９、字幕表示信号制御手段２０、サムネイル画像生成手段２１、文字データ埋め込み手段２２、文字データ取得手段２３、フレームメモリ２４、サムネイル画像用メモリ２５、画像表示制御手段２６、及びＪＰＥＧデコーダ２７より構成されている。
【００２０】
駆動装置１１は、ビデオファイルやデータファイルを記憶出来る情報記憶媒体であるディスク１０を回転駆動し、前記ディスク１０に対して情報の読み書きを実行する。
バッファ１２は、前記駆動装置１１を介して前記ディスク１０より読み出したビデオデータを貯めておく。
デコーダ１４は、前記読み出したビデオデータの復号動作を行う。
【００２１】
ビデオ表示信号制御手段１５は、前記デコーダ１４を制御し、ビデオ画像イメージデータをフレームメモリ２４へ出力する。
字幕表示信号制御手段２０は、前記デコーダ１４を制御し、字幕画像イメージデータをフレームメモリ２４へ出力する。
【００２２】
前記フレームメモリ２４は、前記デコーダ１４から出力されたビデオ画像イメージデータ及び字幕画像イメージデータを格納する。
サムネイル画像生成手段２１は、選択手段１９を用いて表示デバイス１８より指定された箇所に対して、前記フレームメモリ２４からビデオ画像イメージデータを取得し、このビデオ画像イメージデータを変換して、サムネイル画像を生成する。
【００２３】
サムネイル画像用メモリ２５は、その変換して生成したサムネイル画像を保存する。
文字データ取得手段２３は、選択手段１９を用いて表示デバイス１８より指定された箇所に対してデコーダ１４を制御し、デコードされたその箇所の字幕データの中より文字データを取得する。
【００２４】
文字データ埋め込み手段２２は、サムネイル用画像メモリ２５に保存したサムネイル画像の中に前記文字データ取得手段２３により取得した文字データを埋め込む。
前記サムネイル用画像メモリ２５の中の文字データを埋め込んだサムネイル画像は、バッファ１２及び駆動装置１１を介して記録媒体１０の図示せぬ補助情報記録領域に記録される。
【００２５】
画像表示制御手段２６は、フレームメモリ２４に格納されている画像イメージデータを表示デバイス１８に表示する。
サムネイル表示制御手段１７は、サムネイル画像用メモリ２５に保存されている文字データが添付されたサムネイル画像を表示デバイス１８に表示する。
【００２６】
表示デバイス１８は、前記フレームメモリ２４の出力及びサムネイル画像用メモリ２５の出力とを１つの画面上に表示する。
選択手段１９により、前記表示デバイス１８の表示画面を見てユーザーが所定の箇所を選択する。図１０に示すような、文字データ表示付きのサムネイル表示画面が得られる。
【００２７】
次に、図１に示されたサムネイル画像作成機能付きビデオ再生装置１におけるサムネイル画像の作成方法について説明する。
まず、本実施例で使用するデータのフォーマットに関して説明する。ビデオデータはＭＰＥＧ方式によって圧縮されているものとする。
【００２８】
ＭＰＥＧ２方式の場合は、シーケンス層、ＧＯＰ（Ｇｒｏｕｐ Ｏｆ Ｐｉｃｔｕｒｅ）層、ピクチャ層、スライス層、マクロブロック（ＭＢ）層、及びブロック層の６階層に分けられている。
このうち、ＧＯＰ層には、フレーム間予測を使わずにその情報だけから符号化されたＩピクチャ、Ｉピクチャ又はＰピクチャからの予測を行うことで生成されるＰピクチャ、双方向の予測によって生成されるＢピクチャの３種類の画像データが含まれる。
【００２９】
ここで、シーケンス層は図２に示すように、前述したＩピクチャから始まり、Ｐピクチャ、Ｂピクチャを含む画像データをひとつのグループとしたＧＯＰと、ＧＯＰの先頭に付加されるＳＨ（Ｓｅｑｕｅｎｃｅ Ｈｅａｄｅｒ）とより構成される。
【００３０】
ＧＯＰには各ピクチャーデータの前位置にＧＯＰＨ（Ｇｒｏｕｐ Ｏｆ Ｐｉｃｔｕｒｅ Ｈｅａｄｅｒ）が設けられている。
ＧＯＰＨには、ＧＯＰの開始同期コードであるＧＳＣ（Ｇｒｏｕｐ Ｓｔａｒｔ Ｃｏｄｅ）が付され、続いてシーケンスの先頭からの時間を示すコードであるＴＣ（Ｔｉｍｅ Ｃｏｄｅ）、ＧＯＰ内の画像が他のＧＯＰから独立再生可能なことを示すフラグのＣＧ（Ｃｌｏｓｅｄ ＧＯＰ）、及び編集等のためにＧＯＰ内の最初のＢピクチャが正確に再生出来ないことを示すフラグのＢＬ（Ｂｒｏｋｅｎ Ｌｉｎｋ）が付加されている。
【００３１】
また、生成されるサムネイル画像のフォーマットは一般にＪＰＥＧファイル交換フォーマット（ＪＦＩＦ）と呼ばれるフォーマットを使用する。その仕様はＪＰＥＧ Ｄｒａｆｔ Ｉｎｔｅｒｎａｔｉｏｎａｌ Ｓｔａｎｄａｒｄ （ＩＳＯ １０９１８−１）に従っている。
【００３２】
すなわち、図３に示すようにＪＰＥＧデータは、ＳＯＩ（Ｓｔａｒｔ Ｏｆ Ｉｍａｇｅ）マーカーで始まり、その次に複数のマーカーが入るフレームマーカー、そして最後はＥＯＩ（Ｅｎｄ Ｏｆ Ｉｍａｇｅ）マーカーで終わる。
【００３３】
フレームマーカー内には、ＪＰＥＧファイル交換フォーマットを示すＡＰＰマーカーや、コメントを入れるコメント（ＣＯＭ）マーカーなどの各種セグメントを入れることが出来、またさらに画像圧縮したデータが格納されるマーカーなど複数のセグメントが実際に格納される。
さらに、字幕情報は、ＥＩＡ−７０８で規定されたフォーマットに従って記録されている。
【００３４】
次に、ＭＰＥＧ２方式のトランスポートストリーム（ＴＳ）の構成を図４に示す。
トランスポートストリーム（ＴＳ）はＴＳパケットの集まりから成り、各ＴＳパケットはＴＳパケットの情報を示すＴＳヘッダ（ＴＳｈｅａｄｅｒ）とデータを格納するＴＳペイロード（ＴＳｐａｙｌｏａｄ）とからなる。
ＴＳペイロードのデータを集めてＰＥＳ（Ｐａｃｋｅｔｉｚｅｄ Ｅｌｅｍｅｎｔａｒｙ Ｓｔｒｅａｍ）と呼ばれるエレメンタリストリームを構成する。ＴＳペイロードの部分には、ＰＥＳｈｅａｄｅｒとＰＥＳ Ｐａｃｋｅｔ Ｄａｔａのデータが分割されて格納される。
【００３５】
ＰＥＳはその属性などを格納するＰＥＳヘッダ及びデータを格納するＰＥＳパケットデータから構成される。
ＰＥＳヘッダはそのデータの再生時刻を示すＰＴＳ（Ｐｒｅｓｅｎｔａｔｉｏｎ Ｔｉｍｅ Ｓｔａｍｐ）やそのデコード時刻を示すＤＴＳ（Ｄｅｃｏｄｉｎｇ Ｔｉｍｅ Ｓｔａｍｐ）及びその他のデータが格納されている。
【００３６】
次に、ディスク１０に格納された動画像からユーザーが指定した場所の動画像を抽出し、サムネイル画像及び補助文字情報を作成する手順について、図５と共に説明する。
【００３７】
まず、ユーザーは選択手段１９によりサムネイル画像を生成すべき場所（フレーム）を指定する（ステップ（Ｓ）１０１）。
【００３８】
次に、ユーザーが選択手段１９により指定したその指定フレームの場所の情報は駆動装置１１に供給され、駆動装置１１はそのフレームに対応するディスク（記録媒体）１０の読み出すべき場所を決定する（ステップ１０２）。
【００３９】
次に、駆動装置１１を通してディスク１０に記録された符号化された動画像のうち、ステップ１０２で指定された場所（フレーム）に記録されているＭＰＥＧ２による動画像データを取り出す（ステップ１０３）。
【００４０】
その後で取得した動画像データをデコーダ１４により前記指定フレームに対する画像を復号化する（ステップ１０４）。
【００４１】
サムネイル画像生成手段２１で、その復号化した画像に対し前記ＪＰＥＧ Ｄｒａｆｔ Ｉｎｔｅｒｎａｔｉｏｎａｌ Ｓｔａｎｄａｒｄ に従ったＪＰＥＧファイル交換フォーマットで符号化（エンコード）して、その符号化した静止画像（サムネイル画像）を生成し、サムネイル画像用メモリ２５に保存する（ステップ１０５）。
【００４２】
次に、文字データ取得手段２３で、指定された場所（フレーム）の最も近傍にある字幕文字データから順に検索する（ステップ１０６）。
【００４３】
適当な字幕文字データが検索された後、ステップ１０６で検索された指定文字データ内に存在する文字データを、後述する方法により抽出（取得）する（ステップ１０７）。
【００４４】
文字データ埋め込み手段２２で、取得した文字データをステップ１０５で生成したサムネイル画像用メモリ２５の静止画像（サムネイル画像）に埋め込む（ステップ１０８）。
なお、ステップ１０６及びステップ１０８に関する処理内容について詳細は後述する。
【００４５】
最後に、サムネイル表示制御手段１７で、文字データを埋め込んだ（マージした）静止画像を、ＪＰＥＧデコーダ２７でデコードして表示デバイス１８の画面に表示する（ステップ１０９）。
以上がサムネイル画像に補助文字情報を埋め込む手順である。
ここでは、指定フレームの場所の情報を駆動装置１１に供給して、サムネイル画像を生成する場合について説明したが、これに限定されるものではなく、ユーザーが選択手段１９により画像表示デバイス１８の表示画面を見て指定した、その指定フレームの場所の情報をサムネイル画像生成手段２１に供給して、サムネイル画像を生成するようにしてもよい。
【００４６】
次に、前記ステップ１０６で示された、指定されたフレームの最も近傍にある文字データを検索する手段について説明する。
これはユーザーが指定した画像フレームを有するＰＴＳ（Ｐｒｅｓｅｎｔａｔｉｏｎ Ｔｉｍｅ Ｓｔａｍｐ）と同じＰＴＳを有する字幕文字データを、もしも同じＰＴＳを有する字幕文字データが動画像情報に存在しない場合は、該当ＰＴＳに近い値を有する文字データを、該当ビデオフレームの後方にあるトランスポートパケットから探し出し取得する。
【００４７】
この字幕文字データを取得する手順について、図６と共に以下に説明する。
まず、作成しようとするサムネイル画像に対応するビデオフレームのＴＳパケットが指定される（ステップ２０１）。
【００４８】
指定されたビデオＴＳパケットに対するＰＴＳ情報を取得する（ステップ２０２）。
次に、該当ＴＳパケットより後方にあるＴＳパケットを検索する（ステップ２０３）。
【００４９】
検索されたＴＳパケットが字幕文字データのＴＳパケットかどうかチェックする（ステップ２０４）。
もしも字幕文字データのＴＳパケットでない場合（ステップ２０４でＮｏ）は、ステップ２０３へ戻る。
【００５０】
字幕文字データのＴＳパケットである場合（ステップ２０４でＹｅｓ）は、
そのＴＳパケット内にＰＥＳパケットヘッダが含まれているかチェックする（ステップ２０５）。
【００５１】
含まれていない場合（ステップ２０５でＮｏ）は、ステップ２０３へ戻る。
含まれている場合（ステップ２０５でＹｅｓ）はステップ２０６へ進む。
ＰＥＳヘッダを解析し、ＰＴＳを取得する（ステップ２０６）。
【００５２】
次に、ステップ２０２で取得されたＰＴＳとＴＳパケットとの時間差を求める（ステップ２０７）。
取得した時間差、及び前回チェックした時間差と今回の時間差との差の絶対値をチェックする（ステップ２０８）。
【００５３】
取得した時間差が１秒以上字幕の方が遅い場合、及び今回の時間差の方が前回の時間差よりも大きくなった場合（ステップ２０８でＹｅｓ）、ステップ２０９へ進む。
それ以外の場合（ステップ２０８でＮｏ）は、その時間差及び字幕のＴＳパケット位置を保存しておき、ステップ２０３へ戻る。
【００５４】
最後に、前回の時間差の字幕ＴＳパケットが字幕とビデオフレームの差が最も小さいことになるので、そのＰＴＳが含まれる字幕ＴＳパケットの字幕文字データを取得する（ステップ２０９）。
図７に、ＴＳのビデオパケットと字幕パケットの関係図を示す。
【００５５】
ＪＰＥＧファイル交換フォーマットのサムネイル画像ヘッダ部分の所定フレームマーカー部分に付加する字幕文字データの抽出方法に関して、字幕文字データが日本語の場合、以下の（ａ）乃至（ｇ）の夫々異なる抽出方法があげられる。
【００５６】
（ａ） 取り出した字幕文字データの先頭から１０文字を切り出して、前記所定のフレームマーカー部分に付加する。
（ｂ） 取り出した字幕文字データの先頭から、空白または句読点を除いた箇所から、次の空白または句読点がある箇所までの単語を切り出して、前記所定のフレームマーカー部分に付加する。
【００５７】
（ｃ） 前記（ｂ）の手法によると先頭にある感嘆詞などを切り出してしまう可能性があり、この（ｂ）の手法を繰り返し用いることで、文字長が５文字以上となる先頭の文章から１０文字を取り出して、前記所定のフレームマーカー部分に付加する。
（ｄ） 取り出した字幕文字データを日本語構文の解析を行って、最初の名詞を、前記所定のフレームマーカー部分に付加する。
【００５８】
（ｅ） 前記（ｄ）の手法において、先頭の名詞に引き続き名詞がつながっているときは、連続する名詞の終り（複合名詞）までを切り出して、前記所定のフレームマーカー部分に付加する。
【００５９】
（ｆ） 前記（ｄ）の手法において、切り出した名詞または複合名詞の次に助詞がある場合、その助詞までを切り出して、前記所定のフレームマーカー部分に付加する。
（ｇ） 取り出した字幕文字データを日本語構文の解析を行って、先頭の名詞から始まる１０文字を切り出して、前記所定のフレームマーカー部分に付加する。
【００６０】
次に、図５のステップ１０８で既に説明した、取得した字幕文字データをサムネイル画像に埋め込む文字データ埋め込み手段２２について説明する。
獲得した字幕文字データを、生成したＪＰＥＧファイル交換フォーマットのサムネイル画像ヘッダ部分のフレームマーカー部分に、ＣＯＭマーカー形式
（「０ｘＦＦ，０ｘＦＥ」＋「セグメントの長さ（２バイト）」＋「副情報識別子（４バイト）」＋「取得した字幕文字データ」）で埋め込む。
【００６１】
なお、「０ｘＦＦ，０ｘＦＥ」は、コメントマーカーを示すマーカー識別子である。「セグメントの長さ（２バイト）」は、「セグメントの長さ」が入っている箇所からこのセグメントの終りまでの長さ（バイト数）を示す。「副情報識別子（４バイト）」は、以降のデータが字幕文字データであることを示す識別子である。
【００６２】
ＣＯＭセグメントとはコメントマーカー（ＣＯＭマーカー）を意味し、コメントを記入するセグメント領域を示すものである。なお、記録する前に既にＣＯＭマーカーのデータが記録されていた場合は、そのＣＯＭマーカーに追加して上記文字コードが入ったＣＯＭマーカーを埋め込む。
【００６３】
次に、ディスク１０に記録されたＪＰＥＧファイル交換フォーマットのサムネイル画像を字幕文字データと共に画面に表示する手順について、図８のフローチャートと共に説明する。
まず、ＪＰＥＧファイル交換フォーマットでディスク１０の図示せぬ補助情報記録領域に記録されているサムネイル画像を、駆動装置（ドライブ）１１、バッファ１２、サムネイル画像用メモリ２５、及びＪＰＥＧデコーダ２７を介して取得し、表示デバイス１８の画面に表示する（ステップ３０１）。
【００６４】
次に、副情報（字幕文字データ）を表示するか、チェックする（ステップ３０２）。
これは予めデフォルトで設定してあるものを使用するか、ユーザーが任意に表示するか、表示しないかを事前に設定したものをチェックする。表示しない場合（ステップ３０２でＮｏ）はそれで終了となる。
【００６５】
ユーザーが副情報表示を選択していた場合（ステップ３０２でＹｅｓ）、画面上のポインティングデバイスがサムネイル画像上にあるか、またはユーザーがそのサムネイル画像を選択状態であるか、チェックする（ステップ３０３）。
【００６６】
選択状態でない、またはポインティングデバイスがサムネイル画像上にない場合（ステップ３０３でＮｏ）は、それで終了する。
ポインティングデバイスがサムネイル画像上にある場合（ステップ３０３でＹｅｓ）は、サムネイル画像データのヘッダ部分のＣＯＭマーカーを調べる（ステップ３０４）。
【００６７】
ＣＯＭマーカーが発見されなかったか、またはあってもＣＯＭマーカー内の続くデータに副映像識別子がない場合（ステップ３０４でＮｏ）は、それで終了する。
ＣＯＭマーカーが有り、なお且つ続くデータに副映像識別子がある場合（ステップ３０４でＹｅｓ）は、この装置が生成した字幕文字データが入っていることになる。
その場合はＣＯＭマーカーの後に続く（セグメント長−副映像識別子の長さ分の）字幕文字データを取得する（ステップ３０５）。
【００６８】
次に、取得した字幕文字データをＪＰＥＧデコーダ２７でデコードし、文字データイメージデータを取得する（ステップ３０６）。
最後に、取得した文字イメージデータを表示デバイス１８の表示画面に追加表示する（ステップ３０７）。
【００６９】
なお、他の装置でこの副情報をいれたサムネイル画像を表示した場合、ＣＯＭマーカーに補助文字データを記載しているため、他の装置ではＣＯＭセグメントの情報はコメントとして扱われるため、実際の動作上の振る舞いには影響しない。
【００７０】
また、ユーザーがこのサムネイル補助文字データを使用するか、しないかを、予め選択することで、この補助文字データの取得、設定を禁止することも可能である。
また、この装置はビデオ情報がＭＰＥＧフォーマットで圧縮されていない場合や、サムネイル画像のフォーマットがＪＰＥＧファイル交換フォーマットでない場合にも有効である。
【００７１】
また、この装置は、サムネイル画像に補助文字データを埋め込むので、従来装置のようにサムネイル画像と手書きの補助文字情報との対応関係を予め関連付けておく必要はない。
【００７２】
次に、本実施例に塔載されるサムネイル画像記録媒体（ディスク）の構成について、図９と共に説明する。
ディスク１０は、以下のような複数のファイル（Ｆａ〜Ｆｆ）を有する構成になる。
（ａ） ストリームファイル（Ｆａ）には、映像情報データ（例えば、ビデオ情報（Ｖ）、オーディオ情報（Ａ）、字幕情報（ＳＰ）が図７のようにマルチプレックスされたトランスポートストリーム）が格納される（ビデオ情報記録領域、字幕情報記録領域）。
【００７３】
（ｂ） サムネイル画像ファイル（Ｆｂ）には、副情報である字幕文字データが埋め込まれたサムネイル画像データ（例えば、ＪＰＥＧフォーマットのファイル）が格納される（補助情報記録領域）。
（ｃ） サムネイル属性ファイル（Ｆｃ）には、サムネイル画像に関連するマーク位置情報、サムネイルの大きさ等が入る。
【００７４】
（ｄ） ストリーム属性ファイル（Ｆｄ）には、ストリームファイルの属性、再生可能位置など、ストリームの属性情報が入る。
（ｅ） 再生制御ファイル（Ｆｅ）には、ストリームやプレイリストの再生方法、再生順番などの情報が入る。
（ｆ） メディア情報ファイル（Ｆｆ）には、記録媒体全体の情報を管理する情報が入る。
【００７５】
副情報である字幕文字データが埋め込まれたサムネイル画像データそのものは、例えばビデオ情報とオーディオ情報、字幕情報がマルチプレクスされたトランスポートストリームが記録されている領域とは別の所定のサムネイル画像データ記録領域に記録される。
【００７６】
【発明の効果】
以上に説明したように、本発明のサムネイル画像作成機能付きビデオ再生装置によれば、ユーザーがサムネイル画像を表示選択する際に、その手助けとなる補助文字データを表示出来、所望箇所のサムネイル画像の選択がより簡単に出来る。
【００７７】
また、本発明によれば、ユーザーが補助文字情報の文字データを字幕文字情報から直接に取得出来るので、補助文字情報を、ユーザーが入力手段を使用して入力する負担をなくすことが出来る。
また、本発明によれば、この補助文字情報を参照することによりサムネイル画像の内容を確実に判別することが出来、サムネイル画像選択の間違いを減少させることが出来る。
【００７８】
また、本発明によれば、サムネイル画像に文字データを埋め込むので、従来のようにサムネイル画像と手書きの補助文字データとを予め関連付けておく工数が省ける。
【００７９】
また、本発明のサムネイル画像記録媒体によれば、記録媒体の補助情報記録領域にはサムネイル画像に対応付けて補助文字データが埋め込まれて記録されているので、その記録媒体の補助情報記録領域を再生して、サムネイル画像と共に補助文字データも参照して、所望の箇所のサムネイル画像を容易に見付け、そのサムネイル画像に対応したビデオ情報を即座に再生開始出来る。
【図面の簡単な説明】
【図１】本発明のサムネイル画像作成機能付きビデオ再生装置の実施例を示すブロック構成図である。
【図２】ＭＰＥＧ２のシーケンスを説明した図である。
【図３】ＪＰＥＧのヘッダ構造を説明した図である。
【図４】ＭＰＥＧ２のトランスポートストリームの構成を説明した図である。
【図５】本発明のサムネイル画像作成機能付きビデオ再生装置の実施例で使用するサムネイル画像に補助文字データを埋め込む手順を示したフローチャートである。
【図６】本発明のサムネイル画像作成機能付きビデオ再生装置の実施例で使用する文字データを取得する手順を示したフローチャートである。
【図７】本発明のサムネイル画像作成機能付きビデオ再生装置の実施例で使用するビデオパケットと字幕パケットとの関係を模式的に示した図である。
【図８】本発明のサムネイル画像作成機能付きビデオ再生装置の実施例で使用するサムネイル画像を文字データと共に画面に表示する手順を示したフローチャートである。
【図９】本発明のサムネイル画像作成機能付きビデオ再生装置の実施例に塔載されるサムネイル画像記録媒体（ディスク）の構成について説明した図である。
【図１０】本発明のサムネイル画像作成機能付きビデオ再生装置の実施例の字幕文字データ表示付きサムネイル表示画面を示した図である。
【図１１】従来例のサムネイル画像作成機能付きビデオ再生装置のブロック構成図である。
【符号の説明】
１ サムネイル画像作成機能付きビデオ再生装置
１０ ディスク（記録媒体）
１１ 駆動装置（補助情報記録手段）
１２ バッファ（補助情報記録手段）
１４ デコーダ
１５ ビデオ表示信号制御手段
１７ サムネイル表示制御手段
１８ 表示デバイス
１９ 選択手段
２０ 字幕表示信号制御手段
２１ サムネイル画像生成手段
２２ 文字データ埋め込み手段
２３ 文字データ取得手段
２４ フレームメモリ
２５ サムネイル画像用メモリ
２６ 画像表示制御手段
２７ ＪＰＥＧデコーダ
【発明の属する技術分野】
本発明は、サムネイル画像作成機能付きビデオ再生装置及びサムネイル画像記録媒体に係り、特に記録媒体の複数の記録領域から再生されるビデオ情報の選択が、各記録領域を代表するサムネイル画像によって、より容易に出来るサムネイル画像作成機能付きビデオ再生装置及びサムネイル画像記録媒体に関する。
【０００２】
【従来の技術】
周知のように、近年ではデジタル映像や音声、字幕等のデータを記録した、例えばＤＶＤのようなディスクを再生する動画対応のディスク再生装置が開発されている。
その再生装置に搭載されるディスクに記録されている映像や音声の圧縮フォーマットとしては、映像ではＭＰＥＧ２（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｉｍａｇｅ Ｃｏｄｉｎｇ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）映像圧縮方式、音声ではＡＣ（Ａｕｄｉｏ Ｃｏｍｐｒｅｓｓｉｏｎ）３オーディオ圧縮方式やＭＰＥＧオーディオ圧縮方式が用いられている。
【０００３】
さらに、映画やカラオケ等の字幕用としてＥＩＡ−７０８より規定された副映像データ圧縮方式が取り入れられている。また、これら映像、音声、字幕のデータはＭＰＥＧ２システムレイヤに従って多重化されてディスク内に記録されている。
【０００４】
そして、複数のプログラムが記録されたディスクに対して複数の再生開始位置と再生区間、再生順序を定義することが出来る。この複数の定義位置はディスクに記録されたデータとしては、プログラムという形で設定され記録される。
このプログラムは動画作成者が定義してディスク内にデータとして記録することも出来るし、またそのディスクを再生するユーザーが任意に設定しディスクに記録することも出来る。
【０００５】
このように、多数のプログラムが記録されたディスクに対して、ユーザーは簡単にそのプログラムにアクセスして再生するためにプログラムを代表するサムネイル画像を用いて表示装置に代表化させて表示し、ユーザーがその静止画像を選択することで各プログラムを簡単に再生することが出来る（例えば、特許文献１参照。）。
【０００６】
【特許文献１】
特開２００２‐１５０７５７号公報（図６）
【０００７】
従来例のサムネイル画像作成機能付きビデオ再生装置のブロック構成について、図１１と共に説明する。
図１１に示すこのサムネイル画像作成機能付きビデオ再生装置１Ａは、駆動装置１１、バッファ１２、デコーダ１４、ビデオ表示信号制御手段１５、サムネイル表示制御手段１７Ａ、表示デバイス１８、選択手段（文字データ生成手段）１９、字幕表示信号制御手段２０、サムネイル画像生成手段２１、フレームメモリ２４、サムネイル画像用メモリ２５Ａ、及び画像表示制御手段２６より構成されている。
【０００８】
駆動装置１１は、ビデオファイルやデータファイルの記憶が可能な情報記憶媒体であるディスク１０Ａを回転駆動し、前記ディスク１０Ａに対して情報の読み書きを実行する。
バッファ１２は、前記ディスク１０Ａより前記駆動装置１１を介して読み出したデータを一時貯めておく。
デコーダ１４は、前記読み出したデータの復号動作を行う。
ビデオ表示信号制御手段１５は、前記デコーダ１４を制御し、ビデオ画像イメージデータをフレームメモリ２４へ出力する。
字幕表示信号制御手段２０は、前記デコーダ１４を制御し、字幕画像イメージデータをフレームメモリ２４へ出力する。
【０００９】
フレームメモリ２４は、前記デコーダ１４から出力されたビデオ画像イメージデータ及び字幕画像イメージデータを格納する。
サムネイル画像生成手段２１は、選択手段１９を用いて表示デバイス１８より指定された箇所に対して前記フレームメモリ２４からビデオ画像イメージデータを取得し、このビデオ画像イメージデータを変換して、サムネイル画像を生成する。
サムネイル画像用メモリ２５Ａは、その変換して生成されたサムネイル画像を保存する。
画像表示制御手段２６は、フレームメモリ２４に格納されている画像イメージデータを表示デバイス１８に表示する。
【００１０】
サムネイル表示制御手段１７Ａは、サムネイル画像用メモリ２５Ａに保存されているサムネイル画像を表示デバイス１８に表示する。
表示デバイス１８は、前記フレームメモリ２４の出力及びサムネイル画像用メモリ２５Ａの出力とを１つの画面上に表示する。
【００１１】
サムネイル画像に対する補助文字情報を作成する場合、ユーザーは選択手段１９を用いて表示手段１８に表示されているサムネイル画像の中から所望のサムネイル画像を選択する。
選択されたサムネイル画像に対する補助文字情報を選択手段（文字データ入力手段）１９を用いることで、テキストとしてユーザーが作成する。
作成した補助文字情報は、サムネイル画像とは別の図示せぬテキスト情報保存用メモリに保存される。
【００１２】
記録可能な記録媒体の場合、前記図示せぬテキスト情報保存用メモリに保存されたテキスト情報は、選択したサムネイル画像データに対応したサムネイル属性情報ファイルの一部にテキストとして書き込まれ、サムネイル属性情報ファイルとして記録媒体１０Ａに保存される。
選択手段１９により、前記表示デバイス１８の表示画面に表示されたサムネイル画像の中からユーザーが所定のサムネイル画像を選択する。
【００１３】
【発明が解決しようとする課題】
ところで、ビデオ再生装置では、記録媒体の記憶容量が大きいことから、複数のプログラム（チャプターやブックマークあるいはタイトル）を記録することが可能である。
複数のプログラムが記録された記録媒体に対して、ユーザーは複数のプログラムを簡単にアクセスするためにその複数の各プログラムを代表する複数のサムネイル画像を表示装置に表示することで、ユーザーが選択したプログラムを容易にアクセス出来るようになる。
【００１４】
しかし、画面の領域は限られており、その中で複数のサムネイル画像を表示するため、各サムネイル画像をある程度小さなサイズにせざるを得ず、従ってサムネイル画像が代表するプログラムの内容がわかりづらく、所望のサムネイル画像を正確に選択出来ないという問題があった。
【００１５】
また、サムネイル画像を補佐する補助情報としてユーザーが文字データを入力することが出来るが、一般に市販されているビデオ再生装置では文字データ入力手段（選択手段）としてパネルボタンまたはリモコンしか付随していないため、サムネイル画像に対して補助的な文字データを入力するのは、ユーザーにとって面倒で労力と時間を要するという問題があった。
【００１６】
そこで、本発明は以上の問題に鑑みてなされたもので、サムネイル画像に対する補助的な文字データを簡単に入力することが可能なサムネイル画像作成機能付きビデオ再生装置、及びその装置に搭載されるサムネイル画像記録媒体を提供することを目的とする。
【００１７】
【課題を解決するための手段】
上記課題を解決するために、
請求項１に記載された発明は、
ビデオ情報が記録されたビデオ情報記録領域、前記ビデオ情報に付随した字幕情報が記録された字幕情報記録領域、及び前記ビデオ情報を代表するサムネイル画像が記録された補助情報記録領域を少なくとも有する記録媒体から、前記サムネイル画像を再生表示するサムネイル画像作成機能付きビデオ再生装置において、
再生して得られる各領域毎のビデオ情報の中から指定した箇所の画像を変換して各サムネイル画像を生成するサムネイル画像生成手段２１と、
前記各領域毎のビデオ情報に付随して再生して得られた字幕情報の中から各文字データを取得する文字データ取得手段２３と、
前記各サムネイル画像を順次記憶すると共に前記各文字データを前記各サムネイル画像に埋め込んで記憶するサムネイル画像記憶手段２５と、
前記各文字データを埋め込んだ各サムネイル画像を前記補助情報記録領域に順次記録する補助情報記録手段１１，１２と、
前記補助情報記録領域より再生した前記各サムネイル画像の中から所定のサムネイル画像を選択する選択手段１９とを備え、
前記サムネイル画像を前記字幕情報から選択した文字データと共に表示することを特徴としたサムネイル画像作成機能付きビデオ再生装置を提供し、
請求項２に記載された発明は、
ビデオ情報が記録されたビデオ情報記録領域、前記ビデオ情報に付随した字幕情報が記録された字幕情報記録領域、及び前記ビデオ情報を代表するサムネイル画像が記録された補助情報記録領域を少なくとも有するサムネイル画像記録媒体において、
前記サムネイル画像記録領域には、前記ビデオ情報記録領域を複数に区分した各領域に対応したビデオ情報に付随して記録された字幕情報から選択した文字データが前記各サムネイル画像に対応付けて埋め込まれて記録されていることを特徴としたサムネイル画像記録媒体を提供するものである。
【００１８】
【発明の実施の形態】
本発明の実施の形態につき、好ましい実施例により、以下に図と共に説明する。
なお、参照符号については、従来例における構成と同一の構成については同一の参照符号を付して、その説明は省略する。
＜実施例＞
図１は本発明のサムネイル画像作成機能付きビデオ再生装置の実施例を示すブロック図である。
図２はＭＰＥＧ２のシーケンスを説明した図である。
図３はＪＰＥＧのヘッダ構造図である。
図４はＭＰＥＧ２のトランスポートストリームの構成を説明した図である。
図５は本発明のサムネイル画像作成機能付きビデオ再生装置の実施例で使用するサムネイル画像に補助文字データを埋め込む手順を示したフローチャートである。
図６は本発明のサムネイル画像作成機能付きビデオ再生装置の実施例で使用する文字データを取得する手順を示したフローチャートである。
図７は本発明のサムネイル画像作成機能付きビデオ再生装置の実施例で使用するビデオパケットと字幕パケットとの関係を模式的に示した図である。
図８は本発明のサムネイル画像作成機能付きビデオ再生装置の実施例で使用するサムネイル画像を文字データと共に画面に表示する手順を示したフローチャートである。
図９は本発明のサムネイル画像作成機能付きビデオ再生装置の実施例に塔載される記録媒体（ディスク）の構成について説明した図である。
図１０は本発明のサムネイル画像作成機能付きビデオ再生装置の実施例における字幕文字表示付きサムネイル表示画面を示した図である。
【００１９】
図１の本実施例のサムネイル画像作成機能付きビデオ再生装置１は、駆動装置１１、バッファ１２、デコーダ１４、ビデオ表示信号制御手段１５、サムネイル表示制御手段１７、表示デバイス１８、選択手段１９、字幕表示信号制御手段２０、サムネイル画像生成手段２１、文字データ埋め込み手段２２、文字データ取得手段２３、フレームメモリ２４、サムネイル画像用メモリ２５、画像表示制御手段２６、及びＪＰＥＧデコーダ２７より構成されている。
【００２０】
駆動装置１１は、ビデオファイルやデータファイルを記憶出来る情報記憶媒体であるディスク１０を回転駆動し、前記ディスク１０に対して情報の読み書きを実行する。
バッファ１２は、前記駆動装置１１を介して前記ディスク１０より読み出したビデオデータを貯めておく。
デコーダ１４は、前記読み出したビデオデータの復号動作を行う。
【００２１】
ビデオ表示信号制御手段１５は、前記デコーダ１４を制御し、ビデオ画像イメージデータをフレームメモリ２４へ出力する。
字幕表示信号制御手段２０は、前記デコーダ１４を制御し、字幕画像イメージデータをフレームメモリ２４へ出力する。
【００２２】
前記フレームメモリ２４は、前記デコーダ１４から出力されたビデオ画像イメージデータ及び字幕画像イメージデータを格納する。
サムネイル画像生成手段２１は、選択手段１９を用いて表示デバイス１８より指定された箇所に対して、前記フレームメモリ２４からビデオ画像イメージデータを取得し、このビデオ画像イメージデータを変換して、サムネイル画像を生成する。
【００２３】
サムネイル画像用メモリ２５は、その変換して生成したサムネイル画像を保存する。
文字データ取得手段２３は、選択手段１９を用いて表示デバイス１８より指定された箇所に対してデコーダ１４を制御し、デコードされたその箇所の字幕データの中より文字データを取得する。
【００２４】
文字データ埋め込み手段２２は、サムネイル用画像メモリ２５に保存したサムネイル画像の中に前記文字データ取得手段２３により取得した文字データを埋め込む。
前記サムネイル用画像メモリ２５の中の文字データを埋め込んだサムネイル画像は、バッファ１２及び駆動装置１１を介して記録媒体１０の図示せぬ補助情報記録領域に記録される。
【００２５】
画像表示制御手段２６は、フレームメモリ２４に格納されている画像イメージデータを表示デバイス１８に表示する。
サムネイル表示制御手段１７は、サムネイル画像用メモリ２５に保存されている文字データが添付されたサムネイル画像を表示デバイス１８に表示する。
【００２６】
表示デバイス１８は、前記フレームメモリ２４の出力及びサムネイル画像用メモリ２５の出力とを１つの画面上に表示する。
選択手段１９により、前記表示デバイス１８の表示画面を見てユーザーが所定の箇所を選択する。図１０に示すような、文字データ表示付きのサムネイル表示画面が得られる。
【００２７】
次に、図１に示されたサムネイル画像作成機能付きビデオ再生装置１におけるサムネイル画像の作成方法について説明する。
まず、本実施例で使用するデータのフォーマットに関して説明する。ビデオデータはＭＰＥＧ方式によって圧縮されているものとする。
【００２８】
ＭＰＥＧ２方式の場合は、シーケンス層、ＧＯＰ（Ｇｒｏｕｐ Ｏｆ Ｐｉｃｔｕｒｅ）層、ピクチャ層、スライス層、マクロブロック（ＭＢ）層、及びブロック層の６階層に分けられている。
このうち、ＧＯＰ層には、フレーム間予測を使わずにその情報だけから符号化されたＩピクチャ、Ｉピクチャ又はＰピクチャからの予測を行うことで生成されるＰピクチャ、双方向の予測によって生成されるＢピクチャの３種類の画像データが含まれる。
【００２９】
ここで、シーケンス層は図２に示すように、前述したＩピクチャから始まり、Ｐピクチャ、Ｂピクチャを含む画像データをひとつのグループとしたＧＯＰと、ＧＯＰの先頭に付加されるＳＨ（Ｓｅｑｕｅｎｃｅ Ｈｅａｄｅｒ）とより構成される。
【００３０】
ＧＯＰには各ピクチャーデータの前位置にＧＯＰＨ（Ｇｒｏｕｐ Ｏｆ Ｐｉｃｔｕｒｅ Ｈｅａｄｅｒ）が設けられている。
ＧＯＰＨには、ＧＯＰの開始同期コードであるＧＳＣ（Ｇｒｏｕｐ Ｓｔａｒｔ Ｃｏｄｅ）が付され、続いてシーケンスの先頭からの時間を示すコードであるＴＣ（Ｔｉｍｅ Ｃｏｄｅ）、ＧＯＰ内の画像が他のＧＯＰから独立再生可能なことを示すフラグのＣＧ（Ｃｌｏｓｅｄ ＧＯＰ）、及び編集等のためにＧＯＰ内の最初のＢピクチャが正確に再生出来ないことを示すフラグのＢＬ（Ｂｒｏｋｅｎ Ｌｉｎｋ）が付加されている。
【００３１】
また、生成されるサムネイル画像のフォーマットは一般にＪＰＥＧファイル交換フォーマット（ＪＦＩＦ）と呼ばれるフォーマットを使用する。その仕様はＪＰＥＧ Ｄｒａｆｔ Ｉｎｔｅｒｎａｔｉｏｎａｌ Ｓｔａｎｄａｒｄ （ＩＳＯ １０９１８−１）に従っている。
【００３２】
すなわち、図３に示すようにＪＰＥＧデータは、ＳＯＩ（Ｓｔａｒｔ Ｏｆ Ｉｍａｇｅ）マーカーで始まり、その次に複数のマーカーが入るフレームマーカー、そして最後はＥＯＩ（Ｅｎｄ Ｏｆ Ｉｍａｇｅ）マーカーで終わる。
【００３３】
フレームマーカー内には、ＪＰＥＧファイル交換フォーマットを示すＡＰＰマーカーや、コメントを入れるコメント（ＣＯＭ）マーカーなどの各種セグメントを入れることが出来、またさらに画像圧縮したデータが格納されるマーカーなど複数のセグメントが実際に格納される。
さらに、字幕情報は、ＥＩＡ−７０８で規定されたフォーマットに従って記録されている。
【００３４】
次に、ＭＰＥＧ２方式のトランスポートストリーム（ＴＳ）の構成を図４に示す。
トランスポートストリーム（ＴＳ）はＴＳパケットの集まりから成り、各ＴＳパケットはＴＳパケットの情報を示すＴＳヘッダ（ＴＳｈｅａｄｅｒ）とデータを格納するＴＳペイロード（ＴＳｐａｙｌｏａｄ）とからなる。
ＴＳペイロードのデータを集めてＰＥＳ（Ｐａｃｋｅｔｉｚｅｄ Ｅｌｅｍｅｎｔａｒｙ Ｓｔｒｅａｍ）と呼ばれるエレメンタリストリームを構成する。ＴＳペイロードの部分には、ＰＥＳｈｅａｄｅｒとＰＥＳ Ｐａｃｋｅｔ Ｄａｔａのデータが分割されて格納される。
【００３５】
ＰＥＳはその属性などを格納するＰＥＳヘッダ及びデータを格納するＰＥＳパケットデータから構成される。
ＰＥＳヘッダはそのデータの再生時刻を示すＰＴＳ（Ｐｒｅｓｅｎｔａｔｉｏｎ Ｔｉｍｅ Ｓｔａｍｐ）やそのデコード時刻を示すＤＴＳ（Ｄｅｃｏｄｉｎｇ Ｔｉｍｅ Ｓｔａｍｐ）及びその他のデータが格納されている。
【００３６】
次に、ディスク１０に格納された動画像からユーザーが指定した場所の動画像を抽出し、サムネイル画像及び補助文字情報を作成する手順について、図５と共に説明する。
【００３７】
まず、ユーザーは選択手段１９によりサムネイル画像を生成すべき場所（フレーム）を指定する（ステップ（Ｓ）１０１）。
【００３８】
次に、ユーザーが選択手段１９により指定したその指定フレームの場所の情報は駆動装置１１に供給され、駆動装置１１はそのフレームに対応するディスク（記録媒体）１０の読み出すべき場所を決定する（ステップ１０２）。
【００３９】
次に、駆動装置１１を通してディスク１０に記録された符号化された動画像のうち、ステップ１０２で指定された場所（フレーム）に記録されているＭＰＥＧ２による動画像データを取り出す（ステップ１０３）。
【００４０】
その後で取得した動画像データをデコーダ１４により前記指定フレームに対する画像を復号化する（ステップ１０４）。
【００４１】
サムネイル画像生成手段２１で、その復号化した画像に対し前記ＪＰＥＧ Ｄｒａｆｔ Ｉｎｔｅｒｎａｔｉｏｎａｌ Ｓｔａｎｄａｒｄ に従ったＪＰＥＧファイル交換フォーマットで符号化（エンコード）して、その符号化した静止画像（サムネイル画像）を生成し、サムネイル画像用メモリ２５に保存する（ステップ１０５）。
【００４２】
次に、文字データ取得手段２３で、指定された場所（フレーム）の最も近傍にある字幕文字データから順に検索する（ステップ１０６）。
【００４３】
適当な字幕文字データが検索された後、ステップ１０６で検索された指定文字データ内に存在する文字データを、後述する方法により抽出（取得）する（ステップ１０７）。
【００４４】
文字データ埋め込み手段２２で、取得した文字データをステップ１０５で生成したサムネイル画像用メモリ２５の静止画像（サムネイル画像）に埋め込む（ステップ１０８）。
なお、ステップ１０６及びステップ１０８に関する処理内容について詳細は後述する。
【００４５】
最後に、サムネイル表示制御手段１７で、文字データを埋め込んだ（マージした）静止画像を、ＪＰＥＧデコーダ２７でデコードして表示デバイス１８の画面に表示する（ステップ１０９）。
以上がサムネイル画像に補助文字情報を埋め込む手順である。
ここでは、指定フレームの場所の情報を駆動装置１１に供給して、サムネイル画像を生成する場合について説明したが、これに限定されるものではなく、ユーザーが選択手段１９により画像表示デバイス１８の表示画面を見て指定した、その指定フレームの場所の情報をサムネイル画像生成手段２１に供給して、サムネイル画像を生成するようにしてもよい。
【００４６】
次に、前記ステップ１０６で示された、指定されたフレームの最も近傍にある文字データを検索する手段について説明する。
これはユーザーが指定した画像フレームを有するＰＴＳ（Ｐｒｅｓｅｎｔａｔｉｏｎ Ｔｉｍｅ Ｓｔａｍｐ）と同じＰＴＳを有する字幕文字データを、もしも同じＰＴＳを有する字幕文字データが動画像情報に存在しない場合は、該当ＰＴＳに近い値を有する文字データを、該当ビデオフレームの後方にあるトランスポートパケットから探し出し取得する。
【００４７】
この字幕文字データを取得する手順について、図６と共に以下に説明する。
まず、作成しようとするサムネイル画像に対応するビデオフレームのＴＳパケットが指定される（ステップ２０１）。
【００４８】
指定されたビデオＴＳパケットに対するＰＴＳ情報を取得する（ステップ２０２）。
次に、該当ＴＳパケットより後方にあるＴＳパケットを検索する（ステップ２０３）。
【００４９】
検索されたＴＳパケットが字幕文字データのＴＳパケットかどうかチェックする（ステップ２０４）。
もしも字幕文字データのＴＳパケットでない場合（ステップ２０４でＮｏ）は、ステップ２０３へ戻る。
【００５０】
字幕文字データのＴＳパケットである場合（ステップ２０４でＹｅｓ）は、
そのＴＳパケット内にＰＥＳパケットヘッダが含まれているかチェックする（ステップ２０５）。
【００５１】
含まれていない場合（ステップ２０５でＮｏ）は、ステップ２０３へ戻る。
含まれている場合（ステップ２０５でＹｅｓ）はステップ２０６へ進む。
ＰＥＳヘッダを解析し、ＰＴＳを取得する（ステップ２０６）。
【００５２】
次に、ステップ２０２で取得されたＰＴＳとＴＳパケットとの時間差を求める（ステップ２０７）。
取得した時間差、及び前回チェックした時間差と今回の時間差との差の絶対値をチェックする（ステップ２０８）。
【００５３】
取得した時間差が１秒以上字幕の方が遅い場合、及び今回の時間差の方が前回の時間差よりも大きくなった場合（ステップ２０８でＹｅｓ）、ステップ２０９へ進む。
それ以外の場合（ステップ２０８でＮｏ）は、その時間差及び字幕のＴＳパケット位置を保存しておき、ステップ２０３へ戻る。
【００５４】
最後に、前回の時間差の字幕ＴＳパケットが字幕とビデオフレームの差が最も小さいことになるので、そのＰＴＳが含まれる字幕ＴＳパケットの字幕文字データを取得する（ステップ２０９）。
図７に、ＴＳのビデオパケットと字幕パケットの関係図を示す。
【００５５】
ＪＰＥＧファイル交換フォーマットのサムネイル画像ヘッダ部分の所定フレームマーカー部分に付加する字幕文字データの抽出方法に関して、字幕文字データが日本語の場合、以下の（ａ）乃至（ｇ）の夫々異なる抽出方法があげられる。
【００５６】
（ａ） 取り出した字幕文字データの先頭から１０文字を切り出して、前記所定のフレームマーカー部分に付加する。
（ｂ） 取り出した字幕文字データの先頭から、空白または句読点を除いた箇所から、次の空白または句読点がある箇所までの単語を切り出して、前記所定のフレームマーカー部分に付加する。
【００５７】
（ｃ） 前記（ｂ）の手法によると先頭にある感嘆詞などを切り出してしまう可能性があり、この（ｂ）の手法を繰り返し用いることで、文字長が５文字以上となる先頭の文章から１０文字を取り出して、前記所定のフレームマーカー部分に付加する。
（ｄ） 取り出した字幕文字データを日本語構文の解析を行って、最初の名詞を、前記所定のフレームマーカー部分に付加する。
【００５８】
（ｅ） 前記（ｄ）の手法において、先頭の名詞に引き続き名詞がつながっているときは、連続する名詞の終り（複合名詞）までを切り出して、前記所定のフレームマーカー部分に付加する。
【００５９】
（ｆ） 前記（ｄ）の手法において、切り出した名詞または複合名詞の次に助詞がある場合、その助詞までを切り出して、前記所定のフレームマーカー部分に付加する。
（ｇ） 取り出した字幕文字データを日本語構文の解析を行って、先頭の名詞から始まる１０文字を切り出して、前記所定のフレームマーカー部分に付加する。
【００６０】
次に、図５のステップ１０８で既に説明した、取得した字幕文字データをサムネイル画像に埋め込む文字データ埋め込み手段２２について説明する。
獲得した字幕文字データを、生成したＪＰＥＧファイル交換フォーマットのサムネイル画像ヘッダ部分のフレームマーカー部分に、ＣＯＭマーカー形式
（「０ｘＦＦ，０ｘＦＥ」＋「セグメントの長さ（２バイト）」＋「副情報識別子（４バイト）」＋「取得した字幕文字データ」）で埋め込む。
【００６１】
なお、「０ｘＦＦ，０ｘＦＥ」は、コメントマーカーを示すマーカー識別子である。「セグメントの長さ（２バイト）」は、「セグメントの長さ」が入っている箇所からこのセグメントの終りまでの長さ（バイト数）を示す。「副情報識別子（４バイト）」は、以降のデータが字幕文字データであることを示す識別子である。
【００６２】
ＣＯＭセグメントとはコメントマーカー（ＣＯＭマーカー）を意味し、コメントを記入するセグメント領域を示すものである。なお、記録する前に既にＣＯＭマーカーのデータが記録されていた場合は、そのＣＯＭマーカーに追加して上記文字コードが入ったＣＯＭマーカーを埋め込む。
【００６３】
次に、ディスク１０に記録されたＪＰＥＧファイル交換フォーマットのサムネイル画像を字幕文字データと共に画面に表示する手順について、図８のフローチャートと共に説明する。
まず、ＪＰＥＧファイル交換フォーマットでディスク１０の図示せぬ補助情報記録領域に記録されているサムネイル画像を、駆動装置（ドライブ）１１、バッファ１２、サムネイル画像用メモリ２５、及びＪＰＥＧデコーダ２７を介して取得し、表示デバイス１８の画面に表示する（ステップ３０１）。
【００６４】
次に、副情報（字幕文字データ）を表示するか、チェックする（ステップ３０２）。
これは予めデフォルトで設定してあるものを使用するか、ユーザーが任意に表示するか、表示しないかを事前に設定したものをチェックする。表示しない場合（ステップ３０２でＮｏ）はそれで終了となる。
【００６５】
ユーザーが副情報表示を選択していた場合（ステップ３０２でＹｅｓ）、画面上のポインティングデバイスがサムネイル画像上にあるか、またはユーザーがそのサムネイル画像を選択状態であるか、チェックする（ステップ３０３）。
【００６６】
選択状態でない、またはポインティングデバイスがサムネイル画像上にない場合（ステップ３０３でＮｏ）は、それで終了する。
ポインティングデバイスがサムネイル画像上にある場合（ステップ３０３でＹｅｓ）は、サムネイル画像データのヘッダ部分のＣＯＭマーカーを調べる（ステップ３０４）。
【００６７】
ＣＯＭマーカーが発見されなかったか、またはあってもＣＯＭマーカー内の続くデータに副映像識別子がない場合（ステップ３０４でＮｏ）は、それで終了する。
ＣＯＭマーカーが有り、なお且つ続くデータに副映像識別子がある場合（ステップ３０４でＹｅｓ）は、この装置が生成した字幕文字データが入っていることになる。
その場合はＣＯＭマーカーの後に続く（セグメント長−副映像識別子の長さ分の）字幕文字データを取得する（ステップ３０５）。
【００６８】
次に、取得した字幕文字データをＪＰＥＧデコーダ２７でデコードし、文字データイメージデータを取得する（ステップ３０６）。
最後に、取得した文字イメージデータを表示デバイス１８の表示画面に追加表示する（ステップ３０７）。
【００６９】
なお、他の装置でこの副情報をいれたサムネイル画像を表示した場合、ＣＯＭマーカーに補助文字データを記載しているため、他の装置ではＣＯＭセグメントの情報はコメントとして扱われるため、実際の動作上の振る舞いには影響しない。
【００７０】
また、ユーザーがこのサムネイル補助文字データを使用するか、しないかを、予め選択することで、この補助文字データの取得、設定を禁止することも可能である。
また、この装置はビデオ情報がＭＰＥＧフォーマットで圧縮されていない場合や、サムネイル画像のフォーマットがＪＰＥＧファイル交換フォーマットでない場合にも有効である。
【００７１】
また、この装置は、サムネイル画像に補助文字データを埋め込むので、従来装置のようにサムネイル画像と手書きの補助文字情報との対応関係を予め関連付けておく必要はない。
【００７２】
次に、本実施例に塔載されるサムネイル画像記録媒体（ディスク）の構成について、図９と共に説明する。
ディスク１０は、以下のような複数のファイル（Ｆａ〜Ｆｆ）を有する構成になる。
（ａ） ストリームファイル（Ｆａ）には、映像情報データ（例えば、ビデオ情報（Ｖ）、オーディオ情報（Ａ）、字幕情報（ＳＰ）が図７のようにマルチプレックスされたトランスポートストリーム）が格納される（ビデオ情報記録領域、字幕情報記録領域）。
【００７３】
（ｂ） サムネイル画像ファイル（Ｆｂ）には、副情報である字幕文字データが埋め込まれたサムネイル画像データ（例えば、ＪＰＥＧフォーマットのファイル）が格納される（補助情報記録領域）。
（ｃ） サムネイル属性ファイル（Ｆｃ）には、サムネイル画像に関連するマーク位置情報、サムネイルの大きさ等が入る。
【００７４】
（ｄ） ストリーム属性ファイル（Ｆｄ）には、ストリームファイルの属性、再生可能位置など、ストリームの属性情報が入る。
（ｅ） 再生制御ファイル（Ｆｅ）には、ストリームやプレイリストの再生方法、再生順番などの情報が入る。
（ｆ） メディア情報ファイル（Ｆｆ）には、記録媒体全体の情報を管理する情報が入る。
【００７５】
副情報である字幕文字データが埋め込まれたサムネイル画像データそのものは、例えばビデオ情報とオーディオ情報、字幕情報がマルチプレクスされたトランスポートストリームが記録されている領域とは別の所定のサムネイル画像データ記録領域に記録される。
【００７６】
【発明の効果】
以上に説明したように、本発明のサムネイル画像作成機能付きビデオ再生装置によれば、ユーザーがサムネイル画像を表示選択する際に、その手助けとなる補助文字データを表示出来、所望箇所のサムネイル画像の選択がより簡単に出来る。
【００７７】
また、本発明によれば、ユーザーが補助文字情報の文字データを字幕文字情報から直接に取得出来るので、補助文字情報を、ユーザーが入力手段を使用して入力する負担をなくすことが出来る。
また、本発明によれば、この補助文字情報を参照することによりサムネイル画像の内容を確実に判別することが出来、サムネイル画像選択の間違いを減少させることが出来る。
【００７８】
また、本発明によれば、サムネイル画像に文字データを埋め込むので、従来のようにサムネイル画像と手書きの補助文字データとを予め関連付けておく工数が省ける。
【００７９】
また、本発明のサムネイル画像記録媒体によれば、記録媒体の補助情報記録領域にはサムネイル画像に対応付けて補助文字データが埋め込まれて記録されているので、その記録媒体の補助情報記録領域を再生して、サムネイル画像と共に補助文字データも参照して、所望の箇所のサムネイル画像を容易に見付け、そのサムネイル画像に対応したビデオ情報を即座に再生開始出来る。
【図面の簡単な説明】
【図１】本発明のサムネイル画像作成機能付きビデオ再生装置の実施例を示すブロック構成図である。
【図２】ＭＰＥＧ２のシーケンスを説明した図である。
【図３】ＪＰＥＧのヘッダ構造を説明した図である。
【図４】ＭＰＥＧ２のトランスポートストリームの構成を説明した図である。
【図５】本発明のサムネイル画像作成機能付きビデオ再生装置の実施例で使用するサムネイル画像に補助文字データを埋め込む手順を示したフローチャートである。
【図６】本発明のサムネイル画像作成機能付きビデオ再生装置の実施例で使用する文字データを取得する手順を示したフローチャートである。
【図７】本発明のサムネイル画像作成機能付きビデオ再生装置の実施例で使用するビデオパケットと字幕パケットとの関係を模式的に示した図である。
【図８】本発明のサムネイル画像作成機能付きビデオ再生装置の実施例で使用するサムネイル画像を文字データと共に画面に表示する手順を示したフローチャートである。
【図９】本発明のサムネイル画像作成機能付きビデオ再生装置の実施例に塔載されるサムネイル画像記録媒体（ディスク）の構成について説明した図である。
【図１０】本発明のサムネイル画像作成機能付きビデオ再生装置の実施例の字幕文字データ表示付きサムネイル表示画面を示した図である。
【図１１】従来例のサムネイル画像作成機能付きビデオ再生装置のブロック構成図である。
【符号の説明】
１ サムネイル画像作成機能付きビデオ再生装置
１０ ディスク（記録媒体）
１１ 駆動装置（補助情報記録手段）
１２ バッファ（補助情報記録手段）
１４ デコーダ
１５ ビデオ表示信号制御手段
１７ サムネイル表示制御手段
１８ 表示デバイス
１９ 選択手段
２０ 字幕表示信号制御手段
２１ サムネイル画像生成手段
２２ 文字データ埋め込み手段
２３ 文字データ取得手段
２４ フレームメモリ
２５ サムネイル画像用メモリ
２６ 画像表示制御手段
２７ ＪＰＥＧデコーダ
Claims (2)
- ビデオ情報が記録されたビデオ情報記録領域、前記ビデオ情報に付随した字幕情報が記録された字幕情報記録領域、及び前記ビデオ情報を代表するサムネイル画像が記録された補助情報記録領域を少なくとも有する記録媒体から、前記サムネイル画像を再生表示するサムネイル画像作成機能付きビデオ再生装置において、
再生して得られる各領域毎のビデオ情報の中から指定した箇所の画像を変換して各サムネイル画像を生成するサムネイル画像生成手段と、
前記各領域毎のビデオ情報に付随して再生して得られた字幕情報の中から各文字データを取得する文字データ取得手段と、
前記各サムネイル画像を順次記憶すると共に前記各文字データを前記各サムネイル画像に埋め込んで記憶するサムネイル画像記憶手段と、
前記各文字データを埋め込んだ各サムネイル画像を前記補助情報記録領域に順次記録する補助情報記録手段と、
前記補助情報記録領域より再生した前記各サムネイル画像の中から所定のサムネイル画像を選択する選択手段とを備え、
前記サムネイル画像を前記字幕情報から選択した文字データと共に表示することを特徴としたサムネイル画像作成機能付きビデオ再生装置。 - ビデオ情報が記録されたビデオ情報記録領域、前記ビデオ情報に付随した字幕情報が記録された字幕情報記録領域、及び前記ビデオ情報を代表するサムネイル画像が記録された補助情報記録領域を少なくとも有するサムネイル画像記録媒体において、
前記サムネイル画像記録領域には、前記ビデオ情報記録領域を複数に区分した各領域に対応したビデオ情報に付随して記録された字幕情報から選択した文字データが前記各サムネイル画像に対応付けて埋め込まれて記録されていることを特徴としたサムネイル画像記録媒体。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003182283A JP2005020351A (ja) | 2003-06-26 | 2003-06-26 | サムネイル画像作成機能付きビデオ再生装置及びサムネイル画像記録媒体 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003182283A JP2005020351A (ja) | 2003-06-26 | 2003-06-26 | サムネイル画像作成機能付きビデオ再生装置及びサムネイル画像記録媒体 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2005020351A true JP2005020351A (ja) | 2005-01-20 |
Family
ID=34182704
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2003182283A Pending JP2005020351A (ja) | 2003-06-26 | 2003-06-26 | サムネイル画像作成機能付きビデオ再生装置及びサムネイル画像記録媒体 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2005020351A (ja) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8094202B2 (en) | 2007-05-17 | 2012-01-10 | Canon Kabushiki Kaisha | Moving image capture apparatus and moving image capture method |
| US8175415B2 (en) | 2008-03-24 | 2012-05-08 | Brother Kogyo Kabushiki Kaisha | Image processing device and computer-accessible recording medium containing program therefor |
| US8743243B2 (en) | 1996-10-03 | 2014-06-03 | Nikon Corporation | Information processing apparatus, information processing method and recording medium for electronic equipment including an electronic camera |
| US20170013292A1 (en) * | 2015-07-06 | 2017-01-12 | Korea Advanced Institute Of Science And Technology | Method and system for providing video content based on image |
-
2003
- 2003-06-26 JP JP2003182283A patent/JP2005020351A/ja active Pending
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8743243B2 (en) | 1996-10-03 | 2014-06-03 | Nikon Corporation | Information processing apparatus, information processing method and recording medium for electronic equipment including an electronic camera |
| US8094202B2 (en) | 2007-05-17 | 2012-01-10 | Canon Kabushiki Kaisha | Moving image capture apparatus and moving image capture method |
| US8175415B2 (en) | 2008-03-24 | 2012-05-08 | Brother Kogyo Kabushiki Kaisha | Image processing device and computer-accessible recording medium containing program therefor |
| US20170013292A1 (en) * | 2015-07-06 | 2017-01-12 | Korea Advanced Institute Of Science And Technology | Method and system for providing video content based on image |
| US9906820B2 (en) * | 2015-07-06 | 2018-02-27 | Korea Advanced Institute Of Science And Technology | Method and system for providing video content based on image |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5620116B2 (ja) | テキストデータとダウンロードフォントとを利用した多国語支援用サブタイトルデータが記録された情報保存媒体に保存されたデータを再生する再生装置及びデータ記録及び／または再生装置その装置 | |
| KR100970735B1 (ko) | 동영상 데이터가 기록된 정보저장매체를 재생하는 재생 방법 및 기록 장치 | |
| KR100752260B1 (ko) | 저장용 비디오 프로그램을 처리하기 위한 시스템 및 방법 | |
| JP5142453B2 (ja) | 再生装置 | |
| US7099561B1 (en) | User interface and processing system for digital video, audio and ancillary data | |
| KR100667751B1 (ko) | 텍스트 기반의 자막 정보를 포함하는 저장 매체, 재생장치 및 그 재생 방법 | |
| US7907815B2 (en) | Method and apparatus for synchronous reproduction of main contents recorded on an interactive recording medium and additional contents therefor | |
| CN106104689B (zh) | 记录介质、再现装置以及再现方法 | |
| EP1204972A1 (en) | A digital video processing and storage system for video, audio and ancillary data | |
| JP5355754B2 (ja) | 情報記録装置および情報記録方法 | |
| JP2007501562A (ja) | 字幕データとビデオマッピングデータ情報を記録する情報記録媒体、その再生装置及び方法 | |
| JP3929351B2 (ja) | データ送信装置、データ受信装置、記録媒体、データ送信方法、およびデータ受信方法 | |
| JP2005217816A (ja) | 映像再生装置および記録媒体 | |
| KR101009341B1 (ko) | 기록 장치, 재생 장치, 기록 방법, 재생 방법 및 그기록매체 | |
| TWI320174B (ja) | ||
| JP2005020351A (ja) | サムネイル画像作成機能付きビデオ再生装置及びサムネイル画像記録媒体 | |
| CN111933189B (zh) | 再现装置以及再现方法 | |
| JP2008042269A (ja) | 再生装置及び再生方法 | |
| JP3906795B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
| JP2010226278A (ja) | 記録装置、方法、プログラム、及び媒体 | |
| TW200414154A (en) | Recording medium having data structure for managing reproduction of multiple graphics streams recorded thereon and recording and reproducing methods and apparatuses | |
| EP1620852B1 (en) | Method and apparatus for synchronous reproduction of main contents recorded on an interactive recording medium and additional contents therefor | |
| JP2007281727A (ja) | 記録装置及び記録方法 | |
| JP4255796B2 (ja) | データ記録装置、データ記録方法、データ記録プログラム、および該プログラムを記録した記録媒体 | |
| JP2002245754A (ja) | ディスク記憶媒体およびその録画編集再生方法およびその録画編集再生装置 |