JP2004173280A

JP2004173280A - ビデオサムネイルおよびビデオサムネイルを生成する方法

Info

Publication number: JP2004173280A
Application number: JP2003388672A
Authority: JP
Inventors: J Stavely Donald; ドナルド・ジェイ・ステイヴリー; Robert P Cazier; ロバート・ピー・キャジア; Amy E Battles; エイミー・イー・バトルズ; James W Owens; ジェイムズ・ダブリュー・オーウェンズ; James S Voss; ジェイムズ・エス・ヴォス; Dan L Dalton; ダン・エル・ダルトン
Original assignee: Hewlett Packard Development Co LP
Current assignee: Hewlett Packard Development Co LP
Priority date: 2002-11-19
Filing date: 2003-11-19
Publication date: 2004-06-17
Also published as: US7194701B2; KR20040044373A; US20040095396A1

Abstract

【課題】ビデオファイルから抽出された、またビデオファイルの好ましい一連のフレームから抽出された、動画になった一連のフレームを含む、デジタルビデオファイルのアイコンとして使用されるビデオサムネイルを提供することにある。
【解決手段】デジタルビデオファイルを表すアイコンを含む、該デジタルビデオファイルから抽出された比較的短い、低解像度の動画になった一連のデジタルビデオフレームを特徴とするビデオサムネイル。
【選択図】図１

Description

本発明は、包括的にデジタルビデオに関し、特に、デジタルビデオファイルと併せて使用される動画化されたビデオサムネイルおよびビデオサムネイルを生成する方法に関する。

デジタルビデオクリップまたはファイルは、画像情報のますます重要な形となっている。これは、デジタルカメラおよびカムコーダによって生成され、パーソナルコンピュータおよびデジタル機器上で格納、処理、および閲覧が行われ、インターネットを介して伝送される。現在、デジタルビデオクリップまたはファイルの内容を表すものの中で、良好かつ視覚的であり、またユーザフレンドリなものはない。

画像ファイルのサムネイル版では、デジタル静止画像が提示されてきた。サムネイルは低解像度であるが、多くの場合で、完全な解像度の画像を開くことなく内容をユーザが認識するに足るものである。サムネイルは元々は、完全な画像をダウンサンプリングすることによって生成される。通常、サムネイルは画像ファイルのヘッダに格納されるため、使用する都度再生成する必要はない。これは、完全な解像度の画像ファイルから物理的に切り離すことができるが、論理的にはポインタまたはアドレスによって繋がったままである。

現在まで、デジタルカメラは、おそらくそれがビデオであることを示すグラフィカルアイコンにオーバレイされる、デジタルビデオクリップの最初のフレームというサムネイルを使用してクリップを表してきた。これには、静的であり、ビデオクリップがとられた実際のイベントを稀にしか示さないという欠点がある。たとえば、ビデオクリップは、タッチダウンを記録している子供のものでありうる。クリップの最初のフレームはハドルのフレームである場合があり、これは視覚的な、見てすぐにそのイベントを思い出させるものではない。

本発明に関連する先行技術は以下の通りである。

米国特許第５，９９９，１７３号には、「ビデオクリップ（およびオプションとして、静止画像およびオーディオクリップも）がデジタルデータとしてコンピュータメモリに格納され、選択されたクリップが表示画面に細長いトラックで表示され、表示されているカーソルおよびアイコンを操作して、編集されたビデオプログラムを組み立て、プレビューすることに応答して、編集作業がクリップに対して行われる方法および装置」が開示されている。「このシステムは、表示されているクリップおよび特殊効果アイコンを時系列ラインに沿って所望の順序に組み立てることに応答して、格納されているクリップからビデオプログラムを組み立てる。コンピュータシステムは、好ましくは、表示されているクリップのエッジにカーソルを配置し、時系列ラインに関してエッジをドラッグすることによってクリップの新しいインポイントまたはアウトポイントを選択すること、トランジッション（transition：シーン切換）アイコンをクリップのオーバレイ部分に沿った特殊トラックに配置することによって、表示されているクリップの間で特殊効果トランジッションを選択すること、特殊効果トラックにおいてアイコンを操作することによって特殊効果パラメータを選択すること、ユーザ選択可能な時間可変フィルタ特徴を有するモザイクフィルタを使用して、選択されたビデオクリップをフィルタリングすること、オーバレイクリップに沿って表示されるレベル制御アイコンの操作に応答して、メインクリップへのオーバレイクリップのスーパーインポーズを制御すること、とを行うようにプログラムされる。」米国特許第５，９９９，１７３号には、「特殊効果をそれぞれ表す「動画化された」特殊効果アイコンが、同じように時間定規（タイムルーラー）に平行する向きを有する別個の特殊効果トラックに表示されることが開示されている。各特殊効果アイコンは、２つのクリップ間に特殊効果トランジッション（ディゾルブ、フェード、およびワイプ等）を表すことができる。」

米国特許第６，３５６，９２１号には、「プログレッシブヒエラルキおよびアダプティブデリバリーリッチメディアプレゼンテーションおよび関連するメタデータについての枠組み」が開示されている。米国特許第６，３５６，９２１号には、「単一のファイルが完全に提示するすべての情報を含むことが開示されている。各提示ファイルは、提示用のデータおよびソフトウェアを両方とも含む。これは、ユーザに提供され、提示の実施のためにサーバに保持されるデータおよびソフトウェアの両方を含む。提示の基本構築ブロックはフレームである。提示ファイルは、ファイルヘッダフレーム、複数のメディアフレーム、および１つまたは複数のメタデータフレームを含むことができる。フレーム種別の中で、ファイルヘッダフレームは唯一、提示ファイルフォーマットにおいて必須のものである。ファイルヘッダフレームは、提示ファイルの主題および内容を識別し、ファイルのメディア種別および総長についての情報を提供する。提示ファイルの最も退化しているが有用なものには、ファイルヘッダフレームの後に、サムネイル記述を含むメディアフレームが続く。サムネイル記述は、単純な静止ピクチャまたは主題について書かれた記述を構成しうる。他のメディアフレームは、主題を動画にした記述か、または完全な動きの記述であることができる。メタデータフレームは、メディアに非固有のデータファイルレベルの振る舞いおよびユーザ情報を含むフレームである。メタデータフレームは、誤りのない振る舞いおよび構成が望ましい場合、またはアクションおよびアブストラクトナビゲーションセマンティクスが組み込まれるべき場合にのみ存在する。」

米国特許第５，８４１，４３２号には、「ネットワーク上でマルチメディアアプリケーション、たとえば動画をリアルタイム表示するための圧縮データファイル」が開示される。「ファイルは、動画についての包括的な情報を含む。ファイルには、動画中の単一フレームを表す情報の完全なセグメントブロックも含まれる。各フレームは重複する複数の画像（レイヤ）で構成される。各画像はベクトルオブジェクトで構成される。ファイルの表示はデータの非同期転送を通して行われるため、あるフレームが表示されると、次のフレームが送信され、エンドユーザによって受け取られて即座に表示される。」

米国特許第５，７１５，４１６号には、「電子ファイルシステムにおいて情報にアクセスするための絵図（pictorial)ユーザインタフェースが、ファイルディレクトリにリンクされファイルディレクトリを識別する絵図画像を提供する」ことが開示されている。「絵図画像のオブジェクトはファイルオブジェクトにリンクされたアイコンであり、動画化されたキャラクタが絵図画像上にオーバレイされる。ユーザが入力すると、動画化されたキャラクタが絵図画像に相対して動く。ユーザからの入力は、好ましくは、ゲームパッドコントローラ、マウス等の限られた入力装置を通して、または通常のキーボード上の限られた数のキーを使用することによって行われる。キーコードと同一のコマンドセット、コンテキスト引数、および選択引数に従って、入力信号がマッピングされる。ユーザが呼び出すことのできるコマンドには、オペレーティングシステムコマンド、絵図オブジェクトコマンド、およびインタフェースユーティリティコマンドが含まれる。絵図オブジェクトコマンドを使用して、ユーザは、異なるピクチャおよびアイコンが異なるディレクトリおよびファイルと関連付けられるようにインタフェースを構成することができる。コマンドは、プロローグ動画およびエピローグ動画とともに実行される。プロローグ動画は、実行されているコマンドの性質についてのフィードバックを提供する。エピローグ動画は、コマンドの結果についてのフィードバックを提供する。動画は、動画化されたキャラクタの動きまたは選択されたアイコンの振る舞い、あるいはこれら両方を含みうる。インタフェースは、オーバレイとして略いずれのオペレーティングシステムにも適用することが可能である。」

米国特許第５，８３５，１６３号には、「ビデオ中のカットを検出する装置が、ソースからビデオ画像を取得する装置、ビデオ画像からピクセルベースの差分メトリックを導出する装置、ビデオ画像から分散ベースの差分メトリックを導出する装置、およびビデオ画像の映像内容を測定して最新のテスト基準を提供する装置を備える」ことが開示されている。「提供された最新のテスト基準を考慮に入れ、ピクセルベースの差分メトリックと分散ベースの差分メトリックを組み合わせてシーン変更候補信号を導出する装置、およびシーン変更候補信号をフィルタリングしてシーン変更フレームリストを生成する装置が含まれる。」

米国特許第５，９３６，６３８号には、「システムにより、ユーザによる検討および選択のために動画シーケンスになった関節キャラクタが生成され組み立てられる」ことが開示される。「関節キャラクタの動きは、キャラクタの関節のトルク等、入力パラメータに基づく。システムは、関節キャラクタの所望の動きを得るに適したパラメータを選択するために使用することができる。システムは、動きのパラメータを含む入力ベクトルのセットを生成する。次いで、入力パラメータが処理されて、動画シーケンスおよび対応する出力ベクトルが求められる。出力ベクトルは動きの特徴を含む。入力ベクトルは、分散した出力ベクトルのセットをもたらすものが選択される。多数のランダム入力ベクトルが生成され、次いでこれらをふるいにかけて、分散した出力ベクトルのセットを残すことができる。代替として、ランダムに生成された、所定サイズの入力ベクトルのセットをランダムに摂動して、出力ベクトルをさらに分散させる。システムは、ユーザが容易に見ることができるように出力ベクトルおよび動画シーケンスを表すインタフェースを備える。出力ベクトルが表示され、その位置によって出力ベクトル間の距離が表される。次いで、ユーザは特定の出力ベクトルを選択することができ、これによって対応する動画シーケンスが表示される。」

米国特許第５，９６６，１２２号には、「電子カメラが、１つのウィンドウに動画画像ファイル等のソースファイルに対応するサムネイルを表示する」ことが開示されている。「操作者は直観的に、ドラッグアンドドロップ操作および編集選択肢を含むメニューを使用してウィンドウ内のサムネイルを選択し、編集し、再配置することにより、ウィンドウに表示されているサムネイルおよび対応するソースファイルに対して単純な操作を行う。操作者は、マウスまたはタッチスクリーンを使用して、ドラッグアンドドロップ操作を実行し、またメニューから編集選択肢を選択することができる。」

米国特許第５，９６６，１３１号には、「シーン中の物理構造データに異なるグラフィック伝達関数を適用することに基づいてグラフィカル画像のセットを生成するシステム」が開示されている。「異なるグラフィカル伝達関数の適用により、単一シーン中に、異なる特徴を有するグラフィカル画像が規定される。次いで、ユーザは画像を検討して、画像を生成するグラフィカル伝達関数を規定または知る必要なく所望の画像を選択することができる。この発明のシステムは、伝達関数に基づいて画像セットの特徴を表す、分散した出力ベクトルのセットを生成する。システムは、出力ベクトルのランダムセットを生成し、次いでランダムに１つを摂動させることによって分散セットを作成する。摂動ベクトルは、この取り替えの結果としてセットがより分散するようになる場合、その他のベクトルの１つに取って代わる。プロセスは、出力ベクトルの十分に分散したセットが得られるまで繰り返される。セットの分散は、繰り返しの総回数または取り替えなしの摂動の数に基づいて求められる。出力ベクトルは、入力ベクトルとしてグラフィカル伝達関数のパラメータセットをランダムに選択し、入力ベクトルに基づいて画像を生成することによって作成される。出力ベクトルも同様に、ランダムに選択された入力ベクトルの少なくとも１つのパラメータをランダムに摂動させ、対応する新しい出力ベクトルを求めることによって摂動される。」

米国特許第６，００２，４０１号には、「電子ファイルシステム内の情報にアクセスする絵図ユーザインタフェースが、ファイルディレクトリにリンクされファイルディレクトリを識別する絵図画像を提供する」ことが開示される。「絵図画像のオブジェクトは、ファイルオブジェクトにリンクされたアイコンであり、動画化されたキャラクタが絵図画像上にオーバレイされる。ユーザが入力すると、動画化されたキャラクタが絵図画像に相対して動く。ユーザからの入力は、好ましくは、ゲームパッドコントローラ、マウス等の限られた入力装置を通して、または通常のキーボード上の限られた数のキーを使用することによって行われる。キーコードと同一のコマンドセット、コンテキスト引数、および選択引数に従って、入力信号がマッピングされる。ユーザが呼び出すことのできるコマンドには、オペレーティングシステムコマンド、絵図オブジェクトコマンド、およびインタフェースユーティリティコマンドが含まれる。絵図オブジェクトコマンドを使用して、ユーザは、異なるピクチャおよびアイコンが異なるディレクトリおよびファイルと関連付けられるようにインタフェースを構成することができる。コマンドは、プロローグ動画およびエピローグ動画とともに実行される。プロローグ動画は、実行されているコマンドの性質についてのフィードバックを提供する。エピローグ動画は、コマンドの結果についてのフィードバックを提供する。動画は、動画化されたキャラクタの動きまたは選択されたアイコンの振る舞い、あるいはこれら両方を含みうる。インタフェースは、オーバレイとして略いずれのオペレーティングシステムにも適用することが可能である。」

米国特許第６，２７８，４５５号には、「電子ファイルシステム内の情報にアクセスする絵図ユーザインタフェースが、ファイルディレクトリにリンクされファイルディレクトリを識別する絵図画像を提供する」ことが開示される。「絵図画像のオブジェクトは、ファイルオブジェクトにリンクされたアイコンであり、動画化されたキャラクタが絵図画像上にオーバレイされる。ユーザが入力すると、動画化されたキャラクタが絵図画像に相対して動く。ユーザからの入力は、好ましくは、ゲームパッドコントローラ、マウス等の限られた入力装置を通して、または通常のキーボード上の限られた数のキーを使用することによって行われる。キーコードと同一のコマンドセット、コンテキスト引数、および選択引数に従って、入力信号がマッピングされる。ユーザが呼び出すことのできるコマンドには、オペレーティングシステムコマンド、絵図オブジェクトコマンド、およびインタフェースユーティリティコマンドが含まれる。絵図オブジェクトコマンドを使用して、ユーザは、異なるピクチャおよびアイコンが異なるディレクトリおよびファイルと関連付けられるようにインタフェースを構成することができる。コマンドは、プロローグ動画およびエピローグ動画とともに実行される。プロローグ動画は、実行されているコマンドの性質についてのフィードバックを提供する。エピローグ動画は、コマンドの結果についてのフィードバックを提供する。動画は、動画化されたキャラクタの動きまたは選択されたアイコンの振る舞い、あるいはこれら両方を含みうる。インタフェースは、オーバレイとして略いずれのオペレーティングシステムに適用することが可能である。」

米国特許第６，１８１，３４２号には、「デスクトップドキュメントへのグラフィカルユーザインタフェースが、コンピュータファイルシステムにおいて、コンピュータユーザがディレクトリリストを要求することに応答して、静止画像ファイル、ビデオ画像ファイル、プレゼンテーションスライドドキュメント、および図を含む文書処理ドキュメントから抽出された視覚的な要約を視覚的に表示したものを提示する」ことが開示される。「ユーザは、視覚的な要約を選択して、コンピュータに同様の画像を含むファイル／ドキュメントを探索させることができる。視覚的な要約は、階層の最上位レベルがファイル／ドキュメント毎に１つの視覚的な要約を含み、次のレベルが各ファイル／ドキュメント中のすべての画像の視覚的な要約を含み、最下位レベルが、ドキュメントの各画像中の個々の構成要素（もしあれば）それぞれの視覚的な要約を含む階層で提示することができる。さらに、画像のない英数字ドキュメントの場合、対応する視覚的な要約は、ドキュメントの最初のページの一部等、ドキュメントの一部の外観を視覚的に提示したものであることができる。」

米国特許第６，２８５，３８１号には、「静止ピクチャデータのフレームが、テレビ受像器、ビデオカメラ等、所与のビデオソースから供給されるビデオ信号から、ユーザによって指定された瞬間に取り込まれ、画像データが表示される」ことが開示されている。「ユーザが、表示されている静止ピクチャから切り欠くべき画像のエリアを指定すると、指定されたエリア内の画像データが切り取られ、切り欠き画像として記録される。記録された各切り欠き画像はアイコンの形で表示される。アイコンのいずれか１つがユーザによって選択されると、対応する切り欠き画像データが読み出され、原画像データにおいて変更すべき部分にペーストされる。したがって、ユーザの選択で画像を容易に作成することができる。」

米国特許第６，３５７，０４２号には、「対話型ビデオ用のオーサリングシステムが、メインビデオデータストリームに関連付けるべきオーサリングされたメタデータを提供する２つまたはそれより多いオーサリングステーションと、オーサリングされたメタデータをオーサリングソースからメインビデオデータストリームに関連付けるマルチプレクサと、を有する」ことが開示されている。「オーサリングステーションは、作成されたメタデータに、メインビデオストリームからの提示時間スタンプ（ＰＴＳ）を注釈付け、マルチプレクサは、ＰＴＳシグネチャによりメタデータをメインビデオストリームに関連付ける。アナログストリームでは、ＰＴＳを作成し一体化することができる。実施形態によっては、複数のカスケード接続されたシステムがある場合があり、いくつかのソースは格納されているソースでありうる。ソース間の時間差を監視、補償して、最終生成物の時間調整を保証する様々な方法が開示されている。異なる実施形態では、最終ユーザステーションへのメタデータの伝送は、インターネットストリーミング、ＶＢＩ挿入、またはインターネットダウンロードによって行われる。ユーザ機器は、メインデータストリームとともにオーサリングされた材料を調整し提示するハードウェアおよびソフトウェアで増強される。」

米国特許第６，３７０，５４３号には、「分散データベースにおいてマルチメディアファイルを探索し、マルチメディアファイルのコンテキストおよび内容に基づいて探索結果を表示する方法および装置」が開示されている。

米国特許第６，３９６，５００号には、「スライド提示ファイル中のスライドを自動的に変換して、ブラウザ等の閲覧機能を使用してスライドショーを表示するための、対応する一連のスライドＨＴＭＬページにする方法およびシステム」が開示される。「動画化されたオブジェクトが、その他の機能による提示のために作成された対応するスライド中のオブジェクトの動画に関連する、ＨＴＭＬページ内の各オブジェクトについて生成される。各ＨＴＭＬページの動画化されたオブジェクトおよび動画化されていないオブジェクトそれぞれをグラフィック表示する順序および時系列を規定するキューが生成される。ブラウザは、キューによって規定される順序および時系列に従って各ＨＴＭＬページの内容をグラフィック表示するため、生成されたスライドショーのグラフィック表示は、元々作成されたスライドショーのその他の機能により意図される提示に関連するようにユーザに提示される。ＨＴＭＬページの区分が、入れ子になったＤＩＶタグを使用して作成され、これにより、ＨＴＭＬページ内のデフォルトの大きさに関連する割合を用いて、ＨＴＭＬページに含まれるオブジェクトの表示スペースの大きさを規定することができる。オブジェクトとしては、テキスト、映画、オーディオクリップ、動画、トランジッション、画像、およびハイパーリンクに関連付けられた画像マップを挙げることができる。オブジェクトおよびトランジッションを動画化する選択肢を選択し、ページ内のオブジェクトを表示サイズに自動的に合わせるために、ユーザインタフェース制御機構が設けられる。」

米国特許第６，４４１，９２７号には、「画像を取り込み・閲覧する機器および装置が提供される」ことが開示されている。「取り込み・閲覧機器は、画像を取り込み、通信性能を有する他の機器および装置に画像を通信するために使用される手段である。取り込み・閲覧機器は、画像を組み込みディスプレイ上で操作・閲覧するためのプロセッサを備える。内部メモリに格納されているプログラムコードは、格納されている画像を様々なピクセル解像度でユーザが閲覧できるようにする閲覧アプリケーションプログラムを含む。この発明の別の態様によれば、閲覧システムは、動画化されたトランジッションの使用を通して、機器または他の装置の諸機能をユーザに効果的にグラフィカルに伝えるユーザフレンドリなインタフェースを提供する。隠喩的なアイコン、開かれた画像と開かれていない画像の間の動画化されたトランジッション、および画像拡大の使用を通して、この発明は、閲覧システムおよび方法を、資源の限られた画像閲覧性能を必要とする装置に対する方策にする新規のユーザインタフェースを提示する。閲覧方法は、スペースおよびコンパクトさが重要な、画像を表示可能なポータブルハンドヘルド機器または他の装置において特に有用な手段の再使用を通して、取り込まれた画像を閲覧するように設計されている。」

米国特許出願第２００２０１２２０７３号には、「テレプレゼンスシステムの使用に関連する画像の履歴の作成、管理、および実施を容易にする方法、装置、およびシステム」が開示されている。「この発明は、ユーザおよびシステム管理者の両方について、現在のテレプレゼンスシステムの性能を拡張および増強する。この発明の実施形態は、ユーザのセッションを視覚的に表すものを提供することによって、遠方にある物理的な場所をナビゲートするユーザの能力を増強する。一実施形態では、ユーザがセッションの視覚的なブックマークを作成することが可能である。この発明の他の実施形態は、１つまたは複数のテレプレゼンスシステムの使用の監視および解析を容易にする。」

米国特許第５，４７９，６０２号には、「標準的なアイコンの内容ベースの描写（depiction）を作成し、コンピュータのディスプレイ上に表示する手段および方法が記載されている」ことが開示されている。「描写は、アイコンに関連するドキュメントまたはファイルの閉止等、所定のイベントが発生したときに生成され、選択装置からの選択信号に応答して、標準アイコンの代わりに静的あるいは動画な形で表示される。アイコンの単一の内容ベースの描写は、描写すべきオブジェクト（ファイルまたはドキュメント）の表現を作成し、この表現を縮小された表現のレプリカに変換することによって生成される。この表現は、ビットマップ、フルスケール画像等の形であることができる。レプリカは、表現をいくつかの等しいセグメントに分割し、各セグメント内の異なる色（白黒、グレースケール、またはカラー）の割合を測定し、表現の対応する各セグメントから測定された色の割合に基づいて、単一の色値をレプリカの各表示要素またはピクセルに割り振ることによって作成される。動画化された描写は、いくつかの異なるレプリカを、描写すべき各表現について形成し、次いでこれらレプリカをシリアルシーケンスで表示して、表現の動画化された描写を作成することによって作成される。アイコンのように、これら描写は選択されたときに置換され、表現は、マウスの使用を通してディスプレイ上のいずれの位置にも可動である。」

米国特許第５，４７９，６０２号には、背景技術の項に「先行技術による動画は、一連の固定フレームを表示することによって実施される」と述べられている。「各フレームは、アイコン画像をある瞬間に表示する。これら固定フレームは、動きの各種段階で複数の固定アイコン画像を手動で作成するか、あるいはビデオのアナログクリップからいくつかのフレームをデジタル化することによって生成される。この後者のプロセスは、一般に「ｄｉｃｏｎ（ダイナミックアイコン）」または「ｍｉｃｏｎ（ムービーアイコン）」として知られているアイコン様の、または小さなウィンドウサイズの画像を生成する。いずれのプロセスも通常、時間のかかるものであり、一般に、高価な機器および／またはソフトウェアを追加する必要がある。いずれのプロセスも、動画化されたアイコンによって動的に表すべきオブジェクトの内容変更を示すには効果的でもなければ、ふさわしくもない。」米国特許第５，４７９，６０２号において「ビデオ」に関する考察はこれのみである。したがって、米国特許第５，４７９，６０２号の教示は、一連のフレームを生成して動画化されたアイコンを生成することから離れており、「動画化されたアイコンで動的に表すべきオブジェクトの内容の変更を示す」アイコンに向けられている。

しかし、先行技術参照のいずれも、特に、デジタルビデオファイルの好ましい一連のフレームから抽出されたデジタルビデオファイルのアイコンとして使用されるビデオサムネイルを使用することを開示していない。より具体的には、先行技術参照のいずれも、一連または一続きの好ましいデジタルビデオフレームが選択され、それによってデジタルビデオファイルの鍵となる局面をユーザが容易に思い出せるようにすることについて開示していない。
米国特許第５，９９９，１７３号米国特許第６，３５６，９２１号米国特許第５，８４１，４３２号米国特許第５，７１５，４１６号米国特許第５，８３５，１６３号米国特許第５，９３６，６３８号米国特許第５，９６６，１２２号米国特許第５，９６６，１３１号米国特許第６，００２，４０１号米国特許第６，２７８，４５５号米国特許第６，１８１，３４２号米国特許第６，２８５，３８１号米国特許第６，３５７，０４２号米国特許第６，３７０，５４３号米国特許第６，３９６，５００号米国特許第６，４４１，９２７号米国特許出願第２００２０１２２０７３号米国特許第５，４７９，６０２号

したがって、本発明の目的は、ビデオファイルから抽出された、またビデオファイルの好ましい一連のフレームから抽出された、動画になった一連のフレームを含む、デジタルビデオファイルのアイコンとして使用されるビデオサムネイルを提供することにある。また、本発明の目的は、デジタルビデオファイルのビデオサムネイルを生成する方法を提供することにもある。

上記および他の目的を遂げるために、本発明は、デジタルビデオファイルのアイコンとして使用される、比較的短い低解像度の動画になったビデオサムネイルを提供する。ビデオサムネイルは、ビデオファイルの中の好ましい一連のフレームから抽出され、ファイルのヘッダとして埋め込まれる。ビデオサムネイルは、好ましくは、自動的に再生され、ファイルおよびファイル内の好ましいポイントへのポインタとして機能する。

本発明は、デジタルビデオファイルを表すアイコンを含む、該デジタルビデオファイルから抽出された比較的短い、低解像度の動画になった一連のデジタルビデオフレームを特徴とするビデオサムネイルにある。
また、本発明は、前記アイコンが選択されるとき、または前記デジタルビデオファイルを録画したデジタルカメラの画像をスクロールするとき、または前記デジタルビデオファイルを録画したビデオカムコーダの画像をスクロールするとき、または前記デジタルビデオファイルを録画したデジタル画像取り込み装置の画像をスクロールするとき、または前記アイコンがハイライトされたとき、またはマウスカーソルが前記アイコン上に置かれているときに自動的に再生されるか、もしくは前記アイコンが選択されている間に連続して再生されるビデオサムネイルにある。
さらに、本発明は、前記一連のデジタルビデオフレームは、前記デジタルビデオファイルの好ましいセグメントである、または前記デジタルビデオファイル全体の高速先送りビューに対応する比較的短い微速度ビデオサムネイルである。
またさらに、本発明は、前記好ましいセグメントは、シャッタ押下または他の選択手段の前後いずれかの数秒を前記デジタルビデオファイルからサンプリングすることによって、ユーザにより特定されるビデオサムネイルにある。
また、本発明は、デジタルビデオファイルのビデオサムネイルを生成する方法であって、
デジタルビデオファイルから比較的短い、低解像度の動画になった一連のデジタルビデオフレームを抽出して、前記デジタルビデオファイルを表すアイコンを形成すること、および、動画になった前記一連の抽出されたデジタルビデオフレームを含むビデオサムネイルを生成すること、を特徴とするビデオサムネイルを生成する方法にある。
さらに、本発明は、前記アイコンが選択されるとき、または前記デジタルビデオファイルを録画したデジタルカメラの画像をスクロールするとき、または前記デジタルビデオファイルを録画したビデオカムコーダの画像をスクロールするとき、または前記デジタルビデオファイルを録画したデジタル画像取り込み装置の画像をスクロールするとき、または前記アイコンがハイライトされたときに前記一連のフレームが自動的に再生されるか、もしくは前記アイコンが選択されている間に連続して再生されるビデオサムネイルを生成する方法にある。
またさらに、本発明は、前記サムネイルは、前記デジタルビデオファイル全体の時間を圧縮した、比較的短い微速度ビデオサムネイルであることを特徴とするビデオサムネイルを生成する方法にある。
また、本発明は、前記一連のデジタルビデオフレームは前記デジタルビデオファイルの好ましいセグメントであることを特徴とするビデオサムネイルを生成する方法にある。
さらに、本発明は、前記好ましいセグメントは、選択イベントの前後いずれかの数秒を前記デジタルビデオファイルからサンプリングすることによって、ユーザにより特定されるビデオサムネイルを生成する方法にある。

本発明の各種特徴および利点は、同様の参照番号は同様の構造要素を指す添付図面と併せて行われる以下の詳細な説明を参照することでより容易に認めることができる。
１つの図面を参照すると、図１は、本発明の原理に従ったビデオサムネイルの例示的な実施形態を示す。ビデオサムネイルは、デジタルビデオファイルのアイコンとして使用される比較的短い低解像度の動画になったビデオサムネイルを含む。

例示的なビデオサムネイルは、デジタルビデオファイルの中の複数の（一連または一続きの）好ましいデジタルビデオフレームを含む。一連または一続きの好ましいデジタルビデオフレームは、ユーザにデジタルビデオファイルの鍵となる局面を容易に思い出させるようなものが選択される。

本発明の第１の態様では、ビデオクリップまたはファイルのビデオサムネイル表現が動画化される。これは、ビデオファイルからの、好ましくは格納要件を最小にするように低レートでサンプリングされた一連のフレームを表示する。サムネイルは、アプリケーションに適切なように自動的に再生される。たとえば、サムネイルは、デジタルカメラ上の画像をスクロールしている間に再生される。サムネイル上で止まると、そのサムネイルが連続してループ再生される。カメラまたはパーソナルコンピュータのマルチアップ画面表現では、サムネイルがハイライトされているかまたは「マウスが置かれている」ときに、そのサムネイルが動画を再生する。

本発明の第２の態様では、サムネイルがビデオファイルの最初のセグメントだけではなく、重要な、または好ましいセグメントを表す。背景技術の項で述べた例では、これは、ハドルではなくタッチダウンパスである。好ましいセグメントは、シャッタを押下した前後いずれかの数秒をサンプリングすることなどによってユーザが特定することができる。動きが最大のセグメント等、候補セグメントを自動的に特定することが可能である。デフォルトセグメントは、動画がセグメントの、またはビデオファイル全体の「高速先送り」ビューであるように、より長いセグメントまたはファイル全体からサンプリングされたフレームからなりうる。

ビデオサムネイルの他の諸態様では、静止画像サムネイルを採り入れる。これはビデオファイルのヘッダに埋め込むことができるため、再生時に再生成する必要はない。これはまた、ファイルへの、そしておそらくファイル内の好ましいポイントへのポインタとして別個に使用することも可能である。たとえば、ユーザは、ビデオサムネイルを友人に電子メールで送ることができる。友人がビデオサムネイルをクリックすると、完全なビデオクリップまたはファイルがサーバからダウンロードされるか、または完全なクリップを含むウェブサイトが表示される。

ビデオサムネイルという概念は、カメラユーザインタフェースにおいて有価値であり、また、ホストソフトウェアアプリケーション、ウェブサイト等に「下流」統合もする場合ははるかに強力である。ビデオサムネイルは、本発明の譲受人によって開発されたイメージングを統合した「エコシステム（ecosystem）」のプロプラエタリ（proprietary：所有権を有する）要素でありうるか、またはより広い業界規格のベースでありうる。

図２は、本発明の原理に従った例示的な方法３０を示す。例示的な方法３０は、デジタルビデオファイルのビデオサムネイルを生成し、そして以下の諸ステップを含む。比較的短い低解像度の動画になった一連のデジタルビデオフレームが、デジタルビデオファイルを代表するデジタルビデオファイルから抽出される（３１）。抽出された動画になった一連のデジタルビデオフレームを含むアイコンが生成され、ビデオサムネイルが提供される（３２）。

したがって、デジタルビデオファイルのアイコンとして使用されるビデオサムネイルおよびこのアイコンを生成する方法が開示された。上に述べた実施形態は、本発明の原理の適用を表す多くの特定の実施形態の中のいくつかを単に示したものにすぎないことを理解されたい。自明なことに、本発明の範囲から逸脱することなく、多くの、また他の構成が当業者により容易に考案されうる。

本発明の原理に従ったビデオサムネイルの例示的な実施形態を示す図である。本発明の原理に従った例示的な方法を示す図である。

Claims

デジタルビデオファイルを表すアイコンを含む、該デジタルビデオファイルから抽出された比較的短い、低解像度の動画になった一連のデジタルビデオフレームを特徴とするビデオサムネイル。
前記アイコンが選択されるとき、または前記デジタルビデオファイルを録画したデジタルカメラの画像をスクロールするとき、または前記デジタルビデオファイルを録画したビデオカムコーダの画像をスクロールするとき、または前記デジタルビデオファイルを録画したデジタル画像取り込み装置の画像をスクロールするとき、または前記アイコンがハイライトされたとき、またはマウスカーソルが前記アイコン上に置かれているときに自動的に再生されるか、もしくは前記アイコンが選択されている間に連続して再生される請求項１に記載のビデオサムネイル。
前記一連のデジタルビデオフレームは、前記デジタルビデオファイルの好ましいセグメントである、または前記デジタルビデオファイル全体の高速先送りビューに対応する比較的短い微速度ビデオサムネイルであることを特徴とする請求項１に記載のビデオサムネイル。
前記好ましいセグメントは、シャッタ押下または他の選択手段の前後いずれかの数秒を前記デジタルビデオファイルからサンプリングすることによって、ユーザにより特定される請求項３に記載のビデオサムネイル。
デジタルビデオファイルのビデオサムネイルを生成する方法であって、
デジタルビデオファイルから比較的短い、低解像度の動画になった一連のデジタルビデオフレームを抽出して、前記デジタルビデオファイルを表すアイコンを形成すること、および、
動画になった前記一連の抽出されたデジタルビデオフレームを含むビデオサムネイルを生成すること、
を特徴とするビデオサムネイルを生成する方法。
前記アイコンが選択されるとき、または前記デジタルビデオファイルを録画したデジタルカメラの画像をスクロールするとき、または前記デジタルビデオファイルを録画したビデオカムコーダの画像をスクロールするとき、または前記デジタルビデオファイルを録画したデジタル画像取り込み装置の画像をスクロールするとき、または前記アイコンがハイライトされたときに前記一連のフレームが自動的に再生されるか、もしくは前記アイコンが選択されている間に連続して再生される請求項５に記載のビデオサムネイルを生成する方法。
前記サムネイルは、前記デジタルビデオファイル全体の時間を圧縮した、比較的短い微速度ビデオサムネイルであることを特徴とする請求項５に記載のビデオサムネイルを生成する方法。
前記一連のデジタルビデオフレームは前記デジタルビデオファイルの好ましいセグメントであることを特徴とする請求項５に記載のビデオサムネイルを生成する方法。
前記好ましいセグメントは、選択イベントの前後いずれかの数秒を前記デジタルビデオファイルからサンプリングすることによって、ユーザにより特定される請求項８に記載のビデオサムネイルを生成する方法。