JP3736706B2 - 画像表示装置及び方法 - Google Patents

Description

【０００１】
【目次】
以下の順序で本発明を説明する。
【０００２】
発明の属する技術分野
従来の技術
発明が解決しようとする課題
課題を解決するための手段
発明の実施の形態
（１）ビデオブラウザ（図１）
（２）画像表示装置の構成（図２〜図５）
（３）ホストコンピユータの各種処理（図２〜図８）
（４）画像表示装置の動作及び効果
（５）他の実施例（図２〜図１１）
発明の効果
【０００３】
【発明の属する技術分野】
本発明は画像表示装置及び方法に関し、例えば一連の動画像データに基づく画像を表示する画像表示装置及び方法に適用して好適なものである。
【０００４】
【従来の技術】
従来、いわゆるシネフイルムに記録された映像のように可視画像として記録媒体に記録されている素材の概要確認や所望シーンの選出は、単にその記録媒体に記録されている可視画像を目視することにより行うことができる。
【０００５】
一方、動画像データのようにビデオテープやデイスク等の記録媒体に不可視の状態で記録されている素材の概要確認や所望シーンの選出は、動画像データに基づく動画像を時間の流れに沿つて順次、又は所定フレーム毎の静止画を間欠的にモニタ表示させることにより行うことができる。
【０００６】
【発明が解決しようとする課題】
しかしながら、記録媒体に不可視の状態で記録されている素材の概要確認や所望シーンの選出を上述のようにして行う場合、各時点でみると作業者は１枚の２次元画像を目視し、またはある時点における２次元的な静止画を目視しているに過ぎない。
【０００７】
このため素材の概要を確認する場合においても時間の短縮化には限界があり、また所望シーンを選出する場合においても、ビデオテープレコーダ等の再生装置に対する再生や、早送り又は巻戻し等の時間軸方向の操作なしでは必要なシーンの場所を特定することが困難であつた。
【０００８】
また近年では動画像データの記録媒体として例えばハードデイスク等のマルチアクセス性の高いノンリニアメデイアが用いられており、記録媒体としてこのようなものを用いた場合には再生装置（ハードデイスク装置等）に対して複数のアクセスポイントから並列的に複数動画像又は同一動画像への同時早送りや巻戻し、要所要所での１フレーム画像の再生などの操作が頻繁に行われる可能性がある。
【０００９】
従つて例えば編集システムを構築するにあたつて動画像データの記録媒体としてノンリニアメデイアを用いる場合には、再生装置としてデータアクセス性、データ転送レート及びデータ伝送速度等に高い機能が要求され、結果として低価格なシステムの構築が困難な問題があつた。
【００１０】
本発明は以上の点を考慮してなされたもので、動画像の概要確認及び所望シーンの選出を短時間でかつ容易に行い得る画像表示装置及び画像表示方法を提案しようとするものである。
【００１１】
【課題を解決するための手段】
かかる課題を解決するため本発明においては、画像表示装置に、２次元表示される一連の動画像データをサンプリグ位置を一の方向に順次移動させながら他の方向に１次元的にサンプリングして得られるデータに基づいて静止画像の画像データを作成する作成手段と、動画像データに基づく一連の動画像中の特定のフレーム画像を検出する検出手段と、特定のフレーム画像を、静止画像と共に時間軸を一致させて表示する表示手段とを設けるようにした。
【００１２】
この結果オペレータは、表示された特定のフレーム画像及び静止画像に基づいて動画像データに基づく動画像の全体的な流れを直ちに認識することができる。
【００１３】
また本発明においては、画像表示方法において、２次元表示される一連の動画像データをサンプリグ位置を一の方向に順次移動させながら他の方向に１次元的にサンプリングして得られるデータに基づいて静止画像の画像データを作成すると共に、動画像データに基づく一連の動画像中の特定のフレーム画像を検出する第１のステツプと、当該検出した特定のフレーム画像を、作成手段により作成された画像データに基づく静止画像と共に時間軸を一致させて表示する第２のステツプとを設けるようにした。
【００１４】
この結果オペレータは、表示された特定のフレーム画像及び静止画像に基づいて動画像データに基づく動画像の全体的な流れを直ちに認識することができる。
【００１５】
【発明の実施の形態】
以下図面について、本発明の実施の一形態を詳述する。
【００１６】
（１）ビデオブラウザ
図１に示すように、動画像データに基づく一連の動画像は、各時点のフレーム画像を時間軸方向に順次並べたものと考えることができる。実際上ＮＴＳＣ（National Television System Committee）方式ではビデオ信号のフレーム周波数が30〔Hz〕であり、従つて動画像は１秒間に30枚のフレーム画像から構成される。
【００１７】
このような動画像を構成するビデオ映像群１に対し、ｎ枚のフレーム画像２ごとに垂直方向のスリツト（以下これを垂直スリツトと呼ぶ）３を順次一方向に移動させながら抽出し、これら抽出した垂直スリツト３を他方向に順次並べて静止画像（以下、これをビデオブラウザと呼ぶ）４を形成する場合について考える。なお垂直スリツト３の抽出位置は、画面の左端部から右方向に移動し、画面の右端部に達したときには再び画面の左端部から右方向に移動させるものとする。
【００１８】
ここで例えばｎ＝１、フレーム画像２の水平方向をＸドツトとし、垂直スリツト３のスリツト幅をΔＸドツトとすると、次式
【数１】

で与えられるｆ枚のフレーム画像毎にスリツト位置が画面の右端部から左端部に移動し、かつこのとき得られた各垂直スリツト３によつて水平方向がＸドツトの１画面分のビデオブラウザ４が形成される。そしてこのビデオブラウザ４は、ｆ枚分のフレーム画像２に基づく動画像の内容を圧縮した静止画として認識することができる。
【００１９】
従つて素材の最初から最後までに渡つてこのようなビデオブラウザ４を作成することによつて、当該ビデオブラウザ４に基づいて素材の全体的な流れを短時間にかつ精度良く認識することができる。
【００２０】
（２）画像表示装置の構成
ここで図２は、本発明を適用した画像表示装置１０を示し、キーボード１１及びマウス１２が入出力回路１３及びシステムバス１４を順次介してホストコンピユータ１５と接続されている。これによりオペレータがこれらキーボード１１及びマウス１２を介してホストコンピユータ１５に各種コマンドを与える得るようになされている。
【００２１】
ホストコンピユータ１５においては、ビデオ信号の取込みモード時、オペレータから与えられるコマンドに基づいてスイツチ回路１６を制御することにより、当該スイツチ回路１６に接続された複数の電送回線１７Ａ〜１７Ｎ及び複数のビデオテープレコーダ１８Ａ〜１８Ｎのなかから１つのビデオ信号源を選択させ、当該ビデオ信号源から供給されるビデオ信号Ｓ１Ａ〜Ｓ１Ｎ、Ｓ２Ａ〜Ｓ２Ｎをアナログ・デイジタル変換回路１９に送出させる。
【００２２】
アナログ・デイジタル変換回路１９は、供給されるビデオ信号Ｓ１Ａ〜Ｓ１Ｎ、Ｓ２Ａ〜Ｓ２Ｎを順次デイジタル変換し、かくして得られた動画像データＤ１を順次フレーム単位で第１のＶＲＡＭ（Video Random Access Memory）２０の記憶領域（実際の表示画面と対応して形成されている）に格納する。
【００２３】
そしてこの第１のＶＲＡＭ２０に格納されたフレーム単位の動画像データＤ１は、システムバス１４を介してイメージプロセツサ２１により順次読み出され、当該イメージプロセツサ２１の動画像データ圧縮部２１Ａにより例えばＪＰＥＧ（Joint Photographic Experts Group）等の所定の規格で圧縮符号化される。
【００２４】
さらにこの圧縮符号化された動画像データＤ１は、システムバス１４を介して例えばＲＡＩＤ（Redundaut Array of Inexpensive Disks）等でなる外部記憶装置２２に与えられ、ホストコンピユータ１５の制御のもとに新たなタイムコードが付加されると共にフアイル化されて当該外部記憶装置２２に格納される。
【００２５】
このときイメージプロセツサ２１のシーン画像データ抽出部２１Ｂは、圧縮処理により得られた各フレーム間の画像相関情報及び輝度相関情報に基づいて、シーンチエンジの最初のフレーム画像及びカメラのフラツシユがたかれた瞬間のフレーム画像（以下、これらのフレーム画像をまとめてシーン画像と呼ぶ）を検出し、検出結果をシステムバス１４を介してホストコンピユータ１５に送出する。
【００２６】
またホストコンピユータ１５は、イメージプロセツサ２１のシーン画像データ抽出部２１Ｂにより検出された各シーン画像のタイムコードを順次その動画像データＤ１のフアイル（以下、これを動画像データフアイルと呼ぶ）を管理するデータベースの１つの要素として外部記憶装置２２に格納する。
【００２７】
さらにこのときイメージプロセツサ２１のスリツトデータ読取り部２１Ｃは、入力スリツト移動部２１Ｄの制御のもとに、第１のＶＲＡＭ２０に順次書き込まれた１フレーム分の動画像データＤ１から抽出位置を順次一方向に移動させながら上述した垂直スリツト３（図１）のデータ（以下、これをスリツトデータと呼ぶ）をサンプリングして抽出する。
【００２８】
そしてこの抽出されたスリツトデータは、イメージプロセツサ２１の出力スリツト移動部２１Ｅの制御のもとにスリツトデータ書込み部２１Ｆにより書き込み位置を順次一方向に移動させながら第２のＶＲＡＭ２３の記憶領域（実際の表示画面と対応して形成されている）に順次書き込まれる。
【００２９】
そして第２のＶＲＡＭ２３に１画面分のスリツトデータが書き込まれる毎に、これがホストコンピユータ１５の制御のもとに読み出され、システムバス１４を介して外部記憶装置２２に与えられてデータベースの１つの要素として当該外部記憶装置２２内に格納される。
【００３０】
このようにしてこの画像表示装置１０では、スイツチ回路１６に複数のビデオ信号源から供給されるビデオ信号Ｓ１Ａ〜Ｓ１Ｎ、Ｓ２Ａ〜Ｓ２Ｎのなかから指定された１つのビデオ信号Ｓ１Ａ〜Ｓ１Ｎ、Ｓ２Ａ〜Ｓ２Ｎに基づく動画像の圧縮符号化データと、所定のシーン画像のタイムコード及びビデオブラウザの画像データ等の各種データからなるデータベースとを生成して、これらを外部記憶装置２２に記憶保持させ得るようになされている。
【００３１】
一方ホストコンピユータ１５は、表示モード時、外部記憶装置２２に予め格納されている画像データを読み出し、これをイメージプロセツサ２１に与える。
【００３２】
イメージプロセツサ２１は、外部記憶装置２２から与えられる画像データに基づいて、所定画面をモニタ表示させるための画像データ（以下、これを表示画像データと呼ぶ）を生成し、これを第３のＶＲＡＭ２４に格納する。
【００３３】
このとき第３のＶＲＡＭ２４に格納された表示画像データは、所定周期で順次読み出され、デイジタルアナログ変換回路２５においてアナログ変換された後、モニタ２６に送出される。この結果初期状態においては、モニタ２６に図３のような編集初期画面３０が表示される。
【００３４】
そしてこの状態においてキーボード１１を介して編集対象の動画像データフアイルのフアイル名が入力されると、対応するビデオブラウザの画像データ及びシーン画像の画像データが外部記憶装置２２から読み出され、これがシステムバス１４を介してイメージプロセツサ２１に与えられる。
【００３５】
このときイメージプロセツサ２１は、縮小画面データ形成部２１Ｇにおいて、供給されるビデオブラウザの画像データを間引きすることにより縮小されたビデオブラウザの画像データを生成すると共に、供給される各シーン画像の画像データを復号及び間引きすることにより縮小された各シーン画像の画像データを生成する。そしてイメージプロセツサ２１は、これら生成した画像データに基づいて表示画像データを生成し、これを第３のＶＲＡＭ２４に書き込む。
【００３６】
この結果モニタ２６に編集初期画面３０の所定位置に図４のようにビデオインデツクスウインド３１が表示されてなる編集画面３２が表示される。
【００３７】
この編集画面３２では、ビデオインデツクスウンド３１内に、指定された動画像データフアイルに対応するビデオブラウザ３３が複数段に並べて表示されると共に、各ビデオブラウザ３３間にスケール３４及び対応するタイムコード３５が表示され、かつビデオブラウザ３３及びタイムスケール３４間の対応する位置に縮小されたシーン画像３６が表示される。
【００３８】
また編集画面３２上には、イメージプロセツサ２１の制御のもとに、マウス１２の操作に応動して編集画面３２内を移動するカーソル（図示せず）が表示される。
【００３９】
そしてこの編集画面３２では、カーソルをビデオブラウザ３３の任意の位置又は任意のシーン画像３６上に合わせてマウス１２をクリツクすることにより、対応するタイムコードのフレーム画像又はシーン画像を動画像表示領域３７に表示させることができる。またこのときタイムコード表示領域３８内にそのフレーム画像のタイムコードが表示されると共に、トータルデユレーシヨン表示領域３９内にその動画像データフアイル全体の長さが表示される。
【００４０】
この状態において、カーソルをいずれかのリモコンボタン４０Ａ〜４０Ｅ上に合わせてマウス１２をクリツクすることにより、対応する動作（巻戻し、リバース再生、停止、通常再生又は早送り）を外部記憶装置２２に実行させることができる。なおリバース再生時及び通常再生時には、再生された動画像が動画像表示部３７内に表示される。
【００４１】
さらに動画像表示領域３７内にフレーム画像が表示された状態において、カーソルをマークイン画像表示領域４１上又はマークアウト表示領域４２上に移動させてマウス１２をクリツクすることにより編集時におけるマークイン点又はマークアウト点を指定することができる。このときマークイン画像表示領域４０又はマークアウト表示領域４１には、指定されたフレーム画像（すなわち動画像領域３７に表示されていたフレーム画像）が表示され、そのフレーム画像のタイムコードがマークイン画像タイムコード表示領域４３又はマークアウト画像タイムコード表示領域４４内に表示される。
【００４２】
なおこのようにして指定されたマークイン点又はマークアウト点のタイムコード情報は、外部記憶装置２２に与えられて記憶保持される。そしてこのタイムコード情報が必要に応じて後段の編集装置（図示せず）に与えられることにより、当該タイムコード情報に基づいて編集が行われる。
【００４３】
さらにこの編集画面３２では、ビデオインデツクスウインド３１内の左上に表示されたシーン画像表示変更指定ボタン４５Ａ、４５Ｂ上にカーソルを合わせてマウス１２をクリツクすることにより、表示するシーン画像３６として、シーンチエンジの最初のフレーム画像（「Scene 」）又は前後のフレーム画像に比べて輝度レベルが著しく変化するフレーム画像（「Flash 」）に変更することができる。
【００４４】
またマウス操作によりスクロールバー４６を操作することにより、ビデオブラウザ３３及びシーン画像３６等をスクロールさせてそのとき表示されていない部分のビデオブラウザ３３及びシーン画像３６をビデオインデツクスウインド３１内に表示させることができ、またカーソルをウインドクローズボタン４７上に合わせてマウス１２をクリツクすることにより、ビデオインデツクスウインド３１を閉じさせることができる。
【００４５】
一方この編集画面３２では、カーソルをビデオブラウザ３６の任意の位置又は任意のシーン画像３５上に合わせてマウス１２をダブルクリツクすることにより、図５のように編集画面３０内にフレーム画像インデツクスウインド５０を表示させることができる。
【００４６】
この場合フレーム画像インデツクスウインド５０内には、ビデオブラウザ３６のダブルクリツクされた位置に対応するフレーム画像又はダブルクリツクされたシーン画像３６を中心として前後複数フレーム分のフレーム画像５１がそれぞれタイムコード５２と共に表示される。
【００４７】
このときフレーム画像インデツクスウインド５０の左上部に表示された表示間隔フレーム数指定ボタン５３Ａ〜５３Ｂのいずれかを選択してクリツクすることにより、表示されるフレーム画像の間隔を１フレーム（「１Frame 」）、５フレーム（「５Frame 」）、10フレーム（「10Frame 」）のいずれかに変更することができる。
【００４８】
さらにこれらフレーム画像インデツクスウインド５１内に表示されたフレーム画像５１のいずれかにカーソルを合わせてマウス１２をクリツクすることにより当該クリツクしたフレーム画像５１を動画像表示領域３７に表示させることができる。
【００４９】
またこのフレーム画像インデツクスウインド５０では、マウス操作によりスクロールバー５４を操作することにより当該フレーム画像インデツクスウインド５０内に表示されるフレーム画像５１をスクロールさせてさらに周囲のフレーム画像５１を表示させることができ、さらにウインドクローズボタン５５をクリツクすることにより当該フレーム画像インデツクスウインド５０を閉じさせることができる。
【００５０】
従つてフレーム画像インデツクスウインド５０内の所望するフレーム画像５１上にカーソルを合わせてマウス１２をクリツクすることにより動画像表示領域３７に当該フレーム画像５１を表示させた後、クローズボタン５５をクリツクしてフレーム画像インデツクスウインド５０を閉じさせ、この後マークイン画像表示領域４１又はマークアウト表示領域４２をクリツクすることによつて、フレーム画像インデツクスウインド５０を利用して編集時のマークイン点及びマークアウト点を指定することができる。
【００５１】
このようにしてこの画像表示装置１０においては、表示モード時、指定された動画像データフアイルに対応するビデオブラウザ３３及び各シーン画像３６をモニタ表示すると共に、これらビデオブラウザ３３及び各シーン画像３６に基づいて所望するマークイン点及びマークアウト点を順次指定することができるようになされている。
【００５２】
（３）ホストコンピユータの各種処理
ここで上述のような取込みモード時及び表示モード時における動作は、全てホストコンピユータ１５（図２）の制御のもとに行われる。
【００５３】
実際上ホストコンピユータ１５は、ビデオ信号Ｓ１Ａ〜Ｓ１Ｎ、Ｓ２Ａ〜Ｓ２Ｎの取込みモード時、図６に示す信号取込み処理手順ＲＴ１に従つて、まずステツプＳＰ１においてこの信号取込み処理手順ＲＴ１を開始すると、続くステツプＳＰ２において信号を取り込むべきビデオ信号源が指定されるのを待ち受ける。
【００５４】
やがてホストコンピユータ１５は、このステツプＳＰ２において肯定結果を得ると、ステツプＳＰ３に進んでそのビデオ信号源から与えられるビデオ信号Ｓ１Ａ〜Ｓ１Ｎ、Ｓ２Ａ〜Ｓ２Ｎに基づき形成される動画像データフアイルのフアイル名が入力されたか否かを判断する。
【００５５】
そしてホストコンピユータ１５は、やがてこのステツプＳＰ３において肯定結果を得ると、ステツプＳＰ４に進んで入力されたフアイル名を外部記憶装置２２に登録する。
【００５６】
次いでホストコンピユータ１５は、ステツプＳＰ５に進んでスイツチ回路１６を制御することにより指定されたビデオ信号源を選択させ、かくして当該ビデオ信号源から供給されるビデオ信号Ｓ１Ａ〜Ｓ１Ｎ、Ｓ２Ａ〜Ｓ２Ｎに基づく動画像データＤ１を１フレーム分ずつ順次第１のＶＲＡＭ２０に書き込ませる。
【００５７】
次いでホストコンピユータ１５は、ステツプＳＰ６に進んでイメージプロセツサ２１を制御することにより、第１のＶＲＡＭ２０に順次書き込まれる１フレーム分の動画像データＤ１を順次圧縮符号化させると共に、順次シーン画像を検出させ、かつ順次サンプリング位置を一方向に移動させながら垂直スリツト３のスリツトデータを抽出させてこれを第２のＶＲＡＭ２３に書き込ませる。
【００５８】
またホストコンピユータ１５は、このとき外部記憶装置２２を制御することにより、イメージプロセツサ２１からシステムバス１４を介して供給されるこれら圧縮符号化された動画像データＤ１を新たなタイムコードを付加し、フアイル化して記憶させ、かつイメージプロセツサ２１により検出されたシーン画像のタイムコードをデータベースとして当該外部記憶装置２２に記憶させる。
【００５９】
さらにホストコンピユータ１５は、第２のＶＲＡＭ２３に１画面分のスリツトデータが書き込まれると、これを読み出させて外部記憶装置２２に送出させる一方、これと同時に外部記憶装置２２を制御することによりこれを記憶保持させる。
【００６０】
そしてホストコンピユータ１５は、この後指定されたビデオ信号源からのビデオ信号Ｓ１Ａ〜Ｓ１Ｎ、Ｓ２Ａ〜Ｓ２Ｎの供給が終了すると、スイツチ回路１６を制御して当該ビデオ信号Ｓ１Ａ〜Ｓ１Ｎ、Ｓ２Ａ〜Ｓ２Ｎの取り込みを停止させると共に、イメージプロセツサ２１を制御して圧縮処理やビデオブラウザの作成処理等の各種処理を停止させ、この後ステツプＳＰ７に進んでこの信号取込みモード処理手順ＲＴ１を終了する。
【００６１】
一方ホストコンピユータ１５は、表示モードが選択されると、図７に示す表示モード処理手順ＲＴ２編集処理手順をステツプＳＰ１０において開始し、続くステツプＳＰ１１において外部記憶装置２２に対応する画像データを読み出させると共に、当該画像データに基づいてイメージプロセツサ２１に表示画像データを生成させて第３のＶＲＡＭ２４に書き込ませることにより、モニタ２６に編集初期画面３０（図３）を表示させる。
【００６２】
次いでホストコンピユータ１５は、ステツプＳＰ１２に進んで表示対象の動画像データフアイルのフアイル名が入力されるのを待ち受け、この後当該フアイル名が入力されるとステツプＳＰ１３に進んで外部記憶装置２２を制御することにより、対応する動画像データフアイルを検索する。
【００６３】
そしてホストコンピユータ１５は、対応する動画像データフアイルを検出すると、ステツプＳＰ１４に進んで外部記憶装置２２に対応するビデオブラウザの画像データと、シーン画像の画像データとを読み出させると共に、これら画像データに基づいてイメージプロセツサ２１に所定の表示画像データを生成させ、これを第３のＶＲＡＭ２４に書き込ませることにより、モニタ２６に編集初期画面３０の後段部にビデオインデツクスウインド３１が表示されてなる図４の編集画面３２を表示させる。
【００６４】
この状態においてホストコンピユータ１５は、例えばカーソルがビデオブラウザ３３上の任意の位置又は任意のシーン画像３６上に合わせられてマウス１２がシングルクリツクされたことをステツプＳＰ１５において確認すると、ステツプＳＰ１６に進んで外部記憶装置２２にビデオブラウザ３３のクリツクされた位置のフレーム画像の画像データ又はクリツクされたシーン画像３６の画像データを読み出させると共に、これら画像データに基づいてイメージプロセツサ２１に表示画像データを生成させ、これを第３のＶＲＡＭ２４に書き込ませることにより、編集画面３２の動画像表示領域３７にビデオブラウザ３３のクリツクされた位置のフレーム画像又はクリツクされたシーン画像３６を表示させる。
【００６５】
そしてホストコンピユータ１５は、この状態においてカーソルがいずれかのリモコンボタン４０Ａ〜４０Ｅ上に合わせられてマウス１２がクリツクされたことをステツプＳＰ１７において確認すると、ステツプＳＰ１８に進んで外部記憶装置２２を制御することにより対応する動作を実行させると共に、このとき指定された動作がリバース再生や通常再生である場合には、このとき外部記憶装置２２から出力される画像データに基づいてイメージプロセツサ２１に表示画像データを生成させ、これを第３のＶＲＡＭ２４に書き込ませることにより、再生された動画像データＤ１に基づく動画像を編集画面３２の動画像表示領域３７に表示させる。
【００６６】
さらにホストコンピユータ１５は、編集画面３２の動画像表示領域３７にフレーム画像が表示された状態においてカーソルがマークイン画像表示領域４１又はマークアウト表示領域４２上に合わせられてマウス１２がクリツクされたことをステツプＳＰ１９において確認すると、ステツプＳＰ２０に進んで外部記憶装置２２にこのとき動画像表示領域３７に表示されているフレーム画像の画像データ及びタイムコードを読み出させると共に、当該画像データ及びタイムコード情報に基づく表示画像データを生成させ、これを第３のＶＲＡＭ２４に書き込ませることにより、このとき動画像表示領域３７に表示されているフレーム画像をマークイン画像表示領域４１又はマークアウト画像表示領域４２に表示させると共に、マークインタイムコード表示領域４３内又はマークアウトタイムコード表示領域４４内にそのフレーム画像のタイムコードを表示させる。
【００６７】
さらにホストコンピユータ１５は、マウス操作によりスクロールバー４６が操作されたことをステツプＳＰ２１において確認すると、ステツプＳＰ２２に進んで外部記憶装置２２に対応するビデオブラウザの画像データ及び各シーン画像の画像データを読み出させると共に、これら画像データに基づいてイメージプロセツサ２１に所定の表示画像データを生成させてこれを第３のＶＲＡＭ２４に書き込ませることにより、編集画面３０のビデオインデツクスウインド３１のビデオブラウザ３３及び各シーン画像３６等をスクロール表示させる。
【００６８】
さらにホストコンピユータ１５は、カーソルがウインドクローズスイツチ４７上に合わせられてマウス１２がクリツクしたことをステツプＳＰ２３において確認すると、ステツプＳＰ２４に進んで外部記憶装置２２に対応する画像データを読み出させ、これに基づく表示画像データをイメージプロセツサ２１に生成させて第３のＶＲＡＭ２４に格納させることにより、ビデオインデツクスウインド３１が閉じてなる編集画面３２（すなわち編集初期画面３０）をモニタ表示させると共に、このときマークイン点及びマークアウト点が指定されていた場合には、当該指定されたマークイン点及びマークアウト点のタイムコードを外部記憶装置２２に与えて記憶保持させる。
【００６９】
これに対してホストコンピユータ１５は、ビデオインデツクスウインド３１が表示された状態において、カーソルがビデオブラウザ３３内の任意の位置又は任意のシーン画像３６上に合わせられてマウス１２がダブルクリツクされたことをステツプＳＰ２５において確認すると、ステツプＳＰ２６に進んで図８に示すフレームビデオインデツクス表示処理手順ＲＴ３を実行する。
【００７０】
実際上ホストコンピユータ１５は、このフレームビデオインデツクス表示処理手順ＲＴ３をステツプＳＰ３０において開始すると、続くステツプＳＰ３１においてビデオブラウザ３３内のダブルクリツクされた位置に応じたフレーム画像又はシーン画像３６を中心とする前後複数フレーム分の画像データを外部記憶装置２２に読み出させると共に、当該画像データに基づく表示画像データをイメージプロセツサ２１に生成させて第３のＶＲＡＭ２４に書き込ませることにより、編集画面３２内にフレームビデオインデツクスウインド５０（図５）を表示させる。
【００７１】
この状態においてホストコンピユータ１５は、カーソルがフレームビデオインデツクスウインド５０内のいずれかのフレーム画像５１上に合わせられてマウス１２がクリツクされたことをステツプＳＰ３２において確認すると、ステツプＳＰ３３に進んで上述した編集画面表示処理手順ＲＴ２のステツプＳＰ１６と同様の処理を実行することにより、編集画面３２の動画像表示領域３７にクリツクされたフレーム画像を表示させる。
【００７２】
またホストコンピユータ１５は、マウス操作によりフレームビデオインデツクスウインド５０内のスクロールバー５４が操作されたことをステツプＳＰ３４において確認すると、ステツプＳＰ３５に進んで外部記憶装置２２に対応するフレーム画像の画像データを順次読み出させると共に、当該画像データに基づく表示画像データをイメージプロセツサ２１に順次生成させてこれを第３のＶＲＡＭ２４に順次書き込ませることにより、フレームビデオインデツクスウインド５０内に表示されるフレーム画像５１をスクロール表示させる。
【００７３】
さらにホストコンピユータ１５は、カーソルがいずれかの表示間隔フレーム数指定ボタン５３Ａ〜５３Ｃ上に合わせられてマウス１２がクリツクされたことをステツプＳＰ３６において確認すると、ステツプＳＰ３７に進んで外部記憶装置２２に指定された間隔でフレーム画像５１の画像データを読み出させると共に、これら画像データに基づく表示画像データをイメージプロセツサ２１に生成させて第３のＶＲＡＭ２４に格納させることにより、フレームビデオインデツクスウインド５０内に表示されるフレーム画像５１の間隔を指定された間隔に変更させる。
【００７４】
さらにホストコンピユータ１５は、カーソルがフレームビデオインデツクスウインド５０内のウインドクローズボタン５５上に合わせられてマウス１２がクリツクされたことをステツプＳＰ３８に確認すると、ステツプＳＰ３９に進んで対応する画像データを外部記憶装置２２に読み出させると共に、当該画像データに基づく表示画像データをイメージプロセツサ２１に生成させて第３のＶＲＡＭ２４に書き込ませることにより、フレームビデオインデツクスウインド５０が閉じた編集画面３２（図４）をモニタ表示させる。そしてホストコンピユータ１５は、この後ステツプＳＰ４０に進んでこのフレームビデオインデツクス表示処理手順ＲＴ３を終了し、この後表示モード処理手順ＲＴ２に戻るようになされている。
【００７５】
（４）画像表示装置の動作及び効果
以上の構成において、この画像表示装置１０では、ビデオ信号Ｓ１Ａ〜Ｓ１Ｎ、Ｓ２Ａ〜Ｓ２Ｎの取込みモード時、指定されたビデオ信号Ｓ１Ａ〜Ｓ１Ｎ、Ｓ２Ａ〜Ｓ２Ｎを取り込み、これを順次デイジタル変換した後、かくして得られた動画像データＤ１を圧縮符号化した後、タイムコードを付加し、フアイル化して外部記憶装置２２に格納する。
【００７６】
この際この画像表示装置１０では、圧縮符号化処理により得られる隣接するフレーム間の画像相関情報及び輝度相関情報等に基づいて所定のシーン画像を検出し、検出したシーン画像の位置情報をその動画像データフアイルを管理するデータベースとして外部記憶装置２２に格納する。またこの表示画像装置１０では、この際動画像データについてサンプリング位置を順次移動させながらスリツトデータを抽出し、当該スリツトデータに基づいて得られるビデオブラウザの画像データをデータベースに格納する。
【００７７】
そしてこの画像表示装置１０においては、この後表示モードが選択されると、これら外部記憶装置２２に格納した動画像データフアイル及びそのデータベースに基づいて、図４のようなビデオブラウザ３３及びシーン画像３６が同時に表示されてなる編集画面３２をモニタ２６に表示する。
【００７８】
従つてこの画像表示装置１０では、表示モード時、動画像から一次元的にサンプリングして得られたスリツトデータに対応する一次元的な画像をつなぎ合わせた静止画でなるビデオブラウザ３３と、その時間軸方向に対応して要所要所のシーン画像３６とが同時に表示されるため、これらビデオブラウザ３３及び各シーン画像３６によつて素材の全体的な流れと、各シーン画像３６を基準とした過去及び未来の時間軸方向の場面状況とを容易に把握することができる。従つてこの画像表示装置１０では、その分動画像中の所望シーンを特定する作業の作業時間を短縮化させることができ、また外部記憶装置２２に対するアクセス回数を低減させることができる。
【００７９】
さらにこの画像表示装置１０では、外部記憶装置２２に対するアクセス回数を低減させ得る分、当該外部記憶装置２２にデータアクセス性、データ転送レート及びデータ転送速度等に高い機能を必要とせず、その分例えば編集システムを構築する場合においても安価にシステムを構築し得る利点がある。
【００８０】
以上の構成によれば、ビデオ信号Ｓ１Ａ〜Ｓ１Ｎ、Ｓ２Ａ〜Ｓ２Ｎの取込みモード時に特定のシーン画像の位置を検出すると共に、当該ビデオ信号Ｓ１Ａ〜Ｓ１Ｎ、Ｓ２Ａ〜Ｓ２Ｎに基づくビデオブラウザの画像データ生成しておき、表示モード時にビデオブラウザ及びシーン画像を時間軸上において位置を一致させて同時にモニタ表示するようにしたことにより、素材の全体的な流れと、各シーン画像３６を基準とした過去及び未来の時間軸方向の場面状況とを容易に把握することができ、かくして動画像の概要確認及び所望シーンの選出を短時間でかつ容易に行い得る画像表示装置を実現できる。
【００８１】
（５）他の実施の形態
なお上述の実施の形態においては、２次元表示される一連の動画像データからスリツトデータをサンプリングする際、画面の右端から左端に向けてサンプリング位置を順次移動させるようにした場合について述べたが、本発明はこれに限らず、画面の左端から右端に向けてサンプリング位置を順次移動させたり、又は画面の一隅部から対角線上の他隅部に向けてサンプリング位置を順次移動させるようにしても良く、サンプリング位置の移動方向としてはこの他種々の方向を適用できる。
【００８２】
また上述の実施の形態においては、イメージプロセツサ２１が検出する特定のフレーム画像としてシーンチエンジの最初のフレーム画像及び前後のフレーム画像に比べて輝度レベルが著しく変化するフレーム画像を適用するようにした場合について述べたが、本発明はこれに限らず、イメージプロセツサ２１がこれ以外の特定のフレーム画像を抽出し得るようにしても良い。
【００８３】
さらに上述の実施の形態においては、２次元表示される一連の動画像データをサンプリグ位置を一の方向に順次移動させながら他の方向に１次元的にサンプリングして得られるデータに基づいてビデオブラウザの画像データを作成する作成手段と、動画像データに基づく一連の動画像中の特定のフレーム画像を検出する検出手段とを１つのイメージプロセツサ２１で併用し、これらをソフトウエア的に処理するようにした場合について述べたが、本発明はこれに限らず、これら作成手段及び検出手段を別体に構成し、ハードウエア的に処理するようにしても良い。
【００８４】
さらに上述の実施の形態においては、イメージプロセツサ２１のシーン画像データ抽出部２１Ｂにより検出された特定のフレーム画像（シーンチエンジの最初のフレーム画像及び前後のフレーム画像に比べて輝度レベルが著しく変化するフレーム画像）を、ビデオブラウザ３３と共に当該ビデオブラウザ３３と時間軸を一致させて表示する表示手段を、ホストコンピユータ１５、イメージプロセツサ２１の動画像縮小画面データ形成部２１Ｇ、第３のＶＲＡＭ２４、デイジタルアナログ変換回路２５及びモニタ２６により構成するようにした場合について述べたが、本発明はこれに限らず、この他種々の構成を適用できる。
【００８５】
さらに上述の実施の形態においては、モニタ２６に表示されたビデオブラウザ３３のうちの所望ポイント又は所望のシーン画像３６を指定するポイント指定手段を、マウス１２と、当該マウス１２の操作に応動して移動するカーソルを編集画面３２上に表示するイメージプロセツサ２１により構成するようにした場合について述べたが、本発明はこれに限らず、この他種々の構成を適用できる。
【００８６】
【発明の効果】
上述のように本発明によれば、画面表示装置に、２次元表示される一連の動画像データをサンプリグ位置を一の方向に順次移動させながら他の方向に１次元的にサンプリングして得られるデータに基づいて静止画像の画像データを作成する作成手段と、動画像データに基づく一連の動画像中の特定のフレーム画像を検出する検出手段と、検出手段により検出された特定のフレーム画像を、作成手段により作成された画像データに基づく静止画像と共に時間軸を一致させて表示する表示手段とを設けるようにしたことにより、オペレータが表示された特定のフレーム画像及び静止画像に基づいて動画像データに基づく動画像の全体的な流れを直ちに認識し得るようにすることができ、かくして動画像の概要確認及び所望シーンの選出を短時間でかつ容易に行い得る画像表示装置を実現できる。
【００８７】
また本発明によれば、２次元表示される一連の動画像データをサンプリグ位置を一の方向に順次移動させながら他の方向に１次元的にサンプリングして得られるデータに基づいて静止画像の画像データを作成すると共に、動画像データに基づく一連の動画像中の特定のフレーム画像を検出する第１のステツプと、第１のステツプにおいて検出した特定のフレーム画像を、作成手段により作成された画像データに基づく静止画像と共に時間軸を一致させて表示する第２のステツプとを設けるようにしたことにより、オペレータが表示された特定のフレーム画像及び静止画像に基づいて動画像データに基づく動画像の全体的な流れを直ちに認識し得るようにすることができ、かくして動画像の概要確認及び所望シーンの選出を短時間でかつ容易に行い得る画像表示方法を実現できる。
【図面の簡単な説明】
【図１】ビデオブラウザの説明に供する概念図である。
【図２】本実施の形態による画像表示装置の構成を示すブロツク図である。
【図３】編集初期画面を示す略線図である。
【図４】編集画面を示す略線図である。
【図５】編集画面を示す略線図である。
【図６】信号取込みモード処理手順を示すフローチヤートである。
【図７】表示モード処理手順を示すフローチヤートである。
【図８】フレームビデオインデツクス表示処理手順を示すフローチヤートである。
【図９】他の実施の形態を示す略線図である。
【図１０】他の実施の形態を示す略線図である。
【図１１】他の実施の形態を示す略線図である。
【符号の説明】
２、２Ａ〜２Ｅ、５１……フレーム画像、３３Ａ〜３Ｅ……垂直スリツト、４Ａ、４Ｂ……ビデオブラウザ、１０……画像表示装置、１１……キーボード、１２……マウス、１５……ホストコンピユータ、１７Ａ〜１７Ｎ……電送回線、１８Ａ〜１８Ｎ……ビデオテープレコーダ、１９……アナログデイジタル変換回路、２０、２３、２４……ＶＲＡＭ、２１……イメージプロセツサ、２２……外部記憶装置、２５……デイジタルアナログ変換回路、２６……モニタ、３１……ビデオインデツクスウインド、３２……編集画面、３３……ビデオブラウザ、３４……スケール、３５、５２……タイムコード、３６……シーン画像、５０……フレームビデオインデツクスウインド。

Claims (10)

1. ２次元表示される一連の動画像データをサンプリグ位置を一の方向に順次移動させながら他の方向に１次元的にサンプリングして得られるデータに基づいて静止画像の画像データを作成する作成手段と、
   上記動画像データに基づく一連の動画像中の特定のフレーム画像を検出する検出手段と、
   上記検出手段により検出された上記特定のフレーム画像を、上記作成手段により作成された上記画像データに基づく上記静止画像と共に時間軸を一致させて表示する表示手段と
   を具えることを特徴とする画像表示装置。
2. 上記特定のフレーム画像は、シーンチエンジの最初のフレーム画像でなる
   ことを特徴とする請求項１に記載の画像表示装置。
3. 上記特定のフレーム画像は、フラツシユがたかれた瞬間のフレーム画像でなる
   ことを特徴とする請求項１に記載の画像表示装置。
4. 上記表示手段は、上記特定のフレーム画像及び上記静止画像と共に当該静止画像と時間軸を一致させてタイムコードを表示する
   ことを特徴とする請求項１に記載の画像表示装置。
5. 上記表示手段により表示された上記静止画像のうちの所望ポイント又は所望の上記特定のフレーム画像を指定するポイント指定手段
   を具え、上記表示手段は、上記ポイント指定手段により指定された上記静止画像の上記所望ポイント又は所望の上記特定のフレーム画像の前後所定フレーム分のフレーム画像を上記動画像データに基づいて表示する
   ことを特徴とする請求項１に記載の画像表示装置。
6. ２次元表示される一連の動画像データをサンプリグ位置を一の方向に順次移動させながら他の方向に１次元的にサンプリングして得られるデータに基づいて静止画像の画像データを作成すると共に、上記動画像データに基づく一連の動画像中の特定のフレーム画像を検出する第１のステツプと、
   上記第１のステツプにおいて検出した上記特定のフレーム画像を、上記作成手段により作成された上記画像データに基づく上記静止画像と共に時間軸を一致させて表示する第２のステツプと
   を具えることを特徴とする画像表示方法。
7. 上記特定のフレーム画像は、シーンチエンジの最初のフレーム画像でなる
   ことを特徴とする請求項６に記載の画像表示方法。
8. 上記特定のフレーム画像は、フラツシユがたかれた瞬間のフレーム画像でなる
   ことを特徴とする請求項６に記載の画像表示方法。
9. 上記表示手段は、上記特定のフレーム画像及び上記静止画像と共に当該静止画像と時間軸を一致させてタイムコードを表示する
   ことを特徴とする請求項６に記載の画像表示方法。
10. 表示した上記静止画像のうちの所望ポイント又は所望の上記特定のフレーム画像が指定されたときに、当該指定された上記静止画像の上記所望ポイント又は所望の上記特定のフレーム画像の前後所定フレーム分のフレーム画像を上記動画像データに基づいて表示する
    ことを特徴とする請求項６に記載の画像表示方法。

Images