JPH0581349A - 画像検索方法 - Google Patents

Abstract

(57)【要約】 【目的】 複数の動画像データから目的に沿うものを迅
速且つ確実に検索できる。 【構成】 縮小画像の作成部３２で動画像データの一部
のこまの画像データからこま落し画像データを作成す
る。動画的表示器１８Ｃにより動画像データのこま落し
画像データを、前記ビットマップディスプレイ１８Ｅ上
に順番に連続的に表示する。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、画像検索方法に係り、
特に、限定された視聴者を対象とする映像作品、例えば
ビジネスニュース等のニュース番組やそのニュース番組
のパッケージソフトを製作する際に用いるのに好適な、
複数の動画像データの中から、目的に沿う動画像データ
を検索する方法に関する。

【０００２】

【従来の技術】従来、ニュース番組等の映像の製作は、
放送業界等のマスメディアにおいて不特定多数の視聴者
を対象として配信することを目的に行われていた。

【０００３】放送業界では、通常、地上局又は放送衛星
を用いて前記映像番組を送出している。

【０００４】しかしながら、今日、限定された対象に対
する映像の配信の要請が高まり、通信衛星を利用してビ
ジネスニュース番組等のビジネス映像を配信する要請が
生じた。

【０００５】このビジネス映像は次のような特徴を有し
ている。

【０００６】即ち、このビジネス映像は、不特定多数の
視聴者を対象としたマスメディアではなく、通信衛星を
利用して特定の契約者のみに配信するものである。従っ
て、製作費の削減が必要となる。

【０００７】又、通信衛星による即時的な映像収集及び
配信が特徴であり、関連する資料映像の収集と送出ファ
イルの編集を即座に行う必要がある。従って、製作時間
の短縮化が重要となる。

【０００８】更に又、視聴者は限定されたビジネスマン
であり、問題解決のためのより専門的な情報の提供が要
請される。従って、新規な情報に関連した参考となるい
わゆる横の情報を集め、幅を持たせた情報提供が必要と
なる。

【０００９】前記のビシネス映像等の映像番組を製作す
るには、静止画像データ、動画像データ、音声データ
等、多量且つ多種の映像資料が必要となる。

【００１０】なお、静止画像は静止した各一枚の画像を
いい、その記録媒体には写真原稿がある。又、動画像
は、連続したこま（フレーム）を順次表示して画像に動
きを出したもので、その記録媒体にはビデオテープ、映
画フィルムがある。又、音声は、主に動画像の背景の音
があり、その記録媒体には動画像と同様のビデオテープ
又はオーディオ用テープがある。

【００１１】ここで、前記映像番組の製作に際しては、
蓄積された動画像データの中から、映像製作の目的に沿
うデータを選択する必要がある。

【００１２】選択の方法としては、動画像データの内容
を説明した文章、又は、その動画像データに関係が深い
単語を集めた記述（例えばキーワードの集合）を判断対
象とし、これら文章又は単語を読んで当該動画像データ
の内容を判断したり、又は、それら文章又は単語の中に
指定した単語があるか否かを調べ（キーワード検索）た
りして、目的の動画像を選択する方法がある。

【００１３】又、動画像データは、ビデオテープライブ
ラリに蓄積し、その記録媒体（ビデオテープ）中の動画
像データをタイトルインデックスで検索する場合があっ
た。又、蓄積されている動画像データそのものを画面上
に映像として再生し、人間がその再生画像を見て選択す
る方法がある。

【００１４】

【発明が解決しようとする課題】しかしながら、前記従
来の選択方法では、次のような種々の欠点があり、動画
像データを簡易、且つ、迅速に選択することができない
という問題点があった。

【００１５】即ち、動画像データの内容をもれなく単語
（キーワード）や、文章で表現することは困難である。
又、キーワードはその入力作業の自動化ができず、入力
者による偏りが発生する。又、タイトルインデックスに
よる検索では、キーワードと同様の問題が生じる。

【００１６】又、蓄積している動画像データの映像を見
て選択する方法では、動画像データを再生するのに手間
及び時間がかかり、多くの動画像データを短時間に確認
することはできない。又、見たい動画像データが記録さ
れている記録媒体が他の使用者等に使用されている場合
は確認することができない。

【００１７】このため、前記のような特定の視聴者を対
象とした映像番組を製作する際の、製作費の削減、製作
時間の短縮化、及び幅広い情報の提供という要請を実現
する障害となっている。

【００１８】本発明は、前記従来の問題点を解決するべ
くなされたもので、複数の動画像データの中から目的に
沿う動画像データを迅速且つ確実に検索することができ
る画像検索方法を提供することを課題とする。

【００１９】

【課題を達成するための手段】本発明は、複数の動画像
データの中から目的に沿う動画像データを検索する方法
であって、動画像データのこまを間引いてこま落し画像
データを作成する工程と、こま落し画像データの各こま
を連続的に画面に表示する工程とを含み、動画像データ
の検索を前記画面に表示されたこま落し画像データを参
照することにより、前記課題を解決するものである。

【００２０】

【作用】本発明においては画像検索方法において、動画
像データのこまを間引いて（動画像データの一部の画像
データから）こま落し画像を作成し、このこま落し画像
データの各こまを連続的に画面に表示する。これにより
画面にはいわゆるこま落しの状態の動画像が表示され
る。

【００２１】又、画面上のこま落し画像データを参照す
るこにとより動画像データの検索を行う。

【００２２】従って、前記動画的データのこま落し画像
データの前記画面への連続的な表示により、動画像デー
タの被写体の動きを確実に把握することができる。

【００２３】又、単語や文章や動画像の内容を表現する
のとは異なり、画像の処理で検索データを作成できるた
め、入力作業が自動化でき、入力者による偏りが発生す
ることがない。又、所望する動画像データが記録されて
いる記録媒体の使用中においても、元の動画像の被写体
の動きを確認できる。

【００２４】又、動画的表示用画像データが、当画像デ
ータの一部のこまの画像データ（こま落し画像データ）
から作成されるため、検索時に、動画像の被写体がどの
ように動くかを、元の動画像データが記録されている記
録媒体を再生することなく即座に知ることができるた
め、検索の時間が大幅に短縮される。

【００２５】

【実施例】以下、図面を参照して本発明の実施例を詳細
に説明する。

【００２６】この実施例は、図１に示すような画像検索
システムであり、図２に示すような構成の資料映像デー
タベースシステム中に構成される。

【００２７】図２に示すように、この資料映像データベ
ースシステムは、主にデータベース管理装置１０と、デ
ータベース入力・検索・利用端末装置１２とからなり、
静止画像データ、動画像データ、音声（自然音声）及び
音声（ナレーション音声）データ等を一体的に蓄積して
データベースとし、それら蓄積データの検索・利用がで
きるようにされたものである。

【００２８】なお、前記音声データにおいて自然音声デ
ータは動画像のデータの背景音等であり、ナレーション
音声データは、主に静止画像データを言葉により説明す
るナレーションのデータである。これら各音声データの
内容、及び、データベース内への蓄積の詳細は後述す
る。

【００２９】前記データベース管理装置１０は、データ
の蓄積・削除・修正とデータの検索・利用サーバの機能
を持つデータセンターである。なお、前記データベース
管理装置１０の行うデータの蓄積等の内容の詳細は後述
する。

【００３０】前記データベース入力・検索・利用端末装
置１２は、機能から見て４つの部分に分かれている。即
ち、動画像入力部１４、静止画像入力部１６、データベ
ース検索部１８、及び、データベース利用部２０であ
る。

【００３１】前記動画像入力部１４は、ビデオテープレ
コーダ（ＶＴＲ）テープやレーザーディスク（ＬＤ）等
の記憶媒体から後記ビデオ機器１４Ａを介して出力され
る動画像データを、所定の処理を施して前記データベー
ス管理装置１０に入力するためのものである。記録媒体
に動画像データと共に記録される自然音声データは、Ａ
ＤＰＣＭ（適応差分パルス符号）化して前記管理装置１
０に入力する。なお、前記動画像入力部１４における動
画像データの入力の詳細は後述する。

【００３２】前記静止画像入力部１６は、静止画像デー
タを取込むと共に、検索用キー（キーワード）をデータ
ベース管理装置１０に入力するためのものである。又、
画像データに併せて入力するナレーション等の音声デー
タを、表音コード（例えばローマ字表記によるコード）
化して入力する。なお、静止画像入力部１６の静止画像
データの入力の詳細は後述する。

【００３３】前記データベース検索部１８は、データベ
ース内の各データについて後述する検索画面による検索
やキーワードによる検索を行うためのものである。な
お、検索の詳細は後述する。

【００３４】前記データベース利用部２０は、検索した
画像データを、例えば映像番組製作用の素材として利用
するため出力等するものである。例えば静止画像又は動
画像の１こまの画像はビデオプリンタで出力したり、映
像機器の画面に表示したりする。又、検索された動画像
を画面で利用する場合に動画像データがデータベース管
理装置１０内に記録されていれば（主に短時間の動画像
の場合）、それを出力し、又、保管庫の映像記録媒体
（ビデオテープ等）に記録されていれば当該媒体を取り
寄せて当該媒体中データを出力して利用する。

【００３５】ここで、前記データベースシステムは、図
２に示すように、１つのデータベース管理装置１０に対
して、１つのデータベース入力・検索・利用端末装置１
２を設ける他、図３に示すように、１つのデータベース
管理装置１０に対して、前記端末装置１２を複数接続し
て、複数の前記端末装置１２から前記１つのデータベー
ス管理装置１０をアクセスして用いることができる。

【００３６】又、前記端末装置１２は、遠隔地に設置す
ることができる。

【００３７】又、データベース管理装置１０及びデータ
ベース入力・検索・利用端末装置１２間は、例えばデジ
タル転送ネットワークで接続される。但し、動画像デー
タのリアルタイム（即時）の転送が要求される場合、動
画像映像信号はアナログ転送とする。

【００３８】前記データベースシステムの詳細な構成を
図４に示す。

【００３９】図４に示すように、前記データベースシス
テムにおいて、データベース管理部１０は、検索用イン
デックスデータや後述する縮小画像（代表画像に相当、
詳細は後記する）を並べた検索画面のデータ等のデジタ
ルデータを主に格納するための、第１の記憶段１０Ａ
と、動画像又は静止画像のデータをアナログデータとし
て格納するためのビデオディスク１０Ｂと、データベー
ス管理部１０と複数のデータベース入力・検索・利用端
末装置１２とが接続されている場合に、いずれの端末装
置１２からディスク１０Ｂへアナログ画像データを入出
力するかを切換える端末切換器１０Ｃとを有する。

【００４０】なお、データベース管理部１０には、例え
ばファイルサーバの機能を有し、大きなデータ蓄積容量
を有するホストコンピュータを用いることができる。

【００４１】又、前記第１の記憶段１０Ａは、検索画
面、音声データ等の容量が小さく、高いアクセス速度が
要求されるデータを格納する機能を有する。

【００４２】又、前記記憶段１０Ａには、インデックス
データを格納する例えば磁気ディスク（例えば２ギガ
（Ｇ）バイトの容量のもの）装置や検索画面や音声デー
タを格納する光磁気ディスク（例えばディスク１枚当り
５９４メガ（Ｍ）バイトの容量のもの）を用いることが
できる。

【００４３】又、前記ビデオディスク１０Ｂには、ＮＴ
ＳＣコンポジット記録方式の追記型光ディスク装置（例
えば光ディスク１枚当り動画像４８分、静止画８７００
０枚記録できるもの）を用いることができる。これによ
り、アクセス速度が速く、記録密度が高くなる。

【００４４】前記データベース入力・検索・利用端末装
置１２においては、前記各画像入力部１４、１６と、デ
ータベース検索部１８及びデータベース利用部２０がほ
ぼ図４に示すような区分により構成されている。しかし
ながら、構成機器によっては、各部で共用されるものが
あるため、図４に示す区分は概略的な区分構成を示すも
のであり、必要に応じて、他の区分の機器の利用が行わ
れる。なお、このデータベース入力、検索、利用端末装
置１２には、本実施例の各機能を実行可能なワークステ
ーションを用いることができる。

【００４５】前記データベース入力・検索・利用端末装
置１２において、動画像入力部１４は、ＶＴＲやＬＤ等
からなるビデオ機器１４Ａと、当該ビデオ機器１４Ａの
運転、停止を制御して、ビデオ機器１４Ａ中の記録媒体
から動画像データを出力させ、あるいは当該記録媒体に
記録させるためのビデオ機器リモートコントローラ１４
Ｂと、前記ビデオ機器１４Ｃとの自然音声データの入出
力をＡＤＰＣＭ変換して行うための音声コンバータ１４
Ｃと、前記ビデオ機器１４Ａから出力される動画像デー
タ中の１フレーム画像を静止画として一旦記憶するため
の第１のフレームバッファ１４Ｄとを主に有する。

【００４６】又、動画像入力部１４は、画像を入力する
に際し、元の動画像の全てのこま（駒）毎、又は、一定
間隔のこま毎のフレームの画像を第１のフレームバッフ
ァ１４Ｄから取込み、後記画素密度変換器１６Ｃで画素
密度変換して画素の間引きを行い縮小画像を作成する機
能を有している。この縮小画像を後記動画的表示器１８
Ｃが検索画面上で順次連続的に表示させることにより、
動画的表示ができるようになっている。

【００４７】なお、縮小画像を作成するに際して第１の
フレームバッファ１４Ｄ上の静止画再生された画像を例
えば横７６８×縦４８０ドット、且つ、２４ビットフル
カラーのデジタル画像データとし、その後、当該画像デ
ータを間引いて例えば横１２８×縦９６ドット、且つ８
ビット限定色の縮小画像を作成することがきる。又、こ
の縮小画像のうち動画像の内容を最もよく表わすこま又
は任意のこまの画像の縮小画像を代表画像とし、これを
ビットマップディスプレイ１８Ｅ上の画面に縦、横枡目
状に並べる。なお、このように並べた画面を検索画面と
いう。又代表画像は、前記のように１こまの縮小画像か
ら作成するのは１例であり、その他、例えば、複数の画
像の和等をとり縮小して代表画像を作成することができ
る。

【００４８】前記静止画像入力部１６は、例えばビデオ
カメラやスチルカメラからなるビデオ機器１６Ｅと、前
記ビデオ機器１６Ｅから出力される静止画像データを一
旦記憶するための第２のフレームバッファ１６Ｆと、カ
ラー写真原稿等の平面的な静止画像媒体の情報をディジ
タルデータの形で入力するための、例えばフラットスキ
ャナからなるスキャナ１６Ｂと、入力された静止画像デ
ータを画素密度変換して画面上に表示できる形の、例え
ばＮＴＳＣ方式の画像データに変換する画素密度変換器
１６Ｃと、文字、数値、例えばキーワード、ナレーショ
ン音声の言葉（文字入力する）、映像関連情報の文字等
を入力するための例えばキーボードからなる数値文字入
力器１６Ｄと、例えばワードプロセッサからの文字、数
値、例えばキーワード、ナレーション音声の言葉、映像
関連情報の文字等を入力するためのデータ交換器１６Ａ
とを有する。前記縮小画像は、前記動画像のそれと同様
に検索画面に枡目状に並べる。

【００４９】又、第２のフレームバッファ１６Ｆは、前
記第１のフレームバッファ１４Ｄと共通する、又は、別
のフレームバッファを用いることができる。

【００５０】前記データベース検索部１８は、前記ビッ
トマップディスプレイ１８Ｅ上の検索画面の各縮小画像
について、動画像か静止画像かの区別を表示させる区別
表示器１８Ａと、前記検索画面の縮小画像を静止画の状
態で検索画面上に表示させるための静止画表示器１８Ｂ
と、前記検索画面上で動画像の縮小画像を全こま又は一
定間隔のこま（こま落し）により動画的に表示させるた
めの動画表示器１８Ｃと、ビットマップディスプレイ１
８Ｅ上に前記映像関連情報の数値や文字を表示させるた
めの数値・文字表示器１８Ｄと、前記縮小画像の検索画
面上、関連情報等を表示するビットマップディスプレイ
１８Ｅと、前記検索画面上の縮小画像の選択を入力する
ための選択器１８Ｆとを有する。

【００５１】前記区別表示器１８Ａは例えば動画像デー
タの代表画像を緑色の枠で囲み、静止画像データの代表
画像を赤色の枠で囲んで区別するようにできるものであ
る。

【００５２】又、選択器１８Ｆには前記数値文字入力器
１６Ｄと共通する又は別のキーボードを用いることがで
きる。又、マウスを用いることができる。

【００５３】前記データベース利用部２０には、データ
ベース管理装置１０側から送られてきた画像のハードコ
ピーを取るためのビデオプリンタ２０Ａと、映像関連情
報をプリントアウトするためのドットプリンタ２０Ｂと
が設けられる。なお、データベース利用部２０には、図
示しないが、ナレーション音声を音声合成により発生す
る音声合成器が設けられている。

【００５４】前記端末装置１２には、各処理プログラム
データの記録や、画像及び音声データのデータベース管
理部１０間との入力又は出力に際してのデータの記録を
行うための第２の記憶段２４が設けられている。

【００５５】ここで前記データベースシステムは、前記
の機能を有するため、データベースとして蓄積する画像
データ等及び記録媒体等が次のような構成になる。

【００５６】動画像データにおいて、比較的長時間の動
画像データの場合、そのデータを記録媒体に記録して保
管庫に保管すると共に、検索画面に表示する代表画像の
縮小画像を第１の記憶段１０Ａにデジタルデータの形で
記録しておき、検索の効率化、迅速化を図るようにして
いる。

【００５７】即ち、記録媒体からビデオ機器１４により
動画像を再生し、動画像の内容をよく表わしている画
像、あるいは任意の画像を代表画像としてフレームバッ
ファ１４Ｄにより抽出する。抽出した画像を、画面に枡
目状（例えば縦１０×横１０程度）に並べられるように
縮小した画像データ（検索画面を構成）を作り、第１の
記憶段１０Ａにファイルとしてデータベース管理装置１
０に記録する。又、元の動画像データの記録されている
記録媒体には、整理番号の付されたラベルを当該記録媒
体ケースに貼り保管する。なお、この検索画面、作成及
び検索の詳細な内容は後述する。

【００５８】又、比較的短時間の動画像データの場合、
ビデオ機器１４Ａで再生し、必要な部分を音声と共にビ
デオディスク１０Ｂへアナログ信号として記録する。こ
れにより高速な検索ができる。

【００５９】又、静止画像データにおいて、前記ビデオ
機器１６Ｅからのビデオ信号（アナログ信号）入力とス
キャナ１６Ｂからの静止画信号デジタル信号入力の双方
に対応して入力することができる。又、検索画面に表示
する代表画像の縮小画像を、第１の記憶段１０Ａにデジ
タルデータの形で記録しておき、検索の効率化、迅速化
を図るようにしている。アナログ静止画像データについ
ては、ビデオディスク１０Ｂに記録すると共に、第２の
フレームバッファ１６Ｆにも記憶させ、画面上に枡目状
（例えば縦１０×横１０程度）に並べられるように縮小
した画像データ（検索画面を構成）を作り、第１の記憶
段１０Ａにファイルとしてデータベース管理装置１０に
記憶する。又、スキャナ１６Ｂ等から入力されたデジタ
ル静止画像データについては、画素密度変換器１６Ｃで
画素密度変換してＮＴＳＣ方式のデジタル画像データと
し、そのデータを第１の記憶段１０Ａに記録すると共
に、アナログ静止画像データと同じく、枡目状に並べら
れるように縮小した画像データを作り、第１の記憶段１
０Ａにファイルとしてデータベース管理装置１０に記憶
する。又、スキャナ１６Ｂ中等から入力されたデジタル
静止画データをフレームバッファ１４Ｄに入力してアナ
ログデータの形とし、ビデオディスク１０Ｂに記録する
ことができる。このように、静止画データをアナログデ
ータの形でビデオディスク１０に記録すれば、デジタル
データに比較してデータ量を削減でき、再生時間が短
く、取扱いが容易となる。

【００６０】音声データのうちナレーション音声データ
については、動画像や静止画像の内容を説明するナレー
ション原稿を、前記数値文字入力器１６Ｄ、又は、デー
タ交換器１６Ａを介して例えばワードプロセッサから文
字（文字コードデータ）入力する。又、当該文字コード
データを表音コードデータに変換して蓄積する。この表
音コードデータにより前記音声合成器でナレーション音
声の再生ができる。この場合、文字コードデータはテロ
ップの表示等に利用するため蓄積する。

【００６１】又、自然音声データについては、自然音声
データは、動画像データと共にビデオディスク１０Ｂに
記憶する。又、ビデオディスク１０Ｂに入力しない場合
で記録が必要な場合は、ＡＤＰＣＭ化して第１の記憶段
１０Ａにファイル化できる。

【００６２】その他、静止画像データ及び動画像データ
について、映像関連情報、即ち撮影者、撮影日等の管理
情報や映像のオリジナル・背景が明確になるような関連
する情報を、各項目最大２００文字程度入力し、検索時
に利用できるようにする。又、動画像データの場合、タ
イムコード等を自動的に記録し、迅速に呼び出せるよう
にする。

【００６３】又、文類・検索の便に供するため画像デー
タにキーワードを付加する。キーワードには映像を直接
表わす任意の単語からなるフリーキーワードや、予め選
択され独自の分類で分類されているキーワード中から適
切なものを選ぶようになっている統制キーワードを選択
し又はワードプロセッサ入力して画像データに付加す
る。

【００６４】以上のように実施例のデータベースシステ
ムにおいては、静止画像データ、動画像データ、自然音
声データ及びナレーション音声データがデータベースと
して一体化して蓄積されている。

【００６５】図１は、前記データベースシステムを動画
像データより検索画面を作成し、検索する機能から見た
画像検索装置の構成である。図１において画像入力機能
には、図２の動画像入力部１４、データベース管理装置
１０が該当し、画像検索機能は、データベース管理装置
１０、データベース検索部１８が該当する。

【００６６】即ち、前記画像入力機能は各こま再生部３
０と、縮小画面作成部３２と、縮小画面記憶部３４とか
らなる。

【００６７】各こま再生部３０は、動画像データの各こ
ま毎の画像を再生し、縮小画像からなる検索画面の作成
記録をするためのものであり、主に、ビデオ機器１４Ａ
及びフレームバッファ１４Ｄからなるものである。又、
縮小画像作成部３２は、検索画面に表示するための縮小
画像を作成するためのものであり、主に画素密度変換器
１６Ｃからなるものである。又、縮小画面記憶部３４は
作成縮小画像を記憶するためのものであり、主に第１の
記憶段１０Ａからなるものである。

【００６８】又、前記画像検索機能は、検索画面で検索
し、該画面中の画像を動画的表示させるためのものであ
り、主に前記記憶部３４と、縮小画像静止画的表示部１
８Ｂと、動画的表示部１８Ｃと、ビットマップディスプ
レイ１８Ｅと、選択手段１８Ｆからなる。これら表示部
１８Ｂ等の内容は前述したので省略する。

【００６９】前記検索画面は、ビットマップディスプレ
イ１８Ｅの表示画面を例えば１０×１０（又は８×１
０）程度に分割し、各分割画面に動画像データ及び静止
画像データのそれぞれの代表画像の縮小画像を順に並べ
て表示するものである。

【００７０】即ち、動画像データの場合、各こま又は一
定間隔のこま（例えば１０こま）毎に縮小画像を作成し
て蓄積し、それを連続的に表示すること（全てのこま、
又はこま落しによる動画的表示）で映像内容を把握でき
るようにする。この動画的表示の際に元の画像のタイム
コードをリアルタイムに表示するようにする。前記のよ
うに、こま落しによる動画的表示をすれば短時間で動画
像データの内容を把握できる。

【００７１】又、静止画像データの場合、その画像その
ものが代表画像となるため、静止画データの縮小画像を
検索画面に表示する。

【００７２】次に、実施例の作用を説明する。

【００７３】前記のこま落しによる動画的表示のための
縮小画像を作成する手順は、図５に示すようになる。図
５において、ステップ１０１〜１０３は画像入力者の操
作により行う。

【００７４】まず、ビデオ機器１４Ａによりビデオテー
プ等の記録媒体を再生して動画像の最初と最後の部分を
捜し、そのタイムコードを記録する（ステップ１０
１）。

【００７５】次いで、検索画面に動画的表示するための
縮小画像を作るこま間隔を決める（ステップ１０２）。

【００７６】次いで、動画像の最初と最後の部分のタイ
ムコードと縮小画像を作るこま間隔を縮小画像作成部３
２に設定する（ステップ１０３）。

【００７７】これから以降は、自動的に手順を進める。

【００７８】即ち、記録媒体を最初のタイムコードの位
置で静止画再生（スチル）させる（ステップ１０４）。

【００７９】次いで、静止画再生している画像をフレー
ムバッファ１４Ｄに入力して例えば横７６８×縦４８０
ドット（２４ビットのフルカラー画像）でデジタルデー
タ化し、その後、画素密度変換器１６Ｃおいて、例えば
横１２８×縦９６ドット（８ビットの限定色）に間引い
て縮小画像を作成する（ステップ１０５）。

【００８０】次いで、作成した縮小画像を第１の記憶段
１０Ａに格納する（ステップ１０６）。

【００８１】次いで、現在静止画再生している位置のこ
まに縮小画像を作るこま間隔を加えた位置のこまが、動
画像データの最後のこまの部分を越えているか否かを判
断する（ステップ１０７）。越えているならば、検索画
面表示用の縮小画像の作成は終了する（ステップ１０
８）。

【００８２】一方、越えていないならば、記録媒体を縮
小画像を作るこま間隔分早送りして、その位置で静止画
を再生させる（ステップ１０９）。

【００８３】その後、ステップ１０５に戻って、縮小画
像の作成を再開する。

【００８４】ところで、静止画像データの縮小画像は静
止画像データを画素密度変換器１６Ｃで間引くことによ
り作成する。作成縮小画像（これが代表画像となる）
は、第１の記憶段１０Ａに記憶させる。

【００８５】又、検索画面に表示する際に静止画像と動
画像の各縮小画像（各代表画像）を任意に並べることが
できる。この場合には、前記区別表示器１８Ａで動画
像、静止画像の識別表示をする。例えば動画像は緑のわ
くで囲み、静止画像は赤のわくで囲むようにをする。

【００８６】次に、前記のようなデータベースの検索に
ついて説明する。まず、検索画面による検索を説明す
る。

【００８７】この検索においては、オペレータが分類項
目（文化、スポーツ、事件等）を指定すると、その分類
に含まれる各動画像データが選択される。次いで、その
各画像データの各代表画像の縮小画像が１０×１０程度
の枡目状に並べられた検索画面がビットマップディスプ
レイ１８Ｅの画面に表示される。

【００８８】図６は検索画面の表示例を示すものであ
る。

【００８９】この場合、縮小画像が画面上に並び切れな
い場合には、画面を上方スクロール（スクロールアッ
プ）又は下方スクロール（スクロールダウン）、こま表
示、属性表示、検索終了の指示ができるようになってい
る。このスクロールアップの内容については、後に詳述
する。

【００９０】図７は、動画的表示をさせる代表画像を選
択する状態例を示すものである。

【００９１】前記のように、表示された各縮小画像（代
表画像）の中から、なおその内容を良く知りたい場合に
は、図７のように、動画的表示をさせようとする代表画
像をカーソルにより選択する。

【００９２】このカーソルの選択で、図８に示すように
当該選択した画像の位置に順次全てのこま又はこま落し
の縮小画像が連続的に表示され、動画的な表示が行われ
る。この動画的表示により、動画像データがどのような
動きの被写体を写したものか容易に把握できる。なお、
動画的表示中にその画像をカーソルで選択すると動画的
表示が停止する。又、選択する代表画像は１つのみなら
ず複数の代表画像を選択し、その動画像データを動画的
に表示させることができる。

【００９３】又、代表画像数が多いため、その画像の全
部が表示されていない場合、「スクロールアップ」とい
うアイコンをカーソルで選択すると、表示されている画
像全体が１列分上方に移動し、この移動によって空いた
画面下の横一列分に今まで表示されていなかった別の画
像を表示する。又、「スクロールダウン」というアイコ
ンをカーソルで選択すると、表示されている画像全体を
１列分、下方に移動し、スクロールアップすることによ
って画面上から消えていた画像が再び表示される。スク
ロールアップ及びスクロールダウンの方向は図９に示す
ようになる。

【００９４】又、「こま表示」というアイコンをカーソ
ルで選択し、その後、こま表示させたい代表画像をカー
ソルで選択すると、選択した代表の画像の動画的表示の
ため蓄積されている縮小画像各こまが読込まれ、その蓄
積された全ての縮小画像が画面左側から順番に並べて表
示される。表示の方向は、図１０に示すようになる。こ
のこま表示により、動画像データ中の被写体がどのよう
な動きをしているか、より詳しく知ることができる。な
お、縮小画像はその全てを表示する他、一定の間引きを
行って表示することができる。

【００９５】又、「属性表示」という部分をカーソルで
選択し、その後属性表示させたい代表画像をカーソルで
選択すると、代表画像に対応する元の動画像の保管場
所、撮影日、撮影者等の属性情報が画面上に表示され
る。

【００９６】本データベースシステムにおいては、前記
のような検索画面上における縮小画像による検索の他、
次の検索が行える。

【００９７】即ち、分類された分野毎による検索であ
る。この検索においては、画像をデータ分野別に分類
し、分野毎に取り出すようにする。分類は階層構造を持
ち、各項目を更に１０項目程度に細分化ができる。

【００９８】又、管理情報による検索ができる。この検
索は、撮影者、撮影日等、映像の管理情報を使って検索
するものである。表示画面の検索は、範囲を指定するこ
とができる。

【００９９】フリーキーワードによる検索もできる。

【０１００】この検索は、シナリオ等の文章から抽出し
て映像に付加したキーワードを使い、表示画像を選出す
るものである。

【０１０１】統制キーワードによる検索もできる。

【０１０２】この検索は、予め選定されていた、その中
から選んで映像に付加したキーワードを使い、候補画像
を選出するものである。

【０１０３】キーワードネットワークによる検索を行う
ことができる。

【０１０４】このキーワードネットワークは、キーワー
ド間の関係を重み付けしながら定義することにより、検
索時において、指定したキーワードに関連が深い画像デ
ータを同時に引き出すものである。又、指定したキーワ
ードに対する関連度順に映像を並べることができる。

【０１０５】又、検索の組合せを行うことができる。

【０１０６】即ち、管理情報、フリーキーワード、統制
キーワード、分野別の各検索は、ＡＮＤ・ＯＲオペレー
タを入力できる他、お互いに組合せて用いることができ
る。

【０１０７】又、メタキャラクタを用いることができ
る。

【０１０８】メタキャラクタは、単語の一部を指定する
ことができ、当該メタキャラクタを検索キーに使うこと
により、キーワードの部分位置による広範囲な検索がで
きる。例えばメタキャラクタの指定がスキー○○○（○
○○は自由な文字）であれば例えばスキーウェア、スキ
ーブーツが該当する。

【０１０９】なお、検索のための候補となる画像をビデ
オプリンタ２０Ａでハードコピー出力したり、関連情報
をドットプリンタ２０Ｂで出力することができる。

【０１１０】前記のように、検索して得られた静止画像
データ、動画像データ、音声データ等は、ビデオディス
ク１０Ｂに蓄積されている動画像データは出力要求によ
り、データベース入力・検索・利用端末装置１２のビデ
オ機器１４Ａに送出することができる。この場合、音声
も含めて送ることができる。又、検索画面の元の動画像
データが保管庫中の記録媒体に記録されているものの場
合、ドットプリンタに出力されたテープ管理番号で保管
庫から当該動画像の記録媒体を引き出すことができる。
又、当該テープをビデオ機器１４Ａにセットする際に、
頭出しが行い得るようにすることができる。

【０１１１】又、静止画像を読み出してハードコピー出
力を取ることができる。この際、データベース管理部１
０側から送られてきた静止画像をビデオプリンタ２０Ａ
でカラーハードコピー出力することができる。関連する
ナレーションは音声合成器により、又、自然音声はＡＤ
ＰＣＭデコーダにより音声信号に再現され、出力され
る。

【０１１２】前記実施例においては、静止画像データの
検索と共に動画像データの検索が行えるため、従来各デ
ータ毎に重複して行っていた検索を一括して行うことが
でき、迅速な検索が可能である。

【０１１３】又、代表画像のみによる検索では、代表画
像以外のこま（フレーム）以外の内容の見落しの可能性
があるが、本実施例では、全こま又はこま落しによる動
画的表示をするためこのような見落しがなく、しかも、
動画像の動きを適格に把握することができる。

【０１１４】又、こま落し表示による検索では比較的短
時間で動画像の内容を把握できる。従って、従来、全画
像を再生するのに長時間を要していたが、大幅に時間の
短縮化が図れる。

【０１１５】なお、前記実施例においては、図２又は図
３の概略的に示すデータベースシステム、及び図４に示
す詳細構成のデータベースシステムを例示し、図１の検
索装置で本発明に係る画像検索システムを実施してい
た。

【０１１６】しかしながら、これは本発明の実施の態様
の一例であり、他の装置構成で本発明を実施することが
できる。

【０１１７】又、本発明に係る画像検索システムは、例
えば図６に示すような検索画面で縮小画像により検索を
行う際に用いるのに最も適切なものであるが、この検索
画面は一例であり、本発明を実施した画面である限り、
他の検索画面で検索するシステムにより本発明を実施す
ることが可能である。

【０１１８】例えば、動画的表示は、図８の代表画像の
表示されている位置及び代表画像と同じ大きさで行われ
ることに限定されず、位置又は大きさを任意に変えて表
示することができる。即ち、画面全体を使って動画的表
示をしてもよく、又、予め検索画面を表示手段の画面上
の一部に表示するものとし、他の部分に動画的表示をす
るようにすることができる。

【０１１９】

【発明の効果】以上説明した通り、本発明によれば、複
数の動画像データの中から目的に沿う動画像データを迅
速、且つ、確実に検索することがきる。

【０１２０】即ち検索時に、こま落し画像を参照するこ
とにより、動画像データの被写体がどのように動くかを
元の動画像データが記録されている記録媒体を再生する
ことなく即座に知ることができるため、検索の時間が短
縮化される。

【０１２１】又、画像データを処理することにより、検
索用の代表画像のデータを作成し入力できるため、単語
や文章で動画像データの内容を入力する場合とは異な
り、入力作業を自動化することができ、又、入力者によ
る偏りが発生しない。従って検索の精度が高い。

【０１２２】又、見ることを望む動画像データが記録さ
れている記録媒体が使用中の場合でも、元の動画像の動
きを確認することができる。

【０１２３】従って、ビジネスニュース等の特定の契約
者のみに配信する映像番組を製作するに際して、製作費
の削減や製作時間の短縮、提供参考資料の豊富化等を図
ることができる等の優れた効果が得られる。

【図面の簡単な説明】

【図１】図１は、本発明の実施例に係る検索装置の構成
を示すブロック図である。

【図２】図２は、前記実施例に係るデータベースシステ
ムの全体的な構成を示すブロック図である。

【図３】図３は、前記データベースシステムの応用例を
示すブロック図である。

【図４】図４は、前記データベースシステムの詳細な構
成を示すブロック図である。

【図５】図５は、前記実施例の作用を説明するための、
前記検索画面を作成する手順を示す流れ図である。

【図６】図６は、同じく、作成された検索画面の一例を
示す平面図である。

【図７】図７は、同じく、前記検索画面上で動画表示と
された部分をカーソルで選択する状態例を示す平面図で
ある。

【図８】図８は、同じく、前記カーソルで選択された画
面が動画表示される状態例を示す平面図である。

【図９】図９は、同じく、前記検索画面のスクロールア
ップ及びスクロールダウンの方向例を示す平面図であ
る。

【図１０】図１０は、同じく、前記検索画面における各
こま表示の方向例を示す平面図である。

【符号の説明】

１０…データベース管理装置、 １０Ａ…第１の記憶段、 １０Ｂ…ビデオディスク、 １０Ｃ…端末切換器、 １２…データベース入力・検索・利用端末装置、 １４…動画像入力部、 １４Ａ…ビデオ機器、 １４Ｂ…ビデオ機器リモートコントローラ、 １４Ｃ…音声コンバータ、 １４Ｄ…第１のフレームバッファ、 １６…静止画像入力部、 １６Ａ…データ交換器、 １６Ｂ…スキャナ、 １６Ｃ…画素密度変換器、 １６Ｄ…数値、文字入力部、 １６Ｅ…ビデオ機器、 １６Ｆ…第２のフレームバッファ、 １８…データベース検索部、 １８Ａ…識別表示器、 １８Ｂ…縮小画像の静止画的表示器、 １８Ｃ…縮小画像の動画的表示器、 １８Ｄ…数値、文字の表示器、 １８Ｅ…ビットマップディスプレイ、 １８Ｆ…ビットマップディスプレイ上の画像選択器、 ２０…データベース利用部、 ２０Ａ…ドットプリンタ、 ２０Ｂ…ビデオプリンタ、 ３０…各こま再生部、 ３２…縮小画像作成部、 ３４…縮小画像記憶部。

フロントページの続き (72)発明者 山田 康雄 東京都新宿区市谷加賀町一丁目１番１号 大日本印刷株式会社内

Claims (1)

【特許請求の範囲】
1. 【請求項１】複数の動画像データの中から目的に沿う動
   画像データを検索する方法であって、 動画像データのこまを間引いてこま落し画像データを作
   成する工程と、 こま落し画像データの各こまを連続的に画面に表示する
   工程とを含み、 動画像データの検索を前記画面に表示されたこま落し画
   像データを参照することにより行うことを特徴とする画
   像検索方法。