JPH11331779A - Image retrieving method - Google Patents
Image retrieving methodInfo
- Publication number
- JPH11331779A JPH11331779A JP10137884A JP13788498A JPH11331779A JP H11331779 A JPH11331779 A JP H11331779A JP 10137884 A JP10137884 A JP 10137884A JP 13788498 A JP13788498 A JP 13788498A JP H11331779 A JPH11331779 A JP H11331779A
- Authority
- JP
- Japan
- Prior art keywords
- image
- data
- reproduction
- audio data
- frame
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims description 30
- 238000010586 diagram Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
- G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
- G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
- G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
- G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
- G11B27/32—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
- G11B27/327—Table of contents
- G11B27/329—Table of contents on a disc [VTOC]
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/34—Indicating arrangements
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Television Signal Processing For Recording (AREA)
- Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
- Management Or Editing Of Information On Record Carriers (AREA)
Abstract
Description
【０００１】[0001]
【発明の属する技術分野】本発明は、画像データの検索
を行う画像検索方法に係わり、特に画像データ及び音声
データを用いて、ユーザが所望する場面を容易に検索す
ることができる画像検索方法に関するものである。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image retrieval method for retrieving image data, and more particularly to an image retrieval method capable of easily retrieving a scene desired by a user using image data and audio data. Things.
【０００２】[0002]
【従来の技術】従来、ユーザがビデオテープやディスク
等に記録された画像データから所望の場面を検索する場
合、まず所望の画像を再生し、順方向、または、逆方向
に高速再生しながら所望の場面を検索していた。2. Description of the Related Art Conventionally, when a user searches for a desired scene from image data recorded on a video tape, a disk, or the like, the user first reproduces the desired image and reproduces the desired image at high speed in the forward or reverse direction. Was searching for the scene.
【０００３】従って、画像の初めから、または、たまた
ま選択された途中の場面から試行錯誤的に所望の場面の
検索を行っていた。Therefore, a desired scene has been searched from the beginning of the image or from a scene selected by chance by trial and error.
【０００４】また、効率よく所望の場面を検索する方法
として、画像データから目印となる場面の画像（以下、
代表フレームという）を数枚登録しておき、ユーザは、
該登録された代表フレームの中から所望の場面に相当す
る代表フレームを選択し、その代表フレームの場面から
画像を再生する方法が知られている。As a method of efficiently searching for a desired scene, an image of a scene serving as a landmark from image data (hereinafter, referred to as a mark)
Register a few representative frames), and the user
There is known a method of selecting a representative frame corresponding to a desired scene from the registered representative frames and reproducing an image from the scene of the representative frame.
【０００５】しかし、前記のように画像データから所望
の画像を検索するための目印として代表フレームのみを
用いる方法では、類似した画像が代表フレームとして複
数枚登録されている場合に、画像データのどの場面のも
のであるか認識するための情報が十分得られず、ユーザ
が誤った代表フレームを選択し、所望していない場面か
ら画像データを再生してしまうことがあった。However, in the method using only the representative frame as a mark for searching for a desired image from the image data as described above, when a plurality of similar images are registered as the representative frame, any one of the image data Insufficient information for recognizing the scene is obtained, so that the user may select an incorrect representative frame and reproduce image data from an undesired scene.
【０００６】そのため、画像データから所望の画像を検
索するための目印となる情報量を増やすために、画像デ
ータの数フレーム分を一組としたもの（以下、代表パケ
ットという）を使用する方法がある。Therefore, in order to increase the amount of information serving as a mark for retrieving a desired image from image data, a method using a set of several frames of image data (hereinafter referred to as a representative packet) is used. is there.
【０００７】[0007]
【発明が解決しようとする課題】しかし、前記代表パケ
ットを用いた場合、前記代表パケットのデータ容量は、
前記代表フレームのデータ容量と比較して非常に大きく
なるため、前記代表パケットの読み取りにかかる時間が
長くなり、ユーザが所望する場面を再生するまでに長い
時間待たされてしまう。また、前記代表パケットを記憶
媒体に格納する場合、前記代表フレームを格納する場合
に比べて、大容量の記憶媒体が必要となるという問題が
ある。However, when the representative packet is used, the data capacity of the representative packet is:
Since the data size of the representative frame is much larger than the data capacity of the representative frame, the time required to read the representative packet becomes longer, and the user has to wait a long time before reproducing a desired scene. Further, when the representative packet is stored in a storage medium, there is a problem that a large-capacity storage medium is required as compared with the case where the representative frame is stored.
【０００８】本発明は、係る従来の画像検索方法が有し
ていた問題を解決することを目的とし、これを解決した
画像検索方法を提供するものである。An object of the present invention is to solve the problem of the conventional image search method, and to provide an image search method that solves the problem.
【０００９】[0009]
【課題を解決するための手段】上記課題を解決するため
に、本発明は以下に示す方法を取る。In order to solve the above problems, the present invention takes the following method.
【００１０】即ち、請求項１の発明は、少なくとも、音
声と画像を含む再生データより所望の場面を検索する画
像検索方法において、前記再生データより、１または２
以上の代表画像を抽出する工程と、該代表画像に対応す
る音声データ、及び、該代表画像の前のフレームの画像
に対応する音声データ、及び／または、該代表画像の後
ろのフレームの画像に対応する音声データを抽出する工
程と、該代表画像に割り当てられたアドレスを抽出する
工程と、該代表画像が含まれる前記再生データのファイ
ル名を抽出する工程より成り、少なくとも前記それぞれ
の工程から得られたデータによりインデックスファイル
を構成し、該インデックスファイルにより所望の場面を
検索することを要旨とした画像検索方法であり、また、
請求項２の発明は、前記インデックスファイルのデータ
より、前記代表画像の前のフレームの画像に対応する音
声データを再生する工程と、前記代表画像を再生すると
共に、該代表画像に対応する音声データを再生する工程
と、前記代表画像を再生すると共に、該代表画像の後ろ
のフレームの画像に対応する音声データを再生する工程
より成り、前記代表画像とその前後の音声データを同時
に再生することにより、所望の場面を検索することを要
旨とする請求項１に記載の画像検索方法であり、また、
請求項３の発明は、前記インデックスファイルのデータ
より所望の場面を検索するに際し、音声データの再生開
始時に、再生音量のフェードイン、及び／または、音声
データの再生終了時に、再生音量のフェードアウトを行
う工程を有することを要旨とする請求項１、または、請
求項２に記載の画像検索方法であり、また、請求項４の
発明は、前記インデックスファイルを、前記再生データ
が記憶されている記憶媒体に記憶することを要旨とする
請求項１乃至請求項３のいずれかに記載の画像検索方法
である。That is, according to the first aspect of the present invention, there is provided an image retrieval method for retrieving a desired scene from at least reproduction data including sound and image.
The above-described process of extracting the representative image, the audio data corresponding to the representative image, and the audio data corresponding to the image of the frame before the representative image, and / or the image of the frame after the representative image. Extracting the corresponding audio data, extracting the address assigned to the representative image, and extracting the file name of the reproduction data including the representative image. An image search method comprising configuring an index file with the obtained data and searching for a desired scene with the index file.
The invention of claim 2 is a step of reproducing audio data corresponding to an image of a frame preceding the representative image from the data of the index file, and reproducing the representative image and audio data corresponding to the representative image. And reproducing the representative image, and reproducing audio data corresponding to the image of the frame after the representative image. By reproducing the representative image and the audio data before and after the representative image simultaneously, 2. The image search method according to claim 1, wherein a search for a desired scene is performed.
According to a third aspect of the present invention, when a desired scene is searched from the data of the index file, a fade-in of the reproduction volume at the start of the reproduction of the audio data and / or a fade-out of the reproduction volume at the end of the reproduction of the audio data. The image search method according to claim 1 or 2, wherein the method further comprises the step of performing the image search. The invention according to claim 4, wherein the index file is stored in the storage device in which the reproduction data is stored. 4. The image search method according to claim 1, wherein the method is to store the image in a medium.
【００１１】[0011]
【発明の実施の形態】図１は、本発明の第１の実施の形
態の構成例を示すブロック図である。FIG. 1 is a block diagram showing a configuration example of a first embodiment of the present invention.
【００１２】図１において、１は装置の制御を行う制御
用ＣＰＵ、６は画像データ及び音声データ（以下、再生
データという）を記憶している記憶媒体、４は前記記憶
媒体６から読み出された画像データを再生する画像再生
回路、２は前記記憶媒体６から読み出された音声データ
を再生する音声再生回路、３は前記音声再生回路２で再
生された音声を出力するスピーカ、５は前記画像再生回
路４で再生された画像を表示するモニタである。In FIG. 1, 1 is a control CPU for controlling the apparatus, 6 is a storage medium storing image data and audio data (hereinafter referred to as reproduction data), and 4 is read from the storage medium 6. An image reproducing circuit for reproducing the reproduced image data, an audio reproducing circuit for reproducing the audio data read from the storage medium 6, a speaker for outputting the audio reproduced by the audio reproducing circuit 2, and a speaker for outputting the audio. This is a monitor that displays an image reproduced by the image reproduction circuit 4.
【００１３】前記記憶媒体６に記憶されている再生デー
タの内の画像データは、前記制御用ＣＰＵ１の制御の
下、前記記憶媒体６から読み出され、前記画像再生回路
４によりモニタ５に表示できる形態に再生され、モニタ
５に再生画像が表示される。The image data of the reproduction data stored in the storage medium 6 is read out from the storage medium 6 under the control of the control CPU 1 and can be displayed on the monitor 5 by the image reproduction circuit 4. The image is reproduced in the form, and the reproduced image is displayed on the monitor 5.
【００１４】一方、前記記憶媒体６に記憶されている再
生データの内の音声データは、前記制御用ＣＰＵ１の制
御の下、前記記憶媒体６から読み出され、前記音声再生
回路２により前記スピーカ３に出力できる形態に再生さ
れ、前記スピーカ３から音声が出力される。On the other hand, audio data in the reproduction data stored in the storage medium 6 is read out from the storage medium 6 under the control of the control CPU 1 and is read by the audio reproduction circuit 2 into the speaker 3. And the sound is output from the speaker 3.
【００１５】ここで、前記画像再生回路４と前記音声再
生回路２は、前記制御用ＣＰＵ１の制御の下、装置間の
同期がとらえれ、これにより画像データと音声データを
同時に再生する。Here, under the control of the control CPU 1, the image reproducing circuit 4 and the audio reproducing circuit 2 capture synchronization between the devices, thereby reproducing image data and audio data simultaneously.
【００１６】ここで、前記記憶媒体６には、光ディスク
装置や磁気ディスク装置、磁気テープ装置あるいはメモ
リカードなどを用いることが可能であり、また、前記記
憶媒体６に記憶される再生データとしては、画像デー
タ、音声データ、及びこれらに付随した情報が記憶され
ている。但し、上記に示した前記記憶媒体６の装置及び
それに記憶されるデータは、例示であり、これに限定さ
れるものではない。Here, an optical disk device, a magnetic disk device, a magnetic tape device, a memory card, or the like can be used as the storage medium 6, and the reproduction data stored in the storage medium 6 is as follows. Image data, audio data, and information associated therewith are stored. However, the above-described device of the storage medium 6 and the data stored therein are merely examples, and the present invention is not limited thereto.
【００１７】次に、図２は、本実施の形態の画像データ
の構造を示した図であり、同図において、Ｄ１は図１に
おける記憶媒体６に記憶されている再生データ、Ａ１、
Ａ２、Ａ３、Ａ４、…、Ａｎ（ｎは整数）はフレーム毎
の画像データ（以下、画像フレームという）、Ｂ１、Ｂ
２、Ｂ３、Ｂ４、…、Ｂｎ（ｎは整数）は前記画像フレ
ームに対応した音声データ、Ｃ１、Ｃ２、Ｃ３、Ｃ４、
…、Ｃｎ（ｎは整数）は前記画像フレーム及びこれに対
応した前記音声データの組に割り当てられたアドレスで
ある。Next, FIG. 2 is a diagram showing the structure of image data according to the present embodiment. In FIG. 2, D1 is the reproduction data stored in the storage medium 6 in FIG.
A2, A3, A4,..., An (n is an integer) are image data for each frame (hereinafter, referred to as image frames), B1, B
2, B3, B4,..., Bn (n is an integer) are audio data corresponding to the image frame, C1, C2, C3, C4,
.., Cn (n is an integer) is an address assigned to the set of the image frame and the audio data corresponding to the image frame.
【００１８】ここで、前記再生データＤ１は、画像フレ
ームとこれに対応する音声データが組となり、該組みが
連続したものとして構成されており、該組となる画像フ
レームと音声データは同時に再生される。即ち、前記再
生データＤ１は、同時に再生される画像フレームと音声
フレームを一組とすると（Ａ１、Ｂ１）、（Ａ２、Ｂ
２）、…、（Ａｎ、Ｂｎ）の順序で再生される。Here, the reproduction data D1 is composed of a set of image frames and corresponding audio data, and the set is formed as a continuous set. The image frames and the audio data forming the set are reproduced simultaneously. You. That is, when the reproduction data D1 is a set of an image frame and an audio frame which are reproduced at the same time, (A1, B1), (A2, B
2),..., (An, Bn).
【００１９】更に、前記再生データＤ１内の画像フレー
ムと音声データの各組に割り当てられた前記アドレスを
指定することによって、再生データＤ１の任意の位置か
ら各データを読み出し、再生することができる。Further, by designating the address assigned to each set of the image frame and the audio data in the reproduction data D1, each data can be read from any position of the reproduction data D1 and reproduced.
【００２０】また、前記記憶媒体６に記憶されている前
記再生データＤ１には、他の画像データと識別するため
の識別情報としてファイル名ＦＤ１を与える。The reproduction data D1 stored in the storage medium 6 is given a file name FD1 as identification information for identifying it from other image data.
【００２１】以下、本発明の画像検索方法に係る、画像
データの検索に用いるファイル（以下、インデックスフ
ァイルという）を作成する手順を図２、図３を用い説明
する。Hereinafter, a procedure for creating a file (hereinafter, referred to as an index file) used for searching image data according to the image search method of the present invention will be described with reference to FIGS.
【００２２】ここで、図３は、前記インデックスファイ
ルのファイル構造を示した図であり、同図において、Ａ
３、Ｂ２、Ｂ３、Ｂ４、Ｃ３、ＦＤ１は、それぞれ図２
に示した画像フレーム、音声データ、アドレス、ファイ
ル名である。FIG. 3 is a diagram showing a file structure of the index file. In FIG.
3, B2, B3, B4, C3, and FD1 are respectively shown in FIG.
Are the image frame, audio data, address, and file name shown in FIG.
【００２３】図２において、ユーザが所望した場面が前
記再生データＤ１の画像フレームＡ３であった場合、前
記画像フレームＡ３を代表フレームとして取得し、これ
と共に該代表フレームに対応する音声データＢ３、及
び、該代表フレームの時間軸の過去方向と未来方向に位
置する音声データＢ２、Ｂ４と、該代表フレームのアド
レスＣ３と、該代表フレームを含む再生データＤ１を示
すファイル名ＦＤ１を取得する。In FIG. 2, when the scene desired by the user is the image frame A3 of the reproduction data D1, the image frame A3 is obtained as a representative frame, and together with the audio data B3 corresponding to the representative frame, The audio data B2 and B4 located in the past and future directions on the time axis of the representative frame, the address C3 of the representative frame, and the file name FD1 indicating the reproduction data D1 including the representative frame are obtained.
【００２４】更に、図３に示すように、上記各データを
元の再生データＤ１に従った時間軸の関係が保存できる
形式でインデックスファイルＩ１を作成し、図１におけ
る記憶媒体６に格納する。Further, as shown in FIG. 3, an index file I1 is created from the above data in a format in which the relationship of the time axis according to the original reproduction data D1 can be stored, and stored in the storage medium 6 in FIG.
【００２５】ここで、前記時間軸の関係を保存する手段
として、インデックスファイルＩ１では、各データを元
の再生データＤ１で再生される順序に従い、インデック
スファイルＩ１の先頭から末尾の方向に直線的に並べて
格納することにより、各データの時間軸の関係を保って
いる。Here, as means for storing the relationship of the time axis, in the index file I1, each data is linearly arranged in the direction from the beginning to the end of the index file I1 in accordance with the order of reproduction by the original reproduction data D1. By storing the data side by side, the relationship of the time axis of each data is maintained.
【００２６】次に、図４に前記方法で作成したインデッ
クスファイルＩ１を再生する手順を示す。Next, FIG. 4 shows a procedure for reproducing the index file I1 created by the above method.
【００２７】前記インデックスファイルＩ１を再生する
際には、まず前記インデックスファイルＩ１に格納され
た音声データＢ２が、前記図１における、記憶媒体６か
ら読み出され、音声再生回路２を介してスピーカ３から
出力される。音声データＢ２の再生終了後、インデック
スファイルＩ１の代表フレームＡ３と音声データＢ３
が、記憶媒体６から読み出され、代表フレームＡ３が、
画像再生回路４を介してモニタ５に表示されると共に、
音声データＢ３が、音声再生回路２を介してスピーカ３
から出力される。When the index file I1 is reproduced, first, the audio data B2 stored in the index file I1 is read from the storage medium 6 in FIG. Output from After the reproduction of the audio data B2 is completed, the representative frame A3 of the index file I1 and the audio data B3
Is read from the storage medium 6, and the representative frame A3 is
While being displayed on the monitor 5 via the image reproducing circuit 4,
The audio data B3 is transmitted to the speaker 3 via the audio reproduction circuit 2.
Output from
【００２８】音声データＢ３の再生が終了した後、記憶
媒体６からインデックスファイルＩ１の音声データＢ４
が読み出され、音声再生回路２を介してスピーカ３から
音声データＢ４が出力されるが、このとき、代表フレー
ムＡ３の再生処理は、音声データＢ３の再生終了後も継
続し、音声データＢ４の再生終了とともに、代表フレー
ムＡ３の再生を終了する。After the reproduction of the audio data B3 is completed, the audio data B4 of the index file I1 is read from the storage medium 6.
Is read out, and the audio data B4 is output from the speaker 3 via the audio reproduction circuit 2. At this time, the reproduction process of the representative frame A3 continues even after the reproduction of the audio data B3 is completed, and the reproduction of the audio data B4 is continued. At the same time as the end of the reproduction, the reproduction of the representative frame A3 ends.
【００２９】ここで、前記インデックスファイルＩ１に
よって所望の場面を検索した場合には、インデックスフ
ァイルＩ１に格納されている再生データＤ１のファイル
名ＦＤ１と代表フレームＡ３のアドレス情報Ｃ３に示さ
れた画像フレームより、再生データＤ１を再生する。Here, when a desired scene is searched by the index file I1, the image frame indicated by the file name FD1 of the reproduction data D1 and the address information C3 of the representative frame A3 stored in the index file I1. Thus, the reproduction data D1 is reproduced.
【００３０】尚、インデックスファイルに格納される音
声データの時間長は、過去方向、未来方向の個々に適正
な長さに設定できる。例えば、ユーザがインデックスフ
ァイルの示す画像データの場面を十分認識できるだけの
長さとすればよい。The time length of the audio data stored in the index file can be set to an appropriate length for each of the past and future directions. For example, the length may be set so that the user can sufficiently recognize the scene of the image data indicated by the index file.
【００３１】また、インデックスファイル内の代表フレ
ームと音声データの配置は、再生の際に元の画像データ
における時間軸の関係が保存されているのであれば、自
由に設定できるものとする。The arrangement of the representative frame and the audio data in the index file can be freely set as long as the relationship of the time axis in the original image data is preserved during reproduction.
【００３２】更に、インデックスファイルに格納される
情報は、画像フレームや音声データそのものでなく、再
生データに示されたアドレスのみを格納しておき、イン
デックスファイル再生の際に、格納されたアドレスに従
って必要な画像フレームあるいは音声データを再生デー
タから読み出してもよい。Further, the information stored in the index file is not the image frame or the audio data itself, but only the address indicated in the reproduction data, and is necessary according to the stored address when reproducing the index file. An appropriate image frame or audio data may be read from the reproduction data.
【００３３】本実施の形態では、ユーザが再生データの
内の画像フレームから代表フレームを選択したが、再生
データを一定の時間間隔で区切り、区切りごとの画像フ
レームを代表フレームとして選択したもの、または、再
生データの内の画像フレームから、画像フレームの不連
続点や音声データの無音区間等の特徴量を自動的に検出
し、検出された場面を代表フレームとして選択したもの
でもよい。In this embodiment, the user selects a representative frame from the image frames in the reproduction data. However, the reproduction data is divided at a fixed time interval, and the image frame for each division is selected as the representative frame, or Alternatively, a feature amount such as a discontinuity point of an image frame or a silent section of audio data may be automatically detected from an image frame of the reproduction data, and the detected scene may be selected as a representative frame.
【００３４】また、インデックスファイルの音声データ
の再生において、過去方向の音声の再生開始時に再生音
量のフェードイン、未来方向の再生終了時に再生音量の
フェードアウトを行うことにより、急に大音量の音声が
再生されたり、再生中の音声が突然終了することを防止
することができ、音声データの再生を滑らかにすること
ができる。Also, in the reproduction of the audio data of the index file, the reproduction volume is faded in at the start of reproduction of the sound in the past direction and the reproduction volume is faded out at the end of reproduction in the future direction. It is possible to prevent the sound being reproduced or the sound being reproduced from suddenly ending, and to smoothly reproduce the sound data.
【００３５】次に、本発明の第２の実施の形態を図５に
示す。Next, a second embodiment of the present invention is shown in FIG.
【００３６】図５は、静止画像データとそれに対応する
音声データより前記インデックスを作成する方法を示し
た図であり、同図において、Ｆ１は代表フレームとして
使用する静止画像データ、Ｅ１、Ｅ２、Ｅ３は連続した
音声データである。FIG. 5 is a diagram showing a method for creating the index from still image data and audio data corresponding to the still image data. In FIG. 5, F1 denotes still image data used as a representative frame, E1, E2, and E3. Is continuous audio data.
【００３７】前記静止画像データＦ１と、連続した前記
音声データＥ１、Ｅ２、Ｅ３に対して、静止画像データ
Ｆ１を音声データＥ１とＥ２の間に挿入し、Ｅ１、Ｆ
１、Ｅ２、Ｅ３の順に並んだ形のインデックスファイル
Ｉ２を構成する。For the still image data F1 and the continuous audio data E1, E2, E3, the still image data F1 is inserted between the audio data E1 and E2, and E1, F
An index file I2 is arranged in the order of 1, E2 and E3.
【００３８】前記インデックスファイルＩ２を本発明の
第１の実施の形態と同様の方法で記憶媒体６に記憶し、
また、所望の場面の検索を行う。これにより、静止画像
データＦ１のみを再生する場合に比べて再生時の臨場感
を増すことができる。The index file I2 is stored in the storage medium 6 in the same manner as in the first embodiment of the present invention,
Also, a search for a desired scene is performed. This makes it possible to increase the sense of reality at the time of reproduction as compared with the case where only the still image data F1 is reproduced.
【００３９】[0039]
【発明の効果】請求項１の発明によれば、代表フレーム
とその前後の音声データを含むインデックスファイルに
より、所望する場面の検索を行うことで、検索のための
情報量を増やし、これにより検索効率を向上させること
ができ、また、代表フレームだけを用いて検索する場合
と比べ臨場感を増す効果がある。According to the first aspect of the present invention, a desired scene is searched by using an index file including a representative frame and audio data before and after the representative frame, thereby increasing the amount of information for the search. Efficiency can be improved, and there is an effect of increasing the sense of realism as compared with a case where a search is performed using only the representative frame.
【００４０】また、音声データは、画像データに比べて
データ容量が小さいため、音声データの読み取りは、画
像データに比べて短時間で行うことができ、これによ
り、インデックスファイルの再生開始までにかかるユー
ザの待ち時間を短縮できると共に、インデックスファイ
ルの容量も小さいものとすることができる。Since the audio data has a smaller data volume than the image data, the audio data can be read in a shorter time than the image data. The waiting time of the user can be reduced, and the capacity of the index file can be reduced.
【００４１】また、請求項２の発明によれば、代表フレ
ームの再生前に過去方向の音声データが再生されるた
め、ユーザは、代表フレームが再生される前に再生中の
過去方向の音声データによって、当該インデックスファ
イルが所望する場面であるかどうか判断することができ
る。According to the second aspect of the present invention, since the past audio data is reproduced before the representative frame is reproduced, the user can reproduce the past audio data being reproduced before the representative frame is reproduced. Thus, it can be determined whether or not the index file is a desired scene.
【００４２】ここで、ユーザは、代表フレームが再生さ
れる前に再生中のインデックスファイルが所望する場面
でないと判断した場合、別のインデックスの再生に素早
く移行することができ、また、再生中のインデックスフ
ァイルが所望する場面であった場合、インデックスファ
イルに登録されている代表フレームのアドレス等を参照
することによって、画像データの再生に即座に移行する
ことができる。Here, if the user determines that the index file being reproduced is not the desired scene before the representative frame is reproduced, the user can quickly shift to reproduction of another index. When the index file is a desired scene, it is possible to immediately shift to the reproduction of the image data by referring to the address of the representative frame registered in the index file.
【００４３】また、請求項３の発明によれば、インデッ
クスファイルの音声データの再生において、過去方向の
音声の再生開始時に再生音量のフェードイン、未来方向
の再生終了時に再生音量のフェードアウトを行うことに
より、急に大音量の音声が再生されたり、再生中の音声
が突然終了することを防止することができ、音声データ
の再生を滑らかにすることができる。According to the third aspect of the present invention, in reproducing the audio data of the index file, the reproduction volume is faded in at the start of the reproduction of the audio in the past direction, and the reproduction volume is faded out at the end of the reproduction in the future direction. Accordingly, it is possible to prevent suddenly reproducing a high-volume sound or abruptly ending the sound being reproduced, and to smoothly reproduce the sound data.
【００４４】また、請求項４の発明によれば、再生デー
タが記憶されている記憶媒体にインデックスファイルを
記憶することでインデックスファイルを記憶するための
個別の記憶媒体を必要とせず、これによりコストの削減
を図ることができる。According to the fourth aspect of the present invention, the index file is stored in the storage medium storing the reproduction data, so that a separate storage medium for storing the index file is not required, thereby reducing the cost. Can be reduced.
【図１】本発明の実施の形態における画像検索方法を実
現するブロック図である。FIG. 1 is a block diagram for realizing an image search method according to an embodiment of the present invention.
【図２】本発明の実施の形態における再生データのファ
イル構造である。FIG. 2 shows a file structure of reproduction data according to the embodiment of the present invention.
【図３】本発明の実施の形態におけるインデックスファ
イルの構造である。FIG. 3 shows the structure of an index file according to the embodiment of the present invention.
【図４】本発明の実施の形態におけるインデックスファ
イルの再生順序である。FIG. 4 shows a reproduction order of index files according to the embodiment of the present invention.
【図５】本発明の第２の実施の形態における音声及び画
像データのファイル構造である。FIG. 5 is a file structure of audio and image data according to the second embodiment of the present invention.
１ 制御用ＣＰＵ ２ 音声再生回路 ３ スピーカ ４ 画像再生回路 ５ モニタ ６ 記憶媒体 Ａ１、Ａ２、．．．、Ａｎ 画像フレーム Ｂ１、Ｂ２、．．．、Ｂｎ 音声データ Ｃ１、Ｃ２、．．．、Ｃｎ アドレス Ｉ１、Ｉ２ インデックスファイル Ｄ１ 再生データ ＦＤ１ 再生データファイル名 Ｆ１ 静止画像データ Ｅ１、Ｅ２、Ｅ３ 音声データ DESCRIPTION OF SYMBOLS 1 Control CPU 2 Audio reproduction circuit 3 Speaker 4 Image reproduction circuit 5 Monitor 6 Storage medium A1, A2,. . . , An image frames B1, B2,. . . , Bn audio data C1, C2,. . . , Cn Address I1, I2 Index file D1 Playback data FD1 Playback data file name F1 Still image data E1, E2, E3 Audio data
Claims (4)
より、所望の場面を検索する画像検索方法において、 前記再生データより、１または２以上の代表画像を抽出
する工程と、 該代表画像に対応する音声データ、及び、該代表画像の
前のフレームの画像に対応する音声データ、及び／また
は、該代表画像の後ろのフレームの画像に対応する音声
データを抽出する工程と、 該代表画像に割り当てられたアドレスを抽出する工程
と、 該代表画像が含まれる前記再生データのファイル名を抽
出する工程より成り、 少なくとも前記それぞれの工程から得られたデータによ
り、インデックスファイルを構成し、該インデックスフ
ァイルにより所望の場面を検索することを特徴とした画
像検索方法。1. An image retrieval method for retrieving a desired scene from reproduction data including at least sound and an image, comprising: extracting one or more representative images from the reproduction data; Extracting audio data and audio data corresponding to an image of a frame before the representative image and / or audio data corresponding to an image of a frame after the representative image; and Extracting a file name of the reproduction data including the representative image. An index file is configured by at least the data obtained from each of the steps. An image search method characterized by searching for a scene.
り、 前記代表画像の前のフレームの画像に対応する音声デー
タを再生する工程と、 前記代表画像を再生すると共に、該代表画像に対応する
音声データを再生する工程と、 前記代表画像を再生すると共に、該代表画像の後ろのフ
レームの画像に対応する音声データを再生する工程より
成り、 前記代表画像とその前後の音声データを同時に再生する
ことにより、所望の場面を検索することを特徴とする請
求項１に記載の画像検索方法。2. A step of reproducing audio data corresponding to an image of a frame preceding the representative image from data of the index file, and reproducing the representative image and reproducing audio data corresponding to the representative image. And reproducing the representative image, and reproducing audio data corresponding to an image of a frame subsequent to the representative image. By simultaneously reproducing the representative image and the audio data before and after the representative image, 2. The image search method according to claim 1, wherein the scene is searched.
所望の場面を検索するに際し、 音声データの再生開始時に、再生音量のフェードイン、
及び／または、音声データの再生終了時に、再生音量の
フェードアウトを行う工程を有することを特徴とする請
求項１、または、請求項２に記載の画像検索方法。3. When a desired scene is searched from the data of the index file, a reproduction volume fade-in,
3. The image search method according to claim 1, further comprising a step of performing a fade-out of a reproduction volume at the end of reproduction of the audio data.
データが記憶されている記憶媒体に記憶することを特徴
とする請求項１乃至請求項３のいずれかに記載の画像検
索方法。4. The image search method according to claim 1, wherein the index file is stored in a storage medium in which the reproduction data is stored.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP10137884A JPH11331779A (en) | 1998-05-20 | 1998-05-20 | Image retrieving method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP10137884A JPH11331779A (en) | 1998-05-20 | 1998-05-20 | Image retrieving method |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH11331779A true JPH11331779A (en) | 1999-11-30 |
Family
ID=15208943
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP10137884A Pending JPH11331779A (en) | 1998-05-20 | 1998-05-20 | Image retrieving method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH11331779A (en) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005352923A (en) * | 2004-06-11 | 2005-12-22 | Sony Corp | Device and method for storing information |
| JP2005352922A (en) * | 2004-06-11 | 2005-12-22 | Sony Corp | Device and method for storing information |
| EP1978520A3 (en) * | 1999-09-17 | 2014-12-03 | Sony Corporation | Recording apparatus, recording method, and disc shaped recording medium |
-
1998
- 1998-05-20 JP JP10137884A patent/JPH11331779A/en active Pending
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP1978520A3 (en) * | 1999-09-17 | 2014-12-03 | Sony Corporation | Recording apparatus, recording method, and disc shaped recording medium |
| JP2005352923A (en) * | 2004-06-11 | 2005-12-22 | Sony Corp | Device and method for storing information |
| JP2005352922A (en) * | 2004-06-11 | 2005-12-22 | Sony Corp | Device and method for storing information |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| RU2314653C2 (en) | Method and device for processing information, program and record carrier | |
| JP5128291B2 (en) | Metadata recording medium for providing an extended search function, reproducing method and apparatus thereof | |
| EP0962931B1 (en) | Audio data and still picture recording medium and corresponding playback apparatus which enable displaying of a still picture at a plurality of predetermined timings during playback of recorded audio data | |
| JP2007504778A (en) | Recording / reproducing method and video recording / reproducing system | |
| JP2006012415A (en) | Reproducing apparatus of information for still image | |
| JP2005346747A (en) | Information reproduction device | |
| JP4198711B2 (en) | Recording / reproducing system, recording apparatus, reproducing apparatus, recording medium, recording / reproducing method, recording method, reproducing method, program, and recording medium | |
| JP2007165959A (en) | Image display | |
| KR100646301B1 (en) | Data recording and reproducing device, memory device and file access method | |
| US20050114793A1 (en) | Recording apparatus, reproducing apparatus, recording method, reproducing method, and recording medium thereof | |
| KR100652763B1 (en) | Method for editing moving images in a mobile terminal and apparatus therefor | |
| JPWO2006059563A1 (en) | Program list playback method and display method | |
| JPH11331779A (en) | Image retrieving method | |
| KR100477119B1 (en) | File reproduction apparatus and file reproduction method | |
| JP3780910B2 (en) | Optical disk recording device | |
| JP2004520674A (en) | Method and apparatus for copying and processing audiovisual information | |
| JP2003308234A (en) | File reproducing apparatus and file reproducing method | |
| JPH0686222A (en) | Still picture reproducing device | |
| JPH11213630A (en) | Reproduced image sound data specifying method, image sound data editing method, reproduced image sound data specifying device and image sound data editing device | |
| JP4168569B2 (en) | Video editing device | |
| JP2007165957A (en) | Image display | |
| JP3456006B2 (en) | Media playback device | |
| JP3626080B2 (en) | Moving image processing device | |
| JP4759093B2 (en) | Content storage control system and music playback apparatus thereof | |
| JPS63177267A (en) | Picture filing device |