JPH0756942A

JPH0756942A - Picture data retrieval method

Info

Publication number: JPH0756942A
Application number: JP5203885A
Authority: JP
Inventors: Kazunori Nakano; 和典中野; Yoichi Seto; 洋一瀬戸
Original assignee: Hitachi Ltd
Current assignee: Hitachi Ltd
Priority date: 1993-08-18
Filing date: 1993-08-18
Publication date: 1995-03-03

Abstract

PURPOSE:To reduce the transmission of unnecessary picture data and to shorten retrieval time by executing the expanding stop processing and the transmission stop processing of unnecessary picture data retrieved in the middle of an expanding processing by means of progressive encoding. CONSTITUTION:In a data base system for preservation 204, a picture and a browsing picture as auxiliary information of a picture retrieval are compression- processed 320, and they are accumulated in a picture file 321 and a browsing picture file 322. In a transmission processing 303, the browsing picture becoming a candidate by a browsing picture directory management 302 is transmitted to an analysis system 206. When the target picture is visually recognized from the display picture and the picture is selected by click input using a mouse 326 in a selection processing 308 while a stepwise expanding processing 304 by progressive encoding is executed, the stepwise expanding of the browsing picture is stopped by an expanding stop processing 307. The stepwise transmission of the browsing picture is stopped by a transmission stop processing 308 and the picture is retrieved from the selected browsing picture.

Description

【発明の詳細な説明】Detailed Description of the Invention

【０００１】[0001]

【産業上の利用分野】本発明は、データベースに蓄積さ
れる医療画像，衛星画像，商品カタログなどの大容量の
画像データの検索処理に係わり、特に候補画像を画面に
表示し目的の画像を高速に検索する画像データ検索方法
に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a search process for large-capacity image data such as medical images, satellite images, and product catalogs stored in a database, and in particular displays candidate images on a screen to display the target image at high speed. The present invention relates to a method for searching image data.

【０００２】[0002]

【従来の技術】医療画像や商品カタログなどの画像を管
理するデータベースシステムにおいて、データはセンタ
で集中管理され、利用者はネットワークを介してデータ
を検索する方式が一般的である。データを検索する際、
目的のデータを選択するには、複数のブラウズ（概略）
画像を高速に転送表示し、目視による判定が有効であ
る。2. Description of the Related Art In a database system for managing images such as medical images and merchandise catalogs, data is centrally managed in a center, and a user generally searches the data via a network. When searching for data
Multiple browses (outline) to select the desired data
Images can be transferred and displayed at high speed, and visual judgment is effective.

【０００３】ブラウズ画像といってもデータ量は多いた
め、検索に際し、ネットワークの伝送負荷を軽減する必
要がある。伝送負荷を軽減する方法として、ＩＳＯ（国
際標準化機構）とＣＣＩＴＴ（国際電信電話諮問委員
会）で標準化された、「マルチメディア符号化の国際標
準」（安田浩編著，１９９１年６月３０日発行，丸善株
式会社）に記載のＪＰＥＧ（Joint Photographic Exper
ts Group）などの圧縮伸張方法が有効である。Ｎ−ＩＳ
ＤＮ（サービス総合ディジタル網）のデータ伝送は、１
秒間に６４ｋビットの伝送速度であり、縦，横１０２４
画素四方、赤，緑，青、各８ビットの画像を伝送するの
に３８４秒かかる。画像データを半分に圧縮し伝送する
ことにより、伝送時間は半分の１９２秒に短縮でき伝送
の高速化に有効である。Since a browse image has a large amount of data, it is necessary to reduce the transmission load on the network when searching. As a method for reducing transmission load, "International Standard for Multimedia Coding" (edited by Hiroshi Yasuda, published June 30, 1991) standardized by ISO (International Organization for Standardization) and CCITT (International Telegraph and Telephone Consultative Committee) , Maruzen Co., Ltd. JPEG (Joint Photographic Exper)
ts Group) and compression methods are effective. N-IS
Data transmission of DN (Service Integrated Digital Network) is 1
The transmission speed is 64 kbits per second, and the vertical and horizontal directions are 1024.
It takes 384 seconds to transmit an image of 8 bits each for each side of pixel, red, green, and blue. By compressing the image data in half and transmitting it, the transmission time can be shortened to 192 seconds, which is effective for speeding up the transmission.

【０００４】圧縮伸張処理では一つの画像データに対し
一つの圧縮データを作成し伝送し圧縮データを伸張し表
示を行う標準圧縮伸張方法と、画像データを複数の解像
度に分離し圧縮して、データ量の少ない低解像度の画像
からデータ量の多い高解像度の画像を順次画像データを
伝送し伸張，表示を繰り返す段階的圧縮伸張方法があ
る。In the compression / expansion processing, a standard compression / expansion method of creating and transmitting one piece of compressed data for one piece of image data to expand and display the compressed data, and a method of separating the image data into a plurality of resolutions and compressing them There is a stepwise compression / expansion method in which image data is sequentially transmitted from a low-resolution image with a small amount to a high-resolution image with a large amount of data, and expansion and display are repeated.

【０００５】段階的圧縮伸張方法は画像内容の確認を伝
送初期の低解像度画像表示時に行うことができる。この
ためブラウズ画像の検索処理には段階的圧縮伸張方法が
有効である。段階的圧縮伸張方法の一例として文献に記
述のＪＰＥＧのプログレッシブ符号化方法がある。In the stepwise compression / expansion method, the image contents can be confirmed at the time of displaying the low resolution image at the initial stage of transmission. Therefore, the stepwise compression / expansion method is effective for the browse image search processing. An example of the stepwise compression / expansion method is the JPEG progressive encoding method described in the literature.

【０００６】プログレッシブ符号化は文献によれば、サ
クセシブアプロキシメーション（Successive Approxi
mation方式，以下ＳＡ方式と呼ぶ）とスペクトラルセ
レクション（Spectral Selection方式，以下ＳＳ方式と
呼ぶ）とハイアラーキカル方式がある。例えば、ＳＡ方
式は、圧縮画像を上位ビットから下位ビットまでビット
毎に分けて符号化する方法である。According to the literature, progressive coding is based on the successive approximation.
mation method, hereinafter referred to as SA method), spectral selection (Spectral Selection method, hereinafter referred to as SS method), and hierarchical method. For example, the SA method is a method of encoding a compressed image by dividing each bit from upper bits to lower bits.

【０００７】ＳＡ方式による圧縮処理は、画像の冗長な
データを削除する系列変換と符号化を行うエントロピ符
号化とデータをビット毎に分割するビットスライスより
構成される。系列変換は離散コサイン変換（ＤＣＴ）処
理と量子化処理よりなる。画像にＤＣＴ処理を行い画像
を空間周波数に変換し、量子化処理で圧縮率を高めてい
る。ビットスライスは、段階的な画像を作成するために
用いられる。The compression process by the SA method is composed of entropy coding for performing series conversion and coding for deleting redundant data of an image and bit slice for dividing the data into bits. The sequence conversion includes discrete cosine transform (DCT) processing and quantization processing. DCT processing is performed on the image to convert the image into a spatial frequency, and the compression rate is increased by the quantization processing. Bit slices are used to create a graded image.

【０００８】図３にその例を示す。画素８ビットの画像
１０１に対してＤＣＴ処理，量子化処理を行い、ＤＣＴ
係数１０２を得る。得られたＤＣＴ係数１０２のｍビッ
ト目をｂｍで表し、分割したｎデータ目を第ｎプレーン
と呼ぶ。ＤＣＴ係数１０２が８ビットの場合、上位ビッ
トからｂ７，ｂ６，ｂ５，ｂ４ビットを第一プレーン１
１１として分割する。以下、ｂ３を第二プレーン１１
２，ｂ２を第三プレーン１１３，ｂ１を第四プレーン１
１４，ｂ０を第五プレーン１１５として分割する。分割
した各プレーンはエントロピ符号化処理により符号化さ
れる。エントロピ符号化処理はハフマン符号化を用いて
画像の冗長なデータを削除する。FIG. 3 shows an example thereof. DCT processing and quantization processing are performed on the image 101 having 8 bits of pixels, and DCT processing is performed.
Obtain the coefficient 102. The m-th bit of the obtained DCT coefficient 102 is represented by bm, and the divided n-th data is called the n-th plane. When the DCT coefficient 102 is 8 bits, the b7, b6, b5, and b4 bits from the upper bit are set to the first plane 1.
Divide as 11. Hereinafter, b3 is the second plane 11
2, b2 is the third plane 113, b1 is the fourth plane 1
14 and b0 are divided as the fifth plane 115. Each divided plane is encoded by the entropy encoding process. The entropy coding process uses Huffman coding to remove redundant data in the image.

【０００９】伸張処理は圧縮処理の逆の処理より構成さ
れる、復号化，ビット結合，逆量子化，逆コサイン変換
（ＩＤＣＴ）の各処理を繰り返し行って画像データを再
生する。ビット結合処理はビットスライス処理の逆の処
理により、分割されたビット毎のＤＣＴ係数を元の画像
に戻す。The decompression process is a reverse process of the compression process, and repeatedly performs the processes of decoding, bit combination, inverse quantization, and inverse cosine transform (IDCT) to reproduce image data. The bit combining process is the reverse of the bit slicing process, and returns the divided DCT coefficients for each bit to the original image.

【００１０】Ｎ−ＩＳＤＮなどのネットワークを介して
圧縮画像を伝送し、ＳＡ方式などのプログレッシブ符号
化による伸張処理を行うと低解像度の画像から順に高解
像度の伸張画像が得られる。When a compressed image is transmitted via a network such as N-ISDN and subjected to decompression processing by progressive coding such as SA method, a high resolution decompressed image is obtained in order from a low resolution image.

【００１１】[0011]

【発明が解決しようとする課題】上記従来技術であるＮ
−ＩＳＤＮなどのネットワークを介したＪＰＥＧのプロ
グレッシブ符号化を用いた伸張処理による画像データ検
索によれば、画像内容の確認を伝送初期の低解像度画像
表示時に行うことができる。しかし、ＪＰＥＧのプログ
レッシブ符号化による伸張処理では、画像の伝送および
伸張を途中で止める機能と再実行する機能がない。この
ため、画像の伝送および伸張が終了し最終的な高解像度
の画像を表示するまで、他の操作、例えば次の検索画像
を表示することはできず、画像検索に時間がかかる問題
がある。DISCLOSURE OF THE INVENTION Problems to be Solved by the Invention
According to the image data search by the decompression process using the progressive coding of JPEG via the network such as ISDN, the image content can be confirmed at the time of displaying the low resolution image at the initial stage of transmission. However, in the decompression processing by progressive coding of JPEG, there is no function for stopping transmission and decompression of an image and a function for re-execution. Therefore, another operation, for example, the next search image cannot be displayed until the transmission and expansion of the image are completed and the final high-resolution image is displayed, and there is a problem that the image search takes time.

【００１２】[0012]

【課題を解決するための手段】上記課題を解決する手段
として以下の方法がある。画像データを蓄積するデータ
ベースより複数の候補画像をネットワークを介して伝送
し、端末に複数同時に表示する。端末は圧縮した伝送画
像に対してプログレッシブ符号化による伸張処理を行
う。伸張表示途中で不要なデータを選択した場合、表示
を止め表示領域に次の検索候補画像を表示する処理を行
う。また、表示途中で目的のデータを確認した場合、他
の画像の表示を止める処理と必要な画像のみ表示する伸
張処理を継続する。さらに、表示を停止した画像に対し
表示を再実行する処理を行うことにより達成する。Means for Solving the Problems There are the following methods for solving the above problems. A plurality of candidate images are transmitted via a network from a database that stores image data and are simultaneously displayed on a terminal. The terminal performs decompression processing by progressive coding on the compressed transmission image. If unnecessary data is selected during the decompression display, the display is stopped and the next search candidate image is displayed in the display area. When the target data is confirmed during the display, the process of stopping the display of other images and the decompression process of displaying only the necessary images are continued. Further, it is achieved by performing a process of re-displaying the image whose display is stopped.

【００１３】具体的には、以下の方法を用いる。複数の
検索画像の同時表示の方法は、データベースから複数の
検索画像を伝送し端末装置で複数表示する処理にて行
う。また、プログレッシブ符号化による伸張処理の途中
で表示を止めるには、データベースの画像データの伝送
停止処理と端末の伸張停止処理を設けることにて行う。
さらに、表示を再実行するには、データベースの画像デ
ータの伝送再実行処理と端末の伸張再実行処理を設ける
ことで行う。Specifically, the following method is used. The method of simultaneously displaying a plurality of search images is performed by transmitting a plurality of search images from the database and displaying the plurality of search images on the terminal device. Further, in order to stop the display in the middle of the decompression process by the progressive coding, the transmission stop process of the image data of the database and the decompression stop process of the terminal are provided.
Further, the display is re-executed by providing a transmission re-execution process of image data of the database and a decompression re-execution process of the terminal.

【００１４】[0014]

【作用】上記手段は以下のように作用する。すなわち、
プログレッシブ符号化による伸張処理の途中で、検索し
た不要な画像データの伝送停止処理および次の画像デー
タの伝送処理を行うことで、不要な画像データの伝送が
削減でき、初期の伝送段階で、次の検索画像の表示が可
能となり、検索時間を短縮することができる。また、プ
ログレッシブ符号化による伸張処理の途中で、画像の選
択を行った場合、他の画像データの伝送停止処理を行う
ことで、必要な画像データの高速な伝送ができ、画像デ
ータの表示の高速化が可能となるため、伝送負荷の軽
減，検索時間および表示時間を短縮することができる。
さらに、表示を停止した画像に対してプログレッシブ符
号化による伸張処理の再実行を行った場合、画像データ
の伝送再実行処理を行うことで、表示途中の画像データ
の再実行ができ、プログレッシブ符号化による伸張処理
の高速復帰が可能となるため、検索時間を短縮すること
ができる。The above means operates as follows. That is,
The transmission of unnecessary image data can be reduced by performing transmission processing of transmission of the unnecessary image data that has been searched for and transmission processing of the next image data during the decompression processing by progressive encoding. The search image can be displayed, and the search time can be shortened. In addition, when an image is selected during the decompression process by progressive encoding, the process of stopping the transmission of other image data enables the required image data to be transmitted at high speed, and the image data can be displayed at high speed. Therefore, the transmission load can be reduced, and the search time and display time can be shortened.
Furthermore, when the decompression process by progressive coding is re-executed for the image whose display has been stopped, the image data in the middle of display can be re-executed by performing the image data transmission re-execution process, and progressive coding can be performed. Since the decompression process can be returned at high speed by using, the search time can be shortened.

【００１５】[0015]

【実施例】【Example】

（実施例１）図２は本発明を適用した地球環境観測地上
情報処理システムのブロック図である。(Embodiment 1) FIG. 2 is a block diagram of the earth environment observation ground information processing system to which the present invention is applied.

【００１６】地球環境観測地上情報処理システムは、衛
星２０１から送られてくる画像データを受信する受信シ
ステム２０２と、受信データを処理するデータ処理シス
テム２０３と、そのデータを保存管理する保存用データ
ベースシステム２０４とデータを解析する解析システム
２０６から成り、各々のシステムはローカルエリアネッ
トワークなどのネットワーク２０５により接続される。The earth environment observing ground information processing system comprises a receiving system 202 for receiving image data sent from a satellite 201, a data processing system 203 for processing the received data, and a storage database system for storing and managing the data. 204 and an analysis system 206 for analyzing data, and each system is connected by a network 205 such as a local area network.

【００１７】本システムの目的は、利用者が、解析シス
テム２０６よりＩＳＤＮなどのネットワーク２０７を介
して、保存用データベースシステム２０４から画像を検
索することである。The purpose of this system is to allow the user to retrieve an image from the storage database system 204 by the analysis system 206 via the network 207 such as ISDN.

【００１８】本発明の検索方法を述べる前に、保存用の
データベースシステムに蓄積するデータの種類と蓄積方
法について、図１に示す処理ブロック図により説明す
る。Before describing the search method of the present invention, the type of data to be stored in the database system for storage and the storage method will be described with reference to the processing block diagram shown in FIG.

【００１９】保存用データベースシステム２０４に蓄積
するデータは、画像および画像検索の補助情報としての
ブラウズ画像である。これらの画像を圧縮処理３２０し
画像ファイル３２１とブラウズ画像ファイル３２２に蓄
積する。ブラウズ画像は原画像を間引き、データ量を少
なくした検索用の画像であり、ＪＰＥＧのプログレッシ
ブ符号化などの段階的圧縮方法を用いて圧縮する。ＪＰ
ＥＧの圧縮方法にはプログレッシブ符号化による圧縮の
ほかに、標準圧縮方法として画像を一括して圧縮するベ
ースライン圧縮がある。保存用データベースシステム２
０４に蓄積する画像はＪＰＥＧのベースライン圧縮方法
などにより圧縮される。The data stored in the storage database system 204 is an image and a browse image as auxiliary information for image retrieval. These images are compressed 320 and stored in the image file 321 and the browse image file 322. The browse image is an image for retrieval in which the original image is thinned out and the amount of data is reduced, and is compressed using a stepwise compression method such as JPEG progressive encoding. JP
In addition to the progressive coding, the EG compression method includes a baseline compression that collectively compresses images as a standard compression method. Database system for storage 2
The image stored in 04 is compressed by the JPEG baseline compression method or the like.

【００２０】次に、画像検索方法について、図１に示す
処理ブロック図と図４に示す画面フローチャートにより
説明する。Next, the image retrieval method will be described with reference to the processing block diagram shown in FIG. 1 and the screen flow chart shown in FIG.

【００２１】検索条件入力処理３０１では、利用者３２
５が、キーボード３２４を用いてセンサ名，撮影年月
日，緯度・経度の検索条件を入力する。検索条件入力処
理301の検索条件画面４０１は、センサ名４０４，撮影
年月日４０５，緯度・経度406からなる。例えば、検索
条件としてランドサット衛星のＴＭセンサ，１９９２年
４月１日，北緯４５度東経１３５度の画像の場合にはＴ
Ｍ，１９９２／４／１，４５／１３５を入力する。In the search condition input processing 301, the user 32
5 uses the keyboard 324 to input search conditions such as sensor name, shooting date, and latitude / longitude. The search condition screen 401 of the search condition input processing 301 includes a sensor name 404, a shooting date 405, and a latitude / longitude 406. For example, as a search condition, in the case of TM sensor of Landsat satellite, April 1, 1992, image of 45 degrees north latitude and 135 degrees east longitude, T
Input M, 1992/4/1, 45/135.

【００２２】ブラウズ画像ディレクトリ管理３０２で
は、図５に示すブラウズ画像検索テーブル５０１を用い
てブラウズ画像ファイル３２２から検索条件に該当する
候補画像を検索する。ブラウズ画像検索テーブル５０１
は、センサ名５０２，撮影年月日５０３，緯度経度５０
４およびブラウズ画像ファイル３２２の番号５０５とフ
ァイルインデックス５０６を管理する。例えば、検索条
件がＴＭであった場合、３番目のカラムが該当し、該当
するブラウズ画像のファイル番号は１，３２０，５８，
１０４の四つある。ブラウズ画像ディレクトリ管理３０
２は、ブラウズ画像ファイル３２２から該当するファイ
ル番号の候補ブラウズ画像を伝送する。In the browse image directory management 302, the browse image search table 501 shown in FIG. 5 is used to search the browse image file 322 for candidate images corresponding to the search condition. Browse image search table 501
Is sensor name 502, date of photography 503, latitude and longitude 50
4 and the browse image file 322 number 505 and file index 506 are managed. For example, when the search condition is TM, the third column is applicable, and the corresponding browse image file numbers are 1,320,58,
There are four 104. Browse image directory management 30
2 transmits the candidate browse image of the corresponding file number from the browse image file 322.

【００２３】伝送処理３０３では、ブラウズ画像ディレ
クトリ管理３０２により候補にあがったブラウズ画像に
対して、解析システム２０６に伝送を行う。伝送するブ
ラウズ画像は、ＳＡ方式によるビット毎の分割したプレ
ーンを用いたプログレッシブ符号化の圧縮画像である。
伝送処理では、Ｎ−ＩＳＤＮを介して、１プレーンの画
像から伝送を始め順次下位プレーンを伝送する。また、
ブラウズ画像ディレクトリ管理３０２により複数の候補
画像がある場合、伝送処理３０３では四つのブラウズ画
像に対し一定の時間ごとに伝送処理を切り替えて実行す
る時分割処理により伝送する。In the transmission processing 303, the browse images selected as candidates by the browse image directory management 302 are transmitted to the analysis system 206. The browse image to be transmitted is a progressive-compression-compressed image using planes divided for each bit by the SA method.
In the transmission processing, transmission is started from the image of one plane through N-ISDN, and the lower planes are sequentially transmitted. Also,
When there are a plurality of candidate images according to the browse image directory management 302, the transmission process 303 transmits the four browse images by a time division process in which the transmission process is switched and executed at regular intervals.

【００２４】伝送処理３０３により伝送されたブラウズ
画像に対し伸張処理をする。JPEGのＳＡ方式による段階
的伸張処理３０４では、ビット毎に分割したプレーンに
対し、復号化，ビット結合，逆量子化，逆ＤＣＴの伸張
処理を繰り返し処理するループ処理を行う。詳細を以下
に示す。The decompression process is performed on the browse image transmitted by the transmission process 303. In the JPEG SA stepwise decompression process 304, a loop process is repeatedly performed on a plane divided for each bit by repeatedly performing decoding, bit combination, dequantization, and decompression of DCT. Details are shown below.

【００２５】復号化処理では、ハフマン符号を用いて伝
送される各プレーンをエントロピ復号化し、ビット毎の
ＤＣＴ係数を出力する。In the decoding process, each plane transmitted using the Huffman code is entropy-decoded and the DCT coefficient for each bit is output.

【００２６】ビット結合処理では、圧縮処理で行うビッ
トスライス処理の逆処理を行い、ビット毎のプレーンを
結合処理する。結合処理により結合されるＤＣＴ係数を
ｙ０とする。第一プレーンが伝送された場合（数１）に
より第一プレーンのＤＣＴ係数ｙ１を算出し、（数６）
により結合されるＤＣＴ係数ｙ０を算出する。例えば、
第一プレーンのｂ７が１、ｂ６が０、ｂ５が１、ｂ４が
０の場合、（ｂ７・ｂ６・ｂ５・ｂ４）は１０１０とな
り、ｙ１は（数１）により１０１０００００となる。ｙ
０は（数６）により１０１０００００となる。第二プレ
ーンが伝送された場合（数２）および（数６）により、
第一プレーンと第二プレーンを結合する。第二プレーン
のｂ３が１の場合、ｙ２は（数２）により１０００とな
り、ｙ０は（数６）により１０１０１０００となる。以
下、（数３）と（数４）および（数５）を用いて第五プ
レーンまでを結合することにより、元のＤＣＴ係数が得
られる。In the bit combining process, the reverse process of the bit slice process performed in the compression process is performed to combine the planes for each bit. The DCT coefficient combined by the combining process is y0. When the first plane is transmitted (Equation 1), the DCT coefficient y1 of the first plane is calculated, and (Equation 6)
The DCT coefficient y0 combined by is calculated. For example,
When b7 of the first plane is 1, b6 is 0, b5 is 1, and b4 is 0, (b7 · b6 · b5 · b4) becomes 1010 and y1 becomes 10100000 according to (Equation 1). y
0 becomes 10100000 according to (Equation 6). When the second plane is transmitted (Equation 2) and (Equation 6),
Join the first and second planes. When b3 of the second plane is 1, y2 becomes 1000 according to (Equation 2) and y0 becomes 10101000 according to (Equation 6). The original DCT coefficient is obtained by connecting the fifth plane up to the following using (Equation 3), (Equation 4), and (Equation 5).

【００２７】[0027]

【数１】 [Equation 1]

【００２８】[0028]

【数２】 [Equation 2]

【００２９】[0029]

【数３】 [Equation 3]

【００３０】[0030]

【数４】 [Equation 4]

【００３１】[0031]

【数５】 [Equation 5]

【００３２】[0032]

【数６】 [Equation 6]

【００３３】ビット結合処理により結合された周波数空
間のＤＣＴ係数に対し周波数毎に異なる値を持つ量子化
テーブルを用いて逆量子化を行う。Dequantization is performed on the DCT coefficients in the frequency space combined by the bit combining process using a quantization table having different values for each frequency.

【００３４】逆量子化された周波数空間のＤＣＴ係数に
対して逆ＤＣＴ処理を行い原画像を再生する。An inverse DCT process is performed on the inversely quantized DCT coefficient in the frequency space to reproduce the original image.

【００３５】伝送処理３０３から伝送されるブラウズ画
像が複数あった場合、一つのブラウズ画像に対して一つ
の段階的伸張処理を行い一定の時間ごとに段階的伸張処
理を切り替えて実行する時分割処理により実行する。When there are a plurality of browse images transmitted from the transmission process 303, one stepwise decompression process is performed on one browse image, and the stepwise decompression process is switched at fixed time intervals to be executed. Run by.

【００３６】表示処理３０５では、段階的伸張処理３０
４により得られたブラウズ画像を画面上に表示する。検
索画面４０２は、ブラウズ画像４０７から４１０よりな
り、一度に四つの候補ブラウズ画像を表示する。In the display processing 305, the stepwise expansion processing 30 is performed.
The browse image obtained in step 4 is displayed on the screen. The search screen 402 consists of browse images 407 to 410 and displays four candidate browse images at a time.

【００３７】選択処理３０６では、表示画像から目的の
画像を目視により確認し、マウス３２６を用いたクリッ
ク入力により画像を選択する。例えば、検索画面４０２
におけるブラウズ画像４０８をクリックする。In the selection process 306, the target image is visually confirmed from the displayed image, and the image is selected by click input using the mouse 326. For example, the search screen 402
Click the browse image 408 in.

【００３８】選択処理３０６より画像が選択された場
合、ブラウズ画像の段階的伸張を停止する。伸張停止処
理３０７は段階的伸張処理３０４に対しループ処理を中
断させる割込み処理を行い、復号化，ビット結合，逆量
子化，逆ＤＣＴの各処理を繰り返し行うループ処理を停
止させる。また、複数のブラウズ画像に対して一定時間
ごとに段階的伸張処理を切り替えて実行する時分割処理
を行っていた場合、各々の段階的伸張処理に割込みをか
けて段階的伸張を停止する。When the image is selected by the selection processing 306, the stepwise expansion of the browse image is stopped. The decompression stop process 307 performs an interrupt process for interrupting the loop process with respect to the stepwise decompression process 304, and stops the loop process that repeatedly performs each process of decoding, bit combination, inverse quantization, and inverse DCT. Further, when the time-division processing is performed in which the stepwise expansion processing is switched and executed at regular intervals for a plurality of browse images, the stepwise expansion processing is interrupted and the stepwise expansion is stopped.

【００３９】選択処理３０６により画像が選択された場
合、ブラウズ画像の段階的伝送を停止する。伝送停止処
理３０８は伝送処理３０３に対して処理を中断させる割
込みをかけブラウズ画像の伝送を停止させる。伝送処理
３０３の停止によりＳＡ方式で圧縮したブラウズ画像の
ビット毎のプレーンの伝送を停止する。伝送処理303が
複数の画像を時分割処理により伝送していた場合には、
各々の伝送処理に割込みをかけて伝送を停止する。When the image is selected by the selection process 306, the stepwise transmission of the browse image is stopped. The transmission stop processing 308 interrupts the transmission processing 303 to interrupt the processing to stop the transmission of the browse image. By stopping the transmission process 303, the transmission of the plane for each bit of the browse image compressed by the SA method is stopped. When the transmission process 303 transmits a plurality of images by time division processing,
The transmission is stopped by interrupting each transmission process.

【００４０】選択処理３０６により選択したブラウズ画
像から画像の検索を行う。画像ディレクトリ管理３０９
は図６に示す画像検索テーブル６０１を用い、ブラウズ
画像検索テーブル５０１のテーブルインデックス５０６
と同様なテーブルインデックス６０３から画像ファイル
番号６０２を確認する。画像ファイル３２１から画像フ
ァイル番号６０２に一致する画像を伝送する。An image is searched from the browse image selected by the selection processing 306. Image directory management 309
Uses the image search table 601 shown in FIG. 6, and uses the table index 506 of the browse image search table 501.
The image file number 602 is confirmed from the table index 603 similar to. The image corresponding to the image file number 602 is transmitted from the image file 321.

【００４１】伝送処理３１０では画像用ディレクトリ管
理３０９により検索した画像をネットワークを介して解
析システム２０６に伝送する。伝送するブラウズ画像
は、ＪＰＥＧのベースライン圧縮方法などを用いて圧縮
した画像である。In the transmission process 310, the image searched by the image directory management 309 is transmitted to the analysis system 206 via the network. The browse image to be transmitted is an image compressed by using the JPEG baseline compression method or the like.

【００４２】伝送処理３１１により伝送された画像を伸
張処理により伸張する。伸張処理では復号化，逆量子
化，逆ＤＣＴの各処理を行い、伸張した画像を得る。伸
張した画像をファイル３２３に保存する。The image transmitted by the transmission processing 311 is expanded by the expansion processing. In the expansion processing, decoding, inverse quantization, and inverse DCT processing are performed to obtain an expanded image. The decompressed image is saved in the file 323.

【００４３】ファイル３２３に保存した画像を表示処理
３１２により、詳細画面４０３の詳細画像４１１として
表示する。The image stored in the file 323 is displayed as the detailed image 411 on the detailed screen 403 by the display process 312.

【００４４】上記の処理により、ブラウズ画像の表示中
で詳細画像の表示を行うことができる。By the above processing, the detailed image can be displayed while the browse image is being displayed.

【００４５】上記実施例ではブラウズ画像の表示中に、
詳細画像の表示を行う機能であった。これに対し詳細画
像の表示のかわりに次の候補画像の表示を行う機能も上
記実施例と同様の処理にて実現できる。In the above embodiment, while the browse image is being displayed,
It was a function to display a detailed image. On the other hand, the function of displaying the next candidate image instead of the display of the detailed image can be realized by the same processing as that in the above-described embodiment.

【００４６】図７の処理ブロックにより選択処理により
選択された画像に対して、伝送停止処理と伸張停止処理
を実行した場合について説明する。ブラウズ画像を表示
する処理および表示を停止する処理である検索条件入力
３０１とブラウズ画像ディレクトリ管理３０２と伝送処
理３０３と段階的伸張処理３０４と表示処理３０５と選
択処理３０６と伸張停止処理３０７と伝送停止処理３０
８は上記実施例と同様の処理である。また、次の候補画
像を表示するための処理である伝送初期化処理７０１お
よび伸張初期化処理７０２が上記実施例と異なる。以下
に、選択した画像に対して伝送の停止する伝送初期化処
理７０１と、段階的伸張の停止を実行し次のブラウズ画
像を表示するための伸張初期化処理７０２を説明する。A case where the transmission stop processing and the decompression stop processing are executed on the image selected by the selection processing by the processing block of FIG. 7 will be described. Search condition input 301, browse image directory management 302, transmission processing 303, stepwise decompression processing 304, display processing 305, selection processing 306, decompression stop processing 307, and transmission stop, which are processing for displaying browse images and processing for stopping display. Processing 30
The process 8 is the same as that of the above embodiment. Further, a transmission initialization process 701 and a decompression initialization process 702, which are processes for displaying the next candidate image, are different from those in the above-described embodiment. The following describes a transmission initialization process 701 for stopping the transmission of the selected image and a decompression initialization process 702 for executing the stepwise decompression stop and displaying the next browse image.

【００４７】伝送処理３０３に対して次の候補ブラウズ
画像を伝送するための初期化処理を行う。例えば、検索
画面４０２に表示中のブラウズ画像４０８に対して次の
候補ブラウズ画像を表示させる場合、伝送初期化処理７
０１は、伝送停止中の伝送処理３０３に対して割込みを
解除し伝送の途中であるブラウズ画像４０８の画像デー
タを消去して次の候補ブラウズ画像を設定する処理を行
う。伝送処理３０３では次の候補ブラウズ画像を伝送す
る。An initialization process for transmitting the next candidate browse image is performed on the transmission process 303. For example, when the next candidate browse image is displayed for the browse image 408 being displayed on the search screen 402, the transmission initialization process 7
01 performs processing for canceling the interrupt to the transmission processing 303 during the transmission stop, erasing the image data of the browse image 408 being transmitted and setting the next candidate browse image. In the transmission process 303, the next candidate browse image is transmitted.

【００４８】段階的伸張処理３０４に対し次の候補ブラ
ウズ画像を段階的伸張するための初期化処理を行う。検
索画面４０２に表示中のブラウズ画像４０８に対して次
のブラウズ画像を表示させる場合、伸張初期化処理７０
２は、伸張を停止している段階的伸張処理３０４に対し
て復号化，ビット統合，逆量子化，逆ＤＣＴのループ処
理を終了させ、次の候補ブラウズ画像の段階的伸張処理
を実行する。An initialization process for stepwise expanding the next candidate browse image is performed on the stepwise expansion process 304. When the next browse image is displayed with respect to the browse image 408 being displayed on the search screen 402, the decompression initialization processing 70
In Step 2, the loop process of decoding, bit integration, inverse quantization, and inverse DCT is finished for the stepwise expansion process 304 whose expansion is stopped, and the stepwise expansion process of the next candidate browse image is executed.

【００４９】上記の二つの処理を行うことにより、次の
ブラウズ画像を表示することができる。By performing the above two processes, the next browse image can be displayed.

【００５０】本実施例は段階的圧縮伸張方法について、
ＪＰＥＧのＳＡ方式をベースに説明したが、ＪＰＥＧの
ＳＳ方式またはハイアラーキカル方式などを用いて実現
することができる。また、ブラウズ画像のみならず詳細
画像の検索方法に利用可能である。This embodiment relates to a stepwise compression / expansion method,
Although the description is based on the SA method of JPEG, it can be realized by using the SS method of JPEG or the hierarchical method. Further, it can be used not only for browsing images but also for searching for detailed images.

【００５１】この実施例によれば、ブラウズ画像の表示
途中に、伝送停止処理および段階的伸張停止処理を行う
ことで、早い段階で詳細画像の表示または次の候補ブラ
ウズ画像の表示が可能となり、画像データ検索時間の短
縮に効果がある。According to this embodiment, by performing the transmission stop process and the stepwise decompression stop process during the display of the browse image, the detailed image or the next candidate browse image can be displayed at an early stage, It is effective in shortening the image data search time.

【００５２】実施例１は、ブラウズ画像の表示中にブラ
ウズ画像の表示の停止が可能な画像データ検索方法であ
った。実施例２は、画像の表示中にブラウズ画像の表示
の停止および再実行が可能な画像データ検索方法を示
す。The first embodiment is an image data search method capable of stopping the display of the browse image while the browse image is being displayed. The second embodiment shows an image data search method capable of stopping and re-execution of display of a browse image during image display.

【００５３】（実施例２）第二の実施例を図８に示す。
本実施例はブラウズ画像の表示中にブラウズ画像の表示
の停止および再実行が可能な画像データ検索方法であ
る。ブラウズ画像を表示する処理および表示を停止する
処理は実施例１と同様である。すなわち、図８に示す検
索条件入力３０１とブラウズ画像ディレクトリ管理３０
２と伝送処理３０３と段階的伸張処理３０４と表示処理
３０５と選択処理３０６と伸張停止処理３０７と伝送停
止処理３０８は実施例１と同様の処理である。また、表
示を再実行するための処理である再実行選択処理８０１
と伸張再実行処理８０２と伝送再実行処理８０３が実施
例１と異なる。以下に、実施例１と同様の処理を簡単に
説明する。(Second Embodiment) FIG. 8 shows a second embodiment.
The present embodiment is an image data search method capable of stopping and re-executing the display of the browse image while the browse image is being displayed. The process of displaying the browse image and the process of stopping the display are the same as in the first embodiment. That is, the search condition input 301 and the browse image directory management 30 shown in FIG.
2, the transmission process 303, the stepwise expansion process 304, the display process 305, the selection process 306, the expansion stop process 307, and the transmission stop process 308 are the same processes as those in the first embodiment. In addition, a re-execution selection process 801 which is a process for re-execution of display.
The expansion re-execution process 802 and the transmission re-execution process 803 are different from those of the first embodiment. The same processing as that of the first embodiment will be briefly described below.

【００５４】検索条件入力３０１では、画像を検索する
上での条件を入力する。In the search condition input 301, conditions for searching an image are input.

【００５５】ブラウズ画像ディレクトリ管理３０２では
ブラウズ画像ファイル３２２から検索条件に該当するブ
ラウズ画像を候補にあげる。In the browse image directory management 302, browse images corresponding to the search condition are selected from the browse image file 322 as candidates.

【００５６】伝送処理３０３では候補ブラウズ画像をユ
ーザ解析システムに伝送する。In the transmission process 303, the candidate browse image is transmitted to the user analysis system.

【００５７】段階的伝送処理３０３により伝送されたブ
ラウズ画像に対し伸張処理をする。ＪＰＥＧのＳＡ方式
による段階的伸張処理３０４では、復号化，ビット結
合，逆量子化，逆ＤＣＴの伸張処理を繰り返し処理する
ループ処理を行う。The decompression process is performed on the browse image transmitted by the stepwise transmission process 303. In the stepwise expansion process 304 based on the JPEG SA method, a loop process is repeatedly executed to repeatedly perform decoding, bit combination, inverse quantization, and inverse DCT expansion.

【００５８】表示処理３０５では、段階的伸張処理３０
４により得られたブラウズ画像を画面上に表示する。In the display process 305, the stepwise expansion process 30 is performed.
The browse image obtained in step 4 is displayed on the screen.

【００５９】選択処理３０６では、表示画像から目的の
画像を目視により確認した場合、マウス３２６を用いた
クリック入力により画像を選択する。以下、画像が選択
された場合についての処理を示す。In the selection processing 306, when the target image is visually confirmed from the display image, the image is selected by clicking input with the mouse 326. Hereinafter, the processing when the image is selected will be described.

【００６０】伸張停止処理３０７では、割込み処理を用
いて選択されたブラウズ画像に対する段階的伸張処理３
０４のループ処理を停止させる。In the decompression stop processing 307, the stepwise decompression processing 3 for the browse image selected by using the interruption processing is performed.
The loop processing of 04 is stopped.

【００６１】伝送停止処理３０８では、割込み処理を用
いて選択されたブラウズ画像に対する伝送処理３０３の
ビット毎のプレーンの伝送を停止させる。In the transmission stop processing 308, the transmission of the plane for each bit of the transmission processing 303 for the browse image selected by using the interrupt processing is stopped.

【００６２】以上の処理３０１から処理３０８までの実
施例１と同様の処理により、ブラウズ画像の表示および
表示の停止を可能とする。The same processing as in the first embodiment from the processing 301 to the processing 308 described above makes it possible to display and stop the display of the browse image.

【００６３】伸張停止処理３０７と伝送停止処理３０８
を実行し、選択したブラウズ画像の伝送および伸張を停
止した場合、再度、ブラウズ画像に対する伝送と伸張を
再実行することができる。以下に、停止中のブラウズ画
像に対する再実行処理の詳細について説明する。Decompression stop processing 307 and transmission stop processing 308
If the transmission and decompression of the selected browse image are stopped by executing the above, the transmission and decompression of the browse image can be performed again. The details of the re-execution process for the stopped browse image will be described below.

【００６４】再実行選択処理８０１では、表示停止中の
ブラウズ画像を再表示する場合、マウス３２６のクリッ
クにより停止中の画像を選択する。例えば、検索画面４
０２における表示停止中のブラウズ画像４０８をクリッ
クした場合、伸張再実行処理８０２は以下のようにな
る。すなわち、選択した画像に対してブラウズ画像の段
階的伸張を再実行する。割込み処理により停止中の段階
的伸張処理３０４に対し割込みを解除し、復号化，ビッ
ト結合，逆量子化，逆ＤＣＴの各処理を繰り返すことで
段階的伸張処理を再実行させる。In the re-execution selection processing 801, when the browse image whose display is stopped is displayed again, the stopped image is selected by clicking the mouse 326. For example, search screen 4
When the browse image 408 whose display is stopped in 02 is clicked, the decompression re-execution process 802 is as follows. That is, the stepwise expansion of the browse image is re-executed for the selected image. The interrupt is released by the interrupt process to the stepwise decompression process 304 being stopped, and the stepwise decompression process is re-executed by repeating the processes of decoding, bit combination, inverse quantization, and inverse DCT.

【００６５】伝送再実行処理８０３では、選択した画像
に対してネットワークを介したブラウズ画像の段階的伝
送を再実行する。伝送再実行処理３０８は伝送処理３０
３に対して割込み解除処理を行う。伝送処理３０３では
割込み解除処理によりＳＡ方式で圧縮されたブラウズ画
像の下位ビットの伝送が再実行される。In the transmission re-execution processing 803, the stepwise transmission of the browse image through the network is re-executed for the selected image. The transmission re-execution process 308 is the transmission process 30.
Interrupt cancellation processing is performed for 3. In the transmission process 303, the lower bits of the browse image compressed by the SA method are re-executed by the interrupt cancellation process.

【００６６】これら再実行選択処理８０１と伸張再実行
処理８０２と伝送再実行処理８０３により、停止中のブ
ラウズ画像の表示を再実行することができる。By the re-execution selection process 801, the decompression re-execution process 802, and the transmission re-execution process 803, it is possible to re-execute the display of the browse image that is stopped.

【００６７】本実施例によれば、ブラウズ画像の表示途
中に、伝送停止処理および段階的伸張停止処理を行うこ
とで、必要なブラウズ画像の高速な伝送ができ、ブラウ
ズ画像の表示の高速化が可能となるため、伝送負荷の軽
減，検索時間および表示時間を短縮することができる。
さらにこの実施例によれば、表示を停止したブラウズ画
像に対して伝送処理および段階的伸張処理の再実行を行
った場合、検索画面の高速復帰が可能となるため、検索
時間を短縮することができる。According to this embodiment, by performing the transmission stop process and the stepwise decompression stop process during the display of the browse image, the required browse image can be transmitted at high speed and the browse image can be displayed at high speed. As a result, the transmission load can be reduced and the search time and display time can be shortened.
Further, according to this embodiment, when the transmission process and the stepwise expansion process are re-executed for the browse image whose display has been stopped, the search screen can be returned at high speed, and the search time can be shortened. it can.

【００６８】[0068]

【発明の効果】本発明によれば、段階的伸張処理途中で
利用者の操作が行え、画像データの伝送処理および段階
的伸張処理を停止し、詳細画像の表示あるいは次の候補
画像の表示あるいは目的の画像を高速に表示することが
できる。これにより画像を目視し確認でき、画像の検索
に要する操作時間を短縮し、従って利用者の操作負荷が
軽減できる。According to the present invention, a user operation can be performed during the stepwise decompression processing, the image data transmission processing and the stepwise decompression processing are stopped, and the detailed image or the next candidate image is displayed or The target image can be displayed at high speed. As a result, the image can be visually confirmed and the operation time required for the image search can be shortened, thus reducing the operation load on the user.

【図面の簡単な説明】[Brief description of drawings]

【図１】ＤＣＴ係数の分割を示すビットスライスのフロ
ーチャート。FIG. 1 is a flowchart of bit slices showing division of DCT coefficients.

【図２】本発明を適用した地球環境観測地上情報処理シ
ステムのブロック図。FIG. 2 is a block diagram of the earth environment observation ground information processing system to which the present invention is applied.

【図３】本発明の処理手順の一実施例を示す処理ブロッ
ク図。FIG. 3 is a processing block diagram showing an embodiment of a processing procedure of the present invention.

【図４】本発明の表示画面を示す画面フローチャート。FIG. 4 is a screen flowchart showing a display screen of the present invention.

【図５】本発明のブラウズ画像管理に用いるブラウズ画
像検索テーブルの説明図。FIG. 5 is an explanatory diagram of a browse image search table used for browse image management of the present invention.

【図６】本発明の画像管理に用いる画像検索テーブルの
説明図。FIG. 6 is an explanatory diagram of an image search table used for image management according to the present invention.

【図７】図３の処理手順の付加処理を示す処理フローチ
ャート。FIG. 7 is a processing flowchart showing additional processing of the processing procedure of FIG.

【図８】本発明の処理手順の他の実施例を示す処理フロ
ーチャート。FIG. 8 is a processing flowchart showing another embodiment of the processing procedure of the present invention.

【符号の説明】[Explanation of symbols]

３０１…検索条件入力処理、３０２…ブラウズ画像ディ
レクトリ管理、３０３…伝送処理、３０４…段階的伸張
処理、３０５…表示処理、３０６…選択処理、３０７…
伸張停止処理、３０８…伝送停止処理、３２０…圧縮処
理、３２２…ブラウズ画像ファイル。301 ... Search condition input processing, 302 ... Browse image directory management, 303 ... Transmission processing, 304 ... Gradual expansion processing, 305 ... Display processing, 306 ... Selection processing, 307 ...
Decompression stop processing, 308 ... Transmission stop processing, 320 ... Compression processing, 322 ... Browse image file.

フロントページの続き (51)Int.Cl.⁶ 識別記号庁内整理番号ＦＩ技術表示箇所Ｈ０４Ｎ 7/30 8420−5ＬＧ０６Ｆ 15/66 ３３０ＨＨ０４Ｎ 7/133 Ｚ Continuation of the front page (51) Int.Cl. ⁶ Identification number Reference number within the agency FI Technical indication location H04N 7/30 8420-5L G06F 15/66 330 H H04N 7/133 Z

Claims

【特許請求の範囲】[Claims]

【請求項１】圧縮した画像を蓄積する画像ファイルと、
前記画像ファイルから画像を検索する検索処理と、低解
像度の画像から高解像度の圧縮画像を順次伝送する伝送
処理と、低解像度の画像から高解像度の圧縮画像を、順
次、伸張する段階的伸張処理と、伸張画像を表示する表
示処理よりなる画像データ検索処理において、複数の表
示画像から任意の画像を選択する選択処理と、前記段階
的伸張処理を停止する伸張停止処理と、段階的伝送処理
を停止する伝送停止処理と、伸張停止を解除し前記段階
的伸張処理を再実行する伸張再実行処理と、伝送停止を
解除し伝送処理を再実行する伝送再実行処理とを含むこ
とを特徴とする画像データ検索方法。1. An image file for storing compressed images,
A retrieval process for retrieving an image from the image file, a transmission process for sequentially transmitting a high resolution compressed image from a low resolution image, and a stepwise decompression process for sequentially decompressing a high resolution compressed image from a low resolution image And an image data search process including a display process for displaying a decompressed image, a selection process for selecting an arbitrary image from a plurality of display images, a decompression stop process for stopping the stepwise decompression process, and a stepwise transmission process. And a transmission re-execution process for releasing the decompression stop and re-executing the stepwise decompression process, and a transmission re-execution process for releasing the transmission stop and re-executing the transmission process. Image data search method.

【請求項２】請求項１の前記選択処理は、表示中の複数
の画像に対し選択した画像を検索表示する機能をもつ画
像データ検索方法。2. The image data search method according to claim 1, wherein the selection process has a function of searching and displaying a selected image among a plurality of images being displayed.

【請求項３】請求項１の前記伸張停止処理および前記伝
送停止処理は、実行中の前記段階的伸張処理および実行
中の前記伝送処理を中断させ、段階的伸張および伝送を
停止させる割込み処理を用いる画像データ検索方法。3. The decompression stop process and the transmission stop process according to claim 1, are interrupt processes for interrupting the stepwise decompression process being executed and the transmission process being executed, and interrupting the stepwise decompression and transmission. Image data search method used.

【請求項４】請求項１の前記伸張再実行処理および前記
伝送再実行処理は、停止中の前記段階的伸張処理および
前記伝送処理に対して割込みを解除し、段階的伸張およ
び伝送を再実行させる割込み解除処理を用いる画像デー
タ検索方法。4. The decompression re-execution process and the transmission re-execution process according to claim 1, cancel interrupts to the stepwise decompression process and the transmission process that are stopped, and re-execute the stepwise decompression and transmission. An image data search method using interrupt release processing.

【請求項５】請求項１において、複数の画像を表示し画
像表示の途中で詳細画像の表示ができる機能あるいは次
の候補画像の表示ができる機能あるいは不要な画像を止
める機能あるいは止めた画像を再表示できる機能を有す
る画像データ検索方法。5. The function according to claim 1, wherein a plurality of images are displayed and a detailed image can be displayed in the middle of image display, a function of displaying a next candidate image, a function of stopping an unnecessary image, or a stopped image. A method for retrieving image data having a redisplay function.