JP3794062B2 - Data compression recording device - Google Patents

Description

【０００１】
【発明の属する技術分野】
本発明は、データの圧縮記録が行われるデータ記録装置に関し、ことに、すでに非圧縮で記録されているデータ内容を圧縮して同一記録媒体に記録するデータ圧縮記録装置に関する。
【０００２】
【従来の技術】
データ圧縮は、データの持つ冗長性を除くことによってデータ量を削減する技術で、これによってデータを格納するファイル容量を減らしたり、通信回線経由でデータを送信する時間を短縮するメリットがある。特に、画像信号を処理するイメージ処理や、ファクシミリ通信等では取り扱うデータ量が膨大になるため、データ圧縮は必須になる。
【０００３】
データ圧縮の例として、音声や音楽等の音響ディジタル信号の圧縮はＭＤ（ミニディスク）やＤＣＣ（ディジタル・コンパクト・カセット）等でも使われている。これらの音響信号を圧縮する場合には、音響信号の性質を利用したり、人間の聴覚特性を利用したりする。
【０００４】
例えば音響信号の性質を利用する場合は、音響信号をＦＦＴ（高速フーリエ変換）解析器で周波数分析して信号周波数成分が１０ｋＨｚ以下に集中されているのを知ると、周波数スペクトラム成分の存在しない部分は伝送記録せず、周波数スペクトラム成分の小さい部分にはビツト割り当てを少なくするなどの工夫をする。
また、人間の聴覚特性を利用する場合は、例えば大きな音があると小さな音が聞こえなくなるというマスキング効果等が用いられる。
【０００５】
さらに高能率符号化を用いた方法としては、ＭＤに用いられているＡＴＲＡＣ（Adaptive Transform Acoustic Coding）、ＤＣＣに採用されているＰＡＳＣ（Precised Adaptive Subband Coding）、米国ドルビー社のＡＣ−３、米国ＡＰＴ社のＡＤＰＣＭ（Adaptive Differential Pulse Code Modulation ）を利用するシステム、さらにＮＨＫが開発したＡＤＰＣＭとＣＯＦＤＭ（Coded Orthogonal Frequency Division Multiplexing）変復調器を用いる方法などがある。技術的には、デルタＰＣＭコーディング、ＬＰＧ、ＣＥＬＰ、ＶＳＥＬＰ、ＡＴＣコーダ等の技術が現在活かされている。
【０００６】
画像信号の高能率符号化による圧縮の例は、カラー静止画像符号化方式についてはＩＳＯ（国際標準化機構）、ＩＴＵ−Ｔ（国際電気通信連合電気通信標準化部門）の共同組織であるＪＰＥＧ（Joint Photographic Coding Experts Group ）で標準化作業をすすめていて、符号化方式はすでに標準化されている。
また、テレビ電話やテレビ会議用には、ＩＴＵ−ＴよりＨ．２６１という符号化方式が勧告されている。
【０００７】
さらに、カラー動画像蓄積用符号化方式の標準化ではＩＳＯ（国際標準化機構）とＩＥＣ（国際電気標準会議）が共同で作業を進めるＪＴＣ１（情報処理関連国際標準化技術委員会）の下部組織であるＭＰＥＧ（Moving Picture Coding Experts Group ）が、ＭＰＥＧ１、ＭＰＥＧ２、ＭＰＥＧ４の３つのタイプに分けて標準化を進めている。
【０００８】
このうちＭＰＥＧ１は転送速度が１．５Ｍビツト／秒程度で主にＣＤ−ＲＯＭ等の蓄積メディアを対象にしたもので、すでにＩＳＯとＩＥＣの国際標準になっている。
【０００９】
またＭＰＥＧ２は転送速度が数Ｍビツト／秒から数十Ｍビツト／秒という広い範囲を対象にしていて、すでに国際標準になっている。蓄積メディアを対象にしたＭＰＥＧ１の上位バージョンになるほか、次世代テレビ放送や広帯域ＩＳＤＮを利用した映像伝送等も対象にし、蓄積メディア、放送、通信で共通に利用できる汎用が他の映像符号化方式を目指している。
【００１０】
またＭＰＥＧ４は転送速度が数ｋビツト／秒という低ビツト・レートを対象にした映像符号化方式で、移動体通信での利用を想定している。
【００１１】
これらの画像の高能率符号化は予測符号化と直交変換と可変長符号化を組み合わせた形式によっている。図３に、画像の高能率符号化の国際標準勧告の例を示した。図中のＤＣＴはDiscrete Cosine Transform の略で離散型コサイン変換を意味している。
またＤＰＣＭはDifferential Pulse Code Modulationの略で過去の標本値に基づいて予測を行い、実際の標本値と予測値の誤差を符号化することによってデータ量を減らす予測符号化の一種である。
ところで以上に述べた圧縮方式は非可逆圧縮であって、圧縮された内容から圧縮前の信号が再現できないような種類の圧縮方式である。これに対して、圧縮された内容から圧縮前の信号が完全に再現できるような圧縮方式がある。これらは可逆圧縮方式と呼ばれる。この方法は、一定の符号化方式の信号から冗長度を除いてデータを圧縮し、圧縮したデータで記憶や通信を行って記憶容量や通信容量の削減を図り、再生、受信した際には圧縮野場合と逆の方式を用いて元の信号を再現する方式のものである。
本発明はこのような可逆圧縮方式のデータ圧縮記録方式に関し、ここで使用する圧縮アルゴリズムはＩＢＭ社のチップのＡＬＤＣを用いたものである。
【００１２】
ところで従来はこのような圧縮を実行する際には次のようにして実行されていた。
すなわち、データを磁気テープ等に圧縮記録する際には、非圧縮で記録されている磁気テープの記録内容をストリーマで一旦読み、一度ホストコンピュータを経由して圧縮装置を有するストリーマに改めて転送して圧縮記録するか、もしくは一旦ホストコンピュータで圧縮をかけてからストリーマで記録するようにしていた。
このような方法であると、ホストコンピュータとストリーマ間でデータが往復するようになるため時間がかかるし、ホストコンピュータのＨＤＤ（ハードディスク装置）やＣＰＵタイム資源をもこの間利用しなければならないということになる。
【００１３】
なおここでストリーマと呼ぶのは、ストリーミング・テープ装置のことであって、普通の磁気テープ装置のように１ブロックを読み書きする度にテープをスタート・ストップさせず、テープを止めずに読み書きが可能なように構成された磁気テープ装置である。
【００１４】
実際には、ストリーマには圧縮機能を有する圧縮チップが内蔵されて搭載されている場合が多いが、これはホストコンピュータからテープへデータを一旦記憶させた後、テープからホストコンピュータへデータを戻す時に動作するような仕組みになっており、テープからテープへの転送するような場合には利用できない場合が多かった。
【００１５】
また、ホストコンピュータからストリームデータとしてデータを受け取って、この受けとった非圧縮のデータを圧縮する場合に、最適な圧縮を行うために必要とされるブロックの大きさを予め用意することは不可能に近いし、圧縮したデータが圧縮する前のデータよりも逆に大きくなってしまうようなデータ列がきた場合に、圧縮を取り止めてもとの非圧縮のままでデータを書き込もうと思っても、それまでにホストコンピュータから送られてきた非圧縮データを溜め込んでおく巨大なバッファを用意しなければならなくなるので実用的ではなかった。
【００１６】
【発明が解決しようとする課題】
上述のごとく、従来の磁気テープストリーマ装置を用いて、データを圧縮しようとすると、ホストコンピュータを用いる必要があり、また最適なバッファメモリ容量の決定に困難があり、圧縮したデータが圧縮する前のデータよりも大きくなる場合に対処しようとすると巨大なバッファを用意しなければならないという問題がある。
【００１７】
本発明はこの点を解決して、ホストコンピュータの制御を離れてローカルにデータ圧縮が可能であり、データ圧縮に際して別途大規模なメモリを必要とせず、先読み最適化圧縮が可能で処理が高速なデータ圧縮記録装置を廉価に実現することを課題とする。
【００１８】
【課題を解決するための手段】
上記目的を達成するため、本発明は、ホストコンピュータとの間でデータの送受信を行うデータインタフェース手段と、前記データインタフェース手段に接続され前記データインタフェース手段からの下り方向にはデータを圧縮し前記データインタフェース手段への上り方向にはデータを伸長するデータ圧伸手段と、前記データ圧伸手段からのデータおよびテープ制御手段からのデータを記憶するキャッシュメモリ手段と、前記キャッシュメモリ手段からのデータをテープ記録媒体に記憶し該テープ記録媒体に記憶されているデータを前記キャッシュメモリ手段に読み出すテープ制御手段とを備え、前記テープ記録媒体から前記キャッシュメモリ手段に読み出されたデータを、前記データ圧伸手段の前記データインタフェース手段からの下り方向側に転送するバイパス手段を設けたことを特徴とする。
【００１９】
【発明の実施の形態】
以下、本発明にかかるデータ圧縮記録装置を添付図面を参照にして詳細に説明する。
図１は、本発明のデータ圧縮記録装置の一実施形態のブロック図である。
図１において、１は磁気テープストリーマ、２はホストコンピュータ、３はハードディスク装置、４はＳＣＳＩ（Small Computer System Interface ）である。
【００２０】
図１でホストコンピュータ２にはＳＣＳＩフォマッタが接続されている。通常はこのホストコンピュータ２からの指示でＳＣＳＩフォマッタを介して磁気テープストリーマ１を働かせてデータをテープに読み書きする。
【００２１】
ハードディスク装置３はホストコンピュータ２に接続されて外部記憶装置として働き、プログラムやデータを記憶する。
ＳＣＳＩ４は、磁気テープストリーマ１、ホストコンピュータ２を制御する信号線である。ＳＣＳＩ４は小型コンピュータ用の周辺装置インタフェースの１種であり、ＡＮＳＩ（米国規格協会）での規格化されている。
この方式では、コントローラを周辺装置側に持たせて、周辺装置をインテリジェント化してホストコンピュータ２側の負担を軽くしている。
またホストコンピュータ２の介在なしにコントローラ間でデータ転送が可能である。
【００２２】
磁気テープストリーマ１は、ＳＣＳＩコントローラとなるＳＣＳＩ ＩＣ１１と、データストリームを圧縮・伸長する圧伸ＩＣ１２と、通常はホストコンピュータ２からのデータ転送速度とテープ装置１５のデータ転送速度の差を吸収するために用いられるメモリであるキャッシュメモリ１３と、コーダ・デコーダとして働くＤＳＰ（Digital Signal Processor）１４と、磁気テープ装置１５で構成されている。さらにキャッシュメモリ１３から圧伸ＩＣ１２の間にデータを折り返すバイパス回路１６を設けてある。
【００２３】
さらに磁気テープストリーマ１は、ホストコンピュータ２の介在なしにキャッシュメモリ１３の記憶内容を選択して呼びだし、バイパス回路１６を介して圧伸ＩＣ１２に加えて圧縮を実行させ、その結果を改めてキャッシュメモリ１３に記憶させる制御機能を持っている。
【００２４】
図２は、本発明のデータ圧縮記録装置の圧縮記録を行う際の動作フローチャートである。図２にそって本実施形態のデータ圧縮記録装置でデータを圧縮記憶する際の動作について説明する。
【００２５】
前提としてすでにホストコンピュータ２から非圧縮のデータがすでに磁気テープに書き込まれているものとする。
ホストコンピュータ２から磁気テープ上に記録されているデータが指定されて圧縮命令を受けると（ステップ１０１）、テープ装置１５を駆動してテープから指定されたデータの一部を読み出してキャッシュメモリ１３に記憶させる（ステップ１０２）。このデータを仮にデータＡとする。
【００２６】
このキャッシュメモリ１３に記憶させたこのデータＡをバイパス回路を経由して圧伸ＩＣ１２に供給する（ステップ１０３）。
圧伸ＩＣ１２はこのデータＡに対して圧縮処理を行う（ステップ１０４）。
【００２７】
圧縮されたデータをキャッシュメモリ１３の別な位置に記憶させる（ステップ１０５）。このデータを仮にデータＢとする。
次に、データＢのメモリサイズとデータＡのメモリサイズとを比較する（ステップ１０６）。
【００２８】
比較の結果、データＢのメモリサイズがデータＡのメモリサイズよりも小さい場合は、データＢをテープ装置１５を介してテープに記憶する（ステップ１０７）。
もし、データＡのメモリサイズがデータＢのメモリサイズよりも小さい場合は、データＡをテープ装置１５を介してテープに記憶する（ステップ１０８）。このいずれの場合においても、まだ読んでいないテープの部分を上書きしそうな場合は、上書きせずにテープ上データを有効領域として保存するようにする。
【００２９】
次にホストコンピュータ２から指定されたデータをすべて処理したかどうかを判定する（ステップ１０９）。終了していなければステップ１０２に戻って処理を続ける。全データを処理し終われば終了する。
【００３０】
このようにすると、１台の磁気テープストリーマ１によって、非圧縮の形式ですでに磁気テープ上に記録されているデータを読み込んで圧縮されたデータに変換し、同一磁気テープ上に改めて上書きして圧縮テープを作成することができ、しかも、このときにはホストコンピュータ２の資源を一切使用しなくても圧縮テープを作成することができる。
【００３１】
この時、バイパス回路１６を用いてキャッシュメモリ１３からのデータを圧伸ＩＣ１２に戻せるようにしたので、キャッシュメモリ１３に入った非圧縮データを再度圧伸ＩＣ１２に戻し、一方方向だけしか圧縮動作しない磁気テープストリーマ１に内蔵されている圧伸ＩＣ１２とキャッシュメモリ１３を利用して磁気テープストリーマ１だけで圧縮ができる。
【００３２】
また、用いているデータが、一度、非圧縮でテープに書き終わっているデータなので、そのデータパターンを先読みしながら圧縮をかけていくことができ、最適な圧縮ブロック化が可能になる。
もし、圧縮の結果データサイズが大きくなることがあっても元の非圧縮データがキャッシュメモリ１３に潰されずに残っているので、非圧縮データの方をテープに書き込むように選択して必ずデータサイズの小さなデータを残すことができる。
この場合は、予め、非圧縮の元のデータをホストコンピュータ２からストリームデータとしてテープに書き込んであるので、テープを圧縮先読み用のバッファとして利用することができる。
【００３３】
このように、ホストコンピュータ２からストリームデータとして非圧縮データをテープに書き込んだ後、テープ自身を大きな非圧縮データのバッファとして利用して、再度圧縮をかけながら書き直しているので、ホストコンピュータ２を用いないで効率的により小さなデータサイズに圧縮することができる。これによりデータ記録システムのボトルネックになる圧縮に必要な時間を後回しにして、データ転送だけを先行させ、以後はホストコンピュータ２にまったく負担をかけないで処理が実行できるので、効率が良くなり、結果的に高速にデータ圧縮記録が実現できることになる。
【００３４】
【発明の効果】
以上説明したように、本発明の請求項１の発明は、ホストコンピュータとの間でデータの送受信を行うデータインタフェース手段と、前記データインタフェース手段に接続され前記データインタフェース手段からの下り方向にはデータを圧縮し前記データインタフェース手段への上り方向にはデータを伸長するデータ圧伸手段と、前記データ圧伸手段からのデータおよびテープ制御手段からのデータを記憶するキャッシュメモリ手段と、前記キャッシュメモリ手段からのデータをテープ記録媒体に記憶し該テープ記録媒体に記憶されているデータを前記キャッシュメモリ手段に読み出すテープ制御手段とを備え、前記テープ記録媒体から前記キャッシュメモリ手段に読み出されたデータを、前記データ圧伸手段の前記データインタフェース手段からの下り方向側に転送するバイパス手段を設けたことを特徴とする。
これにより、ホストコンピュータの制御を離れてデータ圧縮記録装置自身でローカルにデータ圧縮が可能になり、この間、ホストコンピュータのメモリや資源を用いないのでシステム全体としての処理を高速化することができる。
【００３５】
本発明の請求項２の発明は、データ圧伸手段で圧縮処理を行ったデータとキャッシュメモリ手段に記憶されている圧縮処理前のデータとを比較し、データ記憶容量の小さいものをテープ記録媒体に記憶させるデータ比較選択手段をさらに具備することを特徴とする。
これにより、先読み最適化圧縮が可能になり、圧縮処理を行った結果にしたがって圧縮処理後のデータと圧縮処理以前のデータとの間でより容量の小さなデータを採用して記録することができる。
【００３６】
本発明の請求項３の発明は、キャッシュメモリ手段からデータ圧伸手段のデータインタフェース手段側にバイパス手段を経由してデータを転送させるデータ転送制御手段を具備することを特徴とする。
これにより、ホストコンピュータの制御を離れてデータ圧縮記録装置自身でローカルにデータ圧縮が可能になり、この間、ホストコンピュータのメモリや資源を用いないのでシステム全体としての処理を高速化することができる。
【図面の簡単な説明】
【図１】本発明のデータ圧縮記録装置の一実施形態のブロック図。
【図２】図１に示すデータ圧縮記録装置による圧縮記録処理の動作フローチャート。
【図３】画像の高能率符号化の国際標準勧告を示す説明図。
【符号の説明】
１……磁気テープストリーマ、２……ホストコンピュータ、３……ハードディスク装置、４……ＳＣＳＩ、１１……ＳＣＳＩ ＩＣ１１、１２……圧伸ＩＣ、１３……キャッシュメモリ、１４……ＤＳＰ、１５……テープ装置、１６……バイパス回路。[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a data recording apparatus in which data is compressed and recorded, and more particularly, to a data compression recording apparatus that compresses data content that has already been recorded in a non-compressed manner and records it on the same recording medium.
[0002]
[Prior art]
Data compression is a technique for reducing the amount of data by removing redundancy of data, and has the advantage of reducing the capacity of a file for storing data and reducing the time for transmitting data via a communication line. In particular, image processing for processing image signals, facsimile communication, and the like handle an enormous amount of data, so data compression is essential.
[0003]
As an example of data compression, compression of sound digital signals such as voice and music is also used in MD (mini disk), DCC (digital compact cassette) and the like. When compressing these acoustic signals, the characteristics of the acoustic signals are used, or the human auditory characteristics are used.
[0004]
For example, when using the properties of an acoustic signal, if the frequency of the acoustic signal is analyzed by an FFT (Fast Fourier Transform) analyzer and it is found that the signal frequency component is concentrated to 10 kHz or less, the portion where the frequency spectrum component does not exist Does not record the transmission, and devise measures such as reducing the bit allocation to the small part of the frequency spectrum component.
Further, when using human auditory characteristics, for example, a masking effect is used such that if there is a loud sound, a small sound cannot be heard.
[0005]
Furthermore, as a method using high-efficiency coding, ATRAC (Adaptive Transform Acoustic Coding) used in MD, PASC (Precised Adaptive Subband Coding) used in DCC, US Dolby AC-3, US APT There are a system using ADPCM (Adaptive Differential Pulse Code Modulation) of the company, and a method using ADPCM and Coded Orthogonal Frequency Division Multiplexing (COFDM) modulator / demodulator developed by NHK. Technically, techniques such as delta PCM coding, LPG, CELP, VSELP, and ATC coder are currently utilized.
[0006]
An example of compression by high-efficiency coding of image signals is JPEG (Joint Photographic) which is a joint organization of ISO (International Organization for Standardization) and ITU-T (International Telecommunication Union Telecommunication Standardization Sector) for color still image coding. Coding Experts Group) has been working on standardization, and the coding method has already been standardized.
For videophone and videoconferencing, H.264 from ITU-T. An encoding method called H.261 is recommended.
[0007]
Furthermore, MPEG, which is a subordinate organization of JTC1 (International Standardization Technical Committee on Information Processing), where ISO (International Organization for Standardization) and IEC (International Electrotechnical Commission) work together to standardize the coding system for storing color moving images. (Moving Picture Coding Experts Group) is promoting standardization by dividing into three types of MPEG1, MPEG2 and MPEG4.
[0008]
Of these, MPEG1 has a transfer rate of about 1.5 Mbit / sec and is mainly intended for storage media such as CD-ROM, and has already become an international standard for ISO and IEC.
[0009]
MPEG2 covers a wide range of transfer speeds from several M bits / second to several tens of M bits / second, and has already become an international standard. In addition to the higher version of MPEG1 for storage media, it is also targeted for next-generation TV broadcasting and video transmission using broadband ISDN, and other general-purpose video encoding methods that can be used in common with storage media, broadcasting, and communication. The aims.
[0010]
MPEG4 is a video encoding method for a low bit rate with a transfer rate of several k bits / second, and is assumed to be used in mobile communication.
[0011]
High-efficiency coding of these images is based on a combination of predictive coding, orthogonal transform, and variable-length coding. FIG. 3 shows an example of an international standard recommendation for high-efficiency encoding of images. DCT in the figure is an abbreviation of Discrete Cosine Transform and means discrete cosine transform.
DPCM is an abbreviation for Differential Pulse Code Modulation, which is a type of predictive coding that performs prediction based on past sample values and encodes errors between actual sample values and predicted values to reduce the data amount.
By the way, the compression method described above is irreversible compression, and is a type of compression method in which a signal before compression cannot be reproduced from the compressed content. On the other hand, there is a compression method in which a signal before compression can be completely reproduced from the compressed content. These are called lossless compression methods. This method compresses data by removing redundancy from a signal of a certain encoding method, performs storage and communication with the compressed data to reduce storage capacity and communication capacity, and compresses data when played back and received This is a method of reproducing the original signal using a method reverse to that in the field.
The present invention relates to such a reversible compression type data compression and recording system, and the compression algorithm used here uses the ALDC of the IBM chip.
[0012]
Conventionally, when executing such compression, it has been executed as follows.
In other words, when data is compressed and recorded on a magnetic tape or the like, the recorded content of the magnetic tape that has been recorded uncompressed is read once with a streamer and once transferred to a streamer having a compression device via a host computer. It was recorded by compression, or once compressed by a host computer and then recorded by a streamer.
With such a method, it takes time because data goes back and forth between the host computer and the streamer, and the HDD (hard disk drive) and CPU time resources of the host computer must be used during this time. Become.
[0013]
Here, the streamer is a streaming tape device. Like a normal magnetic tape device, reading and writing can be done without stopping and starting the tape each time a block is read or written. This is a magnetic tape device configured as described above.
[0014]
In practice, streamers often have a built-in compression chip that has a compression function. This is when data is once stored from the host computer to the tape and then returned from the tape to the host computer. It is a mechanism that works, and in many cases it cannot be used when transferring from tape to tape.
[0015]
Also, when receiving data as stream data from the host computer and compressing the received non-compressed data, it is impossible to prepare in advance the block size required for optimal compression. If you have a data string that is close and the compressed data is larger than the data before compression, even if you want to write the data without compressing it, It was not practical because it would be necessary to prepare a huge buffer for storing uncompressed data sent from the host computer by the time.
[0016]
[Problems to be solved by the invention]
As described above, when data is compressed using a conventional magnetic tape streamer device, it is necessary to use a host computer, and it is difficult to determine the optimum buffer memory capacity. There is a problem that a huge buffer has to be prepared when trying to cope with the case where the data becomes larger than the data.
[0017]
The present invention solves this point and can perform data compression locally by leaving the control of the host computer, and does not require a separate large-scale memory for data compression, and can perform pre-reading optimization compression and high-speed processing. It is an object of the present invention to realize a data compression recording apparatus at low cost.
[0018]
[Means for Solving the Problems]
In order to achieve the above object, the present invention provides a data interface means for transmitting / receiving data to / from a host computer, and compressing data in the downstream direction from the data interface means connected to the data interface means, Data companding means for expanding data in the upward direction to the interface means, cache memory means for storing data from the data companding means and data from the tape control means, and data from the cache memory means to the tape Tape control means for storing the data stored in the recording medium and reading the data stored in the tape recording medium to the cache memory means, and the data read from the tape recording medium to the cache memory means Down from the data interface means of the means Characterized in that a bypass means for transferring to the other side.
[0019]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, a data compression recording apparatus according to the present invention will be described in detail with reference to the accompanying drawings.
FIG. 1 is a block diagram of an embodiment of a data compression recording apparatus of the present invention.
In FIG. 1, 1 is a magnetic tape streamer, 2 is a host computer, 3 is a hard disk device, and 4 is a SCSI (Small Computer System Interface).
[0020]
In FIG. 1, a SCSI formatter is connected to the host computer 2. Normally, the magnetic tape streamer 1 is operated via the SCSI formatter in accordance with an instruction from the host computer 2 to read / write data from / to the tape.
[0021]
The hard disk device 3 is connected to the host computer 2 and functions as an external storage device, and stores programs and data.
The SCSI 4 is a signal line that controls the magnetic tape streamer 1 and the host computer 2. SCSI4 is a kind of peripheral device interface for small computers, and is standardized by ANSI (American National Standards Institute).
In this system, a controller is provided on the peripheral device side to make the peripheral device intelligent, thereby reducing the burden on the host computer 2 side.
Data can be transferred between controllers without the intervention of the host computer 2.
[0022]
The magnetic tape streamer 1 absorbs the difference between a SCSI IC 11 serving as a SCSI controller, a companding IC 12 for compressing / decompressing a data stream, and a data transfer rate from the host computer 2 and the data transfer rate of the tape device 15. A cache memory 13, a DSP (Digital Signal Processor) 14 serving as a coder / decoder, and a magnetic tape device 15. Further, a bypass circuit 16 for turning back data is provided between the cache memory 13 and the companding IC 12.
[0023]
Further, the magnetic tape streamer 1 selects and calls the stored contents of the cache memory 13 without the intervention of the host computer 2, causes the compression to be performed in addition to the companding IC 12 via the bypass circuit 16, and the result is renewed. It has a control function to memorize.
[0024]
FIG. 2 is an operation flowchart when performing compression recording of the data compression recording apparatus of the present invention. The operation when data is compressed and stored in the data compression recording apparatus of this embodiment will be described with reference to FIG.
[0025]
It is assumed that uncompressed data has already been written on the magnetic tape from the host computer 2 as a premise.
When the data recorded on the magnetic tape is designated from the host computer 2 and a compression command is received (step 101), the tape device 15 is driven to read a part of the designated data from the tape to the cache memory 13. Store (step 102). This data is assumed to be data A.
[0026]
The data A stored in the cache memory 13 is supplied to the companding IC 12 via a bypass circuit (step 103).
The companding IC 12 performs a compression process on the data A (step 104).
[0027]
The compressed data is stored in another location in the cache memory 13 (step 105). This data is assumed to be data B.
Next, the memory size of data B is compared with the memory size of data A (step 106).
[0028]
As a result of comparison, if the memory size of data B is smaller than the memory size of data A, data B is stored on the tape via the tape device 15 (step 107).
If the memory size of the data A is smaller than the memory size of the data B, the data A is stored on the tape via the tape device 15 (step 108). In any of these cases, if it is likely to overwrite a portion of the tape that has not yet been read, the data on the tape is stored as an effective area without being overwritten.
[0029]
Next, it is determined whether all data designated by the host computer 2 has been processed (step 109). If not completed, the process returns to step 102 and continues. The process ends when all data has been processed.
[0030]
In this way, a single magnetic tape streamer 1 reads data already recorded on the magnetic tape in an uncompressed format, converts it into compressed data, and overwrites it again on the same magnetic tape. A compressed tape can be created, and at this time, a compressed tape can be created without using any resources of the host computer 2.
[0031]
At this time, since the data from the cache memory 13 can be returned to the companding IC 12 using the bypass circuit 16, the uncompressed data stored in the cache memory 13 is returned to the companding IC 12 again, and the compression operation is performed only in one direction. Compression can be performed only by the magnetic tape streamer 1 using the compression IC 12 and the cache memory 13 incorporated in the magnetic tape streamer 1.
[0032]
In addition, since the data used is data that has been written to the tape without being compressed, the data pattern can be compressed while pre-reading, and an optimum compressed block can be formed.
Even if the data size is increased as a result of compression, the original uncompressed data remains in the cache memory 13 without being crushed. Therefore, the data size must be selected by selecting to write the uncompressed data to the tape. Can leave small data.
In this case, since the uncompressed original data is written in advance on the tape as stream data from the host computer 2, the tape can be used as a buffer for compression prefetching.
[0033]
In this way, after writing uncompressed data as stream data from the host computer 2 to the tape, the tape itself is used as a buffer for large uncompressed data and rewritten while being compressed again. Can be efficiently compressed to a smaller data size. As a result, the time required for compression, which becomes a bottleneck of the data recording system, is postponed, only data transfer is preceded, and the processing can be executed without any burden on the host computer 2 thereafter, so that the efficiency is improved. As a result, data compression recording can be realized at high speed.
[0034]
【The invention's effect】
As described above, according to the first aspect of the present invention, the data interface means for transmitting / receiving data to / from a host computer, and the data interface means connected to the data interface means in the downstream direction from the data interface means. Data compressing means for compressing the data and expanding the data in the upward direction to the data interface means, cache memory means for storing data from the data companding means and data from the tape control means, and the cache memory means And tape control means for reading data stored in the tape recording medium and reading the data stored in the tape recording medium to the cache memory means, and reading the data read from the tape recording medium to the cache memory means. The data interface of the data companding means Characterized in that the provided bypass means for transferring the downstream side from.
As a result, the data compression / recording apparatus itself can perform data compression away from the control of the host computer. During this time, since the memory and resources of the host computer are not used, the processing of the entire system can be accelerated.
[0035]
According to the second aspect of the present invention, the data compressed by the data companding means is compared with the data before the compression processing stored in the cache memory means, and the data having a small data storage capacity is recorded on the tape recording medium. It further comprises data comparison / selection means to be stored.
Accordingly, pre-reading optimization compression is possible, and data having a smaller capacity can be adopted and recorded between the data after the compression processing and the data before the compression processing according to the result of the compression processing.
[0036]
According to a third aspect of the present invention, there is provided data transfer control means for transferring data from the cache memory means to the data interface means side of the data decompression means via the bypass means.
As a result, the data compression / recording apparatus itself can perform data compression away from the control of the host computer. During this time, since the memory and resources of the host computer are not used, the processing of the entire system can be accelerated.
[Brief description of the drawings]
FIG. 1 is a block diagram of an embodiment of a data compression recording apparatus of the present invention.
FIG. 2 is an operation flowchart of compression recording processing by the data compression recording apparatus shown in FIG. 1;
FIG. 3 is an explanatory diagram showing international standard recommendations for high-efficiency encoding of images.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 1 ... Magnetic tape streamer, 2 ... Host computer, 3 ... Hard disk drive, 4 ... SCSI, 11 ... SCSI IC11, 12 ... Companding IC, 13 ... Cache memory, 14 ... DSP, 15 ... ... tape device, 16 ... bypass circuit.

Claims (3)

ホストコンピュータとの間でデータの送受信を行うデータインタフェース手段と、
前記データインタフェース手段に接続され前記データインタフェース手段からの下り方向にはデータを圧縮し前記データインタフェース手段への上り方向にはデータを伸長するデータ圧伸手段と、
前記データ圧伸手段からのデータおよびテープ制御手段からのデータを記憶するキャッシュメモリ手段と、
前記キャッシュメモリ手段からのデータをテープ記録媒体に記憶し該テープ記録媒体に記憶されているデータを前記キャッシュメモリ手段に読み出すテープ制御手段とを備え、
前記テープ記録媒体から前記キャッシュメモリ手段に読み出されたデータを、前記データ圧伸手段の前記データインタフェース手段からの下り方向側に転送するバイパス手段を設けたことを特徴とするデータ圧縮記録装置。Data interface means for transmitting and receiving data to and from the host computer;
Data companding means connected to the data interface means for compressing data in the downstream direction from the data interface means and decompressing data in the upward direction to the data interface means;
Cache memory means for storing data from the data companding means and data from the tape control means;
Tape control means for storing data from the cache memory means in a tape recording medium and reading data stored in the tape recording medium to the cache memory means;
The tape data read from the recording medium said cache memory means, said data compression recording apparatus characterized in that a bypass means for transferring the downstream side from the data interface unit of the data companding means. 前記データ圧伸手段で圧縮処理を行ったデータと前記キャッシュメモリ手段に記憶されている圧縮処理前のデータとを比較し、データ記憶容量の小さいものを前記テープ記録媒体に記憶させるデータ比較選択手段を具備することを特徴とする請求項１記載のデータ圧縮記録装置。  Data comparison / selection means for comparing the data compressed by the data companding means and the data before compression processing stored in the cache memory means, and storing the data having a small data storage capacity in the tape recording medium The data compression recording apparatus according to claim 1, further comprising: 前記キャッシュメモリ手段から前記データ圧伸手段の前記データインタフェース手段側に前記バイパス手段を経由してデータを転送させるデータ転送制御手段を具備することを特徴とする請求項１または請求項２記載のデータ圧縮記録装置。  3. The data according to claim 1, further comprising data transfer control means for transferring data from the cache memory means to the data interface means side of the data decompression means via the bypass means. Compression recording device.

Images