JP5808359B2 - 文字列圧縮及び復元システム並びに方法 - Google Patents
文字列圧縮及び復元システム並びに方法 Download PDFInfo
- Publication number
- JP5808359B2 JP5808359B2 JP2013080291A JP2013080291A JP5808359B2 JP 5808359 B2 JP5808359 B2 JP 5808359B2 JP 2013080291 A JP2013080291 A JP 2013080291A JP 2013080291 A JP2013080291 A JP 2013080291A JP 5808359 B2 JP5808359 B2 JP 5808359B2
- Authority
- JP
- Japan
- Prior art keywords
- character string
- sample
- replacement
- string
- partial
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 50
- 238000007906 compression Methods 0.000 title claims description 35
- 230000006835 compression Effects 0.000 title claims description 33
- 230000006837 decompression Effects 0.000 title claims description 8
- 238000004458 analytical method Methods 0.000 claims description 12
- 238000012545 processing Methods 0.000 description 9
- 238000007796 conventional method Methods 0.000 description 3
- 238000004519 manufacturing process Methods 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 238000013144 data compression Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 230000003111 delayed effect Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
Images
Landscapes
- Document Processing Apparatus (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Description
前記入力文字列の開始位置iから始まる部分文字列と、前記サンプル文字列記憶手段から読み出した前記サンプル文字列の最大一致長LMと該部分文字列の出現位置PMを求め、前記入力文字列の開始位置i番目から始まる部分文字列と該入力文字列の0番目からi−1番目までに出現した部分文字列との最大一致長LNと、該出現した部分文字列の出現位置P N を求め、該最大一致長LNが該最大一致長LMより大きい場合(LN>LM)は、置換ポインタを該入力文字列の過去の位置を示すものとし、該最大一致長LMが該最大一致長LN以上である場合(LM≦LN)は、該置換ポインタをサンプル文字列上の位置を示すものとし、該入力文字列の[i…i+L+1]の部分文字列を出現済みの部分文字列として動的辞書記憶手段に格納し、置換ポインタ列と該サンプル文字列を出力する置換ポインタ生成手段と、
を有する符号化手段と、
前記置換ポインタ生成手段から前記置換ポインタ列と前記サンプル文字列を取得し、置換ポインタがサンプル文字列上の位置を示している場合には、該置換ポインタが参照するサンプル文字列上の部分文字列を出力し、該置換ポインタが前記入力文字列の過去の位置を示す場合には、該置換ポインタが参照する既に復元済みの部分文字列を出力する置換ポインタ分析手段を有する復号手段と、を有する。
110 サンプル文字列生成部
120 サンプル文字列取得部
130 置換ポインタ生成部
140 サンプル文字列探索部
150 サンプル文字列M記憶部
160 動的辞書探索・更新部
170 動的辞書記憶部
180 置換ポインタ記憶部
200 復号部
210 置換ポインタ分析部
220 入力サンプル文字列記憶部
230 出力文字列記憶部
Claims (4)
- 置換方式による文字列圧縮及び復元システムであって、
長さMのサンプル文字列を生成するために、長さNの入力文字列の開始位置i*N/(M/S)から長さSの部分文字列を取得して、取得した部分文字列を連結してサンプル文字列記憶手段に格納するサンプル文字列生成手段と、
前記入力文字列の開始位置iから始まる部分文字列と、前記サンプル文字列記憶手段から読み出した前記サンプル文字列の最大一致長LMと該部分文字列の出現位置PMを求め、前記入力文字列の開始位置i番目から始まる部分文字列と該入力文字列の0番目からi−1番目までに出現した部分文字列との最大一致長LNと、該出現した部分文字列の出現位置P N を求め、該最大一致長LNが該最大一致長LMより大きい場合は、置換ポインタを該入力文字列の過去の位置を示すものとし、該最大一致長LMが該最大一致長LN以上である場合は、該置換ポインタをサンプル文字列上の位置を示すものとし、該入力文字列の[i…i+L+1]の部分文字列を出現済みの部分文字列として動的辞書記憶手段に格納し、置換ポインタ列と該サンプル文字列を出力する置換ポインタ生成手段と、
を有する符号化手段と、
前記置換ポインタ生成手段から前記置換ポインタ列と前記サンプル文字列を取得し、置換ポインタがサンプル文字列上の位置を示している場合には、該置換ポインタが参照するサンプル文字列上の部分文字列を出力し、該置換ポインタが前記入力文字列の過去の位置を示す場合には、該置換ポインタが参照する既に復元済みの部分文字列を出力する置換ポインタ分析手段を有する復号手段と、
を有することを特徴とするサンプル文字列(辞書)を用いた二段階置き換えによる圧縮及び復元システム。 - 前記サンプル文字列記憶手段は、前記入力文字列に対して1%以下程度の領域とする
請求項1記載のサンプル文字列(辞書)を用いた二段階置き換えによる圧縮及び復元システム。 - 置換方式による文字列圧縮及び復元方法であって、
サンプル文字列生成手段と、サンプル文字列記憶手段と、動的辞書記憶手段と、置換ポインタ生成手段とを有する符号化手段、及び、置換ポインタ分析手段を有する復号手段とを有するシステムにおいて、
前記符号化手段の前記サンプル文字列生成手段が、長さMのサンプル文字列を生成するために、長さNの入力文字列の開始位置i*N/(M/S)から長さSの部分文字列を取得して、取得した部分文字列を連結してサンプル文字列記憶手段に格納するサンプル文字列生成ステップと、
前記符号化手段の前記置換ポインタ生成手段が、前記入力文字列の開始位置iから始まる部分文字列と、前記サンプル文字列記憶手段から読み出した前記サンプル文字列の最大一致長LMと該部分文字列の出現位置PMを求め、前記入力文字列の開始位置i番目から始まる部分文字列と該入力文字列の0番目からi−1番目までに出現した部分文字列との最大一致長LNと、該出現した部分文字列の出現位置P N を求め、該最大一致長LNが該最大一致長LMより大きい場合は、置換ポインタを該入力文字列の過去の位置を示すものとし、該最大一致長LMが該最大一致長LN以上である場合は該置換ポインタをサンプル文字列上の位置を示すものとし、該入力文字列の[i…i+L+1]の部分文字列を出現済みの部分文字列として動的辞書記憶手段に格納し、置換ポインタ列と該サンプル文字列を出力する置換ポインタ生成ステップと、
前記復号手段の前記置換ポインタ分析手段が、前記符号化手段より前記置換ポインタ列と前記サンプル文字列を取得し、置換ポインタがサンプル文字列上の位置を示している場合には、該置換ポインタが参照するサンプル文字列上の部分文字列を出力し、該置換ポインタが前記入力文字列の過去の位置を示す場合には、該置換ポインタが参照する既に復元済みの部分文字列を出力する置換ポインタ分析ステップと、
を行うことを特徴とするサンプル文字列(辞書)を用いた二段階置き換えによる圧縮及び復元方法。 - 前記サンプル文字列記憶手段を、前記入力文字列に対して1%以下程度の領域とする
請求項3記載のサンプル文字列(辞書)を用いた二段階置き換えによる圧縮及び復元方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013080291A JP5808359B2 (ja) | 2013-04-08 | 2013-04-08 | 文字列圧縮及び復元システム並びに方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013080291A JP5808359B2 (ja) | 2013-04-08 | 2013-04-08 | 文字列圧縮及び復元システム並びに方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014204356A JP2014204356A (ja) | 2014-10-27 |
JP5808359B2 true JP5808359B2 (ja) | 2015-11-10 |
Family
ID=52354417
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013080291A Expired - Fee Related JP5808359B2 (ja) | 2013-04-08 | 2013-04-08 | 文字列圧縮及び復元システム並びに方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5808359B2 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116711311A (zh) * | 2020-10-21 | 2023-09-05 | 抖音视界有限公司 | 帧内编解码中的样点字符串处理 |
CN117792403B (zh) * | 2024-02-26 | 2024-05-07 | 成都农业科技职业学院 | 基于流式大数据技术的分布式农业数据存储管理方法 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0683574A (ja) * | 1991-03-20 | 1994-03-25 | Fujitsu Ltd | データ圧縮及び復元方式 |
JPH0628149A (ja) * | 1992-07-10 | 1994-02-04 | Fujitsu Ltd | 複数種類データのデータ圧縮方法 |
WO1998034183A1 (fr) * | 1997-02-03 | 1998-08-06 | Hitachi, Ltd. | Procede de recherche de chaines de caracteres et base de donnees de chaines de caracteres |
JP3337633B2 (ja) * | 1997-12-03 | 2002-10-21 | 富士通株式会社 | データ圧縮方法及びデータ復元方法並びにデータ圧縮プログラム又はデータ復元プログラムを記録したコンピュータ読み取り可能な記録媒体 |
JP3555506B2 (ja) * | 1999-06-17 | 2004-08-18 | 日本電信電話株式会社 | 文字列データ圧縮符号化装置及び文字列データ復元装置及び文字列データ演算処理装置 |
JP2002269139A (ja) * | 2001-03-08 | 2002-09-20 | Ricoh Co Ltd | 文書検索方法 |
WO2004062110A1 (ja) * | 2002-12-26 | 2004-07-22 | Fujitsu Limited | データ圧縮方法、プログラム及び装置 |
-
2013
- 2013-04-08 JP JP2013080291A patent/JP5808359B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2014204356A (ja) | 2014-10-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6616877B2 (ja) | Vlsiでの効率的なハフマン符号化を行う装置および方法 | |
JP6319740B2 (ja) | データ圧縮を高速化する方法、並びに、データ圧縮を高速化するためのコンピュータ、及びそのコンピュータ・プログラム | |
US9203887B2 (en) | Bitstream processing using coalesced buffers and delayed matching and enhanced memory writes | |
JP4077409B2 (ja) | 高速最長一致探索方法及び装置 | |
US20120288088A1 (en) | Method and system for compressing and encrypting data | |
US8692696B2 (en) | Generating a code alphabet of symbols to generate codewords for words used with a program | |
JP2016533046A (ja) | 復元中に予備拡張辞書を利用するデータ復元 | |
US9934234B2 (en) | Adaptive rate compression hash processor | |
US20200294629A1 (en) | Gene sequencing data compression method and decompression method, system and computer-readable medium | |
JP5808359B2 (ja) | 文字列圧縮及び復元システム並びに方法 | |
US7889102B2 (en) | LZSS with multiple dictionaries and windows | |
JP5808360B2 (ja) | 文字列圧縮及び復元システム並びに方法 | |
WO2018055160A1 (en) | System level testing of entropy encoding | |
Duanmu et al. | SKVQ: Sliding-window Key and Value Cache Quantization for Large Language Models | |
JP5808361B2 (ja) | 文字列圧縮及び復元システム並びに方法 | |
US8593310B1 (en) | Data-driven variable length encoding of fixed-length data | |
RU2473960C2 (ru) | Способ нахождения максимальных повторяющихся участков последовательности символов конечного алфавита и способ вычисления вспомогательного массива | |
Rincy et al. | Preprocessed text compression method for Malayalam text files | |
Chakraborty et al. | A Dictionary based Efficient Text Compression Technique using Replacement Strategy | |
US10826962B2 (en) | Techniques for dynamic shared compression | |
Fenglei | Research on telemetry data compression technology based on inter frame differential adaptive run length encoding | |
CN115033381A (zh) | 压缩文件的处理方法、装置、计算机设备及存储介质 | |
JP5521064B1 (ja) | Id付与装置、方法、及びプログラム | |
KR20130061254A (ko) | 사전 자료구조 구현체에서의 압축/복원 방법 및 그 장치 | |
JP2013211643A (ja) | 圧縮方法、復元方法、情報処理装置及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150212 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150217 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150331 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20150512 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150810 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20150818 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150904 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150908 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5808359 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |