JP2012068891A - 階層型ストレージシステム及びデータアーカイブ方法 - Google Patents
階層型ストレージシステム及びデータアーカイブ方法 Download PDFInfo
- Publication number
- JP2012068891A JP2012068891A JP2010213016A JP2010213016A JP2012068891A JP 2012068891 A JP2012068891 A JP 2012068891A JP 2010213016 A JP2010213016 A JP 2010213016A JP 2010213016 A JP2010213016 A JP 2010213016A JP 2012068891 A JP2012068891 A JP 2012068891A
- Authority
- JP
- Japan
- Prior art keywords
- information recording
- data
- recording device
- information
- backup
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
【課題】アーカイブとバックアップの違いを考慮し効率的かつ適切に1次ストレージから2次ストレージへのデータの移行を実施可能とする階層型ストレージシステムを実現する。
【解決手段】1次ストレージに記録されているデータをバックアップするバックアップ制御部と、データの種類と操作に関する情報を管理するファイル情報管理部とを備える構成とする。また、2次ストレージはハードディスクと可換性のある光ディスクに記録再生を行う光ディスク装置とで構成し、前記データの種類と操作に関する情報に基づいて、ハードディスクにバックアップされたデータの一部を光ディスクに記録するアーカイブ制御部とを備える構成とする。
【選択図】 図1
【解決手段】1次ストレージに記録されているデータをバックアップするバックアップ制御部と、データの種類と操作に関する情報を管理するファイル情報管理部とを備える構成とする。また、2次ストレージはハードディスクと可換性のある光ディスクに記録再生を行う光ディスク装置とで構成し、前記データの種類と操作に関する情報に基づいて、ハードディスクにバックアップされたデータの一部を光ディスクに記録するアーカイブ制御部とを備える構成とする。
【選択図】 図1
Description
本発明は、ストレージ装置に係り、特に階層型ストレージシステムにおけるデータの移行方法に関する。
背景技術としては、例えば特許文献1(特開2008−40699号公報)に記載の技術がある。特許文献1には、「データスナップショット作成処理として、一次ストレージ1のファイルデータのうち、アーカイブが行われていないファイルデータを二次ストレージ2へ退避する。」および「名前空間情報テーブル142のレコードのうち、有効世代番号範囲に対象世代番号が含まれるレコードを抽出し、抽出されたレコードに対応するファイルをリストアの対象ファイルとする。」と記載されている。
階層型ストレージシステムは、ハードディスク装置などの高転送レートのストレージ(1次ストレージ)と、可換性がある情報記録媒体に記録再生を行う光ディスク装置や磁気テープ装置などのストレージ(2次ストレージ)を組み合わせて、安価で大容量なファイルシステムを構成するものである。
階層型ストレージシステムにおいては、生成されたばかりのデータやアクセス頻度の高いデータは1次ストレージに保持するが、アクセス頻度の低下したデータについては2次ストレージに移行して保存する。1次ストレージより2次ストレージのほうが媒体の寿命が長いことが望ましく、1次ストレージから2次ストレージへのデータの移行をアーカイブと呼ぶ。
一方で、1次ストレージに対しては、ユーザの誤操作など人為的ミスやネットワークを介した外部からの攻撃、災害などによるデータの損失に備え、データのコピーを定期的に作成(バックアップ)しておいてデータの復旧(リカバリ)に用いる。特に変更の多いデータに対しては、ある時点での状態を保存するスナップショットによってバックアップを行い、複数の時点(世代)のスナップショットを保持することで任意の世代の状態へのリカバリを可能とする。
スナップショットによってバックアップを行う際に、データをアーカイブし、アーカイブしたデータを用いてリカバリを可能とする従来技術としては、上述の特許文献1(特開2008−40699号公報)がある。
また、バックアップの効率化のために、ある時点で全てのデータのバックアップであるフルバックアップを行い、それ以降は、追加や削除、書換など変化のあったデータのみをバックアップ対象とする、差分バックアップや増分バックアップと呼ばれる技術がある。
階層型ストレージシステムにおいて、2次ストレージは使用頻度の低下したデータを安価に長期保存するためのアーカイブと不測の事態に備えるためのバックアップとの異なる2つの目的で使用されるが、アーカイブとしてのデータとバックアップとしてのデータとでは必要な保存期間が異なり、前者は例えば数年から数十年といった期間であるのに対し、後者は定期的に実施することを勘案して各世代に対し、例えば数週間で十分な場合がある。
また、アーカイブを必要とするデータとバックアップを必要とするデータとではデータの種類が必ずしも同じではなく、前者はユーザが作成したコンテンツが中心であるのに対し、後者においては、更新頻度が高い、オペレーティングシステム(OS)やアプリケーションプログラムが自動的に生成して利用するデータが重要である。
上述の特許文献1に記載の技術は、アーカイブとバックアップとを統一的に行うことを可能とする技術であるが、前述のような両者のデータの違いは考慮されておらず、全てのデータを区別なく2次ストレージに累積的に蓄えていくのみであった。蓄積したデータが増えるほど、データの管理は困難になる。
本発明は、以上を鑑みてなされたものであり、本発明の目的は、アーカイブとバックアップの違いを考慮し効率的かつ適切に1次ストレージから2次ストレージへのデータの移行を実施可能とする階層型ストレージシステムを実現することである。
上述の課題を解決するため、本発明では一例として特許請求の範囲記載の構成を用いる。
本発明によれば、アーカイブとバックアップの違いを考慮し効率的かつ適切に1次ストレージから2次ストレージへのデータの移行を実施可能とする階層型ストレージシステムを実現することができる。
以下、本発明に従う階層型ストレージシステムの実施例を、図面を用いて説明する。
本発明の第1の実施例としての階層型ストレージシステムの構成ならびに動作を、図面を参照しながら詳述する。
図2は第1実施例における階層型ストレージシステムのブロック図である。本実施例の階層型ストレージシステムは2つの装置に跨って構成される。1つはホストコンピュータ10であり、もう1つは2次ストレージ装置20である。
ホストコンピュータ10は、内部記憶装置としてハードディスク装置である1次ストレージ12と、この1次ストレージを制御するコントローラ11を備えている。
コントローラ11の一部として、ファイル情報マネージャ14は、1次ストレージ12に記録されているファイルのファイル情報を管理する。ファイル情報には、ファイルを同定するディレクトリ構造とファイル名、ファイルの種類、バックアップ候補か否かのバックアップ候補フラグ、所定の期間における各ファイルの再生の回数、アーカイブファイルが作成済みか否かのアーカイブ済みフラグ、アーカイブ先のファイルに対する固有のファイルIDが含まれる。バックアップ候補フラグは、各ファイルに対する操作の種類と操作日時に応じてオン・オフを定め、ファイル操作としては、生成、削除、名前の変更、上書きがある。また、所定の期間とは、前回バックアップを実施してからの期間とファイルの生成または上書きがされてからの期間のいずれか短い方である。ファイル情報のデータベースはメタファイルとして1次ストレージに記録しておく。なお、2次ストレージにアーカイブして1次ストレージからは削除したファイルに対しても、削除前のディレクトリ構造を残したままファイル情報を保持する。
また、コントローラ11の一部として、バックアップマネージャ13は、1次ストレージのバックアップを管理する。ユーザが設定したバックアップポリシーに従ってスナップショットによるバックアップを行い、1次ストレージ12のデータとバックアップの世代管理のための世代管理情報を作成して2次ストレージ装置20に出力する。例えば、月に1度フルバックアップを行い、前述のファイル情報のバックアップ候補フラグを参照して最新のフルバックアップから変更されたデータを抽出し、差分バックアップを毎日決められた時間に実行する。世代管理情報は、ベースとなるフルバックアップの世代番号と、差分バックアップの現世代番号と、削除や名前の変更がされたファイルを含む差分ファイルのリストとファイル操作の情報を含む。また、当該ファイルに関する前述のファイル情報を含む。なお、フルバックアップにおいては全てのファイルを対象とする。
2次ストレージ装置20はホストコンピュータ10にとって外部記憶装置であり、バッファとして機能するハードディスク装置22と、可換性のある情報記録媒体である光ディスクに記録再生を行う光ディスク装置23と、これらハードディスク装置22と光ディスク装置23を制御する2次ストレージコントローラ21とで構成される。
2次ストレージコントローラ21の一部として、アーカイブマネージャ24は、ハードディスク装置22に記録されているファイルに対して、追記型光ディスク1へのアーカイブ処理を管理する。アーカイブ処理の実行結果であるアーカイブ管理情報のデータベースはメタファイルとしてハードディスク装置22に記録しておく。アーカイブ管理情報は、2次ストレージ装置20におけるファイル情報として、ファイルを同定するディレクトリ構造とファイル名、ファイルの種類、バックアップの世代番号、アーカイブ済みフラグ、また、アーカイブ済みのファイルに対する固有のファイルIDと、光ディスクのIDなどのアーカイブ先の情報を含む。
また、2次ストレージコントローラ21の一部として、リカバリマネージャ25は、ホストコンピュータ1からの要求に対して、ハードディスク装置22と追記型光ディスク1に分かれて記録されたファイル群から、世代管理情報とアーカイブ管理情報を参照して任意の世代にリカバリするためのファイルを抽出する。
図1は第1実施例におけるバックアップ動作のフローチャートである。
バックアップマネージャ13は、S10において1次ストレージ12の現時点におけるファイルシステムのスナップショットを作成する。
バックアップマネージャ13は、S10において1次ストレージ12の現時点におけるファイルシステムのスナップショットを作成する。
S11において、今回のバックアップが差分バックアップかフルバックアップかで分岐し、差分バックアップの場合には、S12において、ファイル情報のバックアップ候補フラグを参照して差分バックアップの対象となるファイルを抽出する。フルバックアップの場合には、S12の処理をスキップする。
S13において、世代管理情報を生成して2次ストレージ装置20に出力し、2次ストレージコントローラ21に渡す。また、S14において、抽出した差分バックアップの対象となるファイルを2次ストレージ装置20に出力する。2次ストレージ装置20では、受け取った世代管理情報とバックアップ対象のファイルをハードディスク装置22に記録する。
S15において、アーカイブマネージャ24は、S13で2次ストレージコントローラ21が受け取った世代管理情報におけるファイル情報に基づいて、新規にハードディスク装置22に記録したファイル毎にアーカイブ対象とするか否かを検査する。ファイルの種類がユーザが作成したコンテンツなどの予め登録してあるデータであり、所定の期間における各ファイルの再生の回数が所定の回数以下(例えば0回)であり、アーカイブ済みフラグがオフであるファイルを、アーカイブ対象とする。
S16において、各ファイルに対してS15における検査結果に従って処理を分岐する。アーカイブ候補のファイルについては、S17において、光ディスク装置23により追記型光ディスク1に記録する。アーカイブ候補でないファイルについては、S17の処理をスキップする。
次いで、S18において、旧世代のバックアップを削除するか否かで分岐する。保持するバックアップの世代数はバックアップポリシーに従う。例えば、5世代保持する場合には、新規にバックアップを作成した時点で5世代前のバックアップデータを削除する。削除するバックアップデータがない場合には、以下のS19からS22の処理はスキップする。
S19において、アーカイブマネージャ24は、削除対象のバックアップデータのファイルを検査する。当該バックアップデータの世代管理情報におけるファイル情報と、アーカイブ管理情報に基づいて、削除対象のバックアップデータのうちアーカイブ候補を抽出する。ファイルの種類がユーザが作成したコンテンツなどの予め登録してあるデータであり、アーカイブ済みフラグがオフであるファイルをアーカイブ候補とする。
S20において、各ファイルに対してS19における検査結果に従って処理を分岐する。アーカイブ候補のファイルについては、S21において、光ディスク装置23により追記型光ディスク1に記録する。アーカイブ候補でないファイルについては、S21の処理をスキップする。
然る後に、S22において、旧世代のバックアップデータをハードディスク装置22から削除する。
S23において、S17及びS21で追記型光ディスク1に記録した情報を反映させて前述のアーカイブ管理情報を更新する。また、アーカイブ管理情報をホストコンピュータ10に渡す。ホストコンピュータ10は、受け取ったアーカイブ情報に基づいて、ファイル情報におけるアーカイブ済みフラグ、また、アーカイブ済みのファイルに対する固有のファイルIDと、光ディスクのIDなどのアーカイブ先の情報を更新する。
本実施例によれば、世代管理を行うバックアップ動作と連携して必要なデータを適切かつ効率的にアーカイブすることが可能である。
本発明の第2の実施例としての階層型ストレージシステムの構成ならびに動作を、図面を参照しながら詳述する。
図3は第2実施例における階層型ストレージシステムのブロック図である。第1実施例との違いは、2次ストレージ装置20において、可換性のある情報記録媒体に記録再生を行うストレージを光ディスクチェンジャー26により構成している点である。
光ディスクチェンジャー26は、光ディスクマガジン3に複数枚搭載されている追記型光ディスク1と書替型光ディスク2に対して、データの記録及び再生を行う。本実施例においては、後述するように、追記型光ディスク1をデータをアーカイブする用途として用い、書替型光ディスク2をデータをバックアップする用途に用いる。追記型光ディスク1を用いることで、アーカイブしたデータの改竄を防止できる。また、追記型光ディスク1は書替型光ディスク2より安価、高速記録可能、高再生耐力であることが期待できるので、累積的に増加するデータに対応して増設し長期間の保存が必要なアーカイブ用途に好適である。一方、バックアップでは一定期間後に削除することを想定しているので、繰返し使用できる書換型光ディスク2が運用コストや省資源化の観点で適している。その他の構成については実施例1と同様であり説明を省略する。
図4は第2実施例におけるバックアップ動作のフローチャートである。S10からS16までの処理は第1実施例と同様である。
S16においてファイルを判断した結果、アーカイブ候補の場合には、S24において光ディスクチェンジャー26により光ディスクマガジン3の追記型光ディスク1にファイルを記録する。
S16においてファイルを判断した結果、アーカイブ候補の場合には、S24において光ディスクチェンジャー26により光ディスクマガジン3の追記型光ディスク1にファイルを記録する。
また、アーカイブ候補ではない場合には、S25において光ディスクチェンジャー26により光ディスクマガジン3の書換型光ディスク2にファイルを記録する。即ち、各世代のバックアップデータを全て可換性のある光ディスクに記録する。災害に対応するため(ディザスタリカバリ)のデータバックアップは遠隔地での保管が望ましく、本実施例はこれを可能とするものである。
S18からS20までの処理は第1実施例と同様である。S20においてファイルを判断した結果、アーカイブ候補のファイルについては、S26において、光ディスクチェンジャー26により光ディスクマガジン3の追記型光ディスク1に記録する。アーカイブ候補でないファイルについてはS26の処理をスキップする。
S27において、旧世代のバックアップデータをハードディスク装置22から削除する。遠隔地保存の場合には、この限りではないが、全ての世代のバックアップを累積的に保存する必要はない。本実施例では、例えばフルバックアップは保存しておき、差分バックアップは保存する世代数を超えた分は削除することを想定している。
S23の処理も第1実施例と同様である。
以上、本実施例によれば、第1実施例と同様、世代管理を行うバックアップ動作と連携して必要なデータを適切かつ効率的にアーカイブすることが可能である。また、ディザスタリカバリ用のバックアップにも対応可能できる。
なお、本発明は上記した実施例に限定されるものではなく、様々な変形例が含まれる。例えば、上記した実施例は本発明を分かりやすく説明するために詳細に説明したものであって、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、ある実施例の構成に他の実施例の構成を加えることも可能である。また、各実施例の一部について、他の構成の追加・削除・置換をすることが可能である。
また、上記の各構成は、それらの一部又は全部が、ハードウェアで構成されても、プロセッサでプログラムが実行されることにより実現されるように構成されてもよい。また、制御線や情報線は説明上必要と考えられるものを示しており、製品上必ずしも全ての制御線や情報線を示しているとは限らない。実際には殆ど全ての構成が相互に接続されていると考えてもよい。
1・・・追記型光ディスク、2・・・書替型光ディスク、3・・・光ディスクマガジン
Claims (6)
- 第1の情報記録装置と、第2の情報記録装置と、可換性のある情報記録媒体に記録再生を行う第3の情報記録装置と、を有する階層型ストレージシステムであって、
前記第1の情報記録装置に記録されているデータを前記第2の情報記録装置に送信するバックアップ制御部と、
前記第1の情報記録装置に記録されているデータの種類と操作に関する情報を管理するファイル情報管理部と、
前記第2の情報記録装置に記録されているデータを前記第3の情報記録装置に記録するアーカイブ制御部とを有し、
前記アーカイブ制御部は、前記データの種類と操作に関する情報に基づいて、前記第2の情報記録装置に記録されているデータの一部を前記第3の情報記録装置で情報記録媒体に記録するように制御することを特徴とする階層型ストレージシステム。 - 前記アーカイブ制御部は、前記データがユーザが作成したデータであり、前記第1の情報記録装置における参照頻度が所定の回数以下の場合に、前記第3の情報記録装置で情報記録媒体に記録するように制御することを特徴とする請求項1に記載の階層型ストレージシステム。
- 前記バックアップ制御部は、バックアップの世代管理を行い、前期第2の情報記録装置から旧世代のバックアップデータを削除する際に、前記旧世代のバックアップデータのうちユーザが作成したデータであって前記情報記録媒体に未記録なデータを前記第3の情報記録装置で前記情報記録媒体に記録することを特徴とする請求項1又は請求項2に記載の階層型ストレージシステム。
- 前記第3の情報記録装置は光ディスク装置であり、前記情報記録媒体は追記型の光ディスクであることを特徴とする請求項2又は請求項3に記載の階層型ストレージシステム。
- 前記アーカイブ制御部は、前記データがユーザが作成したデータではないか、前記第1の情報記録装置における参照頻度が所定の回数以上の場合に、前記第3の情報記録装置で書替型の光ディスクに記録することを特徴とする請求項4に記載の階層型ストレージシステム。
- 第1の情報記録装置と、第2の情報記録装置と、可換性のある情報記録媒体に記録再生を行う第3の情報記録装置と、を有する階層型ストレージシステムのデータアーカイブ方法であって、
前記第1の情報記録装置に記録されているデータを前記第2の情報記録装置に送信し、
前記第1の情報記録装置に記録されているデータの種類と操作に関する情報を管理し、
前記データの種類と操作に関する情報に基づいて、前記第2の情報記録装置に記録されているデータの一部を前記第3の情報記録装置で情報記録媒体に記録することを特徴とするデータアーカイブ方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010213016A JP2012068891A (ja) | 2010-09-24 | 2010-09-24 | 階層型ストレージシステム及びデータアーカイブ方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010213016A JP2012068891A (ja) | 2010-09-24 | 2010-09-24 | 階層型ストレージシステム及びデータアーカイブ方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2012068891A true JP2012068891A (ja) | 2012-04-05 |
Family
ID=46166098
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010213016A Pending JP2012068891A (ja) | 2010-09-24 | 2010-09-24 | 階層型ストレージシステム及びデータアーカイブ方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2012068891A (ja) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5976264B1 (ja) * | 2015-09-11 | 2016-08-23 | 株式会社エーピーコミュニケーションズ | ストレージシステム、アーカイブ処理方法、ストレージ通信装置、及びコンピュータプログラム |
US10331622B2 (en) | 2014-11-19 | 2019-06-25 | International Business Machines Corporation | Information management |
CN111078145A (zh) * | 2019-12-04 | 2020-04-28 | 深圳东方泰和科技有限公司 | 一种双路存储的数字档案存储设备及读写方法 |
CN115277376A (zh) * | 2022-09-29 | 2022-11-01 | 深圳华锐分布式技术股份有限公司 | 灾备切换方法、装置、设备及介质 |
-
2010
- 2010-09-24 JP JP2010213016A patent/JP2012068891A/ja active Pending
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10331622B2 (en) | 2014-11-19 | 2019-06-25 | International Business Machines Corporation | Information management |
US11042508B2 (en) | 2014-11-19 | 2021-06-22 | International Business Machines Corporation | Information management |
JP5976264B1 (ja) * | 2015-09-11 | 2016-08-23 | 株式会社エーピーコミュニケーションズ | ストレージシステム、アーカイブ処理方法、ストレージ通信装置、及びコンピュータプログラム |
WO2017042972A1 (ja) * | 2015-09-11 | 2017-03-16 | 株式会社エーピーコミュニケーションズ | ストレージシステム、アーカイブ処理方法、ストレージ通信装置、及びコンピュータプログラム |
CN111078145A (zh) * | 2019-12-04 | 2020-04-28 | 深圳东方泰和科技有限公司 | 一种双路存储的数字档案存储设备及读写方法 |
CN115277376A (zh) * | 2022-09-29 | 2022-11-01 | 深圳华锐分布式技术股份有限公司 | 灾备切换方法、装置、设备及介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9606740B2 (en) | System, method and computer program product for synchronizing data written to tape including writing an index into a data partition | |
US8250033B1 (en) | Replication of a data set using differential snapshots | |
US10762039B2 (en) | Backup and restoration for storage system | |
US8090917B2 (en) | Managing storage and migration of backup data | |
US9191437B2 (en) | Optimizing data storage among a plurality of data storage repositories | |
JP5991699B2 (ja) | 情報処理装置、情報処理システム、バックアップ方法、およびプログラム | |
US7421551B2 (en) | Fast verification of computer backup data | |
JP4749266B2 (ja) | 情報資源の重複を省いたバックアップ制御装置及び方法 | |
US9235580B2 (en) | Techniques for virtual archiving | |
US7523149B1 (en) | System and method for continuous protection of working set data using a local independent staging device | |
US8341346B2 (en) | Offloading volume space reclamation operations to virtual tape systems | |
US7979649B1 (en) | Method and apparatus for implementing a storage lifecycle policy of a snapshot image | |
WO2012035588A1 (en) | Method for managing information processing system and data management computer system | |
US9773059B2 (en) | Tape data management | |
JP5984151B2 (ja) | データの復旧方法、プログラムおよびデータ処理システム | |
US7383465B1 (en) | Undoable volume using write logging | |
JP2003280964A (ja) | スナップショット取得方法、ストレージシステム及びディスク装置 | |
WO2013074914A1 (en) | Method of and system for merging, storing and retrieving incremental backup data | |
JP2005523517A (ja) | ディザスタ・リカバリのための方法およびシステム | |
KR20120093061A (ko) | 광 디스크 저장 시스템에 저장된 미디어에의 액세스, 압축 및 추적 | |
JP2012068891A (ja) | 階層型ストレージシステム及びデータアーカイブ方法 | |
JP2005050073A (ja) | データ復旧方法およびデータ記録装置 | |
JP2014071487A (ja) | ファイル記録装置、フィルシステム管理方法およびチェンジャドライブ | |
JP2008090378A (ja) | ハイブリッドファイルシステム、オペレーティングシステム、キャッシュ制御方法および記録媒体 | |
US8495315B1 (en) | Method and apparatus for supporting compound disposition for data images |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20120518 |