JP7314277B2 - ストレージ管理装置、ストレージ管理方法およびプログラム - Google Patents

ストレージ管理装置、ストレージ管理方法およびプログラム Download PDF

Info

Publication number
JP7314277B2
JP7314277B2 JP2021534032A JP2021534032A JP7314277B2 JP 7314277 B2 JP7314277 B2 JP 7314277B2 JP 2021534032 A JP2021534032 A JP 2021534032A JP 2021534032 A JP2021534032 A JP 2021534032A JP 7314277 B2 JP7314277 B2 JP 7314277B2
Authority
JP
Japan
Prior art keywords
data set
block
area
blocks
normal area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021534032A
Other languages
English (en)
Other versions
JPWO2021015175A1 (ja
Inventor
圭一 青木
正貴 高橋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Interactive Entertainment Inc
Original Assignee
Sony Interactive Entertainment Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Interactive Entertainment Inc filed Critical Sony Interactive Entertainment Inc
Publication of JPWO2021015175A1 publication Critical patent/JPWO2021015175A1/ja
Application granted granted Critical
Publication of JP7314277B2 publication Critical patent/JP7314277B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604Improving or facilitating administration, e.g. storage management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671In-line storage system
    • G06F3/0673Single storage device
    • G06F3/0679Non-volatile semiconductor memory device, e.g. flash memory, one time programmable memory [OTP]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638Organizing or formatting or addressing of data
    • G06F3/064Management of blocks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/0652Erasing, e.g. deleting, data cleaning, moving of data to a wastebasket
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Description

本発明はストレージ管理装置、ストレージ管理方法およびプログラムに関する。
ゲーム機などのコンピュータの記憶装置としてフラッシュメモリが用いられている。フラッシュメモリには、ダウンロードされたプログラムおよびコンテンツなどが格納されている。
フラッシュメモリは、一定のサイズの複数のブロックを有し、各ブロックにデータが書き込まれる。フラッシュメモリの特性上、ブロック内のデータの一部だけを書き換えることは難しい。そのため、ブロック内の一部のデータのみが不要になった場合、必要なデータのみを他のブロックへコピーするガベージコレクションを実施し、その後、元のブロック全体を消去(解放)する。
このガベージコレクションは多量のデータの転送を伴うため処理負荷が大きく、データのダウンロードなどの他の処理に支障が生じる場合があった。
本願発明は上記課題を鑑みたものであって、その目的は、フラッシュメモリにコンテンツを格納する際の応答性の低下を軽減する技術を提供することにある。
上記課題を解決するために、本発明にかかるストレージ管理装置は、それぞれが通常領域と予約領域とを含む複数のブロックを含み1または複数のデータセットが前記通常領域に格納されるフラッシュメモリと、複数のブロックの通常領域のうち書込み可能領域が新たなデータセットより大きく、かつ、前記新たなデータセットのサイズが前記複数のブロックに含まれる不要なデータセットを削除した場合の前記複数のブロックの前記通常領域の書込み可能領域より小さい場合に、前記新たなデータセットを取得する手段と、前記新たなデータセットを取得する場合に、前記不要なデータセットが含まれるブロックの通常領域から他のブロックの通常領域へ不要でないデータセットをコピーし、当該ブロックの通常領域に含まれるすべてのデータセットを削除するブロック解放手段と、前記すべてのデータセットが削除されたブロックの通常領域に前記新たなデータセットを格納するデータセット書き込み手段と、を含む。
また、本発明にかかるストレージ管理方法は、フラッシュメモリに含まれる複数のブロックであって、それぞれが、予約領域と1または複数のデータセットが格納される通常領域とを含む複数のブロックの通常領域に含まれる書込み可能領域が新たなデータセットより大きく、かつ、前記新たなデータセットのサイズが前記複数のブロックに含まれる不要なデータセットを削除した場合の前記複数のブロックの前記通常領域の書込み可能領域より小さい場合に、前記新たなデータセットを取得するステップと、前記新たなデータセットを取得する場合に、前記不要なデータセットが含まれるブロックの通常領域から他のブロックの通常領域へ不要でないデータセットをコピーし、当該ブロックの通常領域に含まれるすべてのデータセットを削除するステップと、前記すべてのデータセットが削除されたブロックの通常領域に前記新たなデータセットを格納するステップと、を含む。
また、本発明にかかるプログラムは、フラッシュメモリに含まれる複数のブロックであって、それぞれが、予約領域と1または複数のデータセットが格納される通常領域とを含む複数のブロックの通常領域に含まれる書込み可能領域が新たなデータセットより大きく、かつ、前記新たなデータセットのサイズが前記複数のブロックに含まれる不要なデータセットを削除した場合の前記複数のブロックの前記通常領域の書込み可能領域より小さい場合に、前記新たなデータセットを取得する手段、前記新たなデータセットを取得する場合に、前記不要なデータセットが含まれるブロックの通常領域から他のブロックの通常領域へ不要でないデータセットをコピーし、当該ブロックの通常領域に含まれるすべてのデータセットを削除するブロック解放手段、および、前記すべてのデータセットが削除されたブロックの通常領域に前記新たなデータセットを格納するデータセット書き込み手段、
としてコンピュータを機能させる。
本発明によれば、フラッシュメモリにコンテンツを格納する際の応答性の低下を軽減することができる。
本発明の一形態では、前記新たなデータセットのサイズが、前記複数のブロックの通常領域のサイズより大きい場合には、データセット書き込み手段は、前記複数のブロックのいずれかであってデータセットを格納しないブロックに含まれる予約領域を前記通常領域に追加し、当該ブロックの前記通常領域に前記新たなデータセットの少なくとも一部を格納してもよい。
本発明の一形態では、ストレージ管理装置は、ユーザの操作に基づいて、前記複数のブロックに含まれる予約領域を通常領域に変更する領域変更手段をさらに含んでよい。
本発明の一形態では、ストレージ管理装置は、前記複数のブロックに格納されるデータセットの量の推移に基づいて、前記複数のブロックに含まれる予約領域を通常領域に変更する領域変更手段をさらに含んでよい。
本発明の実施形態にかかる情報処理装置のハードウェア構成の一例を示す図である。 フラッシュストレージの記憶領域の構成を示す図である。 ブロック内に設けられる通常領域および予約領域を示す図である。 情報処理装置が実現する機能を示すブロック図である。 情報処理装置がアーカイブを外部から取得しフラッシュメモリに格納する処理の一例を示すフロー図である。 論理パーティションに格納されるアーカイブの一例を示す図である。 アーカイブの削除を説明する図である。 ガベージコレクションの手法を説明する図である。 ガベージコレクションの処理の一例を示すフロー図である。 最低転送速度とガベージコレクションにおいて必要なコピー速度との関係を説明する図である。 領域切替部の処理の一例を示すフロー図である。
以下では、本発明の実施形態について図面に基づいて説明する。出現する構成要素のうち同一機能を有するものには同じ符号を付し、その説明を省略する。
本実施形態では、フラッシュメモリにデータセットとしてアーカイブを格納する情報処理装置について説明する。アーカイブには、例えば、アプリケーションプログラムを有するものと、そのアプリケーションプログラムで用いられる画像音声コンテンツを有するものとがある。情報処理装置は、ネットワーク経由でアーカイブを受信し、受信されたアーカイブをフラッシュメモリに格納してもよい。あるいは情報処理装置は、ブルーレイ(登録商標)の光ディスクなどの情報記憶媒体に記憶されたアーカイブを読み出し、読みだされたアーカイブをフラッシュメモリに格納してもよい。
図1は、本発明の実施形態にかかる情報処理装置のハードウェア構成の一例を示す図である。情報処理装置は、例えばゲーム機である。情報処理装置は、プロセッサ11、メモリ12、通信部13、入出力部14、フラッシュストレージ15を含む。
プロセッサ11は、メモリ12に格納されているプログラムに従って動作し、通信部13や入出力部14、フラッシュストレージ15等を制御する。なお、上記プログラムは、コンピュータで外部読み取り可能な記憶媒体に格納されて提供されるものであってもよいし、インターネット等のネットワークを介して提供されるものであってもよい。
メモリ12は、例えばDRAMのような揮発性メモリ素子によって構成されている。メモリ12は、上記プログラムのうち実行されるものを格納する。また、メモリ12は、プロセッサ11や通信部13等から入力される情報や演算結果を格納する。なお、情報処理装置は、メモリ12のほかに、フラッシュストレージ15を含む外部記憶装置を有し、外部記憶装置にプログラムや情報を格納する。なお、外部記憶装置として、光ディスク装置およびハードディスクの少なくとも一方をさらに含んでもよい。
通信部13は有線LANや無線LANを構成する集積回路やコネクタ、アンテナなどにより構成されている。通信部13は、ネットワークを介して他の装置と通信する機能を有する。通信部13は、プロセッサ11の制御に基づいて、他の装置から受信した情報をプロセッサ11やメモリ12に入力し、他の装置に情報を送信する。
入出力部14は、ユーザの操作を検出するハードウェアからの入力を取得する回路と、画像の表示信号をディスプレイに出力する表示制御回路と、光ディスクドライブなどの外部記憶装置を制御する回路と、音声などを出力する回路とを含む。入出力部14は、キーボードやコントローラ等の入力デバイスとから入力信号を取得し、その入力信号が変換された情報をプロセッサ11やメモリ12に入力する。
フラッシュストレージ15は、フラッシュメモリ素子およびフラッシュメモリ素子のコントローラを含む。
図2は、フラッシュストレージ15の記憶領域の構成を示す図である。フラッシュストレージ15の記憶領域は、複数のブロックBに分割されている。ブロックBのそれぞれの記憶領域は、例えば数百MBから数GBである。オペレーティングシステムを実行するプロセッサ11の制御により、フラッシュストレージ15は各ブロックBへデータセットをシーケンシャルに書き込む。また、各ブロックBに記録されたデータセットを単に上書きすることは難しく、そのデータセットを含むブロックBに格納されるすべてのデータを削除した後に新たにそのブロックBに新たなデータセットを格納することが可能となる。なお、フラッシュストレージ15に含まれるブロックBのそれぞれは複数のページを含み、ハードウェア上ではフラッシュメモリ素子へのデータセットの書き込みはページ単位で行われる。そのため、オペレーティングシステム上で稼働するプログラムから見ると、データセットはページサイズに応じた1または複数の書込単位に分割され、その分割された1または複数の書込単位がシーケンシャルにブロックBの記憶領域に書き込まれる。
本実施形態では、1または複数のブロックBを論理パーティションL(図6参照)に割当て、情報処理装置は、論理パーティションLごとにシーケンシャルにデータセットを書込み、論理パーティションLを構成するブロックBごとにデータを消去する。論理パーティションLにデータセットを書き込むとは、その論理パーティションLを構成するブロックBのうちいずれか1つにデータセットを書き込むことを示す。
それぞれのブロックBの記憶領域には、データセットを格納させない領域を有する。図3は、ブロックB内に設けられる通常領域Nおよび予約領域Rを概略的に示す図である。通常領域Nは、データセットを格納することが可能な領域であり、予約領域Rは、データセットの格納が禁止される領域である。ここで、初期状態における通常領域Nのサイズおよび予約領域Rのサイズは、予め決まっているものとする。予約領域Rに関わる処理や利点については後述する。
次に、情報処理装置が実現する機能および処理を説明する。図4は、情報処理装置が実現する機能を示すブロック図である。情報処理装置は機能的に、アーカイブ取得部51、アーカイブ書込部52、アーカイブ削除部53、ブロック解放部54、領域切替部57を含む。これらの機能は、主に、プロセッサ11がメモリ12に記憶されるプログラムを実行し、通信部13、入出力部14、フラッシュストレージ15を制御することにより実現される。
アーカイブ取得部51は、ユーザによるアーカイブの取得指示を取得し、その取得指示により指示される新たなアーカイブをデータセットとして取得する。アーカイブは、予め定められた複数の種別のうちいずれか1つに属している。アーカイブの種別は、例えば、「パッケージ」、「修正パッケージ」、「追加コンテンツ」の3種類である。パッケージは、アプリケーションのプログラムと、そのプログラムにより出力される映像などのコンテンツのデータとを含む。修正パッケージは、パッケージをバージョンアップするためのアーカイブである。追加コンテンツ(AC)は、アプリケーションのプログラムで利用可能な追加のコンテンツのデータを含む。
新たなアーカイブの取得の際に、アーカイブ取得部51は、配信サーバからネットワーク経由で指示されたアーカイブを受信してもよいし、光ディスクなどの外部記憶媒体に記録されかつ指示されたアーカイブを読み込んでもよい。アーカイブ取得部51の処理の詳細については後述する。
アーカイブ書込部52は、アーカイブ取得部51により取得された新たなアーカイブを1または複数のブロックBの通常領域Nに格納する。
アーカイブ削除部53は、ユーザの削除指示に基づいて、フラッシュストレージ15に格納されるアーカイブであって、ユーザにより削除の指示がされたアーカイブを不要なデータセットとして設定する。ここで、アーカイブ削除部53は、ユーザによる削除の指示がされたアーカイブの削除フラグをフラッシュストレージ15に格納させることにより、そのアーカイブを不要なデータセットとして設定する。
ブロック解放部54は、いわゆるガベージコレクションにより、アーカイブの削除により不要とされた領域であってデータを書き込みできないフラッシュストレージ15の領域を解放し、データが書き込まれていない領域である書込可能領域を確保する。ガベージコレクションにおいて、ブロック解放部54は、不要なデータセットが含まれるブロックBの通常領域Nから他のブロックBの通常領域Nへ不要でないデータセットを転送(具体的にはコピー)し、コピー元のブロックBの通常領域Nに含まれるすべてのデータセットを削除する。転送元のブロックBは、論理的に削除されたアーカイブであってブロックB内の記憶領域を占有しているアーカイブ、つまり削除フラグが削除済であることを示すアーカイブを格納している。ガベージコレクションの詳細については後述する。
ここで、アーカイブ取得部51は、複数のブロックBの通常領域Nのうち書込み可能領域が新たなアーカイブより大きく、かつ、新たなアーカイブのサイズが複数のブロックBに含まれる不要なアーカイブを削除した場合の複数のブロックBの通常領域Nの書込み可能領域より小さい場合にも、新たなデータセットを取得する。この場合には、新たなアーカイブの取得を始める時点で空き領域のあるブロックBのみにアーカイブのすべてを格納することはできない。そこで、ブロック解放部54は、不要なデータセットを含むブロックBの記憶領域を開放し、書込み可能領域を確保する。また、その開放と並行して、アーカイブ書込部52は、取得された新たなアーカイブをブロックBの通常領域Nに格納する。その際、アーカイブ書込部52は、新たなアーカイブのうち少なくとも一部を、その開放されたブロックBの通常領域Nに格納する。
領域切替部57は、ユーザの操作、または、複数のブロックBに格納されるデータセットの量の推移に基づいて、前記複数のブロックBに含まれる予約領域Rを通常領域Nに変更する。
次に、アーカイブを取得しフラッシュストレージ15に格納する処理についてより詳細に説明する。図5は、情報処理装置がアーカイブを外部から取得しフラッシュストレージ15に格納する処理の一例を示すフロー図である。
はじめに、アーカイブ取得部51は、ユーザから、例えば入出力部14を介して、対象のアーカイブを取得させる取得指示を取得する(ステップS101)。取得指示は、例えばサーバに存在する複数のアーカイブのうち、情報処理装置が新たに取得しフラッシュストレージ15に格納させる対象のアーカイブを指定する情報である。取得指示は、光ディスクなどの外部記憶媒体に格納される1または複数のアーカイブのうち、情報処理装置が新たに取得しフラッシュストレージ15に格納させる対象のアーカイブを指定する情報であってもよい。また、取得指示は、複数のアーカイブを対象としてもよい。
取得指示が取得されると、アーカイブ取得部51は、対象のアーカイブのサイズを取得する(ステップS102)。アーカイブのサイズは、フラッシュストレージ15に格納される場合の専有領域の大きさを示す。また、アーカイブ取得部51は、他のアーカイブの属性(アーカイブの種別など)を取得してもよい。
対象のアーカイブのサイズが取得されると、アーカイブ取得部51は、フラッシュストレージ15に、対象のアーカイブを格納できる空き領域が存在するか判定する(ステップS103)。空き領域が存在しない場合には(ステップS103のN)、エラーを出力し処理を終了する(ステップS104)。ここで空き領域は、フラッシュストレージ15において、書込可能領域だけではなく、論理的に削除されているが物理的には削除されていない不要なアーカイブやファイルが専有する領域を含むものとする。
一方、対象のアーカイブを格納する空き領域が存在する場合には(ステップS103のY)、アーカイブ取得部51は、フラッシュストレージ15に、対象のアーカイブを格納できる書込可能領域が存在するか判定する(ステップS105)。書込可能領域が存在しない場合には(ステップS105のN)、ブロック解放部54にガベージコレクションの処理を開始させ、ステップS107の処理へ遷移する(ステップS106)。書込可能領域が存在する場合には(ステップS105のY)、ステップS106の処理をスキップする。
ステップS107では、アーカイブ取得部51は、対象のアーカイブの実体の取得を開始する(ステップS107)。ここで、アーカイブ取得部51は、対象のアーカイブがサーバ上にある場合には通信部13を介してアーカイブの実体を受信してもよいし、対象のアーカイブが外部記憶媒体にある場合には入出力部14を介してアーカイブの実体を読み込んでよい。
アーカイブの実体の読み込みが開始されると、アーカイブ書込部52は、対象のアーカイブのサイズが、通常領域Nのサイズ(正確には、1つのブロックBに含まれる通常領域Nの全体サイズ)以上であるか否かを判定する(ステップS109)。対象のアーカイブのサイズが、通常領域Nのサイズ以上の場合には(ステップS109のY)、アーカイブ書込部52は、対象のアーカイブの格納先として空きブロックBを確保し、その確保されたブロックBを独立した論理パーティションL(LPAR)に割り当てる(ステップS110)。またアーカイブ書込部52は、対象のアーカイブの実体のうち少なくとも一部を、その独立した論理パーティションLに格納する(ステップS111)。これにより、対象のアーカイブの少なくとも一部は、他のアーカイブが格納されないブロックBに格納される。一方、対象のアーカイブのサイズが、通常領域Nのサイズより小さい場合には(ステップS109のN)、ステップS110,S111はスキップされる。
ステップS111において、アーカイブ書込部52は、独立した論理パーティションLに割当てられたブロックBに含まれる予約領域Rの記憶領域を通常領域Nに追加し、記憶領域が追加された通常領域Nに対象のアーカイブの実体のうち少なくとも一部を格納してよい。これにより、予約領域Rに起因する記憶容量の減少を抑えることができる。
独立した論理パーティションLにアーカイブの実体の一部が格納されると、アーカイブ書込部52はアーカイブの実体のうち未格納の部分を、共通パーティションを構成するブロックBの通常領域Nに格納する(ステップS112)。なお、アーカイブの実体のうち未格納の部分が存在しない場合は、アーカイブ書込部52は、共通パーティションにはアーカイブの実体を格納しない。
これらの処理により、アーカイブ書込部52は、対象のアーカイブのサイズがブロックBのサイズを超える場合に以下の3つの処理を実行する。1つめの処理においてアーカイブ書込部52は、対象のアーカイブを複数の部分に分割し、2つめの処理においてアーカイブ書込部52は、その複数の部分のうち少なくとも一部を他のアーカイブが格納されない1または複数のブロックBに格納し、3つめの処理においてアーカイブ書込部52は、その複数の部分のうちその1または複数のブロックBに格納されなかった部分を、他のアーカイブが格納される共通パーティションのブロックBに格納する。他のアーカイブが格納されない1または複数のブロックBに格納されるアーカイブのサイズは通常領域Nのサイズ以上である。また、共通パーティションのブロックBに格納されるアーカイブのサイズは、ブロックBのサイズより小さい。
共通パーティションは、1または複数のブロックBが割り当てられた論理パーティションLである。共通パーティションには、アプリケーションについて種別に関わらず複数のアーカイブのデータが格納される。共通パーティションを構成する各ブロックBについても、複数のアーカイブのデータが格納される。なお、共通パーティションの書き込み可能な領域がなくなった場合には、アーカイブ書込部52は共通パーティションに新たなブロックBを割り当てて領域を拡張し、アーカイブを格納可能にする。
図6は、論理パーティションLに格納されるアーカイブの一例を示す図である。図6は、順に、アーカイブapp.pkg、patch101.pkg、AC1.pkgが取得され、フラッシュストレージ15に格納される場合の例である。論理パーティションL1,L2は、それぞれブロックB1,B2を有する。論理パーティションL3は共通パーティションであり、論理パーティションL3にはブロックB3,B4が割り当てられている。また、パッケージ(app.pkg)、および修正パッケージ(patch101.pkg)の一部は、それぞれ独立した論理パーティションL1,L2に格納される。また、論理パーティションL3には、アーカイブapp.pkg、patch101.pkgのうち、論理パーティションL1,L2に格納できなかった部分と、AC1.pkgとが格納される。
図6の例ではブロックB1~B4は予約領域Rを有し、アーカイブは通常領域Nに格納されている。複数のブロックB3,B4が割当てられている論理パーティションL3においては、アーカイブAC1.pkgの一部を格納し、ブロックB3の通常領域Nの空き領域がなくなると、アーカイブAC1.pkgの残りはブロックB4の通常領域Nに格納される。
次に、アーカイブ削除部53によるアーカイブの削除について説明する。アーカイブ削除部53は、ユーザから、例えば入出力部14を介して、フラッシュストレージ15に格納されるいずれかのアーカイブを削除する指示(削除指示)を取得し、指示されたアーカイブについて、そのアーカイブを格納するブロックB内に削除フラグを立て、そのアーカイブを使用不可にする。アーカイブの実体をフラッシュストレージ15から消去しないのは、ブロックB単位での消去が必要であり、そのアーカイブの実体のみを消去できないからである。なお、指示されたアーカイブを格納するブロックBに他のアーカイブであって削除されていないアーカイブが存在しない場合には、アーカイブ削除部53は、そのブロックBを消去し空きブロックBにする。
図7は、アーカイブの削除を説明する図である。図7の例では、図6に示される修正パッケージpatch101.pkgが削除される場合の例である。この場合、修正パッケージpatch101.pkgの実体のみを格納する論理パーティションL2およびその論理パーティションL2を構成するブロックB2が消去され、さらに、論理パーティションL3に格納される修正パッケージpatch101.pkgの実体は使用不可になる。
次に、ブロック解放部54によるガベージコレクションについて説明する。図8は、ガベージコレクションの手法を説明する図である。図8の例では、元の論理パーティションLpは2つのブロックBa,Bbで構成される。ガベージコレクションの後の論理パーティションLnは1つのブロックBcで構成され、論理パーティションLpに格納され削除されていないアーカイブを格納する。本実施形態においては、ガベージコレクションは、ブロック解放部54が、複数のブロックB(図8ではBa,Bb)に格納されるアーカイブを、より少ない数のブロックBの通常領域N(図8ではBc)に格納するようコピーし、コピー元のブロックB(図8ではBa,Bb)を解放する処理である。解放されたブロックBを他の論理パーティションLに割当て可能となり、使用不可の領域が減少し実際の書込み可能領域を増加させることができる。
図9は、ガベージコレクションの処理の一例を示すフロー図である。はじめに、ブロック解放部54は、使用不可のアーカイブを有する論理パーティションLを検出する(ステップS301)。
ブロック解放部54は、検出された論理パーティションLのブロックBを、空き領域が多いものから順に並べ(ステップS302)、はじめのブロックBを選択する(ステップS303)。ブロック解放部54は選択された論理パーティションL内のアーカイブを新たな論理パーティションLのブロックBにコピーし(ステップS304)、コピー元のブロックBを論理パーティションLから切り離して解放する(ステップS305)。そして、書込可能領域の総計が、取得指示で指示されたアーカイブのサイズより大きく、かつアーカイブの取得を開始している場合には(ステップS306のY)、処理を終了する。一方、そうでない場合には(ステップS306のN)、次のブロックBを選択し(ステップS307)、ステップS304以降の処理を繰り返す。
ここで、ガベージコレクションを行わないと、アーカイブ取得部51が取得するアーカイブ(データセット)を格納する書込可能領域が存在しないケースについて検討する。このケースでは、ブロック解放部54によるブロックBを解放する処理と、アーカイブ書込部52により解放されたブロックBにアーカイブ(データセット)を格納する処理とが並行して行われる。フラッシュストレージ15におけるデータの転送速度は、フラッシュストレージ15により決まっている。これらの処理が並行して行われる際の書き込みの最低転送速度Rtは、フラッシュストレージ15のガベージコレクションおけるコピー速度Rcだけでは定まらない。コピー速度Rcと書き込みの最低転送速度Rtとの関係を以下の式に示す。
Figure 0007314277000001
ここで、Sbは1つのブロックBにおける通常領域Nのサイズであり、Sdは削除されたデータセットのサイズであり、最悪のケースを想定する場合には、Sdにはデータセットを格納する最小単位であるページサイズ(たとえば4.5MiB)が設定される。
図10は、最低転送速度Rtとガベージコレクションにおいて必要なコピー速度Rcとの関係を説明する図であり、上記数式に基づいて算出される値の一例である。最低転送速度Rtを25MiB(ブルーレイの転送速度に相当)とすると、ブロックBのサイズに対する予約領域Rのサイズの割合(予備率)が10%だとガベージコレクションにおけるコピー速度Rcとして250MiB/Secが要求されるが、予備率が20%だとコピー速度Rcは125MiB/Secで良くなる。つまり、予約領域Rの割合を大きくすることで低いコピー速度Rcでも最低転送速度Rtを確保することが容易にできる。
これまでの説明からわかるように、予約領域Rを設けることにより、ガベージコレクションとデータセットの取得とが平行して行われる状況においても、データセットを取得する際のデータの最低転送速度Rtを保証することが可能になる。
一方、予約領域Rにはデータが格納されないため、ユーザからみて、フラッシュストレージ15の全体容量が予約領域Rの分だけ減少することになる。新たなデータセットを取得する際の所要時間を気にしないユーザに対しては予約領域Rを設けないほうが望ましいことも考えられる。以下では、この問題に対応するための領域切替部57の処理について説明する。
図11は、領域切替部57の処理の一例を示すフロー図である。図11に示される処理は、一定の周期で(例えば週ごとに)行われてよい。領域切替部57の処理のため、情報処理装置は空き領域の量(空き容量)の推移をモニタリングし、その空き容量の履歴をメモリ12に格納しているとする。
はじめに、領域切替部57は、一定の期間(例えば1週間から1か月)における、空き容量の履歴を取得する(ステップS401)。次に、領域切替部57は、取得された履歴に基づいて、空き領域が容量閾値より小さい期間の長さを求める(ステップS402)。また、領域切替部57は、アーカイブの変動を示す指標を取得する(ステップS403)。アーカイブの変動を示す指標は、アーカイブ取得部51がアーカイブを取得する頻度であってよいし、アーカイブが削除される頻度であってもよい。
期間の長さおよび指標が取得されると、領域切替部57は、期間の長さが期間閾値を超え、かつ、取得された指標が、変動が少ないことを示すか判定する(ステップS404)。取得された指標が、変動が少ないことを示す、とは、例えば、アーカイブが取得されるまたは削除される頻度が判定閾値より小さいことであってよい。
期間の長さが期間閾値を超え、かつ、取得された指標が、変動が少ないことを示す場合には(ステップS404)、ユーザがアーカイブの取得で困難を感じる回数が少ない蓋然性が高いため、領域切替部57は、予約領域Rの削減をするか否かのメッセージをディスプレイなどの出力デバイスに出力させる(ステップS405)。そして、領域切替部57はそのメッセージに対するユーザの選択操作を取得し、その選択操作により予約領域Rの削減が選択された場合には(ステップS406のY)、複数のブロックBのそれぞれの予約領域Rを削減する(ステップS407)。領域切替部57は予約領域Rが削減された後にガベージコレクションを実行してもよい。
なお、ステップS401からステップS405の処理をせず、単にユーザが設定画面において予約領域Rの削減を指示する操作がされた場合に、ステップS407の処理が行われてもよい。また領域切替部57はステップS405,S406の処理をせず自動的に予約領域Rを最適化してもよい。また、領域切替部57は、情報処理装置の通信速度を測定し、測定された通信速度が閾値以下の場合には予約領域Rを削減してもよい。
領域切替部57の処理により、ユーザの状況に応じてデータセットを取得する際の速度の確保と、容量の確保とを最適化することができる。

Claims (5)

  1. それぞれが通常領域と予約領域とを含む複数のブロックを含み1または複数のデータセットが前記通常領域に格納されるフラッシュメモリと、
    新たなデータセットのサイズが複数のブロックの通常領域のうち書込み可能領域の合計より大きく、かつ、前記新たなデータセットのサイズが前記複数のブロックに含まれる不要なデータセットを削除した場合の前記複数のブロックの前記通常領域の書込み可能領域の合計より小さい場合に、前記新たなデータセットを取得する手段と、
    前記新たなデータセットを取得する場合に、前記不要なデータセットが含まれるブロックの通常領域から他のブロックの通常領域へ不要でないデータセットをコピーし、当該ブロックの通常領域に含まれるすべてのデータセットを削除するブロック解放手段と、
    前記すべてのデータセットが削除されたブロックの通常領域に前記新たなデータセットを格納するデータセット書き込み手段と、
    を含み、
    前記すべてのデータセットが削除されたブロックは、前記新たなデータセットが格納される前にブロック単位で消去され、
    前記新たなデータセットのサイズが、前記複数のブロックのいずれかに含まれる通常領域のサイズより大きい場合には、前記データセット書き込み手段は、前記複数のブロックのいずれかであってデータセットを格納しないブロックに含まれる予約領域を前記通常領域に追加し、当該ブロックの前記通常領域に前記新たなデータセットの少なくとも一部を格納する、
    ことを特徴とするストレージ管理装置。
  2. 請求項に記載のストレージ管理装置において、
    ユーザの操作に基づいて、前記複数のブロックに含まれる予約領域を通常領域に変更する領域変更手段をさらに含む、
    ストレージ管理装置。
  3. 請求項に記載のストレージ管理装置において、
    前記複数のブロックに格納されるデータセットの量の推移に基づいて、前記複数のブロックに含まれる予約領域を通常領域に変更する領域変更手段をさらに含む、
    ストレージ管理装置。
  4. フラッシュメモリに含まれる複数のブロックであって、それぞれが、予約領域と1または複数のデータセットが格納される通常領域とを含む複数のブロックの通常領域に含まれる書込み可能領域の合計より新たなデータセットのサイズが大きく、かつ、前記新たなデータセットのサイズが前記複数のブロックに含まれる不要なデータセットを削除した場合の前記複数のブロックの前記通常領域の書込み可能領域の合計より小さい場合に、前記新たなデータセットを取得するステップと、
    前記新たなデータセットを取得する場合に、前記不要なデータセットが含まれるブロックの通常領域から他のブロックの通常領域へ不要でないデータセットをコピーし、当該ブロックの通常領域に含まれるすべてのデータセットを削除するステップと、
    前記すべてのデータセットが削除されたブロックの通常領域に前記新たなデータセットを格納するステップと、
    を含み、
    前記すべてのデータセットが削除されたブロックは、前記新たなデータセットが格納される前にブロック単位で消去され、
    前記新たなデータセットのサイズが、前記複数のブロックのいずれかに含まれる通常領域のサイズより大きい場合には、前記複数のブロックのいずれかであってデータセットを格納しないブロックに含まれる予約領域が前記通常領域に追加され、当該ブロックの前記通常領域に前記新たなデータセットの少なくとも一部が格納される、
    ことを特徴とするストレージ管理方法。
  5. フラッシュメモリに含まれる複数のブロックであって、それぞれが、予約領域と1または複数のデータセットが格納される通常領域とを含む複数のブロックの通常領域に含まれる書込み可能領域の合計より新たなデータセットのサイズが大きく、かつ、前記新たなデータセットのサイズが前記複数のブロックに含まれる不要なデータセットを削除した場合の前記複数のブロックの前記通常領域の書込み可能領域の合計より小さい場合に、前記新たなデータセットを取得する手段、
    前記新たなデータセットを取得する場合に、前記不要なデータセットが含まれるブロックの通常領域から他のブロックの通常領域へ不要でないデータセットをコピーし、当該ブロックの通常領域に含まれるすべてのデータセットを削除するブロック解放手段、および、
    前記すべてのデータセットが削除されたブロックの通常領域に前記新たなデータセットを格納するデータセット書き込み手段、
    としてコンピュータを機能させ、
    前記すべてのデータセットが削除されたブロックは、前記新たなデータセットが格納される前にブロック単位で消去され、
    前記新たなデータセットのサイズが、前記複数のブロックのいずれかに含まれる通常領域のサイズより大きい場合には、前記データセット書き込み手段は、前記複数のブロックのいずれかであってデータセットを格納しないブロックに含まれる予約領域を前記通常領域に追加し、当該ブロックの前記通常領域に前記新たなデータセットの少なくとも一部を格納する、
    プログラム。
JP2021534032A 2019-07-25 2020-07-20 ストレージ管理装置、ストレージ管理方法およびプログラム Active JP7314277B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2019137009 2019-07-25
JP2019137009 2019-07-25
PCT/JP2020/028132 WO2021015175A1 (ja) 2019-07-25 2020-07-20 ストレージ管理装置、ストレージ管理方法およびプログラム

Publications (2)

Publication Number Publication Date
JPWO2021015175A1 JPWO2021015175A1 (ja) 2021-12-23
JP7314277B2 true JP7314277B2 (ja) 2023-07-25

Family

ID=74193675

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021534032A Active JP7314277B2 (ja) 2019-07-25 2020-07-20 ストレージ管理装置、ストレージ管理方法およびプログラム

Country Status (3)

Country Link
US (1) US11899930B2 (ja)
JP (1) JP7314277B2 (ja)
WO (1) WO2021015175A1 (ja)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100262765A1 (en) 2009-04-08 2010-10-14 Samsung Electronics Co., Ltd. Storage apparatus, computer system having the same, and methods thereof
JP2012058770A (ja) 2010-09-03 2012-03-22 Tdk Corp メモリコントローラ及びメモリコントローラを備えるフラッシュメモリシステム、並びにフラッシュメモリの制御方法
US20140204672A1 (en) 2013-01-21 2014-07-24 Joon-Ho Lee Memory system
WO2015008358A1 (ja) 2013-07-18 2015-01-22 株式会社日立製作所 情報処理装置

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8639908B2 (en) * 2011-07-15 2014-01-28 International Business Machines Corporation Dynamically managing available data storage within an automated data storage system
US10102119B2 (en) * 2015-10-30 2018-10-16 Sandisk Technologies Llc Garbage collection based on queued and/or selected write commands

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100262765A1 (en) 2009-04-08 2010-10-14 Samsung Electronics Co., Ltd. Storage apparatus, computer system having the same, and methods thereof
JP2012058770A (ja) 2010-09-03 2012-03-22 Tdk Corp メモリコントローラ及びメモリコントローラを備えるフラッシュメモリシステム、並びにフラッシュメモリの制御方法
US20140204672A1 (en) 2013-01-21 2014-07-24 Joon-Ho Lee Memory system
WO2015008358A1 (ja) 2013-07-18 2015-01-22 株式会社日立製作所 情報処理装置

Also Published As

Publication number Publication date
JPWO2021015175A1 (ja) 2021-12-23
WO2021015175A1 (ja) 2021-01-28
US11899930B2 (en) 2024-02-13
US20220261154A1 (en) 2022-08-18

Similar Documents

Publication Publication Date Title
US11847350B2 (en) Storage system, information processing system and method for controlling nonvolatile memory
CN107168885B (zh) 存储***、信息处理***及非易失性存储器的控制方法
US10976930B2 (en) Memory device and host device
KR101767710B1 (ko) 폐기가능 파일들의 카드-기반 관리
JP4886866B2 (ja) 主記憶装置へのアクセスを高速化する方法および記憶装置システム
JP4983474B2 (ja) 仮想ライブラリ装置、仮想ライブラリシステム、仮想ライブラリ装置の論理ボリューム複写方法。
JP5962140B2 (ja) プログラム、制御方法、制御装置およびシステム
JP2005301499A (ja) ディスクアレイ装置及びディスクアレイ装置の制御方法
JP7314276B2 (ja) ストレージ管理装置、ストレージ管理方法およびプログラム
JP7314277B2 (ja) ストレージ管理装置、ストレージ管理方法およびプログラム
JP2006313531A (ja) ファイル管理システム
JP7232921B2 (ja) ストレージ管理装置、ストレージの管理方法およびプログラム
CN111597066A (zh) Ssd修复方法、装置、计算机设备及存储介质
US9170929B2 (en) Memory controller
JP4714291B2 (ja) 情報記録装置、情報記録方法及び情報記録用プログラム
US10318204B2 (en) Information processing device and information processing method for writing plurality of files on recording medium
US20090132623A1 (en) Information processing device having data field and operation methods of the same
JP5161989B2 (ja) 情報記録装置、情報記録方法及び情報記録用プログラム
US11507306B2 (en) Recording apparatus that records data using file system, control method therefor, and storage medium storing control program therefor
US11604593B2 (en) Control apparatus that improves recording of data in a recording medium by allocating directory clusters to recording units in a more effective manner, and control method and non-transitory computer readable storage medium storing instructions thereof
JP5958440B2 (ja) 仮想テープ制御装置、仮想テープ装置、制御方法、プログラムおよび記録媒体
JP5489818B2 (ja) 記録再生装置及びその制御方法
JPH0756799A (ja) 記憶領域管理方法
JP2014191387A (ja) 情報処理装置、情報処理方法、およびプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210824

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220809

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221007

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230207

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230406

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230704

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230712

R150 Certificate of patent or registration of utility model

Ref document number: 7314277

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150