JP4678384B2 - Link failure diagnosis method, disk array system, and link failure diagnosis program - Google Patents
Link failure diagnosis method, disk array system, and link failure diagnosis program Download PDFInfo
- Publication number
- JP4678384B2 JP4678384B2 JP2007094895A JP2007094895A JP4678384B2 JP 4678384 B2 JP4678384 B2 JP 4678384B2 JP 2007094895 A JP2007094895 A JP 2007094895A JP 2007094895 A JP2007094895 A JP 2007094895A JP 4678384 B2 JP4678384 B2 JP 4678384B2
- Authority
- JP
- Japan
- Prior art keywords
- disk
- diagnosis
- link failure
- position information
- disk device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Description
本発明は、ディスクアレイ・システム等に係り、特に、ディスクアレイ用の障害診断機能を備えたリンク障害診断方法、ディスクアレイ・システム、及びリンク障害診断プログラムに関する。 The present invention relates to a disk array system and the like, and more particularly to a link failure diagnosis method, a disk array system, and a link failure diagnosis program having a failure diagnosis function for a disk array.
従来より、コンピュータとストレージ装置等との接続やディスクアレイを接続する方式の1つとして、ファイバーチャネル(FC:Fibre Channel )が、又その形態の1つとしてFC−AL(Fibre Channel−Arbitrated Loop )が知られている。
論理的には、リング状(ループ)をなす情報伝送媒体であるファイバを共有するため、調停又は仲介(Arbitration)と呼ばれるアクセス制御方式を用いてファイバの利用効率を高めている。尚、このファイバーチャネルを含め伝送路を抽象化してリンクと呼び、このリンクに接続される磁気ディスク装置等の各種機器を、抽象化してノード(ノード装置)と呼ぶことがある。
Conventionally, Fiber Channel (FC) is one of the methods for connecting computers and storage devices and disk arrays, and FC-AL (Fibre Channel-Arbitrated Loop) is one of its forms. It has been known.
Logically, in order to share a fiber as a ring-shaped (loop) information transmission medium, the use efficiency of the fiber is increased by using an access control method called arbitration or arbitration. The transmission path including the fiber channel may be abstracted and called a link, and various devices such as a magnetic disk device connected to the link may be abstracted and called a node (node device).
FC−ALは、FC(ファイバーチャネル)ポートの送信部と受信部を複数のノードにわたって数珠つなぎさせたリング状(ループ状)の接続形態をとる。このため、FC−AL接続で構成されたシステムでは、何れかのノードに障害が発生するとシステム全体の動作が停止してしまう恐れがある。そこで、各ノード毎にポートバイパス回路を設けておいて、障害診断手段を使って障害ノードを特定し、その障害ノードをリンクから切り離せる構成としている。 The FC-AL has a ring-like (loop-like) connection form in which a transmission unit and a reception unit of an FC (fiber channel) port are connected across a plurality of nodes. For this reason, in a system configured by FC-AL connection, the operation of the entire system may stop if a failure occurs in any node. In view of this, a port bypass circuit is provided for each node, and a fault node is identified using fault diagnosis means, and the fault node can be separated from the link.
FC−AL接続されているシステムでリンク障害が発生した場合、従来は例えばノード番号の昇順に順次ノードをリンクから切り離し、その切り離しによってリンク障害が回復すれば切り離したノードが被疑ノードになり、更にそのノードを再度リンクに接続してリンク障害が起きることを確認することで、障害を発生させている障害ノードを探索診断していた(例えば特許文献1)。このような従来のリンク診断方法でも、図8(A)に示すように、リンク障害が継続している期間が、リンク診断(リンク探索ともいう)に必要な期間よりも長い場合には、最終的に障害ノード装置を特定できるので特に問題は生じなかった。
しかしながら、この従来例における診断方法では、各ノードを順次切り離し、その度にリンク障害が回復したかどうかをチェックするため相当な時間がかかり、多数のノードを有するシステムでは、障害を発生させている被疑ノードの位置によっては、探索に多くの時間がかかる場合もある。そのため、図8(B)に示すように、リンク診断中にリンク障害が何らかの原因により復旧し正常に戻ってしまうと診断は中断せざるを得ず、障害ノードが特定できない場合が生じるという問題がある。また、障害が間歇的性質を有する場合などは、診断を繰り返してもそのたびに診断が中断される事態になり、被擬ノード装置が特定できず、何度も診断が繰り返されてしまうという問題もある。 However, in the diagnosis method in this conventional example, it takes a considerable time to disconnect each node sequentially and check whether the link failure is recovered each time, and a failure occurs in a system having a large number of nodes. Depending on the position of the suspect node, the search may take a long time. Therefore, as shown in FIG. 8B, if a link failure is recovered for some reason and returns to normal during link diagnosis, the diagnosis must be interrupted, and the failure node may not be identified. is there. In addition, when the failure has an intermittent nature, the diagnosis is interrupted each time the diagnosis is repeated, and the simulated node device cannot be identified and the diagnosis is repeated many times. There is also.
本発明は、上述の問題に鑑み、リンク診断の途中で障害ノードが特定できないまま何らかの原因によりリンク障害が正常回復した場合その他の理由から障害診断を中断した場合には、その障害再発に対してリンク診断を迅速に且つ効率的に再開し得る保守性に優れたリンク障害診断方法、ディスクアレイ・システム、及びリンク障害診断プログラムを提供することを、その目的とする。 In view of the above-mentioned problems, the present invention is directed to a case where the failure diagnosis is interrupted for some reason when the failure failure is not identified during the link diagnosis and the failure diagnosis is interrupted for other reasons. An object of the present invention is to provide a link failure diagnosis method, a disk array system, and a link failure diagnosis program excellent in maintainability that can restart link diagnosis quickly and efficiently.
上記課題を解決するため、本発明にかかるリンク障害診断方法は、FC−AL接続された複数のディスク装置の何れかにリンク障害が発生した場合、当該複数のディスク装置の内の障害ディスク装置を特定するために予め設定された診断順序に基づいて前記各ディスク装置を前記FC−ALから順次切り離してリンク障害が回復するか否かを判定するディスク診断工程と、
前記障害ディスク装置が特定できないままリンク障害が正常回復して前記診断工程が実行不要になった場合に,診断再開時に最初に診断を開始すべきディスク装置を特定するための中断位置情報を,予め装備したディスクアダプタ装置に登録する中断位置情報登録工程と、
前記ディスク診断工程の再開に際しては、前記登録された中断位置情報を取得しこれに基づいて診断を始めるべき最初のディスク装置を特定する診断ディスク特定工程とを備えている。
In order to solve the above-described problem, the link failure diagnosis method according to the present invention, when a link failure occurs in any of a plurality of FC-AL connected disk devices, the failed disk device in the plurality of disk devices. A disk diagnosis step of determining whether or not a link failure is recovered by sequentially disconnecting each of the disk devices from the FC-AL based on a diagnosis order set in advance to identify;
When the link failure is recovered normally without the failure disk device being identified and the execution of the diagnosis process becomes unnecessary, the interruption position information for specifying the disk device to start diagnosis first when the diagnosis is restarted is previously stored. Interruption position information registration process to register in the equipped disk adapter device,
Said by when the resumption of the disk diagnosis step, the registered acquires interruption location information diagnostic disc specification step and the Bei Eteiru identifying a first disk device should begin diagnosis based thereon.
前記中断位置情報登録工程では、前記中断位置情報として、診断が完了した最後のディスク装置を特定すると共に対応する識別子を登録するようにしたことを特徴とする(請求項1)。 In the interruption position information registration step, as the interruption position information, the last disk device for which diagnosis has been completed is specified and a corresponding identifier is registered (claim 1).
このため、障害診断中に何らかの原因によりリンク障害が回復して診断が中断される場合にも、その診断再開時には、既に登録されている中断位置情報に基づいてディスク装置を特定し障害診断を開始するようにしたので、未診断のディスクに合わせて診断を再開することができ、最終的には障害ディスク装置を迅速に且つ効率よく開始し得るという保守性に優れた診断方法を提供できる。診断時間に比較して障害時間が短い間歇的なリンク障害等に特に有効である。For this reason, even if the link failure recovers due to some cause during failure diagnosis and the diagnosis is interrupted, when the diagnosis is resumed, the disk device is identified based on the registered interrupt position information and the failure diagnosis starts. As a result, diagnosis can be resumed in accordance with an undiagnosed disk, and finally a diagnostic method with excellent maintainability can be provided in which a failed disk device can be started quickly and efficiently. This is particularly effective for intermittent link failures, etc., in which the failure time is shorter than the diagnosis time.
更に、前記ディスク診断工程における前記診断順序としては、前記複数のディスク装置を2つのブロックに分け、同一ブロックに属するディスク装置はすべて同時に切り離しを実施し、その中に障害ディスク装置が含まれていればリンク障害が回復するので更にそのブロックを2分して同様の方法を繰り返すことによって障害ディスク装置を特定するように構成してもよい(請求項2)。
これにより、通常の整理した順に順次バイパスする方式に比べて格段に障害探索速度が速くなるという利点がある。
Further, the examples of the diagnostic sequence on the disc diagnostic step, dividing the plurality of disk devices into two blocks, all the disk devices belonging to the same block performed detach simultaneously, if contains the failed disk device therein For example, since the link failure is recovered, the block may be further divided into two and the same method may be repeated to identify the failed disk device (claim 2) .
As a result, there is an advantage that the fault search speed is remarkably increased as compared with a method of sequentially bypassing in order of normal arrangement.
また、前述した複数の各ディスク装置が二重化されたFC−ALに二重FC(ファイバーチャネル)ポートを備えて接続されている場合、前記中断位置情報登録工程では、前記一方の又は他方のFCポート側でリンク障害が発生した場合にはこれに対応して当該一方の又は他方のFCポート側に装備されたディスクアダプタ装置にそれぞれ前記中断位置情報を登録するように構成してもよい(請求項3)。 In addition , when the plurality of disk devices described above are connected to a duplexed FC-AL with a dual FC (fiber channel) port, in the interruption position information registration step, the one or the other FC port When a link failure occurs on the side, the interruption position information may be registered in the disk adapter device provided on the one or other FC port side correspondingly (claims). 3)
(削除) (Delete)
(削除) (Delete)
(削除) (Delete)
(削除) (Delete)
(削除) (Delete)
上記目的を達成するため、本発明にかかるディスクアレイ・システムは、複数のディスク装置と、これらを二重化FCポートでループ状に接続する二重化FC−ALと、この一方と他方の各FC−ALと外部のホストコンピュータとを接続するディスクアダプタ装置とを有し、前記各ディスクアダプタ装置が、FC−AL接続された複数のディスク装置の何れかにリンク障害が発生した場合にこれを検知するFC−AL制御部と、前記複数のディスク装置の内の障害ディスク装置を特定するために予め設定された診断順序に基づいて前記各ディスク装置をFC−ALから順次切り離すポートバイパス制御部とを備えて成る冗長構成のディスクアレイ・システムにおいて、
前記各FC−AL制御部を、
対応する前記各ディスク装置が対応するFC−ALから順次切り離された場合にリンク障害が回復するか否かを監視するリンク障害監視機能と、 障害ディスク装置が特定できないまま前記リンク障害が回復して前記リンク障害監視機能による障害回復有無の監視が実行不要となった場合に,その後の診断再開に際し最初に診断を開始すべきディスク装置を特定するための位置情報を,予め装備した対応する位置情報登録部に登録する位置情報登録制御機能とを備えた構成とし、
前記リンク障害の診断再開に際しては前記位置情報登録部に記憶された位置情報に基づいて診断を始めるべき最初のディスク装置を特定する診断ディスク制御部を、前記各FC−AL制御部に併設する共に、
前記各FC−AL制御部は、前記中断位置情報として、診断が完了した最後のディスク装置を特定すると共に対応する識別子を登録するようにしたことを特徴とする(請求項4)。
In order to achieve the above object, a disk array system according to the present invention includes a plurality of disk devices, a duplex FC-AL that connects these in a loop with a duplex FC port, and one and the other FC-AL. A disk adapter device connected to an external host computer, and each of the disk adapter devices detects a link failure in any of a plurality of disk devices connected by FC-AL. An AL control unit, and a port bypass control unit that sequentially disconnects each of the disk devices from the FC-AL based on a diagnosis sequence set in advance in order to identify a failed disk device among the plurality of disk devices. In a redundant disk array system,
Each FC-AL controller is
A link failure monitoring function for monitoring whether or not a link failure is recovered when each of the corresponding disk devices is sequentially disconnected from the corresponding FC-AL, and the link failure is recovered without identifying the failed disk device. Corresponding positional information provided in advance with positional information for specifying the disk device to be diagnosed first when restarting the subsequent diagnosis when it is no longer necessary to monitor whether or not failure recovery by the link fault monitoring function is required It has a configuration with a location information registration control function registered in the registration unit,
When resuming the diagnosis of the link failure, a diagnostic disk control unit for specifying the first disk device to be diagnosed based on the position information stored in the position information registration unit is provided in each FC-AL control unit. ,
Each FC-AL controller, as the interruption position information, is characterized in that so as to register the corresponding identifier with identifies the last disk device diagnostics are complete (claim 4).
このため、これによると、障害診断中に何らかの原因によりリンク障害が回復して診断が中断される場合にも、その再開に際しては、各ディスクアダプタ装置の何れの側であっても登録された中断位置情報に基づいて最初のディスク装置を特定されるので、例えば未診断のディスクに合わせて診断を再開することができ、障害診断を迅速に効率良く再開することが可能となる。 Therefore, according to this, even if the link failure is recovered for some reason during the failure diagnosis and the diagnosis is interrupted, the interruption that has been registered on either side of each disk adapter device when restarting Since the first disk device is specified based on the position information, the diagnosis can be restarted in accordance with, for example, an undiagnosed disk, and the failure diagnosis can be restarted quickly and efficiently.
ここで、前述した各ディスク装置に対する障害診断の中断後の診断再開に際しては前記何れか一方の位置情報登録部に登録された中断位置情報を、当該位置情報登録部と同一FCポート側の診断ディスク制御部が取得するように構成すると共に、この取得した中断位置情報で特定されているディスク装置が前記診断が完了した最後のディスク装置である場合には当該ディスク装置の次のディスク装置を診断再開後の最初のディスク装置として特定する機能を、前記診断ディスク制御部が備えている、という構成としてもよい(請求項5)。 Here, when resuming the diagnosis after interruption of the failure diagnosis for each disk device described above, the interruption position information registered in any one of the position information registration units is used as the diagnosis disk on the same FC port side as the position information registration unit. The control unit is configured to acquire, and when the disk device specified by the acquired interruption position information is the last disk device for which the diagnosis has been completed, the diagnosis is resumed for the disk device next to the disk device. after the function of specifying as the first disk device, the diagnostic disk controller is provided may be configured as (claim 5).
又、前述した各ディスク装置には前記二重FC(ファイバチャネル)ポートに対応して一方と他方のバイパス回路が各々装備され、前記一方と他方の各ポートバイパス制御部が、前記各バイパス回路を駆動制御して対応する各ディスク装置を前記FC−ALから順次切り離すバイパス回路駆動制御機能を、前記FC−AL制御部を介して実行するようにしてもよい(請求項6)。 Each of the disk devices described above is provided with one and the other bypass circuits corresponding to the dual FC (fiber channel) ports, and each of the one and the other port bypass control units includes the bypass circuits. sequential bypass circuit drive control functions to disconnect from the FC-AL each disk device corresponding to the drive control may be executed via the FC-AL controller (claim 6).
上記目的を達成するため、本発明にかかるリンク障害診断プログラムは、FC−AL接続された複数のディスク装置の何れかにリンク障害が発生した場合、当該複数のディスク装置の内の障害ディスク装置を特定するために予め設定された診断順序に基づいて前記各ディスク装置を前記FC−ALから順次切り離してリンク障害が回復するか否かを監視するディスク診断処理機能、
前記障害ディスク装置が特定できないままリンク障害が正常回復して前記診断工程が実行不要になった場合に,診断再開時に,その後の診断再開に際して必要な最初の診断対象となるディスク装置を特定するための中断位置情報を,予め装備した位置情報登録部に登録する中断位置情報登録処理機能、
および前記リンク障害の診断再開に際しては、前記登録された中断位置情報に基づいて診断を始めるべき最初のディスク装置を特定する診断ディスク特定処理機能、
を設けると共に、
中断位置情報登録処理機能による中断位置情報の登録処理にあっては、前記中断位置情報として、診断が完了した最後のディスク装置を特定すると共に対応する識別子を登録処理するようにし
これらをコンピュータに実現させるようにしたことを特徴とする(請求項7)。
In order to achieve the above object, when a link failure occurs in any of a plurality of FC-AL connected disk devices, a link failure diagnosis program according to the present invention selects a failed disk device from the plurality of disk devices. A disk diagnosis processing function for monitoring whether or not a link failure is recovered by sequentially disconnecting the disk devices from the FC-AL based on a diagnosis order set in advance to specify
To identify the first disk device to be diagnosed when the diagnosis is resumed when the link failure is recovered normally without the failure disk device being identified and the diagnosis process becomes unnecessary. interruption position information, pre-equipped with location information registration section interruption position information registration processing function to be registered in the,
And upon diagnosis resumption of the link failure, the diagnostic disk identification processing function for identifying the first disk device should begin a diagnosis based on the registered interruption position information,
And providing
In the interruption position information registration processing by the interruption position information registration processing function, the last disk device for which diagnosis has been completed is specified and the corresponding identifier is registered as the interruption position information.
These are realized by a computer ( claim 7 ).
(削除) (Delete)
本発明は以上のように構成され機能するので、これによると、障害診断の中断に際しては、その後の診断再開に際して必要な最初の診断対象となるディスク装置を特定するための中断位置情報を登録するように構成したので、障害診断の中断後のリンク診断の再開時には直ちに診断対象の最初のディスク装置が特定されることとなり、これがため、リンク障害が継続している期間がリンク診断に必要な期間より短く又障害が間歇的に発生する場合でも、未診断のディスクに合わせて診断を再開することができ、障害再発に対してはリンク診断を迅速に且つ効率的に実行し得るという従来にない保守性に優れたリンク障害診断方法、ディスクアレイ・システム、及びリンク障害診断プログラムを提供することができる。 Since the present invention is configured and functions as described above, according to this, when the failure diagnosis is interrupted, the interruption position information for specifying the first disk device to be diagnosed necessary for the subsequent diagnosis restart is registered. Therefore, when link diagnosis is resumed after failure diagnosis is interrupted, the first disk device to be diagnosed is immediately identified, so the period during which link failure continues is the period required for link diagnosis. Even if the failure is shorter and intermittent, the diagnosis can be resumed in accordance with an undiagnosed disk, and link diagnosis can be executed quickly and efficiently for a failure recurrence. A link failure diagnosis method, a disk array system, and a link failure diagnosis program excellent in maintainability can be provided.
〔第1の実施形態〕
以下、本発明の第1実施形態を図1乃至6に基づいて説明する。
[First Embodiment]
A first embodiment of the present invention will be described below with reference to FIGS.
まず、図1は本実施形態に係る二重化されたFC−AL(Fibre Channel−Arbitrated Loop )ディスクアレイ・システムのブロック構成図である。
この図1に示すFC−ALディスクアレイ・システムは、2つのディスクアダプタ10,20と、複数のディスク装置30,40,50(説明の便宜のため3台の装置を示しているがこれに限られない)と、これらを接続する二系統のFC−AL(リンク)1,2とを備え、冗長構成されている。このため、本システムでは、一方のFC−ALがリンク障害になっても、残る他方のFC−ALがディスク装置相互間の情報転送路と制御線の両者の役割を果たし、通常の情報転送動作をしながら障害診断機能も果たす耐障害性のあるシステム構成となっている。
FIG. 1 is a block diagram of a duplexed FC-AL (Fiber Channel-Arbitrated Loop) disk array system according to the present embodiment.
The FC-AL disk array system shown in FIG. 1 includes two
ディスク装置30,40,50は、FC(ファイバーチャネル)ポート(ポートA,B)を2つ備え、それぞれのポートA,BはFC−AL(リンク)1,2にそれぞれ接続され、リード/ライトなどのコマンドを処理することができるように構成されている。即ち、各ディスク装置30,40,50の一方のポート(ポートA)は、FC−AL(リンク)1を介してディスクアダプタ装置10と通信でき、また、各ディスク装置30,40,50の他方のポート(ポートB)は、もう一つのFC−AL(リンク)2を介してディスクアダプタ装置20と通信できる構成となっている。
The
更に、ディスク装置30,40,50は、ディスク本体30A,40B,50Cと、この各ディスク本体30A,40B,50Cの前記各ポート毎に(図1に示すように)バイパス回路32,42,52,及び33,43,53を備えており、これにより、ディスクアダプタ装置10,20からFC−AL1,2を介して供給されるバイパス指示(ディスク装置をFC−ALから切り離すこと)又はバイパス開示指示(切り離したディスク装置をFC−ALに再接続すること)に基づいて、ディスク本体30A,40B,50CをFC−AL1及び2からの切り離し又はこれに接続し得るように構成されている。
Further, the
ポートA側のバイパス回路32,42,52とポートB側のバイパス回路33,43,53とは相互に通信ができるように構成されている。符号Sはこの場合の通信回線を示す。これにより、一方のリンクに異常が発生して通信できない場合でも、他方のリンクから一方のリンク側のバイパス回路の制御を行えるようになっている。例えば、FC−AL1(ポートA)側が障害時には、ポートA側の各バイパス回路32,42,52は、ディスクアダプタ20がFC−AL2(ポートB)を通じて制御し、FC−AL2(ポートB)が障害になると、ポートB側の各バイパス回路33,43,53は、ディスクアダプタ10がFC−AL1(ポートA)を通じて制御する。
The
前述したディスクアダプタ装置10,20は、図示しないホストコンピュータとディスク装置30,40,50との間の情報転送機能と共に障害診断装置としての機能も併せ備えている。このディスクアダプタ装置10,20は、それぞれ診断制御手段としての機能を有するMPU11,21、アダプタ間通信制御部12,22、ポートバイパス制御部13,23、FC−AL制御部14,24、中断位置情報登録部15,25及び診断ディスク制御部16,26を備えたコントローラである。
The
即ち、前述した各ディスクアダプタ装置10,20は、その要部として、FC−AL接続された複数のディスク装置30,40,50の何れかにリンク障害が発生した場合にこれを検知するFC−AL制御部14,24と、前記複数のディスク装置30,40,50の内の障害ディスク装置を特定するために予め設定された診断順序に基づいて前記各ディスク装置30,40,50をFC−ALから順次切り離すポートバイパス制御部13,23とを備えている。
That is, each of the above-described
又、上述した各FC−AL制御部14,24は、対応する前記各ディスク装置30,40,50が対応するFC−AL1又は2から順次切り離された場合にリンク障害が回復するか否かを監視するリンク障害監視機能と、障害ディスク装置が特定できないまま前記リンク障害が回復して前記リンク障害監視機能による障害回復有無の監視が実行不要となった場合に,その後の診断再開に際し最初に診断を開始すべきディスク装置30,40,50を特定するための位置情報を,予め装備した対応する位置情報登録部15,25に登録する位置情報登録制御機能とを備えている。
更に、前述したリンク障害の診断再開に際しては前記位置情報登録部15,25に記憶された位置情報に基づいて診断を始めるべき最初のディスク装置30,40,50を特定する診断ディスク制御部16,26が、前記各FC−AL制御部14,24にそれぞれ併設されている。
Each of the FC-
Further, when resuming the diagnosis of the link failure described above, the diagnostic
このため、これによると、障害診断中に何らかの原因によりリンク障害が回復して診断が中断される場合にも、その再開に際しては、各ディスクアダプタ装置10,20の何れの側であっても登録された中断位置情報に基づいて最初のディスク装置を特定されるので、例えば未診断のディスクに合わせて診断を再開することができ、障害診断を迅速に効率良く再開することが可能となる。
Therefore, according to this, even if the link failure is recovered for some reason during the failure diagnosis and the diagnosis is interrupted, the registration is performed on either side of each of the
ここで、本実施形態では、前述した各ディスク装置30,40,50に対する障害診断の中断後の診断再開に際しては前記何れか一方の位置情報登録部15又は25に登録された中断位置情報を、当該位置情報登録部15,25と同一FCポート1,2側の診断ディスク制御部16,26が取得するように構成すると共に、この取得した中断位置情報で特定されているディスク装置が前記診断が完了した最後のディスク装置である場合には当該ディスク装置の次のディスク装置を診断再開後の最初のディスク装置として特定する機能を、前記診断ディスク制御部16,26が備えて構成されている。
Here, in the present embodiment, when resuming diagnosis after interruption of failure diagnosis for each of the
又、前述した各ディスク装置30,40,50には前記二重FC(ファイバチャネル)ポート1,2に対応して一方と他方のバイパス回路32,42,52,及び33,43,53が各々装備され、前記一方と他方の各ポートバイパス制御部13,23が、前記各バイパス回路32,42,52,及び33,43,53を駆動制御して対応する各ディスク装置30,40,50を前記FC−AL1又は2から順次切り離すバイパス回路駆動制御機能を、前述したFC−AL制御部14,24を介して実行するように構成されている。
Each of the
以下、これを更に詳述する。
まず、前述した一方のディスクアダプタ装置10と他方のディスクアダプタ装置20の各構成要素は、それぞれ同一に構成され同一の機能を備えている。このため、このディスクアダプタ装置10,20の各構成要素の説明にあっては、ディスクアダプタ装置10のものについて説明する。
This will be described in detail below.
First, the constituent elements of the one
まず、前述したFC−AL制御部14は、各ディスク装置30,40,50へのアクセスを実際に行なう情報転送機能を担うほか、前述したようにリンク障害監視部としてリンク障害を監視し検出する機能を有している。即ち、FC−AL制御部14は、FC−AL(リンク)1,2を介して各ディスク装置30,40,50にアクセスし、このアクセスしたディスク装置30,40,又は50からI/Oエラー情報が供給された場合、アクセスしたディスク装置を特定するディスク識別情報とI/Oエラーが発生した旨の情報とを、MPU11へ供給する。
First, the FC-
また、このFC−AL制御部14は、ディスク装置30,40,50に対して各種のコマンド(I/O要求等)を供給した後、そのコマンドに対するディスク装置30,40,又は50からの応答が予め設定した時間内に得られない場合には、ディスク装置30,40,又は50を特定するディスク識別情報と転送タイムアウトが発生した旨の情報とをMPU11へ供給する機能を備えている。
The FC-
更に、このFC−AL制御部14は、前述したようにFC−ALリンクのリンク障害を監視し、リンク障害を発生させたディスク装置30,40,又は50が特定された場合は、そのディスク装置30,40,又は50のディスク識別情報とリンク障害が発生した旨の情報とをMPU11へ供給する機能を備えている。
Further, the FC-
又、アダプタ間通信制御部12は、両ディスクアダプタ装置10,20相互間での通信を制御する部分である。このアダプタ間通信制御部12は、リンク障害の診断を行うに際し、逆側のディスクアダプタ装置20又は10に各ディスク装置のバイパス(リンク上からあるFC−ALディスクを切り離すこと)を指示したり,診断中に受けたI/Oを逆側のディスクアダプタ装置20又は10へ依頼するときなどに使用される。
The inter-adapter
ポートバイパス制御部13は、FC−ALを制御線として使用すると共に当該FC−AL(現実にはFC−AL1とFC−AL制御部14)を介して、各ディスク装置30,40,又は50毎にあるバイパス回路32,33,42,又は43,52,53の動作を制御し、特定のディスク装置30,40,又は50をバイパスしてリンク1又は2から切り離したり、バイパスを解除して切り離したディスク装置30,40,又は50をリンク1又は2に再接続する制御を行なう。
The port
位置情報登録部15は、診断中断または診断終了時に、診断が終了した最後のディスク装置のディスク番号等の識別子を中断位置情報として登録する(記憶する)。
診断ディスク制御部16は,診断開始時に,中断位置情報を登録した中断位置情報登録部15に問い合わせ、それから診断を開始するためのディスク装置を特定するための情報として中断位置情報であるディスク番号を取り込む。
The position
The diagnostic
MPU(マイクロプロセッサユニット)11は、診断制御手段としての機能を有し、前記ポートバイパス制御部13、前記FC−AL制御部14、診断ディスク制御部16等と情報の送受を行ないながら、ディスクアダプタ装置全体の障害診断動作を含む動作を制御している。
The MPU (microprocessor unit) 11 has a function as a diagnostic control means, and transmits and receives information to and from the port
次に、上記第1実施形態におけるFC−ALディスクアレイ・システムの動作を図2乃至図6に基づいて説明する。 Next, the operation of the FC-AL disk array system in the first embodiment will be described with reference to FIGS.
ここで、図2は、ディスク装置30,40,又は50の何れかが原因となって片系(A側)リンク障害が発生した状態を示す図である。以下、このような場合について、リンク状態遷移図(図3乃至図5)及びリンク障害診断動作のフローチャート図(図6)を参照して説明する。
Here, FIG. 2 is a diagram showing a state in which a one-system (A side) link failure has occurred due to one of the
最初に、図3乃至図5に基づいて障害診断動作の概要を説明し、その後にその具体的な内容を説明する。
本第1の実施形態におけるFC−ALディスクアレイ・システムでは、先ず、FC−AL制御部でリンク障害を監視し、障害が検知されると、診断を開始すべきディスク装置を特定し、予め定められた診断順序に基づいて、順次リンクから切り離し(バイパス)、リンク障害が回復するか否かを監視し、回復すれば少なくともそのとき切り離したディスク装置に障害原因があったと一応推定する方法を用いている(ディスク診断工程)。このことを示したのが図3(A)であり、ディスクポートをリンクから順次切り離していき(ポートバイパス)、ディスク装置(#k)を切り離したとき、リンク障害が回復した状態を示す図である。
First, an outline of the fault diagnosis operation will be described based on FIGS. 3 to 5, and then the specific contents will be described.
In the FC-AL disk array system in the first embodiment, first, a link failure is monitored by the FC-AL control unit, and when a failure is detected, a disk device to be diagnosed is specified and determined in advance. Based on the diagnosed order, disconnect from the link sequentially (bypass), monitor whether the link failure recovers, and if it recovers, at least use the method of estimating that there was a failure cause at that time. (Disc diagnosis process) This is shown in FIG. 3A, in which the disk port is sequentially disconnected from the link (port bypass), and when the disk device (#k) is disconnected, the link failure is recovered. is there.
また、リンク障害(リンク異常)には、ディスク装置(ノード装置)に起因する障害と、それ以外のリンク(伝送経路)、ディスクアダプタ装置等に起因する障害があるので、全ディスク装置を切り離してもリンク障害が回復しなければ、リンク(伝送経路)等に起因する障害と判断し、本診断動作は終了する。 Also, link failures (link abnormalities) include failures caused by disk devices (node devices) and other links (transmission paths), disk adapter devices, etc., so all disk devices must be disconnected. If the link failure is not recovered, it is determined that the failure is caused by a link (transmission path) or the like, and the diagnosis operation is terminated.
次に、このリンク障害の回復が、切り離したディスク装置以外の他の原因による障害回復でないことを確認するため、切り離したディスク装置を再度リンクに接続し(バイパス解除工程)、リンク障害が起きるか否かを監視する。図3(B)は、確認のため被疑ディスク(#k)のバイパス解除を実施した時、再びリンク障害が発生し被疑ディスクが確かにリンク障害の原因であると特定できた状態を示す図である。 Next, in order to confirm that the recovery from the link failure is not due to a failure other than the disconnected disk device, reconnect the disconnected disk device to the link again (bypass release process), and check if a link failure occurs. Monitor whether or not. FIG. 3B is a diagram showing a state in which when the bypass of the suspicious disk (#k) is released for confirmation, a link failure occurs again, and the suspicious disk can be identified as the cause of the link failure. is there.
被疑ディスク以外の切り離してきたディスクのバイパスを解除してリンクと再接続する。図3(C)は、再び障害確認されたディスクを切り離し(バイパス)、被疑ディスク以外のディスク装置のバイパスを解除(再接続)し、リンク障害回復を確認して診断終了になることを示した図である。なお、複数ディスク障害の時には当初のポートバイパス工程では被疑ディスクとされなかったディスクでリンク障害が発生するので、これも被疑ディスクとして再度バイパスする。 Release the bypass of the disk other than the suspect disk and reconnect it with the link. FIG. 3C shows that the disk in which the failure has been confirmed again is disconnected (bypass), the bypass of the disk device other than the suspected disk is released (reconnected), the recovery from the link failure is confirmed, and the diagnosis is completed. FIG. In the case of a plurality of disk failures, a link failure occurs in a disk that was not made a suspect disk in the initial port bypass process, and this is also bypassed again as a suspect disk.
ここで、前述した図1にあって、中断位置情報登録部15,25および診断ディスク制御部16,26が無い場合に生じる不都合について、図4に基づいて説明する。
まず、ディスク装置30,40,又は50(実際にはディスク本体30A,40A,又は50A:以下、ここでは説明上同義にて使用する)の切り離し中に、正常なディスク装置の切り離しにもかかわらず、何らかの原因でリンク障害が回復する場合に生じるの問題点(従来技術の問題点)を、図4に基づいて説明する。
Here, the inconvenience caused when the interruption position
First, during the detachment of the
この場合、ディスク装置切り離し(バイパス)実施中にリンク障害が回復するので、最後にバイパスしたディスク装置が被疑ディスクと推定され(図4(A))、前述した他の原因による障害回復でないことを確認のため、バイパス解除(再接続)を行う。この場合は、リンク障害は発生していないため、被疑ディスク装置を特定できないまま診断は中断となる(図4(B))。再びリンク障害が生じた際、従来技術では予め設定された診断順序に従って最初のディスク装置から診断を始めるので、リンク障害が短期間に回復すると被疑ディスクが検出できないという事態になる場合がある(図4(C))。 In this case, since the link failure is recovered while the disk device is being disconnected (bypassed), it is estimated that the disk device that was bypassed last is the suspected disk (FIG. 4A), and that the failure has not been recovered due to other causes described above. For confirmation, cancel the bypass (reconnect). In this case, since no link failure has occurred, the diagnosis is interrupted without identifying the suspicious disk device (FIG. 4B). When a link failure occurs again, the conventional technology starts diagnosis from the first disk device in accordance with a preset diagnosis order, so that if the link failure recovers in a short time, the suspect disk may not be detected (see FIG. 4 (C)).
これに対し、本実施形態に係るリンク診断動作では、正常ディスクをバイパス実施中にリンク障害が回復する場合にも、被疑ディスク装置が最終的に特定されることを図5に基づいて説明する。 On the other hand, in the link diagnosis operation according to the present embodiment, it will be described based on FIG. 5 that the suspected disk device is finally specified even when the link failure is recovered while bypassing the normal disk.
図5(A)は、図4(A)と同様に、正常なディスク装置をバイパス実施中に、リンク障害が回復する状態を示す図であり、図5(B)は、図4(B)と同様に、リンク障害が回復した状態で、確認のため被疑(実は正常)ディスクに対しポートバイパス解除を実施した時、リンク障害が起きず確認に失敗した(診断中断)状態を示す図である。図5(C)は、再びリンク障害が発生したとき、中断したときに登録しておいた中断位置情報に基づいて中断した続きの未診断ディスク装置からリンク診断を実施するため、リンク障害の期間が短い場合にも被疑ディスクがいずれ検出できることを示している。 FIG. 5A is a diagram showing a state where a link failure is recovered while bypassing a normal disk device, as in FIG. 4A, and FIG. Fig. 11 is a diagram showing a state in which a link failure does not occur and a check fails (diagnosis is interrupted) when a port bypass release is performed on a suspected (actually normal) disk for confirmation in a state where the link failure has been recovered, similarly to FIG. . FIG. 5C shows a link failure period when link failure occurs again, and link diagnosis is performed from the undiagnosed disk device that has been interrupted based on the interrupted position information registered at the time of interruption. This indicates that the suspicious disk can be detected even if is short.
以上、本実施形態に係るシステム、或いはその診断方法によれば、障害ディスク装置が特定できないままリンク障害が正常回復して診断工程が実行不可能になる場合にも、中断位置情報を登録しているので、その診断工程が再開する場合に、登録された前記中断位置情報を取得し診断を始めるべきディスク装置を特定し、予め定められた診断順序に基づいて診断できるので、いづれ障害ディスクを特定できる。 As described above, according to the system or the diagnosis method thereof according to the present embodiment, even when the link failure is normally recovered without being able to identify the failed disk device and the diagnosis process cannot be performed, the interruption position information is registered. Therefore, when the diagnosis process is resumed, the registered interrupt position information is obtained, the disk device to be diagnosed can be specified, and the diagnosis can be performed based on a predetermined diagnosis order. it can.
上述した動作を図6のフローチャートを用いて更に具体的に説明する。
先ず、ディスクアダプタ装置10,20は、I/Oを処理しながら、定期的にリンクの状態を監視し、リンク障害が発生していないかをチェックしている(リンク障害監視工程)。図2に示すように、例えばディスクアダプタ装置10側でリンク異常が発生した場合は、予め定めた診断順序(ここでは説明の便宜のため、ディスク番号順に診断する)に基づいて、ディスクを切り離し障害が回復するか否かをチェックして診断をおこなう。診断を始めるディスクの特定は、診断ディスク制御部16が位置情報登録部15へ登録されている情報を問い合わせ、診断を開始すべきディスク番号を決定する(ステップS101、ディスク特定工程)。
The above-described operation will be described more specifically with reference to the flowchart of FIG.
First, the
上記ステップS101で決定したディスクに対して、バイパス(リンクからある特定のディスク装置を切り離す操作をいう)を行う(ステップS102、バイパス実施工程)。 Bypassing (referring to an operation of disconnecting a specific disk device from the link) is performed on the disk determined in step S101 (step S102, bypassing step).
このとき、リンク障害が発生しているディスクアダプタ装置10側のポートAからはディスクへのI/O処理が出来ないため、アダプタ間通信制御部12を通してディスクアダプタ装置20へその処理を依頼する。バイパスを依頼されたディスクアダプタ装置20は,両ディスクアダプタ装置10,20が行うI/O処理を行いながら、図2のようにディスクアダプタ装置10からリンクの回復の報告があるまで、ポートバイパス制御部13がディスクアダプタ装置10から指定されたディスク装置のディスクアダプタ装置10側のバイパスを行う。
At this time, since I / O processing to the disk cannot be performed from the port A on the
ディスクアダプタ装置10のFC−AL制御部14では、リンク状態を定期的に監視しており、前記ポートバイパスによってリンク障害が回復するかを否かも監視・判定する(ステップS103、リンク監視工程)。もしリンク障害が回復(YES)ならば、切り離した(バイパスした)ディスク装置をリンク障害を発生させた被擬ディスク装置と判断して、次の確認のためのバイパス解除工程(ステップS104)に進む。
The FC-
このバイパスを行ってもリンク障害が回復しない場合には、別のディスク装置が被擬ディスク装置であると判定して、次の工程(ステップS110)に進む。 If the link failure is not recovered even after performing this bypass, it is determined that another disk device is a pseudo disk device, and the process proceeds to the next step (step S110).
このステップS110では、全てのディスク装置の診断を終了したか否かを判定する(ステップS110)。未診断のディスクが残っていれば、ステップS101に戻って上述のような診断順序に基づいてディスク装置の診断(バイパス)を繰り返す。最後のディスク(図5の例ではDISK#n)をバイパスしても回復しない場合には、診断を実施していない最初のディスク(図5の例ではDISK#0)の診断を実施する。全ディスクのバイパスを実施してもリンクが回復しない場合には、ディスク装置(ノード側)ではなくリンク側の障害、即ち「経路障害」と判断し(ケーブルやディスクアダプタ装置が被擬と判断)、診断を終了し、ディスクアダプタ装置10を切り離す(ステップS111)。
In this step S110, it is determined whether or not the diagnosis of all the disk devices has been completed (step S110). If an undiagnosed disk remains, the process returns to step S101 to repeat the diagnosis (bypass) of the disk device based on the above-described diagnosis sequence. If the last disk (DISK # n in the example of FIG. 5) does not recover even when bypassed, diagnosis of the first disk (
バイパスでリンク障害が回復した場合は、そのリンク障害回復がバイパスしてディスク装置を切り離したことによるものか、或いは一過性の他の原因によるリンク障害の回復によるものかを確認するために、バイパスの解除(切り離していた被疑ディスク装置をリンクに接続し直す)を行う(ステップS104、バイパス解除工程)。このとき、実際には、ディスクアダプタ装置10は、アダプタ間通信制御部12を通してディスクアダプタ装置20へこのバイパス解除を依頼する。ディスクアダプタ装置20は、ポートバイパス制御部13を通して、指示された被擬ディスクのバイパス解除を行い、被擬ディスクをFC−ALリンクにつなぎ直す。
If the link failure is recovered by bypass, in order to confirm whether the link failure recovery is due to bypassing and disconnecting the disk device, or due to recovery of link failure due to other temporary causes, The bypass is released (the suspicious disk device that has been disconnected is reconnected to the link) (step S104, bypass release step). At this time, the
ディスクアダプタ装置10のFC−AL制御部14が,被擬ディスクのバイパス解除によってリンク障害が回復したかを確認する(ステップS105)。被擬ディスクのバイパス解除で再びリンク障害となった場合には、被擬ディスクがリンク障害の原因であると判断し、障害ディスクとしてディスク番号を障害ディスク番号登録部に登録する(ステップS106、障害ディスク登録工程)。尚、このとき診断中断状態も終了するので、中断位置情報を登録する位置情報登録部15に、完了情報として前記診断順序において最初に診断をすべきディスク番号を登録するようにしてもよい。
The FC-
続いて、ディスクアダプタ装置20のポートバイパス制御部13は、障害ディスクと判断した上記ディスク装置をリンクから切り離す。これにより、診断終了となる(ステップS107)。
Subsequently, the port
一方、ステップS105において、被擬ディスクのバイパス解除をしてリンクに再接続しても、リンク障害が回復したままだった場合には、一過性のリンクダウンによる影響だと判断し、バイパスを実施していたディスク装置の1つ前のディスク装置の識別子であるディスク番号、すなわち、診断が完了した最後のディスク装置のディスク番号を中断位置情報として前述した位置情報登録部15に登録し(ステップS108、中断位置情報登録工程)、これをもって診断を終了する(ステップS109)。 On the other hand, in step S105, even if the bypass of the pseudo disk is released and the link is reconnected, if the link failure remains recovered, it is determined that the effect is due to a temporary link down, and the bypass is disabled. The disk number that is the identifier of the disk device immediately before the disk device that has been implemented, that is, the disk number of the last disk device that has been diagnosed, is registered as interruption position information in the position information registration unit 15 (step S108, interruption position information registration step), and the diagnosis is completed with this (step S109).
ここで、上述した診断工程、中断位置情報登録工程、および診断ディスク制御工程の各工程については、これらの実行処理内容をプログラム化し、コンピュータ(MPU)に実行させるように構成してもよい。
この場合、リンク障害診断プログラムとしては下記のようになる。
即ち、本実施形態におけるリンク障害診断プログラムにあっては、FC−AL接続された複数のディスク装置の何れかにリンク障害が発生した場合、当該複数のディスク装置の内の障害ディスク装置を特定するために予め設定された診断順序に基づいて前記各ディスク装置を前記FC−ALから順次切り離してリンク障害が回復するか否かを監視するディスク診断処理と、前記障害ディスク装置が特定できないままリンク障害が正常回復して前記診断工程が実行不要になった場合に,その後の診断再開に際して必要な最初の診断対象となるディスク装置を特定するための中断位置情報を予め装備した位置情報登録部に登録する中断位置情報登録処理と、前述したリンク障害の診断再開に際しては前記登録された中断位置情報に基づいて診断を始めるべき最初のディスク装置を特定する診断ディスク特定処理と、をコンピュータに実行させるように構成した。
Here, with respect to each of the above-described diagnosis process, interruption position information registration process, and diagnosis disk control process, the contents of these execution processes may be programmed and executed by a computer (MPU).
In this case, the link failure diagnosis program is as follows.
That is, in the link failure diagnosis program according to the present embodiment, when a link failure occurs in any of a plurality of disk devices connected by FC-AL, the failed disk device in the plurality of disk devices is specified. For this purpose, a disk diagnosis process for monitoring whether or not a link failure is recovered by sequentially disconnecting the respective disk devices from the FC-AL based on a diagnosis order set in advance, and a link failure without specifying the failed disk device When the system recovers normally and the diagnosis process becomes unnecessary, it is registered in the position information registration unit equipped in advance with interrupt position information for identifying the disk device that is the first diagnosis target necessary for the subsequent diagnosis restart When the interruption position information registration process to be performed and the above-described link failure diagnosis restart, the diagnosis is performed based on the registered interruption position information. Configured diagnostic disk identification processing for identifying a first disk device should Mel, a to cause the computer to execute.
ここで、前述した前記診断ディスク特定処理にあって、前記中断位置情報に特定されている情報が前記障害診断が完了した最後のディスク装置である場合には、前記リンク障害の診断再開に際して当該ディスク装置の次のディスク装置を診断再開後の診断を始めるべき最初のディスク装置として特定処理するように構成してもよい。 Here, in the diagnosis disk specifying process described above, when the information specified in the interruption position information is the last disk device for which the failure diagnosis has been completed, the disk is restored when the link failure diagnosis is resumed. The next disk device of the device may be specified and processed as the first disk device to start diagnosis after resuming diagnosis.
以上説明した構成と動作を備えた上記システムでは、図8(B)に示すようにリンクダウンが継続している期間がリンク診断に必要な期間より短い障害が繰り返し発生した場合でも、いずれ全ディスクを診断できるので障害ディスク装置を特定することができるというメリットを有している。 In the system having the configuration and operation described above, as shown in FIG. 8B, even if a failure in which the link-down continues is shorter than the period required for link diagnosis repeatedly occurs, Therefore, it is possible to identify the failed disk device.
また、上述した説明では、診断順序として、予め定められた順番にディスク装置を1台づつバイパスして診断するように説明しているが、診断順序としては、例えばディスク装置の障害履歴の多い順番に従って順次切り離しを実行するように予め特定されており、中断位置情報は診断が完了した最後のディスク装置番号であるようにしてもよい。
これにより障害履歴を考慮した診断の順位付けが可能になり、より優れた診断保守が可能になる。
Further, in the above description, the diagnosis order is described so that the diagnosis is performed by bypassing the disk devices one by one in a predetermined order. However, as the diagnosis order, for example, the order in which the failure history of the disk devices is large. The interruption position information may be the last disk device number for which diagnosis has been completed.
As a result, the diagnosis can be ranked in consideration of the failure history, and better diagnosis maintenance can be performed.
更に又、診断対象である複数のディスク装置を2つのブロック(集合)に分け、2分法で1 ブロックづつバイパスをして被擬ディスクを特定する方式で診断を実施し、診断を中断する場合には中断位置情報登録部15が診断が完了していないディスク装置のブロックのリストを登録し、診断開始時に診断ディスク制御部16が中断位置情報登録部15に対して診断を実施する必要のあるディスク装置のブロックを問い合わせ、返却されたディスク装置のブロックを二分法で半分ずつバイパスして被擬を特定する方法でもよい。
In addition, when diagnosing a disk by dividing multiple disk units to be diagnosed into two blocks (sets) and bypassing each block by the bisection method to identify the simulated disk, and suspending the diagnosis The interrupt position
この方法は、順次1 台づつポートバイパスとポートバイパス解除をおこなう方法よりも大幅に診断時間の短縮が可能となる。ディスク装置の数が増える程、その効果は大きいものとなる。 This method can significantly reduce the diagnosis time compared to the method of performing port bypass and port bypass release one by one. The effect increases as the number of disk devices increases.
即ち、上述した実施形態にあっては、障害診断の中断に際しては、その後の診断再開に際して必要な最初の診断対象となるディスク装置を特定するための中断位置情報を登録するように構成したので、障害診断の中断後のリンク診断の再開時には直ちに診断対象の最初のディスク装置が特定されることとなり、これがため、リンク障害が継続している期間がリンク診断に必要な期間より短く又障害が間歇的に発生する場合でも、未診断のディスクに合わせて診断を再開することができ、障害再発に対してはリンク診断を迅速に且つ効率的に実行することができる。
このように、本第1の実施形態にあっては、障害診断の中断時に際しては、中断位置情報として例えば診断が終了した最後のディスク装置の番号等が記憶されるので、リンク診断再開時には直ちに未診断のディスク装置30,40,又は50から診断が再開されるように設定することができ、これがため、リンク障害が継続している期間がリンク診断に必要な期間より短く又障害が間歇的に発生する場合でも、未診断のディスクから診断を開始でき、障害再発に対してはリンク診断を迅速に且つ効率的に実行し得るという従来にない保守性に優れたリンク障害診断方法、ディスクアレイ・システム、及びリンク障害診断プログラムを提供することができる。
That is, in the above-described embodiment, when the failure diagnosis is interrupted, it is configured to register the interruption position information for specifying the first disk device to be diagnosed necessary for the subsequent diagnosis restart. When the link diagnosis is resumed after the failure diagnosis is interrupted, the first disk device to be diagnosed is immediately identified. Therefore, the period during which the link failure continues is shorter than the period required for the link diagnosis, and the failure is intermittent. Even if the error occurs, the diagnosis can be resumed according to the undiagnosed disk, and the link diagnosis can be executed quickly and efficiently for the failure recurrence.
As described above, in the first embodiment, when the failure diagnosis is interrupted, for example, the number of the last disk device whose diagnosis has been completed is stored as the interruption position information. Diagnosis can be set to resume from
〔第2の実施形態〕
次に、本発明の第2の実施形態を、図7に基づいて説明する。
ここで、前述した第1実施形態と同一の構成部材については同一の符号を用いるものとする。
[Second Embodiment]
Next, a second embodiment of the present invention will be described with reference to FIG.
Here, the same reference numerals are used for the same constituent members as those of the first embodiment described above.
この図7に示すFC−ALディスク・アレイシステムは、複数のディスク装置30,40,50(説明の便宜のため3台の装置を示しているがこれに限らない)とこれらをループ状のセットワークであるFC−AL1(Fibre Channel-Arbitrated Loop )とを切り離し自在に接続するバイパス回路32,42,52の接続/切り離し制御に際してその制御信号を伝送する制御線3と、外部のホストコンピュータ5と、FC−ALの接続を仲介するディスクアダプタ装置10とを備えて構成されている。
即ち、この第2実施形態におけるFC−ALディスク・アレイシステムは、図7に示すように、FC−ALリンクが1重構成のディスク・アレイシステムである。
FC-AL disk array system shown in FIG. 7, a plurality of
That is, the FC-AL disk array system according to the second embodiment is a disk array system having a single FC-AL link as shown in FIG.
前述したディスクアダプタ装置10は、前述した第1実施形態におけるディスクアダプタ装置10とほぼ同一の構成を備えており、FC−ALのリンク状態を監視するリンク監視機能を備えたFC−AL制御部14と、制御線3を通じてバイパス回路32,42,52の接続切り離し制御を行なうポートバイパス制御部13と、診断中断時の中断位置情報を格納しておく中断位置情報登録部15と、診断再開に当たって中断位置情報登録部15に格納した中断位置情報を取得し診断を始めるべきディスク装置30,40,又は50を特定する診断ディスク制御部16と、これら全体の制御を司るMPU11とを具備している。そして、これら各構成部材は、前述した第1の実施形態とほぼ同一の機能を備えて構成されている。
The
次に、本実施形態におけるFC−ALディスクアレイ・システムの動作についてその概要を説明する。
まず、ディスクアダプタ装置10に設けられたFC−AL制御部14がリンク障害を発見すると、複数のディスク装置30,40,又は50の内のリンク障害を引き起こしている障害ディスク装置を特定するために、予め設定された順序に基づいて、ディスク装置30,40,又は50をFC−AL1から順次切り離しながらリンク障害が回復するか否かをリンク障害監視機能を持つFC−AL制御部14でチェックする。
Next, an outline of the operation of the FC-AL disk array system in this embodiment will be described.
First, when the FC-
もし、あるディスク装置を切り離したときリンク障害が回復すると、その切り離したディスク装置がリンク障害を引き起こした被疑ディスク装置と推定される。そこで確認のため、そのディスク装置を再度FC−ALに接続して確かに再度リンク障害が生じることを確認してこれを障害ディスクと特定し、FC−AL1から再度切り離す(ディスク診断工程)。これによってリンク障害は回復する。このあと、切り離したディスク装置は修理するか又は取り代えられて、FC−AL1の所定位置(元の位置)に組み込まれる。 If a link failure recovers when a certain disk device is disconnected, it is estimated that the disconnected disk device is the suspected disk device that caused the link failure. Therefore, for confirmation, the disk device is connected to the FC-AL again, it is confirmed that a link failure has occurred again, this is identified as a failed disk, and it is separated from the FC-AL1 again (disk diagnosis step). This recovers the link failure. Thereafter, the disconnected disk device is repaired or replaced, and incorporated into a predetermined position (original position) of FC-AL1.
尚、上述したディスク装置をFC−ALから切り離したり再接続したりするのは、実際にはバイパス回路32,42,52と、制御線3で接続されたポートバイパス制御部13からの切り離し(バイパス)指令と再接続(バイパス解除)指令とで行なわれている。
Note that the above-described disk device is disconnected or reconnected from the FC-AL in practice by disconnecting from the
ここで、障害ディスク装置が特定できないままリンク障害が正常回復してディスク診断工程が不可能(不要)になる場合、中断位置情報登録部15に、次回診断を開始すべきディスク装置を特定できる中断位置情報を登録し(中断位置情報登録工程)、ディスク診断工程の再開に際しては、診断ディスク制御部16が、登録された中断位置情報を取得し診断を始めるべきディスク装置を特定する(診断ディスク制御工程)動作をするのが本実施形態に係るシステムの特徴である。
Here, when the link failure recovers normally without the failure disk device being identified and the disk diagnosis process becomes impossible (unnecessary), the interruption position
これにより、障害診断中に何らかの原因によりリンク障害が回復して診断が中断される場合にも、次回診断を開始すべきディスク装置が特定できる中断位置情報を登録しているので、次回診断時には既に診断が終了しているディスク装置を除いて、まだ診断を受けていない残りのディスク装置から診断を行い、最終的には障害ディスク装置が特定されるようになっている。診断時間に比較してリンク障害期間が短く、診断中断が生じやすいリンク障害等にあっては、特に有効である。 As a result, even if the link failure recovers for some reason during the failure diagnosis and the diagnosis is interrupted, the interruption position information that can identify the disk device to start the next diagnosis is registered. With the exception of disk devices that have been diagnosed, diagnosis is performed from the remaining disk devices that have not yet been diagnosed, and the failed disk device is finally identified. This is particularly effective for a link failure or the like in which the link failure period is shorter than the diagnosis time and the diagnosis is likely to be interrupted.
尚、前述した診断順序は、ディスク装置30,40,又は50を予め設定された順番に従って順次切り離しを実行するように予め特定されたものであり、前記中断位置情報は診断が完了した最後のディスク装置番号であるようにしてもよい。
Note that the above-described diagnosis order is specified in advance so that the
また、前記診断順序は、ディスク装置の障害履歴の多い順番に従って順次切り離しを実行するように予め特定されたものであり、前記中断位置情報は診断が完了した最後のディスク装置番号であるようにしてもよい。障害履歴を考慮した診断順位により、より速い診断が可能になる。 Further, the diagnosis order is specified in advance so as to sequentially perform disconnection according to the order in which the failure history of the disk devices is large, and the interruption position information is the last disk device number for which diagnosis has been completed. Also good. Diagnosis rank considering the fault history enables faster diagnosis.
更に又、前記診断順序は、複数のディスク装置を2つのブロックに分け、同一ブロックに属するディスク装置はすべて同時に切り離しを実施し、その中に障害ディスク装置が含まれていればリンク障害が回復するので、更にそのブロックを二分して同様の方法を繰り返すことによって障害ノード装置を特定するものであり、前記中断位置情報は診断が完了した最後のブロック番号であるようにしてもよい。二分法は、診断回数がディスク装置の台数Nの対数(底2)でよく、ディスク装置の台数が多い場合に、特に有効な方法であり、これに中断したブロック番号を記憶させ再開する本実施形態を適応することにより、より速く確実な診断が可能になる。 Furthermore, in the diagnosis sequence, a plurality of disk devices are divided into two blocks, all the disk devices belonging to the same block are simultaneously disconnected, and if a failed disk device is included in the disk device, the link failure is recovered. Therefore, the failed node device may be specified by further dividing the block into two and repeating the same method, and the interruption position information may be the last block number for which diagnosis has been completed. The bisection method is particularly effective when the number of diagnoses can be the logarithm (base 2) of the number N of disk devices, and the number of disk devices is large. By adapting the form, faster and more reliable diagnosis is possible.
ところで、上記第2の実施形態における上記システムでは、FC−ALがリンク障害を起こし診断を行なっている間は、ホストコンピュータ5とディスク装置30,40,50との間で情報の転送はできない。これに対し、前述した第1実施形態における二重化ディスクアレイ・システム(図1参照)では、一つのFC−ALがリンク障害になっても、残るFC−ALがホストコンピュータ5とディスク装置間の情報転送路の役割と制御線3の両者の役割を果たし得るように構成されており、より耐障害性の高いシステムとなっている。
その他、FC−ALリンクが一重構成のディスクアレイ・システムとして必要とする構成およびその作用効果については、前述した第1の実施形態内におけるの一重構成部分で開示した内容とほぼ同一となっている。
By the way, in the system in the second embodiment, information cannot be transferred between the
In addition, the configuration required for the FC-AL link as a single-layer disk array system and the operation and effects thereof are substantially the same as the contents disclosed in the single-layer configuration portion in the first embodiment described above. .
以上のように、上述した各実施形態にあっては、障害ディスク装置を特定できないまま診断を中断せざるを得ない時でも、位置情報登録部15(又は25)に診断が終了した最後のディスク装置のディスク番号を登録しておき、リンク診断開始時には、診断ディスク制御部16(又は26)が位置情報登録部15(又は25)に問い合わせて、次のディスク装置から診断を実施するように構成したので、リンクダウンが継続している期間がリンク診断に必要な期間より短く、又障害が繰り返し発生した場合でも、診断開始ディスクをずらすことが可能となり最終的に被擬ノード装置(障害ディスク装置)を特定することができ、保守性に優れたリンク障害診断方法、ディスクアレイ・システム、及びリンク障害診断プログラムを提供することができる。 As described above, in each of the above-described embodiments, the last disk whose diagnosis has been completed in the position information registration unit 15 (or 25) even when the diagnosis has to be interrupted without identifying the failed disk device. The device disk number is registered, and at the start of link diagnosis, the diagnosis disk control unit 16 (or 26) makes an inquiry to the position information registration unit 15 (or 25) and performs diagnosis from the next disk device. Therefore, even if the link down period is shorter than the period required for link diagnosis and the failure occurs repeatedly, the diagnosis start disk can be shifted, and finally the simulated node device (failed disk device) A link fault diagnosis method, a disk array system, and a link fault diagnosis program excellent in maintainability It can be.
1 ファイバチャネル(ポートA側のリンク:FC−AL1)
2 ファイバチャネル(ポートB 側のリンク:FC−AL2)
3 制御線
10,20 ディスクアダプタ装置(コントローラ)
12,22 アダプタ間通信制御部
13,23 ポートバイパス制御部
14,24 FC−AL制御部(リンク障害監視手段)
15,25 中断位置情報登録部
16,26 診断ディスク制御部
30,40,50 ディスク装置(ノード装置)
30A,40A,50A ディスク本体
32,42,52 ポートA側のバイパス回路
33,43,53 ポートB側のバイパス回路
1 Fiber Channel (Port A side link: FC-AL1)
2 Fiber Channel (Port B side link: FC-AL2)
3
12, 22 Communication control unit between
15, 25 Interrupt position
30A, 40A, 50A Disc
Claims (7)
前記障害ディスク装置が特定できないままリンク障害が正常回復して前記診断工程が実行不要になった場合に,診断再開時に最初に診断を開始すべきディスク装置を特定するための中断位置情報を,予め装備したディスクアダプタ装置に登録する中断位置情報登録工程と、
前記ディスク診断工程の再開に際しては、前記登録された中断位置情報を取得しこれに基づいて診断を始めるべき最初のディスク装置を特定する診断ディスク特定工程と、
を備え、
前記中断位置情報登録工程では、前記中断位置情報として、診断が完了した最後のディスク装置を特定すると共に対応する識別子を登録するようにしたことを特徴とするリンク障害診断方法。 When a link failure occurs in any of a plurality of FC-AL connected disk devices, each of the disk devices is based on a diagnosis order set in advance to identify the failed disk device of the plurality of disk devices. Disk diagnosis step of determining whether or not the link failure is recovered by sequentially disconnecting from the FC-AL;
When the link failure is recovered normally without the failure disk device being identified and the execution of the diagnosis process becomes unnecessary, the interruption position information for specifying the disk device to start diagnosis first when the diagnosis is restarted is previously stored. Interruption position information registration process to register in the equipped disk adapter device,
Hand upon resumption of the disk diagnosis step includes a diagnostic disc specifying step of specifying a first disk device should begin diagnosis acquires interruption location information the registered based on this,
Equipped with a,
In the interruption position information registration step, the last disk device for which diagnosis has been completed is specified and a corresponding identifier is registered as the interruption position information .
前記ディスク診断工程における前記診断順序は、前記複数のディスク装置を2つのブロックに分け、同一ブロックに属するディスク装置はすべて同時に切り離しを実施し、その中に障害ディスク装置が含まれていればリンク障害が回復するので更にそのブロックを2分して同様の方法を繰り返すことによって障害ディスク装置を特定するものであることを特徴とするリンク障害診断方法。 The link failure diagnosis method according to claim 1,
The diagnosis order in the disk diagnosis step is that the plurality of disk devices are divided into two blocks, all the disk devices belonging to the same block are separated at the same time, and if a failed disk device is included in the disk device, a link failure The link failure diagnosis method is characterized in that the failed disk device is identified by repeating the same method after dividing the block into two.
前記複数の各ディスク装置が二重化されたFC−ALに二重化FCポートを介して接続されている場合、前記中断位置情報登録工程では、前記一方の又は他方のFCポート側でリンク障害が発生した場合にはこれに対応して当該一方の又は他方のFCポート側に装備されたディスクアダプタ装置に、それぞれ前記中断位置情報を登録するようにしたことを特徴とするリンク障害診断方法。 In the link failure diagnosis method according to claim 1 or 2 ,
When each of the plurality of disk devices is connected to a duplexed FC-AL via a duplexed FC port, in the interrupt position information registration step, when a link failure occurs on the one or the other FC port side features and to Brighter link failure diagnosis method that has the disk adapter unit that is provided to the one or the other FC port side the Correspondingly, respectively registering the interruption position information to.
前記各FC−AL制御部を、
対応する前記各ディスク装置が対応するFC−ALから順次切り離された場合にリンク障害が回復するか否かを監視するリンク障害監視機能と、
障害ディスク装置が特定できないまま前記リンク障害が回復して前記リンク障害監視機能による障害回復有無の監視が実行不要となった場合に,その後の診断再開に際し最初に診断を開始すべきディスク装置を特定するための位置情報を,予め装備した対応する位置情報登録部に登録する位置情報登録制御機能とを備えた構成とし、
前記リンク障害の診断再開に際しては前記位置情報登録部に記憶された位置情報に基づいて診断を始めるべき最初のディスク装置を特定する診断ディスク制御部を、前記各FC−AL制御部に併設する共に、
前記各FC−AL制御部は、前記中断位置情報として、診断が完了した最後のディスク装置を特定すると共に対応する識別子を登録するようにしたことを特徴とするディスクアレイ・システム。 A plurality of disk devices, a duplex FC-AL that connects these in a loop with a duplex FC port, and a disk adapter device that connects one and the other FC-AL to an external host computer, Each disk adapter device includes an FC-AL control unit that detects when a link failure has occurred in any of a plurality of FC-AL connected disk devices, and a failed disk device in the plurality of disk devices. said each FC-AL controller in the disk array system of the redundant constitution comprising a sequentially disconnecting port bypass controller the disk devices from FC-AL based on a preset diagnostic sequence to identify,
A link failure monitoring function for monitoring whether or not a link failure is recovered when each corresponding disk device is sequentially disconnected from the corresponding FC-AL;
If the left is failed disk device can not be identified link failure is restored to monitor the fault recovery whether by the link failure monitoring function becomes unnecessary execution, identify first disk device should begin diagnosis upon subsequent diagnostic Resume And a position information registration control function for registering the position information to be registered in a corresponding position information registration unit equipped in advance,
When resuming the diagnosis of the link failure, a diagnostic disk control unit for specifying the first disk device to be diagnosed based on the position information stored in the position information registration unit is provided in each FC-AL control unit. ,
Each FC-AL control unit, the disk array system being characterized in that so as to register the corresponding identifier together as the interruption position information to identify the last disk device diagnostics are complete.
前記各ディスク装置に対する障害診断の中断後の診断再開に際しては前記何れか一方の位置情報登録部に登録された中断位置情報を、当該位置情報登録部と同一FCポート側の診断ディスク制御部が取得するように構成すると共に、
この取得した中断位置情報で特定されているディスク装置が前記診断が完了した最後のディスク装置である場合には当該ディスク装置の次のディスク装置を診断再開後の最初のディスク装置として特定する機能を、前記診断ディスク制御部が備えていることを特徴としたディスクアレイ・システム。 The disk array system according to claim 4 , wherein
When resuming the diagnosis after interruption of failure diagnosis for each disk device, the diagnosis disk control unit on the same FC port side as the position information registration unit acquires the interruption position information registered in any one of the position information registration units As well as
When the disk device specified by the obtained interruption position information is the last disk device for which the diagnosis has been completed, a function for specifying the next disk device of the disk device as the first disk device after the diagnosis is resumed. A disk array system comprising the diagnostic disk control unit.
前記各ディスク装置には前記二重FCポートに対応して一方と他方のバイパス回路が各々装備され、
前記一方と他方の各ポートバイパス制御部が、前記各バイパス回路を駆動制御して対応する各ディスク装置を前記FC−ALから順次切り離すバイパス回路駆動制御機能を、前記FC−AL制御部を介して実行するように構成されていることを特徴としたディスクアレイ・システム。 In the disk array system according to claim 4 or 5 ,
Each disk device is equipped with one and the other bypass circuit corresponding to the dual FC port,
Via the FC-AL control unit, the one and the other port bypass control units, via the FC-AL control unit, drive-control the bypass circuits to sequentially disconnect the corresponding disk devices from the FC-AL. A disk array system that is configured to run.
前記障害ディスク装置が特定できないままリンク障害が正常回復して前記診断工程が実行不要になった場合に,診断再開時に,その後の診断再開に際して必要な最初の診断対象となるディスク装置を特定するための中断位置情報を,予め装備した位置情報登録部に登録する中断位置情報登録処理機能、
および前記リンク障害の診断再開に際しては、前記登録された中断位置情報に基づいて診断を始めるべき最初のディスク装置を特定する診断ディスク特定処理機能、
を設けると共に、
中断位置情報登録処理機能による中断位置情報の登録処理にあっては、前記中断位置情報として、診断が完了した最後のディスク装置を特定すると共に対応する識別子を登録処理するようにし、
これらをコンピュータに実現させるようにしたことを特徴とするリンク障害診断プログラム。 When a link failure occurs in any of a plurality of FC-AL connected disk devices, each of the disk devices is based on a diagnosis order set in advance to identify the failed disk device of the plurality of disk devices. Disk diagnostic processing function to monitor whether or not the link failure is recovered by sequentially disconnecting from the FC-AL
Wherein when the diagnosing step failed disk device is left link failure can not be identified successfully recovered becomes unnecessary execution, at the time of diagnosis resumed, subsequent diagnostic resumed upon initial diagnosis target for identifying the disk device comprising the necessary interruption position information, pre-equipped with location information registration section interruption position information registration processing function to be registered in the,
And upon diagnosis resumption of the link failure, the diagnostic disk identification processing function for identifying the first disk device should begin a diagnosis based on the registered interruption position information,
And providing
In the interruption position information registration process by the interruption position information registration processing function, as the interruption position information, the last disk device for which diagnosis has been completed is specified and a corresponding identifier is registered ,
A link failure diagnosis program characterized in that these are realized by a computer.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007094895A JP4678384B2 (en) | 2007-03-30 | 2007-03-30 | Link failure diagnosis method, disk array system, and link failure diagnosis program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007094895A JP4678384B2 (en) | 2007-03-30 | 2007-03-30 | Link failure diagnosis method, disk array system, and link failure diagnosis program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2008250929A JP2008250929A (en) | 2008-10-16 |
JP4678384B2 true JP4678384B2 (en) | 2011-04-27 |
Family
ID=39975750
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007094895A Expired - Fee Related JP4678384B2 (en) | 2007-03-30 | 2007-03-30 | Link failure diagnosis method, disk array system, and link failure diagnosis program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4678384B2 (en) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2010041294A1 (en) * | 2008-10-07 | 2010-04-15 | Hitachi, Ltd. | Storage system detecting physical storage device suffering failure, and method of performing processing for additional storage device provision |
JP4734663B2 (en) * | 2009-01-23 | 2011-07-27 | 富士通株式会社 | Virtual library apparatus and physical drive diagnosis method |
CN111010315A (en) * | 2019-12-12 | 2020-04-14 | 江苏艾佳家居用品有限公司 | SDN-based link fault diagnosis method |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0467476A (en) * | 1990-07-09 | 1992-03-03 | Fujitsu Ltd | Array disk controller |
JPH04230529A (en) * | 1991-01-07 | 1992-08-19 | Nippon Telegr & Teleph Corp <Ntt> | Method for restarting expert system interruption |
JPH05191496A (en) * | 1992-01-16 | 1993-07-30 | Fujitsu Ltd | Fault diagnostic system |
JPH05323705A (en) * | 1992-05-21 | 1993-12-07 | Minolta Camera Co Ltd | Image forming device |
JPH10275060A (en) * | 1997-03-31 | 1998-10-13 | Nec Corp | Array disk controller |
JP2001216206A (en) * | 2000-02-01 | 2001-08-10 | Nec Corp | Fault analysis method for loop-like interface, and system provided with fault analysis function |
-
2007
- 2007-03-30 JP JP2007094895A patent/JP4678384B2/en not_active Expired - Fee Related
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0467476A (en) * | 1990-07-09 | 1992-03-03 | Fujitsu Ltd | Array disk controller |
JPH04230529A (en) * | 1991-01-07 | 1992-08-19 | Nippon Telegr & Teleph Corp <Ntt> | Method for restarting expert system interruption |
JPH05191496A (en) * | 1992-01-16 | 1993-07-30 | Fujitsu Ltd | Fault diagnostic system |
JPH05323705A (en) * | 1992-05-21 | 1993-12-07 | Minolta Camera Co Ltd | Image forming device |
JPH10275060A (en) * | 1997-03-31 | 1998-10-13 | Nec Corp | Array disk controller |
JP2001216206A (en) * | 2000-02-01 | 2001-08-10 | Nec Corp | Fault analysis method for loop-like interface, and system provided with fault analysis function |
Also Published As
Publication number | Publication date |
---|---|
JP2008250929A (en) | 2008-10-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP3620527B2 (en) | Failure analysis method for loop interface and system having failure analysis function | |
US10394672B2 (en) | Cluster availability management | |
US7213102B2 (en) | Apparatus method and system for alternate control of a RAID array | |
JP4940967B2 (en) | Storage system, storage device, firmware hot replacement method, firmware hot swap program | |
US8032793B2 (en) | Method of controlling information processing system, information processing system, direct memory access control device and program | |
US8370592B1 (en) | Multi-machine atomic seamless migration | |
US8010713B2 (en) | Storage system, storage apparatus, and method for hot swapping of firmware | |
US7853767B2 (en) | Dual writing device and its control method | |
US20040172489A1 (en) | Storage system and disconnecting method of a faulty storage device | |
JP4473325B2 (en) | Management device, storage system, and storage device management method | |
JP4678384B2 (en) | Link failure diagnosis method, disk array system, and link failure diagnosis program | |
JP3942216B2 (en) | System monitoring / control method and system monitoring / control apparatus using dual monitoring / controlling processor | |
WO2001090896A1 (en) | Controller fail-over without device bring-up | |
US7949902B2 (en) | Failure analysis system, a disk array apparatus, a controller, a method for analyzing failure, and a signal-bearing medium embodying a program causing a failure analysis system to perform the method | |
US7908418B2 (en) | Storage system, storage device, and host device | |
US20050144511A1 (en) | Disk array system with fail-over and load-balance functions | |
US20030023797A1 (en) | Method for providing master-slave heat-swapping apparatus and mechanism on a mono-ATA bus | |
JP3050148B2 (en) | Duplex information processing device | |
JPH1196033A (en) | Information processor | |
JP2630100B2 (en) | Fault handling method for interprocessor communication bus | |
KR100604552B1 (en) | Method for dealing with system troubles through joint-owning of state information and control commands | |
JP2815730B2 (en) | Adapters and computer systems | |
JP2001005739A (en) | Method and device for specifying fault position of data path | |
JPH09146853A (en) | Duplex computer and fault system restoration method therefor | |
JP2020024558A (en) | Information processing apparatus and control method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100921 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20101122 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110105 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110118 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4678384 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140210 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |