JP5836029B2 - サーバラックの冷却システム及びサーバ機器 - Google Patents

Description

本発明は、例えば、サーバユニットを複数着脱可能に積層したサーバラックにおいて、各サーバユニット内のマザーボードに搭載された複数のＣＰＵ等の発熱素子の熱を直接的に、屋外へ排出可能なサーバラックの冷却システム及びサーバ機器に関する。

本技術分野の背景技術として、特開２０１０−７９４０３号公報（特許文献１）がある。この公報には、「筺体内に複数のブレードが着脱自在に装着され、その内部には発熱量の異なる複数のＣＰＵを含む半導体デバイスが搭載されたブレードサーバなど、電子装置用の冷却システムは、比較的発熱量の大きなデバイスからの発熱を外部に輸送するサーモサイフォンと、比較的発熱量の小さなデバイスからの発熱をサーモサイフォンへ輸送するサーマルハイウエイと、更に、ブレードの装置筺体内への挿入に伴って、サーモサイフォンとサーマルハイウエイとの間を熱的に結合するためのサーマルコネクタを備えている。」と記載されている。

特開２０１０−７９４０３号公報

従来の技術では、複数のブレードごとに、ブレードの熱がサーモサイフォンとサーマルハイウエイを経由して、外部の冷却システムへ接続されており、ブレードサーバ（サーバラック）全体の冷却システムとして、サーバラック内空間の効率的な利用や、ブレードサーバ（サーバラック）が設置された室内の空調負荷を削減することや、メンテナンスについて、配慮されていないという第１の課題がある。

そこで、この第１の課題を解決する技術として、ブレードサーバ（サーバラック）の冷却システムとして、ラックに設置した複数のサーバユニット（ブレード）の複数のＣＰＵ等の発熱素子を冷却する第１気化型冷却装置（サーモサイフォン）の冷媒の蒸気を冷却する凝縮器とサーマルコネクタを介して熱的に接続された複数の第２気化型冷却装置（サーマルハイウエイ）を第３水冷却装置である屋外の冷却装置で冷却された水と熱交換するラック上部に設けたトップボックス（熱交換器）へ個々に接続する技術が想定される。

そして、上記想定された技術において、配管を簡素にすることや各蒸発器の水位を所定に管理することによる信頼性向上を第２の課題としている。

上記課題を解決するために、例えば特許請求の範囲に記載の構成を採用する。本願は上記課題を解決する手段を複数含んでいるが、その一例を挙げるならば、サーバラックの冷却システムであって、前記サーバラックに設置した複数のサーバユニットを冷却する複数の第１気化型冷却装置と、前記第１気化型冷却装置の冷媒の蒸気を冷却する複数の凝縮器と複数のサーマルコネクタを介して熱的に接続された第２気化型冷却装置と、前記サーバラック上部に設けられサーバラック外で冷却された冷媒と熱交換する熱交換器を有するトップボックスとを有し、前記第２気化型冷却装置は、前記トップボックスへ熱伝達する集合管を有することを特徴とする。

また、前記集合管は、前記第２気化型冷却装置の蒸発器に接続する複数の蒸気管が接続されるメイン蒸気管と、前記トップボックスの熱交換器で凝縮した戻りの液を各サーマルハイウエイの蒸発器に供給するメイン液配管と、を備え、前記メイン液配管から前記第２気化型冷却装置の蒸発器へ、前記戻りの液を分流して供給する、複数の液配管を有することを特徴とする。

また、上記記載のメイン液配管の各サーマルハイウエイの蒸発器に接続する液配管と接続する液配管の分岐部に液溜めを設けると共に、メイン液配管は各液溜め内の前記液溜めの高さの範囲において、仕切り部材を設けて仕切られると共に、その仕切り部材の上部と下部に開口穴を設けることを特徴とする。

また、上記記載の仕切り部材の下部に設けた開口穴の高さをサーマルハイウエイの蒸発器の液面と一致させることを特徴とする。

また、上記記載のメイン蒸気配管とメイン液配管は下部よりも上部の管径を大きくする。

また、メイン蒸気配管とメイン液配管を各々サーマルハイウエイの蒸発器に対して互いに反対側に設け、蒸気管、トップボックス（熱交換器）、液配管を循環する冷媒の流れを一方向とすることを特徴とする。

また、上記記載のメイン液配管の最下部に液タンクとポンプと液タンクから各ラックに設けた液溜めとを接続する液供給配管を設けることを特徴とする。

さらに、上記記載のポンプに接続した液配管の各ラックに設けたサーマルハイウエイの蒸発器への分岐部に電磁弁を設けることを特徴とする。

また、上記サーバ全体の負荷が定格負荷よりも低い場合、部分的に稼働させるサーバの順番をサーマルハイウエイ内の冷媒の循環に対する応答性の良い上段から操作することを特徴とする。

また、上記記載のサーモサイフォンの凝縮器、サーマルハイウエイの蒸発器及び、それらを熱的に接続するサーマルコネクタをサーバラック内においてサーバユニットの後端部側にあるサーバラック背面空間まで延長すると共に、各サーモサイフォンの蒸発器を設けたＣＰＵを搭載したサーバユニットの段よりも１段上の位置に設け、各サーバユニットに設けた蒸発器と接続した蒸気配管及び液配管をラック背面空間において斜め上方に接続することを特徴とする。

また、サーバユニット内の２枚のマザーボードの２個のＣＰＵに設ける蒸発器及び各蒸発器を接続する蒸気配管と液配管と凝縮器とを各々２枚のマザーボード配置に対して、点対称に設けることで左右のマザーボードの２個のＣＰＵに設置するサーモサイフォンに互換性を持たせることを特徴とする。

サーマルハイウエイの蒸発器とラック上部に設けたトップボックス（熱交換器）との間を接続する集合管を有することにより、配管の数を少なくし、冷却装置を簡素にすることができ、冷媒漏れを防止という観点で信頼性を向上できる。

また、各ラックに設置したサーバユニット内の複数のＣＰＵ等の発熱素子を冷却する各サーモサイフォンの冷媒の蒸気を冷却する凝縮器とコネクタを介して接続された各サーマルハイウエイの蒸発器に接続された蒸気配管を、屋外の冷却装置で冷却された水と熱交換するラック上部に設けたトップボックス（熱交換器）に接続するメイン蒸気配管に各々接続して冷媒の蒸気を合流させると共に、各サーマルハイウエイの蒸発器に接続された液配管を上記トップボックス（熱交換器）に接続するメイン液配管に各々接続して、熱交換器で凝縮した戻りの液を各サーマルハイウエイの蒸発器に分流させることで、冷媒の流れを円滑にでき、かつ各サーマルハイウエイの蒸発器とラック上部に設けたトップボックス（熱交換器）との間を接続する配管の数を少なくし、冷却装置を簡素にすることができ、円滑な冷却と冷媒漏れを防止という観点で信頼性を向上できる。

また、配管の接合部を少なくすることで冷却装置の信頼性の向上が可能であり、そのために各ラックに設けたサーマルハイウエイの蒸発器からの蒸気を逆流することなくメイン蒸気配管に合流させることができ、トップボックス（熱交換器）で凝縮した液をメイン液配管から各ラックに設けたサーマルハイウエイの蒸発器へ接続する液配管へ均等に液を分流することができ、安定な冷却を実現できる。すなわち、各蒸発器の水位を所定に管理することによる液枯れ防止の観点から信頼性向上が可能である。

また、サーバの稼働状況に応じて、サーマルハイウエイの蒸発器の中の液面が下がった場合には、液タンク内の液を液面の低下した蒸発器へ強制的に補給が可能なことから、冷却能力の低下を防止でき、ＣＰＵの性能低下や信頼性低下を防止することができる。

相変化を伴う３系統の冷却装置からなるサーバラックの冷却システムの構成図の例である。 サーバラックに設置した各サーバユニットのＣＰＵ等の発熱素子に取り付けたサーモサイフォンと、サーバラックに設けたサーマルハイウエイ及びそのコネクタを含む構造を説明するサーバラックの縦断面図の例である。 サーバユニットの２枚のマザーボードの各々２個のＣＰＵに接続した第１気化型冷却装置（サーモサイフォン）を点対称構造として、２組のサーマルサイフォンに対して互換性をもたせた構造を示す例である。 サーバラックの各サーバユニットに設けたサーモサイフォンを接続したメイン蒸気配管と、各冷媒の液面を一定に調節可能な構造を有する液溜めを設けたメイン液配管の構造を示すサーマルハイウエイの系統図である。 メイン液配管に設けた液溜めと液面の調整機構を示す他の例である。 メイン蒸気配管とメイン液配管とをサーマルハイウエイの蒸発器に対して両側に設け、冷媒の流れを一方向としたサーマルハイウエイの系統図の例を示す。 サーモサイフォンの蒸発器に液溜めを設けると共に、液溜めの内部に液面の調整機構を設け、蒸発器の内部空間と液溜めの内部空間とを蒸発器仕切板により蒸気で満たす空間のみを仕切ると共に、一体化したサーマルハイウエイの系統図の例を示す。 サーバユニットのマザーボードに搭載したＣＰＵ等発熱素子に設けたサーモサイフォン及び、その蒸気管と液配管をサーバラックの背面部へ伸ばして接続した配管のレイアウトの例を示す。 サーバラックの背面空間でサーモサイフォンの凝縮器とサーマルハイウエイの蒸発器と各々を接続するコネクタ部をサーモサイフォンの蒸発器を設けたサーバユニットに対して、１段上の位置に設けた配管系統図を示すサーバラックの縦断面図の例を示す。

以下、実施例について図面を用いて説明する。以下の説明において、既に説明した同一の符号を付された構成について、同一の機能を有するので、再度説明せず、それらの説明を省略することがある。

図１を用いて本発明実施例のサーバラックの冷却システムの全体構成を説明する。サーバラック１００の各ラックには、左右２列にマザーボード１０２を配置したサーバユニット１０１が積層されており、各マザーボード１０２には複数のＣＰＵ１０３が取り付けられている。本例では各マザーボードにＣＰＵが２個設けられている例を示す。これらのサーバユニット１０１はサーバラック１００のスライドガイドに沿ってスライドさせることによって着脱可能な構造になっている。これらの発熱素子であるＣＰＵ１０３の冷却装置として、ＣＰＵ１０３と熱伝導良く取り付けられた冷媒の蒸発器とサーバユニット１０１の側部に設けた冷媒の凝縮器と、これらの蒸発器と凝縮器とを接続する蒸気配管と液配管とで構成される第１気化型冷却装置（サーモサイフォンと呼ぶ）１０４を設けている。第１気化型冷却装置においてＣＰＵ１０３が発熱すると、蒸発器の内部に真空状態で封入された冷媒が蒸発することでＣＰＵ１０３の熱を吸収する。蒸発した冷媒の蒸気は蒸気配管を通って凝縮器へ移動し、凝縮器で外部から冷却されることで液化する。液化した冷媒は高低差により重力で再び液配管を通って蒸発器へ戻る。次に、サーバユニット１０１の側部に設けられた第１気化型冷却装置の凝縮器はサーバラック１００内の側部で伝熱面をサーマルコネクタ１０６により接合可能な位置に設けられた第２気化型冷却装置（サーマルハイウエイと呼ぶ）１０５の蒸発器とサーマルコネクタ１０６により接合している。第２気化型冷却装置１０５内に真空状態で封入された冷媒はサーマルコネクタ１０６で接合した蒸発器において第１気化型冷却装置の凝縮器からの熱を吸収することで蒸発する。

複数の第１気化型冷却装置１０４から屋外の冷却装置で冷却された水と熱交換するラック上部に設けたトップボックス（熱交換器）１０７へ熱伝達するために、第２気化型冷却装置１０５は集合管を有することにより、配管が簡素化され、信頼性が向上する。そして、集合管の中を、マザーボード１０２上で発生した熱をトップボックス１０７へ伝え、トップボックス１０７で液化した冷媒がサーマルコネクタ１０６近傍の第２気化型冷却装置１０５の蒸発器へ戻る。

集合管の構成としては、冷媒蒸気がトップボックス１０７へ伝わり、液化した冷媒がサーマルコネクタ１０６近傍の気化型冷却装置１０５の蒸発器へ戻る構成であれば良い。

ここで、集合管の圧損について説明する。一般に、配管内の圧損は主に流速Ｖにより決まると考えられる。各サーバユニットのサーマルコネクタの（蒸発器）で発生した蒸気量の合計した流量Ｑが集合管を流れます。流速は配管の断面積をＳとするとＶ＝Ｑ／Ｓですので、集合管の断面積が個別に設ける蒸気管の断面積×本数と等しければ理論上圧損は増えない。なお、個別に蒸気管を設けてもラックが１０段あれば１０本垂直に配置するわけですから配管の設置面積は同じになる。また、集合管の形状としては、円管形状の場合、サーバラックの側部隙間には入れることは困難となるので、規格形状のサーバラックから外部へはみ出す形状となるので、サーバラックの外周に空間が必要となる。そこで、集合管の形状としては、規格形状のサーバラックの側部隙間には入れることができるように、楕円形状や、断面が直方体となるようにすることが望ましい。

次に、集合管の構成の望ましい一例として、メイン蒸気配管とメイン液配管を有する場合について述べる。

蒸発した冷媒の蒸気は蒸気管を通ってサーバラック１００の側部に設けられたメイン蒸気配管に流入する。その後、メイン蒸気配管内の蒸気はサーバラック１００の上部に設けられた熱交換器（トップボックスと呼ぶ）１０７に流入し、そこで、第３水冷却装置により循環する冷却水で冷却されて液化する。液化した冷媒は同様にトップボックス１０７と接続するサーバラック１００の側部に設けられたメイン液配管を通ってサーバラック１００を下方へ流れる。メイン液配管内を流れる液は各ラックの位置で分岐した液配管によって各々ラックに積載されているサーバユニットの側部に設けられたサーマルハイウエイ１０５の蒸発器へ戻り、トップボック１０７との間を循環する。なお、サーマルハイウエイはサーバラック１００の両側に各々独立して設けられている。第３水冷却装置１０８はサーバラック１００の上部に設けたトップボックス１０７と、例えば屋上などの屋外に設けた水冷却装置（チラ―ユニットとする）である屋外空調機１０９との間を液配管で接続し、ポンプで昇圧して循環させる。

なお、外気が低い場合はチラ―ユニットである屋外空調機１０９の代わりに循環する水を外気で冷却する熱交換器と冷却ファンを備えたフリークーリングを用いることもある。

次に、図２と図３を用いて各冷却装置について詳細に説明する。図３において、サーバユニット１０１内にはマザーボード１０２が左右に２枚配置されている。また、マザーボード１０２には発熱素子であるＣＰＵ（図３のマザーボード１０２上の２つの破線四角形状の部分）が各々２個配置されている。

第１気化型冷却装置として用いているサーモサイフォン蒸発器１１０が各々ＣＰＵの上部で熱伝導の良い状態で接合されている。サーモサイフォン蒸発器１１０は内部が真空状態に保たれており、下部には封入した冷媒が溜められており、上部は冷媒の蒸気で満たされている。サーモサイフォン蒸発器１１０はマザーボード１０２の側部に設けられたサーモサイフォン凝縮器１１１とは下側を液配管で接続されており、上部空間において蒸気管で接続されている。また、同一マザーボード１０２に設けた２個のＣＰＵ１０３に接合したサーモサイフォン蒸発器１１０同士も下部を液配管で接続し、上部空間を蒸気管で接合している。サーモサイフォン凝縮器１１１はサーバユニット１０１の側部においてサーバラック１００の側部に設けた第２気化型冷却装置であるサーマルハイウエイ蒸発器１１２とサーマルコネクタ１０６を介して熱伝導良く接合されている。

その結果、ＣＰＵ１０３で発生した熱はサーモサイフォン蒸発器１１０で蒸発した冷媒によって吸収され、その蒸気がサーモサイフォン凝縮器１１１で冷却され液化することで、第２気化型冷却装置の蒸発器内の冷媒に熱を伝える。冷媒を効率良く蒸発させる蒸発用伝熱板１１５を有するサーマルハイウエイ蒸発器１１２で熱を吸収した冷媒は蒸気になり、図２に示すメイン蒸気配管１１３を通ってサーバラック１００の上部に設けたトップボックス１０７で冷却され、冷媒は液化する。液化した冷媒はメイン液配管１１４を通って落下するが、各々ラックの位置で液配管を通ってサーマルハイウエイ蒸発器１１２へ戻り、循環する。

次に、図４によりサーマルハイウエイの詳細構造を説明する。サーマルハイウエイ蒸発器１１２の上部には蒸気配管１２１を設けており、水平に伸びた蒸気配管１２１はその先でメイン蒸気配管１１３に合流している。なお、メイン蒸気配管１１３の合流部では流入した蒸気を下方へ拡散させず且つ、下方から上昇する蒸気の流れを阻害しないような大きさと形状の蒸気管ガイド１１６を設けている。蒸気管ガイド１１６は、例えば、メイン蒸気配管１１３の内径より小さな径のエルボ配管とする。

また、トップボックス１０７で冷却され液化した冷媒はメイン液配管１１４で下方へ降下し、各ラックに分岐する部分で液溜め１１７を介してサーマルハイウエイの蒸発器１１２の下部に接続する液配管１２２と接続している。なお、メイン液配管１１４は液溜め１１７の内部において端部を有し、その端面は仕切板１１８で端面が塞がれている。また、メイン液配管１１４の仕切板１１８の上部で液溜めの内部の位置には液が液溜め１１７内に一旦流出するための開口穴（１）１１９を設けている。また、液溜め１１７の下部には液溜めの内部に置いて開口端部を有するメイン液配管１１４が設けられており、液溜め１１７の内部で流出した液のうち、液配管１２２からサーマルハイウエイ蒸発器１１２へ戻る流量以外は下部へ流れる。ここで、液溜め１１７内において液配管の開口端部の高さをサーマルハイウエイ蒸発器１１２の液保有水位に設定することで、合流した冷媒を各ラックの蒸発器へ各々分配が可能になる。ここで、メイン蒸気配管１１３とメイン液配管１１４はサーバラック１００の高さ方向に対して冷媒が合流する上部ほど配管径を大きくすると配管抵抗が増加せずに循環に対する損失を低減できる。

また、サーマルハイウエイの蒸発器の伝熱面に温度検出センサ又は液面計を設け、液面の不足を推定して液タンク内の液を各サーマルハイウエイの蒸発器へ送付するポンプを稼働させることが望ましい。例えば、液溜め１１７の下方に液タンク１２４と、ポンプ１２３及び、液タンクとポンプと各ラックの液溜めに接続する液供給配管１２５を設けることで、ＣＰＵ１０３が動作を開始してサーマルハイウエイ蒸発器１１２内の冷媒の蒸発が盛んになり、瞬間的に保有する冷媒の液面が低下し、万一液枯れを生じた場合にはポンプ１２３を動作させて、瞬時に液タンク１２４内の冷媒を各液溜め１１７へ供給することで、冷却能力の低下を防止でき、ＣＰＵ１０３の性能低下や信頼性低下を防止することができる。更に液供給配管１２５の各液溜め１１７へ分岐する配管に電磁弁１２６を設けると特定の液溜めへ冷媒の供給が可能となる。

上記例では、液面の不足として、液枯れを生じた場合を検知しているが、液枯れを生じる前の一定の液面になったら、液面の不足と推定して、液タンク内の液を各サーマルハイウエイの蒸発器へ送付するポンプを稼働させても良い。

次に、図５により、合流した冷媒を分配する他の方法について示す。メイン液配管１１４は各ラックの分配部で液溜め１１７を設けており、液溜め１１７の側部には分配した冷媒をサーモサイフォン蒸発器へ戻す液配管１２２が設けられている。メイン液配管１１４には液溜め１１７内において、内部を仕切板１１８で仕切られると共に、仕切板１１８の上部には落下してくる冷媒を一旦、液溜め１１７内へ排出する開口穴（１）１１９が設けられており、下部にはサーマルハイウエイ蒸発器１１２へ流れる流量以外の冷媒を下方へ流すための開口穴（２）１２０が設けられている。また、下部の開口穴（２）１２０はその高さをサーマルハイウエイ蒸発器１１２の冷媒の液面高さに合わせておくことで、各ラックの蒸発器へ冷媒を分配することが可能である。なお、液面１３１は液配管１２２に接続されるサーマルハイウエイ蒸発器の液面高さと同一である。

図６に、サーマルハイウエイの他の配管系の構成を示す。図６はサーマルハイウエイ蒸発器１１２に接続する蒸気配管１２１と、液配管１２２をサーマルハイウエイ蒸発器１１２の両側に配置することで各サーマルハイウエイ蒸発器からの蒸気が合流してメイン蒸気配管を上昇し、トップボックス１０７で凝縮する際、メイン液配管１１４もトップボックス１０７に対してメイン蒸気配管１１３とが反対側にあるために、トップボックスにおいて流入した蒸気と凝縮された冷媒の流れが一方向となり、図４で示す構造のように蒸気と液化した冷媒とが対向する流れにはならない。また、サーマルハイウエイ蒸発器においても、蒸気と流入する冷媒とが一方向に流れるため冷媒の循環に損失が少ない。

図７に、サーマルハイウエイの更に他の配管系の構成を示す。図７は各ラックに設けたサーマルハイウエイ蒸発器１１２に蒸発器仕切板１３０を介して液溜め１１７を設けた。この液溜め１１７に必要な容積の空間を設けることでサーマルハイウエイ蒸発器１１２に保有する冷媒の量を増加させることが可能で、ＣＰＵ１０３の発熱により冷媒の蒸発量が増加しても液溜めに保有する冷媒が蒸発するまで液枯れによるＣＰＵの性能低下や故障を防止することが可能である。

図８、図９に、サーマルハイウエイの更に他の配管系の構成を示す。図８は、サーバラック１００の一平面図を示す。図９は、サーバラック１００を正面から見た正面図である。図８に示すようにサーモサイフォンのサーモサイフォン蒸発器１１０に接続する蒸気配管及び液配管をサーバユニットからサーバラックリヤ空間１２９まで引き出し、サーバラックリヤ空間１２９において、１段上のラック位置に設けたサーマルハイウエイ蒸発器１１２とサーマルコネクタ１０６を介して接続したサーモサイフォン凝縮器１１１に傾斜蒸気配管１２７を介して接続をしている。

すなわち、前記第１気化型冷却装置の凝縮器、前記第２気化型冷却装置の蒸発器及びそれらを接続するサーマルコネクタをサーバラック内においてサーバユニットの後端部側のサーバサーバラックリヤ空間まで延長すると共に、前記第２気化型冷却装置の蒸発器を、冷却するサーバユニットよりも１段上のサーバユニットの位置に設け、各サーバユニットに設けた蒸発器と接続した蒸気配管及び液配管をラック背面空間において斜めに接続することを特徴としている。

その結果、サーモサイフォン凝縮器１１１で液化した冷媒がサーモサイフォン蒸発器１１０との間の落差を大きく取れるので、サーモサイフォンの冷媒の循環が効率良く行われる。

図３を用いて、サーバユニットに配置された２枚のマザーボードに設置するサーモサイフォンを左右両方のマザーボードに取り付け可能とする構造を説明する。

マザーボード１０２に取り付けた２個のＣＰＵに設けたサーモサイフォン蒸発器１１０と各サーモサイフォン蒸発器とをつなぐ蒸気配管１２１及び液配管１２２をサーモサイフォン凝縮器１１１とを、２枚のマザーボードに対して点対称となる配置・形状とすることで、一方のマザーボードの２個のＣＰＵに対して取り付け可能なサーモサイフォン蒸発器１１０と接合する液配管及び蒸気配管とサーモサイフォン凝縮器１１１を有するサーモサイフォンは、同じ形状・種類のものが他方のマザーボードの２個のＣＰＵにも取り付けが可能となり、互換性を持たせることができ、部品種類の削減が可能となる。

以上、本発明によれば、サーバラック内の発熱素子であるＣＰＵ１０３の熱は３系統の冷却装置により屋外へ直接的（サーバ室内の空気を介さず）に排気されるため、サーバラック１００を設置したデータセンタ等の建屋内に熱が排出されることがなく、データセンタ等の建屋内の空調に対する省エネ効果が大きい。

また、例えば、複数段のラックに設置したサーバユニット内の複数のＣＰＵ等の発熱素子を冷却する各第１気化型冷却装置（サーモサイフォン）の冷媒の蒸気を冷却する凝縮器とコネクタを介して接続された各第２気化型冷却装置（サーマルハイウエイ）の蒸発器に接続された蒸気配管を第３水冷却装置（屋外の冷却装置）で冷却された冷媒と熱交換するラック上部に設けたトップボックス（熱交換器）に接続するメイン蒸気配管に各々接続して蒸気を合流させる共に、各サーマルハイウエイの蒸発器に接続された液配管を屋外の冷却装置で冷却された水と熱交換するラック上部に設けたトップボックス（熱交換器）に接続するメイン液配管に各々接続して、熱交換器で凝縮した戻りの液を各第２気化型冷却装置（サーマルハイウエイ）の蒸発器に分流させることで、各第２気化型冷却装置（サーマルハイウエイ）の蒸発器とラック上部に設けたトップボックス（熱交換器）との間を接続する配管の数を少なくし、冷却装置を簡素にすることが望ましい。また、配管の接合部を低減することで信頼性を向上させることが望ましい。

また、各ラックに設けた第２気化型冷却装置（サーマルハイウエイ）の蒸発器からの蒸気を逆流することなくメイン蒸気配管に合流させることと、トップボックス（熱交換器）で凝縮した水をメイン液配管から各ラックに設けたサーバユニットの第２気化型冷却装置（サーマルハイウエイ）の蒸発器へ接続する液配管へ均等に液を分配することと、サーバが稼働して第２気化型冷却装置（サーマルハイウエイ）の蒸発器の中の液面が下がった場合に、不足する液量の冷媒の補給を行うことが望ましい。

そして、例えば、各ラックに設けた第２気化型冷却装置（サーマルハイウエイ）の蒸発器に接続する蒸気管を各々メイン蒸気管に接続すると共に、上記蒸発器に接続する液配管とメイン液配管から分岐させた配管とを各々接続することが望ましい。

また、上記サーバ全体の負荷が定格負荷よりも低い場合、部分的に稼働させるサーバの順番をサーマルハイウエイ内の冷媒の循環に対する応答性の良い上段から操作することにより、サーバの片寄せ運転を効率的に実行できる。

ここで、冷媒の循環に対する応答性は上段のサーバのほうが良いことについて説明する。サーマルハイウエイの構成上、サーマルコネクタの蒸発器内での蒸発プロセスと、トップボックス内での凝縮プロセスはサーバの取り付け位置に対して大きな差異はないが、サーマルコネクタとトップボックスとを接続する蒸気管（凝縮液管も兼ねる）の長さがサーバの取り付け位置で異なる。その結果、下段ほど、サーマルコネクタからトップボックスへの蒸気の到達する時間と、トップボックスからサーマルコネクタへ液冷媒が戻る時間が遅くなる。すなわち、上段のサーバのほうが冷媒の循環に対する応答性が良い。

本実施例では、例えば、ＣＰＵからの熱をサーマルサイフォン、サーマルハイウエイ、トップボックス（熱交換器）により、外部へ放熱する例を説明したが、マザーボード１０２上で発生したＣＰＵ及びＣＰＵ以外の熱を、マザーボード上または近傍に設けた冷却ファンを併用して、サーバ室内の空気へ伝達し、サーバ室を冷却する空調機を併用して冷却しても良い。

なお、本発明は上記した実施例に限定されるものではなく、様々な変形例が含まれる。例えば、上記した実施例は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、ある実施例の構成の一部を他の実施例の構成に置き換えることが可能であり、また、ある実施例の構成に他の実施例の構成を加えることも可能である。また、各実施例の構成の一部について、他の構成の追加・削除・置換をすることが可能である。

また、上記の各構成、機能、処理部、処理手段等は、それらの一部又は全部を、例えば集積回路で設計する等によりハードウェアで実現しても良い。また、上記の各構成、機能等は、プロセッサがそれぞれの機能を実現するプログラムを解釈し、実行することによりソフトウェアで実現しても良い。各機能を実現するプログラム、テーブル、ファイル等の情報は、メモリや、ハードディスク、ＳＳＤ（Solid State Drive）等の記録装置、または、ＩＣカード、ＳＤカード、ＤＶＤ等の記録媒体に置くことができる。

また、制御線や情報線は説明上必要と考えられるものを示しており、製品上必ずしも全ての制御線や情報線を示しているとは限らない。実際には殆ど全ての構成が相互に接続されていると考えても良い。

１００ サーバラック
１０１ サーバユニット
１０２ マザーボード
１０３ ＣＰＵ
１０４ 第１気化型冷却装置
１０５ 第２気化型冷却装置
１０６ サーマルコネクタ
１０７ 熱交換器
１０８ 第３水冷却装置
１０９ 屋外空調機
１１０ サーモサイフォン蒸発器
１１１ サーモサイフォン凝縮器
１１２ サーマルハイウエイ蒸発器
１１３ メイン蒸気配管
１１４ メイン液配管
１１５ 蒸発用伝熱板
１１６ 蒸気管ガイド
１１７ 液溜め
１１８ 仕切板
１１９ 開口穴（１）
１２０ 開口穴（２）
１２１ 蒸気配管
１２２ 液配管
１２３ ポンプ
１２４ 液タンク
１２５ 液供給配管
１２６ 電磁弁
１２７ 傾斜蒸気配管
１２９ サーバラックリヤ空間
１３０ 蒸発器仕切板
１３１ 液面

Claims (12)

1. サーバユニットがスライドガイドにより着脱可能で、複数のサーバユニットが多段に搭載されたサーバラックの冷却システムであって、
   前記サーバラックに設置した複数のサーバユニットの発熱素子に蒸発器を取り付けて、
   封入した冷媒の蒸発で発熱素子を冷却する複数の第１気化型冷却装置と、
   サーバユニットの側面に設けた前記第１気化型冷却装置の冷媒の蒸気を冷却する垂直な伝熱面を有する複数の凝縮器と、垂直な伝熱面を有し、前記第１気化型冷却装置の凝縮器
   と接続する複数のサーマルコネクタを介して前記サーマルコネクタ内の蒸発器で冷媒の蒸
   発により熱的に接続された第２気化型冷却装置と、
   前記サーバラック上部に設けられサーバラック外で冷却された冷媒と第２気化型冷却装
   置の冷媒の蒸気とが熱交換して凝縮するための熱交換器を有するトップボックスとを有し
   、
   前記第２気化型冷却装置は、サーマルコネクタ内の蒸発器に接続する複数の蒸気管が合流して接続された前記トップボックスへ冷媒の蒸気を送るメイン蒸気配管とトップボック
   スで凝縮した戻りの液冷媒を分流して各々サーマルコネクタの蒸発器へ送るメイン液配管
   とを有することを特徴とするサーバラックの冷却システム。
2. 請求項１において、
   前記メイン蒸気配管は、前記第２気化型冷却装置の蒸発器に接続する複数の蒸気管が合
   流して接続されており、前記トップボックスの熱交換器で凝縮した戻りの液を各サーマル
   ハイウエイの各々蒸発器に供給するメイン液配管と、を備え、
   前記メイン液配管から前記第２気化型冷却装置の蒸発器へ、前記戻りの液を分流して供
   給する、複数の液配管を有することを特徴とするサーバラックの冷却システム。
3. 請求項２において、
   前記複数の蒸気管が前記メイン蒸気配管へ合流する合流部に、蒸気を上方へ案内すると
   共に下方からの蒸気の流れを阻害しない形状のガイドを設けることを特徴とするサーバラ
   ックの冷却システム。
4. 請求項２において、
   前記メイン液配管から前記複数の液配管が分岐する分岐部に液溜めを設け、
   前記メイン液配管は前記各液溜め内において、前記液溜めの高さの範囲において仕切り
   部材を設けて仕切られると共に、前記仕切り部材の上部と下部に開口穴を設けることを特
   徴とするサーバラックの冷却システム。
5. 請求項４において、
   前記仕切り部材の下部に設けた開口穴の高さを、前記第２気化型冷却装置の蒸発器の設
   定液面と一致させることを特徴とするサーバラックの冷却システム。
6. 請求項１において、
   前記メイン蒸気配管および前記メイン液配管の少なくとも一方において、下部よりも上
   部の管径を大きくすることを特徴とするサーバラックの冷却システム。
7. 請求項１において、
   前記メイン蒸気配管と前記メイン液配管を前記第２気化型冷却装置の複数の蒸発器に対
   して両側に設け、前記蒸気管、前記熱交換器、前記液配管を循環する冷媒の流れを一方向
   とすることを特徴とするサーバラックの冷却システム。
8. 請求項１乃至請求項７のいずれかにおいて、
   前記メイン液配管には最下部に液タンクを設け、ポンプを介して、前記液タンクから各
   ラックに設けた液溜めと接続する液配管を設けることを特徴とするサーバラックの冷却シ
   ステム。
9. 請求項８において、
   各液配管に電磁弁を設けることを特徴とするサーバラックの冷却システム。
10. 請求項１乃至請求項９いずれかにおいて、
    サーバラックに搭載されるサーバ全体の負荷が定格よりも低い場合、稼働させるサーバ
    の順番を前記第２気化型冷却装置内の冷媒の循環に対する応答性の良いサーバから順次稼
    働させることを特徴とするサーバラックの冷却システム。
11. 請求項１において、
    前記第１気化型冷却装置の凝縮器、前記第２気化型冷却装置の蒸発器及びそれらを接続
    するサーマルコネクタをサーバラック内においてサーバユニットの後端部側のサーバラッ
    クリヤ空間まで延長すると共に、
    前記第２気化型冷却装置の蒸発器を、冷却するサーバユニットよりも１段上のサーバユ
    ニットの位置に設け、
    各サーバユニットに設けた蒸発器と接続した蒸気配管及び液配管をラック背面空間にお
    いて斜めに接続することを特徴とするサーバラックの冷却システム。
12. 請求項１乃至請求項１１のいずれか記載のサーバラックの冷却システムを有するサーバ機器。