TSUBAME3.0計算サービスのWebページはこちら

TSUBAME2.5からTSUBAME3.0へのデータ移行方法の資料はこちら

【障害報告】2016.5.10発生:/home ストレージ高負荷

(TSUBAMEにSSHログインするすべての利用者向けの情報です)

                             学術国際情報センター
平成28年5月10日

 下記の通りストレージに障害が発生し、復旧いたしました。

 日時:5月10日(火) 2:40 から 10:45 頃

 影響: /homeへのアクセスが大きく遅延する

 詳細:

 2:40頃に4台ある/homeを構成するGPFSサーバの1台(t2s007067)が高負荷状態となり、このサーバをマウントしてる計算ノードやインタラクティブノードの/homeへのアクセスが極端に遅くなっておりました。その結果ログインできなかったり、データの読み書きが失敗した可能性があります。10:45頃、対象のGPFSサーバのサービスを再起動することで復旧しました。

 問題のサーバをマウントしていた計算機は以下のとおりです。

S: t2a000[001-180]
G: t2a002[001-180]
インタラクティブ: t2a0061[61-65]、t2a006170、t2a0061[75-80]


 なお、影響があったと思われるジョブ(障害発生期間中に実行中であったジョブ)の一覧は下記の通りです。

(Sキュー)
1722381.t2zpbs01,1722435.t2zpbs01,1723909.t2zpbs01,1723910.t2zpbs01,1724280.t2zpbs01
1724281.t2zpbs01,1724283.t2zpbs01,1724284.t2zpbs01,1724286.t2zpbs01,1724287.t2zpbs01
1724289.t2zpbs01,1724292.t2zpbs01,1724294.t2zpbs01,1724295.t2zpbs01,1724297.t2zpbs01
1724298.t2zpbs01,1724299.t2zpbs01,1724300.t2zpbs01,1724301.t2zpbs01,1724302.t2zpbs01
1724304.t2zpbs01,1724305.t2zpbs01,1724307.t2zpbs01,1724308.t2zpbs01,1724310.t2zpbs01
1724311.t2zpbs01,1724313.t2zpbs01,1724314.t2zpbs01,1724316.t2zpbs01,1724317.t2zpbs01
1724318.t2zpbs01,1724319.t2zpbs01,1724320.t2zpbs01,1724579.t2zpbs01,1724580.t2zpbs01
1724669.t2zpbs01,1724670.t2zpbs01,1724671.t2zpbs01,1724672.t2zpbs01,1724678.t2zpbs01
1724698.t2zpbs01,1724699.t2zpbs01,1724705.t2zpbs01,1724706.t2zpbs01,1724792.t2zpbs01
1724799.t2zpbs01,1724800.t2zpbs01,1724801.t2zpbs01,1724802.t2zpbs01,1724810.t2zpbs01
1724913.t2zpbs01,1724915.t2zpbs01,1724916.t2zpbs01,1724917.t2zpbs01,1724918.t2zpbs01
1724919.t2zpbs01,1724920.t2zpbs01,1724921.t2zpbs01,1724922.t2zpbs01,1724923.t2zpbs01
1724924.t2zpbs01,1724926.t2zpbs01,1724927.t2zpbs01,1724928.t2zpbs01,1724929.t2zpbs01
1724930.t2zpbs01,1724931.t2zpbs01,1724932.t2zpbs01,1724934.t2zpbs01,1724935.t2zpbs01
1724936.t2zpbs01,1724937.t2zpbs01,1724938.t2zpbs01,1724939.t2zpbs01,1724940.t2zpbs01
1724942.t2zpbs01,1724943.t2zpbs01,1724944.t2zpbs01,1724946.t2zpbs01,1724947.t2zpbs01
1724948.t2zpbs01,1724950.t2zpbs01,1724952.t2zpbs01,1724954.t2zpbs01,1724972.t2zpbs01
1724977.t2zpbs01,1724978.t2zpbs01,1724979.t2zpbs01,1724993.t2zpbs01,1725001.t2zpbs01
1725003.t2zpbs01,1725004.t2zpbs01,1725005.t2zpbs01,1725006.t2zpbs01,1725007.t2zpbs01
1725008.t2zpbs01,1725009.t2zpbs01,1725010.t2zpbs01,1725011.t2zpbs01,1725012.t2zpbs01
1725013.t2zpbs01,1725015.t2zpbs01,1725017.t2zpbs01,1725018.t2zpbs01,1725019.t2zpbs01
1725020.t2zpbs01,1725021.t2zpbs01,1725022.t2zpbs01,1725023.t2zpbs01

(Gキュー)
2019525.t2zpbs03,2019528.t2zpbs03,2019561.t2zpbs03,2019617.t2zpbs03,2019621.t2zpbs03
2019626.t2zpbs03,2019641.t2zpbs03,2019663.t2zpbs03,2019667.t2zpbs03,2019668.t2zpbs03
2019669.t2zpbs03,2019670.t2zpbs03,2019671.t2zpbs03,2019672.t2zpbs03,2019673.t2zpbs03
2019674.t2zpbs03,2019675.t2zpbs03,2019676.t2zpbs03,2019677.t2zpbs03,2019678.t2zpbs03
2019679.t2zpbs03,2019680.t2zpbs03,2019681.t2zpbs03,2019682.t2zpbs03,2019683.t2zpbs03
2019684.t2zpbs03,2019685.t2zpbs03,2019687.t2zpbs03,2019688.t2zpbs03,2019689.t2zpbs03
2019690.t2zpbs03,2019691.t2zpbs03,2019692.t2zpbs03,2019693.t2zpbs03,2019694.t2zpbs03
2019695.t2zpbs03,2019696.t2zpbs03,2019697.t2zpbs03,2019699.t2zpbs03,2019701.t2zpbs03
2019702.t2zpbs03,2019703.t2zpbs03,2019704.t2zpbs03,2019705.t2zpbs03,2019706.t2zpbs03
2019709.t2zpbs03,2019710.t2zpbs03,2019714.t2zpbs03,2019720.t2zpbs03,2019724.t2zpbs03
2019730.t2zpbs03,2019731.t2zpbs03,2019732.t2zpbs03,2019733.t2zpbs03,2019738.t2zpbs03
2019739.t2zpbs03,2019740.t2zpbs03,2019743.t2zpbs03,2019752.t2zpbs03,2019761.t2zpbs03
2019764.t2zpbs03,2019765.t2zpbs03,2019766.t2zpbs03,2019778.t2zpbs03,2019781.t2zpbs03
2019791.t2zpbs03,2019798.t2zpbs03,2019813.t2zpbs03,2019815.t2zpbs03,2019817.t2zpbs03
2019822.t2zpbs03