FC2ブログ




【止まらない】約60時間を非常用電源設備で乗り切った石狩データセンターの奇跡

2018
11
20180911010415213.jpg 

1: 田杉山脈 ★ 2018/09/10(月) 19:01:53.70 ID:CAP_USER
 2018年9月6日に北海道を襲った震災により、停電状態に陥ったさくらインターネットの石狩データセンターに対し、9月8日ようやく電力供給が再開された。想定を超えた約60時間を非常用電源設備で乗り切り、インフラ事業者としての矜持を見せた石狩データセンターの「奇跡」について、改めてきちんと説明していきたいと思う。

卓越したオペレーション能力で「想定外」を「想定内」に
 2011年11月に開設された石狩データセンターは、数多くのサーバーを収容するさくらインターネットの基幹データセンターになる。開設当時はソーシャルゲームの普及でサーバーの需要がうなぎ登りだったほか、環境に配慮したエコなデータセンターが求められていた。こうしたニーズに対応する石狩データセンターは、寒冷地のメリットを活かした外気冷却と東京ドーム1個分に相当する広大な敷地を用いたスケーラビリティが大きな売りだった。私も開設時と増設時で2回ほど現地に足を運んでおり、現地のエンジニアとも話をしている。同じデータセンターに2度訪れることなんてほぼないので、個人的にも思い入れが深い。

 思い起こせば、なぜ石狩だったのか? 皮肉なことにその大きな一因は災害リスクが低いことであった。同社の石狩データセンターの紹介にも「石狩地域は、今後30年間で震度6以上の地震が発生する確率が0.1~3%と低く、(以下略)」と明記されており、さくらインターネットにとっても今回の地震は「想定外」だったはずだ。しかし、今回さくらは約3000ラックを超える巨大データセンターを非常用電源設備で60時間無停止で運用し続けた。卓越したオペレーション能力で未曾有の停電を乗り切り、「想定外」を「想定内」にしてしまったのだ。

東日本大震災のときは首都圏のデータセンターが停電の影響をあまり受けてないので、ここまで長時間での非常用電源設備の運用はおそらく初めて。世界的に見てもあまり例を見ないはずだ。しかも、途中で電力が一部復活し、燃料調達にめどが付いたこともあり、非常用電源設備停止の直前は、1週間近い連続稼働まで視野に入れていた。薄氷を踏むどころか、最後は余力すらあったわけだ。

さくらにとって絶対落とせなかった石狩データセンター
 まずは話の前提としてデータセンターの停電対策について簡単に説明しておきたい。実は9月6日に北海道の震災が発生してから、石狩データセンターに関しては経緯から復旧まで3本の記事を挙げているのだが、どれもシンプルな速報体裁。細かい説明を割愛していたため、書き手としてもどれだけ読者に伝わっているか正直不安だった。しかも、ITに対する知識の不足により、いたずらに不安をあおるような報道も多い。これを読めば、今回さくらがどれだけすごかったのか、信頼性というデータセンターの役割をきちんと果したのか、少しは理解してもらえるはずだ。

 個人・企業問わず数多くのサーバーが集まるデータセンターでは、停電時の対策として非常用電源設備が用意されている。そのため、電力会社からの電力供給が停止すると、バックアップ用のUPSで非常電源設備の起動までの時間を確保し、ガスや重油などの燃料を用いて自家発電するようになっている。発電の際に用いられる燃料も多くのデータセンターでは48時間程度の燃料が備蓄されているので、停電が起こってもおおむね2日間は運用は止まらない。とはいえ、一連の設備はどれも高価で、日本でも自前できちんと運用できる事業者はそれほど多くない。さくらインターネットはこうした数少ない事業者のうちの1つだ。

 石狩データセンターでも48時間稼働する分の重油を備蓄していた。しかし、今回の大規模な停電からの復旧は当初「1週間後」と発表されており、実際に東日本大震災のときは停電解消が約80%に至るまで3日間、94%に至るまで8日間かかっている。そのため、電力供給が再開せず、重油が足りなくなったら、石狩データセンター自体の稼働を停止しなければならなかった。

 もし石狩データセンターが停止に追い込まれたら、そのインパクトは計り知れない。40万以上にも上るさくらのレンタルサーバのユーザーや、メルカリやマネーフォワードといったWebサービス事業者、官公庁や学術機関などのサービスも大きな影響を受けることになる。また、石狩データセンターならではの事情として、ユーザー自身が運用するコロケーションもそれなりにある。さくらインターネットにとっては絶対落とせないデータセンターなのだ。

http://ascii.jp/elem/000/001/738/1738515/

2: 名刺は切らしておりまして 2018/09/10(月) 19:03:51.90 ID:IAl+Bblk
別に奇跡ではないだろ

14: 名刺は切らしておりまして 2018/09/10(月) 19:14:36.86 ID:GP8dKFxO
>>2
これだけのガチンコ本番をベアメタル少し止めた程度で乗り切ったのは普通に凄い

3: 名刺は切らしておりまして 2018/09/10(月) 19:04:20.88 ID:Vg66G73X
SEがチャリンコこいでたとか?

4: 名刺は切らしておりまして 2018/09/10(月) 19:07:04.97 ID:DeZ6S564
あ そう

5: 名刺は切らしておりまして 2018/09/10(月) 19:07:32.32 ID:cW5AYHrg
燃料確保頑張ったね

これでいい?

22: 名刺は切らしておりまして 2018/09/10(月) 19:26:16.58 ID:fOUY37N7
>>5
その通り
燃料の行先は病院、避難所(小中学校)、市町村の庁舎などが最優先
放送通信と言えども企業なので、これらの次になる
48時間分は常時蓄えてたとして、プラス12時間分の補給できたことは評価すべき

6: 名刺は切らしておりまして 2018/09/10(月) 19:07:47.01 ID:mW1t0Ugp
現場が無理してでもやると
上は「それができて当たり前」になるからなあ

7: 名刺は切らしておりまして 2018/09/10(月) 19:08:41.84 ID:20FIt5my
で、どうやって切る抜けた?

8: 名刺は切らしておりまして 2018/09/10(月) 19:10:23.18 ID:dPy8d9Hi
北海道は電力供給のリスクが高いことが露呈したから
データセンターには向いてない 最近は涼しくもないし

50: 名刺は切らしておりまして 2018/09/10(月) 20:30:42.49 ID:oObxeZST
>>8
1ヶ所で道内半分調達って危機管理なってないだろ。
すぐ近くに大活火山樽前山有るんだし。
北海道新幹線がなぜ南回りルート取らないか小一時間考えろと。

9: 名刺は切らしておりまして 2018/09/10(月) 19:10:40.89 ID:JHtVIsPQ
電気が復旧して非常電源を切る様子
思ったよりゴツい設備だった
爆音注意!
https://www.publickey1.jp/blog/18/post_271.html
https://video.twimg.com/ext_tw_video/1038326251302268929/pu/vid/1280x720/l95JZLniZ7upDgOL.mp4

10: 名刺は切らしておりまして 2018/09/10(月) 19:11:17.21 ID:WafZVxbi
生振 花畔 濃昼 聚富

11: ブサヨ 2018/09/10(月) 19:12:03.25 ID:Lsmkiqbd
奇跡と努力は違うと思うw

12: 名刺は切らしておりまして 2018/09/10(月) 19:13:09.97 ID:flQmgFTp
燃料追加調達できるよう、連続48時間の自家発電システム組んでました。
な、目論見通りだろ?
という記事

13: 名刺は切らしておりまして 2018/09/10(月) 19:13:16.36 ID:fG8wI/f+
さくらインターネットのVPSをまさに使っているが
随時メールをくれていたので安心できた

15: 名刺は切らしておりまして 2018/09/10(月) 19:14:50.24 ID:FxV8qh5g
どっちにしろ周辺の電源は全てブラックアウトしてたんだし
外部アクセスはほぼ無かったから大した電気消費量にならなかったとかそんなオチか

16: 名刺は切らしておりまして 2018/09/10(月) 19:16:02.99 ID:yB2iIsEG
どこに努力の要素があるんだ?

17: 名刺は切らしておりまして 2018/09/10(月) 19:20:37.76 ID:ZzTRvRzB
本来の使命を果たした非常用電源が一言
               ↓

18: 名刺は切らしておりまして 2018/09/10(月) 19:21:11.52 ID:m1WeC9Kw
あxs

19: 名刺は切らしておりまして 2018/09/10(月) 19:23:32.30 ID:PoUvaah1
非常電源用の燃料調達リードタイムを見越した設計してましたってこと?

20: 名刺は切らしておりまして 2018/09/10(月) 19:25:18.91 ID:rUuTOFi9
適切な設備投資と燃料の常備が経営努力ではあるが別段奇跡ではないね
2日分の燃料しかないのに4日稼働しましたっていうのが奇跡だよ

21: 名刺は切らしておりまして 2018/09/10(月) 19:25:36.98 ID:FA5AXlXQ
奇跡でもなんでもね~よ。非常用発電設備もっていてきっちり保守管理してりゃ
当たり前の話だよ。逆にきっちり保守管理してないところは肝心な時に非常用電源
が役に立たたず損失こうむってるところがたくさんあるよ。

32: 名刺は切らしておりまして 2018/09/10(月) 19:42:29.19 ID:SAdvjcPs
>>21
この業界ではきっちり保守管理できるだけのリソースが適切に注ぎ込まれていることが奇跡なんですよ…

35: 名刺は切らしておりまして 2018/09/10(月) 19:45:23.37 ID:tL+6Rf0m
>>32
それは言えてる

40: 名刺は切らしておりまして 2018/09/10(月) 20:07:23.26 ID:4pzDAAZw
>>21
> 奇跡でもなんでもね~よ。非常用発電設備もっていてきっちり保守管理してりゃ
> 当たり前の話だよ。
それが大変なことを知らないんだなァ

24: 名刺は切らしておりまして 2018/09/10(月) 19:27:17.31 ID:mfQCDacr
島はケーブル切れたら終わりだろ

25: 名刺は切らしておりまして 2018/09/10(月) 19:28:46.74 ID:NZwaunkI
重油って、エネオスで給油できる?

26: 名刺は切らしておりまして 2018/09/10(月) 19:32:45.90 ID:K0iheqXn
俺のエロ小説サイトぐらいだったら1週間見れなくなっても全然構わなかったのに

27: 名刺は切らしておりまして 2018/09/10(月) 19:33:16.61 ID:TdQGAY7p
アクセスが減ると、稼働サーバー数を半分にして分散処理出来る仕組みを用意しておいたからというのだろうか。
サーバー半分なら、単純に考えて消費電力も半分。
48時間の2倍の96時間乗り切れるだろう。

28: 名刺は切らしておりまして 2018/09/10(月) 19:34:38.80 ID:zIxDgfiP
普通の非常用発電機だとメーカー保証は連続24時間までのところも多い。
そういう観点からすると奇跡と言えなくはないかもしれない。
メンテは当然されていたんだろうけど。

29: 名刺は切らしておりまして 2018/09/10(月) 19:37:26.38 ID:oULjEslR
IT系でここまで酷い記事は久しぶりに目にした
小学生の夏休みの宿題かなんかかよ

30: 名刺は切らしておりまして 2018/09/10(月) 19:39:22.67 ID:KUK35eIz
非常用電源さえあれば大丈夫 by 原発

31: 名刺は切らしておりまして 2018/09/10(月) 19:41:52.18 ID:MN8znmQZ
過去に致命的な大トラブル2回起こしている
ペテン禿グループのデータセンター会社に爪の垢を煎じて飲ませたい

33: 名刺は切らしておりまして 2018/09/10(月) 19:44:25.13 ID:GF+zdjo6
節電しろ

34: 名刺は切らしておりまして 2018/09/10(月) 19:44:26.15 ID:Co0dAAHK
> 無事に非常用電源設備の運用に切り替えた。その後、石狩市役所、経済産業省など関係各所からの
> 燃料調達により、非常用電源設備で約60時間も稼働させた。停電にも関わらず、約3000ラックを
> 有する巨大データセンターを2日半無停止で運用し続けたのだ。

役所に頼んで燃料調達したということです!

41: 名刺は切らしておりまして 2018/09/10(月) 20:07:31.58 ID:q3yHtYV2
>>34
まあ官庁のデータも入っているからな、省庁動いていてもデータ扱えなかったら意味ないし

36: 名刺は切らしておりまして 2018/09/10(月) 19:49:32.49 ID:f7OgXDnb
ウチもさくら使ってるが予想に反して一度も止まらなかったよ
まー正直メールさえ使えればビジネスには影響なかったんだが
安い割にはいいと思う

37: 名刺は切らしておりまして 2018/09/10(月) 20:00:37.64 ID:uYz9VoNm
どここ企業が入ってるとか公開していいの(´・ω・`)

38: 名刺は切らしておりまして 2018/09/10(月) 20:00:47.26 ID:Kw9GEcia
>>1
読む気失せたw

39: 名刺は切らしておりまして 2018/09/10(月) 20:02:07.51 ID:HmQWlOXs
さくらですら停電に対応できるのに東電ときたら

43: 名刺は切らしておりまして 2018/09/10(月) 20:16:57.82 ID:QTjQ1ziu
「そうならないよう万全の態勢を整えている」と口先だけで手を抜くのがジャパンクオリティなのに珍しいな

44: 名刺は切らしておりまして 2018/09/10(月) 20:19:50.24 ID:4pzDAAZw
>>43
そんなの各国で珍しくないヨ
日本は随分とマシ

韓国なんて酷いモノだワ

45: 名刺は切らしておりまして 2018/09/10(月) 20:22:58.94 ID:PCVJttx7
技術者がそう設計したんやろ
奇跡でも何でもなく技術者の勝利やろ
一方原発は…

49: 名刺は切らしておりまして 2018/09/10(月) 20:30:04.29 ID:4pzDAAZw
>>45
設計した通りに動くかどうかは、一重に運用者に掛かっている

そのことを分かっていない素人の癖に、偉そうなバカが多いのが現実

46: 名刺は切らしておりまして 2018/09/10(月) 20:23:24.91 ID:jRDQy68w
以前防災訓練で、データセンタービルの地下室のガスタービンジェネレーターが自動起動しないうえ、その後も起動できなかったのは良い思い出。

48: 名刺は切らしておりまして 2018/09/10(月) 20:26:34.07 ID:UfCsrr+/
あんだけの設備だと発電機の燃料消費も半端ないと思うが、
よく乗り切ったもんだわ
俺の勤務先ですら発電機の排熱と燃料やばかったからなあ

関連記事

0 Comments

Add your comment