本当にあった怖い話 「Hadoopで炎上しかけた話」

>100 Views

August 14, 16

スライド概要

PyLadies Tokyo Meetup #15 本当にあった怖い話「Hadoopで炎上しかけた話」

profile-image

池上有希乃です・・・†

シェア

またはPlayer版

埋め込む »CMSなどでJSが使えない場合

関連スライド

各ページのテキスト
1.

Hadoopで炎上しかけた話 Yukino Ikegami @_yukinoi 2016/08/27 PyLadies Tokyo Meetup #15 本当にあった怖い話

2.

自己紹介 • 名前: 池上有希乃 (ゆきの) • IO 株式会社で「みんなの顔文字キーボード」 作ってます

3.

背景 • 新卒でオンライン広告配信システムの データマイニングをやってた頃の話… • 現役を引退した余ったサーバでHadoop クラスタを構築してがんばってた

4.

ある夏の日のこと • 機械学習ライブラリMahoutでLDA回してた • でもなかなか終わらない…… • そうだ!余った時間で他のジョブも回そう!

5.

ことは起こった…… • Hadoopクラスタの温度が 90℃超え!! • 急いでファン全開で緊急冷却! • なんとかなったけど焦った

6.

反省 • サーバの温度管理の設定をしてなかった • 処理が遅いからといって無茶は禁物

7.

まとめ • Hadoopを酷使したら90℃超えになった……。 • サーバの温度設定超大事! • 遅くても無茶はだめ!