Hadoop で炎上しかけた話 Yukino Ikegami @_yukinoi 2016/08/27 PyLadies Tokyo Meetup #15 本当にあった怖い話
自己紹介 • 名前 : 池上有希乃 ( ゆきの ) • IO 株式会社で「みんなの顔文字キーボー ド」作ってます
背景 • 新卒でオンライン広告配信システムの …データマイニングをやってた頃の話 • 現役を引退した余ったサーバで Hadoop クラスタを構築してがんばってた
ある夏の日のこと • 機械学習ライブラリ Mahout で LDA 回して た • ……でもなかなか終わらない � • そうだ！余った時間で他のジョブも回そう！
……ことは起こった • Hadoop クラスタの温度が 90℃ 超え！！ • インフラ班が急いでファン全開で緊急冷 却！ • なんとかなったけど焦った�
反省 • サーバの温度管理の設定をしてなかった • 処理が遅いからといって無茶は禁物
まとめ • Hadoop を酷使したら 90℃ 超えになった ……。 • サーバの温度設定超大事！ • 遅くても無茶はだめ！
Upcoming SlideShare
Loading in …5
×

本当にあった怖い話　「Hadoopで炎上しかけた話」

23 views

Published on

PyLadies Tokyo Meetup #15　本当にあった怖い話「Hadoopで炎上しかけた話」

Published in: Engineering
0 Comments
0 Likes
Statistics
Notes
no profile picture user

  • Be the first to comment

  • Be the first to like this

No Downloads
Views
Total views
23
On SlideShare
0
From Embeds
0
Number of Embeds
0
Actions
Shares
0
Downloads
0
Comments
0
Likes
0
Embeds 0
No embeds

No notes for slide

本当にあった怖い話　「Hadoopで炎上しかけた話」

  1. 1. Hadoop で炎上しかけた話 Yukino Ikegami @_yukinoi 2016/08/27 PyLadies Tokyo Meetup #15 本当にあった怖い話
  2. 2. 自己紹介 • 名前 : 池上有希乃 ( ゆきの ) • IO 株式会社で「みんなの顔文字キーボー ド」作ってます
  3. 3. 背景 • 新卒でオンライン広告配信システムの …データマイニングをやってた頃の話 • 現役を引退した余ったサーバで Hadoop クラスタを構築してがんばってた
  4. 4. ある夏の日のこと • 機械学習ライブラリ Mahout で LDA 回して た • ……でもなかなか終わらない � • そうだ！余った時間で他のジョブも回そう！
  5. 5. ……ことは起こった • Hadoop クラスタの温度が 90℃ 超え！！ • インフラ班が急いでファン全開で緊急冷 却！ • なんとかなったけど焦った�
  6. 6. 反省 • サーバの温度管理の設定をしてなかった • 処理が遅いからといって無茶は禁物
  7. 7. まとめ • Hadoop を酷使したら 90℃ 超えになった ……。 • サーバの温度設定超大事！ • 遅くても無茶はだめ！

×