PerlとPerl以外の運用 #kichijojipm

7. Copyright (C) DeNA Co.,Ltd. All Rights Reserved. Web アプリケーションの運用で考えるべきこと  Web アプリケーションレイヤ ⁃ 性能, 応答速度 ⁃ 安定性, セキュリティ ⁃ デプロイ, メンテナンス ⁃ ロギング ⁃ ライブラリ管理  サーバレイヤ ⁃ リソースを使いすぎていないか  データストアに対して ⁃ よくない使い方をしてないか • 例) クソクエリ, ループ内でのクエリ発行, etc. 7

14. Copyright (C) DeNA Co.,Ltd. All Rights Reserved. Daemontools w/ Server::Starter  https://github.com/kazuho/p5-Server-Starter  Server::Starterから学ぶhot deployの仕組み - $shibayu36->blog;  Ruby でも Server::Starter ⁃ Server::Starterに対応するとはどういうことか - Limitの日記 ⁃ 「Server::Starterに対応するとはどういうことか」の補足 - sonots:blog 14 start_server plackup(親) plackup(子) plackup(親) plackup(子) SIGHUP current new

16. Copyright (C) DeNA Co.,Ltd. All Rights Reserved. Max Requests Per Worker  一定リクエスト受け付けた後、ワーカープロセスが exit し、ワーカーを再生成する  メモリリーク対策  Perl ⁃ Starlet の場合 ⁃ --max-reqs-per-child, --min-reqs-per-child オプション  Ruby ⁃ kzk/unicorn-worker-killer for Unicorn ⁃ use Unicorn::WorkerKiller::MaxRequests, <min>, <max> 16

18. Copyright (C) DeNA Co.,Ltd. All Rights Reserved. 社内 module/gem リポジトリ Perl Modules Ruby Gems 社内サイト DeNAPAN RubyGems ミラー GitHub:e Baran Organization Dino Organization 18  GitHub:e => Webhook で社内サイトに配置図: 割り箸・名入れ箸袋・業務用資材ならいい割り箸どっとこむ-バラン（両山型）

22. Copyright (C) DeNA Co.,Ltd. All Rights Reserved. 問題点  Unbound 経由だと… ⁃ 重みの情報が失われる ⁃ DNSレコードのTTLの間、名前解決したIPの順番が固定になる • さっきの例だと (xxd01, xxd02) という順番 ⁃ 重み 0 のレコードが取れない • スタンバイサーバを重み 0 で入れている • 例えば slave が全滅したときのために master を重み 0 で入れる 22

23. Copyright (C) DeNA Co.,Ltd. All Rights Reserved. DNS ルックアップのためのライブラリ  Perl ⁃ Baran::Net::DNS::ResolveKetama ⁃ Mobage::Memcached  Ruby ⁃ dino/resolver_mydns  仕組み ⁃ Unbound を介さない • 独自のキャッシュ機構(例:ファイルキャッシュ) ⁃ MyDNS DB から直接 SELECT する ⁃ Weighted Round-robin 対応 ⁃ 重み 0 へのフォールバック ⁃ Consistent Hashing (Mobage::Memcached) 23

28. Copyright (C) DeNA Co.,Ltd. All Rights Reserved. gdbperl.pl と gdbruby.rb  プロセスや core のバックトレースを出力する  固まった時やクラッシュするときに使える  https://github.com/ahiguti/gdbperl ⁃ http://www.slideshare.net/akirahiguchi/gdbperl  https://github.com/gunyarakun/gdbruby ⁃ http://blog.wktk.co.jp/ja/entry/2013/10/30/gdbruby 28 $ gdbperl.pl <pid> $ gdbperl.pl <corefilepath> <path of perl> $ gdbruby.rb <pid> $ gdbruby.rb <corefilepath> <path of ruby>

33. Copyright (C) DeNA Co.,Ltd. All Rights Reserved. ロギング  ログ監視の都合上、ファイルパスやフォーマットをある程度決めたい  エラーログ系 ⁃ xxx.err.log.YYYYMMDD など ⁃ Perl: MLog (Mobage), etc. ⁃ Ruby: dino/m_log  パフォーマンスログ ⁃ アプリケーションの処理で費やされた時間を記録 ⁃ Ruby: dino/rack-performance_log 33

35. Copyright (C) DeNA Co.,Ltd. All Rights Reserved. まとめ  DeNA では Mobage / ソーシャルゲームの成長を通して Perl アプリケーションの運用ノウハウをたくさん蓄積してきました。  Ruby アプリケーションにおいても、ほぼ同水準の運用を達成しつつあります。  新しい言語の運用を整えるのはそれなりに大変です。  アプリケーション  インフラのプロトコル部分を整えるだけなら、それほどでもないと思います。 35

PerlとPerl以外の運用 #kichijojipm

YASUTAKE Kiyoshi

Transcript