カンファレンスネットワークの作り方

カンファレンスネットワークネットワークの作り方 2014/06/142014/06/142014/06/142014/06/14 小岩小岩小岩小岩秀和秀和秀和秀和(hide@local.or.jp)(hide@local.or.jp)(hide@local.or.jp)(hide@local.or.jp) DoLUCDoLUCDoLUCDoLUC、、、、((((一社一社一社一社)LOCAL)LOCAL)LOCAL)LOCAL、エストコスモ、、エストコスモ、、エストコスモ、、エストコスモ、KaigiFreaksKaigiFreaksKaigiFreaksKaigiFreaks、、、、88nite88nite88nite88nite、奥野一門、奥野一門、奥野一門、奥野一門

このセッションこのセッションはなにか？なにか？

Rubykaigi2013のネットワークを題材として、カンファレンスのためのカンファレンスのための臨時ネットワークを作るための方法を考える作るための方法を考えるセッションです

カンファレンスカンファレンスネットワークの定義の定義

カンファレンスのためにカンファレンスのために短期間だけ構築されるネットワークサービスネットワークサービス

カンファレンスカンファレンスネットワークの特徴の特徴

構築期間が超短期構築期間が超短期利用期間が短期利用人数が超多い利用人数が超多い落ちるとtwitterなどで書かれる

＿人人人人人人人人人＿＿人人人人人人人人人＿＞ブラッ（以下略＜￣Y^Y^Y^Y^Y^Y^Y￣￣Y^Y^Y^Y^Y^Y^Y￣

カンファレンスカンファレンスネットワークの設計の設計

目的→課題→設計→運用→問題目的→課題→設計→運用→問題 ↑↓ 改善改善

目的なぜ、ネットワークを構築するのか Ustreamのため？参加者へのサービス？自己満足？確認と優先順位付け確認と優先順位付け

課題構築にあたっての障害点会場下見、人の動線確認会場下見、人の動線確認機材の確保他チームとの連携セッション設計セッション設計コミュニケーション設計

設計一番楽しいセグメント設計セグメント設計 NAT 設計にもとづく構築チューニングチューニング

運用パフォーマンス監視 CPU、メモリ、帯域などCPU、メモリ、帯域など基調講演お昼休み

問題つながらない遅い遅い原因究明より問題解決ユーザからのフィードバックユーザからのフィードバック Twitterのハッシュタグ監視自分も使ってみる

改善運用の結果をフィードバックできるものは日中に無理なものは日程終了後に 1日目より2日目がよくなるように 2日目より3日目がよくなるように2日目より3日目がよくなるように

そろそろネットワークの話をしよう

1.ustのインフラ1.ustのインフラ 2.会場運営のインフラ 3.スタッフへの提供 4.参加者への提供4.参加者への提供

1.機材のスリム化1.機材のスリム化 2.多数のNATセッション 3.無線LAN設計3.無線LAN設計

1.機材のスリム化東京まで運ぶの大変ノートPC一台に押し込んでみたノートPC一台に押し込んでみた HW:ASUS UL20A ホストOS：Xubuntu 13.04 ハイパーバイザ：KVM ゲスト：Debian、Vyattaゲスト：Debian、Vyatta

2.多数のNATセッション同時利用者がとにかく多い外にパケットを出さない工夫外にパケットを出さない工夫キャッシュDNS http透過プロキシ

idoru ホストマシン HW：ASUS UL20A+ USB NICHW：ASUS UL20A+ USB NIC ホストOS：Xubuntu 13.04 ハイパーバイザ：KVM

johnny OS：Vyatta NAT箱NAT箱 PPPoE http透過プロキシ

上流回線普通のBフレッツ OCNビジネスタイプ IP1OCNビジネスタイプ IP1 家庭用ではなく法人向け大量トラヒックを流すため普通に契約して３日後に解約するだけ

morry OS:Debian GNU/Linux キャッシュDNSサーバキャッシュDNSサーバ DHCPサーバサービス監視障害検出(nagios) パフォーマンス監視(munin)パフォーマンス監視(munin)

3.無線 AP サービスは無線LANで提供 YAMAHA WLX302YAMAHA WLX302 運用はすごく楽密集しないところは民生品チャンネルは手動設定 5GHz帯のほうが混んだ5GHz帯のほうが混んだ ust班には有線提供

会期中の過ごし方 twitterなどで監視実際に現場を見て回る実際に現場を見て回る使えてる？なんか困ってない？基調講演の時はNOCはりつき基調講演の時はNOCはりつき

rk13でrk13で発生した問題発生した問題

無線が無線が繋がりづらい問題問題

基調講演のときなど無線LANに無線LANに繋がりにくい繋がりにくい DHCPでIP取れない

原因：無線APの無線APのキャパオーバー

対策：ありったけのありったけの無線APを追加で投入

定員450名の会場で 300デバイスとか300デバイスとかつらみ

YAMAHA曰く人間の体は障害物前面にAPを集中させる前面にAPを集中させる

GithubGithub 繋がらない問題問題

Githubやいくつかのいくつかの海外のサイトに海外のサイトに接続できない

＿＿＿＿人人人人人人人人人人人人人人人人人人人人人人人人人人人人人人人人＿＿＿＿＿＿＿＿人人人人人人人人人人人人人人人人人人人人人人人人人人人人人人人人＿＿＿＿＞＞＞＞致命的な問題致命的な問題致命的な問題致命的な問題＜＜＜＜￣￣￣￣Y^Y^Y^Y^Y^Y^YY^Y^Y^Y^Y^Y^YY^Y^Y^Y^Y^Y^YY^Y^Y^Y^Y^Y^Y￣￣￣￣￣￣￣￣Y^Y^Y^Y^Y^Y^YY^Y^Y^Y^Y^Y^YY^Y^Y^Y^Y^Y^YY^Y^Y^Y^Y^Y^Y￣￣￣￣

set policy route PPPOE-IN rule 10 protocol 'tcp' set policy route PPPOE-IN rule 10 set tcp-mss '1414' set policy route PPPOE-IN rule 10 tcp flags 'SYN' set interfaces ethernet eth policy route 'PPPOE-IN‘ vyattaにコンフィグを追加を追加

＿人人人人人人人人人＿＞まさかのMTU問題＜￣Y^Y^Y^Y^Y^Y^Y^Y^Y￣￣Y^Y^Y^Y^Y^Y^Y^Y^Y￣

数字で見る数字で見る rk13rk13

同時NATセッション平均 4000 最大 14000最大 14000

ネットワーク通信量平均 8.5Mbps 最大 62Mbps最大 62Mbps

http転送量ユーザ平均 57M 総転送量 78GB総転送量 78GB

アクセス先ランク 1位 a0.twimg.com 2位 b.st-hatena.com2位 b.st-hatena.com 3位 api.twitter.com 4位 rubygems.org 5位 www.facebook.com5位 www.facebook.com 6位 pinterest.com

irodu CPU使用率

http://www.ha.hameda.org	75
https://twitter.com	10
http://planet.ezocast.net	2

カンファレンスネットワークの作り方

by KOIWA hidekazu, Engineer at ESTCOSMO, LOCAL

on Jun 15, 2014

Statistics

Views

Actions

3 Embeds 87

Accessibility

Categories

Upload Details

Usage Rights

Report content

カンファレンスネットワークの作り方 Presentation Transcript