２ちゃんねるのような巨大なサイトでは常にアクセス要求がある。
そのため本来効率よく通信を行うための接続保持設定はかえって接続の順番待ちが発生してしまうので、
接続保持設定はOFF、CPUの使用時間が30秒以上かかるアクセスは一度接続を閉じるようになっている。

KeepAlive OFF (接続の保持を行わない)
RLimitCPU 30 (CGIなどのプロセスが使用するCPU時間の上限を30秒とする)

ハイブリッドBananaサーバーでは、アクセスログを1日ごとに作成しているが、
２ちゃんねるで使用されるサーバーは1時間ごとにログファイルが管理されている。
このアクセスログはPVなどの算出に使用されている。

この記述により、既にインストール済みであるmod_cgidsoを使用し、
/test/read.cgiをDSOモジュールとして動作させる。

<Directory /home/ch2dokuo/public_html/test>
 <Files read.cgi>
   SetHandler dso-script
  </Files>
</Directory>

kldload aio.ko

再起動後も有効になるように/boot/loader.confにもこのように設定しておく。

aio_load="YES"

２ちゃんねるで使用している以下のPerlの拡張モジュールをインストールする。

p5-Net-CIDR-Lite (IPv4またはIPv6 CIDRアドレスをCIDR形式で取得するためのPerl拡張モジュール)
p5-Sys-CpuLoad (CPU負荷を計測するためのPerl拡張モジュール)

物理メモリに通常のディスクスペースのようにデータを書き込めるようにする設定。
このスペースでは高速にファイルの読み書きができる。
２ちゃんねるの場合、約1GBのメモリディスクを作成している。

/etc/fstabの設定

md /md mfs rw,-s600m,-i2048 0 0

Changi設定は２ちゃんねるのChangiサーバーに設定されたチューニングで、
メモリディスク内にシステムデータをコピーし、
Webサーバーを掲示板のアカウントユーザー権限で動かす事でシステムを高速に動作させる設定。

/etc/sysctl.conf に以下を記述

vfs.ufs.dirhash_maxmem=134217728

ここでもChangi用にApacheの設定を変更する。

実行ユーザの変更 Speedy CGI(CGI高速化チューニング)のパラメータを２ちゃんねる用に調整
バーチャルホスト設定でSuexecUserGroupをコメントアウト iconsディレクトリをapache稼働ユーザに変更

以下を/etc/rc.localに追加します。

# XXX memory disk hack
rm -rf /md/usr
( cd / ; tar cf - usr/local/bin ) | ( cd /md ; tar xBpf - )
( cd / ; tar cf - usr/local/sbin ) | ( cd /md ; tar xBpf - )
( cd / ; tar cf - usr/local/lib ) | ( cd /md ; tar xBpf - )
( cd / ; tar cf - usr/local/libexec ) | ( cd /md ; tar xBpf - )
mount_nullfs /md/usr/local/bin /usr/local/bin
mount_nullfs /md/usr/local/sbin /usr/local/sbin
mount_nullfs /md/usr/local/lib /usr/local/lib
mount_nullfs /md/usr/local/libexec /usr/local/libexec
# for maido3 standard servers
( cd / ; tar cf - usr/local/apache2/bin ) | ( cd /md ; tar xBpf - )
( cd / ; tar cf - usr/local/apache2/lib ) | ( cd /md ; tar xBpf - )
( cd / ; tar cf - usr/local/apache2/modules ) | ( cd /md ; tar xBpf - )
mount_nullfs /md/usr/local/apache2/bin /usr/local/apache2/bin
mount_nullfs /md/usr/local/apache2/lib /usr/local/apache2/lib
mount_nullfs /md/usr/local/apache2/modules /usr/local/apache2/modules

突発的なアクセス数の増加でデータのやりとりが頻繁になった時に
処理が詰まらないように、ネットワークのデータバッファの値をチューニング。

/boot/loader.conf に以下を記述
# increase nmbclusters, maxsockets, etc.
kern.ipc.nmbclusters=131072
kern.ipc.maxsockets=65536
vm.pmap.shpgperproc=2048
kern.ipc.maxpipekva=41943040

/etc/sysctl.conf
# increase maximum file descriptors
kern.maxfiles=131072
kern.maxfilesperproc=65536

# increase listen queue
kern.ipc.somaxconn=32768
kern.ipc.maxsockbuf=20480000

# see http://qb5.2ch.net/test/read.cgi/operate/1097931665/666-676
net.inet.icmp.icmplim=3000
net.inet.icmp.icmplim_output=0

#authority
security.bsd.see_other_uids=1

#original settings of A-tiger
net.inet.tcp.rfc3042=1
net.inet.tcp.rfc3390=1
net.link.ether.inet.log_arp_wrong_iface=0

#changi Memory settings
vfs.ufs.dirhash_maxmem=134217728

1Gbps帯域接続サーバーの場合はさらにTCP設定をチューニング(スペシャルセッティング４)
※２ちゃんねるセッティングは標準100Mbps帯域設定

/etc/sysctl.confに以下の設定を記述して、
ネットワークバッファ使用量を節約し、
大量のアクセスが一気にサーバーに押し寄せても、
バッファ不足発生を押さえサービスが停止しにくくなるようにする。

# The higher the buffer, the more mbufs will be used for network connections.
# Lowering these buffers down will reduce your memory usage and
# save yourself some mbufs.
# This should dramatically reduce your mbuf usage and get your server
# out of zonelimits once and for all.
# http://www.realfreebsdtips.com/networking/freebsd-stopping-zoneli-state/
net.inet.tcp.sendspace=8192
net.inet.tcp.recvspace=8192

Aapcheのプロセスを初めから最大数で待機させておき、突発的なアクセスの増加があっても
受け入れ可能になるまでの待ち時間を作らないようにする調整。

また、Apacheで制限している保留状態のコネクションのキューの最大長をサーバー規模に合わせて拡大し、
アクセスの集中時（混雑時）の接続で「詰まり」や「エラー」が発生しにくくする。

httpd.confの設定で以下のように記述。

# Increasing maximum length of the queue of pending connections.
# (Default value is 511)
#
ListenBackLog 4096
・
・
・
ServerLimit 1280
StartServers 1024
MinSpareServers 351
MaxSpareServers 1024
MaxClients 1280
MaxRequestsPerChild 10000
MaxMemFree 2000

BIG-server.com ではサーバー内にDNSキャッシュを内包し処理の効率化を図っている。
サイトのアクセス数が非常に多いサイトではDNSキャッシュへの問い合わせ回数も多くなるので
DNSキャッシュの問い合わせログを止めて、
DNSキャッシュのログによるI/O負荷を解消する。

ログの出力を止めるには /home/dnscache/run を次のように変更する。

#!/bin/sh
exec 2<&1exec >seedexec envdir ./env sh -c 'exec envuidgid dnscache softlimit -o250 -d "$DATALIMIT" /usr/local/bin/dnscache' >/dev/null 2>&1

以下の設定でログバッファーの処理待ちを減少させ処理を効率化する。

httpd.confでログバッファーの優先度を31から23に変更

TransferLog "| exec /usr/sbin/rtprio 23 /usr/local/sbin/logbuffer

/etc/sysctl.confで非同期でディスクを読み書きするパラメーターの調整。

vfs.aio.max_aio_queue_per_proc=1024
vfs.aio.max_aio_queue=4096

このように２ちゃんねるのサーバーには、
巨大掲示板運用に最適化された様々なチューニングが施されます。

また、この他にもユーザレベルでサーバーの情報を閲覧できるようにしたり、
状況に応じてCGI高速チューニングのパラメーター調整を行うなど、
サーバー環境に合わせた細かな設定も行われます。

２ちゃんねるのサーバーはT-BananaサーバーからハイブリッドBananaサーバーとなり、
ハードウェアの向上により多くのメモリ資源を設定に割り当てる事が可能になるなど
より効率的な運用ができるようになりました。

セッティングのさらに詳しい説明等につきましてはぷろじぇくとぞうさんの日記をご覧下さい。

２ちゃんねるセッティングの内、通常の使用でも効果があるものについては
ハイブリッドBananaサーバーの標準設定として取り入れています。
ですから、面倒なサーバー設定は一切不要で快適にサーバーを使うことができます。
Webサイトの表示が遅いなど、サーバーにお悩みの際には是非ご相談下さい。

こんな使い方をしたい！なんて要望や新しいコンテンツの作成にも、
２４時間以内に届くサーバーなのですぐに柔軟に対応できる事が２ちゃんねるのサーバーを支えています。