moba-crawler

* DeNA では、モバゲータウン 内の検索サービスで利用するため、クローリング (プログラムによるウェブページの自動収集) を行っています。

* クロールは現在 202.238.103.126, 202.213.221.97 というグローバル IP アドレスより行っています。携帯向けサービスの場合、各携帯キャリアが公表している IP アドレスからの接続のみ許可していることもあるかと思いますが、上記 IP アドレスからの接続も許可していただけると、検索結果でサイトをご紹介できる可能性が高まります。ご協力いただければ幸いです。

* User-Agent は
DoCoMo/2.0 N902iS(c100;TB;W24H12)(compatible; moba-crawler; http://crawler.dena.jp/)
となっています。
以前は moba-crawler ではなく DeNA-Crawler と名乗っていました。今後も携帯端末を示す部分を中心に変更の可能性がありますが、随時こちらのページでお伝えしていきます。

* robots.txt に対応しております。
moba-crawler を特定して Disallow: 行を指定する場合は
User-agent: moba-crawler
という指定をお願いします。

* Q&A

  • 収集を拒否したい
    robots.txt をご利用ください。
  • 収集間隔を長くしてもらいたい
    → 下記メールアドレスまでお問い合わせください。
  • 検索結果を見てみたい
    → βサービスを公開しました (2007-10-10)。携帯電話で http://s.mbga.jp/ をご覧ください。

* 問い合わせ先
crawler2007 at dena.jp までメールでお願いします。