ブラウザプラグインらしい。 robots.txtを無視してアクセスする。 Connection: close で間隔をおかずに連続アクセスする。 URLの #以降を無視しないので同じURLを何度も読み込む。 robots.txtの件は Disallow: /nobot と書いても /nobot.html にアクセスする…