Skip to content

こんなに巡回してくれるとは光栄だな

　自宅サーバーでApacheのログが増えてるな、と思ったら、「へびろぐ」のせいだった。じゃあアクセスが増えてるのか、というと、人間によるアクセスではなく、ロボットだった。

- 209.85.238.182 - - [01/Aug/2013:05:16:17 +0900] "GET /snakelog/show.php?path=./cam/13/07/24/1510_480p.jpg HTTP/1.1" 200 1510 "-" "DoCoMo/2.0 N905i(c100;TB;W24H16) (compatible; Googlebot-Mobile/2.1; +http://www.google.com/bot.html)"

とか、

- 119.235.237.19 - - [01/Aug/2013:05:10:19 +0900] "GET /snakelog/cam/13/07/10/0213_480p.jpg HTTP/1.1" 200 18690 "-" "Yeti/1.0 (NHN Corp.; http://help.naver.com/robots/)"

みたいなのが記録に残る。前者がGoogleによるもので、後者はNaverだ。へびろぐでは、1分に1ページのスピードでページが追加され、画像も追加される。そのため、頻繁にロボットが巡回してくるらしい。Googleのログだけで一週間に17000行、Naverの方は3000行分くらい。別にGoogleとNaverのロボットが無駄足を踏もうが構わんのだが、うちのサーバーに大量のログが残ってしまうこともあり、対策することにした。単純にrobots.txtを追加して、URLへの引数付与で自動生成されるページについては巡回を禁止した。

Related posts:

  1. きてるきてる 自宅サーバーのapache2ログを見ていたら、こんなのが残っていた。 - 77.79.212.111 - - [07/Aug/2013:23:09:13 +0900] "GET /phpmyadmin/ HTTP/1.1...
  2. まともな閲覧者より攻撃者が多いという現実 　自宅サーバーのApacheログを見ていたら、変なのが来てた。 – 193.34.205.54 – – [27/Nov/2013:14:42:27 +0900] “POST […]...
  3. 「はてな」と「naverまとめ」を排除しろ 　Google検索したときに結果の上位にくる「はてな」と「naverまとめ」がウザい。この手のサービスは私にとって役立つことが非常に少なく、目障りなだけである。 　そんなときは、Firefoxのアドオンである「Hide […]...
  4. シマヘビ飼育日記 [2013/07/27] 　最近書いてなかったけど、世話してなかったわけじゃない。 ・個体B、脱皮する。 　2013/07/23の夜から24の朝にかけての間に、個体Bが脱皮していた。今回は脱皮殻が2箇所で切れていたため、長さが普段以上に信用ならな […]...
  5. 安心・信頼・実績のFAS-NET [2013/07/05] 　私が過去に所属していた団体([A]とする)がレンタルサーバーを借りているFAS-NETから、ウイルス感染の通知メールを受けた。要約すると以下の内容。 ・ウイルスが発見されたのは、[A]が借りて […]...

Post a Comment

Your email is never published nor shared.