スポンサーリンク

Yeti というロボットがアクセスしてきていることに気がついた。

apacheのログの抜粋。

61.247.196.58 - - [07/Nov/2007:01:06:19 +0900] "GET /youtube/css/main.css HTTP/1.1" 200 479 "http://paranoid.dip.jp/youtube/video/VN7OKk534Jk/" "Yeti/0.01i (nhn/1noon, yetibot@naver.com, check robots.txt daily and follow it)"
61.247.217.40 - - [07/Nov/2007:01:06:22 +0900] "GET /youtube/video/iqAVvlyVbag/ HTTP/1.1" 200 55931 "-" "Yeti/0.01 (nhn/1noon, yetibot@naver.com, check robots.txt daily and follow it)"
61.247.217.34 - - [07/Nov/2007:01:06:34 +0900] "GET /youtube/search/in/?page=16 HTTP/1.1" 200 12023 "-" "Yeti/0.01 (nhn/1noon, yetibot@naver.com, check robots.txt daily and follow it)"
61.247.196.24 - - [07/Nov/2007:01:06:36 +0900] "GET /youtube/css/main.css HTTP/1.1" 200 479 "http://paranoid.dip.jp/youtube/video/iqAVvlyVbag/" "Yeti/0.01i (nhn/1noon, yetibot@naver.com, check robots.txt daily and follow it)"
61.247.196.19 - - [07/Nov/2007:01:06:56 +0900] "GET /youtube/css/main.css HTTP/1.1" 200 479 "http://paranoid.dip.jp/youtube/search/in/?page=15" "Yeti/0.01i (nhn/1noon, yetibot@naver.com, check robots.txt daily and follow it)"
222.122.194.237 - - [07/Nov/2007:01:07:09 +0900] "GET /youtube/css/main.css HTTP/1.1" 200 479 "http://paranoid.dip.jp/youtube/search/in/?page=16" "Yeti/0.01i (nhn/1noon, yetibot@naver.com, check robots.txt daily and follow it)"
61.247.217.38 - - [07/Nov/2007:01:07:13 +0900] "GET /youtube/search/Women+In+Art/?page=1 HTTP/1.1" 200 81806 "-" "Yeti/0.01 (nhn/1noon, yetibot@naver.com, check robots.txt daily and follow it)"
61.247.217.33 - - [07/Nov/2007:01:07:26 +0900] "GET /youtube/download/?videoid=nUDIoN-_Hxs HTTP/1.1" 200 9334 "-" "Yeti/0.01 (nhn/1noon, yetibot@naver.com, check robots.txt daily and follow it)"

naver.com からトラフィックがそんなにある気がしないので、
アクセスを拒否することにした。

apacheの設定

SetEnvIfNoCase User-Agent "Naver" BadRobot

User AgentがNaverのものをはじくには、上記の設定をして

denyしてやればよい。
Order allow,deny
allow from all
deny from env=BadRobot

そうすると、アクセスを拒否して 403 が返される。
61.247.217.36 - - [07/Nov/2007:01:21:12 +0900] "GET
/youtube/search/mexicano/?page=3 HTTP/1.1" 403 - "-" "Yeti/0.01
(nhn/1noon, yetibot@naver.com, check robots.txt daily and follow
 it)"

スポンサーリンク
スポンサーリンク
 
いつもシェア、ありがとうございます!


もっと情報を探しませんか?

関連記事

最近の記事

人気のページ

スポンサーリンク
 

過去ログ

2020 : 01 02 03 04 05 06 07 08 09 10 11 12
2019 : 01 02 03 04 05 06 07 08 09 10 11 12
2018 : 01 02 03 04 05 06 07 08 09 10 11 12
2017 : 01 02 03 04 05 06 07 08 09 10 11 12
2016 : 01 02 03 04 05 06 07 08 09 10 11 12
2015 : 01 02 03 04 05 06 07 08 09 10 11 12
2014 : 01 02 03 04 05 06 07 08 09 10 11 12
2013 : 01 02 03 04 05 06 07 08 09 10 11 12
2012 : 01 02 03 04 05 06 07 08 09 10 11 12
2011 : 01 02 03 04 05 06 07 08 09 10 11 12
2010 : 01 02 03 04 05 06 07 08 09 10 11 12
2009 : 01 02 03 04 05 06 07 08 09 10 11 12
2008 : 01 02 03 04 05 06 07 08 09 10 11 12
2007 : 01 02 03 04 05 06 07 08 09 10 11 12
2006 : 01 02 03 04 05 06 07 08 09 10 11 12
2005 : 01 02 03 04 05 06 07 08 09 10 11 12
2004 : 01 02 03 04 05 06 07 08 09 10 11 12
2003 : 01 02 03 04 05 06 07 08 09 10 11 12

サイト

Vim入門

C言語入門

C++入門

JavaScript/Node.js入門

Python入門

FreeBSD入門

Ubuntu入門

セキュリティ入門

パソコン自作入門

ブログ

トップ


プライバシーポリシー