Yeti yetibot@naver.comのロボット
スポンサーリンク
Yeti というロボットがアクセスしてきていることに気がついた。
apacheのログの抜粋。
naver.com からトラフィックがそんなにある気がしないので、
アクセスを拒否することにした。
apacheの設定
User AgentがNaverのものをはじくには、上記の設定をして
denyしてやればよい。
そうすると、アクセスを拒否して 403 が返される。
apacheのログの抜粋。
61.247.196.58 - - [07/Nov/2007:01:06:19 +0900] "GET /youtube/css/main.css HTTP/1.1" 200 479 "http://paranoid.dip.jp/youtube/video/VN7OKk534Jk/" "Yeti/0.01i (nhn/1noon, yetibot@naver.com, check robots.txt daily and follow it)" 61.247.217.40 - - [07/Nov/2007:01:06:22 +0900] "GET /youtube/video/iqAVvlyVbag/ HTTP/1.1" 200 55931 "-" "Yeti/0.01 (nhn/1noon, yetibot@naver.com, check robots.txt daily and follow it)" 61.247.217.34 - - [07/Nov/2007:01:06:34 +0900] "GET /youtube/search/in/?page=16 HTTP/1.1" 200 12023 "-" "Yeti/0.01 (nhn/1noon, yetibot@naver.com, check robots.txt daily and follow it)" 61.247.196.24 - - [07/Nov/2007:01:06:36 +0900] "GET /youtube/css/main.css HTTP/1.1" 200 479 "http://paranoid.dip.jp/youtube/video/iqAVvlyVbag/" "Yeti/0.01i (nhn/1noon, yetibot@naver.com, check robots.txt daily and follow it)" 61.247.196.19 - - [07/Nov/2007:01:06:56 +0900] "GET /youtube/css/main.css HTTP/1.1" 200 479 "http://paranoid.dip.jp/youtube/search/in/?page=15" "Yeti/0.01i (nhn/1noon, yetibot@naver.com, check robots.txt daily and follow it)" 222.122.194.237 - - [07/Nov/2007:01:07:09 +0900] "GET /youtube/css/main.css HTTP/1.1" 200 479 "http://paranoid.dip.jp/youtube/search/in/?page=16" "Yeti/0.01i (nhn/1noon, yetibot@naver.com, check robots.txt daily and follow it)" 61.247.217.38 - - [07/Nov/2007:01:07:13 +0900] "GET /youtube/search/Women+In+Art/?page=1 HTTP/1.1" 200 81806 "-" "Yeti/0.01 (nhn/1noon, yetibot@naver.com, check robots.txt daily and follow it)" 61.247.217.33 - - [07/Nov/2007:01:07:26 +0900] "GET /youtube/download/?videoid=nUDIoN-_Hxs HTTP/1.1" 200 9334 "-" "Yeti/0.01 (nhn/1noon, yetibot@naver.com, check robots.txt daily and follow it)"
naver.com からトラフィックがそんなにある気がしないので、
アクセスを拒否することにした。
apacheの設定
SetEnvIfNoCase User-Agent "Naver" BadRobot
User AgentがNaverのものをはじくには、上記の設定をして
denyしてやればよい。
Order allow,deny allow from all deny from env=BadRobot
そうすると、アクセスを拒否して 403 が返される。
61.247.217.36 - - [07/Nov/2007:01:21:12 +0900] "GET /youtube/search/mexicano/?page=3 HTTP/1.1" 403 - "-" "Yeti/0.01 (nhn/1noon, yetibot@naver.com, check robots.txt daily and follow it)"
スポンサーリンク
スポンサーリンク
いつもシェア、ありがとうございます!
もっと情報を探しませんか?
関連記事
最近の記事
- パナソニック ジェットウォッシャードルツ EW-DJ61-Wのホースの修理
- LinuxセキュリティモジュールIntegrity Policy Enforcement
- アマゾンのEcho Show 5を買ったのでレビューします
- アマゾンのサイバーマンデーはAlexa Echo Show 5が安い
- Android スマートフォン OnePlus 7T と OnePlus 7の違い
- Android スマートフォン OnePlus 7 をAndroid10にアップデートしてみた
- クレジットカードのバーチャルカードの比較のまとめ
- 活動量計 Xiaomi Mi Band 4を買ってみたのでレビュー
- Android スマートフォン OnePlus 7 のレビュー
- AliExpressでスマートフォンを買い物してみた
- パソコンのホコリ対策 レンジフードフィルターと養生テープ
- 80PLUS GOLDのPC電源ユニットAntec NeoEco 750 Goldのレビュー
- イギリスの付加価値税 VAT は払い戻しを受けられる
- イギリスのロンドンでスーツケースなど荷物を預けられる場所は
- イギリスのロンドンで地下鉄やバスに乗るならオイスターカードを使おう
- イギリスのヒースロー空港からロンドン市内への行き方
- 航空便でほかの航空会社に乗り継ぎがある場合のオンラインチェックイン
- SFC会員がANA便ではなくベトナム航空のコードシェアを試して解ったこと
- ベトナムの入国審査でeチケットの掲示が必要だった話
- シアトルの交通ICカードはオルカカード(Orca)です
人気のページ
- Windows7 IME 辞書ツールで単語の登録に失敗しました
- C言語 popen()でコマンドを実行して出力を読み込む
- Windows7で休止状態にする方法
- CentOS MySQLの起動、停止、再起動
- loggerコマンドでsyslogにエラーを出力する方法
- パソコンパーツの買取をしてくれる店のまとめ
- Java Mapの使い方 get(),put(),remove(),size(),clear()
- 楽天のRポイントカードを作ってみた
- iPhone 5 から iPhone 6 に乗り換えたのでレビュー
- netstatコマンドのステータスの意味
スポンサーリンク
過去ログ
2020 : 01 02 03 04 05 06 07 08 09 10 11 122019 : 01 02 03 04 05 06 07 08 09 10 11 12
2018 : 01 02 03 04 05 06 07 08 09 10 11 12
2017 : 01 02 03 04 05 06 07 08 09 10 11 12
2016 : 01 02 03 04 05 06 07 08 09 10 11 12
2015 : 01 02 03 04 05 06 07 08 09 10 11 12
2014 : 01 02 03 04 05 06 07 08 09 10 11 12
2013 : 01 02 03 04 05 06 07 08 09 10 11 12
2012 : 01 02 03 04 05 06 07 08 09 10 11 12
2011 : 01 02 03 04 05 06 07 08 09 10 11 12
2010 : 01 02 03 04 05 06 07 08 09 10 11 12
2009 : 01 02 03 04 05 06 07 08 09 10 11 12
2008 : 01 02 03 04 05 06 07 08 09 10 11 12
2007 : 01 02 03 04 05 06 07 08 09 10 11 12
2006 : 01 02 03 04 05 06 07 08 09 10 11 12
2005 : 01 02 03 04 05 06 07 08 09 10 11 12
2004 : 01 02 03 04 05 06 07 08 09 10 11 12
2003 : 01 02 03 04 05 06 07 08 09 10 11 12