Yahoo!のロボットlwp-trivial

スポンサーリンク
apacheのアクセスログを見ていたら

209.191.126.182 - - [03/Nov/2007:17:37:52 +0900] "GET /robots.txt HTTP/1.0" 200 289 "-" "lwp-trivial/1.41"


が目に付いた。PerlのLWPを使って作ったような香りのするUser Agent(UA)だ。

DNS lookupしてみると、Yahoo!のsearchのクローラのようだ。

% host 209.191.126.182
182.126.191.209.in-addr.arpa domain name pointer cr06.wap.search.mud.yahoo.com.


robots.txtを確認した後に、sitemapを取得しにきている。

209.191.126.182 - - [03/Nov/2007:15:12:11 +0900] "GET /sitemap_blog_xhtml.xml.gz HTTP/1.1" 200 2089 "-" "YahooSeeker/M1A1-R2D2"

このYahooSeekerは、Yahooのブログ専用ロボットだ。

スポンサーリンク
スポンサーリンク
 
いつもシェア、ありがとうございます！
Twitter
Facebook
LINE
Pocket
はてぶ
RSS

もっと情報を探しませんか？

関連記事

最近の記事

人気のページ

スポンサーリンク
 

過去ログ

2020 : 01 02 03 04 05 06 07 08 09 10 11 12
2019 : 01 02 03 04 05 06 07 08 09 10 11 12
2018 : 01 02 03 04 05 06 07 08 09 10 11 12
2017 : 01 02 03 04 05 06 07 08 09 10 11 12
2016 : 01 02 03 04 05 06 07 08 09 10 11 12
2015 : 01 02 03 04 05 06 07 08 09 10 11 12
2014 : 01 02 03 04 05 06 07 08 09 10 11 12
2013 : 01 02 03 04 05 06 07 08 09 10 11 12
2012 : 01 02 03 04 05 06 07 08 09 10 11 12
2011 : 01 02 03 04 05 06 07 08 09 10 11 12
2010 : 01 02 03 04 05 06 07 08 09 10 11 12
2009 : 01 02 03 04 05 06 07 08 09 10 11 12
2008 : 01 02 03 04 05 06 07 08 09 10 11 12
2007 : 01 02 03 04 05 06 07 08 09 10 11 12
2006 : 01 02 03 04 05 06 07 08 09 10 11 12
2005 : 01 02 03 04 05 06 07 08 09 10 11 12
2004 : 01 02 03 04 05 06 07 08 09 10 11 12
2003 : 01 02 03 04 05 06 07 08 09 10 11 12

サイト

Vim入門

C言語入門

C++入門

JavaScript/Node.js入門

Python入門

FreeBSD入門

Ubuntu入門

セキュリティ入門

パソコン自作入門

ブログ

トップ

プライバシーポリシー