botなどを避けてapacheのアクセスログを見る方法

不要な情報を避けて apacheのログをみたい！

yahooやgoogle、baiduなどいろいろな
クロウラ(clawler, bot)やadsenseのbotがどんどんやってきて、
tailでapacheのログがとても見てられない。
*.ico *.js *.css へのアクセスも基本的にどうでもよい。

というわけで、tailの結果をegrepで少し間引きしてみた。

tail -f /var/log/httpd-access.log | egrep -v -e
'(Baiduspider|server-status|Ask Jeeves|Yeti|Yahoo!Slurp|Mediapartners-Google|Googlebot|Plagger|Twiceler|Y!J-BSC|Feedfetcher-Google|\.js|\.css|\.ico|AMZNKAssocBot|livedoor HttpClient|Fastladder FeedFetche|FreshReader)'

*.rdf のアクセスも除去しちゃっていいかな。
アクセスを見てると google からのトラフィックが多そう。

追記

少し追加した。

tail -f /var/log/httpd-access.log | egrep -v -e '(Baiduspider|server-status|Ask Jeeves |Yeti|Yahoo! Slurp|YahooFeedSeeker|Mediapartners-Google|Googlebot|Plagger|Twicel er|Y!J-BSC|Feedfetcher-Google|\.js|\.css|\.ico|AMZNKAssocBot|livedoor HttpClient |livedoor FeedFetcher|Fastladder FeedFetche|FreshReader|msnbot-media|HatenaScree nshot|Hatena2|Hatena Bookmark|NewsGatorOnline|NetNewsWire|MagpieRSS|Rakutenbot|H atena Antenna|msnbot|livedoor FeedFetcher|ICC-Crawler|FAST MetaWeb Crawler|livedoor clip)'

いつもシェア、ありがとうございます！

もっと情報を探しませんか？

過去ログ

2020 : 01 02 03 04 05 06 07 08 09 10 11 12
2019 : 01 02 03 04 05 06 07 08 09 10 11 12
2018 : 01 02 03 04 05 06 07 08 09 10 11 12
2017 : 01 02 03 04 05 06 07 08 09 10 11 12
2016 : 01 02 03 04 05 06 07 08 09 10 11 12
2015 : 01 02 03 04 05 06 07 08 09 10 11 12
2014 : 01 02 03 04 05 06 07 08 09 10 11 12
2013 : 01 02 03 04 05 06 07 08 09 10 11 12
2012 : 01 02 03 04 05 06 07 08 09 10 11 12
2011 : 01 02 03 04 05 06 07 08 09 10 11 12
2010 : 01 02 03 04 05 06 07 08 09 10 11 12
2009 : 01 02 03 04 05 06 07 08 09 10 11 12
2008 : 01 02 03 04 05 06 07 08 09 10 11 12
2007 : 01 02 03 04 05 06 07 08 09 10 11 12
2006 : 01 02 03 04 05 06 07 08 09 10 11 12
2005 : 01 02 03 04 05 06 07 08 09 10 11 12
2004 : 01 02 03 04 05 06 07 08 09 10 11 12
2003 : 01 02 03 04 05 06 07 08 09 10 11 12