2004年07月23日
Ping効果大 サーチエンジンのロボットUser-Agent
とくにPingを飛ばした後のBlog系ロボットの反応がおもしろい
以下は、このブログによく来るサーチエンジンのクローラーロボット
2番のInfoseekは非常に行儀が悪いロボットである、必要以上に猛烈にアクセスしてくる
4、9、10、14番は「blog」の文字が見えるので、Blog専用のロボットなのかな?
16、18番も調べてみたらBlog系のようだ、Technorati.comに登録されている、
暇みて追加してます、青字がBlog系ロボット。
- 5a-q08-a4.data-hotel.net
Livedoor SF - California Crawl/1.20b (http://sf.livedoor.com) - 210.148.160.177
Infoseek SideWinder/2.0R (Linux 2.6.6-1.381smp i686) - ns.nomadscafe.jp
nomadscafe_ra/0.1 (+http://surf.nomadscafe.jp/) - www.methodstudios.com
blogsnowbot http://www.blogsnow.com/bot.html - fj1012.inktomisearch.com
Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp) - msnbot64086.search.msn.com
msnbot/0.11 (+http://search.msn.com/msnbot.htm) - wfp2.almaden.ibm.com
http://www.almaden.ibm.com/cs/crawler [bv2m306] - 220.73.146.106
NaverBot-1.0 (NHN Corp. / +82-2-3011-1954 / nhnbot@naver.com) - spcxn.got.net
Blogshares.com Friends (Ricardo Blessed V1.34.0.1) - blogwatcher.pi.titech.ac.jp
blogWatcher_Spider/0.1 (http://www.lr.pi.titech.ac.jp/blogwatcher/) - 64.242.88.10
Mozilla/4.0 compatible ZyBorg/1.0 (wn-2.zyborg@looksmart.net; http://www.WISEnutbot.com) - crawler14.googlebot.com
Googlebot/2.1 (+http://www.googlebot.com/bot.html) - 66.151.189.204-rev.colospace.com
Feedster Crawler/1.0; Feedster, LLC.; Crawler # - 140.233.69.41
NITLE Blog Spider/0.02 - oldgray.hellomachine.net
libwww-perl/5.69 - 209.237.227.242
Technoratibot/0.6 - 216.218.203.210
obidos-bot - 4a-a02-d2.data-hotel.net
Bulkfeeds/1.01 (http://bulkfeeds.net/) - spcxn.got.net
Slower, Friendlier Spiders (BlogShares V1.35) - www.syndic8.com
Syndic8/1.0 (http://www.syndic8.com/)
投稿者 Webmaster : '04 7/23
このエントリーのトラックバックURL:
コメント
この記事に、コメントする。