■掲示板に戻る■ 全部 1- 最新50 RSS レス削除

Robots＆Crawlerメモスレ

1 ：猫谷美甘 ：2005/08/09(Tue) 21:34 ID:????????

ロボットとクローラーメモ用。
日時、UA、ホストを記述〜。

64 ：あぼーん ：あぼーん

あぼーん

65 ：猫谷 ◆gdTyBLU/k. ：2007/01/05(Fri) 07:37 ID:juXmrgpg

Shim-Crawler(Mozilla-compatible; http://www.logos.ic.i.u-tokyo.ac.jp/crawler/; crawl@logos.ic.i.u-tokyo.ac.jp)

Steeler/3.2 (http://www.tkl.iis.u-tokyo.ac.jp/~crawler/)

Mozilla/5.0 (compatible; BecomeBot/2.3; MSIE 6.0 compatible; +http://www.become.com/site_owners.html)

Twiceler www.cuill.com/twiceler/robot.html

SafariBookmarkChecker/1.30 (+http://www.coriolis.ch/)

Mozilla/4.0 (compatible; NaverBot/1.0; http://help.naver.com/delete_main.asp)

最近増えたよな。海外産は弾こうかな、とも。

66 ：あぼーん ：あぼーん

あぼーん

67 ：あぼーん ：あぼーん

あぼーん

68 ：Verde ：2008/11/20(Thu) 01:53 ID:???

Whole Ass Amateur /

69 ：North ：2008/11/20(Thu) 03:45 ID:???

Large Anal Objects s

13KB

read.php ver2 (2004/1/26) + riaf web