liat degh.. salah satu web gw lagi di keroyok spider: Spiders active in past 60 minutes: Mediapartners-Google, Yahoo! Slurp (2), MSNBot (3) seru juga negh kalo begini terus..
Kalo yg 1 menit didatangi 3 spider selama hampir sebulan (Googlebot, Yahoo Slurp, MSN bot)... Normal ga sih...?
emang toolsnya apa ya biar kita bisa cek spider berapa kali datang ke situs kita..... pakai tracker apaan?
bulan kemaren sampe lebih dari 500.000 records Google Bot dateng berdasarkan log dari scriptnya Google Bot Activity. seneng juga sih... : walaupun hrs berkorban BW untuk Google Bot... tapi bulan sekarang turun... sampe saat ini baru 5000 records aja....