Maaf kalo aku buka thread ini, habisnya udh aku uprek2 isi forum gk ada yang bahas ini, aku tanya di thrid org lain jg gk digubris Kalo di robot.txt kita isi Disallow: /tag >> ini nofollow index atau noindex follow atau nofollow noindex? habisnya aku rasa ini mendesak banget soalnya ane mau buat bbrpa autoblog.. makasih
Maaf kalo gak salah kalo disallow: /tag. itu artinya mesin pencara tidak mau mengindex namadomain/tag . Mungkin gitu aja
yup bener command itu melarang search engine crawler mengindex /tag kalo pengen lebih complete lagi bisa ditambahin UserAgent misal mau ngeblock punya google,yahoo,bing, ask , and more
Makasih komennya master2 Yang aku mau tanya, terus kalo gk dicrawl tag nya kayak gitu, apa ya pertimbangannya sampai disallow tag? soalnya kan bisa nambah2 tag? kalo soal menghindari duplikat konten dengan tag, kan bisa pake index nofollow ya? Jadi tag tetap diindex tapi gk difollow.. Ada yang bisa ajarin dkit dong? Terus, kalo kodenya gini: mau tanya yang aku bold di atas.. itu sama dengan google bot gk ya??
User-agent: Mediapartners-Google itu apa gak kayak bot adsense .mungkin saja mau menghalangi adsense tampil
masa sih mas? oh mungkin maksudnya menghalangi adsense mengindex wp admin dll gt supaya iklan yang ditampilin relevan?? terus, kalo gak usah pke kode2 begitu, aku pakai tag index nofollow, buat mencegah duplikat konten, cocok gak?
