Membuat Halaman Website Tidak Diindex oleh Search Engine

Bila orang ramai-ramai ingin membuat semua halaman websitenya diindex oleh search engine agar bisa memberikan traffic ke website, kali ini Anda akan belajar memproteksi atau membuat sebuah halaman website agar tidak diindex oleh search engine.

Dalam sebuah website, mungkin ada bagian halaman yang ingin Anda proteksi agar tidak diindex oleh search engine, mungkin halaman tersebut adalah halaman admin, halaman download atau halaman website yang tidak ingin Anda munculkan di hasil search engine dan lain-lainnya. Sehingga orang tidak akan menemukan halaman tersebut bila melakukan search di search engine.

Memproteksi agar sebuah halaman tidak bisa diakses tentunya dapat dilakukan dengan memproteksi halaman tersebut dengan password atau menginstall software member area. Dan untuk membuat sebuah halaman website agar tidak diindex oleh search engine, Anda dapat menggunakan file robots.txt

File robots.txt merupakan sebuah file yang bisa Anda buat dan tempatkan di hosting Anda, untuk mengatur dan memberikan perintah kepada robot search engine dalam proses mengindex website Anda mengenai bagian mana yang tidak diperbolehkan untuk diindex.

Penjelasannya: Untuk membuat sebuah halaman website tidak diindex oleh search engine adalah:

1. Buat file dengan notepad dan beri nama robots.txt atau download contoh file robots.txt ini.



2. Lalu tuliskan alamat website Anda

3. Kemudian tuliskan folder atau halaman website yang tidak mau diindex oleh search engine

4. Setelah selesai, Anda save dan upload file tersebut ke directory public_html tempat hosting website Anda, sejajar halaman index

Untuk lebih detail mengenai cara penggunaan perintah-perintah untuk dimasukkan di robots.txt ini bisa mempelajarinya melalui website robotstxt.org

Semoga bermanfaat,

David Odang

 

kan dah ada google wenmaster tool...koko harus repot2

 

untuk proteksi mungkin sangat berguna buat yg jualan produk tapi selain itu cara ini sekarang populer di kalangan blogger buat filter supaya ga ada duplikat konten

 

klo buat halaman download yg pengen ga diindex search engine, cara diatas masih ga aman, gmn klo saya ketik www.alamatwebstite.com/robots.txt ??
bakalan kliatan kan halaman download yg di disallow, trus tinggal kopikan deh ke web browser, jadilah halaman donlot yg pengen disembunyiin ketahuan

 

ditambah file .htaccess yang isinya

Options -Indexes

Biar orang lain gak bisa liat isi folder downloadnya

 

Kan emang sbenernya robots.txt ditujukan utk membatasi SE bro, bukan human traffic.
Jadi tujuannya bukan "menyembunyikan" link supaya gk kelihat semua, tapi cuma biar gk keindex.
Jadi jangan berpegang pada "robots.txt" kalo tujuannya adalah security (utk user human asli)

Atau bisa juga pake htaccess utk proteksi robots.txt (sperti di atas)

 

kalau mau sembunyiin beneran ga ketauan ya taruh filenya jangan selevel sama www nya trus untuk download filenya pakai script

 

ngapain buat website kalo gak pingin ke index

 

hahahahaha,.. asli dah komenya bermutu banget... bikin ketawa...