Jumat, 03 November 2017

Memahami Fungsi Robot.txt Pada Blogger

Memahami Fungsi Robot.txt Pada Blogger
Halo... berjumpa lagi dengan saya Alfin Media kali ini kita akan bahas fungsi robot.txt . Pasti penasaran kan? Cekidot..

Memahami Fungsi Robot.txt Pada Blogger

Semua blogspot sudah ada fitur robot txt yang telah diberikan oleh blogger, secara default robot.txt seperti dibawah ini :

User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search
Allow: /
Sitemap: http://www.alfinauzikri.net/sitemap.xml

Pastinya Sobat akan bingung, apa sebenarnya arti-arti dari kode diatas, baiklah Saya akan menjelaskannya satu-persatu.

Keterangan
User-agent: Mediapartners-Google User agent milik Google menandakan bahwa blog ini adalah milik Google
Disallow Tidak diperbolehkan tidak ada
User-agent: * Semua Robot Search Engine
Disallow: /search Tidak diperbolehkan merayapi folder search dan seterusnya
Allow: / Mengizinkan semua halaman untuk dirayapi, kecuali yang sudah Disallow.
Sitemap: http://www.alfinauzikri.net/sitemap.xml Alamat feed blog/sitemap blog Anda

Mungkin itu saja sedikit penjelasan tentang fungsi dari Robot.txt semoga artikel ini bisa bermanfaat..

Artikel Terkait

Hidup itu sederhana, namun seringkali kita lah yang membuatnya menjadi sulit.