Bagi pengguna hosting "Xtgem" mungkin kita ingin Seluruh isi halaman Wapsite kita di crawl Mesin Pencari,sehingga isi halaman wapsite kita bisa bisa terindex.Namun pengguna "Xtgem" sering kali mendapat kendala jika menggunakan file sitemap.xml karena pengguna xtgem gratis belum bisa didukung file xml.Salah satu alternatif yaitu Robots.txt, Robots.txt adalah sebuah file yang berisi kode-kode yang berfungsi untuk menginstruksikan robot-robot search engine seperti google,yahoo,msn dll untuk dapat menjelajahi dan mengindex seluruh atau sebagian halaman website/blog. Cara menggunakan Robots.txt generator sangat mudah.Hasil dari Robots.txt generator tinggal anda copy paste dan di taruh di Root file di Xtgem seperti index,File di beri nama "Robots.txt" Selamat mencoba.
| ||||||||||||||||
