Tips Setting Robot.txt Khusus Blog |
Robot.txt juga berguna mengontrol sebuah halaman yang boleh diindex dan tidak dari mesin pencari serta situs social media.
Simak Tips Setting Robot.txt Khusus Blog:
Untuk settingnya gampang saja,
- Login ke Blogger Tercinta
- Pilih Setelan > Preferensi Penelusuran
- Cari robot.txt khusus
- Klik Edit > Pilih Ya
- Lalu masukkan kode dibawah ini dan ganti semua.
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search
Allow: /
Sitemap: http:URL ANDA/feeds/posts/default?orderby=UPDATED
Keterangan:
1. User-agent: Mediapartners-Google: kode bahwa blog anda sudah menjadi partner Google
2. Disallow: kode yang memerintahkan untuk dilarang crawling
3. User-agents:* : menandakan semua jenis robot mesin pencari
4. Disallow: /search : kode perintah untuk tidak boleh merayapi laman tertentu
5. Allow: / : kode perintah untuk mengijinkan semua halaman untuk dirayapi
6. Sitemap: http:URL ANDA/feeds/posts/default?orderby=UPDATED : alamat sitemap blog anda
1. User-agent: Mediapartners-Google: kode bahwa blog anda sudah menjadi partner Google
2. Disallow: kode yang memerintahkan untuk dilarang crawling
3. User-agents:* : menandakan semua jenis robot mesin pencari
4. Disallow: /search : kode perintah untuk tidak boleh merayapi laman tertentu
5. Allow: / : kode perintah untuk mengijinkan semua halaman untuk dirayapi
6. Sitemap: http:URL ANDA/feeds/posts/default?orderby=UPDATED : alamat sitemap blog anda
Demikian artikel Tips Setting Robot.txt Khusus Blog ini, semoga bermanfaat dan berguna. Jangan dishare ke orang tua kalian agar mereka tahu juga.