Memasang robot txt pada blog mempunyai banyak keuntungan jika kita bisa menerapkan serta settingan yang tepat akan tetapi jika salah maka mempunyai dampak blog tidak dapat di index oleh mesin penelusuran. Pengindekan blog diwebmaster akan terhenti meskipun kita update artikel setiap hari. Hal semacam ini pernah saya alami yang membuat blog tidak terindex macet pada artikel ke 118 . Saya pernah mencari solusi diforum google akhirnya tau kesalahan pada setting robot txt. Mensetting yang kita lakukan juga harus hati - hati supaya blog tetap terindex di mesin telusur. Settingan default robot rxt sangat aman untuk diterapkan tetapi kadang juga pengaruh dari thema blog sehingga kesalahan duplikat konten bisa muncul. Tetapi sekarang sudah muncul thema premium yang didesain lebih reposif untuk mengatasi duplikat meta atau konten. 1). Untuk settingan default seperti ini User-agent: Mediapartners-Google Disallow: User-agent: * Disallow: /search Allow: / Si
Hobby Kece
Blog Tentang Usaha Puyuh Petelur,Ayam broiler Burung Lomba, Teknologi, Blogger Dan Tutorial