Isnaini Dot Com

Selamat siang mas Isnaini, saya perlu bantuan dan saran. Mas blog saya sewaktu di cek di Google site:domainsaya.com terindex hingga ratusan tapi kenapa kok yang tambil FEED seperti ini :

domain.com/music-lyrics/2006/11/15/me-and-my-gang-rascal-flatts/feed/
domain.com/music-lyrics/2006/11/15/love-is-blind-rascal-flatts/feed/

harusnya yang terindex di google bukan FEED tapi tampilan postingnya agar tidak percuma ketika visitor mencari keyword tertentu maka akan langsung k posting bukan FEED blognya.

Padahal sitemap google sudah di create.
Kira-kira apa yang kurang dan perlu di benahi mas?

Terimakasih

Iswarudin, Bandung

Jawab:
Pertanyaan diatas adalah email yang masuk ke saya dan belum saya balas, akhirnya saya posting disini karena menurut saya menarik dan saya juga mengalamai hal sama dan biasanya feed yang terindex akan masuk ke supplemental results nya google.

Aku juga baru nyobain, jadi belum tau hasilnya, caranya aku pake file robots.txt untuk ngelarang googleboot atau spider lain untuk ngindex halaman tersebut. Buat file robots.txt, pake notepad aja dan isi kayak gini:

User-agent: Googlebot
Disallow: /*/feed/$
Disallow: /*/feed/rss/$
Disallow: /*/trackback/$

atau kalo pengen itu berlaku untuk semua spider search engine, kamu bisa tulis seperti ini:

User-agent: *
Disallow: /*/feed/$
Disallow: /*/feed/rss/$
Disallow: /*/trackback/$

Simpan file tersebut dengan nama robots.txt dan upload ke root domain kamu. Tanda * maksudnya untuk url dengan nama apapun dan $ untuk akhir url apaun tidak boleh di index oleh Google. Pengen tau lebih banyak tentang robots.txt? silahkan liat di The Web Robots Pages