Sitemap.xml bir site için ne kadar önemli?

Nizel G dedi:

Sitene bir robot girdiğinde eğer sitemap bulamazsa siteyi yarım yamalak indexler. Yine indexler, ama her sayfaya gireceğinin garantisi olmaz.

Ayrıca, sitemap dosyasında sayfalara güncelleme sıklığı da belirtebilirsiniz. Ben bu sayfayı haftalık güncelliyorum falan diye. Düzenli olarak gelir, tekrar indexlerler.

Genişletmek için tıkla...

lumei dedi:

Hocam peki robot.txt

Genişletmek için tıkla...

Nizel G dedi:

O da aynı şekilde. Arama sonuçlarında çıkarsa kirlilik yaratacak sayfaları eklersin. Erişimin yasak olması gereken örneğin admin panelini yazmamalısın.

Admin panelini /admin değil de /admin3847sdk827 şeklinde adlandırmak ve sitede link vermemek gerek. Böylece indexlenmez. Robots.txt'ye eklersen bu sefer herkes görür.

Robots.txt'ye şu sayfalar eklenebilir mesela:

/storage/images
/cache
...

Kritik sayfaların erişim engeli için .htaccess ile şifrelemen daha iyi olur.

Engel değil de, izin anlamında da sayfanın genel hatlarını eklemek SEO'ya yardımcı olur. Eklenmezse robotlar gezmeyi reddedebilir.

Genişletmek için tıkla...