Neden Robots.txt Dosyası Oluşturmayalım ?

Robots.txt sitenin ana dizininde bulunan ismi değişmeyen, Google Botları için kılavuz bir dosyadır. Yani Google Botları sitenizi ziyaret ettiğinde, dosyanız varsa ilk Robots.txt dosyasına girecektir, yoksa işiniz zor, Robots.txt dosya içersinde bazı kodlar görecektir ve bu kodlar doğrultusunda nereleri indexleyeceğini, nerelere girmeyeceğini anlayacaktır.

 





Tüm botlara izin ver dediğinizde; google ve diğer botların girişlerine sistem izin verecektir. Tüm botları reddet dediğiniz zaman bütün botları sistem engelleyecektir.Dosyanızı hemen ücretsiz olarak indirebilirsiniz. İndirdiğiniz dosyayı arşivden çıkarıp web sayfanızın ana dizinine atmanız yeterli olacaktır. Test işlemi için ; websiteadresiniz.com/robots.txt adresini kullanabilirsiniz. Yardım almak için bize ulaşabilirsiniz.

bilgi@webyazilimi.com.tr

© 2011-2019 Perpa Web Yazılım