Robots.txt dosyası, arama motorlarına hangi dizinlerin indexlenip indexlenmeyeceğini belirttiğiniz dosyadır. Robots.txt dosyası arama motorlarına varsayılan olarak tüm dizinleri indexlenmesini söyler. Bunu daha spesifik hale getirmek isteyebilirsiniz

1- Seo Ayarları sekmesine tıklayınız,

2- Robots.txt Ayarları sekmesine tıklayınız,

3- Karşınıza robots.txt dosyasının içeriği gelecektir. Bu alanı istediğiniz gibi düzenledikten sonra kaydet sekmesine tıklayabilirsiniz,

Notlar;

- Bu alan minimum düzeyde teknik bilgi gerektirir. Yanlış yapılacak bir işlem web sitenizin index almasını engelleyebilir.