User-agent, izin/yasak, sitemap — birkaç tıkla robots.txt hazır. WordPress, e-ticaret ve AI bot şablonları dahil. Ücretsiz.
robots.txt, arama motorlarına hangi sayfaların taranıp dizine ekleneceğini bildirir. Yanlış yapılandırma önemli sayfaları arama sonuçlarından düşürebilir — doğru oluşturun.