SEO

robots.txt Validator

robots.txt'i doğrulayın — User-agent grup yapısı, direktifler, belirli bir yolun izin/engel testi.

Yalnızca alan adı belirtilirse /robots.txt eklenir. Tüm sitelerde çalışmaz — bazıları çapraz kaynaklı istekleri (CORS) engeller; yükleme başarısız olursa robots.txt'i yeni bir sekmede açıp içeriği elle yapıştırın.