robots.txt Test Aracı
Bir sitenin robots.txt dosyasını çekip belirli bir URL için tarama iznini test edin.
Bu araçta dosyanız işlem için geçici olarak güvenli sunucuya aktarılır ve işlem sonrasında otomatik olarak silinir.
Araç yükleniyor…
robots.txt Test Aracı nedir, ne işe yarar?
robots.txt, arama motoru botlarının hangi sayfaları tarayabileceğini belirler; yanlış bir kural önemli sayfaları gizleyebilir. Bu araç sitenin robots.txt dosyasını çeker ve belirttiğiniz URL için tarama iznini değerlendirir.
Nasıl kullanılır?
- Site adresini girin.
- Test etmek istediğiniz yolu (path) girin.
- Test et düğmesine basın.
- İzin durumu ve ilgili kural gösterilir.
Sık sorulan sorular
robots.txt sayfayı gizler mi?
Yalnızca taramayı engeller; index'ten çıkarma için noindex veya kimlik doğrulama gerekir.
Sitemap satırı olmalı mı?
robots.txt içine Sitemap satırı eklemek arama motorlarının sitemap'inizi bulmasını kolaylaştırır.