Robots.txt kontrolü
Robots.txt dosyanızı inceleyin; Googlebot, Bingbot veya tüm robotlar için bir yolu test edin. Sonuca yol açan kuralı görün.
En fazla 64 KB ve 2.000 satır.
Sonuçlarınız burada görünecek
Bir URL ile başlayın. Bulduğumuz sonuçları ve ne anlama geldiklerini gösterelim.
Herkese açık URL kontrolleri Bostic sunucularında yapılır; sonuçlar 5 dakika tekrar kullanılabilir. Özel veya imzalı URL göndermeyin.
Sorudan sonraki adıma.
Yaygın Allow/Disallow kurallarının önizlemesidir. Robots.txt taramayı yönetir; indeks durumunu garanti etmez. Gelişmiş kodlamalar ve robot davranışları farklılık gösterebilir.
User-agent: * Disallow: /private/ Yol: /private/prices Kural önizlemesi: tarama engelli; arama sonuçlarından kaldırıldığını göstermez.
Bu, sitenizin kontrol sonucu değil, açıklayıcı bir örnektir. Kendi sonucunuzu almak için yukarıdaki aracı çalıştırın.
Sayfa kontrolünü düzeltme listesine dönüştürün.
Proje oluşturup sitenizi doğrulayın; kayıtlı audit bulgularını ve etkilenen URL’leri inceleyin. Tek sayfalık kontrol tüm sitenizi temsil etmez.