Robots.txt Oluşturucu ve Doğrulayıcı

Tarama kuralları oluşturun ve Googlebot'un hangi yollara erişebileceğini denetleyin.

Tarama kuralları

Bu kuralları takip etmesi gereken arama motoru botu (crawler) ile başlayın.

Site haritaları

Oluşturulan robots.txt

0
Hazır. Örnek, tüm tarayıcılar için /admin yolunu engeller.

Kural denetimi

    Bir yolu test edin

    Tarama kurallarınız tarayıcınızda oluşturulur ve denetlenir. BroBroGo'ya hiçbir şey yüklenmez.

    SSS

    Bu oluşturucu robots.txt dosyasına neler ekleyebilir?

    Bir user-agent grubu, Allow ve Disallow yolları ve bir veya daha fazla site haritası URL'si ekleyin. Önizleme, bir robots.txt dosyasına kopyalanmaya hazır hale gelecektir.

    Yol denetleyici bir kuralı nasıl seçer?

    Google'ın eşleşme sırasını takip eder: en uzun eşleşen yol kazanır. Eşleşen Allow ve Disallow kuralları eşit derecede spesifik ise Allow kuralı geçerli olur.

    Disallow kuralı bir sayfayı Google Arama'dan kaldırır mı?

    Hayır. Engellenen bir sayfa, diğer sayfalar ona bağlantı verdiğinde arama sonuçlarında görünmeye devam edebilir. Bir sayfanın arama sonuçlarında kesinlikle yer almamasını istiyorsanız noindex etiketini, erişim denetimini kullanın veya sayfayı tamamen kaldırın.

    XML Biçimlendirici / DoğrulayıcıTarayıcınızda XML yapısını biçimlendirin, küçültün ve kontrol edin.URL Kodlayıcı/Kod Çözücü + HTML VarlıklarıURL'leri kodlayın, yüzde kaçışlarının kodunu çözün ve HTML varlıklarını kaçırın (escape).URL Slug (Kalıcı Bağlantı) OluşturucuSayfa başlıklarını temiz, tireli URL kalıcı bağlantılarına dönüştürün.XML Site Haritası OluşturucuSayfa URL'lerini ve tarama meta verilerini kullanıma hazır bir sitemap.xml dosyasına dönüştürün.Hreflang OluşturucuHer bir yerelleştirilmiş URL'yi ekleyin ve x-default içeren eksiksiz bir hreflang kümesi elde edin.Canonical (Kurallı) Etiket DenetleyiciKurallı etiketini bulmak ve sayfa adresiyle karşılaştırmak için bir sayfa URL'si girin.Yönlendirme Kuralı OluşturucuKaynak ve hedef CSV eşlemelerini Nginx, Apache ve Vercel için 301 veya 302 kurallarına dönüştürün.