Generator i tester plików robots.txt

Twórz reguły indeksowania i sprawdzaj, do których ścieżek robot Googlebot ma dostęp.

Reguły indeksowania

Zacznij od określenia robota, do którego mają mieć zastosowanie te reguły.

Mapy witryn

Wygenerowany plik robots.txt

0
Gotowe. Przykładowa konfiguracja blokuje ścieżkę /admin dla wszystkich robotów.

Weryfikacja reguł

    Przetestuj ścieżkę

    Reguły indeksowania są tworzone i sprawdzane bezpośrednio w Twojej przeglądarce. Nic nie jest przesyłane do serwisu BroBroGo.

    FAQ

    Co można dodać do pliku robots.txt za pomocą tego generatora?

    Możesz dodać grupę robotów (user-agent), ścieżki dla reguł Allow i Disallow oraz jeden lub więcej adresów URL map witryn. Podgląd jest od razu gotowy do skopiowania i wklejenia do pliku robots.txt.

    W jaki sposób tester ścieżek dobiera odpowiednią regułę?

    Narzędzie stosuje zasady dopasowania Google: wygrywa najdłuższa pasująca ścieżka. Jeśli dopasowane reguły Allow i Disallow są tak samo szczegółowe, pierwszeństwo ma reguła Allow.

    Czy reguła Disallow usuwa stronę z wyszukiwarki Google?

    Nie. Zablokowana strona może nadal pojawiać się w wynikach wyszukiwania, jeśli prowadzą do niej linki z innych witryn. Aby całkowicie wykluczyć stronę z wyników wyszukiwania, użyj tagu noindex, ogranicz dostęp do niej lub usuń ją z serwera.

    Formater i walidator XMLFormatuj, minifikuj i sprawdzaj strukturę XML bezpośrednio w przeglądarce.Koder/Dekoder URL + Encje HTMLKoduj adresy URL, dekoduj sekwencje procentowe i konwertuj znaki na encje HTML.Generator przyjaznych adresów (URL Slug)Zamieniaj tytuły stron w czytelne, rozdzielone łącznikami przyjazne adresy URL (slugi).Generator map witryn XMLPrzekształć adresy URL stron oraz metadane indeksowania w gotowy do użycia plik sitemap.xml.Generator tagów hreflangDodaj adresy URL dla poszczególnych lokalizacji i uzyskaj kompletny zestaw tagów hreflang wraz z x-default.Tester tagów kanonicznych (Canonical)Wprowadź adres URL strony, aby odnaleźć jej tag kanoniczny i porównać go z adresem strony.Generator reguł przekierowańKonwertuj mapowania z plików CSV na reguły przekierowań 301 lub 302 dla Nginx, Apache i Vercel.