Robots.txt generaator ja valideerija
Koostage roomamisreegleid ja kontrollige, millistele teekondadele on Googlebotil juurdepääs.
Roomamisreeglid
Alustage otsingurobotist, mis peaks neid reegleid järgima.
Saidikaardid
Loodud robots.txt
0Reeglite kontroll
Testi teekonda
Teie roomamisreeglid luuakse ja kontrollitakse teie brauseris. BroBroGo serverisse midagi üles ei laadita.
KKK
Mida saab selle generaatoriga robots.txt faili lisada?
Saate lisada otsinguroboti grupi, lubatud (Allow) ja keelatud (Disallow) teekonnad ning ühe või mitu saidikaardi (sitemap) URL-i. Eelvaade on valmis kopeerimiseks robots.txt faili.
Kuidas teekonnakontrollija reegli valib?
See järgib Google'i vaste järjekorda: pikim kattuv teekond võidab. Kui kattuvad Allow ja Disallow reeglid on võrdselt spetsiifilised, võidab Allow.
Kas Disallow eemaldab lehe Google'i otsingust?
Ei. Blokeeritud leht võib siiski otsingutulemustes ilmuda, kui teised lehed sellele viitavad. Kui soovite lehte kindlalt otsingutulemustest eemal hoida, kasutage noindex-silti, juurdepääsupiiranguid või eemaldage leht täielikult.