Robots.txt generaator ja valideerija

Koostage roomamisreegleid ja kontrollige, millistele teekondadele on Googlebotil juurdepääs.

Roomamisreeglid

Alustage otsingurobotist, mis peaks neid reegleid järgima.

Saidikaardid

Loodud robots.txt

0
Valmis. Näidis blokeerib teekonna /admin kõigi otsingurobotite jaoks.

Reeglite kontroll

    Testi teekonda

    Teie roomamisreeglid luuakse ja kontrollitakse teie brauseris. BroBroGo serverisse midagi üles ei laadita.

    KKK

    Mida saab selle generaatoriga robots.txt faili lisada?

    Saate lisada otsinguroboti grupi, lubatud (Allow) ja keelatud (Disallow) teekonnad ning ühe või mitu saidikaardi (sitemap) URL-i. Eelvaade on valmis kopeerimiseks robots.txt faili.

    Kuidas teekonnakontrollija reegli valib?

    See järgib Google'i vaste järjekorda: pikim kattuv teekond võidab. Kui kattuvad Allow ja Disallow reeglid on võrdselt spetsiifilised, võidab Allow.

    Kas Disallow eemaldab lehe Google'i otsingust?

    Ei. Blokeeritud leht võib siiski otsingutulemustes ilmuda, kui teised lehed sellele viitavad. Kui soovite lehte kindlalt otsingutulemustest eemal hoida, kasutage noindex-silti, juurdepääsupiiranguid või eemaldage leht täielikult.