Robots.txt generator i validator

Izradite pravila pretraživanja i provjerite kojim putanjama Googlebot može pristupiti.

Pravila pretraživanja

Započnite s pretraživačem (crawlerom) koji bi trebao slijediti ova pravila.

Sitemape

Generirani robots.txt

0
Spremno. Primjer blokira /admin za sve pretraživače.

Provjera pravila

    Testirajte putanju

    Vaša pravila pretraživanja stvaraju se i provjeravaju u vašem pregledniku. Ništa se ne šalje na BroBroGo.

    Česta pitanja

    Što ovaj generator može dodati u robots.txt?

    Dodajte grupu user-agenta, putanje za Allow i Disallow te jedan ili više URL-ova sitemap-a. Pretpretgled je spreman za kopiranje u robots.txt datoteku.

    Kako provjera putanje odabire pravilo?

    Slijedi Googleov redoslijed podudaranja: pobjeđuje najduža podudarajuća putanja. Ako su podudarajuća pravila Allow i Disallow jednako specifična, pobjeđuje Allow.

    Uklanja li Disallow stranicu iz Google pretraživanja?

    Ne. Blokirana stranica i dalje se može pojaviti u rezultatima pretraživanja ako druge stranice upućuju na nju. Koristite noindex, kontrolu pristupa ili uklonite stranicu ako želite da se uopće ne prikazuje u pretraživanju.

    XML Formatter / ValidatorFormatirajte, minificirajte i provjerite strukturu XML-a u svom pregledniku.URL kodiranje/dekodiranje + HTML entitetiKodirajte URL-ove, dekodirajte kodiranje postotkom i eskapirajte HTML entitete.URL Slug generatorPretvorite naslove stranica u čiste URL slugove s crticama.XML Sitemap generatorPretvorite URL-ove stranica i metapodatke pretraživanja u sitemap.xml spreman za upotrebu.Hreflang generatorDodajte svaki lokalizirani URL i preuzmite potpuni skup hreflang oznaka s x-default opcijom.Provjera kanonskih oznakaUnesite URL stranice kako biste pronašli njezin kanonski URL i usporedili ga s adresom stranice.Generator pravila preusmjeravanjaPretvorite CSV mapiranja izvora i odredišta u 301 ili 302 pravila za Nginx, Apache i Vercel.