Robots.txt ģenerators un validētājs

Izveidojiet pārlūkošanas noteikumus un pārbaudiet, kuriem ceļiem Googlebot var piekļūt.

Pārlūkošanas noteikumi

Sāciet ar meklētājprogrammu, kurai jāievēro šie noteikumi.

Vietnes kartes

Saģenerētais robots.txt

0
Gatavs. Piemērā visām meklētājprogrammām ir bloķēts ceļš /admin.

Noteikumu pārbaude

    Pārbaudīt ceļu

    Jūsu pārlūkošanas noteikumi tiek izveidoti un pārbaudīti pārlūkprogrammā. Nekas netiek augšupielādēts BroBroGo serveros.

    BUJ

    Ko ar šo ģeneratoru var pievienot robots.txt failam?

    Pievienojiet lietotāja aģentu grupu, atļautos (Allow) un aizliegtos (Disallow) ceļus, kā arī vienu vai vairākus vietnes kartes (sitemap) URL. Priekšskatījums ir gatavs kopēšanai jūsu robots.txt failā.

    Kā ceļu pārbaudītājs izvēlas noteikumu?

    Tas seko Google noteikumu prioritātei: uzvar garākais atbilstošais ceļš. Ja atbilstošie Allow un Disallow noteikumi ir vienlīdz specifiski, priekšroka tiek dota Allow.

    Vai Disallow direktīva izņem lapu no Google meklēšanas rezultātiem?

    Nē. Bloķēta lapa joprojām var parādīties meklēšanas rezultātos, ja uz to ved saites no citām lapām. Ja vēlaties pilnībā novērst lapas parādīšanos meklēšanā, izmantojiet noindex tagu, piekļuves kontroli vai izdzēsiet lapu.

    XML formatētājs / validētājsFormatējiet, minimizējiet un pārbaudiet XML struktūru savā pārlūkprogrammā.URL enkodētājs/atkodētājs + HTML entītijasEnkodējiet URL, atkodējiet procentuālo kodējumu un ekranējiet HTML entītijas.URL slaigu (slug) ģeneratorsPārvērtiet lapu virsrakstus tīros, ar defisēm atdalītos URL slaigos.XML vietnes kartes (Sitemap) ģeneratorsPārvērtiet lapu URL un pārlūkošanas metadatus par lietošanai gatavu sitemap.xml failu.Hreflang ģeneratorsPievienojiet katru lokalizēto URL un iegūstiet pilnu hreflang tagu kopu ar x-default.Kanonisko tagu pārbaudītājsIevadiet lapas URL, lai atrastu tās kanonisko tagu un salīdzinātu to ar lapas adresi.Pāradresācijas noteikumu ģeneratorsPārvērtiet avota un mērķa CSV sasaistes par 301 vai 302 noteikumiem Nginx, Apache un Vercel vidēm.