Robots.txt գեներատոր և վավերացնող

Կառուցեք ինդեքսավորման կանոններ և ստուգեք, թե որ ուղիներին կարող է հասանելիություն ունենալ Googlebot-ը:

Ինդեքսավորման կանոններ

Սկսեք այն որոնողական ռոբոտից (crawler), որը պետք է հետևի այս կանոններին:

Sitemaps

Գեներացված robots.txt

0
Պատրաստ է: Օրինակն արգելափակում է /admin-ը բոլոր ռոբոտների համար:

Կանոնի ստուգում

    Փորձարկել ուղին

    Ձեր ինդեքսավորման կանոնները ստեղծվում և ստուգվում են ձեր բրաուզերում: Ոչինչ չի վերբեռնվում BroBroGo:

    ՀՏՀ

    Ի՞նչ կարող է այս գեներատորն ավելացնել robots.txt-ում:

    Ավելացրեք user-agent խումբ, Allow և Disallow ուղիներ և մեկ կամ մի քանի sitemap URL-ներ: Նախադիտումը պատրաստ է robots.txt ֆայլում պատճենելու համար:

    Ինչպե՞ս է ուղու ստուգիչն ընտրում կանոնը:

    Այն հետևում է Google-ի համընկնման հերթականությանը. հաղթում է ամենաերկար համընկնող ուղին: Եթե համընկնող Allow և Disallow կանոնները հավասարապես կոնկրետ են, հաղթում է Allow-ը:

    Արդյո՞ք Disallow-ն հեռացնում է էջը Google որոնումից:

    Ոչ: Արգելափակված էջը դեռ կարող է հայտնվել որոնման արդյունքներում, եթե այլ էջեր հղվում են դրան: Օգտագործեք noindex, մուտքի վերահսկում կամ հեռացրեք էջը, եթե անհրաժեշտ է այն ամբողջությամբ զերծ պահել որոնումից:

    XML Ձևաչափիչ / ՎավերացնողՁևաչափեք, մինիմալացրեք և ստուգեք XML կառուցվածքը Ձեր բրաուզերում:URL կոդավորիչ/վերծանիչ + HTML EntitiesԿոդավորեք URL-ները, վերծանեք տոկոսային կոդավորումները և էկրանավորեք HTML entities-ը:URL Slug գեներատորՎերածեք էջերի վերնագրերը մաքուր, գծիկներով URL slug-երի:XML Sitemap գեներատորՎերածեք էջերի URL-ները և ինդեքսավորման մետատվյալները օգտագործման համար պատրաստ sitemap.xml ֆայլի:Hreflang գեներատորԱվելացրեք յուրաքանչյուր տեղայնացված URL և ստացեք ամբողջական hreflang հավաքածու x-default-ով:Կանոնիկ թեգերի ստուգիչՄուտքագրեք էջի URL՝ դրա կանոնիկը գտնելու և էջի հասցեի հետ համեմատելու համար:Վերահղման կանոնների գեներատորՎերածեք սկզբնաղբյուրի և թիրախի CSV համապատասխանեցումները 301 կամ 302 կանոնների Nginx-ի, Apache-ի և Vercel-ի համար: