Robots.txt үүсгэгч ба шалгагч
Индексжүүлэх дүрмүүдийг үүсгэж, Googlebot ямар зам руу хандаж болохыг шалгана уу.
Индексжүүлэх дүрмүүд
Эдгээр дүрмийг дагах ёстой хайлтын роботоос (crawler) эхэлнэ үү.
Sitemap-ууд
Үүсгэсэн robots.txt
0Дүрмийн шалгалт
Зам турших
Таны индексжүүлэх дүрмүүд хөтөч дээр тань үүсэж, шалгагдана. BroBroGo руу юу ч илгээгдэхгүй.
Түгээмэл асуултууд
Энэ үүсгэгч robots.txt файлд юу нэмж чадах вэ?
User-agent бүлэг, Allow болон Disallow замууд, мөн нэг буюу хэд хэдэн sitemap URL нэмнэ үү. Урьдчилан харах хэсэг нь robots.txt файл руу хуулахад бэлэн байна.
Зам шалгагч дүрмийг хэрхэн сонгодог вэ?
Энэ нь Google-ийн тохирох дарааллыг баримталдаг: хамгийн урт тохирсон зам нь давуу эрхтэй болно. Хэрэв Allow болон Disallow дүрмүүд ижил нарийвчлалтай байвал Allow нь давуу эрхтэй байна.
Disallow дүрэм нь хуудсыг Google хайлтаас устгах уу?
Үгүй. Бусад хуудсууд холбосон тохиолдолд хориглосон хуудас хайлтын үр дүнд харагдсаар байх боломжтой. Хайлтаас бүрэн хасахын тулд noindex, хандалтын хяналт ашиглах эсвэл хуудсыг устгана уу.