Il-kunċett ta’ crawl budget huwa element fundamentali fl-SEO tekniku u fil-manutenzjoni ta’ siti web kbar. Dan l-estimatur jgħin biex tiġi analizzata r-relazzjoni bejn kemm server jista’ jiflaħ talbiet ta’ tkaxkir (crawling) kuljum u d-domanda stmata biex il-paġni kollha jibqgħu aġġornati fl-indiċi tal-magni tat-tiftix. Permezz ta’ dan il-mudell, tista’ tidentifika jekk is-server tiegħek għandux kapaċità biżżejjed jew jekk hemmx ostakli tekniċi li qed jillimitaw l-indiċjar effiċjenti.
Is-sit tiegħek u s-suppożizzjonijiet tas-server huma kkalkulati fil-browser tiegħek. Xejn mhu mtella fuq BroBroGo. Dan jiżgura li d-dejta kollha li ddaħħal tibqa’ lokali waqt li tkun qed tagħmel l-analiżi tiegħek.
Kif tiġi Stmata d-Domanda tat-Tkaxkir ta' Kuljum
Id-domanda tat-tkaxkir tirrappreżenta n-numru ta’ paġni li l-magni tat-tiftix għandhom bżonn jitolbu kuljum biex iżommu l-kontenut tas-sit aġġornat. Din id-domanda tiddependi direttament fuq żewġ fatturi ewlenin: id-daqs totali tas-sit u l-frekwenza ta’ kemm-il darba jinbidel il-kontenut.
Biex tikkalkula d-domanda, l-għodda tuża l-input Paġni li jistgħu jitkaxkru u l-Intervall medju ta' aġġornament (li jista’ jiġi ssettjat f’unitajiet ta’ jiem, ġimgħat, jew xhur). Peress li l-magni tat-tiftix spiss jitolbu aktar paġni milli l-minimu teoretiku minħabba skoperta mill-ġdid, duplikazzjoni, jew riżorsi assoċjati, jintuża Multiplikatur tad-domanda (b’valur awtomatiku ta’ 1.2) biex jirrifletti din ir-realtà b’mod aktar preċiż.
Il-formula li tiddetermina d-domanda hija: Domanda tat-tkaxkir / jum = ( Paġni li jistgħu jitkaxkru / Intervall medju ta' aġġornament f'jiem ) × Multiplikatur tad-domanda
Evalwazzjoni tal-Kapaċità tas-Server għat-Tkaxkir
Il-kapaċità tas-server tiddetermina kemm robots jistgħu jitolbu paġni mingħajr ma jaffettwaw b’mod negattiv l-esperjenza tal-utenti reali fuq is-sit. Din il-kapaċità hija influwenzata minn diversi parametri tekniċi:
- Kapaċità tas-server (requests/second): In-numru massimu ta’ talbiet li s-server jista’ jipproċessa kull sekonda.
- Kapaċità disponibbli għat-tkaxkir (%): Il-porzjon ta’ riżorsi tas-server li inti lest li talloka għall-bots tal-magni tat-tiftix.
- Konkorrenza tat-tkaxkir permessa: In-numru massimu ta’ konnessjonijiet simultanji li l-crawler jista’ jiftaħ mas-server.
- Ħin medju ta' rispons (ms): Il-veloċità li biha s-server iwieġeb għal talba waħda.
- Użu sikur (%): Marġni ta’ sigurtà (b’valur awtomatiku ta’ 70%) biex jiġi żgurat li s-server ma jiġix mgħobbi żżejjed waqt mumenti ta’ traffiku għoli.
Il-kapaċità sikura ta’ kuljum hija kkalkulata bħala l-inqas valur bejn żewġ limiti differenti: il-limitu tar-rata tat-talbiet u l-limitu tal-konkorrenza flimkien mal-ħin tar-rispons. Dan il-valur imbagħad jitnaqqas skont il-perċentwali ta’ użu sikur magħżul.
Identifikazzjoni ta' Konġestjonijiet fil-Kapaċità
Meta l-kapaċità tas-server tiġi analizzata, l-estimatur jidentifika x’inhu l-fattur ewlieni li qed jillimita l-veloċità tat-tkaxkir. Dan l-ostaklu jidher taħt il-produzzjoni Konġestjoni tal-kapaċità u jista’ jkun wieħed minn dawn li ġejjin:
- Rata ta' talba disponibbli: Dan iseħħ meta l-limitu huwa impost mir-rata massima ta’ talbiet kull sekonda li s-server jista’ jipproċessa u l-perċentwali allokat għat-tkaxkir.
- Konkorrenza u ħin ta 'rispons: Dan iseħħ meta l-limitu huwa impost min-numru ta’ konnessjonijiet simultanji permessi u l-ħin li jieħu s-server biex iwieġeb għal kull talba. Jekk il-ħin tar-rispons huwa għoli, il-konkorrenza limitata tnaqqas b’mod sinifikanti n-numru totali ta’ paġni li jistgħu jitkaxkru.
Regoli tal-Kalkolu u Messaġġi ta' Status
Biex l-estimatur jaħdem u jipprovdi riżultati preċiżi, l-inputs kollha jridu jimxu ma’ dawn ir-regoli:
- Kull qasam tal-input irid ikun mimli. Jekk le, jintwera l-messaġġ: Imla kull input biex tikkalkula l-istima.
- L-inputs kollha jridu jkunu numri finiti ordinarji fil-medda appoġġjata (b'valur massimu ta' 1e12). Jekk jiddaħħlu karattri invalidi, jintwera l-messaġġ: Daħħal numri finiti ordinarji fil-medda appoġġjata.
- Kull valur għandu jkun akbar minn żero. Jekk jiddaħħal żero jew numru negattiv, jintwera l-messaġġ: Kull input għandu jkun akbar minn żero.
- Il-perċentwali bħal Kapaċità disponibbli għat-tkaxkir (%) u Użu sikur (%) ma jistgħux jaqbżu l-100%. Jekk jaqbżu dan il-limitu, jintwera l-messaġġ: Is-suppożizzjonijiet tal-perċentwali m'għandhomx ikunu aktar minn 100%.
Wara li jsir il-kalkolu, l-għodda tqabbel id-domanda mal-kapaċità u turi wieħed minn dawn l-istatuses:
- L-istima tal-kapaċità sikura tkopri d-domanda mudellata. (Dan jidher meta l-output Domanda koperta jilħaq il-100% jew aktar).
- Id-domanda mudellata hija ogħla mill-istima tal-kapaċità sikura. (Dan jidher meta l-kopertura tkun inqas minn 100%).
Il-valur tal-output Domanda koperta huwa limitat viżwalment għal firxa ta’ 0–100%.
Eżempju ta' Kalkolu Prattiku
Ikkunsidra sit web b’dawn il-parametri:
- Paġni li jistgħu jitkaxkru: 500,000
- Intervall medju ta' aġġornament: 10 jiem
- Multiplikatur ddikjarat: 1.2
Id-domanda ta’ kuljum tiġi kkalkulata hekk: Domanda = ( 500,000 / 10 ) × 1.2 = 60,000 talbiet / jum
Jekk is-server għandu dawn il-limiti:
- Kapaċità tas-server: 50 requests/second
- Kapaċità disponibbli għat-tkaxkir: 10%
- Użu sikur: 70%
Il-kapaċità massima teoretika bbażata fuq ir-rata tat-talbiet hija: Kapaċità tar-Rata = 50 × 0.10 × 86,400 (sekondi f'jum) = 43,200 talbiet / jum
Applikazzjoni tal-użu sikur ta' 70%: Kapaċità Sikura = 43,200 × 0.70 = 30,240 talbiet / jum
F’dan ix-xenarju, l-output Stima ta' crawls li jistgħu jinkisbu / jum ikun limitat għal 30,240. Peress li d-domanda hija ta’ 60,000 u l-kapaċità sikura hija biss ta’ 30,240, l-output Domanda koperta se juri li l-kapaċità mhix biżżejjed biex tkopri d-domanda kollha fl-intervall mixtieq, u l-istatus se jkun Id-domanda mudellata hija ogħla mill-istima tal-kapaċità sikura.. L-output Jiem biex tkopri l-paġni kollha se juri żieda fil-ħin meħtieġ biex is-sit kollu jerġa' jitkaxkar.
Mistoqsijiet Frekwenti (FAQ)
Dan ibassar kemm-il darba Googlebot se jitkaxkru s-sit eiġi?
Le. Il-magni tat-tiftix jistabbilixxu d-domanda u l-kapaċità tat-tkaxkir minn sinjali li mhumiex kompletament pubbliċi. Din l-istima hija għall-ippjanar u l-paragun; tikkalibraha b'logs tas-server u rapporti tat-tkaxkir.
Kif tiġi kkalkulata l-istima?
Id-domanda ta 'kuljum hija l-għadd tal-paġna diviż bl-intervall tal-aġġornament fil-mira, imbagħad immultiplikat bil-fattur tad-domanda. Kapaċità sikura hija l-aktar baxx tal-limiti tar-rata tat-talba u tal-konkorrenza, imnaqqsa mill-utilizzazzjoni tas-sikurezza.
X'jiġri jekk il-ħin tar-rispons tas-server tiegħi huwa għoli ħafna?
Jekk il-ħin medju ta' rispons jiżdied, il-limitu tal-konkorrenza jsir l-ostaklu ewlieni. Dan inaqqas b’mod sinifikanti l-Kapaċità sigura / jum, anke jekk il-kapaċità ġenerali tas-server f'termini ta' requests/second tkun għolja.
Għaliex id-domanda koperta tiegħi hija limitata għal 100% fl-interface?
L-interface tillimita viżwalment il-kopertura għal firxa ta’ 0–100% biex tindika b’mod ċar jekk il-kapaċità sikura tissodisfax bis-sħiħ id-domanda mudellata jew le, mingħajr ma turi perċentwali żejda li mhumiex utli għall-ippjanar bażiku.