A webhelyek keresőoptimalizálása (SEO) során a technikai szakemberek egyik legnagyobb kihívása annak biztosítása, hogy a keresőrobotok hatékonyan és időben feltérképezzék a teljes tartalomkészletet. A Robots Crawl Költségvetés Becslő egy olyan tervezési segédeszköz, amely segít megbecsülni, hogy egy webhely szervere biztonságosan hány oldal feltérképezését képes kiszolgálni naponta, és ezt összeveti a webhely becsült napi feltérképezési igényével.
A kalkulátor segítségével a technikai SEO szakemberek és a webhelyek üzemeltetői különböző szerver- és webhely-feltételezéseket módosíthatnak, hogy azonosítsák a potenciális szűk keresztmetszeteket, és felmérjék a lefedettséget.
A feltérképezési igény és a szerverkapacitás összefüggései
A feltérképezési költségvetés (crawl budget) tervezése során két fő tényezőt kell egyensúlyba hozni: a webhely frissítési igényét és a kiszolgáló infrastruktúra teherbíró képességét.
A keresőmotorok nem töltenek le korlátlanul adatokat egyetlen szerverről sem, mivel a túl intenzív feltérképezés túlterhelheti a rendszert, ami rontja a valós felhasználók kiszolgálásának minőségét. A szerverkapacitás felmérése során ezért figyelembe kell venni a válaszidőket, a maximális kérési sebességet, valamint azt, hogy a teljes kapacitás mekkora része engedhető át a robotoknak anélkül, hogy az az éles üzem működését veszélyeztetné.
A napi feltérképezési igény becslése
A napi feltérképezési igény meghatározásához a webhely méretét és a tartalom frissülésének gyakoriságát kell alapul venni. A becsléshez a következő bemeneti adatok szükségesek:
- Feltérképezhető oldalak: A webhelyen található, indexelésre szánt egyedi URL-ek száma.
- Átlagos frissítési időköz: Az az időtartam, amelyen belül a tartalomnak ideális esetben frissülnie kell a keresőmotorok indexében. A mértékegység kiválasztható: napokon, hétig vagy hónap.
- Kereslet szorzó: Egy korrekciós tényező (alapértelmezett értéke 1.2), amely figyelembe veszi, hogy a keresőrobotok gyakran többször is lekérdeznek bizonyos oldalakat, vagy nem csak a szigorúan vett egyedi tartalmakat térképezik fel.
A napi kereslet kiszámítása a következő képlet alapján történik: az oldalszámot elosztjuk a cél frissítési időközzel, majd megszorozzuk a keresleti tényezővel.
A szerverkapacitás értékelése
A szerver feltérképezési kapacitásának modellezése a válaszidő, a kérési korlátok és a párhuzamosság alapján történik. A számításhoz az alábbi paramétereket kell megadni:
- Átlagos válaszidő (ms): A szerver átlagos válaszideje ezredmásodpercben.
- Szerver kapacitás (requests/second): A kiszolgáló maximális teljesítménye másodpercenkénti kérésekben kifejezve.
- A feltérképező robotok rendelkezésére álló kapacitás (%): A teljes szerverkapacitás azon része százalékban, amelyet a keresőrobotok kiszolgálására lehet fordítani.
- Engedélyezett feltérképezési párhuzamosság: Az egyidejűleg futtatható lekérdezések maximális száma.
- Biztonságos felhasználás (%): Egy biztonsági tartalék (alapértelmezett értéke 70%), amely garantálja, hogy a szerver ne legyen folyamatosan a teljesítőképessége határára járatva.
A biztonságos kapacitás kiszámításakor a rendszer meghatározza a kérési sebesség (RPS) és a párhuzamossági határok közül az alacsonyabbat, majd ezt csökkenti a biztonsági kihasználtsági százalékkal.
A kapacitás szűk keresztmetszeteinek azonosítása
A számítások elvégzése után a rendszer meghatározza, hogy mi korlátozza leginkább a feltérképezési sebességet. A Kapacitás szűk keresztmetszet kimenet kétféle értéket vehet fel:
- Rendelkezésre álló kérési arány: A szűk keresztmetszetet a szerver másodpercenkénti maximális kérésszáma és a robotoknak kiosztott százalékos arány határozza meg.
- Egyidejűség és válaszidő: A korlátot az engedélyezett párhuzamos kapcsolatok száma és a lassú válaszidő (ms) együttesen okozza.
A becslés szabályai és hibaüzenetei
A kalkulátor pontos működéséhez minden bemeneti mezőt ki kell tölteni közönséges, véges és pozitív számokkal, amelyek nem haladhatják meg az 1e12 értéket. A százalékos értékek maximális korlátja 100%.
Amennyiben a bevitelek nem felelnek meg a szabályoknak, az alábbi hibaüzenetek jelenhetnek meg:
- Töltsön ki minden adatot a becslés kiszámításához.
- Adjon meg közönséges véges számokat a támogatott tartományon belül.
- Minden bemenetnek nagyobbnak kell lennie nullánál.
- A százalékos feltételezés nem lehet több, mint 100%.
Ha az adatok helyesek, a rendszer kiszámítja a A kereslet fedezve mutatót, amely vizuálisan a 0–100% közötti tartományra van korlátozva. A számítás eredményétől függően a következő státuszüzenetek láthatóak:
- Ha a lefedettség eléri vagy meghaladja a 100%-ot: A biztonságos kapacitásbecslés lefedi a modellezett keresletet..
- Ha a lefedettség 100% alatti: A modellezett igény meghaladja a biztonságos kapacitásbecslést..
Adatkezelési tájékoztató
A webhely és a szerver feltételezéseit a böngésző számítja ki. Semmi sincs feltöltve ide: BroBroGo. A számítások teljes egészében helyben futnak, így az adatok nem kerülnek külső szerverekre.
Gyakran Ismételt Kérdések
Ez előre jelzi, hogy a Googlebot milyen gyakran fogja feltérképezni a webhelyemet?
Nem. A keresőmotorok a nem teljesen nyilvános jelekből állítják be a feltérképezési igényt és a kapacitást. Ez a becslés tervezésre és összehasonlításra szolgál; kalibrálja szervernaplókkal és feltérképezési jelentésekkel.
Hogyan történik a becslés kiszámítása?
A napi kereslet az oldalszám osztva a cél frissítési időközzel, majd megszorozva a keresleti tényezővel. A biztonságos kapacitás a kérési sebesség és a párhuzamossági határok közül az alacsonyabb, a biztonsági kihasználtsággal csökkentve.
Mit jelent a "Kapacitás szűk keresztmetszet" eredmény?
Ez a mutató rávilágít arra, hogy a szerver melyik fizikai vagy szoftveres korlátja akadályozza leginkább a gyorsabb feltérképezést. Ha az érték "Egyidejűség és válaszidő", akkor a lassú válaszidők vagy az alacsony párhuzamossági limit fogja vissza a teljesítményt. Ha az érték "Rendelkezésre álló kérési arány", akkor a szerver általános másodpercenkénti kéréshatára a szűk keresztmetszet.
Garantálja a megfelelő kapacitás az oldalak indexelését?
Nem. Ez egy tervezési becslés, nem a keresőmotor ígérete. A feltérképezés nem garantálja az indexelést, és a valós feltérképezési sebesség a tartalom értékétől, a hibáktól, a kereslettől és a feltérképezési szabályzattól is függ.