Crawl budget

Pod pojęciem Crawl budget, noszącego polską nazwy budżetu indeksowania albo współczynnika indeksacji, rozumiemy ilość podstron, jaką roboty Google są w stanie zindeksować w ramach jednej domeny. Prędkość indeksacji strony zależy od jej wielkości, a na Crawl budget wpływają przede wszystkim następujące czynniki:

• crawl rate limit (limit współczynnika indeksacji), czyli limit stron, jakie roboty Google są w stanie odwiedzić w jak najkrótszym czasie bez ryzyka przeciążenia serwera;
• crawl demand (częstotliwość indeksacji), parametr określający potrzebę ponownej indeksacji strony, wynikający między innymi z jej rosnącej popularności powodowanej częstą aktualizacją publikowanych treści;
• wielkości strony internetowej oraz zastosowanych na niej skryptów pisanych w JavaScript wyraźnie zwiększających zużycie budżetu indeksowania.