Crawl Budget – budżetem indeksowania witryny, określa liczbę stron, które robot Google może zaindeksować w obrębie domeny. Jeśli witryna posiada wiele podstron jej indeksowanie może zajmować dużo czasu. Przez efektywną pracę Googlebot nie może zaindeksować całej strony wraz z wszystkimi podstronami przy jednej wizycie.
Google wyszczególniło dwa główne parametry, które składają się na Crawl budget:
- Crawl rate limit – limit współczynnika indeksacji
- Crawl demand – częstotliwość indeksacji
- Crawl health – szybkość ładowania się strony
Dane dotyczące aktywności robota Google dostępne są w Search Console w sekcji statystyki indeksowania gdzie można sprawdzić budżet indeksacji.