Co to jest Crawl Budget?

Crawl budget to ilość zasobów (czasu i liczby zapytań), jakie Googlebot przeznacza na crawlowanie Twojej strony – im większa witryna, tym większy budżet, ale zawsze jest on ograniczony.

Google ustala priorytety na podstawie:

• świeżości (kiedy strona była ostatnio crawlowana)
• ważności (znaczenie dla użytkowników)
• popularności (np. liczba backlinków)
• jakości (czy treść ma wartość)

Rozmiar crawl budgetu:

• małe witryny (<10 tys. stron) – praktycznie brak ograniczeń, Google crawluje większość treści szybko
• duże witryny (100 tys. stron i więcej) – Googlebot może odwiedzać tylko część strony dziennie
• sitemap i linkowanie wewnętrzne wpływają na priorytety
• stare, rzadko aktualizowane strony są crawlowane rzadziej

Problemy z marnowaniem crawl budgetu:

• parametry URL (filtry, sortowanie) – wiele kombinacji generuje zbędne adresy
• duplikaty treści
• adresy z identyfikatorami sesji
• nieskończona paginacja
• błędy (404, przekierowania, wolne strony)

Optymalizacja crawl budgetu:

• blokuj nieistotne adresy w robots.txt (np. filtry, sortowanie)
• porządkuj parametry URL
• popraw szybkość strony (szybsze strony = więcej crawlów)
• usuwaj lub oznaczaj noindex strony bez wartości
• stosuj poprawne adresy kanoniczne
• aktualizuj sitemap.xml (usuwaj błędne i przekierowane URL-e)
• monitoruj dane w Google Search Console i logach serwera

Złota zasada:

• ogranicz crawlowanie stron bez wartości, aby Googlebot mógł skupić się na najważniejszych podstronach
• im lepiej wykorzystany crawl budget, tym szybciej ważne strony trafiają do indeksu i są aktualizowane

---

← Powrót do słownika SEO

---

Szukasz konsultanta SEO dla firm SaaS i B2B? Zobacz, jak mogę pomóc Twojej firmie rosnąć dzięki SEO.