Crawl budget
Aktualizováno 22. 9. 2026
Crawl budget je množství URL, které Google na webu dokáže a chce procházet. Řeší ho hlavně velké e-shopy s desítkami tisíc a více URL, filtry a často se měnícím sortimentem.
Rychlá fakta
- Typ
- koncept z dokumentace Googlu k procházení (crawlingu) webů
- Cena
- zdarma — jde o princip fungování vyhledávače, ne o placenou službu
- Koho se týká
- podle Googlu hlavně webů s 1 milionem a více stránek, které se mění zhruba týdně, nebo s 10 000+ stránkami, které se mění denně
- Časová náročnost zavedení
- orientačně dny (robots.txt, sitemap) až týdny (úprava filtrů a URL struktury)
- Náročnost zavedení
- střední až vysoká — zásahy do filtrace a URL mohou omylem vyřadit stránky z indexu
- Vhodné pro
- velké katalogy, e-shopy s fasetovou navigací, weby po migraci
Co to je
Googlebot nemá na žádný web neomezený čas. Crawl budget (rozpočet procházení) je množina URL, kterou Google na vašem webu umí a chce projít. Není to pevné číslo, které byste někde nastavili. Google ho průběžně upravuje.
Pro většinu e-shopů to není problém. Google ve své dokumentaci uvádí, že téma řeší hlavně velké weby (zhruba od milionu stránek s týdenními změnami) a středně velké weby s desítkami tisíc často se měnících stránek. Jenže e-shop s 5 000 produkty a filtry snadno vygeneruje statisíce URL. Proto se crawl budget týká víc e-shopů, než by napovídal počet produktů.
Jak to funguje
Crawl budget skládá Google ze dvou složek:
- Crawl capacity limit – kolik zátěže váš server snese. Každý web začíná na stejném konzervativním výchozím limitu. Když server odpovídá rychle a bez chyb, limit postupně roste; při zpomalení a chybách 5xx klesá. Od aktualizace dokumentace v červenci 2026 Google zdůrazňuje, že kapacitu sdílejí všechny jeho crawlery.
- Crawl demand – jak moc Google o vaše URL stojí. Záleží na velikosti a kvalitě „inventáře“ URL, popularitě stránek a na tom, jak rychle zastarávají.
Co Google projde, ještě nemusí zaindexovat. Každá stránka se po stažení vyhodnotí a sloučí s duplicitami.
Stav procházení uvidíte v Search Console v přehledu Statistiky procházení (Crawl Stats): počty požadavků, kódy odpovědí, doba odezvy a dostupnost hostitele.
Nejčastější chyby
| Plýtvání | Proč vadí | Řešení |
|---|---|---|
| Kombinace filtrů (barva × velikost × cena) | nekonečně mnoho URL s podobným obsahem | nechat indexovat jen vybrané filtry, zbytek blokovat v robots.txt |
Řazení a parametry (?sort=, ?utm_) | duplicitní URL stejné kategorie | canonical na čistou URL, parametry neodkazovat |
| Soft 404 (prázdná kategorie s kódem 200) | Google je dál prochází | vracet 404 nebo 410 |
| Řetězce přesměrování | každý krok stojí požadavek | odkazovat rovnou na cílovou URL |
| Pomalý server a chyby 5xx | snižují crawl capacity limit | výkon hostingu, cache |
| Neaktuální sitemap | Google chodí na neplatné URL | jen kanonické URL s kódem 200, pravdivé lastmod |
Google ve své dokumentaci k fasetové navigaci doporučuje oddělovat parametry standardním znakem &, u kombinací filtrů bez výsledků vracet 404 a URL, které nepotřebujete v indexu, blokovat v robots.txt, například Disallow: /*?*barva=.
Dvě časté mylné představy:
- noindex crawl budget nešetří. Google musí stránku stáhnout, aby noindex vůbec uviděl.
- robots.txt není na dočasné přelévání rozpočtu. Používejte ho pro URL, které nechcete nechat procházet vůbec.
Víc v článcích Crawl budget a velké e-shopy a Faceted navigation a SEO.
Jak to řešíme v Převeďshopu
Crawl budget u nás řeší oddělení Marketing a obsah (SEO) společně s technickým týmem, protože příčina je obvykle v šabloně, filtrech nebo serveru.
- Změříme, kam Googlebot chodí – Statistiky procházení v Search Console, případně serverové logy.
- Zmapujeme generované URL – filtry, řazení, stránkování, parametry z kampaní.
- Navrhneme pravidla: které filtry mají vlastní indexovatelnou stránku, co jde přes canonical, co do robots.txt a co má vracet 404.
- Uklidíme sitemapy a [interní prolinkování](/kb/seo/interni-prolinkovani), aby odkazy vedly jen na kanonické URL.
- Po nasazení kontrolujeme vývoj procházení a indexace.
Hodí se to hlavně u velkých katalogů a po migracích. Začít můžete SEO auditem nebo rovnou spoluprací na SEO pro e-shopy.