Crawl budget: Rozpočet na crawlování a jak ho optimalizovat

Crawl budget (rozpočet na procházení) je počet stránek, které Googlebot projde a stáhne na vašem webu během určitého časového období. Skládá se ze dvou složek: crawl rate limit (maximální frekvence požadavků, aby nedošlo k přetížení serveru) a crawl demand (jak moc chce Google vaše stránky procházet na základě popularity a čerstvosti obsahu).

Faktory ovlivňující crawl budget

Faktor	Vliv na crawl budget	Doporučení
Rychlost serveru	Pomalý server snižuje crawl rate	Optimalizujte odezvu pod 200 ms
Duplicitní obsah	Plýtvá rozpočtem na duplicity	Použijte canonical tagy
Soft 404 chyby	Zbytečné procházení neexistujících stránek	Vracejte správné HTTP kódy
Nekonečné URL prostory	Kalendáře, filtry, facety	Blokujte v robots.txt
Řetězce přesměrování	Spotřebovávají vícenásobné požadavky	Omezte na 1 přesměrování
Kvalita obsahu	Nízká kvalita snižuje crawl demand	Publikujte hodnotný obsah

Crawl budget je relevantní téma především pro weby s více než 10 000 stránkami. U menších webů Google zvládne procházet veškerý obsah bez problémů. Pokud ale provozujete e-shop s tisíci produkty nebo velký portál, optimalizace crawl budgetu je kritická.

Jak optimalizovat rozpočet na crawlování

Základem je zajistit, aby Googlebot neztrácel čas na stránkách, které nemají hodnotu. Aktualizujte robots.txt a blokujte procházení filtrů, interních vyhledávání a administrace. Odstraňte řetězce přesměrování a opravte soft 404 chyby. Udržujte XML sitemap aktuální — obsahujte pouze indexovatelné stránky.

Sledujte statistiky procházení v Google Search Console v sekci Nastavení → Statistiky procházení. Uvidíte počet požadavků za den, průměrnou dobu odezvy a stav procházení.

Kdy je crawl budget relevantní pro váš web

Pro většinu webů není crawl budget problém. Zaměřte se na něj, pokud máte velký web (10 000+ URL), dynamicky generované stránky (e-shop s filtry), pomalý server nebo pokud v Google Search Console vidíte, že důležité stránky nejsou indexovány. Více o základech technického SEO najdete v článku Co je SEO.

Často kladené otázky

Jak zjistím, kolik stránek Googlebot prochází?

V Google Search Console přejděte do Nastavení → Statistiky procházení. Uvidíte celkový počet požadavků, průměrnou dobu odezvy serveru a typy procházených zdrojů za posledních 90 dní.

Má crawl budget vliv na pozice ve vyhledávání?

Přímo ne. Crawl budget ovlivňuje, jak rychle Google najde a indexuje nový nebo aktualizovaný obsah. Pokud důležité stránky nejsou procházeny dostatečně často, změny se projeví se zpožděním nebo vůbec.

Pomůže zvýšení rychlosti serveru crawl budgetu?

Ano. Rychlejší server umožňuje Googlebotu stáhnout více stránek za kratší dobu, což efektivně zvyšuje crawl rate limit. Google potvrdil, že rychlost serveru je jedním z klíčových faktorů.