Crawling: Proč Google nenalezne váš web a jak to napravit

Před půl rokem ke mně přišel majitel e-shopu s 50 000 produkty v katalogu. Měl solidní obsah, kvalitní produkty, ale pozice v Googlu byly tragické. Když jsem se podívala do Google Search Console, zjistila jsem alarmující číslo: z 50 000 stránek Google crawloval jen 15 000. Zbytek ani neznal.

Problém se jmenoval crawl budget. Po optimalizaci začal Google procházet 45 000 stránek a organický traffic vzrostl o 67 % během tří měsíců.

Co je crawling a proč vás to má zajímat

Crawling (Crawlování a Indexace 2026: Proč Google ignoruje váš obsah? nebo procházení) je proces, při kterém roboti vyhledávačů systematicky prochází webové stránky, aby objevily a stáhly obsah pro pozdější indexaci.

Představte si, že Google je obrovská knihovna a váš web je nová kniha. Crawling je moment, kdy knihovník přijde knihu vyzvednout a přinést do knihovny. Pokud knihovník nepřijde, kniha v knihovně nebude — a nikdo ji nenajde.

Jak to funguje krok za krokem

Crawler (také nazývaný robot, spider nebo bot) navštíví URL adresu. Nejčastěji začíná z domovské stránky nebo ze seznamu v souboru sitemap.xml.

Stáhne HTML kód stránky — kompletní obsah včetně textů, odkazů, obrázků.

Extrahuje všechny odkazy, které na stránce najde — interní i externí.

Následuje tyto odkazy na další stránky a opakuje proces. Takto postupně mapuje celý web.

Googlebot: Robot, který rozhoduje o vašem webu

Googlebot je oficiální název pro crawlery společnosti Google. Existují dva typy:

Googlebot Desktop — simuluje návštěvu z počítače.

Googlebot Smartphone — simuluje návštěvu z mobilního telefonu. Od července 2024 je toto přechod na mobile-first indexování kompletní — Google nyní používá výhradně mobilní verzi pro procházení a hodnocení všech webů (zdroj: Search Engine Land). To znamená, že i když váš web vypadá skvěle na počítači, Google ho hodnotí podle toho, jak funguje na mobilu.

Více informací najdete v oficiální dokumentaci Google o Googlebotu.

Crawling vs. Indexování: Klíčový rozdíl

Mnoho majitelů webů si myslí, že crawling a indexování je totéž. Není.

Crawling = Google navštívil stránku a stáhl její obsah.

Indexování = Google uložil stránku do svého vyhledávacího indexu a může ji zobrazit ve výsledcích vyhledávání.

Stránka může být crawlovaná, ale ne indexovaná. To znamená, že Google o ní ví, ale nezahrnul ji do vyhledávání. Důvody mohou být různé: nízká kvalita obsahu, duplicita, technické problémy nebo direktiva noindex.

V Google Search Console najdete stránky, které byly crawlovány, ale ne indexovány, v sekci Coverage (pokrytí). Typická kategorie je „Crawled — currently not indexed". To je signál, že Google stránku viděl, ale nepovažuje ji za hodnou zahrnutí.

Co je crawl budget a kdy je problém

Crawl budget (rozpočet procházení) je neformální název pro počet stránek, které Googlebot procrawluje na vašem webu v daném časovém období.

Google má omezené zdroje. Nemůže crawlovat nekonečně. Proto pro každý web stanovuje určitou „kapacitu" — kolik stránek stihne projít za den, týden nebo měsíc.

Kdy je crawl budget omezení

Pro malé weby (do 10 000 stránek) obvykle není crawl budget problém. Google stihne projít všechno.

Pro střední weby (10 000 – 100 000 stránek) může začít být crawl budget limitující, zejména pokud máte pomalý server nebo hodně duplicitního obsahu.

Pro velké weby (přes 100 000 stránek) je crawl budget kritický. Typicky e-shopy, nástěnkové weby, agregátory.

Co ovlivňuje crawl budget

Více o optimalizaci najdete v oficiální dokumentaci Google o crawl budget.

Jak optimalizovat crawling vašeho webu

1. Vytvořte a aktualizujte XML sitemap

XML sitemap je soubor, který říká Google, které stránky jsou na vašem webu důležité. Funguje jako mapa — crawler ví, kam jít jako první.

Nástroje jako Screaming Frog SEO Spider nebo XML Sitemaps Generator vám pomohou vytvořit sitemap automaticky. Více informací najdete v článku Screaming Frog SEO Spider: Kompletní návod pro technický SEO audit.

2. Používejte robots.txt správně

Soubor robots.txt říká crawlerům, co smí a nesmí procházet. Typické použití:

User-agent: *
Disallow: /admin/
Disallow: /private/
Disallow: /search?
Allow: /
Sitemap: https://example.com/sitemap.xml

Tímto blokujete crawlování administrace, soukromých sekcí a vyhledávacích výsledků — a šetříte crawl budget pro důležité stránky.

Pozor: robots.txt zakazuje crawlování, ale ne indexaci. Pokud chcete zabránit indexaci, použijte meta tag noindex.

3. Zrychlte server

Pokud server odpovídá pomalu, Google stihne procrawlovat méně stránek za stejný čas.

V Google PageSpeed Insights sledujte metriku TTFB (Time to First Byte). Pokud přesahuje 600 ms, zvažte upgrade hostingu nebo zapnutí cachování. Detailní návod najdete v článku PageSpeed Insights: Kompletní návod, jak zrychlit web.

4. Opravte duplicitní obsah

Každá duplicita plýtvá crawl budgetem. Google crawluje stejný obsah vícekrát.

Používejte canonical tag pro označení originální verze stránky. Například:

<link rel="canonical" href="https://example.com/original-stranka">

5. Budujte kvalitní interní prolinkování

Crawler následuje odkazy. Pokud stránka nemá žádné interní odkazy (tzv. osiřelá stránka), Google ji nemusí vůbec najít.

Každá důležitá stránka by měla mít alespoň jeden interní odkaz z jiné stránky na webu.

Běžné problémy s crawlováním

Stránky blokované v robots.txt

Pokud omylem zablokujete důležité stránky, Google je nebude crawlovat. Častá chyba: po vývoji webu zapomenout odstranit řádek Disallow: /.

Jak zjistit: V Google Search Console -> Settings -> Crawl Stats můžete vidět, které stránky jsou blokovány.

Pomalý server a chyby 5xx

Pokud server často vrací chyby 500, 502, 503 (tzv. chyby serveru), Googlebot omezí crawlování. Pravidelně kontrolujte Coverage report v Search Console.

Pasti pro crawlery (crawl traps)

Nekonečné kalendáře, filtry, interní vyhledávání — cokoliv generuje neomezené množství URL. Crawler se „zasekne" v nekonečné smyčce.

Řešení: Blokujte takové URL v robots.txt nebo použijte noindex.

Jak sledovat crawlování

Google Search Console

V Search Console přejděte na Settings -> Crawl Stats. Uvidíte:

• Kolik stránek denně Google crawluje
• Jaké typy souborů (HTML, JS, CSS)
• Jak dlouho trvají odpovědi serveru

Server logy

Skutečná aktivita Googlebotu je zaznamenána v server logách. Pokud máte přístup, můžete vidět přesně, kdy a které stránky Google navštívil.

Nástroje jako Screaming Frog Log File Analyser vám pomohou analyzovat logy.

Shrnutí

Crawling je proces, při kterém Google prochází váš web a stahuje obsah. Bez crawlování není indexace. Bez indexace nejste ve vyhledávání.

Malé weby obvykle problém s crawlováním nemají. Velké weby (nad 10 000 stránek) musí optimalizovat crawl budget — rychlost serveru, sitemap, robots.txt, odstranění duplicit.

Pro sledování používejte Google Search Console -> Crawl Stats a Coverage report.

Chcete zjistit, proč Google necrawluje váš web?

Nabízím Technický SEO audit 2026: Návod pro majitele firem, jak zjistit, proč váš web nevydělává, který odhalí problémy s crawlováním a indexací vašeho webu.

Objednejte si audit zdarma →

Související články

• Indexování: Definice a význam v SEO — rozdíl mezi crawlováním a indexací
• Robots.txt: Kompletní návod — jak správně řídit crawlery
• XML Sitemap: Jak vytvořit a optimalizovat — prioritní crawlování důležitých stránek

Často kladené otázky

Jak poznám, že Google crawluje můj web?

V Google Search Console -> Settings -> Crawl Stats vidíte přesnou statistiku. Pokud je číslo nulové nebo velmi nízké, máte problém.

Jak často Google crawluje můj web?

Záleží na velikosti a důležitosti webu. Zpravodajské weby crawluje několikrát denně. Malé blogy jednou týdně nebo jednou měsíčně.

Mohu přinutit Google k okamžitému crawlování?

V Google Search Console -> URL Inspection můžete kliknout na „Request Indexing". Není to garantované, ale obvykle urychlí proces. Praktický tip: Máte limit cca 10 požadavků denně, takže je používejte jen pro skutečně důležité stránky (např. nový produkt nebo aktualizovaný článek).

Crawluje Google JavaScript?

Ano, ale s omezeními. Google umí zpracovat JavaScript, ale ne vždy spolehlivě. Pokud to jde, preferujte server-side rendering — obsah je viditelný hned v HTML.

Škodí příliš časté crawlování mému serveru?

Může. Googlebot respektuje limity serveru automaticky. Pokud chcete crawlování omezit ručně, můžete nastavit Crawl-delay v robots.txt (ale Google to nemusí vždy respektovat).

Autorka: SEO specialistka s roky zkušeností. Pomáhám firmám optimalizovat webové technologie a zvyšovat viditelnost v Google.

Potřebujete technický audit? Kompletní SEO audit - od 5 990 Kč

O autorce

SEO specialistka s roky zkušeností v oboru. Pomohla firmám zlepšit jejich viditelnost v Google. Specializuje se na technické SEO, obsahový marketing (content marketing) a budování odkazů (link building).

Kontaktujte nás | Další články