Web zmizel z Googlu. Zkontrolujte noindex a robots.txt

1. Meta značka noindex

Otevřete zdrojový kód stránky (Ctrl+U) a hledejte noindex. Problém je, když v hlavičce najdete:

<meta name="robots" content="noindex, nofollow">

U WordPressu ji obvykle přidá zaškrtnuté políčko „Požádat vyhledávače, aby neindexovaly tento web“ v Nastavení → Čtení. Bývá zapnuté na vývojové verzi a při přenosu databáze se přenese i na produkci. Může ji přidat i SEO plugin, pokud je stránka v něm nastavená jako neindexovaná.

2. Hlavička X-Robots-Tag

Noindex může přijít i v HTTP hlavičce, kterou ve zdrojovém kódu nevidíte. Zkontrolujete ji takto:

curl -sI https://vasweb.cz | grep -i x-robots-tag

Hlavičku nastavuje server, .htaccess nebo konfigurace hostingu. Některé hostingy ji automaticky přidávají na testovací domény.

3. robots.txt

Otevřete vasweb.cz/robots.txt. Celý web blokuje tento zápis:

User-agent: *
Disallow: /

Pozor, Disallow brání procházení, ne indexaci. Stránky blokované v robots.txt se ve výsledcích občas objeví bez popisu. Když chcete stránku z Googlu dostat, použijte noindex a v robots.txt ji neblokujte. Jinak Google noindex vůbec neuvidí.

Po opravě

1. V Google Search Console použijte Kontrolu adresy URL a požádejte o indexování hlavní stránky.
2. Odešlete znovu sitemapu, ať Google rychleji projde i ostatní stránky.
3. Počítejte s tím, že návrat do výsledků trvá dny až týdny podle velikosti webu.

Do procesu spouštění webů si přidejte bod „zkontrolovat noindex a robots.txt na produkci“. Je to nejlevnější pojistka v celém SEO.