This translation has not been editorially reviewed yet. The German version is authoritative. Deutsche Fassung
Indexace
Které pasti v robotách?
Robots.txt říká vyhledávačům, které oblasti by neměli získat. Dva typy vstupů způsobují větší škody, než tomu brání. Za prvé, blokování stylesheet, skriptů a složek aktiv: Google zobrazuje stránky jako prohlížeč, a bez těchto souborů vidí disintegrovaný displej, nesprávně vyhodnocuje přívětivost mobilního telefonu a nenahrává znovu načtený obsah. Zadruhé, směrnice, kterým žádný plazivec nerozumí - noindex, nofollow nebo crawl- zpoždění v robots.txt -, které byly roky neúčinné a předstíraly, že neexistuje jistota. Ve zkušební oblasti indexování se čte robots.txt a hlásí obojí.
Co je past
Rendering pasti patří zámky, jejichž cesta končí na stylu souborů nebo skriptů, stejně jako zámky typických složek aktiv: wp- obsah a wp- zahrnuje na WordPress, aktiva, statický, css, js, obrázky, média, fileadmin a typo3conf na jiných systémech. Zámek ve vnitřní oblasti, vyhledávání nebo nákupní vozík není past a není uvedeno. Noindex, Nofollow a Crawldelay jsou považovány za neúčinné směrnice: Společnost Google ukončila neoficiální podporu pro Noindex v robots.txt 2019; Pokud chcete mít stránku z indexu, potřebujete meta značku nebo hlavičku na stránce samotné. Výsledek ukazuje postižené čáry. Nemění bodovou hodnotu, protože soubor pravidel idx-v1 zůstává nezměněn; objevuje se ve zprávě a v seznamu úkolů.
Proč jsou bariéry většinou z dávných časů
Před rokem 2015 bylo považováno za dobrý styl uzamknout vše kromě obsahu, který má zachránit rozpočet plazení. Vzhledem k tomu, že Google podává stránky úplně, je pravdou opak: vše, co patří k prezentaci, musí být možné získat zpět. Mnoho robots.txt soubory stále nesou staré položky, protože byly zkopírovány ze šablon a nebyly nikdy ověřeny. Oprava je odstranění řádků; kdo skutečně potřebuje chránit jednotlivé adresáře tak činí prostřednictvím přístupových práv, ne prostřednictvím robots.txt. Pro noindexové záměry, prohlášení patří na stránku: jako meta tag v hlavičce nebo jako server je X-Robots tag hlavička.
- Odstranit zámky na složkách a soubory, které patří do displeje: CSS, JS, obrázky, složky aktiv.
- Náhrada Ty noindex linky v robots.txt přes meta tag roboty s noindex na příslušných stránkách.
- Pomocí nástroje pro ověřování URL rozhraní Google Search Console zkontrolujte, zda je zobrazený pohled kompletní.
- Udržujte robots.txt krátký: Sitemap reference, skutečné vyloučení, nic jiného.
