Prejsť na obsah
EUID Kontrolná služba & pečať, Úvodná stránka
Nechať skontrolovať web

This translation has not been editorially reviewed yet. The German version is authoritative. Deutsche Fassung

Indexácia

Čo patrí do robotov.txt a čo nie?

Roboti.txt obsahuje niekoľko riadkov: pre koho platia pravidlá, ktoré oblasti by sa nemali plaziť a kde sa nachádza mapa lokality. Malá spoločnosť a webové stránky sú vybavené štyrmi líniami. Nie sú zahrnuté zámky na štýl a skriptové súbory, inštrukcie ako Noindex, ktoré Google nečíta, a cesty, ktoré by mali zostať tajné, pretože súbor môže otvoriť kohokoľvek. Ak súbor chýba úplne, spoločnosť Google predpokladá, že neexistujú žiadne obmedzenia.

Linky Google číta

Google číta tieto polia: Užívateľ-agent hovorí, pre ktorý craiser sa uplatňujú tieto pravidlá; Hviezda je pre každého. Zamietnuť volá cestu, ktorú by nestihol. Nechajme to znova. Mapa stránok označuje úplnú adresu mapy stránok a stojí kdekoľvek, bez ohľadu na skupiny. Ostatné polia Google nečíta, neplatné riadky preskočí. Čo nie je hit nepovolený riadok môže byť znovuzískaný. Komentáre začínajú kosoštvorec. Súbor sa musí volať robots.txt, uložený ako textový súbor v UTF-8 a v hlavnom adresári.

Ako rybári uplatňujú pravidlá

Súbor sa vzťahuje len na hostiteľa, protokol a port, pod ktorým sa nachádza: roboty.txt www.ihre-domain.at nereguluje nič pre obchod.ihre-domain.at. Ak sa na adresu vzťahuje niekoľko pravidiel, použije sa tá s najdlhšou trasou; ak sú dve rovnaké dĺžky, povolenie platí podľa normy RFC 9309. Cesty sa líšia v hornej a dolnej časti prípadu a uplatňujú sa od začiatku adresy: Neprítomnosť: /search tiež spĺňa /search-and-finde.html. Ak má jazdec vlastnú skupinu, už nečíta všeobecnú skupinu pod hviezdou na Google. Google číta najviac 500 KiB súboru a zvyčajne ho drží v cache úložisku až 24 hodín.

Čo je zmysluplne blokované

Spoločnosť Google uvádza ako účel súboru hlavne na uloženie servera z príliš veľkého množstva vyhľadávaní. Preto sú bloky užitočné pre oblasti, ktoré generujú mnoho adries bez vlastného obsahu pre vyhľadávanie: výsledky stránky interného vyhľadávania, nákupný košík, pokladňa. Pre webové stránky s niekoľkými desiatkami stránok, často nie je potrebný žiadny blok. Potom súbor sa skladá zo skupiny pre všetky plazov a sitemap linky.

Čo do nej nepatrí

Zamknúť priečinky so súbormi štýlu a skriptu: Google potrebuje tieto súbory na zobrazenie stránky. Linky ako Noindex alebo Crawl-delay: Google ich nečíta a noindex patrí na samotnú stránku. Cesty do dôverných oblastí: RFC 9309 uvádza, že uvedené cesty sú verejné, a preto ich možno nájsť, a že pravidlá nie sú kontrolou prístupu. A blokovať stránky, ktoré by mali zmiznúť z vyhľadávania: Google môže stále zaznamenať zablokovanú adresu, ak iné webové stránky odkaz na neho.

Príklady

robots.txt firemnej webovej stránky

Nesplnené
User-agent: *
Disallow: /wp-content/
Disallow: /intern-preisliste/
Noindex: /danke/
Crawl-delay: 10
Plná
User-agent: *
Disallow: /suche/
Disallow: /warenkorb/

Sitemap: https://www.ihre-domain.at/sitemap.xml

Prvá verzia zamkne priečinok so štýlom a skriptom, verejne pomenuje dôvernú cestu a obsahuje dva riadky, ktoré Google nečíta. Druhé bloky dvoch oblastí bez ich vlastného obsahu pre vyhľadávanie a volá sitemap.

  • Prejdite na her-domain.at/robots.txt a prejdite cez riadok súboru podľa riadku: Za každý blok by mal byť niekto schopný povedať, na čo je.
  • Po každej zmene, dajte skontrolovať, či domovská stránka, štýl súbory a skripty možno získať ďalej.

Viac o tejto téme

Deutsche Fassung dieser Seite

  • Pečať Digitale Barrierefreiheit
  • Pečať Daten & Recht
  • Pečať Technische Qualität
  • Pečať Digital Excellence
  • Pečať Cyberversicherung

Skontrolované. Pre lepšiu digitálnu budúcnosť.euid.com