InhaltKriterien-Register
Kriterien-Register · Indexierung
WCE-2026-00371 — robots-trap
Stand veröffentlicht, gemessen seit Engine 2026.08.1.
| Quelle im Messkern | indexierung:robots-trap |
|---|---|
| Gewicht | — |
| Engine | Messkern Indexierung · Regelwerk technik-v1 |
| Messgrundlagen | Netzwerk und Ressourcen · HTTP-Kopfzeilen |
| Angelegt | 20.09.2026, 07:58 |
Was geprüft wird
Thema: robots.txt und Sitemap
Warum: Die robots.txt sagt Suchmaschinen, welche Bereiche sie nicht abrufen sollen. Zwei Arten von Einträgen richten dabei mehr Schaden an, als sie verhindern. Erstens Sperren für Stylesheets, Skripte und Asset-Ordner: Google rendert Seiten wie ein Browser, und ohne diese Dateien sieht es eine zerfallene Darstellung, bewertet die Mobilfreundlichkeit falsch und findet nachgeladene Inhalte nicht. Zweitens Direktiven, die kein Crawler versteht — Noindex, Nofollow oder Crawl-delay in der robots.txt —, die seit Jahren wirkungslos sind und eine Sicherheit vorgaukeln, die nicht besteht. Der Prüfbereich Indexierung liest die robots.txt und meldet beides.
Auswirkung: Beeinträchtigt Indexierung und Auffindbarkeit.
Maßnahme: —
Referenzen
Noch keine Referenz hinterlegt.
Verlauf
- 20.09.2026, 07:58 · angelegt · {"seit":"2026.08.1","stand":"veroeffentlicht","quelle":"indexierung:robots-trap","abgleich":true}
Zitieren: WCE-2026-00371 · Adresse https://euid.com/wissen/kriterien/WCE-2026-00371 · Feed kriterien.json




