robots.txt und Sitemap
Was die Sitemap nennt, darf die robots.txt nicht sperren; Indexierbarkeit und Fallen.
Die Prüfpunkte
- Warum erscheint meine fertige Website nicht bei Google?indexable
- Wozu brauchen robots.txt und Sitemap einander?robots-sitemap
- Warum darf die Sitemap keine toten Adressen enthalten?sitemap-broken
- Warum soll die Sitemap die endgültige Adresse nennen?sitemap-redirects
- Welche Fallen in der robots.txt schaden der Indexierung?robots-trap
Die Kennung unter jedem Prüfpunkt steht so auch im Bericht; damit lässt sich ein Befund eindeutig seiner Erklärung zuordnen.
Foto: Andrew Neel, CC0
.jpg){kind=link}