Kriterien-Register · GEO / KI

WCE-2026-00161 — Zugang für KI-Crawler

Stand veröffentlicht, gemessen seit Engine 2026.08.1.

Was geprüft wird

Thema: Zugang und Struktur

Warum: Ob eine Website in den Antworten von ChatGPT, Claude oder Perplexity vorkommen kann, entscheidet sich nicht im Text, sondern in einer kleinen Datei am Wurzelverzeichnis: der robots.txt. Sie sagt jedem Crawler, was er lesen darf. Die KI-Anbieter betreiben eigene Crawler mit eigenen Namen — GPTBot und OAI-SearchBot für OpenAI, ClaudeBot für Anthropic, PerplexityBot für Perplexity, Google-Extended für die KI-Nutzung bei Google. Steht für einen dieser Namen oder für alle Bots ein vollständiges Verbot in der Datei, ist die Seite für dieses System nicht vorhanden. Der Prüfbereich GEO liest die robots.txt der Domain und meldet jede vollständige Sperre.

Auswirkung: Mindert die Zitierfähigkeit in der KI-Suche (AI Overviews, ChatGPT, Perplexity).

Maßnahme: —

Referenzen

Noch keine Referenz hinterlegt.

Verlauf

• 20.09.2026, 07:58 · angelegt · {"seit":"2026.08.1","stand":"veroeffentlicht","quelle":"geo:ai-crawler-access","abgleich":true}

Zitieren: WCE-2026-00161 · Adresse https://euid.com/wissen/kriterien/WCE-2026-00161 · Feed kriterien.json