Kriterien-Register · GEO / KI
WCE-2026-00161 — Zugang für KI-Crawler
Stand veröffentlicht, gemessen seit Engine 2026.08.1.
| Quelle im Messkern | geo:ai-crawler-access |
|---|---|
| Gewicht | 12 Punkte |
| Engine | Messkern GEO · Regelwerk geo-v4 |
| Messgrundlagen | Gerenderter DOM |
| Angelegt | 20.09.2026, 07:58 |
Was geprüft wird
Thema: Zugang und Struktur
Warum: Ob eine Website in den Antworten von ChatGPT, Claude oder Perplexity vorkommen kann, entscheidet sich nicht im Text, sondern in einer kleinen Datei am Wurzelverzeichnis: der robots.txt. Sie sagt jedem Crawler, was er lesen darf. Die KI-Anbieter betreiben eigene Crawler mit eigenen Namen: GPTBot und OAI-SearchBot für OpenAI, ClaudeBot und Claude-SearchBot für Anthropic, PerplexityBot für Perplexity; Google-Extended ist ein Schalter für das Training der Gemini-Modelle, die KI-Übersichten der Google-Suche steuert er nicht. Steht für einen dieser Namen oder für alle Bots ein vollständiges Verbot in der Datei, nimmt der Anbieter die Seite aus seinem Suchindex oder seinem Training; Abrufe, die ein Nutzer selbst im Chat auslöst, richten sich nach Aussage von OpenAI und Perplexity nicht nach der robots.txt. Der Prüfbereich GEO / KI liest die robots.txt der Domain und meldet jede vollständige Sperre.
Auswirkung: Betrifft, wie gut die Seite in KI-Antworten gefunden und als Quelle genannt werden kann (KI-Übersicht von Google, ChatGPT, Perplexity).
Maßnahme: —
Referenzen
Noch keine Referenz hinterlegt.
Verlauf
- 20.09.2026, 07:58 · angelegt · {"seit":"2026.08.1","stand":"veroeffentlicht","quelle":"geo:ai-crawler-access","abgleich":true}
Zitieren: WCE-2026-00161 · Adresse https://euid.com/wissen/kriterien/WCE-2026-00161 · Feed kriterien.json




