Zum Inhalt springen
EUID Prüfservice & Prüfsiegel, Startseite
Website prüfen lassen

Kriterien-Register · GEO / KI

WCE-2026-00161 — Zugang für KI-Crawler

Stand veröffentlicht, gemessen seit Engine 2026.08.1.

Quelle im Messkerngeo:ai-crawler-access
Gewicht12 Punkte
EngineMesskern GEO · Regelwerk geo-v4
MessgrundlagenGerenderter DOM
Angelegt20.09.2026, 07:58

Was geprüft wird

Thema: Zugang und Struktur

Warum: Ob eine Website in den Antworten von ChatGPT, Claude oder Perplexity vorkommen kann, entscheidet sich nicht im Text, sondern in einer kleinen Datei am Wurzelverzeichnis: der robots.txt. Sie sagt jedem Crawler, was er lesen darf. Die KI-Anbieter betreiben eigene Crawler mit eigenen Namen: GPTBot und OAI-SearchBot für OpenAI, ClaudeBot und Claude-SearchBot für Anthropic, PerplexityBot für Perplexity; Google-Extended ist ein Schalter für das Training der Gemini-Modelle, die KI-Übersichten der Google-Suche steuert er nicht. Steht für einen dieser Namen oder für alle Bots ein vollständiges Verbot in der Datei, nimmt der Anbieter die Seite aus seinem Suchindex oder seinem Training; Abrufe, die ein Nutzer selbst im Chat auslöst, richten sich nach Aussage von OpenAI und Perplexity nicht nach der robots.txt. Der Prüfbereich GEO / KI liest die robots.txt der Domain und meldet jede vollständige Sperre.

Auswirkung: Betrifft, wie gut die Seite in KI-Antworten gefunden und als Quelle genannt werden kann (KI-Übersicht von Google, ChatGPT, Perplexity).

Maßnahme: —

Referenzen

Noch keine Referenz hinterlegt.

Verlauf

  • 20.09.2026, 07:58 · angelegt · {"seit":"2026.08.1","stand":"veroeffentlicht","quelle":"geo:ai-crawler-access","abgleich":true}

Zitieren: WCE-2026-00161 · Adresse https://euid.com/wissen/kriterien/WCE-2026-00161 · Feed kriterien.json

  • Siegel Digitale Barrierefreiheit
  • Siegel Daten & Recht
  • Siegel Technische Qualität
  • Siegel Digital Excellence
  • Siegel Cyberversicherung

Geprüft. Für eine bessere digitale Zukunft.euid.com