Zum Artikel

Im Druckfenster können Sie auch als PDF speichern.

Prüfservice & Prüfsiegel

Wissen › Indexierung › Inhalt im HTML

Stand 19. November 2026

Online: euid.com/wissen/technik/inhalt-im-html/cloaking-erkennen

Prüfpunkt no-cloaking

Was ist Cloaking und wie wird es erkannt?

Cloaking bedeutet, dass eine Website der Suchmaschine eine andere Seite ausliefert als menschlichen Besuchern. Die Richtlinien der Suchmaschinen untersagen das. Der Prüfbereich „Indexierung“ ruft Ihre Seite deshalb zweimal ab: einmal mit der Kennung des Googlebots, einmal mit der eines normalen Browsers. Anschließend vergleicht er beide Antworten. Der Grundsatz ist einfach: Bot und Mensch müssen dieselbe Seite bekommen.

Google meint mit Cloaking die Absicht zu täuschen und nennt Ausnahmen

Google führt Cloaking in seinen Spam-Richtlinien und fasst es eng: Nutzern und Suchmaschinen werden unterschiedliche Inhalte gezeigt, in der Absicht, das Ranking zu manipulieren und Nutzer zu täuschen. Als Beispiele nennt Google eine Seite, die Suchmaschinen Reiseziele zeigt und Besuchern Rabatt-Medikamente, und Text, der nur eingefügt wird, wenn eine Suchmaschine anfragt.

Die Folge steht im selben Dokument: Betroffene Websites können schlechter platziert werden oder gar nicht mehr erscheinen. Ebenso klar sagt Google, was nicht darunter fällt. Eine Bezahlschranke zählt nicht dazu, wenn Google den vollen Inhalt dahinter sehen kann; die Auszeichnung isAccessibleForFree in den strukturierten Daten macht das für Google kenntlich. Auch eine für Crawler vorgerenderte Fassung zählt nicht dazu, solange sie vergleichbaren Inhalt zeigt.

Länderweichen: Der Googlebot kommt meist aus den USA

Ein Fall ohne böse Absicht ist die Länderweiche: Der Server liest Land oder Sprache des Besuchers aus und zeigt je nachdem andere Inhalte. Google warnt, dass es bei solchen Seiten möglicherweise nicht alle Fassungen abruft, indexiert oder rankt. Der Grund: Die üblichen IP-Adressen des Googlebots liegen dem Anschein nach in den USA, und der Crawler schickt keine bevorzugte Sprache mit.

Eine Website, die Besucher aus Österreich auf die deutsche Fassung lenkt und alle anderen auf die englische, zeigt Google damit vor allem die englische. Google empfiehlt eigene Adressen je Sprache oder Land mit hreflang-Angaben und rät seit jeher, den Googlebot so zu behandeln wie jeden anderen Besucher aus demselben Land. Wer Zugriffe aus den USA abweist, weist damit auch den Googlebot ab; Google versucht den Abruf dann unter Umständen aus einem anderen Land.

A/B-Tests: was Google zulässt und was es als Täuschung auslegt

Wer Varianten einer Seite testet, liefert absichtlich Verschiedenes aus. Google lässt das zu und nennt die Bedingungen. Ob jemand die Testfassung bekommt, darf nie an der Kennung des Googlebots hängen. Steuert ein Cookie den Test, ist zu bedenken, dass der Googlebot Cookies in der Regel nicht unterstützt.

Liegen die Varianten unter eigenen Adressen, verweisen sie mit rel=canonical auf das Original, und eine Umleitung zur Variante ist vorübergehend (302) und nicht dauerhaft (301). Und der Test läuft nur so lange wie nötig: Einen Versuch, der unnötig lange läuft, kann Google als Täuschungsversuch auslegen und entsprechend handeln, besonders wenn eine Variante an einen großen Teil der Besucher geht.

Eine manuelle Maßnahme gilt, bis Google den Antrag geprüft hat

Stellt eine Prüferin oder ein Prüfer bei Google fest, dass Seiten die Spam-Richtlinien nicht erfüllen, wendet Google eine manuelle Maßnahme an. Die Search Console führt sie im Bericht „Manuelle Maßnahmen“; der Eintrag für diesen Fall heißt „Cloaking und/oder irreführende Weiterleitungen“. Die meisten dieser Maßnahmen führen laut Google dazu, dass die Website oder einzelne Seiten niedriger gereiht oder ganz aus den Suchergebnissen entfernt werden.

Aufgehoben wird die Maßnahme erst auf Antrag: Sie beheben die Ursache, wählen im Bericht „Überprüfung anfordern“ und warten auf die Nachricht von Google. Für die meisten erneuten Überprüfungen nennt Google mehrere Tage oder Wochen. So lange fehlen Besucher aus der Google-Suche. Was das für Ihren Umsatz heißt, zeigt Ihr Analysewerkzeug am Anteil der Besuche aus der organischen Suche.

Ein Unterschied, den niemand erklären kann, ist ein Fall für die Sicherheit

Cloaking ist auch ein Werkzeug von Angreifern. Google schreibt, es sei nach einem Einbruch in eine Website nicht ungewöhnlich, dass der Angreifer Cloaking einsetzt, damit der Betreiber den Schaden schwerer entdeckt. Bei einer verbreiteten Masche entstehen auf der Website viele Seiten mit sinnlosem Text, Links und Bildern, die Googles Ranking beeinflussen sollen.

Ruft der Betreiber eine davon auf, sieht er unter Umständen nur die Meldung, die Seite gebe es nicht. Für ihn sieht die Website aus wie immer. Zeigt der Vergleich einen Unterschied, den Ihre Technik nicht erklären kann, gehört deshalb ein Blick in den Bericht „Sicherheitsprobleme“ der Search Console dazu. Dort meldet Google gehackte Inhalte, und dort wählen Sie nach der Bereinigung „Überprüfung anfordern“.

Bot-Schutz kann KI-Crawlern etwas anderes zeigen als Besuchern

Bot-Schutz liefert Crawlern mitunter etwas anderes aus als Besuchern, und bei KI-Crawlern kann das die Voreinstellung sein. Der Netzbetreiber Cloudflare hat am 1. Juli 2025 angekündigt, KI-Crawler in der Voreinstellung zu sperren, solange sie nicht für Inhalte zahlen. Wer seine Website über einen solchen Dienst ausliefert, zeigt KI-Crawlern unter Umständen eine Sperre, ohne das je selbst eingestellt zu haben.

Googles Definition von Cloaking erfasst das nicht; es ist eine Entscheidung über Ihre Sichtbarkeit in KI-Antworten, und sie sollte Ihre eigene sein. Soll ein Crawler durchkommen, prüft der Schutz seine Herkunft und nicht seinen Namen: Google veröffentlicht die IP-Adressen seiner Crawler, OpenAI die von GPTBot, OAI-SearchBot und ChatGPT-User. Die Abwägung beschreibt der Artikel „Darf ich KI-Crawler sperren, und was gebe ich dabei auf?“.

Bot und Mensch bekommen dieselbe Seite

Jeder Abruf einer Website enthält eine Kennung, die verrät, wer anfragt: ein Chrome-Browser auf Windows oder eben der Googlebot. Ein Server kann darauf unterschiedlich reagieren. Genau das nutzt Cloaking aus: Der Suchmaschine wird eine für das Ranking hergerichtete Fassung gezeigt, Besuchern eine andere.

Suchmaschinen betrachten das als Täuschung, denn ihr Suchergebnis verspricht dann etwas, das der Besucher nicht bekommt. Der Grundsatz der Prüfung ist deshalb einfach: Beide Abrufe müssen im Wesentlichen dieselbe Seite liefern: gleicher Umfang, gleicher Titel, gleicher Inhalt.

So läuft der Vergleich ab

Die Prüfung ruft das endgültige Dokument zweimal ab, einmal als Googlebot, einmal als gewöhnlicher Browser, und vergleicht drei Dinge: die Länge des sichtbaren Textes, den Seitentitel und die Wörter, die in beiden Fassungen vorkommen.

Weicht der Text um mehr als 15 Prozent ab, stimmen die Titel nicht überein oder haben beide Fassungen weniger als 80 Prozent ihrer Wörter gemeinsam, gilt die Auslieferung als auffällig, und die 5 Punkte dieser Regel entfallen. Der Befund nennt die gemessene Abweichung in Prozent, sodass Ihre Technik gezielt nachsehen kann, welche Inhalte nur einer der beiden Kennungen ausgeliefert werden. Auch ein unterschiedlicher Seitentitel wird im Bericht festgehalten.

Cloaking passiert auch unabsichtlich

Nicht jede Ungleichbehandlung ist böse Absicht. Schutzsysteme gegen automatisierte Zugriffe, Wartungsseiten oder Personalisierung können dazu führen, dass ein Bot deutlich weniger Inhalt bekommt als ein Mensch, oder eine Prüfseite statt der echten. Google spricht von Cloaking, wenn dahinter die Absicht steht, das Ranking zu manipulieren und Nutzer zu täuschen.

Unsere Prüfung misst, was ausgeliefert wird; eine Absicht kann sie nicht sehen. Lassen Sie deshalb nach dem Einbau von Firewalls, Bot-Schutz oder Länderweichen prüfen, ob Suchmaschinen weiterhin die vollständige Seite erhalten. Der Vergleich mit beiden Kennungen zeigt viele solcher Nebenwirkungen. Ein Schutz, der die Herkunft prüft, kann den echten Googlebot aber anders behandeln als unsere Abrufe.

So gehen Sie es an

  1. Fragen Sie Ihre Agentur, ob Schutz- oder Personalisierungssysteme Suchmaschinen anders behandeln als Besucher.
  2. Lassen Sie nach dem Einbau einer Firewall oder eines Bot-Schutzes testen, ob der Googlebot weiterhin die vollständige Seite erhält.
  3. Verzichten Sie auf Angebote, die versprechen, „nur für Google“ zusätzliche Inhalte einzublenden.
  4. Vergleichen Sie den Titel Ihrer Seite im Browser mit dem Titel im Google-Ergebnis. Eine starke Abweichung ist ein Warnzeichen.

Tipps aus der Praxis

  • Was der echte Googlebot bekommt, zeigt nur Google selbst: Search Console, URL-Prüftool, „Live-URL testen“, „Getestete Seite anzeigen“. Vergleichen Sie HTML-Code und Screenshot mit dem, was Ihr Browser zeigt.
  • Lassen Sie im Bot-Schutz echte Suchmaschinen-Crawler an ihrer Herkunft erkennen und durchlassen. Google nennt dafür die Rückwärtsabfrage der IP-Adresse auf googlebot.com, google.com oder googleusercontent.com und den Abgleich mit den veröffentlichten IP-Listen.
  • Ersetzen Sie die automatische Länderweiche durch eigene Adressen je Sprache und einen sichtbaren Sprachwechsel. Ein Hinweisbalken wie „Diese Seite gibt es auch auf Deutsch“ lenkt Besucher, ohne dem Crawler eine Fassung vorzuenthalten.
  • Geben Sie jedem A/B-Test ein Enddatum und halten Sie es im Auftrag fest. Nach dem Test verschwinden Skript, Varianten-Adressen und Umleitungen.
  • Nach einem Befund, den niemand erklären kann: in der Search Console die Berichte „Sicherheitsprobleme“ und „Manuelle Maßnahmen“ öffnen und bei Google nach site:ihre-domain.at suchen. Seiten, die Sie nie angelegt haben, sprechen für einen Einbruch.

Häufige Fragen

Was bedeutet Cloaking?
Cloaking (englisch für „Verhüllen“) bezeichnet die Praxis, Suchmaschinen eine andere Fassung einer Webseite auszuliefern als menschlichen Besuchern. Suchmaschinen werten das als Bruch ihrer Richtlinien, weil das Suchergebnis dann etwas anderes verspricht, als der Besucher beim Klick tatsächlich vorfindet.
Kann Cloaking unabsichtlich entstehen?
Ja. Bot-Schutzsysteme, Firewalls oder Personalisierung können Suchmaschinen unbeabsichtigt weniger oder anderen Inhalt liefern. Google spricht erst bei Täuschungsabsicht von Cloaking; unsere Prüfung misst, was ausgeliefert wird. Nach jeder Änderung an solchen Systemen sollte deshalb geprüft werden, ob der Googlebot die vollständige Seite erhält.
Wie prüft der Prüfservice auf Cloaking?
Die Seite wird zweimal abgerufen: einmal mit der Kennung des Googlebots, einmal mit der eines normalen Browsers. Verglichen werden die Länge des sichtbaren Textes, der Seitentitel und die gemeinsamen Wörter beider Fassungen. Eine Textabweichung von mehr als 15 Prozent, ein anderer Titel oder weniger als 80 Prozent gemeinsame Wörter gilt als auffällig und erscheint mit den gemessenen Werten im Prüfbericht.

Wie erkenne ich den echten Googlebot?

An der IP-Adresse, nie am Namen. Die Kennung „Googlebot“ im Zugriffsprotokoll ist eine Angabe des Absenders, und jedes Programm kann sie senden; Google selbst schreibt, dass sie oft von anderen Crawlern vorgetäuscht wird. Echt ist ein Zugriff, wenn seine IP-Adresse zu Google gehört. Für den Einzelfall nennt Google eine doppelte Abfrage im Namenssystem des Internets (DNS), für Firewall und Bot-Schutz veröffentlichte Listen seiner IP-Bereiche.

Die Kennung beweist nichts

Jeder Abruf einer Website nennt in der Kopfzeile User-Agent, wer anfragt. Diese Angabe prüft niemand. Google nennt Spammer und andere Störenfriede, die auf Websites zugreifen und sich dabei als Google ausgeben. Auch Prüfwerkzeuge senden die Kennung, um zu sehen, was eine Website Suchmaschinen ausliefert.

Für Ihre Firewall hat das Folgen in beide Richtungen. Wer dem Namen vertraut, lässt Nachahmer durch. Und wer Zugriffe mit diesem Namen pauschal bremst, weil es auffällig viele sind, trifft unter Umständen den echten Crawler.

Der Einzelfall: Hin- und Rückabfrage im DNS

Für eine einzelne IP-Adresse aus dem Zugriffsprotokoll beschreibt Google diesen Weg. Die Rückwärtsabfrage fragt, zu welchem Namen die IP-Adresse gehört. Der Name muss auf googlebot.com, google.com oder googleusercontent.com enden. Die Vorwärtsabfrage fragt, welche IP-Adresse zu diesem Namen gehört.

Es muss dieselbe sein wie im Protokoll. Die Gegenprobe ist nötig, weil den Rückwärtseintrag der Inhaber einer IP-Adresse selbst festlegt. Ihr Hoster erledigt beide Abfragen mit dem Befehl host; das Beispiel unten zeigt Googles eigene Musteradresse.

Die Dauerlösung: Googles IP-Listen

Für Firewall und Bot-Schutz veröffentlicht Google die IP-Bereiche seiner Crawler als Dateien, getrennt nach Art des Zugriffs. Die Datei common-crawlers.json nennt die Adressen der allgemeinen Crawler wie des Googlebots; sie halten sich bei automatischen Abrufen immer an die robots.txt. Die Datei special-crawlers.json gilt für Sonderfälle wie den AdsBot.

Weitere Dateien gelten für Abrufe, die ein Nutzer auslöst; Google nennt als Beispiel die Bestätigung der Inhaberschaft einer Website. Solche Abrufe richten sich nicht nach der robots.txt. Die Adressen stehen in den Dateien als Bereiche in CIDR-Schreibweise. Ein Schutz, der diese Listen einliest, lässt echte Zugriffe durch und muss dem Namen nicht vertrauen.

Was geschieht, wenn der Schutz den echten Googlebot abweist

Antwortet der Schutz dem echten Googlebot mit einem Fehler der 4xx-Reihe, etwa 403, behandelt Google das wie eine Seite, die es nicht gibt: Alle 4xx-Antworten außer 429 werden gleich behandelt, und die Adresse wird aus dem Index entfernt.

Bei 429 und bei Fehlern der 5xx-Reihe verlangsamt Google das Abrufen vorübergehend. Besucher merken davon nichts, die Website lädt wie immer. Sichtbar wird es in der Search Console: im Bericht zur Seitenindexierung und im URL-Prüftool, dessen Live-Test zeigt, was Google gerade bekommt.

Dieselbe Probe gibt es für KI-Crawler

Auch OpenAI veröffentlicht die IP-Adressen seiner Crawler, je eine Liste für GPTBot, OAI-SearchBot und ChatGPT-User. Wer in der Suche von ChatGPT erscheinen will, soll nach OpenAIs Angabe den OAI-SearchBot in der robots.txt zulassen und Zugriffe aus den veröffentlichten IP-Bereichen durchlassen.

Ein Bot-Schutz kann damit auch hier nach Herkunft entscheiden. Welche dieser Crawler Sie zulassen, ist eine eigene Frage; sie beantwortet der Artikel „Darf ich KI-Crawler sperren, und was gebe ich dabei auf?“.

Beispiele

Zwei Zugriffe mit der Kennung Googlebot

Nicht erfüllt

host 203.0.113.7
Host 7.113.0.203.in-addr.arpa. not found: 3(NXDOMAIN)

Erfüllt

host 66.249.66.1
1.66.249.66.in-addr.arpa domain name pointer crawl-66-249-66-1.googlebot.com.

host crawl-66-249-66-1.googlebot.com
crawl-66-249-66-1.googlebot.com has address 66.249.66.1

Zur ersten Adresse gibt es keinen Namen bei Google: Die Kennung ist vorgetäuscht. Die zweite besteht Hin- und Rückabfrage.

So gehen Sie es an

  1. Lassen Sie sich vom Hoster die Zugriffe der letzten Woche mit der Kennung Googlebot ausgeben, mit IP-Adresse und Statuscode.
  2. Lassen Sie einige dieser IP-Adressen mit der doppelten DNS-Abfrage prüfen.
  3. Fragen Sie den Anbieter Ihrer Firewall oder Ihres Bot-Schutzes, ob er Suchmaschinen-Crawler an Googles IP-Listen erkennt und wie die Einstellung dafür heißt.
  4. Prüfen Sie in der Search Console mit dem URL-Prüftool und „Live-URL testen“, ob Google Ihre Startseite und eine Unterseite abrufen kann.

Häufige Fragen

Kommt der Googlebot immer aus den USA?
Überwiegend. Google schreibt, seine Crawler kämen vor allem von IP-Adressen in den USA. Stellt Google fest, dass eine Website Zugriffe aus den USA sperrt, versucht es den Abruf unter Umständen von Adressen in anderen Ländern.
Wie oft greift der echte Googlebot zu?
Bei den meisten Websites nach Googles Angabe im Schnitt höchstens einmal alle paar Sekunden. Deutlich dichtere Zugriffe unter diesem Namen sind ein Anlass für die Probe an der IP-Adresse.

Quellen

  1. Google Search Central: Spam policies for Google web search (Cloaking: Definition, Beispiele, Bezahlschranke, gehackte Websites; Folgen)
    https://developers.google.com/search/docs/essentials/spam-policies
  2. Google Search Central: Paywalled content structured data (isAccessibleForFree unterscheidet Bezahlschranke von Cloaking)
    https://developers.google.com/search/docs/appearance/structured-data/paywalled-content
  3. Google Search Central: Dynamic rendering as a workaround (vergleichbarer Inhalt ist kein Cloaking)
    https://developers.google.com/search/docs/crawling-indexing/javascript/dynamic-rendering
  4. Google Search Central: How Google crawls locale-adaptive pages (IP-Adressen dem Anschein nach in den USA, keine bevorzugte Sprache, eigene Adressen mit hreflang)
    https://developers.google.com/search/docs/specialty/international/locale-adaptive-pages
  5. Google Search Central: Overview of Google crawlers and fetchers (Abrufe vor allem von IP-Adressen in den USA, bei Sperre Versuch aus anderen Ländern)
    https://developers.google.com/search/docs/crawling-indexing/overview-google-crawlers
  6. Google Search Central: Minimize A/B testing impact in Google Search (keine Auslieferung nach Kennung, rel=canonical, 302, nur so lange wie nötig)
    https://developers.google.com/search/docs/crawling-indexing/website-testing
  7. Google Search Central: Verifying Googlebot and other Google crawlers (Rückwärts- und Vorwärtsabfrage, IP-Listen)
    https://developers.google.com/search/docs/crawling-indexing/verifying-googlebot
  8. web.dev: Fix the cloaked keywords and links hack (Seiten mit sinnlosem Text, Meldung „Seite nicht gefunden“ für den Betreiber)
    https://web.dev/articles/fix-the-cloaked-keywords-hack
  9. Google Search Console-Hilfe: Bericht „Manuelle Maßnahmen“ („Cloaking und/oder irreführende Weiterleitungen“, „Überprüfung anfordern“, mehrere Tage oder Wochen)
    https://support.google.com/webmasters/answer/9044175
  10. Google Search Console-Hilfe: Bericht „Sicherheitsprobleme“ (gehackte Inhalte, „Überprüfung anfordern“)
    https://support.google.com/webmasters/answer/9044101
  11. Google Search Console-Hilfe: URL-Prüftool („Live-URL testen“, „Getestete Seite anzeigen“)
    https://support.google.com/webmasters/answer/9012289
  12. Cloudflare, 1. Juli 2025: Content Independence Day (KI-Crawler in der Voreinstellung gesperrt, solange sie nicht zahlen)
    https://blog.cloudflare.com/content-independence-day-no-ai-crawl-without-compensation/
  13. OpenAI: Overview of OpenAI Crawlers (veröffentlichte IP-Adressen für GPTBot, OAI-SearchBot und ChatGPT-User)
    https://developers.openai.com/api/docs/bots
  14. Google Search Central: Googlebot (Kennung oft von anderen Crawlern vorgetäuscht; im Schnitt höchstens ein Zugriff alle paar Sekunden)
    https://developers.google.com/search/docs/crawling-indexing/googlebot
  15. Google Search Central: HTTP status codes, network and DNS errors (4xx außer 429 gleich behandelt und aus dem Index entfernt; 5xx und 429 bremsen das Abrufen)
    https://developers.google.com/search/docs/crawling-indexing/http-network-errors

Fotos

  • Foto: Pexels, Pixabay (https://pixabay.com/photos/venetian-mask-carnival-feathers-1283163/)
  • Foto: KRiemer, Pixabay (https://pixabay.com/photos/bell-jar-garden-bells-clinker-4182713/)

Dieses Dokument gibt die Online-Fassung vom 19. November 2026 wieder. Ändern sich Norm, Rechtslage oder Werkzeuge, wird die Online-Fassung überarbeitet; sie steht unter euid.com/wissen/technik/inhalt-im-html/cloaking-erkennen.