Was passiert, wenn Google meine Website nicht findet?

Die Zustände, in denen eine Seite fehlt

Die Search Console, Googles kostenloser Dienst für Betreiber, nennt für jede Adresse einen Zustand, und an ihm erkennen Sie, wo die Seite hängt. Antwortet der Server mit 404, behandelt Google das wie jede 4xx-Antwort außer 429 und entfernt die Adresse aus dem Index; bei 5xx-Antworten verlangsamt Google laut seiner Dokumentation vorübergehend das Abrufen. Sperrt Ihre robots.txt die Adresse, ruft Google sie nicht ab; Google schreibt aber, dass eine gesperrte Adresse über Links trotzdem indexiert werden kann und die robots.txt kein Mittel ist, eine Seite aus Google herauszuhalten. Steht auf der Seite ein noindex, als Meta-Tag oder als Kopfzeile X-Robots-Tag, nimmt Google sie nicht auf; diese Anweisung liest Google nur, wenn es die Seite abrufen darf. Und dann gibt es zwei Zustände ohne technischen Fehler: Discovered, currently not indexed heißt laut Google, die Adresse ist bekannt, aber noch nicht abgerufen; Crawled, currently not indexed heißt, die Seite wurde abgerufen und nicht aufgenommen. Die ersten drei Zustände beheben Sie am Server und im Quelltext, die letzten beiden am Inhalt und an der internen Verlinkung. Wie Sie jeden Zustand selbst prüfen, beschreibt der Artikel zur Selbstprüfung in diesem Prüfbereich.

Crawl-Budget ist ein Thema für sehr große Websites

In Ratgebern steht oft, Fehlerseiten und Weiterleitungen verschwendeten das Crawl-Budget, also die Menge an Abrufen, die Google einer Website widmet. Googles eigene Anleitung dazu nennt als Zielgruppe große Websites ab einer Million Seiten mit wöchentlichen Änderungen und mittlere Websites ab 10.000 Seiten mit täglichen Änderungen, und sie sagt ausdrücklich: Wer keine große Zahl sich schnell ändernder Seiten hat, muss die Anleitung nicht lesen. Für eine Firmenwebsite mit 40 Seiten ist das Crawl-Budget also kein Grund, Fehler zu beheben. Die Gründe sind andere: Eine 404-Adresse fällt aus dem Index; Soft-404-Seiten, also Fehlerseiten mit Status 200, werden laut derselben Anleitung weiter abgerufen und stehen als eigener Zustand in der Search Console; und jeder dieser Fehler trifft zuerst den Besucher, der vor der Fehlerseite steht.

Was eine fehlende Seite für Ihr Unternehmen heißt

Statistik Austria meldet in der Pressemitteilung vom 1. Dezember 2025, dass 74 Prozent der österreichischen Unternehmen ab zehn Beschäftigten zumindest grundlegend digitalisiert sind, kleine Unternehmen mit 10 bis 49 Beschäftigten zu 71 Prozent; die Nutzung einer Website ist einer der zwölf Indikatoren dieses Maßes, Webverkäufe sind zwei weitere. Für einen Kunden, der Ihren Firmennamen oder Ihre Leistung bei Google eingibt, ist Ihre Website der Beleg, dass es Sie gibt; fehlt sie im Index, sieht er Verzeichnisse, Bewertungsportale und Mitbewerber. Wie viel das kostet, steht in Ihrem Analysewerkzeug unter organischem Verkehr: Dieser Anteil fällt für eine entfernte Seite auf null, ab dem Tag der Entfernung.

Verschlüsselung zählt mit, die robots.txt schützt nichts

Google nutzt HTTPS, die verschlüsselte Verbindung, seit August 2014 als Rankingsignal; im Blogbeitrag von damals nannte Google es ein sehr leichtes Signal, das weniger als ein Prozent der weltweiten Suchanfragen betraf und weniger Gewicht hat als andere Signale wie hochwertiger Inhalt. Eine Website ohne Verschlüsselung bewirbt sich seither mit einem Nachteil; Stand November 2026 hat Google diese Aussage nicht zurückgenommen. Umgekehrt ist die robots.txt kein Schutz: Der Standard RFC 9309 (IETF, 2022) sagt, dass ihre Regeln keine Zugriffsberechtigung sind und kein Ersatz für Sicherheitsmaßnahmen am Inhalt. Wer einen Bereich wirklich verbergen will, braucht laut Google ein noindex oder einen Passwortschutz. Welche Kopfzeilen der Server darüber hinaus senden soll, beschreibt der Artikel zu den Sicherheits-Kopfzeilen in diesem Prüfbereich.

KI-Antworten greifen auf denselben Index zu

Google sagt für AI Overviews und AI Mode, dass es keine zusätzlichen Anforderungen gibt und eine Seite indexiert sein muss, um dort als Quelle zu erscheinen; begrenzt wird der Ausschnitt mit denselben Mitteln wie in der Suche, nosnippet, max-snippet und noindex. Davon getrennt ist das Training von KI-Modellen: Google-Extended ist laut Google ein eigener Schalter in der robots.txt für das Training von Gemini und das Grounding in Vertex AI; er hat keinen Einfluss auf die Aufnahme in die Google-Suche und ist kein Rankingsignal. OpenAI trennt genauso: GPTBot sammelt für das Training, OAI-SearchBot für die Suche in ChatGPT, und eine gegen OAI-SearchBot gesperrte Website erscheint in den Suchantworten von ChatGPT nicht. Anthropic nennt ClaudeBot für das Training, Claude-SearchBot für die Suche und Claude-User für Abrufe auf Nutzerfrage. Stand November 2026 gilt: Der Platz im Index ist die Voraussetzung für Suche und KI-Antwort zugleich; ob Sie das Training zulassen, ist eine eigene Entscheidung, die die Sichtbarkeit nicht ändert. Die Zeilen in der robots.txt beschreibt der Artikel des Prüfbereichs GEO; wie oft KI-Crawler Seiten abrufen und was sie dabei lesen, der Artikel des Prüfbereichs Core Web Vitals zu den KI-Assistenten.

Tipps aus der Praxis

• Eine Seite, die im Index fehlt, fällt intern nie auf: Sie lädt im Browser, das Menü führt hin, nur die Suche kennt sie nicht. Lesen Sie den Bericht Seiten deshalb monatlich.
• Anmeldung, Warenkorb, Kasse und interne Suche gehören mit noindex aus dem Index; die Zahl bei Durch noindex ausgeschlossen soll genau diese Seiten umfassen und keine Leistungsseite.
• Eine Disallow-Zeile in der robots.txt ist öffentlich lesbar und verrät, was sie verbergen soll. Vertrauliches schützt nur ein Passwort.
• Ob Sie KI-Training zulassen, entscheiden Sie unabhängig von der Suche; Google-Extended, GPTBot und ClaudeBot ändern laut ihren Anbietern nichts an der Aufnahme in die Suche.