← Zurück zum Blog Indexierung und Crawling

Website aus Google verschwunden? So finden Sie die Ursache

Website aus Google verschwunden? So finden Sie die Ursache

Wenn eine Website aus Google verschwunden ist, lässt sich die Ursache meist in unter einer Stunde finden: ein noindex, das live gegangen ist, eine robots.txt, die alles sperrt, eine manuelle Maßnahme, ein Entfernungsantrag oder ein Server bzw. eine Domain, die nicht mehr antwortet. Gehen Sie die Prüfungen unten der Reihe nach durch. Die ersten sind schnell erledigt und erklären die meisten Fälle.

Mit site: und der URL-Prüfung bestätigen

Suchen Sie bei Google nach site:beispiel.de. Entscheidend ist, ob Startseite und wichtige Seiten überhaupt erscheinen. Erscheint nur ein Teil, betrifft das Problem meist ein Template oder einen Bereich.

Öffnen Sie dann die Search Console, geben Sie die Startseite in die URL-Prüfung ein und lesen Sie zwei Zeilen: ob die URL bei Google ist und, falls nicht, warum. Starten Sie auch den Live-Test. Weitere Methoden stehen in unserer Anleitung, wie Sie prüfen, ob eine Seite indexiert ist.

Nach noindex im HTML und in den Headern suchen

Die häufigste Ursache ist eine noindex-Anweisung. Suchen Sie im Quelltext nach <meta name="robots" content="noindex"> oder einem googlebot-Meta-Tag mit demselben Wert. In WordPress öffnen Sie Einstellungen > Lesen: Die Checkbox "Suchmaschinen davon abhalten, diese Website zu indexieren" setzt genau dieses Tag, und sie wird gern auf der Staging-Umgebung aktiviert und beim Launch vergessen.

Die Anweisung kann auch als HTTP-Header kommen, und der steht nicht im Quelltext:

curl -sI https://beispiel.de/ | grep -i x-robots-tag

Liefert das X-Robots-Tag: noindex, fügt der Server, ein Plugin oder eine CDN-Regel den Header hinzu. Der Leitfaden zum noindex-Tag erklärt, wie Google beide Varianten behandelt.

Die robots.txt lesen

Öffnen Sie /robots.txt und suchen Sie nach Disallow: / unter User-agent: * oder User-agent: Googlebot. Ein pauschales Disallow stoppt das Crawling. Bereits indexierte Seiten können eine Weile im Index bleiben, ohne Beschreibung im Snippet, und verschwinden dann.

Eine per robots.txt gesperrte Seite kann Google außerdem ihr noindex nicht zeigen. Wenn Sie einmal bewusst deindexieren wollen, heben Sie zuerst die Sperre auf.

Manuelle Maßnahmen, Sicherheitsprobleme und Entfernungen prüfen

Öffnen Sie in der Search Console den Bereich Sicherheit und manuelle Maßnahmen. Eine manuelle Maßnahme wegen Spam oder ein Sicherheitsproblem wie gehackte Inhalte oder Malware kann einzelne Seiten oder die ganze Website aus den Ergebnissen nehmen. Nach der Behebung beantragen Sie dort die Überprüfung.

Danach das Tool Entfernungen. Jeder mit vollem Zugriff auf die Property kann URLs für etwa sechs Monate ausblenden, und ein Antrag auf das reine Domain-Präfix blendet alles darunter aus.

Canonicals, die auf eine andere Domain zeigen

Ein rel="canonical" auf allen Seiten, das auf einen anderen Host zeigt (Staging, eine alte Domain, eine Kopie der Website), bittet Google, stattdessen diese andere URL zu indexieren. Die URL-Prüfung zeigt die angegebene kanonische URL neben der von Google ausgewählten.

Serverfehler, DNS und abgelaufene Domain

Bekommt der Googlebot tagelang 5xx-Fehler, crawlt er langsamer und nimmt dann URLs aus dem Index. Der Bericht Crawling-Statistiken unter Einstellungen in der Search Console schlüsselt die Antworten nach Statuscode auf, eine Häufung von 5xx fällt dort sofort auf.

Zum Schluss die Domain. Eine abgelaufene Registrierung oder ein defekter DNS-Eintrag bedeutet, dass der Googlebot die Website gar nicht erreicht. Machen Sie eine RDAP- oder WHOIS-Abfrage und prüfen Sie Ablaufdatum und Nameserver. Der Artikel zum Monitoring des Domain-Ablaufs beschreibt, was nach dem Ablauf einer Domain passiert.

Ist die Ursache behoben, beantragen Sie in der URL-Prüfung die Indexierung der Startseite und einiger wichtiger URLs und reichen die Sitemap erneut ein.

On-Site-Ursachen erkennen, bevor Google reagiert

Deltio überwacht fast alle diese Ursachen auf jeder Kundenwebsite, bevor Google etwas entfernt. Der SEO-Scanner liest auf jeder URL das Meta-Robots-Tag und den X-Robots-Tag-Header und vergleicht jeden Scan mit dem vorherigen. Wechselt eine Seite auf noindex, kommt ein Alert per E-Mail oder Slack. Eine geänderte robots.txt meldet Deltio mit einem Diff der hinzugefügten und entfernten Zeilen. Die Erreichbarkeit wird alle 10 Minuten geprüft, der Domain-Ablauf per RDAP gelesen und 30 Tage vorher gemeldet, und für das SSL-Zertifikat kommen Warnungen 30 Tage und 1 Tag vor Ablauf.

Deltio liest die Search Console nicht. Manuelle Maßnahmen, Sicherheitsprobleme und Entfernungsanträge bleiben Teil Ihrer GSC-Routine. Starter kostet £24 pro Monat, bei jährlicher Zahlung £20, und Sie können es 14 Tage kostenlos testen.

Häufige Fragen

Wie lange dauert es, bis eine Website nach der Behebung wieder bei Google ist?
Das hängt davon ab, wie schnell Google die Seiten erneut crawlt. Die Indexierung wichtiger URLs in der URL-Prüfung zu beantragen und die Sitemap neu einzureichen, beschleunigt das Auffinden, eine feste Frist gibt es aber nicht. Kleine Websites sind oft nach wenigen Tagen zurück, große oder lange ausgefallene Websites können Wochen brauchen.
Kann ein Wettbewerber meine Website aus Google entfernen lassen?
Nicht über das Tool Entfernungen in der Search Console, das nur bestätigte Inhaber der Property nutzen können. Googles öffentliches Tool für veraltete Inhalte aktualisiert nur Ergebnisse von Seiten, die sich bereits geändert haben oder verschwunden sind. Rechtliche Entfernungsanträge gibt es, Google prüft sie aber vor jeder Maßnahme.
Zeigt die site:-Abfrage alle indexierten Seiten?
Nein. Die Trefferzahl einer site:-Suche ist eine grobe Schätzung und schwankt von Abfrage zu Abfrage. Sie zeigt, ob eine Website oder ein Bereich überhaupt erscheint. Belastbare Zahlen liefert der Bericht Seitenindexierung in der Search Console.
Warum ist meine Website noch bei Bing, aber nicht mehr bei Google?
Bing hält sich an dieselben robots.txt- und noindex-Anweisungen, ein Unterschied deutet daher meist auf etwas Google-Spezifisches hin. Typische Kandidaten sind eine manuelle Maßnahme, ein Entfernungsantrag in der Search Console oder eine Server- oder Firewall-Regel, die den Googlebot anders behandelt als andere Crawler.
Meldet Deltio, wenn eine Website aus Google fällt?
Deltio fragt weder den Google-Index ab noch liest es die Search Console. Es meldet die On-Site-Ursachen einer Deindexierung: ein noindex im Meta-Robots-Tag oder im X-Robots-Tag-Header, Änderungen an der robots.txt, Ausfälle sowie bald ablaufende SSL-Zertifikate oder Domains.