So beheben Sie häufige Probleme bei der Google-Indexierung

Eine Seite kann keinen organischen Such-Traffic von Google erhalten, wenn sie nicht indexiert wurde.

Dass eine Seite jedoch nicht bei Google erscheint, bedeutet nicht immer, dass ein technischer Fehler vorliegt. Es kann sein, dass Google die Seite noch nicht entdeckt hat, sich entschieden hat, sie nicht zu indexieren, oder eine andere Version der Seite als geeigneter für seinen Index erachtet hat.

Das Verständnis der Ursache hinter einem Indexierungsproblem ist der erste Schritt zu dessen Behebung.

Was ist Google-Indexierung?

Google-Indexierung ist der Prozess der Speicherung und Organisation von Informationen, die von Webseiten entdeckt wurden.

Der grundlegende Prozess umfasst drei Phasen:

• Crawling — Google entdeckt und ruft eine Seite ab.
• Indexierung — Google analysiert die Seite und speichert sie möglicherweise in seinem Index.
• Serving (Ausspielung) — Google bestimmt, ob die Seite für eine bestimmte Suche relevant ist.

Eine Seite kann daher ein Crawling-Problem oder ein Indexierungsproblem haben oder schlichtweg als nicht nützlich genug für die Suchergebnisse angesehen werden.

So überprüfen Sie, ob eine Seite indexiert ist

Bevor Sie Änderungen vornehmen, überprüfen Sie den Indexierungsstatus der Seite.

Das nützlichste Tool hierfür ist die Google Search Console.

Öffnen Sie das Tool zur URL-Prüfung und geben Sie die URL ein, die Sie untersuchen möchten. Die Search Console kann Informationen darüber liefern, ob Google die URL entdeckt hat, ob sie gecrawlt wurde und ob die Seite aktuell indexiert ist.

Sie können auch eine Google-Suche mit folgendem Befehl durchführen:

site:beispiel.de/seiten-url

Dies kann einen schnellen Hinweis darauf geben, ob eine Seite indexiert ist, sollte jedoch nicht die Search Console ersetzen, wenn Sie Indexierungsprobleme diagnostizieren.

1. Die Seite wurde nicht entdeckt

Eine neue Seite wird möglicherweise nicht indexiert, einfach weil Google sie noch nicht entdeckt hat.

Dies kann vorkommen, wenn nur wenige oder keine internen Links auf die Seite verweisen.

So beheben Sie das Problem

Fügen Sie relevante interne Links von bestehenden Seiten hinzu, die Google bereits entdecken kann.

Wenn Sie beispielsweise einen Artikel über technisches SEO veröffentlichen, verlinken Sie ihn von relevanten Seiten über SEO-Grundlagen, Crawling, Indexierung oder die Search Console.

Eine XML-Sitemap kann Suchmaschinen ebenfalls dabei helfen, wichtige URLs zu entdecken, insbesondere auf größeren Websites.

Das Einreichen einer Sitemap garantiert jedoch nicht, dass jede URL indexiert wird.

2. Die Seite wird durch Robots.txt blockiert

Die Datei robots.txt kann Crawlern mitteilen, welche Bereiche einer Website sie nicht crawlen sollen.

Ein Fehler in dieser Datei kann Google daran hindern, auf Seiten zuzugreifen, die Sie in den Suchergebnissen sehen möchten.

Zum Beispiel:

User-agent: *
Disallow: /blog/

Diese Anweisung weist Crawler an, keine URLs unter /blog/ zu crawlen.

So beheben Sie das Problem

Überprüfen Sie Ihre robots.txt-Datei und stellen Sie sicher, dass wichtige Bereiche der Website nicht versehentlich blockiert werden.

Seien Sie besonders vorsichtig, wenn Sie die robots.txt auf einer Live-Website ändern. Eine breit gefasste Disallow-Regel kann viele URLs gleichzeitig betreffen.

3. Die Seite enthält eine Noindex-Anweisung

Eine noindex-Anweisung teilt Suchmaschinen mit, dass eine Seite nicht in ihren Suchindex aufgenommen werden soll.

Sie kann im HTML-Code der Seite oder über einen HTTP-Antwort-Header erscheinen.

Zum Beispiel:

<meta name="robots" content="noindex">

Dies ist nützlich für Seiten, die absichtlich aus den Suchergebnissen herausgehalten werden sollen, kann aber Probleme verursachen, wenn es versehentlich hinzugefügt wird.

So beheben Sie das Problem

Überprüfen Sie den Quelltext der Seite oder relevante SEO-Einstellungen in Ihrem CMS.

Wenn die Seite indexiert werden soll, entfernen Sie die unbeabsichtigte noindex-Anweisung und erlauben Sie Google, die Seite erneut zu crawlen.

4. Google hat eine andere kanonische URL gewählt

Eine Website kann mehrere URLs mit ähnlichem oder identischem Inhalt haben.

Zum Beispiel:

example.com/produkt
example.com/produkt?farbe=blau

Google kann bestimmen, dass eine andere URL die kanonische (offizielle) Version ist.

Die Search Console meldet möglicherweise, dass die untersuchte URL nicht indexiert ist, weil Google eine andere kanonische URL ausgewählt hat.

So beheben Sie das Problem

Stellen Sie zuerst fest, ob die von Google gewählte kanonische URL tatsächlich angemessen ist.

Wenn die falsche URL ausgewählt wurde, überprüfen Sie:

• Canonical-Tags
• Interne Links
• Weiterleitungen
• Sitemap-URLs
• Duplicate Content (doppelte Inhalte)
• URL-Parameter

Stellen Sie sicher, dass alle Signale auf der Website konsistent auf die URL verweisen, die Sie indexiert haben möchten.

5. Die Seite hat eine doppelte oder fast identische Version

Doppelter Inhalt führt nicht automatisch zu einer Abstrafung, aber Google kann entscheiden, dass nicht alle von mehreren im Wesentlichen gleichen URLs in seinem Index erscheinen müssen.

Dies ist häufig bei E-Commerce-Websites mit Produktvarianten, gefilterten URLs, Tracking-Parametern und druckfreundlichen Versionen der Fall.

So beheben Sie das Problem

Identifizieren Sie, welche URL die primäre Version sein sollte.

Verwenden Sie dann geeignete Signale wie:

• Kanonische URLs (Canonical Tags)
• Interne Verlinkung
• Weiterleitungen, wo angebracht
• Konsistente Sitemap-URLs

Vermeiden Sie es, ohne klaren Zweck mehrere Versionen im Grunde derselben Seite zu erstellen.

6. Die Seite gibt einen HTTP-Fehler zurück

Google kann Schwierigkeiten haben, eine Seite zu indexieren, wenn sie einen Fehler zurückgibt wie:

• 404 Not Found
• 410 Gone
• 403 Forbidden
• 500 Internal Server Error
• 503 Service Unavailable

Ein vorübergehendes Serverproblem kann ebenfalls das Crawling unterbrechen.

So beheben Sie das Problem

Überprüfen Sie die HTTP-Antwort der URL und untersuchen Sie gegebenenfalls die Server-Logs.

Stellen Sie bei einer Seite, die existieren sollte, sicher, dass sie eine erfolgreiche Antwort wie HTTP 200 zurückgibt.

Wenn eine Seite dauerhaft verschoben wurde, verwenden Sie eine entsprechende Weiterleitung, anstatt die alte URL auf eine fehlerhafte Seite verweisen zu lassen.

7. Die Seite erfordert einen Login

Google kann im Allgemeinen nicht auf Inhalte zugreifen, die ein Benutzer-Login erfordern.

Dies kann Mitgliederseiten, private Ressourcen, Kontobereiche und andere eingeschränkte Inhalte betreffen.

So beheben Sie das Problem

Wenn der Inhalt in der Google-Suche erscheinen soll, machen Sie den relevanten Inhalt öffentlich zugänglich.

Entfernen Sie die Authentifizierung nicht nur zur Verbesserung des SEO, wenn die Informationen absichtlich privat sind.

8. Die Seite ist sehr neu

Manchmal liegt gar kein technisches Problem vor.

Eine neu veröffentlichte Seite wurde möglicherweise einfach noch nicht gecrawlt und verarbeitet.

Google garantiert nicht, dass jede neu veröffentlichte URL sofort gecrawlt oder indexiert wird.

So beheben Sie das Problem

Stellen Sie sicher, dass die Seite zugänglich ist, intern verlinkt wurde, in die entsprechende Sitemap aufgenommen wurde und keine versehentlichen Indexierungsbeschränkungen enthält.

Sie können dann die URL-Prüfung in der Search Console verwenden, um die Seite zu testen und das Crawling anzufordern, sofern diese Option verfügbar ist.

Eine Anforderung zur Indexierung ist keine Garantie dafür, dass Google die URL auch indexiert.

9. Die Seite bietet wenig einzigartigen Wert

Eine technisch zugängliche Seite wird möglicherweise trotzdem nicht indexiert.

Wenn eine Website eine große Anzahl an Seiten mit sehr ähnlichem, dünnem, automatisch generiertem oder minderwertigem Inhalt enthält, kann Google entscheiden, dass einige Seiten nicht genug einzigartigen Wert bieten, um sie in den Index aufzunehmen.

So beheben Sie das Problem

Überprüfen Sie den Inhalt und fragen Sie:

• Beantwortet diese Seite ein echtes Nutzerbedürfnis?
• Bietet sie Informationen, die sich sinnvoll von anderen Seiten unterscheiden?
• Ist der Inhalt für seinen Zweck vollständig genug?
• Enthält er nützliche Beispiele, Daten, Erfahrungen oder Analysen?
• Könnten mehrere ähnliche Seiten zu einer stärkeren Ressource zusammengefasst werden?

Die Verbesserung der tatsächlichen Nützlichkeit der Seite kann effektiver sein als die wiederholte Anforderung einer Indexierung.

10. Wichtige Seiten haben wenige interne Links

Eine Seite, die mehrere Ebenen tief in einer Website vergraben ist, kann für Suchmaschinen und Nutzer schwerer zu entdecken sein.

Dies ist besonders bei großen Websites häufig der Fall, auf denen ältere Inhalte von neueren Seiten abgekoppelt werden.

So beheben Sie das Problem

Erstellen Sie eine logische interne Verlinkungsstruktur.

Verlinken Sie wichtige Seiten von relevanten:

• Kategorieseiten
• Navigationsseiten
• Verwandten Artikeln
• Produktseiten
• Ressourcenseiten

Vermeiden Sie es, Links nur um der Anzahl interner Links willen hinzuzufügen. Relevanz und nützliche Navigation sind wichtiger als das Volumen.

Häufige Indexierungsprobleme auf einen Blick

Was Sie nicht tun sollten, wenn eine Seite nicht indexiert ist

Indexierungsprobleme können Website-Betreiber dazu verleiten, unnötige Änderungen vorzunehmen.

Vermeiden Sie es, wiederholt dieselbe URL zur Indexierung einzureichen, ohne das zugrunde liegende Problem zu identifizieren.

Vermeiden Sie zudem die Verwendung der robots.txt als Ersatz für noindex. Die beiden Mechanismen dienen unterschiedlichen Zwecken.

Am wichtigsten: Gehen Sie nicht davon aus, dass jede nicht indexierte Seite ein technisches Problem hat. Google kann sich entscheiden, eine Seite nicht zu indexieren, weil eine andere URL geeigneter ist oder weil die Seite nicht genügend einzigartigen Wert bietet.

Ein einfacher Prozess zur Fehlerbehebung bei der Google-Indexierung

Wenn eine wichtige Seite nicht indexiert ist, arbeiten Sie die folgende Sequenz ab:

Schritt 1: Untersuchen Sie die URL in der Google Search Console.

Schritt 2: Prüfen Sie, ob Google auf die Seite zugreifen kann.

Schritt 3: Überprüfen Sie den HTTP-Statuscode.

Schritt 4: Prüfen Sie die robots.txt.

Schritt 5: Prüfen Sie auf noindex.

Schritt 6: Überprüfen Sie die kanonische URL.

Schritt 7: Suchen Sie nach doppelten oder nahezu doppelten Seiten.

Schritt 8: Überprüfen Sie interne Links und die Aufnahme in die Sitemap.

Schritt 9: Bewerten Sie, ob die Seite genügend einzigartigen Wert bietet.

Schritt 10: Beheben Sie das zugrunde liegende Problem und erlauben Sie Google, die Seite erneut zu crawlen.

Dieser Ansatz ist nützlicher, als die Indexierung als einfachen "URL einreichen und warten"-Prozess zu behandeln.

FAQ

1. Warum wird meine Seite nicht von Google indexiert?

Mögliche Gründe sind Crawling-Einschränkungen, eine noindex-Anweisung, Kanonisierung, Duplicate Content, Serverfehler, unzureichende interne Verlinkung oder dass Google die Seite schlichtweg noch nicht verarbeitet hat.

2. Wie kann ich überprüfen, ob Google meine Seite indexiert hat?

Verwenden Sie das Tool zur URL-Prüfung in der Google Search Console. Eine site:-Suche kann ebenfalls einen schnellen Hinweis geben, aber die Search Console bietet nützlichere Diagnoseinformationen.

3. Garantiert das Einreichen einer Sitemap die Indexierung?

Nein. Eine Sitemap hilft Google dabei, URLs zu entdecken, aber die Aufnahme in eine Sitemap garantiert nicht, dass eine Seite auch indexiert wird.

4. Wie lange braucht Google, um eine neue Seite zu indexieren?

Es gibt keinen festen Zeitrahmen für die Indexierung. Er kann je nach Website, URL, Inhalt, Crawling-Mustern und anderen Faktoren variieren.

5. Sollte ich für jede neue Seite eine Indexierung anfordern?

Das Anfordern einer Indexierung kann für wichtige neue oder aktualisierte Seiten nützlich sein, sollte jedoch nicht eine gute Website-Architektur, interne Verlinkung, zugänglichen Inhalt und eine technisch einwandfreie Website ersetzen.