Lernen
Crawling-Fehler in der Google Search Console beheben
Crawling- und Indexierungsfehler halten Seiten unbemerkt aus Google fern. Dieser Leitfaden erklärt die Search-Console-Berichte und wie Sie die häufigsten Ursachen beheben.
Starte ein frisches DomainLens-Audit und nutze den Report als Prioritätenliste.
Was „Crawling-Fehler“ wirklich bedeuten
Ein Crawling-Fehler bedeutet, dass Googlebot eine URL erreichen wollte und etwas schiefging, oder die Seite erreichbar war, Google sie aber nicht indexiert hat. In der Search Console finden sich diese vor allem im Seitenindexierungsbericht, der zeigt, warum jede URL im Index ist oder nicht.
Nicht jede ausgeschlossene URL ist ein Problem — manche Seiten sollen nicht indexiert werden. Ziel ist es, gewollte Ausschlüsse von echten Fehlern zu trennen, die Traffic kosten.
Wo Sie sie in der Search Console finden
Öffnen Sie den Seitenindexierungsbericht, um indexierte und nicht indexierte URLs nach Grund gruppiert zu sehen. Nutzen Sie die URL-Prüfung für eine einzelne Seite, um letztes Crawling, Indexierbarkeit und blockierende Signale zu sehen. Der Crawling-Statistik-Bericht (in den Einstellungen) zeigt die Serverantworten, die Googlebot erhielt.
Beginnen Sie mit den Gründen, die die meisten URLs betreffen — eine Ursache zu beheben befreit oft Dutzende Seiten auf einmal.
Häufige Crawling- und Indexierungsfehler
- Serverfehler (5xx) — Googlebot konnte die Seite wegen eines Serverproblems nicht laden.
- Nicht gefunden (404) — die URL ist verlinkt oder bekannt, existiert aber nicht mehr.
- Weiterleitungsfehler — Ketten oder Schleifen, die nie aufgelöst werden.
- Durch robots.txt blockiert — Crawling ist verboten, Google liest die Seite nicht.
- Durch „noindex“ ausgeschlossen — ein Tag oder Header verbietet die Indexierung.
- Gecrawlt — zurzeit nicht indexiert — Google sah die Seite, hielt sie aber nicht für indexwürdig.
So beheben Sie jede Ursache
Passen Sie die Lösung an den Grund an. Bei 5xx stabilisieren Sie den Server oder beheben den Anwendungsfehler. Bei unerwünschten 404 stellen Sie die Seite wieder her oder leiten per 301 auf die richtige URL. Bei Weiterleitungsfehlern verkürzen Sie Ketten, sodass jede alte URL direkt zum Ziel zeigt. Bei robots.txt- oder noindex-Sperren entfernen Sie die Direktive nur auf Seiten, die indexiert werden sollen.
„Gecrawlt — nicht indexiert“ deutet meist auf Qualität oder Duplikate: verbessern Sie den Inhalt, machen Sie ihn einzigartig und stärken Sie interne Links, damit Google die Seite für wertvoll hält.
Fehler, die es verschlimmern
- Massenhaft Indexierung anfordern, statt die Ursache zu beheben.
- Eine URL in robots.txt sperren, um sie zu „entfernen“ — dann sieht Google das noindex nicht.
- Jeden 404 auf die Startseite leiten, was Google als Soft-404 wertet.
- „Gefunden — nicht indexiert“ auf großen Seiten ignorieren, oft ein Crawl-Budget-Signal.
- URLs einzeln beheben statt der gemeinsamen Ursache.
Wie DomainLens hilft
Die Search Console nennt die betroffenen Seiten; DomainLens hilft zu sehen, warum bei einer bestimmten URL. Es zeigt HTTP-Status, Redirect-Ketten, robots- und noindex-Direktiven und das Canonical-Ziel — genau die Signale hinter den meisten Ausschlüssen — und erklärt jedes verständlich.
Prüfen Sie eine Problem-URL, beheben Sie das Gemeldete und fordern Sie dann per URL-Prüfung in der Search Console ein neues Crawling an, um den Fix zu bestätigen.
Nächste Schritte
Arbeiten Sie den Seitenindexierungsbericht vom größten Problem abwärts ab, validieren Sie jeden Fix und prüfen Sie monatlich, damit sich neue Fehler nicht still anhäufen.
Starten Sie ein kostenloses DomainLens-Audit jeder als nicht indexiert hängenden URL, um das blockierende Signal zu finden, bevor Sie ein erneutes Crawling anfordern.