Crawl-Fehler priorisiert: heute, nächste Woche oder nie

Die Search Console meldet regelmäßig Crawl-Fehler. Die meisten sind nicht dringend. Einige schon. Wer alle gleich wichtig behandelt, verbringt Stunden mit Korrekturen von geringer Wirkung, während ein folgenreiches Problem weiter Schaden anrichtet. Dieser Artikel ist ein praktisches Triage-Modell: wie Sie Crawl-Fehler lesen und entscheiden, was diese Woche angepackt wird und was Sie ignorieren können.

Heute beheben: Serverfehler auf wichtigen Seiten

Ein Fehler der 500er-Reihe auf einer Seite, die für wichtige Suchanfragen rankt, ist ein Brand. Jede Stunde, in der die Seite defekt ist, verlieren Sie Impressionen und Klicks, und dauerhafte Serverfehler führen innerhalb weniger Tage zur Deindexierung. Wenn Sie in der Search Console neue 500er-Fehler für Seiten sehen, die live sein sollten, gehen Sie der Sache sofort nach. Meist liegt die Ursache in einem Deployment oder in einem Datenbankproblem.

Heute beheben: noindex-Tags auf Produktivseiten, die indexierbar sein sollten

Meldet die Search Console Seiten, die per noindex ausgeschlossen sind, aber indexiert werden sollten, liegt die Ursache fast immer in einer Template-Änderung oder einer falschen CMS-Konfiguration. Die Korrektur ist schnell erledigt (noindex-Tag entfernen, erneute Indexierung anfordern), und die Erholung geht ebenfalls schnell (meist innerhalb weniger Tage). Warten macht die Folgen nur schlimmer.

Diese Woche beheben: 404-Fehler bei URLs, die früher gerankt haben

Seiten, die einen 404-Fehler liefern und zuvor für wertvolle Suchanfragen gerankt haben, verdienen Aufmerksamkeit innerhalb der Woche. Die Lösung: Entweder stellen Sie die Seite wieder her (wenn sie weiter existieren soll) oder Sie leiten die URL per 301 auf das nächstliegende Äquivalent weiter (wenn sie eingestellt wurde). Ein 404 bei einer URL, die zuvor gerankt hat, lässt die Link-Power dieser URL langsam ausbluten.

Diese Woche beheben: Weiterleitungsketten auf wichtigen Seiten

Bei drei oder mehr Weiterleitungsschritten bricht Google die Kette gelegentlich ab. Meldet die Search Console Weiterleitungsprobleme auf wichtigen Seiten, glätten Sie die Kette: Leiten Sie die ursprüngliche URL in einem einzigen Schritt direkt auf das endgültige Ziel weiter.

Diesen Monat beheben: 404-Fehler bei Seiten mit internen Verweisen

Seiten, die einen 404-Fehler liefern, aber noch von anderen Stellen Ihrer Website verlinkt sind, müssen entweder wiederhergestellt oder von den internen Links befreit werden. Der 404 selbst schadet nicht direkt; die internen Links auf einen 404 verschwenden jedoch Crawl-Budget und verschlechtern die Nutzererfahrung.

Diesen Monat beheben: Crawl-Anomalie-Fehler

Die Search Console meldet „Crawling-Anomalie“ bei Seiten, die Google nicht erfolgreich crawlen konnte, ohne dass der Grund klar ist. Hier lohnt sich die Untersuchung, denn oft verbergen sich dahinter konkretere Probleme: Server-Timeouts, sporadische 500er-Fehler, robots.txt-Probleme. Die Lösung besteht meist darin, die eigentliche Ursache zu finden und zu beheben.

Fürs nächste Quartal einplanen: Soft 404s

Soft 404s, also Seiten, die einen 200-Status zurückgeben, den Nutzern aber „nicht gefunden“-Inhalte zeigen, sammeln sich mit der Zeit an und verschlechtern Googles Bild der Website-Qualität. Dringend sind sie selten, weil jeder einzelne Soft 404 nur begrenzte Wirkung hat. Wer sie aber im Quartalsrhythmus aufräumt, verhindert, dass ihre Zahl wächst.

Fürs nächste Quartal einplanen: Per robots.txt blockierte URLs, die es nicht sein sollten

Werden Seiten, die indexiert werden sollen, per robots.txt blockiert, ist die Ursache eine robots.txt-Regel, die breiter greift als beabsichtigt. Die Korrektur setzt voraus, dass Sie die ursprüngliche Absicht der Regel verstehen und sie anpassen, ohne die berechtigten Sperren zu entfernen. Quartalsweise ist der richtige Rhythmus, weil die Korrektur oft eine Abstimmung im Team erfordert.

Nie beheben: 404-Fehler bei bewusst entfernten Seiten

Wurde eine Seite absichtlich entfernt und gibt es kein passendes Ziel, ist ein sauberer 404 die richtige Antwort. Eine Weiterleitung auf Ihre Startseite oder eine allgemeine Kategorieseite ist schlechter, als den 404 stehen zu lassen: Google behandelt Startseiten-Weiterleitungen von nicht verwandten 404-Seiten als Soft 404s, und das ist schlimmer als der ursprüngliche 404.

Nie beheben: 4xx-Fehler bei URLs, die Sie nicht kontrollieren

Markiert die Search Console URLs, die merkwürdig aussehen (zufällige Parameter, Hash-Fragmente, Angriffs-URLs), sind das meist externe Bots, die Ihre Website abtasten. Die richtige Reaktion ist, sie zu ignorieren. Jede einzelne „beheben“ zu wollen, erzeugt Arbeit ohne Nutzen.

Nie beheben: Crawl-Fehler unterhalb der relevanten Schwelle

Eine Website mit 50.000 Seiten hat zu jedem Zeitpunkt immer ein paar Dutzend zufällige Crawl-Fehler. Die Fehlerzahl erreicht auf einer echten Website nie null. Streben Sie eine niedrige und stabile Fehlerquote an statt null.

So nutzen Sie die Berichte der Search Console

Der Abdeckungsbericht gruppiert Fehler nach Typ, und das ist die richtige Einheit für die Triage. Achten Sie mehr auf den Verlauf über die Zeit als auf die absolute Zahl: Eine wachsende Zahl von Fehlern eines Typs deutet auf ein neu entstehendes Problem hin. Eine stabile Fehlerzahl, die sich seit Monaten nicht verändert hat, ist Hintergrundrauschen.

Kontinuierliches Monitoring vs. Search Console

Die Search Console meldet Crawl-Fehler mit mehreren Tagen Verzögerung. Ein kontinuierlicher Website-Audit erkennt Probleme Stunden nach ihrem Auftreten und verkürzt so die Reaktionszeit bei den dringenden Kategorien. UtilitySEO und ähnliche Tools zeigen Crawl-Probleme in Echtzeit an, was bei den „Heute beheben“-Kategorien am meisten zählt.

Das Triage-Modell (heute beheben, diese Woche beheben, diesen Monat beheben, fürs nächste Quartal einplanen, nie beheben) ist wichtiger als jedes einzelne Tool. Die meisten SEO-Teams reagieren zu stark auf nicht dringende Crawl-Fehler und zu schwach auf die wirklich dringenden. Die Dringlichkeit richtig einzuschätzen, ist der eigentliche Gewinn.