SEO
Crawlfouten gesorteerd: vandaag, volgende week of nooit
Een praktisch triagemodel voor crawlfouten: welke je meteen oplost, welke je inplant en welke je met rust laat.
Search Console meldt regelmatig crawlfouten. De meeste zijn niet urgent. Sommige wel. Als je ze allemaal even belangrijk behandelt, besteed je uren aan fixes met weinig effect, terwijl een ernstig probleem ondertussen schade blijft aanrichten. Dit artikel is een praktisch triagemodel: hoe je crawlfouten leest en beslist wat je deze week oppakt en wat je kunt negeren.
Vandaag oplossen: serverfouten op belangrijke pagina's
Een 500-fout op een pagina die rankt voor belangrijke zoekopdrachten is een brand. Elk uur dat de pagina kapot is, verlies je vertoningen en klikken, en aanhoudende serverfouten leiden binnen enkele dagen tot deïndexering. Zie je nieuwe 500-fouten in Search Console voor pagina's die live zouden moeten zijn, zoek het dan meteen uit. Meestal ligt de oorzaak bij een deployment of een databaseprobleem.
Vandaag oplossen: noindex-tags op live pagina's die indexeerbaar moeten zijn
Als Search Console pagina's meldt die door noindex zijn uitgesloten maar wel geïndexeerd moeten worden, ligt de oorzaak bijna altijd bij een templatewijziging of een verkeerd ingesteld CMS. De fix is snel (noindex-tag verwijderen, opnieuw indexeren aanvragen) en het herstel ook (meestal binnen enkele dagen). Wachten maakt de impact alleen groter.
Deze week oplossen: 404's op URL's die vroeger rankten
Pagina's die een 404 geven en eerder rankten voor waardevolle zoekopdrachten verdienen binnen de week aandacht. De oplossing is de pagina herstellen (als die nog moet bestaan) of de URL met een 301 doorsturen naar de meest vergelijkbare pagina (als die is uitgefaseerd). Een 404 op een URL die eerder rankte laat de linkwaarde van die URL langzaam weglekken.
Deze week oplossen: redirectketens op belangrijke pagina's
Bij drie of meer redirectstappen geeft Google de keten af en toe op. Meldt Search Console redirectproblemen op belangrijke pagina's, maak de keten dan korter: stuur de oorspronkelijke URL in één stap direct door naar de eindbestemming.
Deze maand oplossen: 404's op pagina's met interne verwijzingen
Pagina's die een 404 geven maar nog steeds vanaf elders op je site gelinkt worden, moeten óf hersteld worden óf van de interne links ontdaan. De 404 zelf doet geen directe schade; de interne links naar een 404 verspillen crawlbudget en schaden de gebruikerservaring.
Deze maand oplossen: crawlanomalie-fouten
Search Console meldt een ‘crawlanomalie’ bij pagina's die Google niet goed kon crawlen, zonder dat de reden duidelijk is. Het loont om die uit te zoeken, want vaak zit er een specifieker probleem achter: server-timeouts, wisselende 500-fouten, robots.txt-problemen. De oplossing is meestal de onderliggende oorzaak vinden en die aanpakken.
Inplannen voor volgend kwartaal: soft 404's
Soft 404's, pagina's die een 200-status teruggeven maar bezoekers ‘niet gevonden’-inhoud tonen, stapelen zich in de loop van de tijd op en verslechteren het beeld dat Google van de kwaliteit van je site heeft. Ze zijn zelden urgent, omdat elke soft 404 afzonderlijk beperkte impact heeft, maar opruimen per kwartaal voorkomt dat het aantal blijft groeien.
Inplannen voor volgend kwartaal: URL's die door robots.txt geblokkeerd worden maar dat niet moeten zijn
Als pagina's die je geïndexeerd wilt hebben door robots.txt worden geblokkeerd, is de oorzaak een robots.txt-regel die breder is dan bedoeld. De fix vraagt dat je de oorspronkelijke bedoeling van de regel begrijpt en die aanpast zonder de terechte blokkades te verwijderen. Per kwartaal is het juiste ritme, omdat de fix vaak overleg in het team vraagt.
Nooit oplossen: 404's op bewust verwijderde pagina's
Als een pagina bewust is verwijderd en er geen vergelijkbare bestemming is, is een nette 404 het juiste antwoord. Een redirect naar je homepage of een algemene categoriepagina is erger dan de 404 laten staan: Google behandelt homepage-redirects vanaf niet-verwante 404's als soft 404's, en dat is erger dan de oorspronkelijke 404.
Nooit oplossen: 4xx-fouten op URL's die je niet zelf beheert
Als Search Console URL's markeert die er vreemd uitzien (willekeurige parameters, hash-fragmenten, aanvalspogingen), zijn dat meestal externe bots die je site aftasten. De juiste reactie is ze negeren. Elke fout proberen te ‘fixen’ levert werk op zonder waarde.
Nooit oplossen: crawlfouten onder de betekenisvolle drempel
Een site met 50.000 pagina's heeft op elk moment altijd een paar tientallen incidentele crawlfouten. Het aantal fouten komt op een echte site nooit op nul. Streef naar een lage, stabiele foutenratio in plaats van nul.
Zo gebruik je de rapportage van Search Console
Het dekkingsrapport groepeert fouten per type, en dat is de juiste eenheid voor triage. Kijk meer naar het verloop in de tijd dan naar het absolute aantal: een groeiend aantal fouten van één type wijst op een opkomend probleem. Een stabiel aantal fouten dat maandenlang niet is veranderd, is achtergrondruis.
Continue monitoring versus Search Console
Search Console meldt crawlfouten met enkele dagen vertraging. Een continue site-audit signaleert problemen uren nadat ze zijn ontstaan, waardoor de reactietijd voor de urgente categorieën korter wordt. UtilitySEO en vergelijkbare tools tonen crawlproblemen in realtime, wat het meest uitmaakt voor de categorieën ‘vandaag oplossen’.
Het triagemodel (vandaag oplossen, deze week oplossen, deze maand oplossen, inplannen voor volgend kwartaal, nooit oplossen) is belangrijker dan welke tool dan ook. De meeste SEO-teams reageren te sterk op niet-urgente crawlfouten en te zwak op de echt urgente. De urgentie goed inschatten is de echte winst.
Veelgestelde vragen
Bij het prioriteren van **crawlfouten** beoordeel je hun directe impact op zichtbaarheid en gebruikerservaring en sorteer je ze op urgentie, zodat je SEO-werk zo effectief mogelijk is.
- Los kritieke problemen zoals 500-fouten op belangrijke pagina's vandaag op.
- Pak 404's op pagina's die rankten en redirectketens binnen de week aan.
- Zoek crawlanomalieën en interne 404's deze maand uit.
- Plan minder urgente soft 404's en robots.txt-problemen per kwartaal in.
Je moet **crawlfouten** zoals 500-serverfouten op belangrijke pagina's en onbedoelde noindex-tags op live pagina's die geïndexeerd moeten worden meteen oplossen.
- Serverfouten op sleutelpagina's leiden tot snelle deïndexering en verlies van verkeer.
- Verkeerde noindex-tags zorgen ervoor dat essentiële inhoud niet gevonden wordt.
- Deze problemen hebben een grote en directe negatieve impact.
- Snel handelen beperkt verloren vertoningen en klikken.
Je moet 404-**crawlfouten** op URL's die eerder rankten voor waardevolle zoekopdrachten binnen de week aanpakken, om het langzaam weglekken van linkwaarde en verkeer te voorkomen.
- Herstel de pagina als die nog op je site moet bestaan.
- Stel een 301-redirect in naar een relevante, bestaande pagina.
- Als je deze 404's negeert, gaan de SEO-prestaties na verloop van tijd achteruit.
- Snel handelen helpt waardevolle zichtbaarheid in de zoekresultaten te behouden.
Een ‘crawlanomalie’ betekent dat Google bij het crawlen van een pagina een onverwacht probleem tegenkwam, en deze **crawlfouten** verbergen vaak specifiekere onderliggende problemen.
- Zoek deze fouten uit om verborgen problemen op te sporen.
- Veelvoorkomende oorzaken zijn wisselende server-timeouts of robots.txt-problemen.
- Wie de oorzaak aanpakt, lost de anomalie op.
- Plan onderzoek en oplossing binnen de maand in.
Het oplossen van soft 404-**crawlfouten** is belangrijk om de kwaliteit van je site op de lange termijn te bewaken, want als ze zich opstapelen kan dat het beeld dat Google van je website heeft verslechteren.
- Soft 404's geven status 200 terug maar tonen ‘niet gevonden’-inhoud.
- Afzonderlijk hebben ze beperkte directe impact.
- Ruim per kwartaal op, zodat het aantal niet groeit.
- Dat verbetert de algehele gezondheid van je site en de gebruikerservaring.
Weet wat je nu moet oplossen.
Scan je website voor een duidelijker beginpunt.
Ongeveer 30 seconden. Geen creditcard nodig.