SEO
Een pagina die ineens niet meer is geïndexeerd herstellen
Verdwijnt een belangrijke pagina ineens uit de index? Dit is de herstelaanpak: wat je controleert, in welke volgorde en hoe snel je weer terug bent.
Een pagina die scoorde, verkeer opleverde, in de index stond en er ineens niet meer in staat. Dit is een van de zwaarste SEO-incidenten, want elke dag dat de pagina eruit ligt, verlies je het verkeer en de posities die ze opleverde. Dit artikel is de gerichte herstelaanpak voor precies deze situatie, ongeveer in de volgorde waarin je hem het beste volgt.
Controleer of de pagina echt niet is geïndexeerd
Zoek in Google op de exacte URL. Gebruik de URL-inspectietool van Search Console. Beide moeten hetzelfde antwoord geven op de vraag of Google de pagina heeft geïndexeerd. Zegt de URL-inspectie dat de pagina is geïndexeerd, maar toont de zoekopdracht geen resultaat, dan is de indexering in orde en ligt het probleem elders (positieverlies, veranderde zoekopdracht, enzovoort).
Controleer of de pagina bereikbaar is
Open de URL zelf. Laadt hij? Geeft hij status 200? Controleer de headers met een tool als curl of Postman. Soms laadt een pagina in een browser, maar geeft hij door een verkeerde configuratie een 5xx-fout aan bots. Een pagina die om wat voor reden dan ook niet bereikbaar is voor Google, valt uit de index.
Controleer de canonical-tag
De meest voorkomende oorzaak van een eerder geïndexeerde pagina die niet meer is geïndexeerd, is een canonical-tag die naar een andere URL wijst. Een recente template-wijziging kan de verkeerde canonical hebben toegevoegd. Bekijk de paginabron op <link rel="canonical"> en controleer of die naar de pagina zelf wijst (of naar de bedoelde canonical-bestemming).
Controleer de noindex-metatag
De op één na meest voorkomende oorzaak is een noindex-metatag, meestal door een verkeerde CMS-configuratie of een fout bij een deployment. Zoek in de paginabron naar <meta name="robots" content="noindex">. Controleer ook de X-Robots-Tag in de HTTP-responseheaders, die functioneel hetzelfde doet maar makkelijker over het hoofd wordt gezien.
Controleer robots.txt
Een recent toegevoegde robots.txt-regel kan de pagina blokkeren. Gebruik de robots.txt-tester van Google of lees het bestand gewoon door en kijk of je URL onder een Disallow-regel valt. Blokkeren via robots.txt veroorzaakt niet direct deïndexering, maar voorkomt dat Google de pagina opnieuw crawlt, en dat heeft op termijn een vergelijkbaar effect.
Controleer Search Console op expliciete signalen
De URL-inspectietool van Search Console vertelt je waarom een bepaalde URL niet is geïndexeerd als Google daar een specifieke reden voor heeft. De categorieën zijn onder meer ‘Uitgesloten door noindex-tag’, ‘Pagina met omleiding’, ‘Gecrawld, momenteel niet geïndexeerd’, ‘Gevonden, momenteel niet geïndexeerd’ en meer. Elke categorie wijst op een specifieke oorzaak.
‘Gecrawld, momenteel niet geïndexeerd’ is de meest dubbelzinnige categorie: Google heeft de pagina gecrawld, maar besloot hem niet te indexeren. De oorzaak is meestal de kwaliteit van de content of te zwakke signalen; de oplossing is lastiger dan bij oorzaken op configuratieniveau.
Controleer op handmatige acties
Als meerdere belangrijke pagina's tegelijk uit de index zijn gevallen, controleer dan Search Console op handmatige acties. Een handmatige actie die de indexering raakt, is de zwaarste diagnose en vraagt om de procedure voor een herzieningsverzoek in plaats van de standaard herstelaanpak.
Controleer de sitemap
Controleer of de URL in je sitemap staat en of de sitemap is ingediend bij Search Console. Een URL die uit de sitemap verdwijnt, valt uiteindelijk uit de index, ook als hij nog live is.
Vraag herindexering aan
Zodra je de onderliggende oorzaak hebt gevonden en opgelost, vraag je met de URL-inspectietool van Search Console herindexering van die URL aan. Dat kost in feite niets en zorgt ervoor dat Google eerder opnieuw crawlt dan het uit zichzelf zou doen. De meeste pagina's staan binnen 1 tot 3 dagen na dit verzoek weer in de index als de oorzaak op configuratieniveau lag.
Wat je kunt verwachten van de hersteltijd
Oorzaken op configuratieniveau (canonical-tags, noindex-tags, robots.txt) zijn meestal binnen 1 tot 7 dagen na de correctie plus het herindexeringsverzoek hersteld. Oorzaken in de contentkwaliteit (‘Gecrawld, momenteel niet geïndexeerd’) herstellen trager, soms pas na 30 tot 60 dagen, en herstellen mogelijk niet zonder aanzienlijke verbetering van de content. Handmatige acties zijn opgelost nadat Google het herzieningsverzoek heeft beoordeeld, meestal na 2 tot 4 weken.
Als de pagina niet terugkomt
Als je de voor de hand liggende oorzaken hebt opgelost en de pagina na 30 dagen nog steeds niet terug is in de index, ligt het waarschijnlijk aan de contentkwaliteit. Google heeft besloten dat de pagina het indexeren niet waard is, ongeacht de signalen op de pagina. Herstel vraagt om inhoudelijke verbetering: de pagina moet echt beter worden dan wat nu scoort voor de doelzoekopdracht.
Voorkomen dat dit onopgemerkt gebeurt
Een continue sitemonitor volgt de indexeerbaarheid van elke pagina en geeft een melding bij wijzigingen. Zonder zoiets merk je misschien weken niet dat een belangrijke pagina uit de index is gevallen. UtilitySEO en vergelijkbare tools maken dit tot standaardgedrag in plaats van een functie die je zelf moet instellen.
De herstelaanpak is grotendeels checklistwerk. Het bijzondere is hoe snel het kan: merk je het probleem binnen enkele uren op en los je het binnen enkele uren op, dan blijft de schade klein. Merk je het pas na weken, dan loopt de schade op. De aanpak zelf is hetzelfde, ongeacht wanneer je het ontdekt; de urgentie is de variabele.
Veelgestelde vragen
Om te bevestigen dat een pagina niet is geïndexeerd, zoek je in Google op de exacte URL en gebruik je de URL-inspectietool van Google Search Console voor een definitieve status.
- Zoek direct in Google op de volledige URL van de pagina.
- Gebruik de URL-inspectietool van Search Console voor een nauwkeurige status.
- Als beide hetzelfde antwoord geven, zie je de indexeringsstatus van de pagina.
Een veelvoorkomende reden dat een eerder geïndexeerde pagina niet meer is geïndexeerd, zijn verkeerd ingestelde canonical-tags of een per ongeluk toegevoegde noindex-metatag.
- Onjuiste canonical-tags die naar een andere URL wijzen.
- Een <meta name="robots" content="noindex">-tag in de paginabron.
- Een X-Robots-Tag in de HTTP-headers die deïndexering veroorzaakt.
Om een niet-geïndexeerde pagina te herstellen, bevestig je eerst met Google-zoekopdrachten en Search Console dat hij echt niet is geïndexeerd, en controleer je daarna of de pagina bereikbaar is en status 200 geeft.
- Controleer de indexeringsstatus van de pagina met Google Zoeken en Search Console.
- Controleer of de URL goed laadt en HTTP-statuscode 200 geeft.
- Gebruik tools als ‘curl’ om te controleren dat ook bots hem kunnen bereiken.
De URL-inspectietool van Google Search Console is onmisbaar bij het diagnosticeren van een niet-geïndexeerde pagina, omdat hij rechtstreeks van Google specifieke redenen voor uitsluiting geeft, zoals ‘noindex’ of omleidingen.
- De URL-inspectietool toont de specifieke redenen voor uitsluiting.
- Let op categorieën als ‘Uitgesloten door noindex-tag’ of ‘Pagina met omleiding’.
- ‘Gecrawld, momenteel niet geïndexeerd’ wijst eerder op kwaliteitsproblemen dan op technische blokkades.
‘Gecrawld, momenteel niet geïndexeerd’ betekent bij een niet-geïndexeerde pagina dat Google hem heeft bezocht maar ervoor koos hem niet te indexeren, vaak door de contentkwaliteit of te zwakke signalen.
- Google heeft de pagina verwerkt, maar niet waardevol genoeg bevonden.
- Deze status wijst vaak op problemen met contentkwaliteit of relevantie.
- Oplossen vraagt om betere content, niet om technische configuratie.
Hoewel robots.txt een pagina niet direct deïndexeert, voorkomt het dat Google opnieuw crawlt, waardoor de pagina na verloop van tijd uit de index kan verdwijnen.
- Disallow-regels in robots.txt blokkeren Googlebot de toegang tot de pagina.
- Uitblijvend opnieuw crawlen kan na verloop van tijd tot deïndexering leiden.
- Gebruik de robots.txt-tester van Google om te controleren welke regels je URL raken.
Weet wat je nu moet oplossen.
Scan je website voor een duidelijker beginpunt.
Ongeveer 30 seconden. Geen creditcard nodig.