Indexeren
Indexeren is de stap waarin een zoekmachine een gecrawlde pagina verwerkt, de inhoud begrijpt en opslaat in zijn database. Alleen geïndexeerde pagina’s kunnen in de zoekresultaten verschijnen en worden opgepikt door AI-functies die op die index zijn gebouwd.
Nadat een pagina is gecrawld, analyseert Google hem: het leest de tekst, titel, koppen, afbeeldingen, gestructureerde data en links, bepaalt de taal en het hoofdonderwerp, en controleert of hij een andere URL dupliceert. Komt de pagina erdoor, dan wordt hij toegevoegd aan de index, een enorme database met documenten die Google doorzoekt als iemand een zoekopdracht intypt. Dat proces heet indexeren.
Indexering is niet gegarandeerd. Google indexeert alleen wat het de moeite waard vindt om op te slaan. Typische redenen waarom een pagina buiten de index blijft:
- Noindex in een meta robots-tag of X-Robots-Tag-header.
- Canonicalisatie: Google koos een andere URL als hoofdversie.
- Dubbele of dunne content die weinig toevoegt ten opzichte van pagina’s die al geïndexeerd zijn.
- Gecrawld - momenteel niet geïndexeerd: Google heeft hem opgehaald maar besloot hem niet te bewaren, vaak een kwaliteitssignaal.
- Ontdekt - momenteel niet geïndexeerd: Google weet dat de URL bestaat maar heeft hem nog niet gecrawld, vaak een probleem met crawlcapaciteit of interne links.
- Soft 404’s, serverfouten of redirects.
Waarom het verder gaat dan klassiek zoeken. AI Overviews en AI Mode van Google putten uit dezelfde zoekindex. Een pagina die niet geïndexeerd is, kan daar ook niet als bron verschijnen. Andere AI-assistenten die het web doorzoeken, gebruiken hun eigen index of een zoekpartner, dus goed geïndexeerd zijn in meer dan één zoekmachine vergroot de kans dat je wordt geciteerd.
Zo check je het. Het rapport Pagina-indexering in Google Search Console toont geïndexeerde en niet-geïndexeerde pagina’s met voor elke pagina de reden. De URL-inspectietool toont de status van één URL, de canonical die Google koos en of de pagina op dit moment geïndexeerd kan worden. Een site:-zoekopdracht geeft alleen een ruwe steekproef en is niet bruikbaar als exacte telling.
Praktische tips:
- Raak niet in paniek als niet elke URL geïndexeerd is. Tagpagina’s, gefilterde weergaven en gepagineerde archieven kunnen vaak beter buiten de index blijven.
- Richt je op de pagina’s die ertoe doen: zijn je belangrijkste categorieën, producten en artikelen geïndexeerd?
- Verbeter bij “Gecrawld - momenteel niet geïndexeerd” voor belangrijke pagina’s de content en interne links, in plaats van steeds op Indexering aanvragen te klikken.
- Houd sitemaps schoon, zodat ze alleen indexeerbare, canonieke URL’s bevatten die status 200 teruggeven.
Voor publishers is indexering een basiscontrole op kwaliteit. Een gesponsord artikel dat niet geïndexeerd is, geeft weinig waarde door aan de link van de adverteerder, dus het loont om te controleren of nieuwe artikelen binnen een redelijke termijn worden geïndexeerd.
Vragen over indexeren
Hoe lang duurt het voordat Google een nieuwe pagina indexeert?
Dat varieert van een paar uur tot een aantal weken. Pagina’s op sites die Google vaak crawlt, met goede interne links, worden meestal het snelst geïndexeerd.
Waarom is mijn pagina gecrawld maar niet geïndexeerd?
Google heeft hem opgehaald maar besloot dat hij het opslaan niet waard was, vaak omdat de content dun is, andere pagina’s dupliceert of de site bredere kwaliteitsproblemen heeft. De content verbeteren en vanaf sterke pagina’s ernaar linken helpt meestal.
Kan ik Google dwingen een pagina te indexeren?
Nee. Je kunt indexering aanvragen in de URL-inspectietool, maar Google beslist nog steeds of de pagina wordt opgenomen.