Indexering is het proces waarbij een zoekmachine de inhoud van een webpagina analyseert en opslaat in een grote database, de index. Alleen pagina’s die in de index staan, kunnen in de zoekresultaten verschijnen.
Hoe indexering werkt
Eerst bezoekt de zoekmachine een pagina; dat heet crawling. Daarna leest ze de tekst, de titel, de afbeeldingen, de links en andere gegevens en slaat die op. Bij een zoekopdracht doorzoekt de zoekmachine de index, niet het hele internet op dat moment.
Een pagina kan na het bezoek enige tijd nodig hebben voordat ze in de index staat. Een zoekmachine beslist zelf of een pagina wordt opgenomen.
Waarom een pagina niet geïndexeerd wordt
Er zijn verschillende redenen waarom een pagina niet in de index komt:
- De pagina bevat een instructie, noindex, die vraagt haar niet op te nemen.
- De pagina is geblokkeerd voor bezoek, bijvoorbeeld via robots.txt.
- De pagina heeft weinig eigen inhoud of lijkt sterk op een andere pagina.
- De pagina is te nieuw of is niet via links of een sitemap te vinden.
- Er is een technische fout, zoals een foutmelding van de server.
Indexering controleren
In Google Search Console is per adres te zien of een pagina in Google is opgenomen en zo niet, waarom niet. Een XML-sitemap kan helpen om pagina’s te laten ontdekken.
Wie een pagina bewust uit de zoekresultaten wil houden, zoals een bedankpagina of een interne zoekpagina, gebruikt daarvoor de noindex-instructie.
Indexering en zoekresultaten
Een pagina in de index is nog geen pagina die hoog in de resultaten staat. Indexering betekent alleen dat de pagina kan worden getoond als ze past bij een zoekopdracht. Bij elke zoekopdracht bepaalt de zoekmachine opnieuw welke geïndexeerde pagina’s worden getoond en in welke volgorde. Indexering is dus een voorwaarde voor vindbaarheid, geen garantie.
