Noindex is een instructie waarmee je zoekmachines vraagt een pagina niet op te nemen in hun zoekresultaten. Er zijn twee vormen: een meta robots-tag in de HTML of de HTTP-header X-Robots-Tag. De header werkt ook voor bestanden zonder HTML, zoals pdf’s. Google legt beide uit in Block search indexing with noindex.
Voorbeeld
<meta name="robots" content="noindex">Een noindex is vaak precies de bedoeling, bijvoorbeeld op een bedankpagina na een bestelling of op interne zoekresultaten.
Veelgemaakte fout
De pagina ook blokkeren in robots.txt. Google moet de pagina kunnen ophalen om de noindex te lezen. Is hij geblokkeerd, dan ziet Google de instructie niet en kan de URL toch in de resultaten verschijnen als andere pagina’s ernaar linken.
Een tweede fout: een noindex die na de bouw of een testperiode is blijven staan. Dan verdwijnt een pagina die je juist gevonden wilt hebben.
Hoe controleer je het?
Gebruik de URL-inspectie in Google Search Console om te zien welke HTML Google heeft ontvangen. Het rapport Pagina-indexering toont pagina’s waarop Google een noindex vond. Staat een pagina na het weghalen van de noindex nog niet in Google, dan is hij vaak nog niet opnieuw gecrawld; via de URL-inspectie kun je dat aanvragen. Meer oorzaken lees je in Waarom staat mijn pagina niet in Google?