noindexinstructies

Noindexinstructies zijn aanwijzingen die aan zoekmachines worden gegeven om een webpagina niet in de zoekindex op te nemen. In de praktijk gaat het meestal om een meta-robots-tag in de HTML van een pagina of om een HTTP-header die hetzelfde commando doorgeeft. Het doel is om te voorkomen dat specifieke pagina’s verschijnen in zoekresultaten, terwijl de pagina zelf nog steeds bereikbaar kan blijven.

Implementatiemethoden

De meest voorkomende manier is een meta-tag in de head van een HTML-pagina, bijvoorbeeld: <meta name="robots" content="noindex">. Vaak wordt dit gecombineerd met andere directives zoals nofollow. Een alternatief is de HTTP-header X-Robots-Tag: noindex, die dezelfde instructie op serverniveau geeft. Belangrijk is dat robots.txt geen noindex-directive ondersteunt; disallowing in robots.txt voorkomt alleen het crawlen, niet het indexeren.

Wanneer te gebruiken

Noindexinstructies worden vaak toegepast op pagina’s waarvan men niet wil dat ze in zoekresultaten verschijnen, zoals staging- of testpagina’s, dank- of bevestigingspagina’s, pagina’s met duplicaatcontent, privé-inhoud, of pagina’s met beperkte bruikbaarheid voor zoekers. Ze kunnen ook worden ingezet bij tijdelijke campagnes of bij pagina’s die gevoelig materiaal bevatten.

Beperkingen en overwegingen

Hoewel de meeste grote zoekmachines noindex respecteren, is het niet universeel gegarandeerd. Een pagina kan bijvoorbeeld nog steeds in de index verschijnen als andere sites ernaar linken of als de noindex-tag ontbreekt bij crawls. Bovendien werkt noindex niet retroactief; een pagina die al in de index staat wordt pas verwijderd na her-crawling. Voor onmiddellijke verwijdering kan men gebruikmaken van de verwijderings- of demarcatieopties in zoekmachineconsoles.

Zie ook

Andere technieken om zichtbaarheid te beheren zijn canonical-tags, robots-nofollow en beveiliging via wachtwoord.