Wat is indexeerbaarheid?
Indexeerbaarheid is het vermogen van een webpagina om geïndexeerd te worden door zoekmachines. Alleen indexeerbare pagina's kunnen worden weergegeven in zoekresultaten.
Om een webpagina te indexeren, moeten zoekmachines, zoals Google:
- Ontdek de URL van de pagina
- Crawlen (de inhoud downloaden)
- Verwerken (belangrijke informatie begrijpen en extraheren uit gecrawlde pagina's)
Alleen dan kan de pagina verschijnen in de zoekresultaten.
Als webcrawlers hun werk niet kunnen doen en een pagina op uw site niet kunnen crawlen, dan kan die pagina niet op de juiste manier worden geïndexeerd. En zonder indexering kan de pagina op uw website geen zoekverkeer opleveren omdat hij onzichtbaar blijft voor zoekmachines.
Waarom is indexeerbaarheid belangrijk?
Indexeerbaarheid zorgt ervoor dat zoekmachines de pagina's van uw website kunnen weergeven in SERPs. Zonder indexering kunt u geen organisch zoekverkeer naar uw site leiden.
Soms is het zinvoller om bepaalde pagina's niet indexeerbaar te maken. Niet-indexeerbare pagina's hebben bijvoorbeeld de voorkeur als het gaat om landingspagina's, pagina's van lage kwaliteit of pagina's met "Bedankt voor uw inschrijving". Je wilt immers niet dat deze pagina's in de zoekresultaten verschijnen.
Ervan uitgaande dat je de URL's wilt laten scoren, moet je er echter voor zorgen dat die pagina's zowel crawlable als indexeerbaar zijn.
Wat maakt een pagina indexeerbaar?
Om als "indexeerbaar" te worden beschouwd, moet de pagina aan de volgende criteria voldoen:
1. De pagina moet Crawlable zijn
Een webpagina kan alleen worden geïndexeerd als de crawlers van de zoekmachine eerst toegang hebben tot de inhoud en deze kunnen crawlen. Eén ding dat een directe invloed heeft op de "crawlbaarheid" van een webpagina is het robots.txt-bestand.
Een robots.txt-bestand is een klein bestand in de hoofdmap van uw website. Het is bedoeld om instructies te geven aan webcrawlers en hen te vertellen welke pagina's op uw site niet mogen worden gecrawld. Anders zullen bots elke pagina crawlen die ze kunnen vinden op de website; dit doen ze standaard.
Er zijn gevallen waarin het plaatsen van dergelijke "beperkingen" zinvol is. Toch is het essentieel om ervoor te zorgen dat je niet onbewust de pagina's blokkeert die je wilt laten indexeren.
2. De pagina mag geen "Noindex"-tag hebben
Een "noindex"-tag is een on-page richtlijn die de zoekmachine opdraagt een specifieke pagina niet te indexeren. In principe wordt hiermee voorkomen dat een pagina wordt weergegeven in SERP's.
Soms is het raadzaam om bepaalde pagina's te "noindexeren" - zoals landingspagina's, aanmeldingspagina's, dunne pagina's of pagina's van lage kwaliteit, of "Bedankt"-pagina's - en ze "privé" te houden.
Als je deze richtlijn echter verkeerd gebruikt of bijvoorbeeld vergeet te verwijderen van de pagina die je wilt laten indexeren, verlies je organisch zoekverkeer.
U kunt uw website crawlen met Ranktracker's Site Audit tool om ervoor te zorgen dat geen van de pagina's die u wilt indexeren een "noindex" tag hebben.
3. De pagina moet Canoniek zijn
Een canonieke tag (rel="canonical") in een paginacode definieert de hoofdversie voor dubbele, bijna-dubbele en vergelijkbare pagina's. Dit betekent dat alleen canonieke pagina's geïndexeerd kunnen worden. Dit betekent dat alleen canonieke pagina's kunnen worden geïndexeerd, terwijl hun niet-canonieke versies worden uitgesloten.
Tenzij je de canonical-tag toevoegt aan een pagina, vertrouwt Google op signalen zoals interne en externe backlinks, de XML-sitemap en redirects om te bepalen welke URL dat cluster 'vertegenwoordigt' in de index.
Dat betekent dat als u wilt dat uw pagina wordt weergegeven in de zoekresultaten, deze geen andere pagina als zijn canonieke versie mag declareren. Een goede SEO-praktijk is om zelfverwijzende canonieke tags te hebben voor indexeerbare pagina's.
Hoe u Google kunt helpen uw pagina te indexeren
Dit is wat u kunt doen om Google te helpen de pagina's van uw site te indexeren:
1. Sitemaps indienen bij Google
Een sitemap is in wezen een lijst (meestal in XML-indeling) met alle pagina's op uw website.
De rol van de sitemap is om Google te vertellen welke pagina's u op uw site wilt laten indexeren.
Controleer voordat je een sitemap indient of deze de huidige staat van je website weergeeft en herstel eventuele fouten, zoals gebroken links, verweesde pagina's en dergelijke.
U kunt uw sitemaps bij Google indienen via de Google Search Console.
2. Individuele pagina's indienen via de URL-inspectietool
Als u de indexering of herindexering van slechts enkele afzonderlijke URL's wilt aanvragen, kunt u de URL-inspectietool in Google Search Console gebruiken.
De URL-inspectietool is een diagnostische tool die te vinden is in de Google Search Console en die u inzicht geeft in de geïndexeerde versie van uw webpagina door Google en waarmee u onder andere de URL's live kunt testen en de gerenderde versie van de pagina kunt bekijken.
Je kunt ook afzonderlijke pagina's indienen bij Google.
Als u een nieuwe URL wilt laten indexeren - of bijgewerkte URL's opnieuw wilt laten crawlen en indexeren - kunt u dit aan Google doorgeven door de knop "Indexering aanvragen" te selecteren. Als uw live URL geen fouten bevat, voegt Google uw pagina toe aan de crawlwachtrij.
Houd er wel rekening mee dat er een limiet is aan het aantal URL's dat je per dag kunt laten indexeren.
3. Zorg voor interne links voor betere/snellere vindbaarheid
Een andere manier om crawling aan te moedigen en zo de indexatie van de website te versnellen, is door gebruik te maken van interne links.
Wanneer ze het internet afstruinen, volgen de crawlers van Google een pad dat wordt gevormd door links. Dus wanneer een pagina op uw website naar een andere pagina linkt, zullen deze crawlers het bestaande pad volgen en nieuwe inhoud ontdekken.
Pagina's zonder interne links worden "weespagina's" genoemd.
Daarom is het cruciaal dat je zorgt voor interne links van en naar je belangrijkste pagina's. Toegegeven, dat gebeurt meestal vanzelf als je een goed georganiseerde site maakt.
Het kan echter geen kwaad om te controleren of er verweesde pagina's - zoals pagina's die geen interne links hebben die ernaar verwijzen - op uw website zijn. Je kunt dit doen met de Site Audit tool van Ranktracker.
Een aanverwante opmerking is dat je ervoor moet zorgen dat deze interne links naar indexeerbare pagina's geen "nofollow"-tag hebben, omdat Google nofollow-links niet crawlt.
FAQs
Wat is de rol van het bestand Robots.txt bij indexeerbaarheid?
Het robots.txt-bestand geeft instructies aan webcrawlers over welke pagina's of secties van uw site niet mogen worden gecrawld, wat van invloed is op de crawlability en vervolgens op de indexability van uw pagina's.
Hoe kan ik controleren of mijn pagina's geïndexeerd zijn?
U kunt controleren of uw pagina's zijn geïndexeerd met behulp van de Google Search Console. De tool geeft inzicht in de geïndexeerde status van je URL's.
Wat is de invloed van verweesde pagina's op indexeerbaarheid?
Weespagina's, waar geen interne links naar verwijzen, worden minder snel ontdekt en geïndexeerd door zoekmachines. Als u ervoor zorgt dat alle belangrijke pagina's goed zijn gelinkt binnen uw site, wordt hun indexeerbaarheid verbeterd.
Door ervoor te zorgen dat uw pagina's crawlablebaar zijn, geen "noindex"-tags bevatten en correct zijn gecanonicaliseerd, kunt u de kans vergroten dat ze worden geïndexeerd en verschijnen in de resultaten van zoekmachines. Regelmatige audits en strategisch intern linken kunnen dit doel verder ondersteunen.
