Een sitemap lijst de URL’s van een site op zodat zoekmachines ze kunnen ontdekken en verkennen. De inhoud van een sitemap varieert afhankelijk van het gekozen formaat (XML, HTML, TXT), en niet alle tags hebben dezelfde werkelijke functie in de ogen van Google. Begrijpen wat de bots daadwerkelijk in dit bestand lezen, helpt om onnodige configuratiewerkzaamheden te vermijden.
XML-tags van de sitemap: wat Google daadwerkelijk benut
Het XML-formaat blijft de meest gebruikte standaard voor het verklaren van een sitemap. Elke invoer bevat potentieel vier tags: loc, lastmod, changefreq en priority.
Niet allemaal hebben ze hetzelfde gewicht. Google beschouwt de tags priority en changefreq niet langer als nuttige signalen. Alleen de tag lastmod behoudt een concrete rol: deze geeft de datum van de laatste significante wijziging van een pagina aan.
| XML-tag | Verklaring van de rol | In aanmerking genomen door Google |
|---|---|---|
| loc | URL van de pagina | Ja, verplicht |
| lastmod | Datum van de laatste wijziging | Ja, als de datum een echte wijziging weerspiegelt |
| changefreq | Geschatte frequentie van updates | Niet benut |
| priority | Relatieve prioriteit tussen pagina’s | Niet benut |
Deze tabel vat een opmerkelijke kloof samen tussen de specificatie van sitemaps.org en het werkelijke gebruik door zoekmachines. Het nauwkeurig configureren van changefreq en priority verandert noch de ranking, noch de verkenningsfrequentie. Daarentegen geeft een betrouwbare lastmod-waarde aan de bots aan dat een pagina een nieuwe bezoek waard is.
Om de concrete structuur van een XML-sitemap te observeren, de sitemap-pagina van de site Michelle Dastier illustreert goed hoe de URL’s zijn georganiseerd en getimed in dit type bestand.
Lastmod en werkelijke wijzigingen: de valkuil van de kunstmatige datum
De tag lastmod functioneert als een vertrouwenssignaal tussen de site en de zoekmachine. Google kan de datum die in de sitemap is opgegeven vergelijken met de daadwerkelijk waargenomen wijzigingen op de pagina tijdens de verkenning.
Het wijzigen van het copyrightjaar of het regenereren van het bestand is geen significante wijziging. Als de datum lastmod regelmatig vooruitgaat zonder dat de inhoud evolueert, negeert de bot deze informatie uiteindelijk. Het signaal verliest dan alle waarde, ook voor pagina’s waarvan de inhoud daadwerkelijk verandert.
Enkele wijzigingen worden als significant beschouwd in de ogen van de zoekmachines:
- Toevoegen of herschrijven van een alinea die de betekenis of reikwijdte van de pagina wijzigt
- Bijwerken van feitelijke gegevens (prijzen, data, regelgeving) in de tekst
- Toevoegen van een nieuw medium (afbeelding, video) vergezeld van relevante tekstuele inhoud
Een CMS dat automatisch de datum lastmod bijwerkt bij elke kleine wijziging (correctie van een fout, wijziging van categorie) stuurt een misleidend signaal. Het is beter om de update van deze tag te koppelen aan een substantiële wijziging van de zichtbare inhoud.
Sitemap XML, HTML en TXT: drie formaten voor verschillende toepassingen
De XML-sitemap is gericht op verkenningsbots. De HTML-sitemap is gericht op menselijke bezoekers: deze heeft de vorm van een klassieke webpagina die de secties en interne links van de site opsomt. De TXT-sitemap, eenvoudiger, beperkt zich tot een ruwe lijst van URL’s zonder metadata.
Het HTML-formaat heeft lange tijd gediend als een sitemap om de navigatie te vergemakkelijken. Op kleine sites met een duidelijk menu is het nut marginaal. Voor sites met enkele honderden pagina’s en diepe hiërarchieën, biedt een goed gestructureerde HTML-pagina een directe toegang tot verborgen pagina’s en completeert het de interne linkstructuur.
Het TXT-formaat ondersteunt geen tags (lastmod, changefreq, priority). Het is geschikt voor een minimale behoefte: het verklaren van URL’s zonder aanvullende informatie. Google accepteert het, maar het XML-formaat blijft de enige die bruikbare metadata doorgeeft.
Verklaring van de sitemap na het afschaffen van de Google-ping
Tot juni 2023 was het mogelijk om Google te informeren over een nieuwe sitemap via de URL google.com/ping?sitemap=.... Dit pingmechanisme is afgeschaft. Gidsen die deze methode nog steeds aanbevelen, zijn verouderd.
Drie kanalen blijven operationeel om een sitemap bij Google te verklaren:
- Het bestand indienen in Google Search Console, sectie “Sitemaps”
- De locatie van het bestand verklaren in het
robots.txt-bestand van de site (instructieSitemap:) - De bot het bestand laten ontdekken tijdens zijn gebruikelijke verkenning, op voorwaarde dat het toegankelijk is op de standaard URL (
/sitemap.xml)
Voor Bing maakt het IndexNow-protocol het mogelijk om snel nieuwe of gewijzigde URL’s te melden. Dit mechanisme, dat anders is dan de sitemap, vult de klassieke verklaring aan door de verwerking van wijzigingen te versnellen. Bing Webmaster Tools accepteert ook de directe indiening van de sitemap, op een manier die vergelijkbaar is met Google Search Console.
Inhoud van de sitemap en kwaliteit van de opgesomde URL’s
Alleen indexeerbare URL’s opsommen
Een sitemap die URL’s bevat die zijn geblokkeerd door het robots.txt-bestand, pagina’s die een 404-fout retourneren of pagina’s die zijn gemarkeerd met noindex, verstoort het signaal dat naar de zoekmachine wordt verzonden. Elke URL die in het bestand staat, moet overeenkomen met een toegankelijke, canonieke pagina die bedoeld is om in de zoekresultaten te verschijnen.
De sitemap aanpassen aan de grootte van de site
Een site met enkele tientallen pagina’s en een correcte interne linkstructuur heeft geen dringende behoefte aan een sitemap: de bots ontdekken de pagina’s door de links te volgen. De sitemap wordt echt nuttig voor grote of slecht gelinkte sites, waarvan sommige pagina’s wees blijven (er wijst geen interne link naar hen).
Een sitemap garandeert geen indexering. Het vergemakkelijkt de ontdekking van URL’s door bots, maar de beslissing om te indexeren hangt af van de kwaliteit van de inhoud, de afwezigheid van duplicaten en de technische conformiteit van elke pagina. Een URL in de sitemap verklaren zonder de inhoud of de interne linkstructuur te verbeteren, levert geen meetbare resultaten op.
