Wanneer je op een site naar specifieke informatie zoekt zonder de structuur te kennen, verlies je tijd met navigeren van menu naar menu. De sitemap lost dit probleem op door alle URL’s van een site in een gestructureerd formaat te vermelden. Op PEPSeo bestaat deze pagina en geeft toegang tot alle gepubliceerde inhoud, zowel voor een menselijke bezoeker als voor een indexeringsrobot.
Toegang tot de PEPSeo sitemap vanuit een browser
De handeling is eenvoudig: voeg /sitemap/ toe aan het einde van de domeinnaam in de adresbalk van de browser. De pagina die verschijnt toont een lijst van URL’s, soms gegroepeerd op categorieën of publicatiedata.
Deze reflex werkt op de meeste sites die worden aangedreven door een CMS zoals WordPress, dat automatisch een XML-sitemap genereert. Op PEPSeo is de structuur leesbaar zonder externe tools: je kunt de pagina’s van de PEPSeo site met één klik doorbladeren, recente rubrieken opsporen en snel een specifiek artikel of een dienst identificeren.
Voor degenen die liever vanuit een terminal werken, kan een eenvoudige curl of wget op de URL van de sitemap het ruwe XML-bestand ophalen en gefilterd worden met grep of een XML-parser. Zo krijg je de volledige lijst van URL’s zonder de grafische interface te gebruiken.
XML-sitemap en HTML-sitemap: twee verschillende toepassingen om een site te verkennen
Men verwart vaak de twee formaten omdat ze dezelfde naam dragen. Hun functie verschilt echter op een fundamenteel punt.
Het XML-bestand, bestemd voor robots
De XML-sitemap is een technisch bestand dat de URL’s opsomt met metadata zoals de datum van de laatste wijziging (lastmod) of de frequentie van updates. Zoekmachines gebruiken het om pagina’s te ontdekken en hun crawls te prioriteren.
Een vaak verwaarloosd detail: de lastmod-waarde moet een echte wijziging van de inhoud weerspiegelen. Deze datum bijwerken na een simpele cosmetische wijziging (een spatie, een komma) vermindert het vertrouwen dat zoekmachines aan deze informatie hechten. Bing vermeldt dit expliciet in zijn aanbevelingen aan webmasters.
De HTML-versie, ontworpen voor bezoekers
Een HTML-sitemap is een klassieke webpagina, met klikbare links georganiseerd op thema. Je gebruikt het wanneer je de architectuur van een site in één oogopslag wilt begrijpen, zonder rauwe XML te lezen.
Op een bescheiden site zoals PEPSeo blijft de HTML-sitemap de snelste manier voor een bezoeker om een specifieke pagina te vinden. Je hoeft de exacte zoekopdracht niet te kennen of via een interne zoekmachine te gaan.
Wat de sitemap niet doet: concrete beperkingen om te kennen
Men denkt soms dat als een URL in de sitemap staat, deze automatisch in Google zal verschijnen. Dat is niet waar. De sitemap vergemakkelijkt de ontdekking, niet de indexering.
Elke vermelde pagina moet nog steeds door de robot worden verkend, als toegankelijk worden beoordeeld (geen blokkering door robots.txt of noindex-tag), als canoniek worden beschouwd en als voldoende nuttig worden ingeschat om een plek in de index te verdienen. Een complete sitemap met pagina’s met foutcode 404 of gebroken omleidingen verbetert niets.
Hier zijn de veelvoorkomende fouten die de nuttigheid van een sitemap neutraliseren:
- Verwijderde of omgeleide URL’s in het bestand laten staan, wat de robots naar dode pagina’s leidt en het crawl-budget verspilt
- Pagina’s die met een wachtwoord zijn beveiligd of geblokkeerd door een noindex-richtlijn opnemen, wat een tegenstrijdigheid creëert tussen wat de sitemap aankondigt en wat de server toestaat
- Nooit het bestand bijwerken na een herstructurering of wijziging van de structuur, wat een verouderde kaart van de site fixeert
De beste praktijk is om alle URL’s die niet meer een 200-code retourneren uit de sitemap te verwijderen. Op WordPress doen de meeste SEO-plugins dit automatisch, maar een handmatige controle blijft nuttig na een inhoudsopruiming.
Sitemap en IndexNow: twee complementaire mechanismen om je pagina’s te signaleren
De sitemap beschrijft de volledige inventaris van een site op een bepaald moment. IndexNow beantwoordt aan een andere behoefte: in real-time een toegevoegde, gewijzigde of verwijderde URL signaleren aan de zoekmachines die het protocol ondersteunen (Bing, Yandex en enkele anderen).
Concreet, wanneer je een nieuw artikel op PEPSeo publiceert of een bestaande pagina corrigeert, duwt IndexNow de informatie naar de zoekmachines zonder te wachten op hun volgende crawl. De sitemap blijft de permanente referentie die de robots op hun eigen tempo raadplegen.
De combinatie van beide levert het beste resultaat op:
- De sitemap zorgt voor een globale dekking: alle pagina’s van de site zijn vermeld, zelfs diegene die lange tijd geleden zijn gepubliceerd
- IndexNow versnelt de verwerking van recente wijzigingen, wat vooral belangrijk is voor inhoud met een korte levensduur of dringende correcties
- URL’s die uit de sitemap zijn verwijderd, kunnen ook via IndexNow worden gesignaleerd, zodat de compatibele zoekmachines hun index sneller bijwerken
De meningen verschillen over de werkelijke impact van IndexNow afhankelijk van de zoekmachines, maar het protocol kost niets om op te zetten en creëert geen conflicten met een bestaande sitemap.
Controleer de consistentie tussen de sitemap en de werkelijke pagina’s van de site
Een sitemap verkennen zonder deze te vergelijken met de pagina’s die daadwerkelijk online staan, is alsof je een verouderde buurtkaart leest. De meest nuttige verificatiestap is om de URL’s van de sitemap te kruisen met de HTTP-responscodes.
Dit kan met een crawler zoals Screaming Frog of met een script dat elke URL van het XML-bestand doorloopt en de teruggegeven status noteert. Elke URL met 404, 410 of 301 moet worden verwijderd of gecorrigeerd. Op een actieve site is het raadzaam om deze operatie eenmaal per maand te plannen, of na elke groepsgewijze inhoudsverwijdering.
Op PEPSeo maakt de grootte van de site deze controle snel. Enkele minuten zijn voldoende om ervoor te zorgen dat elke link in de sitemap naar een functionele pagina wijst, en dat de kaart van de site nauwkeurig weergeeft wat daadwerkelijk raadpleegbaar is.
