Alles over zoekmachinesitemaps
Dit artikel is onderdeel van het dossier: Zoekmachines
Waarschijnlijk kent u het fenomeen 'sitemap' al als een lijst met links die als een soort plattegrond de volledige paginastructuur van een website toont. Een voorbeeld van zo'n sitemap vindt u hier. Er is echter nóg een type sitemap, de zoekmachinesitemap.
Wat is een zoekmachinesitemap?
De zoekmachinesitemap is, net als de normale sitemap, een lijst met links naar alle pagina's van uw website. De zoekmachinesitemap vertelt de zoekmachine zo welke pagina's er allemaal bestaan binnen uw internetsite. Daar kan bepaalde informatie aan worden toegevoegd, zodat we de zoekmachine onder andere kunnen vertellen wanneer een pagina voor het laatst is gewijzigd en welke prioriteit de pagina heeft. Al deze gegevens kunnen het de zoekmachine gemakkelijker maken om uw website te indexeren.
Zoekmachinesitemaps worden opgemaakt in XML, waarvan het formaat wordt beschreven op www.sitemaps.org. Oorspronkelijk was de sitemaps-standaard een initiatief van Google, maar de sitemaps worden alweer geruime tijd ondersteund door vrijwel alle zoekmachines.
Wanneer zijn deze sitemaps nuttig?
Zoals uitgelegd in het dossier over de werking van zoekmachines, struinen zoekmachines met hun crawlers continu het internet af om internetpagina's vindbaar te maken via hun resultaten. Hierbij volgen ze de links die ze tegenkomen. Bij het indexeren van uw website zal dit ook zo gaan, van tijd tot tijd komt de crawler langs op uw website en vraagt dan alle gelinkte pagina's op.
Het is mogelijk dat bepaalde pagina's door de zoekmachine nooit gevonden worden, omdat er geen links naar gelegd zijn of doordat de links niet zijn gemaakt op een manier die zoekmachines niet kunnen lezen, zoals met JavaScript. Dit is iets dat u eigenlijk moet proberen te voorkomen, maar soms is dit niet mogelijk.
De regelmaat waarmee zoekmachines uw site met een bezoekje vereren is onder meer afhankelijk van het aantal externe links naar uw domeinnaam en hoe vaak u uw site bijwerkt, zodat het enkele dagen of weken kan duren voor een verandering in uw site wordt opgemerkt.
Zoekmachine-sitemaps zijn met name nuttig voor:
- Sites die pagina's bevatten die voor zoekmachines via normale wegen niet bereikbaar zijn;
- Sites waarvan de pagina's regelmatig veranderen en waarbij het belangrijk is dat zoekmachines deze veranderingen snel weten (zoals blogs, nieuwssites en webshops);
- Sites die vanwege een gering aantal inkomende links nog niet vaak worden gespiderd;
- Sites die van domeinnaam veranderen (als alle oude pagina's correct worden doorgelinkt kan het verzenden van een sitemap van het oude domein de overgang in Google versnellen);
- Sites met een enorm aantal pagina's waarbij het met het normale crawlproces alleen te lang zou duren voor nieuwe en verwijderde pagina's worden opgemerkt.
De invloed van sitemaps op de positie in zoekmachines is vaag. Hoewel niet is bewezen dat een sitemap een hogere positie oplevert, is het natuurlijk wel belangrijk voor uw zichtbaarheid in Google dat alle pagina's van uw website zijn geïndexeerd. Sitemaps kunnen hier aan bijdragen.
Doordat een zoekmachinesitemap in één keer een lijst van alle pagina's doorgeeft, zal het natuurlijke crawlproces worden beïnvloed. Hier hebben we een aantal voordelen van opgenoemd, maar een nadeel is dat u minder inzicht zult kunnen krijgen in het functioneren van de linkstructuur (en het organische crawlen) van uw site. Wij adviseren het gebruik van deze sitemaps dan ook met name in gevallen waarbij van één of meerdere van bovenstaande situaties sprake is.
Hoe maak ik een sitemap?
Het genereren van een zoekmachinesitemap kan op twee manieren.
De eerste manier is gebruik te maken van een online sitemapgenerator, bijvoorbeeld de site XML-Sitemaps.com. Deze diensten bladeren geautomatiseerd (tot een bepaald maximaal aantal pagina's) door uw gehele website en genereren vervolgens een XML-bestand dat u kunt uploaden naar uw webserver. Nadeel van deze generators is dat ze juist de pagina's die door zoekmachines niet gezien worden overslaan omdat ook zij tegen dezelfde technische beperkingen aanlopen.
De tweede manier geniet de voorkeur, namelijk het zelf genereren van de sitemap. Als uw site gebruik maakt van een Content Management Systeem dan is het vaak vrij gemakkelijk om een sitemap te maken; veel CMS-systemen bieden dit standaard als optie en anders is het mogelijk om een script te (laten) ontwikkelen die aan de hand van de database van het CMS automatisch een zoekmachinesitemap van uw website creëert.
Is de sitemap klaar, dan is de volgende stap om zoekmachines te vertellen dat deze bestaat door deze aan te melden. Bij Google gaat dit via het Google Centrum voor Webmasters, waar u ook waardevolle diagnostische informatie over de indexering van uw website kunt raadplegen. Bij Yahoo gaat dit via hun Yahoo! Site Explorer.
Om van de sitemap te kunnen profiteren is het noodzakelijk dat deze regelmatig (bijvoorbeeld wekelijks of bij elke mutatie) wordt vernieuwd en dat van de nieuwe versie een notificatie wordt verstuurd naar de zoekmachines. Hoe dit in zijn werk gaat kunt u terugvinden op de bovengenoemde links.