Sharing IT Best Practices with youSharing IT Best Practices with you
Spider
Spider tools vullen de databases van zoekmachines en als je je website wil optimaliseren voor zoekmachines, moet je weten hoe ze je site ‘zien’. Er zijn meerdere manieren, en tools, om dat te doen. In dit artikel een kleine bloemlezing. We concentreren ons op eenvoudige en goedkope opties die je op je eigen desktop kunt gebruiken.
De eerste is niet eens een tool, maar iets waar iedereen bij kan: de Google text cache. Dit is een opgeslagen versie van een pagina zoals het in de Google index staat, op het moment dat de Googlebot deze voor het laatst gedownload heeft. Je kunt die cache eenvoudig vinden, via https://smallseotools.com/google-cache-checker/. Er zijn drie resultaten: Volledige versie, Tekstversie en Bron weergeven. Het resultaat van de ITpedia tekstversie ziet er als volgt uit: http://webcache.googleusercontent.com/search?q=cache:itpedia.nl&num=1&strip=1&vwsrc=0
Deze links worden trouwens ook vaak gebruikt door Google spambestrijders om cloaking op te sporen.
Je hoeft niets voor de Google text cache te downloaden, maar misschien is de Firefox AddOn Greasemonkey (wat is Greasemonkey?) wel handig als je van plan bent om het vaker te gaan gebruiken.
Een andere manier om wat sneller meerdere tekstversies van een website te bekijken is door simpelweg te browsen over websites zonder dat JavaScript, CSS en cookies geladen worden. Daarvoor kun je bijvoorbeeld de Web Developer Toolbar van Firefox gebruiken (of equivalenten) en kiezen voor ‘Disable Styles -> Disable CSS’ en ‘Disable JavaScript’:
Je kunt ook een tekst-only browser gebruiken zoals Lynx, waarbij CSS en JavaScript standaard uit staan.
Web Developer Toolbar Firefox/Chrome
Het nadeel van Tekst caches en tekst-only browsers is dat je niet naar sites als geheel kunt kijken. Misschien wil je wel duizenden pagina’s van een site bekijken om naar bepaalde patronen te zoeken, bijvoorbeeld of duplicate content veel voorkomt op de site.
In dat geval kun je dus zelf een spider gebruiken die al die pagina’s langsgaat. Traditioneel maakte men daarbij altijd gebruik van 404-checkers, die een complete website spideren op zoek naar dode links. Daarover rapporteren ze dan.
Maar daarnaast geven ze ook allerlei aanvullende informatie, over andere fouten die ze tegenkomen, hoe vaak naar die pagina’s gelinkt wordt, wat de metatitles van die paginas zijn (je moet ze immers kunnen herkennen), ontbrekende alt-attributen, etc. Uiteraard kun je die data exporteren naar Excel of Refine voor nadere analyse.
Een goede voor Windows is Xenu, en een goede voor Mac is Integrity. Op SEOmoz hebben ze trouwens een tijdje terug een – terechte – bloemlezing gehouden over wat je allemaal met Xenu kunt doen.
Xenu – Windows
Integrity – Mac
Een nieuwe ster aan het firmament is de Screaming Frog SEO spider, die vergelijkbaar is met de eerdere crawlers. Het verschil hierbij is dat deze crawler speciaal voor SEO-doeleinden ontwikkeld is, nog meer data bekijkt, en ook naar custom code kan zoeken. Het rapporteert over alles wat op SEO-gebied van belang kan zijn. Ik heb ‘m bijvoorbeeld hieronder gebruikt voor mijn site en zie al snel dat sommige meta-descriptions ontbreken:
Nadeel van Screaming Frog is dat het 100 Britse ponden per jaar kost waar Xenu gratis is. Ikzelf vind deze tool het waard, maar ik gebruik ‘m dan ook veel.
Discussieer mee op LinkedIn.
Mogelijk is dit een vertaling van Google Translate en kan fouten bevatten. Klik hier om mee te helpen met het verbeteren van vertalingen.