Kennisbank

SEO & GEO

Logbestandanalyse voor SEO: zien wat Googlebot echt doet

Bij een logbestandanalyse voor SEO bekijk je in de toegangslogs van je server welke pagina's Googlebot en andere crawlers opvragen, hoe vaak en met welke statuscode. Zo zie je of het crawlwerk naar je belangrijke pagina's gaat of verloren gaat aan parameters, redirects en fouten. Het is vooral zinvol voor grote websites en webshops, en vult de crawlstatistieken in Search Console aan.

Bijgewerkt op November 16, 2026

Search Console laat zien hoe Google je website ziet, maar in samengevatte vorm. De logbestanden van je server laten zien wat er werkelijk gebeurt: elk verzoek van elke crawler, met tijdstip, URL en statuscode. Voor grote websites en webshops is dat de meest directe manier om te zien waar het crawlwerk naartoe gaat.

Wat staat er in een logbestand?

Een toegangslog bevat per verzoek onder meer het tijdstip, de opgevraagde URL, de statuscode, de user-agent en het IP-adres van de bezoeker. Bij een CDN staan de logs vaak bij de CDN-aanbieder in plaats van op je eigen server. Zie serverlogboeken lezen voor waar je ze meestal vindt.

Logbestanden of Search Console?

  • Search Console geeft onder Instellingen → Crawlstatistieken een overzicht van het aantal verzoeken, de reactietijd en de verdeling naar statuscode en bestandstype. Handig voor een eerste beeld.
  • Logbestanden laten per URL zien wanneer en hoe vaak hij is opgevraagd. Daarmee kun je per paginatype rekenen en zie je ook andere crawlers, zoals Bingbot en AI-crawlers.

Gebruik ze samen: Search Console voor de trend, logbestanden voor de details.

Echte Googlebot herkennen

Iedereen kan zich in een user-agent als Googlebot voordoen. Controleer daarom of verzoeken echt van Google komen. Google beschrijft twee manieren: een omgekeerde DNS-lookup van het IP-adres, die moet uitkomen op googlebot.com of google.com en terug moet verwijzen naar hetzelfde IP-adres, of een vergelijking met de IP-bereiken die Google publiceert. Voor AI-crawlers werkt het vergelijkbaar; zie AI-bots herkennen in serverlogs.

Wat je analyseert

  • Verdeling per paginatype: hoeveel verzoeken gaan naar producten, categorieën, content, filters en parameters? Komt het meeste werk terecht bij de pagina's die ertoe doen?
  • Verspilling: verzoeken naar URL's met parameters, sorteringen, redirects en 404-pagina's. Zie filters en facetnavigatie en redirectketens.
  • Belangrijke pagina's die weinig bezocht worden: vergelijk de lijst met gecrawlde URL's met je sitemap. Pagina's die in de sitemap staan maar nooit gecrawld worden, verdienen aandacht.
  • Serverfouten: veel 5xx-meldingen of trage reacties kunnen ertoe leiden dat Google minder crawlt. Zie crawlbudget.
  • Nieuwe pagina's: hoe lang duurt het voordat een nieuwe pagina voor het eerst wordt opgevraagd?

Zo pak je het aan

  1. Vraag de toegangslogs op over een periode van enkele weken, bij je hostingpartij of CDN.
  2. Filter op de crawlers die je wilt onderzoeken en controleer of het echte crawlers zijn.
  3. Deel de URL's in naar paginatype, op basis van je URL-structuur.
  4. Tel per type het aantal verzoeken en de statuscodes, en vergelijk met je sitemap.
  5. Maak een korte lijst met maatregelen, zoals URL's uitsluiten, redirects opruimen of interne links verbeteren.
  6. Herhaal de analyse na een paar maanden om het effect te zien.

Voorbeeld

Stel: bij een webshop blijkt uit de logs dat het grootste deel van de verzoeken van Googlebot naar URL's met sorteer- en filterparameters gaat. Productpagina's die in de sitemap staan, worden soms wekenlang niet opgevraagd. Na het uitsluiten van sorteringen en het opruimen van interne links naar redirects verschuift het crawlwerk zichtbaar naar product- en categoriepagina's.

Veelgestelde vragen

Is logbestandanalyse nodig voor een kleine website?

Meestal niet. Voor een bedrijfswebsite met enkele honderden pagina's geven Search Console en een crawl met een SEO-tool genoeg inzicht.

Welke tools gebruik je?

Voor kleinere bestanden volstaat een spreadsheet. Voor grote bestanden zijn er gespecialiseerde tools, zoals de log file analyser van Screaming Frog, of een eigen analyse in een database.

Mag ik logbestanden met IP-adressen zomaar analyseren?

IP-adressen zijn persoonsgegevens. Beperk je tot wat nodig is: filter op crawlers, maak bezoekers-IP's onherkenbaar en bewaar de bestanden kort. Leg afspraken vast met je hostingpartij.

Hulp nodig?

Wil je weten waar het crawlwerk op je website naartoe gaat? Een logbestandanalyse is onderdeel van technische SEO en van de SEO-groeistrategie voor grote websites.

Toegangslogs bevatten IP-adressen van bezoekers. Die gelden als persoonsgegevens. Vraag alleen de periode op die je nodig hebt, filter op crawlers en bewaar de bestanden niet langer dan nodig.

Kennisbank

Verder lezen

Verder lezen in de kennisbank

Hulp nodig bij jouw situatie?

Wil je dit niet zelf uitzoeken, of wil je weten wat het voor jouw website, vindbaarheid of systemen betekent? Plan een vrijblijvend gesprek, of laat eerst je vindbaarheid in Google en AI-assistenten controleren.

Liever mailen of bellen? Neem contact op.