Crawlertoegang

Zorg dat AI-bots je écht kunnen bereiken

Voordat je pagina’s herschrijft voor AEO, check of GPTBot, ClaudeBot, PerplexityBot en andere bekende crawlers zijn toegestaan — en of je homepage voor hen geen dunne JS-shell is.

robots.txt, per bot

We parsen je robots-regels voor de crawlers die ertoe doen bij AI-search, zodat één Disallow niet stilzwijgend de engines blokkeert waarvoor je optimaliseert.

Ophalen als de bot

We vragen je homepage op met de user-agent van elke bot en markeren responses die geblokkeerd, leeg of render-risico lijken voor non-JS-crawlers.

Eerlijke scope

Dit is een crawlability-check — geen volledige log-gebaseerde bot-analytics of AI-referral-attributie. Het beantwoordt één vraag goed: kunnen bekende AI-crawlers je site vandaag bereiken?

Ook in deze module

  • Checklist bekende AI-crawlers
  • robots.txt-parsing
  • Fetches met bot-user-agents
  • Toegangsscore 0–100

Word het merk dat AI aanbeveelt

Zie waar je staat in AI-antwoorden — en wat je moet doen om te winnen.