GPTBot

GPTBot is de crawler (indexeringsrobot) van OpenAI die het web doorzoekt om data te verzamelen die door ChatGPT in zijn antwoorden wordt gebruikt. Zijn user-agent is GPTBot en hij respecteert de directieven van het robots.txt-bestand.

GPTBot en zichtbaarheid in ChatGPT

Als je robots.txt GPTBot blokkeert, zijn je pagina's niet toegankelijk voor ChatGPT en kun je niet worden geciteerd in zijn antwoorden. Dit is een veelvoorkomende fout: sommige sites blokkeren standaard alle bots, inclusief AI-crawlers. Controleer je configuratie met onze gids Robots.txt en AI-crawlers.

De belangrijkste AI-crawlers

Naast GPTBot zijn de andere AI-crawlers om te kennen PerplexityBot (Perplexity AI), ClaudeBot (Anthropic/Claude), Bingbot (Microsoft/Copilot) en Google-Extended (Gemini). Ze moeten allemaal worden toegestaan in je robots.txt om je GEO-zichtbaarheid te maximaliseren.