AI-zoekcrawlers worden geblokkeerd door robots.txt
8User-agent: OAI-SearchBot 9Disallow: /
ChatGPT search gebruikt deze crawler om pagina's te vinden waarnaar het mogelijk verwijst. Trainingscrawlers blokkeren is een aparte keuze en verlaagt je score niet.

