KI-Suchcrawler werden durch robots.txt blockiert
8User-agent: OAI-SearchBot 9Disallow: /
Die ChatGPT-Suche nutzt diesen Crawler, um Seiten zu finden, auf die sie sich beziehen könnte. Das Blockieren von Trainings-Crawlern ist eine separate Entscheidung und senkt Ihre Punktzahl nicht.

