GPTBot
Auch: OpenAI GPTBot, OpenAI-Crawler
GPTBot ist der Crawler von OpenAI, der Inhalte aus dem Web für das Training von KI-Modellen sammelt.
GPTBot ist ein Crawler von OpenAI. Laut OpenAI dient er dazu, Inhalte zu sammeln, die für das Training der generativen KI-Modelle genutzt werden können. Er ist unabhängig von OAI-SearchBot, der Websites für die Suche in ChatGPT erfasst. Website-Betreiber können beide Crawler in der robots.txt getrennt steuern.
Bedeutung für KI-Sichtbarkeit
Eine Sperre von GPTBot verhindert laut OpenAI nicht, dass Ihre Seite in den Suchergebnissen von ChatGPT erscheint, solange OAI-SearchBot erlaubt ist. Ob Sie das Training erlauben, ist eine eigene Abwägung. Laut Vercel führt GPTBot kein JavaScript aus, siehe JavaScript und KI-Crawler.
User-agent: GPTBot
Disallow: /Häufige Fragen
Wie erkenne ich GPTBot in den Logfiles?
Am User-Agent „GPTBot“. Zur Absicherung gleichen Sie die IP-Adresse mit der von OpenAI veröffentlichten Liste ab, siehe KI-Crawler in Logfiles erkennen.
Muss ich GPTBot erlauben, um in ChatGPT zu erscheinen?
Für die Suche in ChatGPT ist OAI-SearchBot maßgeblich, nicht GPTBot.