OAI-SearchBot
Auch: OpenAI SearchBot, ChatGPT-Suchcrawler
OAI-SearchBot ist der Crawler von OpenAI, der Websites für die Suchfunktion von ChatGPT erfasst. Wer ihn sperrt, erscheint nicht in den Suchantworten von ChatGPT.
OAI-SearchBot ist der Crawler, mit dem OpenAI Websites für die Suchfunktion von ChatGPT erfasst. Laut OpenAI werden Websites, die OAI-SearchBot aussperren, nicht in den Suchantworten von ChatGPT gezeigt, können aber noch als Navigationslinks erscheinen. Er ist unabhängig von GPTBot, der Inhalte für das Training sammelt.
| Crawler | Aufgabe laut OpenAI |
|---|---|
| OAI-SearchBot | Websites für die Suche in ChatGPT erfassen |
| GPTBot | Inhalte crawlen, die für das Training von Modellen genutzt werden können |
| ChatGPT-User | Seiten abrufen, wenn Nutzer ChatGPT oder einem Custom GPT eine Frage stellen |
# In der ChatGPT-Suche sichtbar bleiben, Training ausschließen
User-agent: OAI-SearchBot
Allow: /
User-agent: GPTBot
Disallow: /Bedeutung für KI-Sichtbarkeit
Wer in der ChatGPT-Suche als Quelle erscheinen möchte, muss OAI-SearchBot zulassen. Laut OpenAI ist jede Einstellung unabhängig von den anderen, Sie können also das Training ausschließen und trotzdem in der Suche auftauchen. Mehr dazu im Ratgeber ChatGPT SEO und unter KI-Crawler.
Praxis: KI-Crawler in Logfiles erkennen und Cloudflare und KI-Crawler.
Häufige Fragen
Muss ich GPTBot zulassen, um in ChatGPT zu erscheinen?
Nein. Für die Suche ist OAI-SearchBot zuständig. GPTBot betrifft das Training der Modelle.
Wie prüfe ich, ob OAI-SearchBot meine Seite besucht?
In den Server-Logfiles anhand des User-Agents. OpenAI veröffentlicht zusätzlich die IP-Bereiche seiner Crawler.