GPTBot ist einer von mehreren OpenAI-User-Agents. OpenAI unterscheidet ihn ausdrücklich von OAI-SearchBot (ChatGPT Search) und ChatGPT-User (nutzerinitiierter Abruf). Diese Unterscheidung ist zentral, weil die Bots unterschiedliche Zwecke erfüllen.

wird typischerweise mit Modelltraining in Verbindung gebracht. Wer nicht möchtest, dass Inhalte für Training genutzt werden, kann ihn blockieren:

  • User-agent: GPTBot
  • Disallow: /

Wichtig ist, GPTBot nicht mit den Such- und Abruf-Bots zu verwechseln. Wer pauschal alle OpenAI-Bots sperrt, blockiert möglicherweise auch die Funktionen, die für Sichtbarkeit in ChatGPT relevant sind. Eine häufige Strategie ist, GPTBot zu blockieren, und aber zu erlauben.

GPTBot und die anderen OpenAI-Crawler #

GPTBot sammelt Inhalte für das Training künftiger OpenAI-Modelle. Er ist eine separate Entscheidung von OAI-SearchBot (dem hinter der ChatGPT-Suche) und ChatGPT-User (Live-Abrufe während Konversationen). GPTBot zu blockieren bedeutet nur den Verzicht aufs Training — es entfernt dich nicht aus den ChatGPT-Suchergebnissen oder dem Live-Browsing.

Erlauben oder blockieren? #

Publisher mit Bezahlinhalten blockieren GPTBot oft; Marketing-Websites profitieren meist davon, in künftigen Modellen korrekt repräsentiert zu sein, und lassen ihn zu. Wie auch immer die Wahl ausfällt: pro Bot explizit in der treffen und die Entscheidung regelmässig überprüfen, weil sich die KI-Landschaft verändert.