seobetter.deDie Website-HU für Betriebe

Ratgeber · So lesen KI-Dienste Ihre Website

Alle KI-Dienste in einer Tabelle

Welcher Roboter gehört zu welchem Dienst, wofür liest er, und was passiert, wenn Sie ihn sperren? Hier steht alles auf einer Seite, dazu eine robots.txt-Vorlage für den häufigsten Wunsch: gefunden werden, aber nicht ins Training.

Stand 6. November 2026 · Gehört zu Station 6 im Check

Worum es geht

Die wichtigste Unterscheidung ist immer dieselbe: Suchroboter bringen Sie in KI-Antworten mit Quelle, Trainingsroboter sammeln Texte für künftige Modelle. Die meisten Betriebe wollen das Erste. Über das Zweite entscheidet jeder selbst.

Die Roboter im Überblick

NameWofürrobots.txtTraining
OAI-SearchBot (OpenAI)Suche in ChatGPTbeachtetnein
GPTBot (OpenAI)Trainingbeachtetja
ChatGPT-User (OpenAI)Abruf für einen Nutzergilt nicht unbedingtkein Crawler
PerplexityBotSuche in Perplexitybeachtetnein
Perplexity-UserAbruf für einen Nutzerin der Regel nichtnein
Claude-SearchBot (Anthropic)Suche in Claudebeachtetnein
Claude-User (Anthropic)Abruf für einen Nutzerbeachtetnein
ClaudeBot (Anthropic)Trainingbeachtetja
GooglebotGoogle-Suchebeachtetnicht über diesen Schalter
Google-ExtendedGemini-Apps und Gemini-Trainingbeachtetja
Bingbot (Microsoft)Bing-Suche und Copilotbeachtetneue Einstellungen ab 2027

So steuern Sie es

Vorlage „gefunden werden, aber kein Training“. Sie gehört in die Datei robots.txt im Hauptverzeichnis Ihrer Website:

User-agent: GPTBot
Disallow: /

User-agent: ClaudeBot
Disallow: /

User-agent: Google-Extended
Disallow: /

User-agent: *
Allow: /

Neu seit 30. Oktober 2026: Ein gemeinsames Signal gegen KI-Training in der robots.txt, die Gruppe User-agent: __usage_ai-training. Google, Microsoft, OpenAI und Anthropic haben Unterstützung angekündigt. Es ist ein Entwurf bei der IETF und noch kein Standard. Anthropic beachtet es nach eigener Angabe bereits, Microsoft ab Februar 2027, Google ab Anfang 2027, OpenAI „in den kommenden Monaten“. Bis dahin bleiben die einzelnen Einträge oben der sichere Weg.

Was das für Ihre Firma heißt

Die Datei llms.txt ergänzt die robots.txt: Sie sagt KI-Diensten in Kurzform, wer Sie sind und welche Seiten wichtig sind. Sie ist ein Vorschlag und kein Standard, kostet aber nur zehn Minuten. Den Baukasten finden Sie unter Werkzeuge.

Häufige Fragen

Welche Roboter sollte ein Betrieb erlauben?

Alle Suchroboter: OAI-SearchBot, PerplexityBot, Claude-SearchBot, Googlebot und Bingbot. Über die Trainingsroboter entscheiden Sie selbst.

Ist das gemeinsame Trainings-Signal schon wirksam?

Teilweise. Es ist ein Entwurf. Einige Anbieter beachten es schon, andere haben es für 2027 angekündigt.

Wie aktuell ist diese Tabelle?

Stand 6. November 2026, aus den Seiten der Anbieter. Die Regeln ändern sich oft, wir aktualisieren die Tabelle regelmäßig.

Quellen

Lässt Ihre Website die KI-Dienste herein?

Station 6 im Check liest Ihre robots.txt und zeigt, welche Dienste gesperrt sind.

Prüfung starten