Ihre Inhalte sollen Kunden erreichen. Aber sollen sie auch zum Training von KI-Modellen dienen? Neue Ankündigungen machen diese Entscheidung aktuell. Bevor Sie sämtliche KI-Bots aussperren, lohnt sich ein genauer Blick: Training und Sichtbarkeit werden nicht überall gleich gesteuert.
KI-Training blockieren: Was ändert sich gerade?
Am 30. Oktober 2026 haben unter anderem Google, OpenAI und Microsoft Pläne für einen gemeinsamen Hinweis in der robots.txt vorgestellt. Website-Inhaber sollen ihre Präferenz zum KI-Training künftig leichter gegenüber mehreren teilnehmenden Anbietern ausdrücken können. Bislang müssen sie dafür unterschiedliche anbieterbezogene Regeln kennen.
Das ist besonders für Unternehmen interessant, die eigene Fachtexte, Ratgeber oder Produktbeschreibungen veröffentlichen. Sie möchten damit gefunden werden, aber nicht zwangsläufig jede weitere Nutzung erlauben. Die neue Initiative setzt genau an dieser Entscheidung an.
Eine Ankündigung ist allerdings noch keine flächendeckende Umsetzung. Google plant die Unterstützung für Anfang 2027, OpenAI spricht von den kommenden Monaten. Microsoft nennt den 1. Februar 2027 als Start der Berücksichtigung beim erneuten Abrufen der Seiten. Die Details stehen in den Google-Plänen, der OpenAI-Ankündigung und dem Microsoft-Zeitplan.
Für Ihre Website heißt das: Bestehende Regeln jetzt prüfen und die neue Möglichkeit vorbereiten. Bewährte Einstellungen noch nicht durch einen vermeintlichen Universalschalter ersetzen.
Drei Vorgänge, die Sie auseinanderhalten sollten
Ein KI-Anbieter kann Ihre Website aus unterschiedlichen Gründen besuchen. Ob das sinnvoll oder unerwünscht ist, hängt vom Zweck ab. Die pauschale Frage „KI erlauben oder verbieten?“ ist dafür zu grob.
| Vorgang | Einfach erklärt | Ihre Entscheidung |
|---|---|---|
| Modelltraining | Inhalte werden verwendet, um ein generatives Modell zu trainieren. | Sollen Ihre Inhalte dafür genutzt werden dürfen? |
| Suche | Ein Dienst erfasst Seiten, um passende Quellen oder Suchergebnisse zu finden. | Soll Ihr Angebot in dieser Suche auffindbar bleiben? |
| Aktuelle Antworten | Ein System zieht Inhalte bei der Beantwortung einer konkreten Frage hinzu. Das heißt auch Grounding. | Sollen Ihre Seiten als aktuelle Quelle für Antworten infrage kommen? |
Die Unterscheidung ist in der Praxis wichtig: Ein Handwerksbetrieb kann seine öffentlich beschriebenen Leistungen in der Suche zugänglich halten wollen. Ein Verlag mit aufwendig recherchierten Inhalten kann zusätzlich sehr gezielte Vorgaben für deren weitere Nutzung benötigen. Beides beginnt mit einer Entscheidung über die Inhalte, nicht mit der Installation eines beliebigen Plugins.
Technischer Zugriff allein sorgt noch für keine Erwähnung. Welche Informationen eine KI als Quelle auswählt, ist eine weitere Frage. Dazu finden Sie mehr in meinem Beitrag Wie KI-Suchen ihre Quellen auswählen.
GPTBot blockieren ist etwas anderes als Google-Extended sperren
OpenAI: Training und ChatGPT-Suche getrennt steuern
Die offiziellen OpenAI Docs zu den Crawlern unterscheiden GPTBot für Training und OAI-SearchBot für die Suche. Wer GPTBot blockieren möchte, muss den Suchbot deshalb nicht ebenfalls sperren.
Für öffentliche Inhalte, bei denen genau diese Trennung gewünscht ist, kann ein gezielter Ausschnitt so aussehen:
User-agent: GPTBot
Disallow: /
User-agent: OAI-SearchBot
Allow: /Diese Regeln gehören in die bestehende Datei eingebunden. Sie ersetzen weder deren übrige Einträge noch einen Zugriffsschutz. Prüfen Sie vor einem Allow: / insbesondere, ob für diesen Bot bestimmte Verzeichnisse ausgeschlossen bleiben sollen. Die Freigabe macht eine Seite nur grundsätzlich zugänglich; sie garantiert keinen Platz in ChatGPT-Antworten.
Google: Die normale Suche und Gemini unterscheiden
Google-Extended steuert nach der Google-Dokumentation sowohl das Training künftiger Gemini-Modelle als auch Grounding in Gemini Apps und bestimmten Vertex-AI-Angeboten. Eine Sperre ist dort also keine reine Trainingsentscheidung. Sie beeinflusst laut Google weder die Aufnahme in die normale Google-Suche noch deren Ranking.
Für den geplanten gemeinsamen Trainingshinweis kommt eine Besonderheit hinzu: Ohne ausdrückliche Google-Extended-Regel will Google ein Trainings-Nein künftig wie eine Google-Extended-Sperre behandeln. Wer bei Gemini als aktuelle Quelle berücksichtigt werden möchte, sollte deshalb die angekündigte Auslegung und ihre Folgen prüfen lassen.
Was der neue robots.txt-Hinweis kann – und was noch offen ist
Der Vorschlag verwendet den Zweckbezeichner __usage_ai-training. Ein Ausschnitt, der eine Präferenz gegen Training für die gesamte Website ausdrückt, sieht im Entwurf so aus:
User-agent: __usage_ai-training
Disallow: /Anders als eine Regel für einen konkreten Suchbot beschreibt das eine Nutzungspräferenz. Der aktuelle Internet-Draft vom 30. Oktober 2026 ist ein individueller Entwurf, noch kein verabschiedeter IETF-Standard. Das Signal ist keine technische Zugangssperre. Seine praktische Wirkung hängt davon ab, welche Anbieter es wann und mit welcher Auslegung berücksichtigen.
Es löscht keine bereits trainierten Inhalte aus einem Modell. Auch vertrauliche Unterlagen werden dadurch nicht geschützt. Solche Inhalte gehören hinter eine Anmeldung oder einen anderen echten Zugriffsschutz.
Diese Termine gehören auf die Prüfliste
| Anbieter | Angekündigter Stand |
|---|---|
| Unterstützung für Anfang 2027 geplant. Bestehende Google-Extended-Regeln bleiben relevant. | |
| OpenAI | Umsetzung in den kommenden Monaten angekündigt. Vorhandene Crawler-Regeln gelten weiter. |
| Microsoft | Neue Präferenzen ab 1. Februar 2027 beim erneuten Crawlen. Ab 1. März 2027 gelten NoArchive und NoCache nicht mehr als Vorgaben für KI-Training und Grounding. |
Falls Ihre Website NoArchive oder NoCache ausdrücklich für diese KI-Nutzungen einsetzt, ist der Microsoft-Leitfaden zur Umstellung wichtig. Für betroffene Websites ist zusätzlich eine vorübergehende Grounding-Einstellung in Bing Webmaster Tools vorgesehen. Nicht einfach alte Angaben löschen und auf die neue Datei vertrauen.
WordPress und Cloudflare: Prüfen Sie die ganze Zugriffskette
Eine korrekte robots.txt ist nur ein Teil der Einrichtung. Ein Sicherheitsdienst kann einen Bot bereits vor WordPress abweisen. Cloudflare unterscheidet in seiner Dokumentation zur robots.txt zwischen veröffentlichten Präferenzen und technisch durchgesetzten Sperren. Rank Math bearbeitet eine virtuelle robots.txt; eine tatsächlich vorhandene Datei kann deshalb eine andere Quelle für die öffentliche Ausgabe sein. Auch vorgeschaltete Dienste können die Ausgabe ergänzen. Entscheidend ist immer, was außerhalb Ihres Adminbereichs ankommt.
- Ziel festlegen. Notieren Sie getrennt, ob Sie Training ablehnen, Suche ermöglichen oder bestimmte Antwortnutzungen einschränken möchten. Halten Sie auch Ausnahmen für einzelne Inhalte fest.
- Die öffentliche Datei ansehen. Rufen Sie
https://ihre-domain.de/robots.txtauf. Sichern Sie den vorhandenen Inhalt und klären Sie, welche Stelle ihn erzeugt. Ändern Sie nicht parallel im Hosting, im Plugin und im CDN. - Weitere Sperren berücksichtigen. Kontrollieren Sie mit Ihrem technischen Ansprechpartner die Firewall- und Bot-Regeln bei Cloudflare oder einem anderen vorgeschalteten Dienst. Eine erlaubende Textzeile überwindet keine technische Sperre.
- Gezielt ändern und nachprüfen. Lassen Sie Regeln zusammenführen, betroffene Caches leeren und den öffentlichen Abruf erneut prüfen. Auch wichtige Leistungsseiten, Bilder und erforderliche Seitendateien sollten berücksichtigt werden.
- Nachkontrolle einplanen. Halten Sie Datum, Zweck und Zuständigkeit fest. Prüfen Sie Crawling und Suchentwicklung anschließend in den verfügbaren Werkzeugen. Ein Anstieg oder Rückgang allein beweist noch keine Ursache.
Für die technische Bewertung sind tatsächliche Antworten und gegebenenfalls Serverprotokolle hilfreicher als ein einzelner Test mit einem nur nachgeahmten Bot-Namen.
Drei Fehler, die unnötig Sichtbarkeit kosten können
1. Den allgemeinen Zugriff blockieren
Ein Disallow: / unter User-agent: * ist kein gezieltes Nein zum KI-Training. Es kann den Abruf durch gewöhnliche Suchmaschinen behindern. Außerdem ist eine Crawling-Sperre kein zuverlässiger Weg, bereits bekannte URLs aus Google zu entfernen. Die Google-Einführung zu robots.txt erklärt diese Grenze.
2. Jede Antwortnutzung mit Training gleichsetzen
Wer gefunden werden möchte, sollte nicht versehentlich auch die gewünschte Nutzung als Quelle ausschließen. Bei Microsoft können Einschränkungen beim Grounding laut Anbieter die Markenpräsenz in KI-Angeboten reduzieren. Prüfen Sie deshalb nicht nur einen Schalternamen, sondern dessen konkrete Bedeutung.
3. Zugriff mit einer Empfehlung verwechseln
Eine technisch erreichbare Seite muss anschließend noch verständlich, aktuell und für eine Frage nützlich sein. Zugang zu erlauben kauft weder ein Ranking noch eine Empfehlung. Umgekehrt lässt sich eine fehlende Erwähnung nicht automatisch auf eine Bot-Sperre zurückführen.
Wenn das eigentliche Ziel mehr qualifizierte Anfragen ist, gehören klare Leistungsseiten und überzeugende Inhalte weiterhin zur Arbeit. Mein Beitrag Empfiehlt ChatGPT mein Unternehmen? hilft, dieses Ziel von der Frage nach Trainingsrechten zu trennen.
Was ist jetzt für Ihre Website sinnvoll?
Beginnen Sie mit der Frage, welche Nutzung zu Ihrem Unternehmen passt. Eine Unternehmenswebsite, ein Fachverlag und ein Kundenportal haben unterschiedliche Anforderungen. Die richtige Einstellung ergibt sich daraus – nicht aus einem pauschalen „alles an“ oder „alles aus“.
Wenn Ihr Ziel lautet „Training begrenzen, aber als Anbieter auffindbar bleiben“, würde ich zuerst die vorhandenen Regeln aufnehmen. Danach lassen sich die heute verfügbaren Anbieterregeln gezielt abstimmen und die angekündigten Änderungen für 2027 vormerken. Für eine technisch saubere Umsetzung ist meine Leistung SEO-Audit der passende Einstieg. Geht es zusätzlich darum, Inhalte als hilfreiche KI-Quellen aufzubauen, ergänzt das die GEO-Optimierung.
Passt Ihre aktuelle Einstellung zu Ihrem Ziel?
Ich prüfe mit Ihnen, welche Zugriffe gewünscht sind und wo Regeln dem entgegenstehen. Zugriff und KI-Sichtbarkeit meiner Website besprechen.
Häufige Fragen
Kann ich KI-Training blockieren und trotzdem bei Google erscheinen?
Ja, gezielte Trainingsvorgaben sind von einer allgemeinen Sperre der Google-Suche zu unterscheiden. Google erklärt, dass Google-Extended weder die Aufnahme in die normale Google-Suche noch ihr Ranking beeinflusst. Google-Extended betrifft aber auch Grounding in bestimmten Gemini-Angeboten. Deshalb sollte die Entscheidung nicht auf die normale Suche verkürzt werden.
Verschwindet meine Website aus ChatGPT, wenn ich GPTBot blockiere?
Eine GPTBot-Sperre ist eine Trainingsentscheidung. OpenAI steuert die ChatGPT-Suche separat über OAI-SearchBot. Dessen Freigabe ermöglicht die grundsätzliche Berücksichtigung, garantiert aber keine Erwähnung. Andere Zugriffsregeln müssen ebenfalls passen.
Gilt der gemeinsame Trainingshinweis schon überall?
Nein. Stand 4. November 2026 laufen Ankündigung und Umsetzung noch. Google plant die Unterstützung für Anfang 2027, OpenAI für die kommenden Monate. Microsoft nennt den 1. Februar 2027 als Beginn der Berücksichtigung beim erneuten Crawlen. Bestehende Anbieterregeln sollten deshalb nicht vorschnell entfernt werden.
Schützt robots.txt auch vertrauliche Dokumente?
Nein. Die Datei kommuniziert Regeln und Präferenzen an mitwirkende Dienste. Sie verhindert den Abruf technisch nicht. Vertrauliche Dokumente brauchen einen echten Zugriffsschutz, etwa eine geeignete Anmeldung.
Muss ich dafür ein neues WordPress-Plugin installieren?
Nicht automatisch. Zuerst sollte geklärt werden, wie Ihre öffentliche robots.txt derzeit erzeugt wird und welche Regeln im Hosting oder bei vorgeschalteten Diensten wirken. Ein zusätzliches Plugin ohne diese Bestandsaufnahme kann widersprüchliche Einstellungen schaffen.



