Markdown-Ausgabe

AI-translated from English; not yet reviewed by a fluent editor.

# Cloudflares KI-Bot-Voreinstellungen hängen von Werbung und bisherigen Website-Einstellungen ab

> Cloudflare bietet neuen werbefinanzierten Domains eine Einstellung gegen Training und eine Agentensperre auf Werbeseiten. Bestehende Domains folgen ihren migrierten Entscheidungen; Eigentümer können alle drei Kontrollen prüfen.

By BIG CHANGE Editorial

Published: 2026-10-18T21:03:34.849Z
Updated: 2026-10-18T21:03:34.849Z
Canonical: https://bigchange.ai/blog/cloudflare-ai-search-training-agent-access-controls

![Conceptual charcoal illustration of an empty chair facing a wall-mounted display of a generic webpage with a prominent orange advertising area.](https://bigchange.ai/api/media/file/cloudflare-ad-page-concept-v2.png)
AI-generated conceptual illustration by BIG CHANGE; no real website, Cloudflare setting, crawler access or test result is depicted.

Cloudflare gibt Website-Betreibern jetzt getrennte Kontrollen für Suchcrawler, Modelltrainings-Crawler und KI-Agenten. Die [Einführung vom 15. September](https://blog.cloudflare.com/accountable-mixed-use-ai-crawlers/) bietet neuen Domains zwei unterschiedliche Anfangskonfigurationen. Einer werbefinanzierten Website werden Search: Allow, Training: Disallow AI Training und Agent: Block on pages with ads vorgeschlagen. Einer Website ohne Werbeeinnahmen wird für alle drei Allow vorgeschlagen. Betreiber können die Empfehlungen bei der Einrichtung oder später ändern.

Bestehende Cloudflare-Domains folgen ihren früheren Entscheidungen. Eine Website, die den alten Schalter „Block AI Bots“ ausgeschaltet ließ, wechselt bei Search, Training und Agent zu Allow. Wer eine der beiden früheren Sperroptionen gewählt hatte, wechselt zu Search: Allow, Training: Disallow AI Training und Agent: Block on pages with ads. Domains mit bereits eingerichteten drei Kontrollen behalten die praktische Wirkung ihrer Entscheidungen gemäß Cloudflares [Migrationstabelle](https://blog.cloudflare.com/accountable-mixed-use-ai-crawlers/). Die Kontrollen sind in jedem Tarif einschließlich Free verfügbar. Die Tarifberechtigung sagt einem Betreiber nicht, welche Richtlinie seine Domain derzeit verwendet.

## Was die drei Kategorien abdecken

Cloudflares [Änderungsprotokoll vom Juli](https://developers.cloudflare.com/changelog/post/2026-07-01-ai-traffic-options/) definiert **Search (Suche)** als Crawling, das Inhalte zur Beantwortung späterer Anfragen indexiert. **Agent (Agenten)** umfasst Echtzeitaktivitäten im Auftrag einer Person, darunter Bots zum Abrufen von Chat-Inhalten und Agenten zur Browsernutzung. **Training (Modelltraining)** umfasst das Sammeln für Modelltraining oder Feinabstimmung. Ein Crawler kann mehrere Zwecke haben. Laut Cloudflare erfasst jede Sperroption verifizierte Bots in ihrer Klassifikation sowie weitere, nicht verifizierte Bots mit derselben Einstufung. Das ist eine klassifikationsbasierte Kontrolle und keine Behauptung, dass jeder automatisierte Browser oder jede unbekannte Anfrage erfasst wird.

Für eine Domain mit der Empfehlung für werbefinanzierte Websites gilt „Block on pages with ads“ für die Kategorie Agent auf Seiten, auf denen Cloudflare Werbeauslieferung erkennt. Es ist kein Agentenverbot für die gesamte Website. Search bleibt mit dieser Voreinstellung erlaubt. Training unterscheidet sich: Die September-Option **Disallow AI Training** veröffentlicht über Bot Preference Sync den Wunsch, Inhalte nicht zum Training zu verwenden, und sperrt Trainings-Crawler mit Ausnahme der von Cloudflare Accountable genannten Mehrzweck-Crawler. Diese können unter Beachtung der Trainingspräferenz weiterhin für Suchzwecke crawlen. Laut Cloudflare behandelt die Einstellung reine Trainings-Crawler separat; deren Sperrung muss daher die Suche nicht abschalten.

Diese September-Regelung präzisiert die [Dokumentation vom Juli](https://developers.cloudflare.com/bots/additional-configurations/block-ai-bots/), die noch eine künftige Voreinstellung beschreibt, die Training und Agent auf Werbeseiten sperrt. Die spätere [Einführungsankündigung](https://www.cloudflare.com/press/press-releases/2026/cloudflare-helps-end-the-search-or-ai-training-tradeoff/) und Cloudflares detaillierte Migrations- und Empfehlungstabellen vom September nennen für eine neue werbefinanzierte Domain Disallow AI Training; die Sperre auf Werbeseiten gilt für Agent. Die ältere Beschreibung ist nicht als allgemeine Richtlinie für bestehende Kunden zu lesen.

Auch „Disallow“ und „Block“ wirken bei einem Crawler für Suche und Training unterschiedlich. Laut Cloudflare machen Mehrzweck-Crawler 36.6% des verifizierten Crawler-Verkehrs im eigenen Netzwerk aus; eine vergleichbare Zahl für einzelne Websites wird hier nicht genannt. Eine vollständige Training-Sperre umfasst jetzt Mehrzweck-Crawler wie Googlebot, Bingbot und Applebot, wodurch auch deren Suchzugriff entfallen kann. Disallow AI Training soll den Suchzugriff von Accountable-Mehrzweck-Crawlern erhalten und zugleich die Trainingseinschränkung ausdrücken. Cloudflare nennt eine aktuelle Grenze: Microsoft hat für Bingbot bislang keine Unterstützung einer Nicht-Trainings-Präferenz in `robots.txt` ausgeliefert. Disallow AI Training zu wählen, übermittelt diese Präferenz heute daher nicht automatisch an Bing.

## Was Website-Betreiber prüfen können

Öffnen Sie im Cloudflare-Dashboard für die Domain **Security Settings → Configure AI bot policies (Sicherheitseinstellungen → KI-Bot-Richtlinien konfigurieren)** und prüfen Sie die aktuellen Einstellungen für Search, Training und Agent. Cloudflares [Konfigurationsdokumentation](https://developers.cloudflare.com/bots/additional-configurations/block-ai-bots/) beschreibt Allow, Block und Block on pages with ads; der September-Bericht erklärt die zusätzliche Option Disallow AI Training und die Migration bisheriger Einstellungen. Wenn die Website auf Werbeeinblendungen angewiesen ist, prüfen Sie, ob die Domain die werbefinanzierte Voreinstellung verwendet und Agent auf erkannte Werbeseiten begrenzt ist. Wenn herkömmlicher Suchzugriff wichtig ist, prüfen Sie die Training-Auswahl, bevor Sie für Mehrzweck-Crawler Block wählen.

Dies sind Cloudflares dokumentierte Kontrollen und Einführungsregeln. BIG CHANGE hat weder ein Cloudflare-Konto verändert noch Bot-Verkehr auf einer aktiven Website gemessen.

## Die große Veränderung

Cloudflare hat drei Nutzungsarten automatisierter Zugriffe in Richtlinien auf Domain-Ebene aufgeteilt. Für neue werbefinanzierte Domains hält die September-Empfehlung die Suche offen, äußert eine Nicht-Trainings-Präferenz und sperrt klassifizierte Agenten auf erkannten Werbeseiten. Bestehende Betreiber müssen ihre migrierten Einstellungen lesen, bevor sie Schlussfolgerungen über den Zugriff ziehen.

## Quellen und weiterführende Informationen

- [Cloudflare, „Beides ermöglichen: in der Suche auffindbar bleiben und KI-Training untersagen“](https://blog.cloudflare.com/accountable-mixed-use-ai-crawlers/) (15. September 2026). Detaillierte Quelle zur Einführung: Empfehlungs- und Migrationstabellen, Verhalten von Mehrzweck-Crawlern und Bing-Einschränkung.
- [Cloudflare, „Cloudflare hilft, die Abwägung zwischen Suche und KI-Training zu beenden“](https://www.cloudflare.com/press/press-releases/2026/cloudflare-helps-end-the-search-or-ai-training-tradeoff/) (15. September 2026). Die Ankündigung unterscheidet neue werbefinanzierte Websites von anderen neuen Websites.
- [Cloudflare Developers, „Neue Optionen zur Verwaltung von KI-Verkehr“](https://developers.cloudflare.com/changelog/post/2026-07-01-ai-traffic-options/) (1. Juli 2026). Ursprüngliche Einführung der drei Kategorien und frühere Beschreibung der Voreinstellungen.
- [Cloudflare Docs, „Block AI Bots“](https://developers.cloudflare.com/bots/additional-configurations/block-ai-bots/) (Seite als zuletzt am 1. Juli 2026 aktualisiert gekennzeichnet). Definitionen, klassifizierte verifizierte und nicht verifizierte Bots sowie Dashboard-Pfad; die Formulierung der Voreinstellung vor der Einführung weicht von der detaillierten September-Richtlinie ab.

## Sources

- [Cloudflare, Block AI Bots (zuletzt aktualisiert 2026-07-01)](https://developers.cloudflare.com/bots/additional-configurations/block-ai-bots/) — Primäre Konfigurationsdokumentation mit Datum 1. Juli: Kategoriedefinitionen, verifizierte und nicht verifizierte Klassifikationen, Werbeseitenerkennung und Dashboard-Pfad. Die Beschreibung künftiger Voreinstellungen entstand vor der September-Einführung und wird durch den späteren detaillierten Bericht ersetzt.
- [Cloudflare, Ankündigung der KI-Verkehrskontrollen (2026-09-15)](https://www.cloudflare.com/press/press-releases/2026/cloudflare-helps-end-the-search-or-ai-training-tradeoff/) — Primäre Einführungsankündigung: Neue werbefinanzierte Websites erhalten Search erlaubt, Training nicht erlaubt und Agent auf Werbeseiten gesperrt; andere neue Websites erlauben alle drei.
- [Cloudflare Developers, Neue Optionen zur Verwaltung von KI-Verkehr (2026-07-01)](https://developers.cloudflare.com/changelog/post/2026-07-01-ai-traffic-options/) — Ursprüngliche Einführung der drei Kategorien und geplante September-Voreinstellungen; aus chronologischen Gründen erhalten, nicht als endgültige Einführungsregel behandelt.
- [Cloudflare, Beides ermöglichen: in der Suche auffindbar bleiben und KI-Training untersagen (2026-09-15)](https://blog.cloudflare.com/accountable-mixed-use-ai-crawlers/) — Maßgeblicher detaillierter Einführungsbericht: Empfehlungen für neue Domains, Migration bestehender Domains, Disallow gegenüber Block bei Mehrzweck-Crawlern und Bingbot-Einschränkung.