Falls deine Seite über Cloudflare läuft: Ab 15. September 2026 ändert Cloudflare die Standardeinstellung für KI-Crawler – und zwar so, dass auf Seiten mit Werbeeinblendungen KI-Trainings- und Agenten-Crawler automatisch blockiert werden, sofern du nichts änderst [Cloudflare Blog, 01.07.2026]. Das betrifft neue Domains, neue Kunden und alle Free-Tier-Konten.
Ich habe mir das genauer angeschaut, weil „einfach alles blockieren“ und „einfach alles erlauben“ beide zu kurz greifen – je nachdem, wovon deine Seite lebt.
Was sich konkret ändert
Cloudflare unterscheidet seit Juli 2026 drei Kategorien von KI-Crawlern [Cloudflare Blog]:
- Search: Bots, die Inhalte sammeln oder indexieren, damit ein KI-Produkt später Fragen dazu beantworten kann (z. B. OAI-SearchBot, PerplexityBot).
- Agent: Bots, die in Echtzeit im Auftrag einer Person handeln – etwa ein KI-Assistent, der gerade aktiv eine Aufgabe für jemanden erledigt.
- Training: Crawler, die Inhalte einsammeln, um damit ein Modell zu trainieren oder nachzutrainieren – die bekanntesten heißen GPTBot, ClaudeBot oder CCBot.
Ab dem 15. September 2026 werden Training- und Agent-Crawler auf Seiten mit Werbung standardmäßig blockiert, Search-Crawler bleiben standardmäßig erlaubt. Wichtig: Ab diesem Datum wertet Cloudflare mehrzweckfähige Crawler nach ihrem jeweils restriktivsten Verhalten aus. Blockierst du also „Training“ pauschal über den alten „KI-Bots blockieren“-Schalter, kann das laut Cloudflare selbst dazu führen, dass du versehentlich auch Googlebot, Applebot oder Bingbot aussperrst.
Warum das mehr ist als eine technische Randnotiz
Ich habe in einem früheren Beitrag schon einmal über GEO für KMU geschrieben: Sichtbarkeit in ChatGPT, Perplexity oder Google-KI-Antworten hängt direkt davon ab, ob diese Systeme deine Inhalte überhaupt lesen dürfen. Wer jetzt aus Reflex „KI-Bots blockieren“ aktiviert, riskiert also nicht nur, aus KI-Antworten zu verschwinden – sondern im schlimmsten Fall auch aus der normalen Google-Suche, weil Suchmaschinen-Crawler technisch ähnlich funktionieren wie manche KI-Agenten.
Gleichzeitig ist „pauschal alles erlauben“ auch keine automatisch richtige Antwort. Ob du Trainings-Crawler zulassen willst, ist letztlich eine unternehmerische Entscheidung: Nimmst du in Kauf, dass deine Inhalte in KI-Modelle einfließen, ohne dass du dafür etwas bekommst? Oder ist dir wichtiger, in KI-Suchantworten überhaupt sichtbar zu sein und darauf zu hoffen, dass Besucher über Empfehlungen zu dir finden?
Was ich Website-Betreibern empfehle
- Prüfen, ob deine Seite über Cloudflare läuft und welcher Tarif aktiv ist. Betroffen sind laut Cloudflare neue Domains, Neukunden und alle Free-Tier-Konten.
- Die drei Kategorien im Cloudflare-Dashboard bewusst einstellen (Security > Bots > AI Crawl Control, Stand September 2026), statt den alten pauschalen „KI-Bots blockieren“-Schalter zu verwenden.
- Search-Crawler in der Regel zulassen, wenn dir Sichtbarkeit in KI-Suchantworten wichtig ist – dazu gehören Bots wie OAI-SearchBot oder PerplexityBot.
- Training-Crawler bewusst entscheiden, nicht automatisch übernehmen lassen, was Cloudflare als Standard setzt. Beide Richtungen sind legitim – aber es sollte deine Entscheidung sein, nicht ein automatisch gesetzter Default.
- Nach der Umstellung testen, ob Googlebot & Co. weiterhin Zugriff haben – zum Beispiel über die Google Search Console.
Häufige Fragen
Betrifft mich das, wenn ich gar keine Werbung auf meiner Seite schalte?
Die neuen Standardwerte gelten laut Cloudflare zunächst für Seiten mit Werbeeinblendungen. Trotzdem lohnt sich ein Blick ins Dashboard, weil sich die Einstellungsoberfläche für alle Kund:innen ändert – auch ohne Werbung kannst du die Kategorien gezielt konfigurieren.
Verliere ich dadurch automatisch mein Google-Ranking?
Nicht automatisch, aber das Risiko besteht, wenn du über den alten pauschalen Schalter blockierst statt über die neuen Kategorien. Google selbst nutzt eigene Crawler, die von den KI-Trainings-Bots unterschieden werden sollten.
Muss ich jetzt sofort handeln?
Wenn deine Seite über Cloudflare läuft, lohnt sich ein Blick vor dem 15. September 2026 – einfach um zu wissen, was sich ändert, statt überrascht zu werden, wenn Zugriffszahlen aus KI-Quellen plötzlich einbrechen oder ansteigen.
Wenn du unsicher bist, wie du deine Cloudflare-Einstellungen für dein Unternehmen sinnvoll konfigurierst, schauen wir uns das gerne gemeinsam an – unverbindlich, über mein Kontaktformular.