Leistungen ↳ Website erstellen lassen ↳ Google & Meta Ads ↳ Für Arztpraxen ↳ Für Immobilienmakler ↳ Für Autohäuser & Kfz-Gutachter ↳ KI-Telefonassistent ↳ KI-Sichtbarkeit (GEO) So arbeiten wir Referenzen Über uns Blog Kontakt Kostenlos kennenlernen
10.08.2026 9 Min Lesezeit

Cloudflare sperrt KI-Bots: Was Websites bis September 2026 einstellen müssen

Ab dem 15. September 2026 ändert Cloudflare die Standard-Einstellungen für KI-Bots. Das Problem: Die Sperre kann auch Googlebot treffen — und damit Ihre Sichtbarkeit bei Google. Was Sie jetzt prüfen müssen.

Was Cloudflare ab September 2026 ändert

Cloudflare schützt laut eigenen Angaben rund 20 Prozent aller Websites weltweit vor Angriffen, Spam und unerwünschtem Traffic. Ab dem 15. September 2026 ändert der Anbieter die Standard-Einstellungen für neue Domains: KI-Bots, die Inhalte für Trainingszwecke abgreifen, werden auf Seiten mit Werbung automatisch blockiert.

Der Hintergrund: Immer mehr KI-Unternehmen crawlen Websites, um ihre Sprachmodelle zu trainieren — oft ohne Erlaubnis, ohne Gegenleistung und in einem Umfang, der Server belastet. Cloudflare reagiert darauf mit einem neuen Klassifizierungssystem, das Bots nicht mehr pauschal als „KI" oder „Nicht-KI" einstuft, sondern nach ihrem konkreten Zweck unterscheidet.

Für Website-Betreiber ist das grundsätzlich eine gute Nachricht. Allerdings steckt ein Problem in den Details, das besonders KMU betrifft, die ihre Website nicht aktiv verwalten.

Die drei neuen Bot-Kategorien

Cloudflare unterscheidet ab September drei Typen von Crawlern:

Search-Bots greifen auf Inhalte zu, um sie in Suchergebnissen anzuzeigen. Googlebot und Bingbot gehören dazu. Diese bleiben standardmäßig erlaubt.

Agent-Bots arbeiten live im Auftrag eines Nutzers — etwa ein KI-Chatbot, der eine Website durchsucht, um eine Frage zu beantworten. Auch sie werden zunächst zugelassen.

Training-Bots laden Inhalte herunter, um KI-Modelle zu trainieren oder zu verbessern. Diese werden auf Seiten mit Werbung künftig standardmäßig blockiert.

Info

Laut dem Cloudflare-Blogpost vom 2. Juli 2026 betrifft die neue Standardeinstellung zunächst nur neue Domains. Bestehende Domains behalten ihre aktuellen Einstellungen — es sei denn, der Betreiber aktiviert die neuen Regeln manuell. Die Einstellungen finden sich unter Security im jeweiligen Zone-Dashboard.

Warum das auch Googlebot betreffen kann

Hier liegt das eigentliche Risiko: Googlebot und Bingbot sind sogenannte Multi-Purpose-Crawler. Sie indexieren Seiten für die Suche, nutzen die Daten aber auch für KI-Funktionen wie AI Overviews oder den AI Mode. Cloudflare klassifiziert sie deshalb als „Search + Training".

Wenn ein Website-Betreiber die Training-Sperre aktiviert, wendet Cloudflare die restriktivste Regel an. Im Klartext: Googlebot wird auf betroffenen Seiten ebenfalls blockiert — nicht nur für KI-Training, sondern komplett.

Die Folge: Seiten werden nicht mehr indexiert, verschwinden aus den Google-Suchergebnissen und verlieren organischen Traffic. Für ein lokales Unternehmen, das über Google gefunden werden will, ist das ein direkter Umsatzverlust.

Prüfen Sie jetzt

  • ✓ Nutzt Ihre Website Cloudflare? (erkennbar am DNS oder im Header)
  • ✓ Sind Training-Bots in Ihren Security-Einstellungen blockiert?
  • ✓ Erscheint Googlebot in der blockierten Kategorie?

Was KMU konkret tun müssen

Die gute Nachricht: Wer seine Cloudflare-Einstellungen kennt, kann das Problem in fünf Minuten lösen. Die schlechte: Viele KMU wissen nicht einmal, ob ihre Website über Cloudflare läuft.

Schritt 1: Prüfen, ob Cloudflare aktiv ist. Öffnen Sie ein Terminal oder nutzen Sie ein Online-Tool wie „DNS Checker". Wenn die Nameserver auf Cloudflare zeigen (z. B. `*.ns.cloudflare.com`), läuft Ihre Website über Cloudflare. Alternativ: Im Browser die Entwicklertools öffnen (F12), unter „Network" eine beliebige Seite laden und in den Response-Headern nach `cf-ray` suchen.

Schritt 2: Bot-Einstellungen prüfen. Im Cloudflare-Dashboard unter „Security" finden Sie seit Juli 2026 die neuen AI-Bot-Kategorien. Dort können Sie separat festlegen, ob Search-, Agent- und Training-Bots erlaubt oder blockiert werden sollen.

Schritt 3: Googlebot nicht blockieren. Stellen Sie sicher, dass die Kategorie „Search" auf „Allow" steht. Wenn Sie Training-Bots blockieren möchten, aktivieren Sie nur die Training-Kategorie — aber prüfen Sie vorher, ob Googlebot dadurch mitgesperrt wird. Cloudflare zeigt in den Einstellungen an, welche bekannten Bots von einer Regel betroffen sind.

Schritt 4: robots.txt als Ergänzung. Unabhängig von Cloudflare können Sie in Ihrer `robots.txt` gezielt einzelne KI-Crawler aussperren. Für die gängigsten Trainings-Bots sieht das so aus:

``` User-agent: GPTBot Disallow: /

User-agent: CCBot Disallow: /

User-agent: anthropic-ai Disallow: /

User-agent: Googlebot Allow: / ```

Diese Datei liegt im Hauptverzeichnis Ihrer Website und wird von seriös arbeitenden Crawlern respektiert.

Welche KMU besonders betroffen sind

Nicht jede Website ist gleichermaßen gefährdet. Besonders aufpassen müssen:

✓ Tun

  • Cloudflare-Einstellungen vor dem 15. September prüfen
  • robots.txt mit gezielten KI-Bot-Regeln ergänzen
  • Google Search Console auf Crawling-Fehler überwachen

✗ Lassen

  • Pauschal alle Bots blockieren (sperrt auch Google)
  • Die neuen Standardeinstellungen ungeaendert übernehmen
  • Darauf vertrauen, dass der Hosting-Anbieter das regelt

Websites mit Werbeanzeigen: Die neuen Standardregeln greifen explizit bei Seiten, die Ads ausspielen. Wer Google AdSense, Affiliate-Banner oder andere Werbeformate einbindet, ist direkt betroffen.

Websites, die über Baukastensysteme laufen: Viele Anbieter wie Wix, Squarespace oder Jimdo nutzen Cloudflare im Hintergrund, ohne dass der Betreiber davon weiß. Hier haben Sie oft keinen direkten Zugriff auf die Bot-Einstellungen — und müssen beim Anbieter nachfragen.

Websites mit Content-Strategie: Wer regelmäßig Blogartikel, Ratgeber oder FAQ-Seiten veröffentlicht, um über Google gefunden zu werden, riskiert bei falscher Bot-Konfiguration den Verlust dieser Sichtbarkeit. Gerade für Handwerker, Ärzte oder Kanzleien, die auf lokale Suchanfragen setzen, kann das spürbar werden.

Was hinter dem Trend steckt

Die Cloudflare-Änderung ist Teil einer größeren Entwicklung: Website-Betreiber verlieren zunehmend die Kontrolle darüber, wer ihre Inhalte nutzt und wofür. KI-Unternehmen wie OpenAI, Google und Anthropic trainieren ihre Modelle mit Milliarden von Webseiten — oft ohne Vergütung.

Cloudflare positioniert sich hier als Vermittler: Website-Betreiber sollen selbst entscheiden können, welche Bots Zugriff erhalten. Langfristig plant Cloudflare sogar ein System, bei dem KI-Unternehmen für den Zugriff auf Inhalte bezahlen könnten — eine Art „Content-Maut" für KI-Training.

Für KMU bedeutet das: Die Frage, wer Ihre Website-Inhalte nutzen darf, wird in den nächsten Jahren zu einer echten Geschäftsentscheidung. Wer seine Texte, Bilder und Daten schützt, behält einen Wettbewerbsvorteil. Wer alles offen lässt, füttert die KI-Modelle der Konkurrenz — inklusive der eigenen Keywords und Fachexpertise.

Info

Laut Cloudflare haben im ersten Halbjahr 2026 bereits über 85 Prozent der Websites mit aktivem Bot-Management mindestens eine KI-Bot-Kategorie eingeschränkt. Der Trend zur selektiven Bot-Steuerung ist also längst in der Breite angekommen.

Zeitplan: Was bis wann passieren muss

Die wichtigsten Termine im Überblick:

Jetzt (August 2026): Prüfen Sie, ob Ihre Website über Cloudflare läuft. Falls ja: Öffnen Sie das Dashboard und sichten Sie die aktuellen Bot-Einstellungen unter Security.

Bis 10. September 2026: Passen Sie die Einstellungen an, bevor die neuen Standards greifen. Stellen Sie sicher, dass Googlebot und Bingbot nicht versehentlich blockiert werden. Ergänzen Sie Ihre robots.txt um gezielte Regeln für Trainings-Bots.

Ab 15. September 2026: Die neuen Standardeinstellungen greifen für neue Domains. Bestehende Domains sind nur betroffen, wenn der Betreiber die neuen Regeln manuell aktiviert hat — oder wenn der Hosting-Anbieter dies im Hintergrund tut.

Laufend: Überwachen Sie Ihre Google Search Console auf Crawling-Fehler. Ein plötzlicher Rückgang der indexierten Seiten oder ein Anstieg von „Blockiert"-Meldungen kann auf eine Bot-Sperre hindeuten.

Ihre Checkliste bis September

  • ✓ DNS prüfen: Zeigen Nameserver auf Cloudflare?
  • ✓ Cloudflare-Dashboard: Training-Bot-Sperre aktiv?
  • ✓ robots.txt: Googlebot explizit erlaubt?
  • ✓ Search Console: Crawling-Statistiken im Blick?

Fazit: Fünf Minuten Arbeit, die Rankings retten

Die Cloudflare-Änderung ist kein Grund zur Panik, aber ein Grund zum Handeln. Wer seine Einstellungen bis Mitte September prüft und gezielt konfiguriert, schützt seine Inhalte vor ungewolltem KI-Training — ohne die eigene Google-Sichtbarkeit zu gefährden.

Das eigentliche Problem liegt anderswo: Viele KMU wissen nicht, welche technischen Dienste im Hintergrund ihrer Website laufen. Cloudflare, CDN-Anbieter, Caching-Layer — all das beeinflusst, wer Ihre Seiten sehen und crawlen kann. Wer hier keinen Überblick hat, riskiert, dass gut gemeinte Sicherheitsmaßnahmen die eigene Reichweite zerstören.

Eine kurze Prüfung der Bot-Einstellungen — fünf Minuten, die den Unterschied machen können zwischen stabilen Rankings und einem plötzlichen Sichtbarkeitsverlust.

Ihre Website auf Bot-Risiken prüfen lassen

Wir analysieren kostenlos, ob Ihre Cloudflare- und Bot-Einstellungen Ihre Google-Sichtbarkeit gefährden — und zeigen Ihnen, was Sie ändern müssen.

"Kostenlose Analyse anfragen" →
Newsletter

Die besten Beiträge. Einmal im Monat.

Praxis-Tipps zu Google, Websites, Werbung und KI für Ihren Betrieb. Kein Spam, jederzeit mit einem Klick abbestellbar.

Kai von AnalyticsRocketonline — antwortet sofort