Cloudflare blockiert Googlebot: Handeln bis 15. Sept.

Zwei scheinbar unabhängige Probleme landeten in derselben Woche auf den Schreibtischen von Marketern: Cloudflare wird Googlebot ab dem 15. September 2026 automatisch als KI-Crawler blockieren, und Google hat gleichzeitig den ersten dedizierten KI-Impressionen-Bericht in der Search Console eingeführt. Beide Entwicklungen verändern, wie Sie technische Website-Zugänglichkeit und KI-Sichtbarkeit messen müssen.

Das Wichtigste auf einen Blick

• Ab dem 15. September 2026 stuft Cloudflare Googlebot und Bingbot als Bots mit gemischter Nutzung ein. Ein aktives KI-Training-Blocking kann dazu führen, dass der Google-Crawler 403-Fehler erhält.
• Der neue GSC-Bericht erfasst KI-Impressionen aus AI Overviews, AI Mode und Discover, bietet aber derzeit keine Klick-, CTR- oder Suchanfragen-Daten.
• KI-Impressionen und organische Klicks sind inkompatible Metriken. Kombinieren Sie sie niemals zu einem einzigen KPI.
• KI-Suchsichtbarkeit hängt stark von Off-Site-Signalen ab: Erwähnungen, Bewertungen, Auszeichnungen, YouTube, Reddit.
• Konsistentes Marken-Messaging über autoritative Quellen hinweg ist das neue NAP für KI-Empfehlungen.

Cloudflare und Googlebot: ein konkretes Risiko mit konkreter Deadline

Cloudflare hat die Kategorie der Bots mit gemischter Nutzung eingeführt: Crawler, die das Web sowohl für Suchmaschinen indexieren als auch Daten für das Training von KI-Modellen sammeln. Googlebot und Bingbot fallen nun in diese Kategorie. Wer in seinem Dashboard das KI-Training-Blocking oder den Bot Fight Mode aktiviert hat, riskiert, dass diese Einstellungen ab dem 15. September HTTP-403-Antworten an den legitimen Google-Crawler zurückgeben, einschließlich des Zugriffs auf die Sitemap. Ein Reddit-Nutzer bestätigte, dass Googlebot und Bingbot im Bereich AI Crawlers als automatisch blockiert erscheinen. Googles John Mueller bat um Details zur Untersuchung (Search Engine Journal).

Was jetzt zu tun ist, in dieser Reihenfolge:

1. Melden Sie sich in Ihrem Cloudflare-Dashboard an und öffnen Sie den Bereich AI Crawlers. Prüfen Sie, ob Googlebot oder Bingbot als blockiert markiert sind.
2. Führen Sie in der Google Search Console einen Fetch-as-Googlebot-Test durch, insbesondere für Ihre Sitemap.
3. Wenn Sie die vollständige Indexierung erhalten möchten, deaktivieren Sie die neuen Standardeinstellungen vor dem 15. September.
4. Wenn Sie bestimmte KI-Scraper blockieren möchten (OpenAI, Anthropic, Common Crawl), nutzen Sie gezielte robots.txt-Regeln für diese spezifischen User-Agents, anstatt eine pauschale Blockierung zu verwenden, die Ihr SEO gefährdet.

Überwachen Sie Ihre Server-Logs nach dem 15. September auf einen Anstieg von HTTP-403-Antworten für den Googlebot-User-Agent. Wenn diese auftauchen, haben Sie ein klares Diagnosesignal.

So lesen Sie den neuen GSC-KI-Impressionen-Bericht

Google hat am 3. Juni 2026 einen dedizierten Search Console-Bericht für AI Overviews, AI Mode und Discover eingeführt. Die Daten beginnen ab dem 18. Mai 2026, ohne historische Rückfüllung (Neil Patel). Der Bericht zeigt derzeit ausschließlich Impressionen. Keine Klicks, keine CTR, keine Suchanfragen.

Hier ist das entscheidende Detail, das die meisten übersehen werden: Die Logik der Impressionszählung unterscheidet sich je nach Kontext. In AI Overviews zählt ein Link erst als Impression, nachdem der Nutzer gescrollt oder das Panel aufgeklappt hat. In AI Mode erzeugt jede Folgefrage neue Impressionen. Und die Gesamtsumme auf Property-Ebene entspricht nicht der Summe der Daten auf Seitenebene (Search Engine Journal). Genau deshalb ergeben sich bedeutungslose Zahlen, wenn Sie KI-Impressionen und organische Klicks in einem einzigen Bericht vermischen.

Ein praktischer Analyse-Workflow:

• Exportieren Sie KI-sichtbare URLs über einen längeren Zeitraum.
• Ziehen Sie organische Daten aus dem Standard-Performance-Bericht für dieselben URLs.
• Segmentieren Sie Seiten: hohe KI + hohe organische Sichtbarkeit (Priority-Content), hohe KI + geringe organische Sichtbarkeit (Conversion-Pfad prüfen, CTAs ergänzen), geringe KI + hohe organische Sichtbarkeit (Schwachstellen-Audit durchführen, bevor AI Overviews weiter ausgebaut werden).
• Prüfen Sie bei Seiten mit geringer KI-Sichtbarkeit, ob wichtige Informationen in lesbarem HTML vorliegen oder in JavaScript, Tabs oder Bildern versteckt sind.

Die Opt-out-Option existiert, aber nutzen Sie sie nur mit einem konkreten Grund. Ohne strategische Rechtfertigung (bezahlte Inhalte, Lizenzmodell) verzichten Sie ohne Gegenwert auf einen wachsenden Sichtbarkeitskanal.

Warum KI Ihren Wettbewerber empfiehlt und was Sie dagegen tun können

Cloudflare und der GSC-Bericht sind technische Probleme. Aber es gibt eine dritte Ebene, die die meisten Teams ignorieren: was andere Websites über Sie sagen.

Laut Kris Jones von LSEO sind 70-80 % der KI-Suchoptimierung nach wie vor klassische SEO-Praxis. Die verbleibenden 20-30 % kommen aus Drittanbieter-Signalen: Forum-Erwähnungen, Bewertungen, Auszeichnungen, Zitate auf autoritativen Websites (Search Engine Journal). KI-Systeme liefern keine Ergebnisliste, sie geben eine Empfehlung ab. Und Empfehlungen werden aus dem gesamten Web gezogen, nicht nur aus Ihren gut optimierten Seiten.

Ein konkretes Beispiel: Schulen verloren Conversions, weil ein Google AI Overview einen 10 Jahre alten Preis aus Reddit zog, der 30 % unter dem tatsächlichen aktuellen Preis lag. Ein einziger alter Thread kann Conversions stärker schädigen als schlechtes technisches SEO.

Was das in der Praxis bedeutet:

• Führen Sie ein KI-Marken-Audit durch: Fragen Sie ChatGPT, Google AI und andere Assistenten nach Empfehlungen in Ihrer Kategorie und prüfen Sie, was sie über Ihre Marke sagen.
• Stellen Sie sicher, dass Produktinformationen, Preise und Positionierung über autoritative Quellen hinweg konsistent sind.
• Investieren Sie in Präsenz auf Reddit und YouTube. KI-Antworten zitieren Reddit etwa 40-mal häufiger als klassische organische Ergebnisse, und YouTube ist die zweithäufigst zitierte Quelle in AI Overviews (WordStream).
• Streben Sie relevante Branchenauszeichnungen und Rankings an. LLMs bevorzugen diese Quellen bei der Generierung von Empfehlungen.

Alle drei Entwicklungen in einem Reporting-Framework verbinden

Die drei Dinge, die sich in dieser Woche geändert haben, hängen direkt zusammen. Wenn Cloudflare Googlebot blockiert, verlieren Sie die Indexierung, und ohne Indexierung gibt es keine KI-Impressionen. Wenn Sie KI-Impressionen haben, aber deren Logik falsch lesen, treffen Sie schlechte Content-Entscheidungen. Und wenn Ihre Inhalte solide sind, Sie aber Drittanbieter-Signale ignorieren, wird KI Sie schlicht nicht empfehlen.

Charlie hilft Marketing-Teams und Agenturen dabei, KI-Sichtbarkeit als eigenständigen Kanal neben organisch und bezahlt zu tracken. Wenn Sie gerade erst eine Reporting-Infrastruktur für KI-Impressionen aufbauen, ist jetzt der richtige Zeitpunkt: Basisdaten in der GSC sind ab dem 18. Mai 2026 verfügbar, und wer wartet, verliert seinen historischen Vergleichspunkt.

Praktische Priorität für diese Woche: Cloudflare-Einstellungen prüfen, ein separates Dashboard für KI-Impressionen einrichten und ein KI-Marken-Audit durchführen. In genau dieser Reihenfolge.