Cloudflare blokira Googlebot: djelujte prije 15. rujna

Dva naizgled nepovezana problema stigla su na stolove marketingaša u istom tjednu: Cloudflare će od 15. rujna 2026. automatski blokirati Googlebot kao AI crawler, a Google je istovremeno pokrenuo prvi namjenski izvještaj o AI impresijama u Search Consoleu. Oboje mijenja način na koji trebate razmišljati o tehničkoj dostupnosti sajta i mjerenju vidljivosti u AI pretraživanju.

Ključne točke

• Od 15. rujna 2026. Cloudflare klasificira Googlebot i Bingbot kao botove mješovite namjene, što znači da blokada AI treninga može vratiti 403 greške Google crawleru.
• Novi GSC izvještaj prati AI impresije u AI Overviewsima, AI Modeu i Discoveru, ali trenutno nema podataka o klikovima, CTR-u ni upitima.
• AI impresije i organski klikovi su nekompatibilne metrike. Nikada ih ne spajajte u jedan KPI.
• Vidljivost u AI pretraživanju uvelike ovisi o vanjskim signalima: spominjanjima, recenzijama, nagradama, YouTubeu, Redditu.
• Dosljedna poruka brenda na autoritativnim izvorima novi je NAP za AI preporuke.

Cloudflare i Googlebot: konkretan rizik s konkretnim rokom

Cloudflare je uveo kategoriju botova mješovite namjene, crawlera koji istovremeno indeksiraju web za tražilice i prikupljaju podatke za treniranje AI modela. Googlebot i Bingbot sada spadaju u tu kategoriju. Ako imate aktivirano blokiranje AI treninga ili Bot Fight Mode u nadzornoj ploči, te postavke mogu početi vraćati HTTP 403 odgovore legitimnom Google crawleru od 15. rujna, uključujući pristup vašem sitemapeu. Korisnik na Redditu potvrdio je da se Googlebot i Bingbot pojavljuju kao automatski blokirani u odjeljku AI Crawlers. Googleov John Mueller zatražio je detalje radi istrage (Search Engine Journal).

Što napraviti odmah, ovim redoslijedom:

1. Prijavite se u Cloudflare nadzornu ploču i otvorite odjeljak AI Crawlers. Provjerite jesu li Googlebot ili Bingbot označeni kao blokirani.
2. Pokrenite fetch-as-Googlebot test u Google Search Consoleu, posebno za vaš sitemap.
3. Ako želite zadržati potpunu indeksiranost, isključite se iz novih zadanih postavki prije 15. rujna.
4. Ako želite blokirati određene AI scrapere (OpenAI, Anthropic, Common Crawl), koristite ciljana robots.txt pravila za te specifične user-agente umjesto široke blokade koja ugrožava vaš SEO.

Nakon 15. rujna pratite serverske logove zbog porasta HTTP 403 odgovora na Googlebot user-agent. Ako se počnu pojavljivati, imate jasan dijagnostički signal.

Kako čitati novi GSC izvještaj o AI impresijama

Google je 3. lipnja 2026. pokrenuo namjenski Search Console izvještaj za AI Overviews, AI Mode i Discover. Podaci počinju od 18. svibnja 2026., bez povratnog punjenja povijesnih podataka (Neil Patel). Izvještaj trenutno prikazuje samo impresije. Bez klikova, bez CTR-a, bez upita.

Evo ključnog detalja koji većina ljudi propušta: logika brojanja impresija razlikuje se ovisno o kontekstu. U AI Overviewsima, link se broji kao impresija tek nakon što korisnik scrolla ili proširi panel. U AI Modeu, svako naknadno pitanje generira nove impresije. A ukupan broj na razini domene ne odgovara zbroju podataka na razini stranica (Search Engine Journal). Upravo zato miješanje AI impresija s organskim klikovima u jednom izvještaju daje besmislene brojke.

Praktičan radni tijek analize:

• Izvezite URL-ove vidljive u AI-u kroz dulje vremensko razdoblje.
• Povucite organske podatke iz standardnog izvještaja o performansama za iste URL-ove.
• Segmentirajte stranice: visok AI + visok organski (prioritetni sadržaj), visok AI + nizak organski (revidirajte put konverzije, dodajte CTA-ove), nizak AI + visok organski (napravite reviziju ranjivosti prije nego što se AI Overviewsi dodatno prošire).
• Za stranice s niskom AI vidljivošću provjerite jesu li ključne informacije u čitljivom HTML-u ili skrivene u JavaScriptu, tabovima ili slikama.

Opcija isključivanja postoji, ali koristite je samo s konkretnim razlogom. Bez strateške opravdanosti (sadržaj iza paywalla, model licenciranja), odričete se sve važnijeg kanala vidljivosti bez razloga.

Zašto AI preporučuje vašeg konkurenta i što s tim

Cloudflare i GSC izvještaj tehnički su problemi. No postoji i treći sloj koji većina timova ignorira: što drugi sajtovi pišu o vama.

Prema Krisu Jonesu iz LSEO-a, 70-80% optimizacije za AI pretraživanje i dalje je klasična SEO praksa. Preostalih 20-30% dolazi od vanjskih signala: spominjanja na forumima, recenzija, nagrada, citata na autoritativnim sajtovima (Search Engine Journal). AI sustavi ne proizvode popis rezultata, nego preporuku. A preporuke se temelje na cijelom webu, a ne samo na vašim dobro optimiziranim stranicama.

Konkretan primjer: škole su izgubile konverzije jer je Google AI Overview povukao cijenu staru 10 godina s Reddita koja je bila 30% niža od stvarne trenutne cijene. Jedna stara nit može narušiti konverzije više od lošeg tehničkog SEO-a.

Što to znači u praksi:

• Napravite AI reviziju brenda: pitajte ChatGPT, Google AI i druge asistente za preporuke u vašoj kategoriji, pa provjerite što govore o vašem brendu.
• Osigurajte da su informacije o proizvodu, cijene i pozicioniranje dosljedni na svim autoritativnim izvorima.
• Ulažite u prisutnost na Redditu i YouTubeu. AI odgovori citiraju Reddit otprilike 40 puta češće od klasičnih organskih rezultata, a YouTube je drugi najcitiraniji izvor u AI Overviewsima (WordStream).
• Nastojte osvajati relevantne industrijske nagrade i rangiranja. LLM-ovi preferiraju te izvore pri generiranju preporuka.

Sve troje u jednom okviru izvještavanja

Tri stvari koje su se promijenile ovog tjedna izravno su povezane. Ako Cloudflare blokira Googlebot, gubite indeksiranost, a bez indeksiranosti nema AI impresija. Ako imate AI impresije, ali pogrešno tumačite njihovu logiku, donosite loše odluke o sadržaju. A ako je vaš sadržaj solidan, ali ignorirate vanjske signale, AI vas jednostavno neće preporučiti.

Charlie pomaže marketinškim timovima i agencijama pratiti AI vidljivost kao poseban kanal uz organski i plaćeni. Ako tek sada gradite infrastrukturu izvještavanja za AI impresije, pravo je vrijeme: osnovni podaci u GSC-u dostupni su od 18. svibnja 2026., a čekanje znači gubitak povijesne referentne točke.

Praktični prioritet za ovaj tjedan: provjerite Cloudflare postavke, postavite zasebnu nadzornu ploču za AI impresije i napravite AI reviziju brenda. Tim redoslijedom.