Cloudflare blocca i crawler AI: cosa significa per i backlink

Un cancello in acciaio spazzolato su un pavimento di studio bianco che incornicia una catena di link in vetro smeraldo, controllando quali crawler la raggiungono

Il 15 settembre 2026, Cloudflare ha invertito un'impostazione predefinita che tocca un quinto del web, e ha cambiato tranquillamente ciò che un backlink può fare per te. Le pagine protette da Cloudflare ora bloccano di default i crawler AI "mixed-use" sui siti supportati dalla pubblicità, mentre i crawler di ricerca classici come Googlebot continuano a passare. Per chiunque acquisti link, questo crea una divisione che non esisteva prima: un link può ancora passare pieno valore per la ricerca Google e passare no valore verso le citazioni nella ricerca IA, semplicemente per le impostazioni bot del donatore. Ecco cosa è cambiato, perché è importante per il tuo profilo link e l'unico controllo da eseguire su un donatore prima di pagare.

Riepilogo

  • Cosa: Da September 15, 2026, i blocchi predefiniti di Cloudflare bloccano i crawler che mescolano funzioni di ricerca, addestramento e agent su pagine con annunci. I crawler di ricerca single-purpose come Consenti Googlebot; i crawler "mixed-use" e quelli dedicati ad addestramento/agenti vengono bloccati.
  • Chi colpisce: Il nuovo valore predefinito si applica a nuovi domini e piani gratuiti. I siti Cloudflare già esistenti non cambiano automaticamente, ma qualsiasi proprietario può attivarlo.
  • Pay Per Crawl / Pay Per Use: Cloudflare permette ai publisher di impostare ciascun crawler su Allow, Charge o Block, e il suo modello Pay Per Use (annunciato il 1° luglio 2026) li paga quando i loro contenuti compaiono in una risposta AI.
  • Perché è importante per i link: Se GPTBot, ClaudeBot o PerplexityBot non riescono a recuperare la pagina del donatore su cui vive il tuo link, quel link non può alimentare le citazioni nella ricerca AI, anche quando è perfetto per la SEO classica su Google.
  • Il nuovo controllo: Prima di comprare un link per la visibilità IA, verifica che il donatore sia raggiungibile dai crawler IA, non solo che abbia un buon DR.

Cosa ha modificato davvero Cloudflare

La posizione di Cloudflare è che siano i creator, non le aziende AI, a decidere chi accede ai loro contenuti. Come ha scritto nell'annuncio del pay-per-crawl: "Se un creator vuole bloccare tutti i crawler AI dal suo contenuto, deve poterlo fare. Se un creator vuole consentire l'accesso gratuito completo ad alcuni o tutti i crawler AI, deve poterlo fare anch'esso". Il cambiamento del 15 settembre ha trasformato quel principio in un default.

La meccanica conta. Sulle pagine supportate dalla pubblicità, Cloudflare ora blocca i crawler nel formazione e agente categorie per impostazione predefinita, e blocca i crawler "ad uso misto" che non separano in modo netto ciò che stanno facendo. Puro search i crawler restano consentiti, ed è per questo che Googlebot non è interessato. Gli editori possono anche aderire a Pay Per Crawl, impostando ciascun crawler su uno dei tre stati - "Allow" (gratuito), "Charge" (richiedi pagamento) o "Block" - con Cloudflare che funge da merchant of record. Il più recente modello Pay Per Use, annunciato il 1° luglio 2026, paga gli editori sull'evento di output, quando i loro contenuti compaiono in una risposta generata dall'IA, piuttosto che su ogni scansione.

Il dettaglio fondamentale sull'ambito: questa impostazione predefinita è applicata a nuovi domini e piani gratuiti. Un sito già consolidato su Cloudflare non si ribalta il 15 settembre. Ma questo sbilancio conta per chi acquista link, perché una parte consistente dei siti donatori economici e appena messi in piedi sono esattamente le proprietà su nuovo dominio e piano gratuito che questa misura colpisce più duramente.

Perché è importante per i tuoi backlink

Un backlink funziona solo se la pagina su cui si trova può essere letta da ciò che vuoi influenzare. Per la SEO classica, quel lettore è Googlebot, e Googlebot riesce ancora a passare attraverso il nuovo default di Cloudflare. Per la ricerca AI, i lettori sono un insieme diverso di bot, e sono proprio questi che ora vengono respinti. Il risultato è una divisione a due canali in un singolo link:

CrawlerScopoCloudflare predefinito (pagine pubblicitarie)Effetto sul tuo link
GooglebotRicerca classicaConsentitoPieno valore per il posizionamento su Google
GPTBot (OpenAI)Formazione / agenteBloccatoNessun accesso alle risposte di ChatGPT
ClaudeBot (Anthropic)Formazione / agenteBloccatoNessun accesso alle risposte di Claude
PerplexityBotAgente / motore di risposteBloccatoNessun accesso alle citazioni di Perplexity

Leggilo come un avvertimento per l'obiettivo di visibilità IA che tanti acquirenti di link ora hanno. Abbiamo trattato nel nostro articolo su da dove provengono i link citati dall'AI che una quota crescente dei budget per i link è mirata a essere menzionati da ChatGPT e Perplexity, non solo a posizionarsi in prima pagina. Se la pagina donatrice è dietro il nuovo default di Cloudflare, quei soldi non comprano nulla verso le citazioni AI - i crawler AI non vedono mai il link. Per il puro SEO Google, il link va bene. Per la ricerca AI, potrebbe essere invisibile.

Il donatore che hai acquistato potrebbe essere già invisibile all'IA

Questo non è ipotetico. Un link economico posizionato su un sito appena registrato su un piano gratuito Cloudflare sta, per impostazione predefinita, probabilmente bloccando ogni crawler AI in questo momento. Non lo sapresti mai da un DR score o da un grafico del traffico. Verificare è semplice, ed è il controllo che quasi nessuno esegue:

  • Recupera la pagina come un crawler AI. Richiedi l'URL del donatore con un user-agent GPTBot o ClaudeBot e verifica se ottieni il contenuto o un blocco. Un 403 o una pagina di sfida significa che il link è invisibile per quel motore.
  • Leggi il robots.txt. Esplicito Disallow le regole per GPTBot, ClaudeBot, Google-Extended o PerplexityBot sono un segnale diretto che il sito ha scelto di tenere fuori l'IA
  • Verifica se è un dominio nuovo su un piano gratuito. Quelle sono le proprietà che il default di Cloudflare prende di mira. Un donatore appena registrato è il caso a maggior rischio.
  • Conferma che la pagina venga effettivamente renderizzata per un bot. Un link all'interno di contenuti che solo un utente loggato può vedere non trasmette nulla a nessun crawler, IA o altro.

Cosa verificare prima di acquistare un link per la visibilità AI

Se il tuo obiettivo include essere citato dai motori AI, la policy sui bot del donatore è ora un criterio d'acquisto di primo livello, subito accanto a rilevanza e traffico reale:

  • Accesso AI-crawler. Il donatore dovrebbe consentire a GPTBot, ClaudeBot e PerplexityBot di recuperare i suoi contenuti. Questo è il segnale nuovo e decisivo, e l'unico che il mercato non sta ancora controllando.
  • Accesso Googlebot. Ancora consentito secondo le impostazioni predefinite, ma verificalo comunque: un sito mal configurato può bloccare tutto.
  • Traffico reale e rilevanza. Invariato. Una pagina accessibile senza lettori e senza attinenza topica resta un link debole.
  • Stabilito, non appena creato. I donatori di domini nuovi con piano gratuito che più probabilmente bloccheranno i crawler AI sono anche le posizioni di qualità più bassa per ogni altro motivo.

La linea guida è che accessibilità all'AI e qualità dei link puntano nella stessa direzione. I siti donatori che bloccano per impostazione predefinita i crawler AI sono, in modo sproporzionato, i siti economici, nuovi, con piano gratuito che dovresti già star evitando.

Dove lascia questo gli acquirenti di link

Cloudflare ha appena reso la policy sui bot di un donatore parte del valore di un link. Un posizionamento su un sito reale e consolidato che lascia entrare i crawler AI può alimentare sia le classifiche Google sia le citazioni AI. Un posizionamento su un sito nuovo, pieno di ads e su piano gratuito potrebbe non alimentare nessuno dei due. Questo è esattamente il filtro dietro come Rixot approvvigiona i posizionamenti: traffico reale, donatori consolidati che sia i crawler di ricerca sia quelli di AI riescono davvero a raggiungere, anziché domini usa e getta che nelle metriche sembrano a posto ma sono murati rispetto ai motori che contano. Con la ricerca AI che continua a erodere i click, "questo link lo può vedere anche l'AI" smette di essere un dettaglio tecnico e diventa la domanda.

FAQ

Cloudflare blocca Googlebot?

No. Il default di Cloudflare del 15 settembre 2026 blocca i crawler AI misti e di training/agent su pagine supportate dalla pubblicità, ma i crawler di ricerca a scopo singolo come Googlebot rimangono consentiti. La SEO classica di Google non è influenzata dal default.

Quali crawler AI blocca il default di Cloudflare?

Crawler nelle categorie di addestramento e agent, e crawler "misti" che non separano le loro funzioni - in pratica GPTBot, ClaudeBot, PerplexityBot e simili. Il blocco si applica di default sulle pagine supportate da pubblicità per nuovi domini e piani gratuiti.

Come influisce sui miei backlink?

Se la pagina del donatore che ospita il tuo link blocca i crawler AI, quel link non può contribuire alle citazioni su ChatGPT, Claude o Perplexity, anche se continua a trasmettere valore per la ricerca Google. Per obiettivi di visibilità AI, un donatore che blocca l'AI è di fatto morto.

Come verifico se un donatore blocca i crawler AI?

Recupera la pagina usando un user-agent GPTBot o ClaudeBot e verifica se ottieni il contenuto o un 403/captcha, e leggi il robots.txt del sito per regole Disallow contro GPTBot, ClaudeBot, Google-Extended o PerplexityBot. I nuovi domini su piani gratuiti Cloudflare sono i più a rischio.

Cos'è Cloudflare Pay Per Crawl?

Consente agli editori di impostare ciascun crawler IA su Allow (gratuito), Charge (richiedi pagamento) o Block, con Cloudflare come merchant of record. Il modello correlato Pay Per Use, annunciato il 1° luglio 2026, paga gli editori quando i loro contenuti compaiono in una risposta generata dall'IA.

Fonti

  • Cloudflare - "Introduzione al pay per crawl," blog.cloudflare.com
  • TechCrunch - "La nuova policy di Cloudflare spinge le aziende AI a pagare per i contenuti degli editori" (1 luglio 2026), techcrunch.com
  • The Next Web - "Cloudflare bloccherà i crawler AI, pagherà gli editori," thenextweb.com