Se bloccare o meno i crawler IA viene presentata come una questione tecnica, e non lo è. Bloccarli sono poche righe di configurazione e si fa in dieci minuti. La parte difficile è decidere se lo si vuole davvero, e quella decisione è commerciale: state scegliendo fra proteggere i contenuti dall’addestramento dei modelli ed essere presenti nelle risposte che le persone oggi ricevono al posto di un elenco di risultati.

Quasi tutti i consigli che si trovano online scelgono una parte e poi la difendono. La posizione onesta è un’altra: la risposta giusta cambia con il modello di business, e un editore che vive di pagine viste e un’agenzia che vive di richieste di contatto devono arrivare a conclusioni opposte.

Lo scambio in una frase: bloccare i crawler IA impedisce che i vostri contenuti vengano acquisiti, e insieme impedisce che vengano citati. Se il fatturato dipende da persone che arrivano sulla vostra pagina, bloccare vi protegge. Se dipende dal fatto che le persone sappiano che esistete e poi vi contattino, bloccare vi toglie proprio dalla superficie dove quella scoperta avviene sempre più spesso.

Che cosa ha cambiato davvero Cloudflare

L’impostazione predefinita si è capovolta. Il 1 luglio 2025 Cloudflare è diventata il primo grande fornitore di infrastruttura a bloccare i crawler IA in modo predefinito , passando da un modello di rinuncia a un modello di consenso esplicito. Ai nuovi domini viene chiesto subito se i crawler IA possono raccoglierne i contenuti, e le aziende di IA hanno ora bisogno di un permesso dichiarato, non della semplice assenza di un rifiuto.

Questo conta ben oltre i clienti di Cloudflare, perché una quota rilevante del traffico web passa da quella rete. Un valore predefinito non è una regola, ma un valore predefinito applicato a quella scala ridisegna ciò che le aziende di IA possono dare per scontato.

Lo strumento si chiama AI Crawl Control ed è disponibile su tutti i piani, compreso quello gratuito. Vi mostra quali servizi di IA stanno raggiungendo i vostri contenuti, vi lascia impostare regole di autorizzazione o blocco crawler per crawler e verifica se un dato crawler rispetta robots.txt. La parte utile è vedere quel traffico prima di decidere qualsiasi cosa, e la maggior parte dei proprietari di siti non ha mai guardato.

Cloudflare ha anche spinto i crawler a dichiarare la propria finalità. Potete quindi distinguere un bot che addestra un modello da uno che scarica una pagina per comporre una risposta in tempo reale e da uno che indicizza per la ricerca. Sono tre patti molto diversi, e fino a poco tempo fa arrivavano indistinguibili.

Il modello economico è cambiato di nuovo a luglio 2026

È qui che ogni consiglio scritto l’anno scorso è ormai sbagliato.

Pay Per Crawl era nato nel 2025 come un mercato in cui gli editori facevano pagare le aziende di IA a ogni prelievo di pagina. Il 1 luglio 2026 Cloudflare ha dichiarato quel modello insufficiente ed è passata a Pay Per Use , che paga quando il vostro contenuto crea valore dentro una risposta, non quando un bot scarica una pagina.

Il ragionamento è immediato appena si vede il numero: oltre il 50% del traffico dei crawler IA riscarica pagine che non sono cambiate. Far pagare a prelievo significa quindi fatturare soprattutto spreco. Far pagare quando il contenuto compare in una risposta fattura invece la cosa che ha davvero sostituito una visita al vostro sito.

È presto. I partner di lancio sono Ceramic.ai e You.com, quindi non è ancora una fonte di ricavi ampia per una piccola impresa britannica. Trattatela come una direzione di marcia, non come una voce nel bilancio del prossimo anno.

C’è anche una scadenza da segnare in agenda. Dal 15 settembre 2026 i crawler a uso misto saranno bloccati in modo predefinito sulle pagine che ospitano pubblicità, a meno che il proprietario del sito non cambi l’impostazione. Se vendete pubblicità e contate sul traffico di rimando dalle IA, quel valore predefinito si applicherà a voi senza che facciate nulla.

Quanto costa davvero bloccare

Tre cose, e solo la prima è ovvia.

Perdete le citazioni. Le risposte delle IA nominano le fonti. Essere uno di quei nomi è l’equivalente moderno di un posizionamento in prima pagina, e un crawler bloccato non può citare ciò che non gli è permesso leggere. La nostra guida alla Generative Engine Optimization spiega che cosa fa guadagnare una citazione una volta deciso di essere visibili.

Perdete la misurazione. Il traffico bloccato non compare nei report come una perdita. Compare come niente, e questo è indistinguibile dal non averlo mai avuto. I siti che hanno bloccato presto spesso non sanno dire quanto sia costato, perché lo scenario di confronto non è mai stato registrato.

Non fermate davvero l’addestramento. Bloccare i crawler educati, quelli che si identificano e rispettano robots.txt, esclude esattamente chi è disposto a seguire le regole. I contenuti già acquisiti restano acquisiti, e gli scraper che ignorano robots.txt non erano mai stati coinvolti. State governando solo il comportamento del sottoinsieme cortese.

Di contro, bloccare protegge davvero un’attività il cui prodotto è il contenuto stesso. Un editore in abbonamento, una società di ricerca che vende report, un archivio fotografico: per loro una risposta IA che riassume il contenuto sostituisce direttamente la vendita, e la citazione è un magro risarcimento.

Come decidere se bloccare i crawler IA

Chiedetevi quanto vale un visitatore e per quale strada diventa cliente.

Bloccate se il contenuto è il prodotto. Giornalismo a pagamento, ricerche vendute, dati di riferimento che concedete in licenza. La risposta IA compete direttamente con la vostra vendita.

Consentite se il contenuto è marketing per qualcos’altro. Un’agenzia software, una società di consulenza, uno studio legale, una clinica. I vostri articoli esistono perché i compratori si accorgano che sapete risolvere il loro problema. Essere nominati in una risposta è esattamente la notorietà che stavate già pagando, e la richiesta deve comunque arrivare a voi.

Consentite in modo selettivo se siete a metà strada. Le regole per singolo crawler permettono di accettare l’indicizzazione per la ricerca rifiutando l’addestramento, una posizione intermedia difendibile ora che la finalità viene dichiarata.

Per la maggior parte delle aziende che leggono queste righe la risposta è consentire. L’istinto di bloccare è protettivo e comprensibile, e di solito protegge contenuti privi di valore commerciale autonomo mentre taglia il canale di scoperta che quei contenuti erano stati scritti per alimentare.

Da dove cominciare

Guardate il traffico prima di cambiare qualsiasi cosa. AI Crawl Control mostra, su qualunque piano, quali crawler vi stanno raggiungendo e con quale frequenza. Un mese di quei dati trasforma una discussione ideologica in un semplice conto aritmetico.

Poi decidete crawler per crawler invece che in blocco, e mettete per iscritto la decisione con la sua data, perché questo ambito è cambiato due volte in 14 mesi e cambierà ancora.

Mecanik esegue audit SEO tecnici che coprono l’accesso dei crawler IA e la visibilità nelle citazioni oltre ai controlli tradizionali, e realizza la configurazione con il nostro team di sviluppo web . Se vi posizionate bene e non comparite mai nelle risposte delle IA, l’accesso dei crawler è la prima cosa da escludere.

Post correlati: Agenzia SEO per l’IA: che cosa fa e quanto costa , Google AI Mode e il traffico del tuo sito , Sito WordPress hackerato: rimuovere il malware e Velocità sito Cloudflare: guida ottimizzazione 2026 .

Domande frequenti

Devo bloccare i crawler IA sul mio sito? Dipende interamente da come guadagnate. Bloccate se il contenuto è il prodotto, come nel giornalismo a pagamento o nella ricerca venduta, perché un riassunto dell’IA sostituisce la vendita. Consentite se il contenuto è marketing per un servizio, perché essere citati in una risposta è proprio la notorietà che quel contenuto doveva creare, e la richiesta continua ad arrivare a voi.

Bloccare i crawler IA impedisce che i miei contenuti vengano usati per l’addestramento? Solo in parte. Ferma i crawler educati, quelli che si identificano e rispettano robots.txt, cioè esattamente il sottoinsieme disposto a seguire le regole. I contenuti già acquisiti restano acquisiti, e gli scraper che ignorano robots.txt non sono mai stati toccati. State governando i crawler cortesi, non tutti quanti.

Che cos’è Cloudflare AI Crawl Control? Una funzione di Cloudflare, disponibile su tutti i piani compreso quello gratuito, che vi lascia vedere quali servizi di IA accedono al sito, impostare regole di autorizzazione o blocco per i singoli crawler e verificare se ciascuno rispetta robots.txt. Supporta anche la tariffazione a prelievo. La cosa più utile che fa è mostrarvi il traffico prima che decidiate qualsiasi cosa.

Che cosa ha sostituito Cloudflare Pay Per Crawl? Pay Per Use, annunciato il 1 luglio 2026. Invece di far pagare alle aziende di IA ogni prelievo di una pagina, gli editori vengono pagati quando il loro contenuto crea valore dentro una risposta. Il ragionamento di Cloudflare era che oltre il 50% del traffico dei crawler IA riscarica pagine immutate, quindi la tariffa a prelievo fatturava soprattutto spreco. I partner di lancio sono Ceramic.ai e You.com.

Che cosa succede il 15 settembre 2026? Cloudflare inizia a bloccare in modo predefinito i crawler IA a uso misto sulle pagine che ospitano pubblicità, a meno che il proprietario del sito non cambi l’impostazione. Uso misto significa un crawler che non separa l’indicizzazione per la ricerca dall’addestramento e dal traffico degli agenti. Se vendete pubblicità e dipendete dai rimandi delle IA, quel valore predefinito vi riguarda senza alcuna azione da parte vostra.