~14%
312domini che bloccano GPTBot
Domini con direttive robots.txt specifiche per l'AI
Quanti siti hanno preso posizione sui crawler AI?
Circa il 14%, cioè 546 dei 3.816 domini principali in cui è stato trovato un file robots.txt. GPTBot è insieme il bot più bloccato e quello più esplicitamente autorizzato.
~14%Domini con direttive robots.txt specifiche per l'AI
Qui il lavoro lo fa il denominatore. È il 14% dei domini che hanno un robots.txt raggiungibile, non il 14% dei primi diecimila, e il conteggio comprende le direttive di autorizzazione oltre a quelle di divieto. La lettura corretta è «la maggior parte dei siti non ha alcuna regola sull'AI», che è il risultato, e non «il 14% blocca l'AI», che non è ciò che è stato misurato.
Fonte
- Periodo di riferimento
- Area geografica
- Globale
- Tipo di evidenza
- Analisi
- Campione
- 546 of 3,816 domains that had a findable robots.txt, drawn from Cloudflare Radar's top 10,000. Counts allow as well as disallow directives
- Per confronto
- domini che bloccano GPTBot: 312
- Ultima verifica
Per questo dato non abbiamo consultato lo strumento primario: proviene dalla sintesi dell'editore stesso o da un documento che lo cita. Trattate il livello come indicativo.
Metodo
Cloudflare Radar, rilevazione puntuale del 6 giugno 2025 sui primi 10.000 domini di Radar. 312 domini vietavano GPTBot, 250 in modo totale e 62 in modo parziale; 61 lo autorizzavano esplicitamente. Cloudflare avverte che alcuni token del robots.txt, fra cui Google-Extended, non sono sottostringhe di user agent e quindi non trovano corrispondenza nei log delle richieste.
Domande collegate
Indicatori collegati
42%
29%verificano a volteConsumatori che verificano sempre quanto dice l'AI
25%
Viaggiatori che hanno ricevuto informazioni di viaggio obsolete o sbagliate dall'AI
70%
Imprese turistiche che già usano l'AI
94%
60%strutture con meno di 10 dipendentiDivario di preparazione alla cybersecurity per dimensione della struttura
52%
Dirigenti che dichiarano agenti AI in produzione
6