3 de 4
1 of 4no declaran tal excepción
Fabricantes de asistentes cuya documentación dice que las peticiones iniciadas por un usuario pueden ignorar robots.txt
¿Impide robots.txt que un asistente de IA lea mi página?
Para el crawling automático, sí. Para una petición que ha iniciado un usuario, tres de los cuatro grandes fabricantes de asistentes publican que robots.txt puede no aplicarse.
3 of 4
Fabricantes de asistentes cuya documentación dice que las peticiones iniciadas por un usuario pueden ignorar robots.txt
Octubre de 2026 · Global
1 of 4
no declaran tal excepción
Para comparar
Es el hueco que se le escapa a casi todo el consejo sobre robots.txt. Bloquear un crawler de entrenamiento está bien documentado y funciona. Pero cuando una persona pregunta a un asistente por su hotel y este va a mirar, OpenAI, Google y Perplexity publican todos que la regla puede ignorarse, porque la petición la pidió un humano y no la programó una máquina. La documentación de Anthropic no recoge ninguna excepción de ese tipo.
Fuente
- Periodo de referencia
- Ámbito geográfico
- Global
- Tipo de evidencia
- Análisis
- Muestra
- OpenAI, Google and Perplexity each publish that user-initiated fetches may ignore robots.txt; Anthropic's documentation states no equivalent exception
- Para comparar
- no declaran tal excepción: 1 of 4
- Última verificación
Método
Leído en octubre de 2026 en la documentación de crawlers de cada fabricante. OpenAI: "Because these actions are initiated by a user, robots.txt rules may not apply." Google: "these fetchers generally ignore robots.txt rules." Perplexity: "Since a user requested the fetch, this fetcher generally ignores robots.txt rules." Anthropic declara que sus bots respetan robots.txt y no nombra ninguna excepción. El silencio no es un compromiso, así que el cuarto caso hay que leerlo como no documentado y no como una garantía.
Preguntas relacionadas
Indicadores relacionados
42%
29%verifican a vecesConsumidores que siempre verifican lo que dice la IA
25%
Viajeros que recibieron información de viaje obsoleta o incorrecta de la IA
70%
Empresas turísticas que ya usan IA
94%
60%establecimientos con menos de 10 empleadosBrecha de preparación en ciberseguridad por tamaño del establecimiento
52%
Directivos que declaran agentes de IA en producción
6