Ir al contenido
OpenAIAnálisis

3 de 4

1 of 4no declaran tal excepción

Fabricantes de asistentes cuya documentación dice que las peticiones iniciadas por un usuario pueden ignorar robots.txt

¿Impide robots.txt que un asistente de IA lea mi página?

Para el crawling automático, sí. Para una petición que ha iniciado un usuario, tres de los cuatro grandes fabricantes de asistentes publican que robots.txt puede no aplicarse.

ValorOctubre de 2026 · Global
  • 3 of 4

    Fabricantes de asistentes cuya documentación dice que las peticiones iniciadas por un usuario pueden ignorar robots.txt

    Octubre de 2026 · Global

  • 1 of 4

    no declaran tal excepción

    Para comparar

Es el hueco que se le escapa a casi todo el consejo sobre robots.txt. Bloquear un crawler de entrenamiento está bien documentado y funciona. Pero cuando una persona pregunta a un asistente por su hotel y este va a mirar, OpenAI, Google y Perplexity publican todos que la regla puede ignorarse, porque la petición la pidió un humano y no la programó una máquina. La documentación de Anthropic no recoge ninguna excepción de ese tipo.

Fuente

Periodo de referencia
Ámbito geográfico
Global
Tipo de evidencia
Análisis
Muestra
OpenAI, Google and Perplexity each publish that user-initiated fetches may ignore robots.txt; Anthropic's documentation states no equivalent exception
Para comparar
no declaran tal excepción: 1 of 4
Última verificación

Método

Leído en octubre de 2026 en la documentación de crawlers de cada fabricante. OpenAI: "Because these actions are initiated by a user, robots.txt rules may not apply." Google: "these fetchers generally ignore robots.txt rules." Perplexity: "Since a user requested the fetch, this fetcher generally ignores robots.txt rules." Anthropic declara que sus bots respetan robots.txt y no nombra ninguna excepción. El silencio no es un compromiso, así que el cuarto caso hay que leerlo como no documentado y no como una garantía.

Método →

Preguntas relacionadas

Indicadores relacionados