robots.txt
El archivo que indica a los rastreadores qué partes de un sitio pueden recoger.
El robots.txt gobierna hoy la visibilidad en IA además de la indexación en búsqueda, y ambas decisiones deben tomarse por separado. Un error común y caro en turismo es un disallow general heredado de una plantilla, que retira silenciosamente a un establecimiento de la capa de recuperación sobre la que se construyen las respuestas de IA. Los analizadores estrictos cierran un grupo de reglas en la primera línea en blanco, así que un error de formato puede desactivar reglas sin aviso.
Términos relacionados
Indicadores relacionados
Cada cifra lleva su editor, su muestra y su periodo de campo.