Etiqueta: robots.txt

¿Qué es LLMS.txt y cómo funciona?

¿Qué es LLMS.txt? El archivo llms.txt es un documento en formato de texto plano (generalmente Markdown) que se coloca en la raíz de un sitio web (por ejemplo, www.tusitio.com/llms.txt) para ayudar a los modelos de inteligencia artificial (IA), específicamente los grandes modelos de lenguaje (LLM, como Grok, ChatGPT o Claude), a entender mejor el contenido […]

¿Robots.txt qué es? 26 Consejos SEO para usarlo como un experto

Desde los graves problemas que el contenido duplicado causa en el posicionamiento de muchas web la mayoría de clientes, sobre todo los programadores, me hacen distintas preguntas sobre cómo crear robots.txt para mejorar el rastreo de un sitio y para impedir el acceso a contenido duplicado del mismo.  He decidido sacar mi propia versión para […]