Cloudflare lanzó una función que convierte páginas HTML en rebajas cuando los sistemas de inteligencia artificial lo solicitan. Los sitios de su red ahora pueden ofrecer contenido más ligero a los bots sin crear páginas separadas.
La función, llamada Markdown para agentes, funciona mediante la negociación de contenido HTTP. Un rastreador de IA envía una solicitud con Accept: text/markdown en el encabezado. Cloudflare lo intercepta, recupera el HTML original del servidor de origen, lo convierte en descuento y entrega el resultado.
El lanzamiento llega días después de que John Mueller de Google calificó la idea de ofrecer descuentos a los robots de IA como «una idea estúpida» y cuestionó si los robots pueden siquiera analizar los enlaces de descuento correctamente.
Qué hay de nuevo
Cloudflare describió la característica como tratar a los agentes de IA como “ciudadanos de primera clase” junto con los visitantes humanos. La empresa utilizó su propia publicación de blog como ejemplo. La versión HTML consumió 16.180 tokens, mientras que la conversión de rebajas utilizó 3.150 tokens.
«Alimentar HTML sin formato a una IA es como pagar por palabra para leer el paquete en lugar de la letra que contiene», escribió la compañía.
La conversión ocurre en la red perimetral de Cloudflare, no en el servidor de origen. Los sitios web lo habilitan por zona a través del panel y está disponible en versión beta sin costo adicional para los clientes de los planes Pro, Business y Enterprise, además de SSL para clientes SaaS.
Cloudflare señaló que algunas herramientas de codificación de IA ya envían el Accept: text/markdown encabezamiento. La empresa nombró a Claude Code y OpenCode como ejemplos.
Cada respuesta convertida incluye una x-markdown-tokens encabezado que estima el recuento de tokens de la versión de rebajas. Los desarrolladores pueden utilizar esto para gestionar ventanas de contexto o planificar estrategias de fragmentación.
Valores predeterminados de señal de contenido
Las respuestas convertidas incluyen una Content-Signal encabezado establecido en ai-train=yes, search=yes, ai-input=yes De forma predeterminada, la señalización del contenido se puede utilizar para el entrenamiento de IA, el uso de búsqueda y la entrada de IA (incluido el uso de agentes). Que un bot determinado respete esas señales depende del operador del bot. Cloudflare dijo que la función ofrecerá políticas de señal de contenido personalizadas en el futuro.
El marco Content Signals, que Cloudflare anunció durante la Semana del Cumpleaños de 2025, permite a los propietarios de sitios establecer preferencias sobre cómo se utiliza su contenido. Habilitar la conversión de rebajas también aplica una señal de uso predeterminada, no solo un cambio de formato.
En qué se diferencia esto de lo que criticó Mueller
Mueller criticaba una práctica diferente. Algunos propietarios de sitios crean páginas de rebajas independientes y las entregan a agentes de usuario de IA a través de middleware. Mueller expresó su preocupación por el encubrimiento y los enlaces rotos, y cuestionó si los bots podrían siquiera analizar las rebajas correctamente.
La función de Cloudflare utiliza un mecanismo diferente. En lugar de detectar agentes de usuario y ofrecer páginas alternativas, se basa en la negociación de contenido. La misma URL ofrece diferentes representaciones según lo que el cliente solicita en el encabezado.
Los comentarios de Mueller abordaron el servicio basado en agentes de usuario, no la negociación de contenido. En un hilo de Reddit Sobre la función de Cloudflare, Mueller respondió con la misma posición. Escribió: «¿Por qué complicar aún más las cosas (versión paralela solo para bots) en lugar de dedicar un poco de tiempo a mejorar el sitio para todos?»
Google define el encubrimiento como mostrar contenido diferente a los usuarios y motores de búsqueda con la intención de manipular las clasificaciones y engañar a los usuarios. La preocupación por el encubrimiento puede aplicarse de manera diferente aquí. Con el rastreo de agente de usuario, el servidor decide qué mostrar en función de quién pregunta. En la negociación de contenido, el cliente solicita un formato y el servidor responde. El contenido es la misma información en un formato diferente, no contenido diferente para visitantes diferentes.
El resultado práctico sigue siendo similar desde la perspectiva del rastreador. El robot de Google que solicite HTML estándar verá una página web completa. Un agente de IA que solicitara una reducción vería una versión de texto simplificada de la misma página.
Nuevo seguimiento por radar
Cloudflare también agregó seguimiento del tipo de contenido a Cloudflare Radar para el tráfico de bots de IA. Los datos muestran la distribución de los tipos de contenido devueltos a los agentes y rastreadores de IA, desglosados por tipo MIME.
Puede filtrar por bot individual para ver qué tipos de contenido reciben los rastreadores específicos. Cloudflare mostró OAI-SearchBot como ejemplo, mostrando el volumen de respuestas de rebajas enviadas al rastreador de búsqueda de OpenAI.
Los datos están disponibles a través de las API públicas y el Explorador de datos de Cloudflare.
Por qué esto importa
Si ya ejecuta su sitio a través de Cloudflare, puede habilitar la conversión de rebajas con un solo interruptor en lugar de crear páginas de rebajas separadas.
Habilitar Markdown para agentes también establece el Content-Signal encabezado a ai-train=yes, search=yes, ai-input=yes por defecto. Los editores que han tenido cuidado con el acceso de la IA a su contenido deben revisar esos valores predeterminados antes de activar la función.
Mirando hacia el futuro
Cloudflare dijo que planea agregar opciones de políticas personalizadas de Señal de contenido a Markdown para agentes en el futuro.
Las críticas de Mueller se centraron en páginas de rebajas separadas, no en la negociación de contenido estándar. Google no ha abordado si ofrecer rebajas a través de la negociación de contenido está dentro de sus pautas de encubrimiento.
La función es voluntaria y está limitada a los planes pagos de Cloudflare. Revise los valores predeterminados de Content-Signal antes de habilitarlo.
