✨︎ Resumen (TL;DR):
- Cloudflare obligará a las empresas de IA a separar sus bots de búsqueda de los de entrenamiento.
- A partir del 15 de septiembre de 2026, la configuración por defecto bloqueará rastreadores mixtos en sitios con anuncios.
- La medida pone en riesgo la indexación de páginas web frente a Googlebot y BingBot si deciden bloquear el entrenamiento.
Cloudflare anunció que las empresas de inteligencia artificial tienen hasta el 15 de septiembre de 2026 para clasificar y separar las funciones de sus rastreadores web. Si no lo hacen, la plataforma de seguridad, que protege a más del 20% de los dominios de internet, bloqueará por defecto sus bots de entrenamiento y agentes en páginas con publicidad, lo que afectará directamente su visibilidad en buscadores como Google.
El cambio responde a un conflicto creciente entre creadores de contenido y desarrolladores de inteligencia artificial. En lugar de debatir la naturaleza de los bots, Cloudflare clasificará su comportamiento en tres categorías claras: búsqueda, agentes y entrenamiento.
Un rastreador de entrenamiento es un bot de IA que extrae y almacena permanentemente información de páginas web para alimentar modelos de lenguaje.
Por el contrario, un rastreador de búsqueda indexa las páginas para responder dudas de los usuarios devolviendo tráfico al sitio original, mientras que los agentes realizan acciones en tiempo real por encargo de un humano, como Gemini o Claude operando en un navegador.
El riesgo oculto para el SEO de los sitios web
La nueva política plantea un dilema para los creadores de contenido. A partir del 15 de septiembre de 2026, los rastreadores de doble propósito que combinan búsqueda y entrenamiento se evaluarán bajo la regla más estricta.
Si un administrador decide bloquear el entrenamiento para proteger su propiedad intelectual, también bloqueará a Googlebot, Applebot y BingBot. Esto significa que los sitios web podrían perder visibilidad en los resultados de búsqueda convencionales al intentar protegerse de la IA.
El bloqueo a nivel de red que realiza la compañía es definitivo. A diferencia de las instrucciones de un archivo robots.txt, que las tecnológicas pueden omitir, el filtro de seguridad impide por completo el acceso al servidor del sitio.
Matthew Prince, cofundador y director ejecutivo de Cloudflare, justificó la medida debido a que el tráfico automatizado ya superó al humano en internet. “Ahora que la mayoría del tráfico en internet no es humano, tenemos que ir más lejos y actuar más rápido para que pueda surgir un ecosistema sostenible”, declaró el directivo.
El negocio del rastreo y la saturación de la red
La empresa también modificará su modelo de monetización. El esquema Pay Per Crawl evolucionará a un formato llamado Pay Per Use, en alianza con Ceramic.ai y You.com, donde los editores recibirán compensaciones cuando sus contenidos premium generen valor real en la respuesta de una IA, no solo por descargarlos.
Las estadísticas de Cloudflare muestran una saturación alarmante. Las solicitudes de entrenamiento ya representan la mayoría del tráfico de rastreo en su red, una cifra que apenas equivalía a una quinta parte en la primavera de 2025. Además, las peticiones diarias de agentes de IA crecieron más de un 1,700% en el último año, y más de la mitad del tráfico se desperdicia en descargar páginas que no han cambiado.
Prince confía en que esta presión obligue a las grandes tecnológicas a ordenar su software. “Las nuevas herramientas y alianzas de Cloudflare dan a los dueños de sitios más visibilidad y oportunidades comerciales, y benefician a las empresas de IA cuyos bots tienen una intención clara y transparente. Esperamos que los cambios por defecto que proponemos animen a los rastreadores de uso mixto a separar la búsqueda del uso como agente y del entrenamiento”, explicó.
Preguntas rápidas sobre el cambio de Cloudflare
¿A qué sitios aplican los nuevos valores por defecto del 15 de septiembre? Afectará a dominios nuevos en la plataforma, sitios nuevos de clientes actuales y cuentas del plan gratuito que no modifiquen sus opciones de configuración antes de la fecha límite.
¿El bloqueo de Cloudflare puede afectar a Googlebot? Sí. Si decides bloquear el entrenamiento de IA, se restringirá el acceso a bots mixtos como Googlebot o BingBot, lo que podría perjudicar tu posicionamiento orgánico en buscadores.
¿Cómo se puede evitar este cambio en la configuración? Los usuarios pueden acceder a los ajustes de seguridad en el panel de control de Cloudflare antes del plazo establecido para confirmar que desean mantener activos los rastreadores mixtos.
