Cloudflare cambió el bloqueo de bots de IA y puede frenar a Googlebot

El 15 de septiembre de 2026 entró en vigor el cambio que Cloudflare había anunciado en julio sobre cómo trata a los bots de inteligencia artificial. Ese día la empresa lanzó una opción nueva, Disallow AI Training, y cambió lo que hacen sus botones de bloqueo, según su blog oficial. Si tu sitio pasa por Cloudflare, incluso en el plan gratuito, una configuración equivocada puede dejar a Googlebot por fuera y sacarte de la búsqueda sin que tu archivo robots.txt lo muestre.

Las tres categorías de bots

En el anuncio de julio Cloudflare dividió el tráfico automatizado de IA en tres grupos, cada uno con su propio control:

• Search. Rastreadores que recogen o indexan tu contenido para responder preguntas sobre él más adelante.
• Agent. Comportamiento automatizado que actúa en nombre de una persona, normalmente en tiempo real.
• Training. Rastreadores que toman tu contenido para entrenar o ajustar un modelo.

El enredo aparece con los rastreadores de uso mixto. Googlebot, Applebot y Bingbot hacen búsqueda y entrenamiento con el mismo agente, y en ese anuncio Cloudflare advirtió que los clientes que bloquearan Training también los bloquearían a ellos. Para los dominios nuevos que entraran a Cloudflare desde el 15 de septiembre, fijó valores por defecto que bloquean Training y Agent en las páginas con publicidad y dejan permitido Search.

Qué cambió el 15 de septiembre

La entrada del blog de Cloudflare del 15 de septiembre resuelve parte del enredo con una opción nueva. Disallow AI Training publica en robots.txt la preferencia de no entrenamiento, deja pasar a los rastreadores mixtos que Cloudflare considera responsables para que sigan indexando, y bloquea a todos los demás rastreadores de entrenamiento. Está disponible para todos los clientes, en todos los planes.

La otra cara del cambio es más delicada. Si eliges Block en la categoría de entrenamiento, el mismo texto indica que se bloquean todos los rastreadores, incluidos los mixtos. En la práctica, Googlebot no puede entrar a tu sitio ni para la búsqueda ni para el entrenamiento.

Cloudflare explica que las configuraciones antiguas del interruptor Block AI Bots migran de forma automática, y que quien había bloqueado el entrenamiento pasa a Disallow AI Training, para conservar el efecto sin cortar la búsqueda. Aun así, cualquier cambio manual posterior puede devolverte al escenario de riesgo si alguien elige Block sin saber lo que implica.

Qué dicen Google, Apple y Microsoft

Cloudflare califica como responsables a los tres grandes rastreadores mixtos, cada uno en un punto distinto. Google ya ofrece controles y espera lanzar herramientas de transparencia por URL en las próximas semanas. Apple compartió los detalles de una solución en desarrollo para el próximo año. Microsoft trabaja en respetar la preferencia de no entrenamiento en robots.txt, con meta en el inicio de 2027. Según el mismo texto, Google sostiene que bloquear Google-Extended no afecta la inclusión del sitio en la Búsqueda ni se usa como señal de posicionamiento.

El riesgo no era teórico. En agosto, Search Engine Journal recogió el caso de un usuario de Reddit que, al activar el bloqueo de entrenamiento, vio cómo Googlebot y Bingbot recibían errores 403 al pedir su sitemap, y cómo el acceso volvía en cuanto lo desactivaba.

Mi lectura para una pyme

Para la mayoría de empresas que quieren ser encontradas, bloquear a Googlebot es un error caro. No recomendaría la opción Block en Training a nadie que dependa de la búsqueda orgánica. Si te preocupa que tu contenido termine entrenando modelos, Disallow AI Training es la opción pensada para ese caso.

Y si te interesa aparecer en las respuestas de asistentes como ChatGPT o Perplexity, revisa también que la categoría Search no esté bloqueada. Ahí están los rastreadores que alimentan esas respuestas, y cerrarles la puerta es renunciar a una vía de visibilidad que apenas empieza.

Conviene además no confiar solo en robots.txt. En el caso que recogió Search Engine Journal, Googlebot recibía un error 403 del servidor, no una instrucción en ese archivo, así que un robots.txt impecable no garantiza nada si la regla del panel dice otra cosa.

Otro punto es quién toca la configuración. En muchas pymes el acceso a Cloudflare lo tiene quien montó el sitio hace años, no el equipo de marketing. Si nadie en tu empresa sabe entrar al panel, ese es el primer problema que resolver, antes que cualquier ajuste de bots.

Qué haría yo esta semana

• Entra al panel de Cloudflare. Busca la sección de bots de IA en la configuración de seguridad y anota qué está elegido en Search, Agent y Training.
• Revisa la opción de Training. Si dice Block y dependes de Google, cámbiala a Disallow AI Training, salvo que tengas una razón concreta para cortar también la búsqueda.
• Mira las estadísticas de rastreo en Search Console. Busca errores 403 o una caída en las solicitudes de Googlebot desde mediados de septiembre.
• Prueba una URL en vivo. Con la inspección de URL de Search Console, confirma que Google puede rastrear tu página principal y tus páginas de servicio.

Si tu sitio lo administra un proveedor externo, compártele este artículo y pídele una captura de la configuración. Si quieres revisar la parte técnica y la de contenidos al tiempo, el diagnóstico cubre ambos frentes. Para el contexto de cómo la IA está cambiando la búsqueda en la región, sirve el artículo sobre Gemini y el SEO en Latinoamérica.

Fuentes

• Cloudflare, Have it both ways, stay discoverable in search while disallowing AI training (2026-09-15)
• Cloudflare, Content Independence Day y las nuevas opciones para bots de IA (2026-07-01)
• Search Engine Journal, reporte de Googlebot bloqueado por Cloudflare (2026-08-04)