La política de Cloudflare obliga a las empresas de inteligencia artificial a pagar a los editores por el contenido.

Cloudflare ha fijado una nueva fecha límite para la industria de la IA, exigiendo que los rastreadores web utilizados por los motores de búsqueda tradicionales, como Google Search, se separen de aquellos diseñados para agentes de IA y su entrenamiento. La empresa anunció el miércoles que, a partir del 15 de septiembre de 2026, la configuración predeterminada de Cloudflare bloqueará a los rastreadores de “uso mixto” en todas las páginas que muestren anuncios.

Esto significa que, por defecto, se impedirá el acceso a dichos sitios a aquellos rastreadores que combinen funciones de búsqueda, de agente y de entrenamiento, a menos que los propietarios de los sitios ajusten manualmente la configuración. Según la empresa, este cambio será aplicable a nuevos clientes de Cloudflare, a nuevos sitios creados por clientes existentes y a todos los usuarios actuales en la versión gratuita.

Esta medida podría afectar la forma en que los proveedores de modelos de IA acceden al contenido web para su entrenamiento y para alimentar sus servicios basados en agentes.

Cloudflare señala que la mayoría de los propietarios de sitios web desean que su contenido sea encontrado a través de búsquedas e, incluso, mediante servicios de IA, pero también quieren medidas de protección para evitar que su propiedad intelectual se difunda gratuitamente.

Cloudflare menciona específicamente al “más grande motor de búsqueda del mundo” (en clara referencia a Google) por tener acceso a aproximadamente “el doble de información” que otras empresas de IA, ya que este gigante de la búsqueda dificulta que los clientes sigan siendo encontrables sin que su contenido sea utilizado también para fines de IA.

Google ha rechazado anteriormente esta generalización, señalando que ofrece un bot llamado Google Extended, que permite a los propietarios de sitios optar por no tener su contenido utilizado para el entrenamiento ni en productos de IA como Gemini Apps y la Vertex API. Utilizar esta opción de exclusión no afecta la inclusión de un sitio en Google Search. Sin embargo, el bot estrella de Google, Googlebot, sigue rastreando contenido para las búsquedas, incluyendo funciones de IA como AI Overviews y AI Mode.

“Ahora que la mayor parte del tráfico en Internet proviene de entidades no humanas, debemos ir más allá y actuar con mayor rapidez para que pueda surgir un ecosistema sostenible”, declaró Matthew Prince, cofundador y CEO de Cloudflare, en su anuncio, al referirse al hito reciente en el que los bots superaron por primera vez al tráfico humano en línea, un cambio que no se esperaba hasta el próximo año.

“Las nuevas herramientas y asociaciones de Cloudflare brindan a los propietarios de sitios web una mayor visibilidad y oportunidades comerciales, además de beneficiar a las empresas de IA que cuentan con bots cuyas intenciones son claras y transparentes. Esperamos que los cambios predeterminados que proponemos incentiven a los rastreadores de uso mixto a separar la búsqueda del uso como agente y del entrenamiento”, dijo Prince.

Aunque Cloudflare ofrece una serie de productos para ayudar a los usuarios a crear sus propios sistemas de IA, la empresa también ha lanzado una gama de herramientas que permiten a los editores tener más control sobre su contenido en la era de la IA. En los últimos años, Cloudflare ha desarrollado herramientas para combatir a los bots de IA, incluyendo un mercado donde los sitios web pueden cobrar a estos bots por el acceso al contenido, denominado Pay Per Crawl.

Según la empresa, esta opción está evolucionando hacia “Pay Per Use”, lo que permitirá a los editores cobrar a las empresas de IA cuando su contenido genera valor, y no solo cuando es recuperado.

Este cambio también podría ayudar a ahorrar ancho de banda y recursos informáticos de los editores para los proveedores de modelos de IA, ya que los datos de Cloudflare indican que más del 50 % del tráfico de rastreo proveniente de bots de IA se destina a recuperar páginas sin cambios.

Para poner esto en práctica, Cloudflare está trabajando inicialmente con dos socios: Ceramic.ai y You.com. Cuando un editor opta por participar, recibe un pago cada vez que su contenido aparece en los resultados de búsqueda basados en IA de Ceramic o cuando You.com accede a parte de su contenido premium.

Según Cloudflare, otras empresas de IA pueden personalizar este modelo según sus necesidades operativas.