A Cloudflare, um dos maiores provedores de infraestrutura da internet, está tentando mudar uma premissa básica de como a web funciona: a de que os sistemas de IA podem raspar livremente o conteúdo sobre o qual são construídos. Sob uma nova política anunciada em 1 de julho, a empresa vai empurrar as empresas de IA para uma escolha simples, pagar pelo conteúdo que consomem ou perder o acesso a ele. A alavanca é a posição da Cloudflare à frente de uma parcela muito grande dos sites do mundo, o que lhe permite definir padrões que editores individuais têm tido dificuldade de impor por conta própria. O enquadramento que a empresa usa é o de que o antigo acordo da web, ser rastreado em troca de receber leitores, se desfez na era da IA, que pega o conteúdo mas muitas vezes não devolve nada.
O núcleo da política é uma exigência de que as empresas de IA parem de se esconder atrás de rastreadores de propósito geral. A Cloudflare está exigindo que elas separem os bots que usam para a indexação de busca tradicional daqueles que usam para treinamento de IA e para agentes de IA, de modo que um site possa continuar dizendo sim a ser encontrado em um mecanismo de busca enquanto diz não, ou define um preço, a ser usado como dado de treinamento. Para dar força à exigência, a Cloudflare está mudando seus próprios padrões. A partir de 15 de setembro de 2026, suas configurações vão, por padrão, bloquear os chamados rastreadores de uso misto, aqueles que se recusam a declarar qual propósito servem, em qualquer página que hospede publicidade. Esse padrão se aplicará a novos clientes da Cloudflare, a novos sites criados por clientes existentes e a todos os clientes atuais do plano gratuito da empresa, a menos que escolham desativá-lo.
A segunda metade do plano tem a ver com dinheiro, e não com bloqueio. A Cloudflare já oferecia um recurso chamado Pay Per Crawl, que permitia a um site cobrar dos bots de IA cada vez que eles raspavam uma página. O novo passo, chamado Pay Per Use, tenta atrelar o pagamento ao valor, e não à mera requisição. Em vez de cobrar apenas quando uma página é baixada, a ideia é compensar um editor quando o conteúdo dele de fato faz algo útil para a empresa de IA, por exemplo quando aparece em uma resposta gerada ou quando desbloqueia material premium por trás de um paywall. A Cloudflare citou a Ceramic.ai e a You.com como parceiras iniciais, e também adquiriu um marketplace de licenciamento de conteúdo chamado Human Native para ajudar a intermediar esses acordos. A empresa aponta para seus próprios dados de que mais da metade do tráfego de rastreadores de IA é gasto rebaixando páginas que nem sequer mudaram, o que ela apresenta como puro desperdício que um sistema mais inteligente e pago poderia eliminar.
O que torna isso mais do que mais uma reclamação de editor é o fato de a Cloudflare ser um dos poucos atores com a alavancagem para fazer um novo padrão realmente se sustentar. Como está à frente de tanta coisa da web, uma mudança em suas configurações de fábrica silenciosamente reescreve as regras para um grande número de sites de uma só vez, sem que cada um deles tenha que travar a batalha sozinho. O executivo-chefe Matthew Prince colocou o raciocínio em termos crus, dizendo que, agora que a maioria do tráfego na internet não é humana, a empresa precisa ir mais longe e agir mais rápido para que um ecossistema sustentável possa surgir. Em outras palavras, o antigo modelo em que um visitante humano poderia ver um anúncio ou um convite de assinatura está sendo esvaziado por máquinas que leem a página e seguem em frente, e alguém precisa redesenhar a troca.
O movimento não vem sem suas próprias tensões, e vale a pena nomeá-las. A mais óbvia é que ele concentra muito poder em uma única empresa, porque, quando a Cloudflare muda um padrão, ela está na prática ditando política para uma fatia da internet, e nem todos ficarão confortáveis com um provedor de infraestrutura privado agindo como o pedágio da web. Há também questões práticas, já que medir quando o conteúdo cria valor é muito mais difícil do que contar quando uma página é requisitada, e grandes empresas de IA podem resistir, contornar as regras ou simplesmente se recusar a identificar seus rastreadores. Isso também é implantado de forma desigual, atingindo primeiro os clientes gratuitos e novos, em vez de todos de uma vez. Mas a direção é clara e importa, porque transforma uma queixa difusa e não resolvida, a de que a IA é construída sobre o trabalho de outras pessoas sem pagar por ele, em um mecanismo concreto com uma data anexada. Vencendo ou não esse sistema exato, a Cloudflare tornou a questão de quem paga pelo conteúdo por trás da IA muito mais difícil de continuar ignorando.