A Cloudflare, um dos maiores provedores de infraestrutura da internet, esta tentando mudar uma premissa basica de como a web funciona: a de que os sistemas de IA podem raspar livremente o conteudo sobre o qual sao construidos. Sob uma nova politica anunciada em 1 de julho, a empresa vai empurrar as empresas de IA para uma escolha simples, pagar pelo conteudo que consomem ou perder o acesso a ele. A alavanca e a posicao da Cloudflare a frente de uma parcela muito grande dos sites do mundo, o que lhe permite definir padroes que editores individuais tem tido dificuldade de impor por conta propria. O enquadramento que a empresa usa e o de que o antigo acordo da web, ser rastreado em troca de receber leitores, se desfez na era da IA, que pega o conteudo mas muitas vezes nao devolve nada.
O nucleo da politica e uma exigencia de que as empresas de IA parem de se esconder atras de rastreadores de proposito geral. A Cloudflare esta exigindo que elas separem os bots que usam para a indexacao de busca tradicional daqueles que usam para treinamento de IA e para agentes de IA, de modo que um site possa continuar dizendo sim a ser encontrado em um mecanismo de busca enquanto diz nao, ou define um preco, a ser usado como dado de treinamento. Para dar forca a exigencia, a Cloudflare esta mudando seus proprios padroes. A partir de 15 de setembro de 2026, suas configuracoes vao, por padrao, bloquear os chamados rastreadores de uso misto, aqueles que se recusam a declarar qual proposito servem, em qualquer pagina que hospede publicidade. Esse padrao se aplicara a novos clientes da Cloudflare, a novos sites criados por clientes existentes e a todos os clientes atuais do plano gratuito da empresa, a menos que escolham desativa-lo.
A segunda metade do plano tem a ver com dinheiro, e nao com bloqueio. A Cloudflare ja oferecia um recurso chamado Pay Per Crawl, que permitia a um site cobrar dos bots de IA cada vez que eles raspavam uma pagina. O novo passo, chamado Pay Per Use, tenta atrelar o pagamento ao valor, e nao a mera requisicao. Em vez de cobrar apenas quando uma pagina e baixada, a ideia e compensar um editor quando o conteudo dele de fato faz algo util para a empresa de IA, por exemplo quando aparece em uma resposta gerada ou quando desbloqueia material premium por tras de um paywall. A Cloudflare citou a Ceramic.ai e a You.com como parceiras iniciais, e tambem adquiriu um marketplace de licenciamento de conteudo chamado Human Native para ajudar a intermediar esses acordos. A empresa aponta para seus proprios dados de que mais da metade do trafego de rastreadores de IA e gasto rebaixando paginas que nem sequer mudaram, o que ela apresenta como puro desperdicio que um sistema mais inteligente e pago poderia eliminar.
O que torna isso mais do que mais uma reclamacao de editor e o fato de a Cloudflare ser um dos poucos atores com a alavancagem para fazer um novo padrao realmente se sustentar. Como esta a frente de tanta coisa da web, uma mudanca em suas configuracoes de fabrica silenciosamente reescreve as regras para um grande numero de sites de uma so vez, sem que cada um deles tenha que travar a batalha sozinho. O executivo-chefe Matthew Prince colocou o raciocinio em termos crus, dizendo que, agora que a maioria do trafego na internet nao e humana, a empresa precisa ir mais longe e agir mais rapido para que um ecossistema sustentavel possa surgir. Em outras palavras, o antigo modelo em que um visitante humano poderia ver um anuncio ou um convite de assinatura esta sendo esvaziado por maquinas que leem a pagina e seguem em frente, e alguem precisa redesenhar a troca.
O movimento nao vem sem suas proprias tensoes, e vale a pena nomea-las. A mais obvia e que ele concentra muito poder em uma unica empresa, porque, quando a Cloudflare muda um padrao, ela esta na pratica ditando politica para uma fatia da internet, e nem todos ficarao confortaveis com um provedor de infraestrutura privado agindo como o pedagio da web. Ha tambem questoes praticas, ja que medir quando o conteudo cria valor e muito mais dificil do que contar quando uma pagina e requisitada, e grandes empresas de IA podem resistir, contornar as regras ou simplesmente se recusar a identificar seus rastreadores. Isso tambem e implantado de forma desigual, atingindo primeiro os clientes gratuitos e novos, em vez de todos de uma vez. Mas a direcao e clara e importa, porque transforma uma queixa difusa e nao resolvida, a de que a IA e construida sobre o trabalho de outras pessoas sem pagar por ele, em um mecanismo concreto com uma data anexada. Vencendo ou nao esse sistema exato, a Cloudflare tornou a questao de quem paga pelo conteudo por tras da IA muito mais dificil de continuar ignorando.