Cloudflare bloqueia bots de IA: o futuro da economia da internet em jogo – Against Invaders

Redazione RHC:5 Dezembro de 2025 16:21

Desde 1º de julho, o Cloudflare bloqueou 416 bilhões de solicitações de inteligência artificial Bots tentando extrair conteúdo dos sites dos clientes. De acordo com Matthew Prince, cofundador e CEO da Cloudflare, os esforços para proteger recursos contra rastreamentos indesejados já estão tendo um impacto perceptível e poderia transformar a economia tradicional da internet.

O impulso para essas medidas foi dado pelo Iniciativa do Dia da Independência do Conteúdo, lançado pela Cloudflare neste verão em colaboração com grandes editoras e empresas de IA. Sua essência é bloquear o acesso de rastreadores de IA ao conteúdo por padrão, a menos que os desenvolvedores do modelo tenham firmado um acordo pago separado.

Desde julho de 2024, a Cloudflare vem oferecendo serviços aos clientes Ferramentas prontas para usar para filtrar automaticamente o tráfego de bots que coletam dados para treinamento de IA. Segundo a empresa, 416 bilhões desses pedidos já foram bloqueados desde 1º de julho de 2025.

Prince argumenta Isso Por décadas, o modelo de negócios da internet baseou-se em uma lógica clara: os criadores publicam conteúdo, geram tráfego e depois o monetizam por meio de publicidade, vendas ou assinaturas. O advento do generativo inteligência artificial, ele argumenta, revolucionou a plataforma: Os modelos agora coletam e processam o conteúdo de outras pessoas, e os usuários recebem cada vez mais respostas diretamente em chats ou widgets, sem precisar visitar o site original . Isso é prejudicial para os criadores, que estão perdendo parte do público e, com isso, sua receita.

Por isso, a Cloudflare agora busca aproveitar sua posição como um player de infraestrutura para evitar que o mercado mudasse completamente para algumas plataformas dominantes. A empresa tradicionalmente tem focado em acelerar e proteger o tráfego web, mas em meio ao crescimento exponencial da IA generativa, Prince está cada vez mais focada em preservar a internet como um espaço onde projetos de todos os tamanhos, desde mídia local até pequenas comunidades e criadores, possam sobreviver e prosperar.

Ele também criticou as políticas do Google em relação aos seus rastreadores de busca e IA. Em um esforço para alcançar liderança em IA, o Google combinou o rastreador que indexa sites para busca com o rastreador que coleta dados para IA. Como resultado, se um site bloquear o bot de IA do Google, ele é automaticamente removido da indexação de busca . Isso cria uma armadilha para editoras e desenvolvedores: eles não querem que seu conteúdo seja incluído descontroladamente em Conjunto de treinamentomas eles não podem se dar ao luxo de perder suas posições de busca no Google, que representam uma parte significativa do tráfego.

Segundo Prince, Você não pode usar seu monopólio no mercado de ontem para ganhar um lugar no mercado de amanhã. Ele se identifica diretamente Google como principal obstáculo ao desenvolvimento da Internet e acredita que a empresa deve separar sua busca e inteligência artificial crawlers para que os sites possam gerenciar o acesso de forma independente.

Cloudflare também revelou estatísticas anteriormente inéditas sobre o acesso privilegiado do Google à web em comparação com outros players de IA . A empresa estima que O Google atualmente tem 3,2 vezes mais páginas que a OpenAI, 4,6 vezes mais que a Microsoft e 4,8 vezes mais que a Anthropic ou a Meta. Essencialmente O Google tem uma visão única da internet, o que fortalece sua posição tanto na busca quanto na IA.

Ao mesmo tempo, Prince diz, os resultados iniciais do bloqueio de rastreadores de IA para publishers e outros proprietários de conteúdo parecem promissores. Conteúdo humano único — desde redações locais sensíveis às tendências regionais até usuários do Reddit compartilhando seus pensamentos mais estranhos ou profundos — continua sendo uma matéria-prima extremamente valiosa para modelos de IA . Isso significa criadores ter a oportunidade de construir novos modelos mediante pagamento, desde licenciamento até parcerias especializadas com empresas de IA.

No futuro, reconhece Prince, regular a IA e o acesso a conteúdo pode exigir intervenção legislativa. Por enquanto, Cloudflare está tentando exercer pressão sobre o mercado por meio de suas decisões e acordos para garantir que novos modelos de negócios de IA sejam mais pluralistas, expandam o mercado e não concentrem o poder nas mãos de um ou dois players. Não há nada de romântico nisso, ele diz: simplesmente significa maiores oportunidades de crescimento para todos, o que significa que a própria Cloudflare terá mais clientes e uma internet mais ampla para proteger.

Prince comparou a situação a Uma franquia de super-heróis: O herói do último filme se torna o vilão do próximo. Em sua interpretação, O Google se tornou o “vilão” que impede a internet . E até que a empresa concorde em seguir as mesmas regras que todo mundo— principalmente separando seu mecanismo de busca do rastreador de IA —será extremamente difícil bloquear completamente conteúdo indesejado.