Em um movimento mais prejudicial do que nunca para a Web, há uma nova tentativa de controlar o tráfego da Web, bloqueando e rotulando agentes, deixando que uma empresa multibilionária escolha quem tem acesso a páginas públicas da Web e quem não tem. A Cloudflare está tentando se tornar a cabine de pedágio para acessar informações de domínio público. A decisão está sendo comercializada como proteção aos criadores, mas aqueles de nós que trabalharam para proteger a Web sabem que essa é apenas outra maneira de obter o controle de quem pode ver e usar as informações do mundo.
LLMS e agentes estão rapidamente se tornando a norma em relação aos mecanismos de busca e às ações humanas. Se um provedor de infraestrutura decide qual página um modelo de IA pode ou não ler, ele está decidindo quem tem visibilidade e quem desaparece. Os bloqueios gerais não impedem a coleta de dados; eles tornam o acesso mais caro, excluem pequenas empresas e incentivam práticas antiéticas. Cada grande salto na Web, desde mecanismos de comparação de preços até grandes modelos de linguagem, foi construído com base na capacidade de coletar dados públicos da Web.
Além disso, isso acabará prejudicando os criadores e a mídia, os mesmos grupos que a empresa alega proteger.
A medida atinge o cerne do princípio fundamental da Bright Data: os dados públicos devem permanecer públicos. Durante uma década, nós da Bright Data lutamos arduamente para proteger os dados públicos da Web em todos os momentos. Vencemos desafios legais que definiram os dados públicos da Web e sua legalidade para acessá-los em escala. O que é público é claro e está definido por lei. Não recuaremos nem cederemos a outra tentativa de impedir o acesso a informações públicas.
O Bright Data é a resposta à ameaça de uma Web aberta para usuários e empresas comuns. É a camada de acesso para IA, agentes e business intelligence que garante que os dados em que sua equipe confia continuem a ser alimentados em seu pipeline, independentemente das tentativas de bloqueio. Nossos produtos vêm com suporte dedicado e equipe de P&D para responder imediatamente às alterações no site.
O Web MCP é gratuito, para todos, e funciona para 96% dos casos de uso. Adicione-o ao seu agente atual para poder continuar a pesquisar e interagir com a Web sem ser bloqueado. Você pode fazer até 5.000 solicitações por mês gratuitamente como parte do nosso compromisso de manter a Web aberta. Uma solução corporativa também está disponível.
A Web aberta é valiosa demais para ser cercada por uma única empresa. Se um editor realmente quiser que o conteúdo seja privado, a solução é simples: coloque-o atrás de um login. Até lá, público é público.
Juntos, podemos manter a Internet aberta, justa e acessível para a inovação e para todos que dependem dela.
Or Lenchner
CEO, Bright Data
