Integração do Apify Proxy
O uso de proxies Bright Data com Apify aumenta a eficiência do Scraping de dados, garantindo a extração segura e anônima de dados e reduzindo o risco de bloqueios e detecção de IP.
Este guia pode estar desatualizado. Para obter um guia atualizado, consulte nossa documentação.
- 150M+ IPs residencialis
- Sessões fixas e rotativas
- Taxa de sucesso de 99,95%
- Segmentação por localização geográfica - GRÁTIS
O que é o Apify?
O Apify é uma poderosa plataforma de Scraping de dados e RPA na web. Ele pode automatizar tudo o que você pode fazer manualmente em um navegador da web e executá-lo em escala. A Apify Store tem centenas de ferramentas de scraping prontas para uso que exigem apenas que você altere algumas configurações.
Os proxies costumam ser uma parte essencial do Scraping de dados. Você deve sempre proteger sua identidade ao fazer Scraping de dados e também pode precisar lidar com medidas anti-scraping e outras restrições implementadas pelo site de destino.
É aí que entra a Bright Data 💪
Os proxies da Bright Data podem ajudá-lo a concluir com sucesso suas tarefas de scraping e automação. Os proxies da Bright Data se integram perfeitamente ao Apify para que você possa realizar seu trabalho sem ser bloqueado.
Como configurar o Apify
com proxies Bright Data:
Acesse Bright Data:
- Faça login na sua conta Bright Data e acesse o painel
- Clique em Proxy & Infra e crie uma zona
- Você pode escolher entre Datacenter, Residencial, ISP e IPs móveis
- Configure e crie a zona de acordo com os requisitos do seu projeto
- Clique no ícone Configurações ao lado do nome da zona.
- Obtenha o nome de usuário e a senha.
Acesse o Apify:
- Acesse apify.com e faça login na sua conta.
- Quando estiver no Console Apify, clique em Atores no menu à esquerda.
- Na guia Loja, você encontrará o Scraper. Usaremos isso como nosso exemplo. Clique nele.
- Navegue até a guia Entrada.
- Insira lumtest como URL inicial para extrair: https://lumtest.com/myip.json
- Na função Página, cole este código:
async function pageFunction(context) {
// jQuery é útil para localizar elementos DOM e extrair dados deles.
// Para usá-lo, certifique-se de habilitar a opção "Injetar jQuery".
const $ = context.jQuery;
// Selecione o elemento usando o seletor CSS 'body > pre' e extraia seu conteúdo de texto.
const data = $('body > pre').text();
// Retorne um objeto com os dados extraídos. Ele será armazenado no conjunto de dados resultante.
return {
data: data
};
}
- Em seguida, role para baixo para encontrar a configuração do Proxy e do navegador.
- Clique em seu próprio Proxy e insira suas credenciais de Proxy no seguinte formato.
- http://username:[email protected]:33335 e a senha podem ser obtidos nas configurações da zona que acabamos de criar.
- O nome do host para proxies Bright Data é:brd.superproxy.io e a porta é 33335.
- Esta é a aparência final da URL do Proxy Bright Data: http://lum-customer-c_375eb5c4-zona-zone5:[email protected]:33335
- Em seguida, basta clicar em Iniciar.
- Você pode então visualizar e baixar os dados como HTML, JSON, CSV, Excel, XML e feed RSS, ou visualizá-los na guia de saída
- Para confirmar que o Apify usou o Proxy, acesse o painel do Bright Data, navegue até Proxy e verifique o Log de eventos.
⚠️Observação importante: se você estiver usando os Proxies residenciais, o Web Unlocker ou a API SERP da Bright Data, será necessário instalar um certificado SSL para habilitar conexões seguras de ponta a ponta com seus sites de destino. Esse é um processo simples. Consulte https://docs.brightdata.com/general/account/ssl-certificate#installation-of-the-ssl-certificate para obter instruções.
Obtenha proxies para o Apify
Impulsionado por uma infraestrutura de proxy residencial premiada
Mais de 150 million+ de proxies residenciais, a melhor tecnologia da categoria e a capacidade de segmentar qualquer país, cidade, operadora e ASN, torna nossos serviços de proxy premium a melhor escolha para desenvolvedores.
Tipos de proxy para todas as necessidades
Proxies residenciais
- Mais de 72.000.000 IPs
- Disponível em 195 países
- A maior rede de IPs rotativos de pares reais
- Aceda e rastreie todos os sítios web sofisticados
Proxies de datacenter
- Mais de 1.600.000 IPs
- Disponível em 98 países
- Grupos de IPs partilhados e dedicados disponíveis
- Acesso rápido a sítios web não complexos
Proxies de ISP
- Mais de 700.000 IPs
- Disponível em 35 países
- IPs residenciais estáticos reais sem rotação de IP
- Ideal para iniciar sessão em várias conta
Proxies móveis
- Mais de 7.000.000 IPs
- Disponível em 195 países
- A maior rede de IPs 3G/4G de pares reais do mundo
- Verificar anúncios móveis e rastrear sítios móveis
Proxy Network Pricing
Líder em proxies e coleta de dados
Para os clientes, a melhor experiência do ramo
Novos lançamentos de recursos todos os dias
Para responder a qualquer pergunta quando você precisar
Painel de desempenho de rede em tempo real
Para otimizar seu desempenho
Para atingir suas metas de coleta de dados