Integração de Proxy Apify
Usar proxies Bright Data com Apify aumenta a eficiência do scraping de dados, garantindo extração de dados segura e anônima e reduzindo o risco de bloqueios de IP e detecção.
Este guia pode estar desatualizado. Para um guia atualizado, consulte nossa documentação.
- 400M+ IPs residencialis
- Sessões sticky e rotativas
- 99,95% de taxa de sucesso
- Segmentação por geolocalização - GRÁTIS
O que é o Apify?
Apify é uma poderosa plataforma de scraping de dados, extração de dados e RPA web. Ela pode automatizar tudo o que você faz manualmente em um navegador web e executar em escala. A Apify Store tem centenas de ferramentas de scraping prontas para uso que exigem apenas algumas alterações de configuração.
Proxies são frequentemente uma parte essencial do scraping de dados. Você deve sempre proteger sua identidade ao fazer scraping de dados e pode precisar lidar com medidas anti-scraping e outras restrições implementadas pelo site de destino.
É aí que entra a Bright Data 💪
Os proxies da Bright Data podem ajudá-lo a concluir com sucesso suas tarefas de scraping e automação. Os proxies da Bright Data se integram perfeitamente ao Apify para que você possa realizar seu trabalho sem ser bloqueado.
Como configurar o Apify
com proxies Bright Data:
Acesse Bright Data:
- Faça login na sua conta Bright Data e acesse o painel
- Clique em Proxies & Infra e crie uma zona
- Você pode escolher entre IPs de Datacenter, Residenciais, ISP e Móveis
- Configure e crie a zona de acordo com os requisitos do seu projeto
- Clique no ícone de Configurações ao lado do nome da zona.
- Obtenha o nome de usuário e a senha.
Acesse o Apify:
- Acesse apify.com e faça login na sua conta.
- No Console do Apify, clique em Actors no menu à esquerda.
- Na aba Store você encontrará o Web scraper. Usaremos este como exemplo. Clique nele.
- Navegue até a aba Input.
- Insira lumtest como URL inicial para scraping: https://lumtest.com/myip.json
- Na função de página, cole este código:
async function pageFunction(context) {
// jQuery é útil para encontrar elementos DOM e extrair dados deles.
// Para usá-lo, certifique-se de habilitar a opção "Inject jQuery".
const $ = context.jQuery;
// Selecione o elemento usando o seletor CSS 'body > pre' e extraia seu conteúdo de texto.
const data = $('body > pre').text();
// Retorne um objeto com os dados extraídos. Ele será armazenado no conjunto de dados resultante.
return {
data: data
};
}
- Em seguida, role para baixo para encontrar a configuração de proxy e navegador.
- Clique em own proxy e insira suas credenciais de proxy no seguinte formato.
- http://username:[email protected]:33335 e a senha podem ser obtidas nas configurações da zona que acabamos de criar.
- O hostname para os proxies Bright Data é: brd.superproxy.io e a porta é 33335.
- Esta é a aparência final da URL do proxy Bright Data: http://lum-customer-c_375eb5c4-zone-zone5:[email protected]:33335
- Em seguida, clique em Start.
- Você pode visualizar e baixar os dados como HTML, JSON, CSV, Excel, XML e feed RSS, ou visualizá-los na aba de saída
- Para confirmar que o Apify usou o proxy, acesse seu painel da Bright Data, navegue até proxies e verifique o log de eventos.
⚠️Nota importante: Se você estiver usando Proxies Residenciais, Web Unlocker ou API SERP da Bright Data, precisará instalar um certificado SSL para habilitar conexões seguras de ponta a ponta com seu(s) site(s) de destino. Este é um processo simples, consulte https://docs.brightdata.com/general/account/ssl-certificate#installation-of-the-ssl-certificate para instruções.
Obtenha proxies para o Apify
Impulsionado por uma infraestrutura de proxy residencial premiada
Mais de 400M+ monthly de proxies residenciais, a melhor tecnologia da categoria e a capacidade de segmentar qualquer país, cidade, operadora e ASN, torna nossos serviços de proxy premium a melhor escolha para desenvolvedores.
Um proxy para cada caminho de desenvolvimento
Combine redes, peers e IPs para otimizar seu fluxo contínuo de dados da web.
Preços da Rede de Proxy
Líder em proxies e coleta de dados
Para os clientes, a melhor experiência do ramo
Novos lançamentos de recursos todos os dias
Para responder a qualquer pergunta quando você precisar
Painel de desempenho de rede em tempo real
Para otimizar seu desempenho
Para atingir suas metas de coleta de dados