Integração de Proxy Beautifulsoup
Integração de proxy Beautifulsoup com Bright Data
- Para começar, acesse o seu Painel de Controle Bright Data e clique em “criar uma zona”.
- Escolha “Tipo de rede” e clique em salvar.
- No Beautifulsoup, preencha o “Proxy IP:port” no valor “servidor de proxy”, por exemplo brd.superproxy.io:33335.
- Em “page.authenticate”, insira a ID da sua conta Bright Data e o nome da zona proxy no valor “nome de usuário”, por exemplo: brd-customer-CUSTOMER-zone-YOURZONE e a senha da sua Zona encontrada nas configurações da Zona.
- Por exemplo:
pelo bs4, importe
solicitações de importação
BeautifulSoup import json
proxies = {
'http': 'http://brd-customer-[ACCOUNT_ID]-zone-[ZONE_NAME]:[ZONE_PASSWORD]@brd.superproxy.io:33335',
'https': 'http://brd-customer-[ACCOUNT_ID]-zone-[ZONE_NAME]:[ZONE_PASSWORD]@brd.superproxy.io:33335',
}
url = "http://lumtest.com/myip.json"
res = requests.get(url, proxies=proxies, verify=False)
res.raise_for_status()
res_body = res.text
soup = BeautifulSoup(res_body, "html.parser")
html_content = str(soup)
data = {
"IP": html_content,
}
print(json.dumps(data, indent=4))
Integração entre Proxy Manager e Beautifulsop
- Para começar, acesse o seu Painel de Controle Bright Data e clique em “criar uma zona”.
- Escolha “Tipo de rede” e clique em salvar.
- No Beautifulsoup, preencha o “Proxy IP:port” no valor “servidor de proxy”, por exemplo brd.superproxy.io:33335.
- Em “page.authenticate”, insira a ID da sua conta Bright Data e o nome da zona proxy no valor “nome de usuário”, por exemplo: brd-customer-CUSTOMER-zone-YOURZONE e a senha da sua Zona encontrada nas configurações da Zona.
- Por exemplo:
pelo bs4, importe
solicitações de importação
BeautifulSoup importe json
proxies = {
'http': '127.0.0.1:24000',
'https': '127.0.0.1:24000',
}
url = "http://lumtest.com/myip.json"
res = requests.get(url, proxies=proxies, verify=False)
res.raise_for_status()
res_body = res.text
soup = BeautifulSoup(res_body, "html.parser")
html_content = str(soup)
data = {
"IP": html_content,
}
print(json.dumps(data, indent=4))
Obtenha proxies para Beautifulsoup
Impulsionado por uma infraestrutura de proxy residencial premiada
Mais de 400M+ monthly de proxies residenciais, a melhor tecnologia da categoria e a capacidade de segmentar qualquer país, cidade, operadora e ASN, torna nossos serviços de proxy premium a melhor escolha para desenvolvedores.
Um proxy para cada caminho de desenvolvimento
Combine redes, peers e IPs para otimizar seu fluxo contínuo de dados da web.
Para os clientes, a melhor experiência do ramo
Você pede, nós desenvolvemos
Novos lançamentos de recursos todos os dias
Suporte global 24 horas por dia, 7 dias por semana
Para responder a qualquer pergunta quando você precisar
Transparência total
Painel de desempenho de rede em tempo real
Gerentes de contas dedicados
Para otimizar seu desempenho
Soluções personalizadas
Para atingir suas metas de coleta de dados
Líder em proxies e coleta de dados
650TB de dados públicos coletados todos os dias
Novos lançamentos de recursos todos os dias
Atendendo a 7/10 das principais universidades do mundo
4.6/5 classificação mais alta do Trustpilot na indústria