Web Crawler
Crawl websites and extract public data from the most popular websites. With over 1500 crawlers, collecting web data has never been easier.
- Retrieve real-time data via API
- Pay only for successfully delivered results
- Bulk request handling, up to 5K URLs
- Retrieve results in multiple formats
Aprovado por 50,000+ clientes em todo o mundo.
Web Crawler API Library
Web Crawler Pricing
Only pay for what’s successfully delivered. No hidden fees, no charges for failed deliveries.
Cada plano oferece acesso completo - pague menos por registro à medida que escala
- Gerenciamento automatizado de proxies
- Renderização completa do navegador
- Resolução de CAPTCHA
- Concorência ilimitada
- Coleta em lote e agendada
- APIs de gerenciamento de trabalho
- Validação e descoberta de dados
- Análise de dados (JSON ou CSV)
- Entrega por webhook ou API
CODE EXAMPLES
Dedicated endpoints for 800+ domains.
curl -H "Authorization: Bearer API_TOKEN" -H "Content-Type: application/json" -d '[{"url":"https://www.linkedin.com/in/elad-moshe-05a90413/"},{"url":"https://www.linkedin.com/in/jonathan-myrvik-3baa01109"},{"url":"https://www.linkedin.com/in/aviv-tal-75b81/"},{"url":"https://www.linkedin.com/in/bulentakar/"},{"url":"https://www.linkedin.com/in/nnikolaev/"}]' "https://api.brightdata.com/datasets/v3/trigger?dataset_id=gd_l1viktl72bvl7bjuj0&format=json&uncompressed_webhook=true"
[
{
"timestamp": "2026-10-01",
"id": "jos***háj***a92*********",
"name": "jos***Háj***",
"city": "Ústí nad Labem, Czechia",
"country_code": "CZ",
"position": "Odborný expert ve společnosti ČPS s r.o.",
"about": null,
"posts": null
},
{
"timestamp": "2026-10-01",
"id": "uwe***ttm***-04*********",
"name": "Uwe***ttm***",
"city": "Oberhausen, North Rhine-Westphalia, Germany",
"country_code": "DE",
"position": null,
"about": null,
"posts": null
},
{
"timestamp": "2026-10-01",
"id": "hol***tho***son*********7",
"name": "Holly T*******n",
"city": "Bowling Green, Kentucky, United States",
"country_code": "US",
"position": null,
"about": null,
"posts": null
},
{
"timestamp": "2026-10-01",
"id": "aus***-wi***ams*********a",
"name": "Austin W******s",
"city": "Bainbridge Island, Washington, United States",
"country_code": "US",
"position": null,
"about": null,
"posts": null
},
{
"timestamp": "2026-10-01",
"id": "tim***oke***4a4******",
"name": "Tim B****r",
"city": "Heilbronn, Baden-Württemberg, Germany",
"country_code": "DE",
"position": null,
"about": null,
"posts": null
}
]
curl -H "Authorization: Bearer API_TOKEN" -H "Content-Type: application/json" -d '[{"url":"https://www.amazon.com/Quencher-FlowState-Stainless-Insulated-Smoothie/dp/B0CRMZHDG8","asin":"B0CRMZHDG8","origin_url":"https://www.amazon.com/Quencher-FlowState-Stainless-Insulated-Smoothie/dp/B0CRMZHDG8","zipcode":"94107","language":""},{"url":"https://www.amazon.com/KitchenAid-Protective-Dishwasher-Stainless-8-72-Inch/dp/B07PZF3QS3","asin":"B07PZF3QS3","zipcode":"","language":""},{"url":"https://www.amazon.com/TruSkin-Naturals-Vitamin-Topical-Hyaluronic/dp/B01M4MCUAF","asin":"","origin_url":"https://www.amazon.com/TruSkin-Naturals-Vitamin-Topical-Hyaluronic/dp/B01M4MCUAF","zipcode":"94124","language":""}]' "https://api.brightdata.com/datasets/v3/trigger?dataset_id=gd_l7q7dkf244hwjntr0&format=json&uncompressed_webhook=true"
[
{
"timestamp": "2026-10-01",
"title": "LB Chick Breast Treat8",
"seller_name": null,
"brand": "Cadet",
"description": "Bag Quantity: Cadet 14 oz (8), Chicken Breast Dog Treats, Made with Premium Real Chicken, A Healthy, Natural Treat for D...",
"initial_price": null,
"currency": "USD",
"availability": null
},
{
"timestamp": "2026-10-01",
"title": "Cadet Icelandic Sheepdog Trainee Pilot T-Shirt",
"seller_name": "Ama***.co***",
"brand": "Icelandic Sheepdogs Owner Gift",
"description": "Show This Cadet Icelandic Sheepdog Trainee Pilot Item While Walking Our Four Legged Friends. If You Are A Crazy Dog Love...",
"initial_price": 21.98,
"currency": "USD",
"availability": "In Stock"
},
{
"timestamp": "2026-10-01",
"title": "Cadet Bulldog Trainee Pilot Pocket T-Shirt",
"seller_name": "Ama***.co***",
"brand": "Bulldogs Owner Gift",
"description": "Show This Cadet Bulldog Trainee Pilot Pocket Item While Walking Our Four Legged Friends. If You Are A Crazy Dog Lover Th...",
"initial_price": 21.98,
"currency": "USD",
"availability": "In Stock"
},
{
"timestamp": "2026-10-01",
"title": "16700-Z6L-003 Fuel Pump 16700Z6L003 520-012 Compatible with Honda GX630 GX660 GX690 GXV630 GXV690 Cub Cadet RZT-L42 Big ...",
"seller_name": "Tex***rts***",
"brand": "Texxparts",
"description": "About this item Part Number: Compatible with Honda 16700-Z6L-003 16700Z6L003; 520-012 16700-Z6L-003 Fuel Pump Compatible...",
"initial_price": 18.99,
"currency": "USD",
"availability": "In Stock"
},
{
"timestamp": "2026-10-01",
"title": "Cadet Greater Swiss Mountain Dog Trainee Pilot T-Shirt for Men Women Kids",
"seller_name": "Ama***.co***",
"brand": "Greater Swiss Mountain Dogs Owner Gift",
"description": "Show This Cadet Greater Swiss Mountain Dog Trainee Pilot Item While Walking Our Four Legged Friends. If You Are A Crazy ...",
"initial_price": 21.98,
"currency": "USD",
"availability": "In Stock"
}
]
curl -H "Authorization: Bearer API_TOKEN" -H "Content-Type: application/json" -d '[{"url":"https://www.zillow.com/homedetails/2506-Gordon-Cir-South-Bend-IN-46635/77050198_zpid/?t=for_sale"}]' "https://api.brightdata.com/datasets/v3/trigger?dataset_id=gd_lfqkr8wm13ixtbd8f5&format=json&uncompressed_webhook=true"
[
{
"timestamp": "2026-09-30",
"zpid": 27444306,
"city": "El Paso",
"state": "TX",
"homeStatus": "OTHER",
"address:city": "El Paso",
"address:streetAddress": "9511 Gairloch Dr",
"address:zipcode": "79925"
},
{
"timestamp": "2026-09-30",
"zpid": 40713802,
"city": "City Of Waukesha",
"state": "WI",
"homeStatus": "OTHER",
"address:city": "City Of Waukesha",
"address:streetAddress": "614 W College Ave",
"address:zipcode": "53186"
},
{
"timestamp": "2026-09-30",
"zpid": 63528132,
"city": "Uxbridge",
"state": "MA",
"homeStatus": "OTHER",
"address:city": "Uxbridge",
"address:streetAddress": "197 Chocolog Rd",
"address:zipcode": "01569"
},
{
"timestamp": "2026-09-30",
"zpid": 5460858,
"city": "Crete",
"state": "IL",
"homeStatus": "OTHER",
"address:city": "Crete",
"address:streetAddress": "517 Linden St",
"address:zipcode": "60417"
},
{
"timestamp": "2026-09-30",
"zpid": 2102092990,
"city": "Brooklyn",
"state": "NY",
"homeStatus": "OTHER",
"address:city": "Brooklyn",
"address:streetAddress": "1227 E 49 St",
"address:zipcode": "11234"
}
]
curl -H "Authorization: Bearer API_TOKEN" -H "Content-Type: application/json" -d '[{"url":"https://www.instagram.com/p/Cuf4s0MNqNr","country":""},{"url":"https://www.instagram.com/p/DP861NijuwE","country":""}]' "https://api.brightdata.com/datasets/v3/trigger?dataset_id=gd_lk5ns7kz21pck8jpis&format=json&uncompressed_webhook=true"
[
{
"timestamp": "2026-09-30",
"url": "https:\/\/www.instagram.com\/reel\/DdKuSIwyoH8\/",
"user_posted": "santoflowpodcast",
"description": "Ninguém conhecia Carlo Acutis antes da beatificação. Padre Lúcio Tardivo faz a comparação direta: o mesmo vai acontecer ...",
"hashtags": null,
"num_comments": 52,
"date_posted": "2026-09-12T00:43:58.000Z",
"likes": 3082
},
{
"timestamp": "2026-09-30",
"url": "https:\/\/www.instagram.com\/reel\/Dc17QFyx4UL\/",
"user_posted": "sheylasouzoficial",
"description": "VOCÊ NÃO PERDEU A FÉ. VOCÊ SÓ ESTÁ CANSADA DE SUSTENTAR TUDO SOZINHA.\n\nExistem mães que continuam orando, crendo e amand...",
"hashtags": null,
"num_comments": 1,
"date_posted": "2026-09-03T23:25:43.000Z",
"likes": 82
},
{
"timestamp": "2026-09-30",
"url": "https:\/\/www.instagram.com\/reel\/DdXhfXWJX5s\/",
"user_posted": "santoflowpodcast",
"description": "“O espírito de Adão e Eva”, como diz Padre Rafael: culpar o outro é sempre mais fácil. Nos comentários e grupos de Whats...",
"hashtags": null,
"num_comments": 12,
"date_posted": "2026-09-17T00:00:05.000Z",
"likes": 294
},
{
"timestamp": "2026-09-30",
"url": "https:\/\/www.instagram.com\/reel\/DdrL-QvRoML\/",
"user_posted": "santoflowpodcast",
"description": "Determinar se fazer uma tatuagem é pecado exige compreender a dignidade do corpo humano. O Padre Duarte Lara analisa o t...",
"hashtags": null,
"num_comments": 141,
"date_posted": "2026-09-24T15:20:07.000Z",
"likes": 11259
},
{
"timestamp": "2026-09-30",
"url": "https:\/\/www.instagram.com\/p\/Dd1VNKKxB0M\/",
"user_posted": "santoflowpodcast",
"description": "HOJE, SEGUNDA, ÀS 21H. \n\nA fé entrou no cenário eleitoral com muita força esta semana. \n\nO SantoFlow receberá hoje @flav...",
"hashtags": null,
"num_comments": 6906,
"date_posted": "2026-09-28T14:04:59.000Z",
"likes": 24402
}
]
Fácil de começar. Ainda mais fácil de dimensionar.
Estabilidade incomparável
Garanta um desempenho consistente e minimize as falhas confiando na principal infraestrutura de proxies do mundo.
Extração de dados da web simplificada
Coloque sua extração de dados no piloto automático usando APIs prontas para a aplicação, economizando recursos e reduzindo a manutenção.
Escalabilidade ilimitada
Dimensione facilmente seus projetos de extração de dados para atender às demandas de dados, mantendo o desempenho ideal.
Nunca mais se preocupe com proxies e CAPTCHAs
- Rotação Automática de IP
- Resolução de CAPTCHA
- Rotação de User Agent
- Cabeçalhos Personalizados
- Renderização de JavaScript
- Proxies residenciais
API para Acesso Contínuo a Dados do Web Crawler
Extração de Dados Web Abrangente, Escalável e em Conformidade
API para Acesso Contínuo a Dados do Web Crawler
Adaptado ao seu fluxo de trabalho
Obtenha dados estruturados em arquivos JSON, NDJSON ou CSV por meio de entrega via Webhook ou API.
Infraestrutura integrada e desbloqueio
Tenha controle e flexibilidade máximos sem manter infraestrutura de Proxy e desbloqueio. Faça scraping de dados de qualquer localização geográfica evitando CAPTCHAs e bloqueios.
Infraestrutura comprovada em batalha
A plataforma da Bright Data impulsiona mais de 20.000 empresas em todo o mundo, oferecendo tranquilidade com 99,99% de uptime e acesso a mais de 150 milhões de IPs reais de usuários em 195 países.
Conformidade líder do setor
Nossas práticas de privacidade estão em conformidade com as leis de proteção de dados, incluindo o marco regulatório de proteção de dados da UE, GDPR e CCPA.