Neste artigo, discutiremos:
- Os desafios da coleta de dados no setor de viagens
- Como as empresas estão usando dados da web para impulsionar suas operações
Os desafios da coleta de dados no setor de viagens
Dificuldades na inteligência competitiva
Ao tentar coletar dados de viagens em tempo real (como preços e pacotes) de sites específicos, os dois principais desafios são:
Primeiro: os sites concorrentes bloqueiam a coleta de dados quando detectam muito tráfego proveniente de um único endereço IP (ou seja, “limitações de taxa”).
Segundo: obter acesso a informações específicas de GEO adaptadas às necessidades do público-alvo. Muitos sites distorcem as informações ou bloqueiam solicitações originadas fora de sua geografia (ou seja, um hotel em Nova York tentando ver como os preços aparecem nas OTAs japonesas para os consumidores).
Desafios relacionados à API
Os principais desafios ao usar uma API para coleta de dados em geral e, especificamente, no contexto da indústria de viagens, incluem:
- Dados obsoletos – Isso significa que os dados recuperados não são a versão mais atualizada comprometida pelo site de destino, mas sim a última versão em cache das informações. Isso pode causar problemas para uma empresa de pacotes de viagens que tenta oferecer a oferta mais competitiva do mercado, mas baseia suas ofertas em informações que estão desatualizadas, por exemplo.
- Solicitações simultâneas – Muitas APIs impõem um limite em termos de quantas sessões ativas um usuário pode executar simultaneamente. Isso pode ser uma grande restrição para uma OTA que precisa verificar centenas ou milhares de sites do setor ao mesmo tempo para se manter competitiva.
- Chamadas de API – Esta é outra limitação quantitativa, pois muitas APIs limitam o número de chamadas que podem ser enviadas durante um determinado período de tempo. Isto significa que, em vez de poderem monitorizar livremente a web para novas tendências de viagens e comportamento do consumidor, os sites de viagens precisam de selecionar cuidadosamente os dados-alvo e calcular tamanhos de lotes precisos. Isto pode limitar severamente a quantidade de oportunidades baseadas em dados que uma empresa pode potencialmente descobrir.
- Tamanho do lote – As limitações do tamanho do lote também podem estar no lado do site de destino. Se um site de destino limita os lotes a 100 registros por solicitação, serão necessárias 10 solicitações de dados para concluir um trabalho. O que isso significa efetivamente é que a recuperação de informações é mais lenta, ou seja, a capacidade de uma empresa de se adaptar, reagir/agir proativamente à luz das mudanças do mercado torna-se mais rígida.
Como as empresas estão usando dados da web para impulsionar suas operações
Empresa nº 1: uma rede de hotéis que deseja saber como as tarifas são exibidas em canais de distribuição de terceiros
A empresa: trata-se de uma rede de hotéis de médio porte localizada nos Estados Unidos. Ela atende principalmente clientes em viagens de lazer e, como tal, depende muito do tráfego da web baseado em OTAs, onde a maioria de seus clientes descobre e reserva quartos.
O desafio: como depende de sites de terceiros para as reservas, não pode controlar o preço pelo qual os fornecedores exibem seus quartos. As OTAs são conhecidas por reduzir os preços sem informar os estabelecimentos e compensar a discrepância aumentando os preços em outras listagens. Essa é uma estratégia para converter clientes em determinadas situações, o que é bom para a OTA, mas prejudica a marca do hotel.
A rede hoteleira gostaria de chamar a atenção da OTA sobre isso e usar seu departamento jurídico para pedir que parem, pois essas práticas violam seu acordo operacional. Mas, antes de fazer isso, eles precisam coletar essas informações para poder provar suas alegações. O único problema é que a equipe técnica do hotel está usando uma API desatualizada que tem dificuldade em enviar “solicitações simultâneas” para todos os sites de terceiros e também recebe “dados obsoletos” com muita frequência.
A solução: a empresa agora está usando uma rede de coleta de dados que fornece acesso à sua rede IP residencialis. Trata-se de uma rede global de IPs residencialis que pertencem a indivíduos reais localizados em países e cidades em todo o mundo. O hotel agora pode enviar uma quantidade ilimitada de solicitações simultâneas, pois cada solicitação é roteada por um dispositivo diferente.
Os dados são altamente precisos e recuperados em tempo real, pois essa rede Proxy tem latência muito baixa e não acessa informações em cache, mas as obtém diretamente do site de destino ao vivo.
O resultado: a empresa agora pode garantir que todos os fornecedores terceirizados mantenham preços que não fiquem abaixo das taxas pré-definidas e acordadas.
Empresa nº 2: uma agência de viagens online (OTA) que deseja saber o quão competitivas são suas ofertas
A empresa: trata-se de uma OTA que oferece pacotes de viagem incluindo voos, aluguel de carros e acomodações. Ela tem muitos concorrentes em todos os setores e opera em um ecossistema em constante mudança e evolução.
O desafio: a empresa tem interesses em muitas localizações geográficas e, como tal, precisa coletar informações em tempo real sobre como seus concorrentes exibem ofertas semelhantes para diferentes públicos-alvo. Mas isso não é tão fácil, pois sua sede está localizada na Alemanha. Eles podem recuperar informações dos sites dos concorrentes, mas, muitas vezes, seus IPs são colocados na lista negra por enviar muito tráfego para um site de destino. Outras vezes, eles não conseguem acessar um site na China, por exemplo, usando um endereço IP alemão.
A solução: essa empresa decidiu usar uma ferramenta chamada Web Unlocker, que permite automatizar o processo de rotação de IP, bem como usar algoritmos de aprendizado de máquina (ML) para resolver e contornar bloqueios e restrições do site de destino.
O resultado: essa OTA é capaz de competir melhor e oferecer pacotes mais adequados ao ecossistema em que opera. Seus sistemas agora são atualizados quando as ofertas de pacotes dos concorrentes mudam, permitindo que eles se posicionem estrategicamente onde considerarem necessário.
Conclusão
Muitas empresas do setor de viagens enfrentam dificuldades no nível da API com dados obsoletos e solicitações simultâneas. Outras têm dificuldade em obter informações dos concorrentes em tempo real para conquistar maior participação no mercado. Usar uma rede de coleta de dados que pode ajudar a melhorar suas capacidades de coleta de dados e taxas de sucesso pode ajudar sua empresa a se destacar em um mercado muito concorrido.
