A tarefa
O provedor de pagamentos procurava clientes potenciais entre as empresas de TI. A lógica é simples: se o negócio anuncia, tem orçamento e atividade econômica real — então dá para oferecer soluções de pagamento. Era preciso coletar todos os que anunciam na busca por temas de TI e transformar isso em uma base para o time de vendas.
O que fizemos e quais dados coletamos
Reunimos um núcleo amplo de palavras-chave de TI e conduzimos o monitoramento de publicidade nos resultados de busca: quem anuncia (o anunciante), com quais anúncios e para quais páginas de destino leva. A partir dos anunciantes e seus sites formamos a lista de empresas — clientes potenciais; os serviços de pagamento concorrentes, os agregadores e os nichos irrelevantes saíam da lista. Os dados eram guardados como série temporal, para captar também os anunciantes novos que tinham acabado de começar a comprar tráfego.
Dificuldades e como as resolvemos
Primeiro, a cobertura. A publicidade está ligada às consultas, então um núcleo amplo de palavras-chave era essencial para captar o máximo de anunciantes; sobre a coleta e o agrupamento de palavras-chave, veja os artigos de coleta de palavras-chave e scraping de buscas do Google.
Segundo, a publicidade é personalizada e muda o tempo todo: usuários, geografias e horários diferentes veem anúncios diferentes. Capturamos a SERP nas geografias necessárias e com frequência suficiente para captar a rotação, e não um único instantâneo — senão parte dos anunciantes simplesmente não apareceria.
Terceiro, a proteção da busca contra requisições automáticas. A coleta foi distribuída, com rotação de proxies — nesse volume, sem ela os dados ficariam incompletos.
O resultado
O cliente obteve uma base regularmente atualizada de anunciantes do setor de TI — a lista de empresas ativas e com orçamento, pronta como base de clientes potenciais para a venda de soluções de pagamento. O histórico também fica visível: quem começou a anunciar e quando, ou seja, quem abordar primeiro.
Serviços usados neste caso: Monitoramento de publicidade · Extração de resultados de pesquisa (SERP) · Dados para marketing e vendas · Busca e enriquecimento de dados
Materiais úteis: Coleta de palavras-chave · Scraping de buscas do Google · Proxies para web scraping