Job Description
Estamos buscando um Desenvolvedor Python Sênior com forte experiência em web scraping para atuar no desenvolvimento e evolução de soluções de coleta de dados em larga escala. Este profissional irá contribuir com conhecimento técnico avançado e boas práticas de engenharia para melhorar a robustez, confiabilidade e eficiência dos sistemas de coleta de dados da empre. A posição é hands‑on e focada no desenvolvimento de soluções técnicas para desafios complexos de scraping.
Responsabilidades
- Desenvolver e evoluir crawlers e sistemas de coleta de dados em larga escala.
- Criar spiders utilizando Scrapy, Requests, Selenium e BeautifulSoup.
- Trabalhar com programação assíncrona (async/await) para otimizar performance de coleta.
- Implementar e melhorar estratégias de rotação de proxies e uso de VPNs.
- Desenvolver mecanismos para contornar bloqueios e sistemas anti‑bot.
- Integrar solucionadores de CAPTCHA em pipelines de ...