Logo Beemôn Tecnologia
Destaque

Senior Python Engineer — Web Scraping & Data Extraction

Beemôn Tecnologiavia LinkedIn
RemotoCaxias Do Sul, Rio Grande Do Sul, BrSêniorCLTHoje

Salário Estimado

R$ 11.880,00 - R$ 17.820,00

0de 100

Excelente

Score da Vaga

Descrição da Vaga

Estamos buscando um Desenvolvedor Python Sênior com forte experiência em web scraping para atuar no desenvolvimento e evolução de soluções de coleta de dados em larga escala.


Este profissional irá contribuir com conhecimento técnico avançado e boas práticas de engenharia para melhorar a robustez, confiabilidade e eficiência dos sistemas de coleta de dados da empre A posição é hands-on e focada no desenvolvimento de soluções técnicas para desafios complexos de scraping.


Responsabilidades • Desenvolver e evoluir crawlers e sistemas de coleta de dados em larga escala.

Criar spiders utilizando Scrapy, Requests, Selenium e BeautifulSoup. • Trabalhar com programação assíncrona (async/await) para otimizar performance de coleta.
Implementar e melhorar estratégias de rotação de proxies e uso de VPNs. • Desenvolver mecanismos para contornar bloqueios e sistemas anti-bot.
Integrar solucionadores de CAPTCHA em pipelines de scraping. • Construir pipelines de processamento assíncrono utilizando Celery, Redis e RabbitMQ.
Otimizar armazenamento e consultas em PostgreSQL. • Desenvolver APIs e integrações utilizando Django.
Diagnosticar e resolver problemas relacionados a bloqueios como rate limiting, fingerprinting e proteções WAF. • Contribuir com melhorias técnicas na arquitetura e nas ferramentas de coleta de dados.
Colaborar com o time de engenharia seguindo práticas ágeis e revisão de código.

Requisitos • Forte experiência com Python.

Experiência sólida com web scraping em ambiente de produção. • Experiência com Scrapy, Requests, Selenium e BeautifulSoup.
Experiência com programação assíncrona utilizando asyncio. • Experiência com Celery, Redis e RabbitMQ.
Experiência com PostgreSQL. • Conhecimento avançado de HTTP, cookies, headers e autenticação.
Experiência com proxy rotation e uso de VPNs. • Experiência com solucionadores de CAPTCHA.
Experiência com bypass de sistemas anti-bot. • Experiência com Git e workflows de versionamento.
Experiência trabalhando com times ágeis (Scrum ou Kanban).

Diferenciais • Experiência com infraestrutura de scraping em larga escala.

Experiência com automação de browsers e simulação de comportamento de usuário. • Experiência com Docker e containerização.
Experiência com sistemas distribuídos de coleta de dados. • Experiência com monitoramento e observabilidade de crawlers.
Experiência com CI/CD. • Experiência com GitHub Actions.

Vagas Semelhantes

Caxias Do Sul, Rio Grande Do Sul, BrHoje

R$ 11k - 16k/mês

SêniorCLT

Estamos buscando um Desenvolvedor Python Sênior com forte experiência em web scraping para atuar no desenvolvimento e evolução de soluções de coleta de dados em larga escala. Este profissional irá contribuir com conhecimento técnico avançado e boas práticas de engenharia para melhorar a robustez, co...

RemotoBr25 dias atrás

R$ 7k - 11k/mês

PlenoCLT

This a Full Remote job, the offer is available from: Brazil JOB DESCRIPTION Nós somos a BHS! Com 30 anos de experiência no mercado, proporcionamos soluções modernas de TI. 🚀 Somos reconhecidos como a MELHOR empresa para se trabalhar em MG e no BRASIL pelo GPTW - Great Place to Work, e estamos class...

RemotoRemoto11 dias atrás

R$ 15k - 23k/mês

SêniorCLT

If you're passionate about technology and ready for a challenge, join our team of talented individuals and show your technical skills, creativity, and drive for impact. You'll work with the best in the industry in a supportive, happy, and human-centric environment, making seamless technology. That’s...

RemotoHull, Iowa, Us17 dias atrás

R$ 13k - 19k/mês

SêniorCLT

Location: Remote / Hybrid Department: Technology Salary : 3000 USD / per month Company Description Payomatix is a Dubai-based fintech company revolutionizing the way businesses manage and scale digital financial ecosystems. With expertise in payment orchestration, white-label financial products, emb...

Payments & SecurityPCI-DSS Compliant ArchitectureTokenization systems

Interessado nesta vaga?

Candidatar-se

Você será redirecionado para o site original

Informações

NívelSênior
ContratoCLT
LocalCaxias Do Sul, Rio Grande Do Sul, Br
RemotoSim
MoedaBRL
PublicadaHoje
FonteLinkedIn

Análise de Vaga com IA

Estimativa salarial, match de tecnologias e análise de requisitos feitos com Inteligência Artificial

Powered by CodeCortex
← Voltar às Vagas