Senior Python Engineer — Web Scraping & Data Extraction

BEEMON TECNOLOGIA LTDAvia Sólides Vagas

Caxias Do Sul, Rio Grande Do Sul, BrSêniorCLTHoje

Salário Estimado

R$ 10.800,00 - R$ 16.200,00

Tecnologias

Python Go PostgreSQL Redis Docker Git GitHub API iOS IA

0de 100

Ótimo

Score da Vaga

Descrição da Vaga

Estamos buscando um Desenvolvedor Python Sênior com forte experiência em web scraping para atuar no desenvolvimento e evolução de soluções de coleta de dados em larga escala.

Este profissional irá contribuir com conhecimento técnico avançado e boas práticas de engenharia para melhorar a robustez, confiabilidade e eficiência dos sistemas de coleta de dados da empre A posição é hands-on e focada no desenvolvimento de soluções técnicas para desafios complexos de scraping.

Responsabilidades • Desenvolver e evoluir crawlers e sistemas de coleta de dados em larga escala.

•Criar spiders utilizando Scrapy, Requests, Selenium e BeautifulSoup. • Trabalhar com programação assíncrona (async/await) para otimizar performance de coleta.

•Implementar e melhorar estratégias de rotação de proxies e uso de VPNs. • Desenvolver mecanismos para contornar bloqueios e sistemas anti-bot.

•Integrar solucionadores de CAPTCHA em pipelines de scraping. • Construir pipelines de processamento assíncrono utilizando Celery, Redis e RabbitMQ.

•Otimizar armazenamento e consultas em PostgreSQL. • Desenvolver APIs e integrações utilizando Django.

•Diagnosticar e resolver problemas relacionados a bloqueios como rate limiting, fingerprinting e proteções WAF. • Contribuir com melhorias técnicas na arquitetura e nas ferramentas de coleta de dados.

•Colaborar com o time de engenharia seguindo práticas ágeis e revisão de código.

Requisitos • Forte experiência com Python.

•Experiência sólida com web scraping em ambiente de produção. • Experiência com Scrapy, Requests, Selenium e BeautifulSoup.

•Experiência com programação assíncrona utilizando asyncio. • Experiência com Celery, Redis e RabbitMQ.

•Experiência com PostgreSQL. • Conhecimento avançado de HTTP, cookies, headers e autenticação.

•Experiência com proxy rotation e uso de VPNs. • Experiência com solucionadores de CAPTCHA.

•Experiência com bypass de sistemas anti-bot. • Experiência com Git e workflows de versionamento.

•Experiência trabalhando com times ágeis (Scrum ou Kanban).

Diferenciais • Experiência com infraestrutura de scraping em larga escala.

•Experiência com automação de browsers e simulação de comportamento de usuário. • Experiência com Docker e containerização.

•Experiência com sistemas distribuídos de coleta de dados. • Experiência com monitoramento e observabilidade de crawlers.

•Experiência com CI/CD. • Experiência com GitHub Actions.

Vagas Semelhantes

Senior Python Engineer — Web Scraping & Data Extraction

Beemôn TecnologiaLinkedIn

RemotoCaxias Do Sul, Rio Grande Do Sul, BrHoje

R$ 12k - 18k/mês

SêniorCLT

Estamos buscando um Desenvolvedor Python Sênior com forte experiência em web scraping para atuar no desenvolvimento e evolução de soluções de coleta de dados em larga escala. Este profissional irá contribuir com conhecimento técnico avançado e boas práticas de engenharia para melhorar a robustez, co...

Python Go PostgreSQL Redis Docker+5

Ver Detalhes

Pessoa Desenvolvedora Backend Pleno (Home Office)

BHSJobgether

RemotoBr25 dias atrás

R$ 7k - 11k/mês

PlenoCLT

This a Full Remote job, the offer is available from: Brazil JOB DESCRIPTION Nós somos a BHS! Com 30 anos de experiência no mercado, proporcionamos soluções modernas de TI. 🚀 Somos reconhecidos como a MELHOR empresa para se trabalhar em MG e no BRASIL pelo GPTW - Great Place to Work, e estamos class...

Python Go PostgreSQL Redis Azure+7

Ver Detalhes

Senior Backend Developer – Fintech & Payment Orchestration(High-Risk Payments, iGaming & Fintech)

Payomatix TechnologiesTalents By StudySmarter

RemotoHull, Iowa, Us17 dias atrás

R$ 13k - 19k/mês

SêniorCLT

Location: Remote / Hybrid Department: Technology Salary : 3000 USD / per month Company Description Payomatix is a Dubai-based fintech company revolutionizing the way businesses manage and scale digital financial ecosystems. With expertise in payment orchestration, white-label financial products, emb...

Node Python Go Rust PostgreSQL+12

Payments & SecurityPCI-DSS Compliant ArchitectureTokenization systems

Ver Detalhes

Desenvolvedor Python

buscojobs BrasilBuscojobs

RemotoSão PauloHoje

R$ 9k - 13k/mês

PlenoCLT

Sobre a Empresa Há mais de 20 anos mercado, somos uma consultoria estratégica de Inovação e Transformação Digital. Nossa especialidade é impulsionar as demandas de nossos clientes, integrando processos, pessoas e tecnologia de alta performance. Sobre o Cargo: Desenvolvedor Experiência sólida com Pyt...

Python Go MySQL PostgreSQL Redis+12

Ver Detalhes

Interessado nesta vaga?

Candidatar-se

Você será redirecionado para o site original

Informações

NívelSênior

ContratoCLT

LocalCaxias Do Sul, Rio Grande Do Sul, Br

RemotoNão

MoedaBRL

PublicadaHoje

FonteSólides Vagas

Análise de Vaga com IA

Estimativa salarial, match de tecnologias e análise de requisitos feitos com Inteligência Artificial

← Voltar às Vagas