Destaque

Senior Python Engineer — Web Scraping & Data Extraction

Beemôn Tecnologiavia LinkedIn

RemotoCaxias Do Sul, Rio Grande Do Sul, BrSêniorCLT15 dias atrás

Salário Estimado

R$ 11.880,00 - R$ 17.820,00

Tecnologias

Python Go PostgreSQL Redis Docker Git GitHub API iOS IA

0de 100

Excelente

Score da Vaga

Descrição da Vaga

Estamos buscando um Desenvolvedor Python Sênior com forte experiência em web scraping para atuar no desenvolvimento e evolução de soluções de coleta de dados em larga escala.

Este profissional irá contribuir com conhecimento técnico avançado e boas práticas de engenharia para melhorar a robustez, confiabilidade e eficiência dos sistemas de coleta de dados da empre A posição é hands-on e focada no desenvolvimento de soluções técnicas para desafios complexos de scraping.

Responsabilidades • Desenvolver e evoluir crawlers e sistemas de coleta de dados em larga escala.

•Criar spiders utilizando Scrapy, Requests, Selenium e BeautifulSoup. • Trabalhar com programação assíncrona (async/await) para otimizar performance de coleta.

•Implementar e melhorar estratégias de rotação de proxies e uso de VPNs. • Desenvolver mecanismos para contornar bloqueios e sistemas anti-bot.

•Integrar solucionadores de CAPTCHA em pipelines de scraping. • Construir pipelines de processamento assíncrono utilizando Celery, Redis e RabbitMQ.

•Otimizar armazenamento e consultas em PostgreSQL. • Desenvolver APIs e integrações utilizando Django.

•Diagnosticar e resolver problemas relacionados a bloqueios como rate limiting, fingerprinting e proteções WAF. • Contribuir com melhorias técnicas na arquitetura e nas ferramentas de coleta de dados.

•Colaborar com o time de engenharia seguindo práticas ágeis e revisão de código.

Requisitos • Forte experiência com Python.

•Experiência sólida com web scraping em ambiente de produção. • Experiência com Scrapy, Requests, Selenium e BeautifulSoup.

•Experiência com programação assíncrona utilizando asyncio. • Experiência com Celery, Redis e RabbitMQ.

•Experiência com PostgreSQL. • Conhecimento avançado de HTTP, cookies, headers e autenticação.

•Experiência com proxy rotation e uso de VPNs. • Experiência com solucionadores de CAPTCHA.

•Experiência com bypass de sistemas anti-bot. • Experiência com Git e workflows de versionamento.

•Experiência trabalhando com times ágeis (Scrum ou Kanban).

Diferenciais • Experiência com infraestrutura de scraping em larga escala.

•Experiência com automação de browsers e simulação de comportamento de usuário. • Experiência com Docker e containerização.

•Experiência com sistemas distribuídos de coleta de dados. • Experiência com monitoramento e observabilidade de crawlers.

•Experiência com CI/CD. • Experiência com GitHub Actions.

Vagas Semelhantes

Desenvolvedor(a) Sênior Python

Alterego BusinessBeBee

RemotoMaracanaú, Ceará, BrOntem

R$ 13k - 19k/mês

SêniorCLT

A Alterego é uma consultoria especializada em Customer Experience (CX), certificada ISO 9001:2015. Unimos estratégia, operação e tecnologia para desenhar e implementar transformações reais ao longo de toda a jornada do cliente, com impacto direto em eficiência operacional, redução de custos, qualida...

Python Go MySQL PostgreSQL MongoDB+10

Ver Detalhes

Staff / Principal Backend Engineer (Python)

CanopyIndeed

RemotoSouth Jordan, Utah, Us11 dias atrás

R$ 12k - 19k/mês

SêniorCLT

Staff / Principal Backend Engineer (Python) Canopy, South Jordan, UT About Us Canopy is a fast-growing SaaS company in South Jordan, Utah building simple, efficient software for accounting firms. We are looking to revolutionize the accounting space with modern, user-friendly software for a neglected...

Python Java Go PostgreSQL Redis+8

Flexible Paid Time Off - you're actually encouraged to use, plus 10 company holidays!❤️‍ Health Benefits - including Medical, Dental, and Vision and an HSA Match401(k) - we match 100% up to 3% of your contribution

Ver Detalhes

Senior Python Engineer — Web Scraping & Data Extraction

BEEMON TECNOLOGIA LTDASólides Vagas

Caxias Do Sul, Rio Grande Do Sul, Br17 dias atrás

R$ 11k - 16k/mês

SêniorCLT

Estamos buscando um Desenvolvedor Python Sênior com forte experiência em web scraping para atuar no desenvolvimento e evolução de soluções de coleta de dados em larga escala. Este profissional irá contribuir com conhecimento técnico avançado e boas práticas de engenharia para melhorar a robustez, co...

Python Go PostgreSQL Redis Docker+5

Ver Detalhes

Desenvolvedor Full-Stack Python React

FCamaraJobLeads

RemotoBr5 dias atrás

R$ 7k - 11k/mês

PlenoCLT

Descrição da vaga Buscamos um engenheiro apaixonado por construir produtos robustos, escaláveis e bem arquitetados — do backend ao frontend, com fluência em cloud. Você vai integrar um time de engenharia que constrói plataformas de alto volume, com APIs críticas, pipelines assíncronos e interfaces m...

TypeScript React Python Go CSS+16

Ver Detalhes

Interessado nesta vaga?

Candidatar-se

Você será redirecionado para o site original

Informações

NívelSênior

ContratoCLT

LocalCaxias Do Sul, Rio Grande Do Sul, Br

RemotoSim

MoedaBRL

Publicada15 dias atrás

FonteLinkedIn

Análise de Vaga com IA

Estimativa salarial, match de tecnologias e análise de requisitos feitos com Inteligência Artificial

Quer se preparar melhor? Pratique entrevistas com IA no Recrutadoria ou melhore suas habilidades no BitMentor

← Voltar às Vagas