Desenvolvedor Backend Python (Foco em Web Scraping Distribuído)

Desenvolver e manter serviços de extração de dados utilizando Python e programação assíncrona (Asyncio).

Implementar estratégias avançadas para contornar proteções anti-bot (WAFs como Cloudflare/Akamai, Fingerprinting TLS/JA3).

Trabalhar com engenharia reversa de requisições HTTP para reduzir a dependência de browsers (Headless), priorizando performance e baixo custo de infraestrutura.

Gerenciar o consumo e publicação de mensagens em arquiteturas orientadas a eventos (RabbitMQ), garantindo confiabilidade e tratamento de falhas.

Lidar com desafios específicos de sites governamentais e legados (gestão de Cookies, Tokens de Sessão, ViewStates de ASP.

NET).

Otimizar queries e interações com banco de dados relacional (PostgreSQL) em cenários de alta concorrência.

Monitorar a saúde da aplicação e identificar gargalos de performance REQUISITOS E QUALIFICAÇÕES: Linguagem: Domínio avançado de Python3 com forte experiência em Asyncio.

Protocolo HTTP: Conhecimento profundo de como a web funciona (Headers, Cookies, Handshakes TLS, HTTP/2).

Mensageria: Experiência com filas (entender Exchanges, Filas, QoS e padrões de consumo).

Bypass: Experiência com bibliotecas de impersonation (ex: curl_cffi ou similares) e rotação inteligente de proxies.

Banco de Dados: Sólidos conhecimentos em SQL e PostgreSQL.

Boas Práticas: Código limpo, aplicação de Design Patterns e testes automatizados.

Infraestrutura: Docker e Docker Compose.

Diferenciais Experiência em extração de dados de portais governamentais (Gov.br, Detrans, Tribunais): Saber lidar com a instabilidade, lentidão e peculiaridades (captchas específicos, layouts antigos) desses sites.

Conhecimento em instrumentação e monitoramento (OpenTelemetry, Prometheus, Grafana).

Entendimento de CI/CD e esteiras de deploy automatizado.