Data Engineer Pleno (Databricks / Spark / Python)

Keyrus Brazilvia BeBee

São PauloPlenoCLTHoje

Salário Estimado

R$ 8.640,00 - R$ 12.960,00

Tecnologias

Python Go Git IA

0de 100

Ótimo

Score da Vaga

Descrição da Vaga

A Keyrus acredita na diversidade e na inclusão.

Encorajamos a todos a participarem em nosso processo de contratação, não importando o gênero, idade, raça, religião.

Não permitimos nenhum tipo de discriminação.

Isto é reforçado no processo de contratação e vivido dessa forma na empresa.

Sabemos que grandes resultados só são alcançados com uma grande equipe, por isso procuramos pessoas talentosas e apaixonadas, com desejo de crescer profissionalmente e criar uma trajetória de carreira conosco.

Papéis e

Responsabilidades:

•Desenvolver e manter pipelines de ingestão de dados utilizando Autoloader (incremental, schema evolution e otimização de throughput).

•Processar dados em larga escala utilizando Spark Structured Streaming e Spark SQL. • Aplicar boas práticas de engenharia de dados, incluindo particionamento e otimizações com Delta Lake.

•Realizar análise e otimização de performance e custos em ambientes Databricks. • Implementar processos de Data Quality para garantir confiabilidade dos dados.

•Utilizar Git para controle de versionamento, incluindo pull requests e boas práticas de desenvolvimento colaborativo. • Criar documentação técnica clara e organizada das soluções implementadas.

•Colaborar com times de negócio, analytics e tecnologia para garantir que os dados estejam estruturados, acessíveis e seguros.

Qualificações Essenciais:

•Experiência com engenharia de dados e processamento de grandes volumes de dados.

•Conhecimento em Python, Apache Spark e Databricks. • Experiência na construção e manutenção de pipelines de dados escaláveis.

•Conhecimento em Spark SQL e Structured Streaming. • Experiência com versionamento de código utilizando Git.

Serão considerados Diferenciais:

•Experiência com metodologias ágeis (Scrum, Kanban, entre outras).

•Conhecimento em arquitetura de dados moderna e melhores práticas de ETL/ELT. • Perfil autogerenciável, com forte capacidade de resolução de problemas e tomada de decisão em ambientes complexos.

•Interesse em novas tecnologias e inovação em soluções de dados.

Nossa missão é Auxiliar as empresas a extrair todo o potencial de Dados e Digital objetivando aumentar seu desempenho, ajudando na transformação, gerando novas alavancas de crescimento e competitividade.

Vem fazer parte do Time Keyrus! Se você quiser saber mais sobre nós, convidamos você a visitar nosso site: http://www.keyrus.com/br/ Desejamos boa sorte! 😊🚀

Vagas Semelhantes

[Job-27757] Master AI Developer/ LLM

CI&TGlassdoor

RemotoBrHoje

R$ 7k - 11k/mês

PlenoCLT

We are tech transformation specialists, uniting human expertise with AI to create scalable tech solutions. With over 8,000 CI&Ters around the world, we’ve built partnerships with more than 1,000 clients during our 30 years of history. Artificial Intelligence is our reality. The Mission: We are looki...

React Node Python Go AWS+8

Ver Detalhes

Desenvolvedor Fullstack Python - Remoto

GetronicsBeBee

RemotoSão PauloHoje

R$ 9k - 14k/mês

PlenoCLT

A Getronics é líder global em soluções de tecnologia, com uma equipe de mais de 4.000 colegas em 22 países, fornecendo serviços abrangentes de ponta a ponta em todo o mundo. Temos o compromisso de oferecer um atendimento excepcional ao cliente, para permitir que eles se concentrem em seus principais...

Python Go AWS Azure Docker+7

Ver Detalhes

Estágio em Inteligência Artificial

Samsung Eletronica Da Amazonia LTDAWorkday

RemotoBrOntem

R$ 7k - 11k/mês

PlenoCLT

Podsumowanie SOBRE A SAMSUNG E O SRBR É missão da Samsung inspirar o mundo e moldar o futuro com ideias e tecnologias transformadoras! E você sabia que muitas dessas inovações são pensadas e desenvolvidas por talentos brasileiros e impactam a vida de milhões de pessoas pelo mundo? Nosso Centro de Pe...

Python Go Git iOS IA

Ver Detalhes

Desenvolvedor Full-Stack Python React

FCamaraJobLeads

RemotoBrOntem

R$ 7k - 11k/mês

PlenoCLT

Descrição da vaga Buscamos um engenheiro apaixonado por construir produtos robustos, escaláveis e bem arquitetados — do backend ao frontend, com fluência em cloud. Você vai integrar um time de engenharia que constrói plataformas de alto volume, com APIs críticas, pipelines assíncronos e interfaces m...

TypeScript React Python Go CSS+16

Ver Detalhes

Interessado nesta vaga?

Candidatar-se

Você será redirecionado para o site original

Informações

NívelPleno

ContratoCLT

LocalSão Paulo

RemotoNão

MoedaBRL

PublicadaHoje

FonteBeBee

Análise de Vaga com IA

Estimativa salarial, match de tecnologias e análise de requisitos feitos com Inteligência Artificial

← Voltar às Vagas