Engenheiro de Dados Especialista – Databricks

O que procuramos? Especialista em Databricks com domínio do ecossistema Spark e arquitetura Lakehouse, forte conhecimento em modelagem de dados e experiência avançada em pipelines, automações, CI/CD e integração com cloud.

Atribuições principais: Atuar como referência técnica no Databricks (Workflows, Jobs, Clusters, Unity Catalog); Criar pipelines de ingestão, transformação e curadoria com Notebooks (Python/SQL) e Delta Live Tables; Projetar e evoluir arquiteturas Lakehouse e camadas Landing Curation / Data Marts; Implementar CI/CD (Repos, GitHub Actions, Azure DevOps) e boas práticas de governança; Garantir observabilidade, monitoramento e tuning de jobs; Integrar com Airflow, ADF ou Databricks Workflows; conectar a fontes em SQL/NoSQL; Trabalhar com Hadoop/Hive e Kafka quando aplicável ao pipeline.

Databricks: Workflows, Jobs, Clusters, Unity Catalog, Delta Live Tables; Delta Lake (ACID, versionamento, otimização, Z‑Ordering); Apache Spark no Databricks; Python + SQL para pipelines; Arquitetura Lakehouse e camadas de dados (Landing, Cleaning, Processing, Curation, Data Marts); Modelagem: Dimensional (Kimball), Data Vault, Medallion Architecture; Cloud: Azure Databricks, AWS Databricks ou GCP Databricks; DevOps/Infra de dados: CI/CD (Repos, GitHub Actions, Azure DevOps), observabilidade, monitoramento e tuning; Orquestração: Airflow, ADF, Databricks Workflows; Big Data (desejável/conforme contexto): Hadoop, Hive, Kafka; Espanhol avançado.

Diferenciais: Governança avançada com Unity Catalog; migrações para Lakehouse; performance em grandes volumes; Conhecimento em formatos e storages (Parquet, Redshift no contexto AWS); Inglês intermediário/avançado.

Localidade da posição: 100% remoto Por que construir sua carreira na Meta? Oferecemos autonomia, metas claras e um ambiente dinâmico e desafiador, onde os profissionais têm oportunidade de interagir com diferentes tecnologias, participar de todos os tipos de projetos, trazer novas ideias e trabalhar de qualquer lugar do Brasil e (por que não?) do mundo.

Além disso, somos uma das melhores empresas para se trabalhar no Brasil segundo o Great Place to Work e uma das 10 empresas que mais crescem no país há 3 anos consecutivos, segundo o Anuário Informática Hoje.

Quais são nossos valores? • Somos pessoas servindo pessoas

Queremos que você cresça conosco em um ambiente acolhedor e repleto de oportunidades.

Se identificou? Então, #VemSerMeta!