Engenheiro de Dados Pleno | BRQ

Sobre a vaga

Engenheiro de Dados JR - Oportunidade Hibrida SP

• Ingestão de Dados: Configurar conectores para ler dados de buckets Amazon S3 ou bancos de dados relacionais (RDS).
• Processamento com Spark: Escrever scripts (geralmente em Python/PySpark ou SQL) dentro de Notebooks do Databricks para limpar, filtrar e agregar dados.
• Arquitetura Medallion: Organizar os dados nas camadas Bronze (dados brutos), Silver (dados limpos/filtrados) e Gold (dados prontos para negócio/BI).
• Delta Lake: Garantir que as tabelas estejam no formato Delta para permitir transações ACID e versionamento de dados (Time Travel).
• Otimização Básica: Executar comandos como OPTIMIZE e Z-ORDER no Databricks para garantir que as consultas não fiquem lentas e caras.
  
  

AWS

• Catalogação: Utilizar o Unity Catalog (ou o AWS Glue Catalog) para documentar o que cada tabela significa e quem tem acesso a ela.
• IAM e Segurança: Configurar permissões básicas para que o cluster do Databricks consiga ler um arquivo específico no S3 sem expor toda a conta.
• Monitoramento: Checar logs no Amazon CloudWatch para entender por que uma tarefa (job) falhou durante a madrugada.
• Orquestração: Embora o Databricks tenha o Workflows, você pode ter que interagir com o AWS Step Functions ou Managed Airflow (MWAA) para agendar as tarefas.
  
  

Cultura na BRQ

Chamamos de BRQ Way o nosso jeito de cuidar das pessoas, com iniciativas de carreira e desenvolvimento, saúde e bem-estar, e comunicação e conexão. Trabalhamos com flexibilidade de acordo com o contexto do projeto (anywhere office, híbrido ou presencial) e investimos em desenvolvimento contínuo com BRQ Academy, mentoria, incentivo a certificações e programas de idiomas, entre outras frentes.

Diversidade, inclusão e liberdade fazem parte do nosso dia a dia. Temos três grupos de afinidade, chamados de Roars, para comunidade LGBTQIA+, pessoas pretas e mulheres, que criam espaços de troca e ações internas para fortalecer representatividade e pertencimento. Saiba mais sobre carreiras na BRQ: https://www.brq.com/carreiras/

Ref: RESVc899

Híbrido

About the company

A BRQ apoia empresas a evoluírem o digital que sustenta seus negócios, com um propósito claro: transformar problemas complexos em progresso. Combinamos especialistas, ferramentas e inteligência artificial para entregar com método e consistência, atuando em modernização de legado e dados, GenAI, e construção de produtos e experiências digitais.

Com mais de 33 anos e mais de 2.500 profissionais, estamos entre as maiores empresas de tecnologia do Brasil e atuamos em projetos de alta complexidade e escala. Somos reconhecidos como líderes em GenAI e inovação para grandes empresas no estudo ISG Provider Lens™.

Aqui, nossa cultura tem nome: BRQ Way. São 3 pilares: Carreira e desenvolvimento, Saúde e bem-estar e Comunicação e conexão. Diversidade e inclusão fazem parte do nosso dia a dia, com grupos de afinidade como Colorful Roar, Black Roar e Girls Roar.

Benefícios: Plano de Saúde; Plano Odontológico; Seguro de Vida; Vale Refeição; Vale Alimentação; Horário Flexível; Home Office; Gympass, Telemedicina, Telenutrição, Canal de suporte emocional 24h e muito mais.