Texto agregado para leitura rápida. Confira sempre a fonte original ao enviar a candidatura.
Sobre a vaga
Engenheiro de Dados JR - Oportunidade Hibrida SP
- Ingestão de Dados: Configurar conectores para ler dados de buckets Amazon S3 ou bancos de dados relacionais (RDS).
- Processamento com Spark: Escrever scripts (geralmente em Python/PySpark ou SQL) dentro de Notebooks do Databricks para limpar, filtrar e agregar dados.
- Arquitetura Medallion: Organizar os dados nas camadas Bronze (dados brutos), Silver (dados limpos/filtrados) e Gold (dados prontos para negócio/BI).
- Delta Lake: Garantir que as tabelas estejam no formato Delta para permitir transações ACID e versionamento de dados (Time Travel).
- Otimização Básica: Executar comandos como OPTIMIZE e Z-ORDER no Databricks para garantir que as consultas não fiquem lentas e caras.
AWS
- Catalogação: Utilizar o Unity Catalog (ou o AWS Glue Catalog) para documentar o que cada tabela significa e quem tem acesso a ela.
- IAM e Segurança: Configurar permissões básicas para que o cluster do Databricks consiga ler um arquivo específico no S3 sem expor toda a conta.
- Monitoramento: Checar logs no Amazon CloudWatch para entender por que uma tarefa (job) falhou durante a madrugada.
- Orquestração: Embora o Databricks tenha o Workflows, você pode ter que interagir com o AWS Step Functions ou Managed Airflow (MWAA) para agendar as tarefas.
Cultura na BRQ
Chamamos de BRQ Way o nosso jeito de cuidar das pessoas, com iniciativas de carreira e desenvolvimento, saúde e bem-estar, e comunicação e conexão. Trabalhamos com flexibilidade de acordo com o contexto do projeto (anywhere office, híbrido ou presencial) e investimos em desenvolvimento contínuo com BRQ Academy, mentoria, incentivo a certificações e programas de idiomas, entre outras frentes.
Diversidade, inclusão e liberdade fazem parte do nosso dia a dia. Temos três grupos de afinidade, chamados de Roars, para comunidade LGBTQIA+, pessoas pretas e mulheres, que criam espaços de troca e ações internas para fortalecer representatividade e pertencimento. Saiba mais sobre carreiras na BRQ: https://www.brq.com/carreiras/
Ref: RESVc899
Híbrido
About the company
A BRQ apoia empresas a evoluírem o digital que sustenta seus negócios, com um propósito claro:
transformar problemas complexos em progresso. Combinamos especialistas, ferramentas e inteligência artificial para entregar com método e consistência, atuando em modernização de legado e dados, GenAI, e construção de produtos e experiências digitais.
Com mais de 33 anos e mais de 2.500 profissionais, estamos entre as
maiores empresas de tecnologia do Brasil e atuamos em projetos de alta complexidade e escala. Somos reconhecidos como
líderes em GenAI e inovação para grandes empresas no estudo ISG Provider Lens™.
Aqui, nossa cultura tem nome:
BRQ Way. São 3 pilares: Carreira e desenvolvimento, Saúde e bem-estar e Comunicação e conexão. Diversidade e inclusão fazem parte do nosso dia a dia, com grupos de afinidade como Colorful Roar, Black Roar e Girls Roar.
Benefícios: Plano de Saúde; Plano Odontológico; Seguro de Vida; Vale Refeição; Vale Alimentação; Horário Flexível; Home Office; Gympass, Telemedicina, Telenutrição, Canal de suporte emocional 24h e muito mais.