Cientista de Dados ESPEC (GCP)

Quais serão suas responsabilidades?

• Evoluir e calibrar as métricas de LLM-as-a-judge: refinamento de prompts avaliadores, validação contra avaliação humana e definição de thresholds por métrica, considerando a fase de calibração do agente e a análise dos cenários com notas mais baixas;
• Construir um score consolidado de qualidade do agente, combinando as métricas de avaliação com indicadores de negócio;
• Desenvolver métricas de produto e de experiência do usuário: já temos algumas no bot legado e precisamos dessa visão também para o agente conversacional;
• Estruturar e manter camadas de dados a partir das bases de negócio (Salesforce, assinatura, cancelamento, cobrança);
• Orientar novas versões do agente com base nas avaliações: comparação entre versões, detecção de regressão de qualidade e recomendações para o time de produto;
• Atuar na classificação de assuntos e intenções das conversas para apoiar as análises.
  
  

O que é necessário para participar desse processo seletivo?

Requisitos obrigatórios

• Experiência sólida com NLP aplicado a dados conversacionais (chatbots, atendimento, análise de diálogos e intenções);
• Experiência prática com LLMs: prompt engineering, avaliação de modelos generativos e LLM-as-a-judge, incluindo calibração com rótulos humanos;
• Python e SQL avançados;
• Experiência na construção de métricas e scores de qualidade orientados a produto;
• Experiência com estruturação de dados em camadas e pipelines analíticos;
• Capacidade de traduzir análises em recomendações claras para produto e liderança;
• Domínio de Python, Sprk e PySpark para análise e desenvolvimento de modelos;
• Conhecimento sólido em bibliotecas como: Pandas, NumPy, Scikit-learn; PySpark;
• Experiência com desenvolvimento de modelos de Machine Learning supervisionado e não supervisionado: Classificação; Regressão;Clusterização; Sistemas de recomendação; Séries temporais;
• Conhecimento em estatística, probabilidade e experimentação;
• Experiência com SQL e manipulação de grandes volumes de dados;
• Experiência prática com Google Cloud Platform (GCP).
  
  

Desejáveis

• Experiência com Salesforce Agentforce / Einstein ou outras plataformas de agentes conversacionais;
• Ferramentas de avaliação/observabilidade de LLMs (OpenLayer, LangSmith, DeepEval, RAGAS ou similares);
• GCP: BigQuery, Dataform, Vertex AI;
• Looker Studio ou outra ferramenta de BI, com experiência na construção de dashboards;
• Estatística experimental (testes A/B, significância, concordância entre avaliadores);
• Vivência em produtos digitais B2C com alto volume de usuários (streaming, telecom, varejo).
  
  

Competências comportamentais

• Forte capacidade analítica e raciocínio lógico;
• Facilidade para traduzir problemas de negócio em soluções baseadas em dados;
• Boa comunicação para interação com públicos técnicos e de negócio;
• Autonomia e senso de ownership;
• Capacidade de trabalhar em ambientes dinâmicos e de alta complexidade;
• Perfil colaborativo e orientação para resultados.
  
  

Por que fazer parte do time DBC Company?

• Somos a 13ª melhor empresa para trabalhar do Brasil e a 2ª melhor empresa para trabalhar no Rio Grande do Sul, segundo o GPTW 2025;
• Todos os profissionais que estão alocados em clientes e/ou projetos são acompanhados por Gestor da DBC e também por Business Partner;
• A DBC incentiva seus colaboradores a obterem certificações relacionadas à sua área de atuação e alinhadas com sua Gestão DBC.
  
  

O que é importante saber?

• Nosso time promove um ambiente seguro para todos os profissionais independente de sua etnia, crença religiosa, orientação sexual, identidade de gênero, idade, etc.
• Essa vaga também é destinada a Pessoas com Deficiência.