Leega Consultoria

Engenheiro de Dados Databricks/DBT/Streaming/ML/AI

🌍 Remoto📍 Remoto
PUBLICIDADE

Descrição da Vaga

A Leega busca um(a) Engenheiro(a) de Dados Sênior para atuar na habilitação de Dados para IA, um papel estruturante focado em definir caminhos e direcionamentos arquiteturais da plataforma de dados. O profissional será responsável por criar mecanismos e padrões para o consumo de dados não estruturados (PDF, áudio, imagens e vídeos) por aplicações de IA, e habilitar outros times a construir sobre essa base. É um papel que combina visão de arquitetura com atuação hands-on, executando testes práticos e validando abordagens para melhoria contínua dos processos.

Responsabilidades

  • Definir caminhos, padrões e direcionamentos arquiteturais para a plataforma de dados voltada a IA.
  • Estruturar e criar mecanismos para ingestão, processamento e disponibilização de dados não estruturados (PDF, áudio, imagens, vídeos).
  • Definir a estrutura dos dados para consumo por modelos de IA/ML e IA generativa.
  • Automatizar, melhorar e propor mudanças em processos de dados existentes.
  • Realizar provas de conceito e testes práticos para validar soluções antes de escalá-las.
  • Atuar como referência técnica em um time de habilitação, apoiando times multidisciplinares.
  • Construir e evoluir pipelines de dados escaláveis integrados a aplicações externas.
PUBLICIDADE

Requisitos

  • ✓Experiência sólida com Databricks e Apache Spark para processamento distribuído em larga escala
  • ✓Domínio de Python e SQL aplicados à engenharia de dados
  • ✓Experiência com processamento de dados não estruturados (documentos/PDF, áudio, imagens ou vídeos) para consumo por IA
  • ✓Experiência em definição de arquitetura de dados e direcionamento técnico (não apenas execução)
  • ✓Familiaridade com preparação de dados para IA/ML e IA generativa (feature engineering, chunking, embeddings, consumo por modelos)
  • ✓Experiência em integração de dados com sistemas externos (APIs, serviços SaaS, streaming)
  • ✓Vivência em cloud computing, preferencialmente GCP
  • ✓Conhecimento de Delta Lake (arquitetura Lakehouse, versionamento e governança de dados)
  • ✓Experiência com modelagem e transformação de dados com DBT
  • ✓Prática com pipelines de dados (ETL/ELT) escaláveis e robustos
  • ✓Experiência com versionamento de código (Git) e CI/CD
  • ✓Experiência em ambientes ágeis e colaboração com times multidisciplinares
  • ✓Perfil hands-on com autonomia para propor, testar e melhorar processos
  • •Conhecimento em Scala
  • •Experiência com MLflow e Databricks ML
  • •Experiência prática com pipelines de RAG, vetorização/embeddings e bancos vetoriais
  • •Conhecimento em integração com ferramentas de IA generativa ou APIs de Machine Learning
  • •Vivência com Kubernetes para orquestração de workloads
  • •Experiência com Terraform (infraestrutura como código)
  • •Familiaridade com arquiteturas orientadas a eventos ou streaming (Kafka, Pub/Sub)

Benefícios

  • ✓Convênio Médico Porto Seguro (com possibilidade de incluir cônjuge e filhos)
  • ✓Convênio Odontológico Porto Seguro
  • ✓Participação nos Lucros e Resultados (PLR)
  • ✓Auxílio Creche
  • ✓Vale Alimentação e Refeição Alelo
  • ✓Auxílio Home Office
  • ✓Parcerias com Instituições de Ensino (descontos e incentivos em cursos e graduações)
  • ✓Incentivo para Certificações (incluindo Cloud: GCP, Azure, AWS)
  • ✓Pontos Livelo
  • ✓TotalPass (planos de academia com desconto para colaboradores e familiares)
  • ✓Mindself (incentivo à qualidade de vida através de meditação e Mindfulness)

Na Leega, não entregamos apenas linhas de código ou dashboards. Transformamos desafios tecnológicos complexos em impacto real. Com mais de 15 anos de estrada, unimos a profundidade da experiência humana à velocidade da Inteligência Artificial para criar soluções que mudam negócios e, acima de tudo,...[Ver Mais]

Informações Adicionais

Selecionamos as principais informações da posição. Para conferir o descritivo completo, clique em "acessar"
PUBLICIDADE
Candidatar-se a esta vaga →

Você será redirecionado para o site da empresa

PUBLICIDADE