🏢

Engenheiro de Dados Sênior

🌍 Remoto📍 Remoto

Descrição da Vaga

A Octadesk, uma plataforma de atendimento com IA, está em busca de um(a) Engenheiro(a) de Dados Sênior para integrar seu time de engenharia. O profissional será responsável por desenhar a arquitetura que permite à Octadesk ser data-driven em cada decisão, em um ambiente ágil, com autonomia, colaboração técnica e busca constante por soluções escaláveis.

Responsabilidades

Desenhar, implementar e manter pipelines de dados robustos e eficientes.
Construir e otimizar fluxos de ingestão e transformação de dados em lote e streaming.
Estruturar o ecossistema utilizando Iceberg para garantir performance e consistência.
Ajustar consultas complexas no Trino para garantir latência mínima.
Desenvolver soluções distribuídas utilizando Spark que suportem o crescimento acelerado da Octadesk.
Garantir a integridade, confiabilidade e disponibilidade dos dados.
Colaborar com times de Produto e Engenharia para entender necessidades de dados.
Desenvolver código limpo e escalável (Python/SQL).
Monitorar e evoluir a stack no GCP e MinIO.
Participar em code reviews e ritos de agilidade.
Implementar melhorias para reduzir custos de infraestrutura e otimizar o tempo de processamento.

Requisitos

✓Experiência sólida em ambientes de dados em nuvem e com desafios de alta volumetria.
✓Vivência na construção de arquiteturas modernas (Lakehouse).
✓Domínio em Apache Iceberg e formatos de tabela.
✓Proficiência em Apache Spark para grandes volumes de dados.
✓Experiência prática com Trino (ou Presto) para exploração e análise de dados.
✓Experiência com GCP (BigQuery, Cloud Functions, GCS) e gerenciamento de armazenamento via MinIO.
✓Proficiência em Python e SQL avançado.
✓Conhecimento sólido em modelagem de dados (Kimball/Inmon).
✓Experiência com orquestradores (Airflow, Dagster ou similares).
✓Mindset de "infrastructure as code" (Terraform, Pulumi ou similar).
✓Capacidade de traduzir problemas de negócio complexos em arquiteturas técnicas viáveis.
✓Excelente comunicação para articular decisões técnicas para diferentes públicos.
•Certificações oficiais em GCP (ex: Google Professional Data Engineer).
•Experiência com ferramentas de observabilidade de dados.
•Contribuições para projetos Open Source (especialmente na comunidade do ecossistema de Big Data).
•Vivência com arquiteturas de processamento em tempo real (Kafka, Pub/Sub).

Benefícios

✓Vale Refeição em benefício flexível
✓Auxílio Locomoção
✓Auxílio Creche
✓Well Hub
✓Assistência Médica
✓Assistência Odontológica
✓Parcerias Educacionais
✓Dayoff de Aniversário
✓Seguro de Vida

Categorias

Data Science / Analytics

Sobre a Empresa

Mais vagas na LWSA →

Sabia que a LWSA é um ecossistema de soluções digitais formado por diversas empresas? Pois é, e todas elas compartilham de um único objetivo: transformar negócios para crescerem e prosperarem por meio da tecnologia.Nosso time é reconhecido pela paixão, criatividade, persistência e colaboração.[Ver Mais]