PUBLICIDADE
Descrição da Vaga
Buscamos um(a) Engenheiro(a) de Dados Sênior para atuar em nosso ecossistema de dados na GCP, participando ativamente do processo de migração da nossa arquitetura de lakehouse para um modelo baseado em dbt e BigQuery. Você trabalhará na evolução de pipelines, na modernização de práticas de engenharia analítica e na garantia de qualidade, governança e performance dos dados.
Responsabilidades
- Desenvolver, otimizar e manter pipelines de dados em ambiente de lakehouse na GCP
- Atuar na migração de workloads existentes para dbt + BigQuery, incluindo modelagem, testes e documentação
- Construir e manter jobs de processamento distribuído com Spark
- Trabalhar com tabelas Iceberg, garantindo versionamento, evolução de schema e performance de leitura/escrita
- Escrever código Python de qualidade para orquestração, transformação e automação de dados
- Orquestrar pipelines utilizando Cloud Composer (Airflow)
- Colaborar com times de dados, produto e engenharia para garantir a confiabilidade e escalabilidade da plataforma
- Apoiar decisões técnicas relacionadas à arquitetura de dados, incluindo contêinerização de workloads (Kubernetes)
- Definir e aplicar boas práticas de engenharia de dados (CI/CD, testes automatizados, versionamento, observabilidade)
PUBLICIDADE
Requisitos
- ✓Experiência sólida como Engenheiro(a) de Dados, atuando em ambientes de grande volume de dados
- ✓Vivência prática com GCP (BigQuery, Cloud Storage, Dataproc ou similares)
- ✓Experiência com dbt para modelagem e transformação de dados
- ✓Conhecimento avançado em Python para desenvolvimento de pipelines e automações
- ✓Experiência com Apache Spark (PySpark ou Scala)
- ✓Experiência com Apache Iceberg (ou outros formatos de tabela como Delta Lake/Hudi, com disposição para migrar para Iceberg)
- ✓Experiência com Cloud Composer (Airflow) para orquestração de pipelines
- ✓Conhecimento básico de Kubernetes (conceitos, deploys simples, troubleshooting)
- ✓Experiência com versionamento (Git) e práticas de CI/CD
- ✓Boa comunicação e capacidade de trabalhar em ambientes de transição arquitetural
- •Experiência anterior em processos de migração de arquitetura de dados
- •Certificações GCP (Professional Data Engineer, por exemplo)
- •Experiência com observabilidade de dados (data quality, monitoramento de pipelines)
- •Conhecimento em Terraform ou outras ferramentas de IaC
Benefícios
- ✓Plano de Saúde
- ✓Plano Odontológico
- ✓Seguro de Vida
- ✓Vale Refeição
- ✓Vale Alimentação
- ✓Auxílio Home Office
- ✓Auxílio Creche
- ✓Day off no aniversário
- ✓Empréstimo Consignado
- ✓PLR
- ✓Apoio médico, psicológico e nutricional
- ✓Gympass
Categorias
Sobre a Empresa
Mais vagas na Reclame AQUI →Somos os verdadeiros heróis sem capa. Bom, o que fazemos? É simples! Nós estamos mudando o mundo! Longe desse papo de empresa que quer impressionar (Deus me livre, mas quem me dera rsrs), porém, AQUI isso é uma verdade todos os dias, MUDAR O MUNDO.[Ver Mais]
Informações Adicionais
Selecionamos as principais informações da posição. Para conferir o descritivo completo, clique em "acessar"
PUBLICIDADE
Candidatar-se a esta vaga →
Você será redirecionado para o site da empresa
Vagas Relacionadas
PUBLICIDADE