Engenheiro DataOps Sênior (AWS)

🌍 Remoto📍 Remoto

Descrição da Vaga

A Leega busca um Engenheiro DataOps Sênior para atuar no desenvolvimento e manutenção de pipelines de dados para Data Lake, com foco em AWS. O profissional será responsável por implementar melhorias, corrigir falhas e atuar no contexto de FastData, integrando eventos do Adobe Analytics e enriquecendo-os como microsserviços no EKS.

Responsabilidades

Desenvolver pipeline de dados para o Data Lake.
Manter processos para correção de falhas/erros.
Implementar melhorias contínuas.
Atuar no contexto de FastData, implementando consumers como microsserviços no EKS.
Enriquecer eventos com dados da plataforma e integrar do Adobe Analytics.
Atuar como parte da equipe ágil.
Colaborar com outros membros da equipe (Engenheiros, PO, QA, Designers, Scrum Master, Funcional e Tech Lead) para resolver desafios.
Desenvolver, implantar e operar aplicações na cultura DevOps.
Realizar modelagem de Dados Relacional e Dimensional.

Requisitos

✓Experiência mínima de 2 anos atuando com desenvolvimento e monitoramento de Pipeline AWS.
✓Domínio de Terraform para trabalhar com Infra as Code.
✓Domínio em virtualização EC2.
✓Domínio em esteiras de CI/CD com Git.
✓Conhecimento prático em Kubernetes.
✓Conhecimentos em serviços de mensageria, especialmente Kafka.
✓Conhecimento em tecnologias, soluções e conceitos de Big Data como Spark, Hadoop, Hive, MapReduce, Kafka.
✓Conhecimento em Workflow com AirFlow.
✓Conhecimento em Storage Solutions como S3, Redshift, Parquet, Delta.
✓Conhecimento em Data Modeling: Landing, Cleaning, Processing, Curation, Estruturas de Fato/Dimensão, encadeamento de ETLs, Data Marts.
✓Conhecimento sólido em Pipeline de Dados na AWS.
✓Conhecimento/Atuação em Python.
✓Conhecimento/Atuação em Amazon EKS.
✓Conhecimento/Atuação em Docker.
✓Disponibilidade para eventuais idas à empresa localizada na Av. Paulista - São Paulo.

Categorias

Data Science / Analytics DevOps

Sobre a Empresa

Mais vagas na Leega Consultoria →

Na Leega, não entregamos apenas linhas de código ou dashboards. Transformamos desafios tecnológicos complexos em impacto real. Com mais de 15 anos de estrada, unimos a profundidade da experiência humana à velocidade da Inteligência Artificial para criar soluções que mudam negócios e, acima de tudo,...[Ver Mais]