PUBLICIDADE
Descrição da Vaga
Buscamos um(a) Engenheiro(a) de Dados Sênior para projetar, desenvolver e sustentar pipelines de dados escaláveis e confiáveis, atuando desde a ingestão de dados brutos até sua organização, transformação, armazenamento e disponibilização para consumo analítico, modelos avançados e tomada de decisão.
Responsabilidades
- Identificar padrões, comportamentos e oportunidades de automação a partir dos dados, para melhoria de processos.
- Projetar, desenvolver e manter pipelines genéricos e parametrizáveis, para uso em larga escala da corporação.
- Estruturar e evoluir arquiteturas de dados escaláveis, resilientes e aderentes às boas práticas.
- Desenvolver algoritmos e processos para facilitar o acesso eficiente a dados brutos e curados.
- Realizar a aquisição de dados a partir de diferentes fontes (bancos relacionais, APIs, arquivos, eventos, sistemas legados).
- Construir e manter datasets confiáveis, versionados e documentados para consumo analítico e científico.
- Implementar estratégias de qualidade de dados, observabilidade, tratamento de falhas e consistência.
- Otimizar performance de consultas, cargas e pipelines (custo, latência e escalabilidade).
- Garantir aderência a políticas de governança, segurança, privacidade e compliance.
- Documentar pipelines, arquiteturas e processos, promovendo reutilização e padronização.
PUBLICIDADE
Requisitos
- ✓Experiência com Arquitetura de dados distribuída
- ✓Experiência com Modelagem de dados (relacional, dimensional e orientada a analytics)
- ✓Conhecimento em Boas práticas de engenharia de dados e padrões de mercado
- ✓Experiência com Tuning de performance e otimização de custos
- ✓Experiência com grandes volumes de dados
- ✓Conhecimento em Observabilidade, logs e métricas de pipelines
- ✓Conhecimento em Qualidade, lineage e rastreabilidade de dados
- ✓Conhecimento em Infraestrutura, redes, IAM e custos (FinOps)
- ✓Experiência com Cloud Azure
- ✓Experiência com Apache Spark / PySpark
- ✓Experiência com Delta Lake
- ✓Conhecimento em Python
- ✓Conhecimento em SQL
- ✓Experiência com Databricks (Workflows, Unity Catalog)
- ✓Experiência com Azure Data Factory
- ✓Experiência com Streaming (Kafka)
- ✓Experiência com Azure DevOps
- ✓Disponibilidade para atuação presencial em São Paulo ou Londrina, caso seja dessas regiões
Benefícios
- ✓Caju (cartão flexível) com a recarga mensal
- ✓Plano de Saúde Bradesco
- ✓Plano Odontológico Bradesco
- ✓Medicina preventiva com Dr. Alper
- ✓Seguro de Vida
- ✓Wellhub
- ✓SESC
- ✓Auxílio Creche para mamães e papais
- ✓Learning – área focada no desenvolvimento de hard e soft skills
- ✓Parceria com instituições de ensino para formação técnica, MBA, pós-graduação, certificações, inglês e espanhol
- ✓Desconto em produtos de um portal parceiro
Categorias
Sobre a Empresa
Mais vagas na Semantix → We are a reference when it comes to Big Data, Analytics and Artificial Intelligence, developing innovative and disruptive solutions, besides Big Data platforms in the “one-stop-shop” model, allowing the implementation of complex data environments in a few minutes.[Ver Mais]
Informações Adicionais
Selecionamos as principais informações da posição. Para conferir o descritivo completo, clique em "acessar"
PUBLICIDADE
Candidatar-se a esta vaga →
Você será redirecionado para o site da empresa
Vagas Relacionadas
PUBLICIDADE