Descrição da Vaga
Estamos em busca de um(a) Engenheiro(a) de Dados Pleno para atuar no desenvolvimento e evolução de soluções modernas de dados em ambiente cloud. Esse(a) profissional será responsável por construir, processar, organizar e disponibilizar dados para consumo analítico, operacional e executivo, contribuindo para o desenvolvimento de uma arquitetura escalável, segura e de alta performance. Você atuará no desenvolvimento de pipelines de dados utilizando Azure, Databricks, Python e PySpark, colaborando na evolução da arquitetura de dados, automação de processos e implementação de boas práticas de engenharia.
Responsabilidades
- Desenvolver, manter e otimizar pipelines de dados em ambientes Azure e Databricks;
- Integrar diferentes fontes de dados por meio de processos de ingestão, transformação e disponibilização das informações;
- Desenvolver soluções utilizando Python, PySpark, Spark e SQL;
- Aplicar boas práticas de engenharia de dados, garantindo qualidade, segurança, rastreabilidade, escalabilidade e performance;
- Apoiar a modelagem e organização de dados para consumo das áreas de BI, Analytics, Negócios e processos operacionais;
- Automatizar processos e contribuir para a evolução contínua das soluções de dados;
- Trabalhar em conjunto com equipes de Analytics, BI, Governança e áreas de negócio para garantir a aderência técnica e funcional das entregas;
- Contribuir para a evolução da arquitetura de dados, práticas de DataOps, versionamento e gestão de ambientes;
- Monitorar pipelines e implementar melhorias contínuas visando maior eficiência operacional;
- Documentar processos, fluxos e soluções desenvolvidas.
Requisitos
- ✓Experiência em Engenharia de Dados
- ✓Vivência no desenvolvimento de pipelines utilizando Databricks
- ✓Experiência com Microsoft Azure
- ✓Domínio de Python, PySpark, Spark e SQL
- ✓Experiência em modelagem e transformação de dados
- ✓Conhecimento em arquitetura Lakehouse e Delta Lake
- ✓Experiência com Git para versionamento de código
- ✓Conhecimento em Azure DevOps
- ✓Vivência com boas práticas de engenharia de dados, governança, qualidade e segurança da informação
- ✓Experiência em metodologias ágeis
- •Conhecimento em Hadoop e Hive
- •Experiência com processamento distribuído de dados
- •Vivência em arquiteturas Data Lakehouse
- •Conhecimento em CI/CD aplicado à Engenharia de Dados
- •Experiência com DataOps
- •Conhecimento em otimização de performance de pipelines
- •Certificação Microsoft DP-203
- •Experiência com observabilidade e monitoramento de pipelines
Benefícios
- ✓Vale refeição ou Vale alimentação
- ✓Plano de saúde extensível a cônjuge e filhos
- ✓Plano odontológico
- ✓Wellhub (Gympass)
- ✓Auxílio Pet
- ✓Plano de medicamentos + Bem-estar 360°
- ✓Seguro de vida
- ✓Crédito do Trabalhador (e-Consignado)
- ✓Auxílio creche - conforme regras sindicais da localidade
- ✓Programa de acompanhamento à gestante
- ✓Programa Minha Nova Parceria de Confiança
- ✓Day off no seu aniversário
- ✓Bônus de indicação para nossas vagas
- ✓Jubileu (premiação personalizada por tempo de empresa)
Categorias
Sobre a Empresa
Mais vagas na Semantix →Fundada em 2010 no Brasil e com presença em Brasil, Argentina, Uruguai, Colômbia, Chile e México, a Semantix desenvolve soluções Data Driven para organizações que precisam estar sempre um passo à frente, utilizando o que existe de mais atual em tecnologia. Hoje, somos mais de 2.000 colaboradores.[Ver Mais]
Informações Adicionais
Você será redirecionado para o site da empresa
