Engenheiro(a) de Dados Sênior
Publicada em
Ver 1.308 vagas de Data Science / Analytics →Descrição da Vaga
A Maxxi, consultoria de tecnologia especializada em transformação digital, desenvolvimento de software, dados & analytics e inteligência artificial, busca um(a) Engenheiro(a) de Dados Sênior. O profissional atuará em uma instituição financeira, liderando tecnicamente a implantação da plataforma Databricks em ambiente AWS. O foco principal é implantar o Databricks do zero em AWS, conduzindo a instalação, configuração, integração com o ecossistema de dados do cliente e estruturação da governança. Em paralelo, desenvolverá e sustentará pipelines de dados, garantindo o uso consistente e seguro da plataforma desde o início.
Responsabilidades
- Conduzir a implantação do Databricks em AWS, da preparação do ambiente à entrada em operação.
- Configurar workspaces, clusters, jobs e políticas de uso da plataforma.
- Integrar o Databricks ao ambiente de dados do cliente e aos serviços AWS envolvidos (armazenamento, catálogo, segurança e acesso).
- Estruturar a governança da plataforma: controle de acesso, permissões, organização de catálogos e boas práticas de uso.
- Desenvolver, evoluir e sustentar pipelines de dados de ingestão e transformação.
- Monitorar, investigar e corrigir falhas nos fluxos de dados em produção.
- Documentar a arquitetura, as configurações e os padrões adotados.
- Interagir com times técnicos e de negócio, inclusive em inglês.
Requisitos
- ✓Experiência prática comprovada em implantação e configuração do Databricks em AWS.
- ✓Experiência sênior em engenharia de dados.
- ✓Inglês para comunicação profissional.
- •Conhecimento em Python, PySpark e SQL.
- •Conhecimento em AWS Glue e Apache Airflow.
- •Conhecimento em Delta Lake.
- •Experiência em desenvolvimento e sustentação de pipelines de dados.
- •Conhecimento em Unity Catalog e governança de dados no Databricks.
- •Conhecimento em Infraestrutura como código (Terraform) e CI/CD aplicados a dados.
- •Conhecimento de S3, IAM e redes em AWS.
- •Certificações Databricks ou AWS.
- •Vivência no setor financeiro.
Categorias
Sobre a Empresa
Mais vagas na Maxxi →Uma incrível experiência em consultoria, para pessoas A Maxxi é uma consultoria de tecnologia que trabalha com os clientes para resolver seus problemas de dados e de negócios, otimizando operações e atuando fortemente por seu sucesso.[Ver Mais]
Informações Adicionais
Você será redirecionado para o site da empresa
Vagas Relacionadas
Senior Data Engineer [CET time zone]
Grupo FCamara
Engenheiro(a) de Dados (AWS) Sênior
Luby
Senior Clinical Data Engineer (LATAM)
Precision for Medicine
Engenheiro(a) de Dados Sênior (Databricks/Unity Catalog)
Stefanini Group
Senior Machine Learning Engineer (m/f/x)
CarOnSale
Senior Data Warehouse Engineer
FingerPrint