Descrição da Vaga
A Minsait busca um Engenheiro de Dados Sênior para atuar na construção, sustentação e evolução de pipelines de dados escaláveis em ambientes cloud, com foco na plataforma Databricks. O profissional será um pilar fundamental em projetos estratégicos de TI, utilizando metodologias ágeis e contribuindo para a transformação digital em setores como administração pública, telecomunicações & mídia, energia & utilities, indústria & consumo, saúde e finanças.
Responsabilidades
- Construir, sustentar e evoluir pipelines de dados escaláveis em ambientes cloud, com ênfase na plataforma Databricks.
- Utilizar recursos avançados do Databricks, incluindo Unity Catalog, Delta Lake, Workflows, Jobs, DLT e SQL Editor, para criar e orquestrar pipelines de dados robustos e governados.
- Atuar em ambientes AWS integrados ao Databricks, garantindo alta disponibilidade, performance e segurança no processamento de grandes volumes de dados.
- Desenvolver aplicações com Apache Spark (batch e streaming), utilizando notebooks em Python para ingestão, transformação e análise de dados.
- Aplicar forte conhecimento em processos de ETL/ELT, modelagem de dados relacional e dimensional, assegurando qualidade, consistência e eficiência no tratamento das informações.
- Trabalhar com bancos de dados relacionais como Db2 e SQL Server, incluindo integração com Databricks via JDBC.
- Atuar em cenários de integração de múltiplas fontes de dados e construção de arquiteturas modernas de dados.
Requisitos
- ✓Experiência mínima de 7 anos em projetos de alta complexidade, especialmente em ambientes corporativos críticos, como o setor bancário/financeiro.
- ✓Forte atuação na construção, sustentação e evolução de pipelines de dados escaláveis em ambientes cloud, com ênfase na plataforma Databricks.
- ✓Experiência avançada no uso de recursos do Databricks, incluindo Unity Catalog, Delta Lake, Workflows, Jobs, DLT e SQL Editor, atuando na criação e orquestração de pipelines de dados robustos e governados.
- ✓Vivência em ambientes AWS integrados ao Databricks, garantindo alta disponibilidade, performance e segurança no processamento de grandes volumes de dados.
- ✓Domínio no desenvolvimento de aplicações com Apache Spark (batch e streaming), utilizando notebooks em Python para ingestão, transformação e análise de dados.
- ✓Forte conhecimento em processos de ETL/ELT, modelagem de dados relacional e dimensional, assegurando qualidade, consistência e eficiência no tratamento das informações.
- ✓Experiência com bancos de dados relacionais como Db2 e SQL Server, incluindo integração com Databricks via JDBC.
- ✓Atuação em cenários de integração de múltiplas fontes de dados e construção de arquiteturas modernas de dados.
- •Conhecimentos em replicação de dados em tempo real, governança e implementação de Data Lakes.
- •Experiência com linguagens como Scala e ferramentas analíticas como R e SAS.
- •Experiência com bancos de dados MPP, como Netezza e Redshift.
Benefícios
- ✓Plano de Saúde subsidiado pela empresa para o titular.
- ✓Opção de inclusão de dependentes no Plano de Saúde com desconto em folha de pagamento.
- ✓Assistência Odontológica (opcional).
- ✓Opção de inclusão de dependentes no Plano de Assistência Odontológica com desconto em folha de pagamento.
- ✓Vale Refeição ou Vale Alimentação.
- ✓Vale Transporte (opcional).
- ✓Impact & Care - Programa de Orientação Pessoal que visa oferecer suporte emocional e aconselhamento com orientação confidencial nas áreas psicológica, jurídica, financeira, social e pet sem custo para titular e dependentes legais.
- ✓Gympass - Wellhub (Acesso a mais de 700 academias em todo o Brasil com planos a partir de R$ 29,90 descontado em folha de pagamento).
- ✓Opção de inclusão de dependentes no Gympass - Wellhub (até 03 dependentes - pago via cartão de crédito).
- ✓Acesso a Udemy de forma pela nossa intranet.
- ✓Parcerias com grandes marcas de consumo.
- ✓Convênio com o SESC para titular e dependentes.
- ✓Convênios para descontos com instituições de ensino (graduação e pós-graduação) e escola de idiomas/Certificadoras.
- ✓Seguro de vida em grupo.
Categorias
Sobre a Empresa
Mais vagas na Minsait →We are the main spanish technological consultant and we operate in more than 100 countries. We combine our experience in cloud, security, payments and phygital with the most innovative technology to drive business, generating a positive impact on society.[Ver Mais]
Informações Adicionais
Você será redirecionado para o site da empresa