Descrição da Vaga
A Minsait, empresa de transformação digital e tecnologia da informação, busca um Engenheiro de Dados Sênior para atuar na construção, sustentação e evolução de pipelines de dados escaláveis em ambientes cloud, com foco na plataforma Databricks. O profissional será um pilar fundamental em projetos estratégicos, utilizando metodologias ágeis e em um ambiente de inovação.
Responsabilidades
- Atuar na construção, sustentação e evolução de pipelines de dados escaláveis em ambientes cloud, com ênfase na plataforma Databricks.
- Criar e orquestrar pipelines de dados robustos e governados utilizando recursos avançados do Databricks, incluindo Unity Catalog, Delta Lake, Workflows, Jobs, DLT e SQL Editor.
- Garantir alta disponibilidade, performance e segurança no processamento de grandes volumes de dados em ambientes AWS integrados ao Databricks.
- Desenvolver aplicações com Apache Spark (batch e streaming), utilizando notebooks em Python para ingestão, transformação e análise de dados.
- Assegurar qualidade, consistência e eficiência no tratamento das informações através de forte conhecimento em processos de ETL/ELT, modelagem de dados relacional e dimensional.
- Atuar em cenários de integração de múltiplas fontes de dados e construção de arquiteturas modernas de dados.
Requisitos
- ✓Experiência mínima de 7 anos em projetos de alta complexidade, especialmente em ambientes corporativos críticos, como o setor bancário/financeiro.
- ✓Forte atuação na construção, sustentação e evolução de pipelines de dados escaláveis em ambientes cloud, com ênfase na plataforma Databricks.
- ✓Experiência avançada no uso de recursos do Databricks, incluindo Unity Catalog, Delta Lake, Workflows, Jobs, DLT e SQL Editor.
- ✓Vivência em ambientes AWS integrados ao Databricks.
- ✓Domínio no desenvolvimento de aplicações com Apache Spark (batch e streaming), utilizando notebooks em Python.
- ✓Forte conhecimento em processos de ETL/ELT, modelagem de dados relacional e dimensional.
- ✓Experiência com bancos de dados relacionais como Db2 e SQL Server, incluindo integração com Databricks via JDBC.
- ✓Atuação em cenários de integração de múltiplas fontes de dados e construção de arquiteturas modernas de dados.
- •Conhecimentos em replicação de dados em tempo real, governança e implementação de Data Lakes.
- •Experiência com linguagens como Scala e ferramentas analíticas como R e SAS.
- •Experiência com bancos de dados MPP, como Netezza e Redshift.
Benefícios
- ✓Plano de Saúde subsidiado pela empresa para o titular.
- ✓Opção de inclusão de dependentes no Plano de Saúde com desconto em folha de pagamento.
- ✓Assistência Odontológica (opcional).
- ✓Opção de inclusão de dependentes no Plano de Assistência Odontológica com desconto em folha de pagamento.
- ✓Vale Refeição ou Vale Alimentação.
- ✓Vale Transporte (opcional).
- ✓Impact & Care - Programa de Orientação Pessoal que visa oferecer suporte emocional e aconselhamento com orientação confidencial nas áreas psicológica, jurídica, financeira, social e pet sem custo para titular e dependentes legais.
- ✓Gympass - Wellhub (Acesso a mais de 700 academias em todo o Brasil com planos a partir de R$ 29,90 descontado em folha de pagamento).
- ✓Opção de inclusão de dependentes no Gympass - Wellhub (até 03 dependentes - pago via cartão de crédito).
- ✓Acesso a Udemy de forma pela intranet.
- ✓Parcerias com grandes marcas de consumo.
- ✓Convênio com o SESC para titular e dependentes.
- ✓Convênios para descontos com instituições de ensino (graduação e pós-graduação) e escola de idiomas/Certificadoras.
- ✓Seguro de vida em grupo.
Categorias
Sobre a Empresa
Mais vagas na Minsait →We are the main spanish technological consultant and we operate in more than 100 countries. We combine our experience in cloud, security, payments and phygital with the most innovative technology to drive business, generating a positive impact on society.[Ver Mais]
Informações Adicionais
Você será redirecionado para o site da empresa