Descrição da Vaga
A Compass UOL está buscando um(a) Data Engineer de nível Pleno para atuar na construção e manutenção de pipelines de dados escaláveis e confiáveis. Este profissional será responsável pela ingestão, transformação e modelagem de dados, desenvolvendo soluções utilizando Databricks, Spark e tecnologias de processamento distribuído. A função também envolve a implementação e evolução de arquiteturas de Data Lake e Data Lakehouse, garantindo a qualidade, performance e disponibilidade dos dados, além de atuar próximo ao negócio para traduzir requisitos em soluções de dados.
Responsabilidades
- Construir e manter pipelines de dados escaláveis e confiáveis;
- Atuar com ingestão, transformação e modelagem de dados;
- Desenvolver soluções utilizando Databricks, Spark e tecnologias de processamento distribuído;
- Implementar e evoluir arquiteturas de Data Lake e Data Lakehouse;
- Garantir qualidade, performance e disponibilidade dos dados;
- Atuar próximo ao negócio, traduzindo requisitos e regras de negócio em soluções de dados.
Requisitos
- ✓Sólidos conhecimentos em SQL e Python
- ✓Experiência com modelagem de dados, incluindo Fato, Dimensão e Modelagem em Cubo
- ✓Sólidos conhecimentos em Databricks
- ✓Experiência com Apache Spark e processamento distribuído
- •Conhecimentos em Airflow, Kafka e dbt
- •Experiência com bancos de dados SQL e NoSQL, como PostgreSQL, MongoDB e Cassandra
- •Conhecimentos em plataformas cloud AWS, GCP
- ✓Experiência com arquiteturas de Data Lake e Data Lakehouse
- ✓Capacidade de compreender rapidamente regras de negócio e transformá-las em soluções de dados
Categorias
Sobre a Empresa
Mais vagas na Compass.UOL → A Compass UOL é especialista em serviços de transformação digital. Projetamos e construímos plataformas nativas digitais usando tecnologias de ponta para ajudar empresas a inovar, transformar seus negócios e prosperar em seus setores.[Ver Mais]
Informações Adicionais
Você será redirecionado para o site da empresa
