Stefanini Group

Engenheiro de Dados SR - Pipeline

🌍 Remoto📍 Remoto
PUBLICIDADE

Descrição da Vaga

O Grupo Stefanini busca um Engenheiro de Dados Sênior para atuar no desenvolvimento e manutenção de pipelines de dados, garantindo a movimentação eficiente e confiável das informações entre sistemas. O profissional será responsável por modelar e viabilizar fluxos de dados, incluindo processos de ETL, ELT e streaming de dados, além de trabalhar com automação e otimização do processamento de dados em tempo real e em lote.

Responsabilidades

  • Modelar e viabilizar fluxos de dados, incluindo processos de ETL — Extract, Transform, Load —, ELT — Extract, Load, Transform — e streaming de dados;
  • Desenvolver e manter pipelines de dados que garantam a movimentação eficiente e confiável das informações entre sistemas;
  • Realizar testes e implementar ferramentas para automatizar e otimizar o processamento de dados em tempo real e em lote, assegurando a integridade e a qualidade das informações ao longo de todo o ciclo de vida;
  • Utilizar Python para manipulação de dados, especialmente com as bibliotecas Pandas, NumPy, PySpark, PySpak, Polars, DuckDB e SQLAlchemy, ou similares;
  • Trabalhar em projetos de Machine Learning, especialmente com ferramentas como Airflow, Spark, Flink, Kafka e Parquet, entre outras similares.
PUBLICIDADE

Requisitos

  • Formação de nível superior na área de Tecnologia da Informação ou formação superior com curso de pós-graduação na área de informática;
  • Conhecimento prático em bancos de dados e linguagem SQL;
  • Conhecimentos práticos em bancos de dados multidimensionais;
  • Conhecimentos sobre ETL — Extract, Transform, Load;
  • Familiaridade com estruturas de dados e com o conteúdo de fontes de dados analíticos, como data warehouse e data mart;
  • Conhecimentos gerais em Business Intelligence;
  • Capacidade analítica;
  • Domínio das ferramentas Microsoft Power BI.
  • Experiência em modelar e viabilizar fluxos de dados, incluindo processos de ETL — Extract, Transform, Load —, ELT — Extract, Load, Transform — e streaming de dados;
  • Experiência no desenvolvimento e na manutenção de pipelines de dados que garantam a movimentação eficiente e confiável das informações entre sistemas;
  • Vivência na realização de testes e na implementação de ferramentas para automatizar e otimizar o processamento de dados em tempo real e em lote, assegurando a integridade e a qualidade das informações ao longo de todo o ciclo de vida;
  • Conhecimento avançado de Python para dados, especialmente das bibliotecas Pandas, NumPy, PySpark, PySpak, Polars, DuckDB e SQLAlchemy, ou similares;
  • Conhecimento avançado em projetos de Machine Learning, especialmente com ferramentas como Airflow, Spark, Flink, Kafka e Parquet, entre outras similares.

Benefícios

  • Vale-alimentação ou vale-refeição;
  • Desconto em cursos, universidades e instituições de idiomas;
  • Academia Stefanini — plataforma com cursos on-line, gratuitos, atualizados e com certificado;
  • Mentoring;
  • Clube de vantagens para consultas e exames;
  • Assistência médica;
  • Assistência odontológica;
  • Clube de vantagens e descontos nos melhores estabelecimentos;
  • Clube de viagens;
  • Convênio para pets.

Entregamos soluções digitais inovadoras e eficazes, que auxiliam os nossos clientes em suas jornadas digitais, sempre aplicando o nosso propósito de tornar a tecnologia um agente de mudança para um mundo melhor.

Informações Adicionais

Selecionamos as principais informações da posição. Para conferir o descritivo completo, clique em "acessar"
PUBLICIDADE
Candidatar-se a esta vaga →

Você será redirecionado para o site da empresa

PUBLICIDADE