Engenheiro de Dados AWS/Snowflake Pleno
Publicada em
Ver 1.323 vagas de Data Science / Analytics →Descrição da Vaga
O Engenheiro de Dados Pleno na Dataside atua com autonomia para entregar soluções de alta complexidade em projetos de engenharia de dados, sendo responsável técnico por contratos, sempre acompanhado de um Líder Técnico, Engenheiro Sênior ou Arquiteto de Dados. Sua função envolve orientar clientes nas decisões sobre pipelines, serviços, otimização de custos e performance, além de identificar oportunidades de melhoria em arquiteturas existentes e comunicá-las aos responsáveis técnicos de maior senioridade. Também participa ativamente do desenvolvimento de colegas menos experientes, realizando revisões técnicas e mentorias para profissionais Júnior ou membros em fase de crescimento.
Responsabilidades
- Projetar, construir e manter pipelines de dados utilizando Python, PySpark, SQL e serviços de nuvem.
- Gerenciar processos de ingestão, modelagem e transformação de dados com eficiência, reutilização e aplicação de boas práticas de engenharia.
- Atuar em projetos com tecnologias como Kafka, Spark, Airflow, DBT e plataformas de data warehouse, como Snowflake, BigQuery ou Redshift.
- Desenvolver e manter pipelines de dados com práticas de CI/CD, versionamento e deploy automatizado.
- Atuar em projetos com serviços AWS, incluindo Glue, EMR, Redshift, Athena, Lambda e Step Functions.
- Otimizar o ciclo de vida dos dados, incluindo armazenamento no S3, performance de consultas e custos de infraestrutura.
- Contribuir para a organização, qualidade e governança dos dados, garantindo soluções escaláveis e sustentáveis.
- Trabalhar com ambientes críticos e grandes volumes de dados, identificando oportunidades de melhoria técnica e de processos.
- Conduzir reuniões com clientes, explicar decisões técnicas e propor soluções escaláveis, alinhadas às necessidades do negócio.
- Antecipar riscos técnicos, analisar problemas e propor soluções e melhorias contínuas.
- Orientar profissionais Júnior e participar ativamente da disseminação de boas práticas no time.
Requisitos
- ✓Formação superior completa em Ciência da Computação, Engenharia, Sistemas de Informação ou áreas correlatas.
- ✓Experiência prática em projetos de engenharia de dados de média e alta complexidade, incluindo construção e manutenção de pipelines de dados.
- ✓Experiência avançada em Python.
- ✓Experiência avançada em SQL.
- ✓Experiência com Spark/PySpark.
- ✓Experiência com tecnologias de processamento e streaming de dados, como Kafka.
- ✓Experiência com Airflow ou ferramentas similares para orquestração de pipelines de dados.
- ✓Experiência com DBT para modelagem, transformação e organização de dados.
- ✓Experiência com plataformas de data warehouse, como Snowflake, BigQuery ou Amazon Redshift.
- ✓Experiência com pipelines de dados utilizando práticas de CI/CD, versionamento com Git e deploy automatizado.
- ✓Experiência em ambientes de computação em nuvem, preferencialmente AWS, incluindo visão de arquitetura, segurança, performance e custos.
- ✓Conhecimento da stack analítica AWS, incluindo S3, Glue, EMR, Athena, Redshift, Lambda e Step Functions.
- ✓Visão clara de arquitetura e fluxo de dados, com capacidade de identificar gargalos, antecipar riscos e propor melhorias técnicas e de processo.
- ✓Boa comunicação com stakeholders técnicos e não técnicos, capacidade de trabalho em equipe e facilidade para explicar decisões técnicas.
- ✓Perfil analítico, organizado, proativo e atento aos detalhes, com autonomia para conduzir entregas e lidar com múltiplas demandas e prioridades.
- ✓Interesse em aprendizado contínuo, desenvolvimento profissional e evolução das práticas e tecnologias de engenharia de dados.
- •Inglês intermediário.
- •Conhecimento ou experiência com Terraform.
- •Conhecimento ou experiência com DuckDB.
- •Conhecimento ou experiência com Docker.
Categorias
Sobre a Empresa
Mais vagas na Dataside →A missão da Dataside é acompanhar as empresas na jornada de dados, aumentando a confiabilidade e agilidade na tomada de decisão orientada a dados e IA. Advanced Analytics & AI Criamos soluções envolvendo Engenharia de Dados, Machine Learning e IA.[Ver Mais]
Informações Adicionais
Você será redirecionado para o site da empresa
Vagas Relacionadas
Engenharia de Ia Pl
Globalweb Corp
Engenheiro(a) de Dados
Jump
Engenheiro(a) de Dados Pleno
Makasí
Analista Pleno de Operações e Negócios | Logística
iFood
Cientista de Dados Pleno
Libbs Farmacêutica
Cientista de Dados PL - Corporativo
Expresso São Miguel