Descrição da Vaga
O Especialista de Engenharia de Dados no GRUPO CVLB será responsável por assumir domínios de dados de ponta a ponta, desde a ingestão na origem até a camada de consumo para decisões de negócio. A função envolve a construção e evolução de pipelines de ingestão e transformação (ELT/ETL) em batch e near real-time, a partir de diversas fontes como SAP, Oracle, PostgreSQL, APIs e arquivos. O profissional orquestrará cargas no Cloud Composer (Airflow), garantindo SLA, idempotência, reprocessamento e monitoramento, além de modelar o data warehouse no BigQuery em arquitetura de camadas (Medallion) com Dataform, entregando modelos confiáveis e performáticos para consumo em Power BI. Também implementará e operará replicação CDC de bases transacionais e processará grandes volumes com PySpark (Dataproc) e Apache Beam (Dataflow). Otimizará performance e custo no BigQuery, definirá padrões técnicos, revisará código e atuará como referência para o time de dados, traduzindo demandas das áreas de negócio em soluções de dados.
Responsabilidades
- Assumir domínios de dados de ponta a ponta — da ingestão na origem até a camada que o negócio consome.
- Construir e evoluir pipelines de ingestão e transformação (ELT/ETL) de ponta a ponta, em batch e near real-time, a partir de SAP, Oracle, PostgreSQL, APIs e arquivos.
- Orquestrar as cargas no Cloud Composer (Airflow), garantindo SLA, idempotência, reprocessamento e monitoramento.
- Modelar o data warehouse no BigQuery em arquitetura de camadas (Medallion — bronze / silver / gold), com Dataform, entregando modelos confiáveis e performáticos para o consumo em Power BI.
- Implementar e operar replicação CDC das bases transacionais (Datastream e afins).
- Processar grandes volumes com PySpark (Dataproc) e Apache Beam (Dataflow) quando o problema pedir.
- Trabalhar performance e custo no BigQuery: particionamento, clustering, reescrita de query, FinOps de dados.
- Definir padrões técnicos, revisar código e ser referência para o time de dados.
- Traduzir demandas das áreas de negócio (Comercial, Supply, Financeiro, Marketing) em soluções de dados.
Requisitos
- ✓Experiência sólida como Engenheiro(a) de Dados, a partir de 5 anos, com atuação sênior comprovada.
- ✓Conhecimento avançado em SQL — funções de janela, CTEs, otimização e leitura de plano de execução.
- ✓Experiência com Python aplicado a engenharia de dados: código modular, testado e versionado.
- ✓Experiência na construção de pipelines ELT/ETL de ponta a ponta, com tratamento de falha, reprocessamento e idempotência.
- ✓Experiência com Airflow (ou Cloud Composer) em ambiente produtivo.
- ✓Experiência com Cloud pública em ambiente produtivo de dados.
- ✓Experiência com Data warehouse em nuvem — preferencialmente BigQuery; Snowflake, Redshift ou Synapse também contam.
- ✓Experiência com Modelagem de dados e arquitetura em camadas (Medallion / dimensional).
- ✓Domínio de bancos relacionais: PostgreSQL, Oracle, SQL Server ou MySQL.
- ✓Experiência com formatos de arquivo (Parquet, CSV, JSON, Avro) e consumo de APIs REST.
- •Conhecimento em Git, com cultura de branch, pull request e code review.
- •Experiência com serviços específicos do GCP já na bagagem: Dataform, Dataproc (PySpark), Dataflow (Apache Beam), Datastream, Cloud Storage, Cloud Run.
- •Experiência com CDC e replicação de bases transacionais.
- •Experiência com integração com dados de SAP (ECC / S4HANA) — extração, delta e particularidades das tabelas.
- •Experiência com dbt, Kafka / Pub-Sub, Terraform (IaC), Kubernetes e CI/CD aplicado a pipelines de dados.
- •Experiência prévia em varejo: venda, estoque, ruptura, margem e sortimento.
- •Experiência em modelagem orientada ao consumo em Power BI.
- •Certificação Google Cloud Professional Data Engineer.
Benefícios
- ✓Assistência médica
- ✓Assistência odontológica
- ✓Seguro de vida
- ✓Vale alimentação e/ou refeição
- ✓Cesta básica
- ✓Vale transporte
- ✓Auxílio creche
- ✓Prêmio anual - de acordo com a performance individual e corporativa
- ✓TotalPass
- ✓Plano Petlove
- ✓Folga de aniversário
- ✓Descontos em nossas lojas
- ✓Plano de carreira
- ✓Parcerias para desconto em cursos e graduação
Categorias
Sobre a Empresa
Mais vagas na Grupo CVLB →Nascemos da união de duas empresas que são referência no varejo brasileiro: a CASA&VIDEO e a Le biscuit. Juntas somos quase 400 lojas espalhadas por 15 estados, 2 centros de distribuição e cerca de 5.000 colaboradores que atendem mais de 35 milhões de clientes por ano.[Ver Mais]
Informações Adicionais
Você será redirecionado para o site da empresa
