Engenheiro DevOps/DataOps (Databricks)

Sobre a oportunidade

A Marlabs é uma empresa de tecnologia com mais de 30 anos e que conta com mais de 3.000 especialistas ao redor do mundo. Aqui aprendemos algo novo todos os dias e vivemos desafios que nos mantêm em constante desenvolvimento. Somos um time global, reconhecido internacionalmente e com o propósito de encontrar, atrair e contratar os melhores talentos da área de Tecnologia. Todas as nossas vagas são acessíveis a profissionais PcDs, pessoas pertencentes à comunidade LGBTQIA+, pessoas negras, mulheres e demais grupos de diversidade.

Descrição da Vaga

Buscamos um(a) Engenheiro(a) DevOps / DataOps Sênior para integrar o time de Lakehouse Platform, com a missão de construir e sustentar a esteira de CI/CD do Enterprise Lakehouse Databricks. Você será responsável por garantir que todo artefato da plataforma — jobs, workflows, pipelines, bibliotecas e objetos de catálogo — seja versionado, testado, promovido entre ambientes de forma automatizada e auditável, atuando como guardião(ã) dos padrões de engenharia de software e dos enforcements de governança dentro dos domínios de dados.

Responsabilidades

• Projetar, implementar e evoluir a esteira de CI/CD da plataforma Databricks, com promoção automatizada de artefatos entre os ambientes de desenvolvimento, homologação e produção.
• Padronizar o empacotamento e o deploy de workloads com Databricks Asset Bundles, disponibilizando templates reutilizáveis pelos domínios de dados.
• Definir a estratégia de branching, code review, versionamento e release da plataforma no repositório corporativo (Bitbucket, GitHub ou GitLab).
• Definir gitflows e quality gates automatizados na esteira: testes unitários e de integração, validação de contratos de dados, análise estática, lint e cobertura mínima como pré-requisito de merge.
• Disseminar boas práticas de engenharia de software e suportar junto às squads os deployments dos pipelines.

Requisitos

• Experiência de 5 anos ou mais de atuação em DevOps ou DataOps, com esteiras de CI/CD construídas ponta a ponta;
• CI/CD: implementação de esteira em Jenkins, incluindo estratégias de deploy, rollback e versionamento de releases.
• Git: domínio de controle de versão, estratégias de branching (trunk-based, GitFlow ou equivalente), pull requests, code review e proteção de branches.
• Experiência com Python ou Groovy avançado, estruturação e modularização de projetos, empacotamento de bibliotecas (wheel) e publicação em artifact registry.
• Prática com testes unitários e de integração aplicados a pipelines de dados (pytest ou equivalente), mocks, fixtures e métricas de cobertura.
• Vivência com AWS ou Azure no contexto de plataformas de dados.
• Graduação completa em Engenharia, Ciência da Computação, Análise de Desenvolvimento de Software ou cursos relacionados.

Requisitos desejáveis

• Databricks Asset Bundles: empacotamento e deploy de jobs, workflows e configurações, com uso da Databricks CLI e Databricks Repos.
• Experiência em projetos de migração de data warehouse legado para Lakehouse Databricks — diferencial importante.
• Observabilidade: monitoramento de jobs e infraestrutura com ferramentas como DataDog ou equivalentes.