PUBLICIDADE
Descrição da Vaga
A Objective busca um Arquiteto de Dados para atuar em um ambiente dinâmico e de aprendizado contínuo, desenvolvendo projetos para clientes nacionais e internacionais. O profissional será responsável por definir, projetar e evoluir arquiteturas de dados modernas utilizando a plataforma Databricks (Lakehouse), garantindo escalabilidade, segurança e sustentabilidade.
Responsabilidades
- Definir, projetar e evoluir arquiteturas de dados modernas utilizando a plataforma Databricks (Lakehouse), garantindo escalabilidade, segurança e sustentabilidade.
- Definir e aplicar padrões de governança corporativa de dados (utilizando o Unity Catalog), incluindo controle de acesso granular, linhagem de dados e ambientes cloud-first.
- Atuar como referência e liderança técnica para os times de engenharia de dados, orientando na implementação de pipelines ETL/ELT eficientes sob a Arquitetura Medallion (Bronze, Silver e Gold).
- Liderar estratégias de otimização de performance, custos (FinOps) e uso eficiente de recursos nativos do Databricks e Delta Lake (Liquid Clustering, Z-Order, Photon Engine, Serverless SQL Warehouses e autoscaling).
- Projetar e implementar integrações de dados robustas entre sistemas heterogêneos, data lakes, data warehouses e plataformas analíticas.
- Garantir excelência e maturidade técnica em práticas de segurança, versionamento de código, testes, qualidade e observabilidade de dados.
- Apoiar decisões estratégicas e atuar no desenho de soluções para a evolução contínua da plataforma de dados corporativa.
PUBLICIDADE
Requisitos
- ✓Experiência sólida e comprovada atuando como Engenheiro(a) de Dados Especialista, Tech Lead ou Arquiteto(a) de Dados.
- ✓Domínio avançado do ecossistema Databricks e Delta Lake, incluindo SQL Warehouses, clusters Spark, Auto Loader (cloudFiles), Databricks Workflows, Delta Lake Change Data Feed (CDF), Time Travel e Zero-Copy Clones.
- ✓Forte experiência na definição e implementação da Arquitetura Medallion e governança unificada com Unity Catalog.
- ✓Experiência sólida em ambientes cloud-first (AWS, Azure ou GCP) e compreensão das integrações e especificidades do Databricks em cada nuvem.
- ✓Domínio em SQL avançado e programação em Python ou Scala aplicada à manipulação distribuída com DataFrames Spark.
- ✓Conhecimento e aplicação de boas práticas de engenharia de software (SOLID, testes, clean code), CI/CD, versionamento com Git (Databricks Git Folders/DABs) e arquitetura de código legível e reutilizável.
- •Certificações Databricks (como Databricks Certified Data Engineer Professional ou Generative AI Engineer).
- •Vivência sólida com processamento em tempo real/streaming (Structured Streaming, Apache Kafka ou serviços de mensageria).
- •Experiência prática com MLOps, gerenciamento de ciclo de vida de modelos com MLflow e implantação de plataformas para IA.
- •Histórico de atuações focadas em FinOps para plataformas de dados e redução comprovada de custos de infraestrutura em nuvem.
Categorias
Tags
Sobre a Empresa
Mais vagas na Objective → A Objective é uma multinacional brasileira criada por amigos desenvolvedores e consolidada com a soma de mais 300 especialistas, inquietos e criativos, atuando para romper barreiras tecnológicas e de negócios através de produtos digitais e serviços de consultoria, treinamento e desenvolv...[Ver Mais]
Informações Adicionais
Selecionamos as principais informações da posição. Para conferir o descritivo completo, clique em "acessar"
PUBLICIDADE
Candidatar-se a esta vaga →
Você será redirecionado para o site da empresa
Vagas Relacionadas
PUBLICIDADE