Descrição da Vaga
A Bridge & Co. está em busca de um(a) Engenheiro(a) de Dados Sênior para atuar na preparação e estruturação de dados, visando soluções de Inteligência Artificial e Copilot. O profissional será o ponto central de contato com a área de dados do cliente, propondo alternativas de arquitetura e otimização de custos, em um ambiente de dados que converge para a plataforma Databricks.
Responsabilidades
- Preparar dados para consumo por soluções de IA e Copilot, garantindo uma base que permita respostas de qualidade dos agentes.
- Construir e manter pipelines de dados, levando dados das fontes até camadas organizadas e confiáveis, prontas para relatórios, análises e IA.
- Interagir com a área de dados do cliente, centralizando as demandas de dados ligadas às iniciativas de automação e IA.
- Propor alternativas de arquitetura de dados, de fluxos e de custo.
- Atuar em um ambiente de dados em convergência para a plataforma Databricks.
Requisitos
- ✓Experiência de pelo menos 4 anos em engenharia de dados.
- ✓Vivência na preparação de dados para IA.
- ✓Domínio de PySpark e SQL.
- ✓Conhecimento em arquitetura medalhão (camadas bronze, prata e ouro).
- ✓Capacidade de propor arquiteturas e fluxos de dados e de dialogar com times de dados.
- •Conhecimento e experiência em Databricks, incluindo Delta Lake e Unity Catalog.
- •Orquestração de pipelines (Lakeflow Jobs ou Workflows) sobre Azure Data Lake Storage.
- •Experiência com o ecossistema de dados da Microsoft.
- •Conhecimento em Azure Data Factory ou Microsoft Fabric.
- •Certificação Databricks Certified Data Engineer Associate ou Professional.
- •Conhecimento em CI/CD com Databricks Asset Bundles.
- •Experiência com processamento em streaming.
- •Conhecimento em modelagem dimensional para BI.
Categorias
Sobre a Empresa
Mais vagas na Bridge & Co. →Somos uma empresa brasileira de consultoria e tecnologia especializada em Business Transformation. Nascemos com a missão de conectar negócios e tecnologia para gerar transformações duradouras rumo a um futuro mais digital.[Ver Mais]
Informações Adicionais
Você será redirecionado para o site da empresa