AllEasy

Especialista em Databricks

Publicada em

Ver 7.805 vagas de Programação →
🌍 Remoto📍 Remoto
PUBLICIDADE

Descrição da Vaga

Requisitos

  • Superior em cursos de Engenharia, Estatistica ou áreas afins
  • Experiência sólida em Engenharia de Dados e arquitetura de plataformas de dados.
  • Experiência avançada com Databricks em ambientes produtivos e de grande escala.
  • Experiência com desenvolvimento e otimização de pipelines utilizando PySpark, Python e SQL.
  • Experiência com arquitetura Lakehouse e Delta Lake.
  • Experiência com segurança e governança utilizando Unity Catalog.
  • Experiência com práticas de CI/CD e DataOps.
  • Capacidade de diagnosticar problemas complexos de performance e escalabilidade.

Atribuições

  • Atuar como referência técnica em Databricks, definindo padrões, boas práticas e direcionamentos arquiteturais.
  • Projetar e implementar arquiteturas de dados utilizando Databricks Lakehouse, Delta Lake e conceitos de Medallion Architecture.
  • Definir padrões para organização das camadas Landing/Raw, Bronze, Silver e Gold.
  • Implementar práticas de DataOps e CI/CD, garantindo versionamento, testes, deployment e monitoramento dos workloads.
  • Administrar e otimizar clusters, jobs, notebooks, SQL Warehouses e demais workloads da plataforma.
  • Apoiar times de Analytics, Data Science e negócio no consumo dos dados disponibilizados pela plataforma.
  • Realizar troubleshooting de problemas complexos envolvendo performance, pipelines, infraestrutura e qualidade dos dados.
  • Avaliar novos recursos e funcionalidades do ecossistema Databricks e recomendar sua adoção quando aplicável.
  • Imprescindível: Inglês Avançado para conversação 
PUBLICIDADE

Presente no mercado desde 1995, a Alleasy oferece nacionalmente serviços especializados em Segurança de Tecnologia da Informação, além de Alocação de Recursos e Hunting para a área de TI. A AllEasy tem como objetivo principal garantir a segurança de tecnologia da informação, elevar o nível de maturi...[Ver Mais]

PUBLICIDADE
Candidatar-se a esta vaga →

Você será redirecionado para o site da empresa