PUBLICIDADE
Descrição da Vaga
A FCamara está em busca de um Engenheiro de Dados Pleno para atuar no desenvolvimento, implementação e otimização de pipelines de dados, utilizando ferramentas como Apache Airflow para orquestração de tarefas. O profissional também será responsável pela criação e gerenciamento de funções em ambientes de cloud, como AWS Lambda ou Google Cloud Functions, e pela configuração e manutenção de dashboards em Grafana para monitoramento de desempenho.
Responsabilidades
- Projetar, implementar e otimizar pipelines de ETL (Extração, Transformação e Carga) para garantir a fluidez dos dados entre sistemas.
- Utilizar ferramentas como Apache Airflow para orquestrar e agendar tarefas de processamento de dados.
- Criar e gerenciar funções em ambientes de cloud (ex.: AWS Lambda, Google Cloud Functions) para automação de processos e manipulação de dados.
- Integrar serviços de dados na nuvem para melhorar a escalabilidade e a eficiência.
- Configurar e manter dashboards em Grafana para monitorar o desempenho de pipelines de dados e identificar possíveis gargalos.
- Implementar alertas e métricas para garantir a integridade e a disponibilidade dos dados.
- Documentar processos e rotinas de dados para garantir a transparência e facilitar a manutenção.
- Participar de Engineering Change Proposals (ECP) para propor melhorias e inovações nos fluxos de trabalho e na arquitetura de dados.
- Trabalhar em estreita colaboração com equipes de ciência de dados, analistas e desenvolvedores para entender requisitos e garantir que as soluções atendam às necessidades do negócio.
- Participar de reuniões de planejamento e revisão para alinhar objetivos e prioridades.
- Implementar e monitorar processos de validação de dados para garantir a qualidade e a precisão das informações.
- Realizar testes e auditorias nos pipelines de dados para identificar e corrigir problemas.
PUBLICIDADE
Requisitos
- ✓Proficiência em SQL.
- ✓Proficiência em linguagens de programação como Python ou Java.
- ✓Experiência com ferramentas de ETL e integração de dados.
- ✓Sólido entendimento de arquiteturas de dados em nuvem (ex.: AWS, Google Cloud, Azure).
- ✓Conhecimento profundo em Apache Airflow para gerenciamento de workflows.
- ✓Habilidade em configurar e utilizar ferramentas de monitoramento como Grafana.
- ✓Familiaridade com serviços de cloud (ex.: S3, BigQuery, Redshift) e suas melhores práticas.
- ✓Conhecimento em gerenciamento de custos e otimização de recursos em ambientes de nuvem.
Categorias
Sobre a Empresa
Mais vagas na Grupo FCamara →Somos um ecossistema de tecnologia e inovação que potencializa o futuro de negócios integrando visão estratégica com execução inteligente, lado a lado com nossos clientes, para proporcionar experiências transformadoras.[Ver Mais]
Informações Adicionais
Selecionamos as principais informações da posição. Para conferir o descritivo completo, clique em "acessar"
PUBLICIDADE
Candidatar-se a esta vaga →
Você será redirecionado para o site da empresa
Vagas Relacionadas
PUBLICIDADE