Data Engineer | Specialist

🌍 Remoto📍 Remoto

Descrição da Vaga

A Compass UOL está em busca de um(a) Engenheiro(a) de Dados com especialização em Inteligência Artificial para atuar na modernização de dados e sistemas legados. O profissional será responsável por definir e implementar soluções de IA, desenvolver mecanismos para análise e extração de informações técnicas de artefatos legados, e construir soluções baseadas em IA Generativa para acelerar processos de documentação, transformação e migração.

Responsabilidades

Definir e implementar soluções de Inteligência Artificial aplicadas à modernização de dados e sistemas legados.
Desenvolver mecanismos para análise, interpretação e extração de informações técnicas de artefatos legados.
Construir soluções baseadas em IA Generativa para acelerar processos de documentação, transformação e migração.
Criar modelos intermediários de metadados para representar fluxos, regras de negócio, dependências, entidades e transformações.
Desenvolver aceleradores e componentes reutilizáveis aderentes à arquitetura corporativa de dados.
Apoiar a definição de templates, padrões técnicos e estruturas declarativas para pipelines modernas.
Desenvolver e evoluir pipelines utilizando Databricks, PySpark, Lakeflow Jobs e Declarative Pipelines.
Trabalhar com cargas batch, ingestões incrementais, CDC (Change Data Capture) e integrações corporativas.
Apoiar a evolução da governança, rastreabilidade e qualidade dos dados durante o processo de migração.
Atuar em conjunto com arquitetos, engenheiros de dados e especialistas de plataforma na definição de soluções escaláveis e seguras.

Requisitos

✓Experiência com Inteligência Artificial aplicada à Engenharia de Dados, Engenharia de Software ou Automação Técnica.
✓Conhecimento prático em IA Generativa e Large Language Models (LLMs).
✓Experiência com Agentes de IA.
✓Experiência com RAG (Retrieval-Augmented Generation).
✓Experiência com Prompt Engineering.
✓Experiência com Function Calling.
✓Experiência com Tool Use.
✓Experiência com Workflows automatizados.
✓Experiência com frameworks de orquestração de IA (LangChain, LangGraph, Semantic Kernel, CrewAI ou equivalentes).
✓Experiência com Python.
✓Experiência com PySpark e Spark SQL.
✓Desenvolvimento de pipelines de dados em ambientes distribuídos.
✓Conhecimento em SQL avançado.
✓Conhecimento em XML, JSON e YAML.
✓Experiência com modelagem de dados e Data Warehouse.
✓Vivência com ambientes Databricks.

Categorias

Data Science / Analytics

Sobre a Empresa

Mais vagas na Compass.UOL →

 A Compass UOL é especialista em serviços de transformação digital. Projetamos e construímos plataformas nativas digitais usando tecnologias de ponta para ajudar empresas a inovar, transformar seus negócios e prosperar em seus setores.[Ver Mais]