Descrição da Vaga
A Compass UOL está em busca de um(a) Engenheiro(a) de Dados Sênior com foco em Databricks, Azure Data Factory (ADF) e Inteligência Artificial. Este profissional será responsável por modelar dados, trabalhar com extração e estruturação de dados para um data lake, e desenvolver soluções ETL para análise de dados estruturados e não estruturados, utilizando APIs e ferramentas como Databricks, SAP Datasphere, Azure Data Lake Storage (ADLS) e Python. O papel envolve também a estruturação de RAG para contratos de dívida e documentos relacionados a empréstimos, além da criação de relatórios para substituição de Crystal Reports.
Responsabilidades
- Realizar modelagem de dados, atuando com tecnologias como Databricks, SAP Datasphere, Data Factory, Azure Data Lake Storage (ADLS), Python e bancos de dados (SQL Server, Oracle).
- Trabalhar com a extração de dados de arquivos recebidos mensalmente, elaborando um data lake de dados e tabelas.
- Estruturar RAG dos contratos de dívida do cliente e demais documentos relacionados à contratação de empréstimo.
- Realizar ETL a partir das APIs do CXL e transformá-los e tratá-los em base de dados no Databricks para alimentar as cotações do CXL.
- Estruturar tabelas de dados no Databricks de Depósitos Judiciais, Garantias Financeiras e Garantias Reais.
- Desenvolver ETL para análise de dados estruturados e não estruturados, utilizando API do chat do cliente para análise de arquivos e validação dos dados.
- Estruturar produto de dados do Position Manager e criar relatórios para substituição dos Crystal Reports do CXL.
Requisitos
- ✓Experiência com Databricks, SAP Datasphere, Data Factory, Azure Data Lake Storage (ADLS) e banco de dados (SQL Server, Oracle).
- ✓Habilidade de análise de demandas, a fim de auxiliar os Arquitetos na estruturação e detalhamento das demandas.
- ✓Conhecimento em ferramentas de ETL e também em modelagem de Dados.
- ✓Habilidade para auxiliar na definição de requisitos.
- ✓Experiência comprovada em Python.
- ✓Criação e publicação de APIs.
- ✓Conhecimento em DevOps.
- ✓4 anos comprovados em carteira, com formação acadêmica na área de TI ou pós em TI com 360h reconhecidas.
- •Conhecimento em SAP Datasphere.
- •Conhecimento em TIBCO Datasphere.
- •Conhecimento em Knime.
- •Conhecimento em PowerCenter.
- •Conhecimento em SAP PowerDesigner.
Categorias
Sobre a Empresa
Mais vagas na Compass.UOL → A Compass UOL é especialista em serviços de transformação digital. Projetamos e construímos plataformas nativas digitais usando tecnologias de ponta para ajudar empresas a inovar, transformar seus negócios e prosperar em seus setores.[Ver Mais]
Informações Adicionais
Você será redirecionado para o site da empresa
