🏢

Engenheiro de Dados Pleno

🌍 Remoto📍 Remoto

Descrição da Vaga

A Itix, uma fábrica de software com experiência em transformar negócios, busca um Engenheiro de Dados Pleno para integrar seu time. O profissional será responsável por projetar e construir pipelines de dados, gerenciar dados não estruturados e garantir a qualidade e segurança das informações.

Responsabilidades

Projetar e construir pipelines (ETL/ELT) em Databricks ou com estratégias open-source que ingerem e tratam o histórico, em arquitetura medalhão (bronze, silver e gold) sobre Delta Lake.
Ingerir e padronizar documentos (PDF e imagens) com metadados.
Executar a curadoria e anonimização de dados (LGPD), gerando bases limpas para o RAG, o few-shot e os testes.
Construir e operar a indexação vetorial: pipeline de chunking, geração de embeddings, atualização incremental do índice e versionamento.
Preparar datasets versionados (golden sets) para o framework de avaliação e para o benchmark de acurácia.
Estruturar a persistência do ciclo de feedback (positivo/negativo, justificativas, status de resolução) e alimentar o Dashboard de Qualidade e SLA.
Integrar as bases de dados ao serviço de inferência e à API com outros sistemas: performance, custo, monitoramento e alertas.
Automatizar com Workflows/Jobs, CI/CD e testes de qualidade de dados.

Requisitos

✓Conhecimento avançado em Python e SQL.
✓Experiência em modelagem de dados e arquitetura medalhão / Lakehouse.
✓Experiência com pipelines de dados não estruturados (PDF, imagens e texto) e sua preparação para RAG.
✓Noções de bancos vetoriais e embeddings (Databricks Vector Search, pgvector ou similar).
✓Conhecimento em qualidade de dados, testes de dados e versionamento.
✓Experiência prática com Databricks: Delta Lake, Workflows/Jobs, notebooks, PySpark e Spark SQL.
✓Conhecimento em Git e CI/CD.
✓Experiência em ambiente de nuvem (Azure, AWS ou GCP).
✓Conhecimento de LGPD e tratamento de dados sensíveis.
•Conhecimento em Unity Catalog em ambiente governado.
•Conhecimento em MLflow, Databricks Model Serving e Mosaic AI.
•Conhecimento em Delta Live Tables / Lakeflow e Auto Loader.
•Experiência em ambiente de seguros ou financeiro.
•Conhecimento em Terraform ou Databricks Asset Bundles.
•Certificação Databricks Data Engineer Associate ou Professional.

Benefícios

✓Parceiros de desconto
✓Programa de indicação
✓Day off de aniversário
✓Totalpass/Gympass
✓Programa de ações de saúde e qualidade de vida

Categorias

Data Science / Analytics

Sobre a Empresa

Mais vagas na Itix →

Novas tecnologias surgem constantemente e exigem das empresas velocidade e agilidade para se manterem competitivas. E a ITIX está no mercado para permitir que seus clientes evoluam por meio da tecnologia. Mais do que uma software house com uma cultura dinâmica, somos uma transformadora de negócios.