Engenheiro de Dados Sênior

📍 São Paulo, SP🏢 Híbrido

Descrição da Vaga

Na Premiersoft, você atuará como Engenheiro de Dados Sênior em um projeto estratégico voltado à evolução de iniciativas de Inteligência Artificial para uma das maiores empresas de soluções em dados e inteligência do mercado financeiro. Seu desafio será garantir que os dados utilizados por modelos de IA e LLMs sejam confiáveis, organizados, rastreáveis e preparados para gerar resultados de alta qualidade. Mais do que construir pipelines, você terá papel fundamental na estruturação de datasets que apoiarão o treinamento, avaliação e evolução contínua dessas soluções.

Responsabilidades

Desenvolver e evoluir pipelines de ingestão, transformação e disponibilização de dados conversacionais.
Implementar processos de ETL/ELT em larga escala, garantindo qualidade, rastreabilidade e governança dos dados.
Construir soluções em ambientes de Data Lake, Lakehouse e Data Warehouse.
Processar grandes volumes de dados utilizando Apache Spark e Databricks.
Integrar informações provenientes de APIs, bancos de dados, sistemas internos e outras fontes corporativas.
Preparar, organizar e enriquecer datasets destinados a projetos de IA, Analytics e Produto.
Implementar processos de limpeza, deduplicação, normalização e anonimização de dados.
Garantir versionamento, documentação, linhagem e monitoramento dos pipelines de dados.
Automatizar validações e controles de qualidade, assegurando a confiabilidade dos dados.
Colaborar com equipes multidisciplinares para atender às necessidades das iniciativas de Inteligência Artificial.
Apoiar a aplicação de boas práticas de segurança, LGPD e Data Governance.

Requisitos

✓Experiência sólida como Engenheiro(a) de Dados, Analytics Engineer ou funções similares.
✓Vivência com construção de pipelines ETL/ELT em ambientes de grande volume de dados.
✓Experiência com Apache Spark e Databricks.
✓Conhecimento em Data Lake, Lakehouse e Data Warehouse.
✓SQL avançado para transformação, exploração e validação de dados.
✓Experiência na integração de múltiplas fontes de dados, incluindo APIs e bancos de dados.
✓Vivência com ferramentas de orquestração, como Airflow, Azure Data Factory ou similares.
✓Conhecimento em Git e práticas de CI/CD aplicadas à Engenharia de Dados.
✓Experiência com modelagem analítica e preparação de dados para consumo por Analytics e IA.
✓Conhecimento em qualidade de dados, governança, linhagem, documentação e LGPD.
✓Experiência com dados textuais, semiestruturados ou não estruturados.
✓Perfil analítico, colaborativo e voltado à resolução de problemas.
•Experiência em projetos de Inteligência Artificial, LLMs, NLP, chatbots ou assistentes virtuais.
•Vivência na preparação de datasets para treinamento e avaliação de modelos de IA.
•Conhecimento em anonimização e tratamento de dados sensíveis.
•Experiência no setor financeiro, crédito, fintechs ou empresas de dados.
•Vivência com Kafka, Spark Streaming ou processamento near real-time.
•Experiência em ambientes corporativos com alta volumetria e forte governança de dados.

Benefícios

✓Cartão de benefícios flexíveis via Flash (alimentação, mobilidade, qualidade de vida e muito mais).
✓Plano de Saúde Unimed.
✓Convênio com clínica de saúde mental.
✓TotalPass: acesso a academias, estúdios e práticas de bem-estar.
✓Gifts via Flash (birthday gift e time in company gift).
✓Bônus por indicação de talentos (R$ 2.000,00 por contratação).
✓Desenvolvimento contínuo com PDI, feedbacks e apoio a certificações.
✓Aulas de inglês gratuitas.

Categorias

Data Science / Analytics

Sobre a Empresa

Mais vagas na Premiersoft →

Somos uma empresa de soluções tecnológicas inovadoras que transformam vidas e potencializam resultados. Com 12 anos de experiência no mercado, temos sido parceiros estratégicos de inúmeros negócios, capacitando-os a alcançar seu potencial máximo.[Ver Mais]