Descrição da Vaga
Estamos em busca de uma Pessoa Engenheira de Dados de altíssimo nível para construir a base que torna a IA corporativa não apenas viável, mas realmente útil. Para nós, dados não são apenas insumos para relatórios: são o combustível que alimenta contextos, agentes, automações e decisões inteligentes em escala. Se você tem domínio na construção de arquiteturas de dados complexas e entende que o seu trabalho é o alicerce fundamental para a eficácia de modelos e produtos de IA, #VemPraViaflow!
Responsabilidades
- Projetar, construir e manter pipelines de dados batch, near real time ou streaming.
- Integrar fontes diversas, incluindo bancos de dados, APIs, arquivos, documentos, sistemas corporativos e ambientes cloud.
- Criar camadas de dados confiáveis para analytics, aplicações de IA, RAG, embeddings e automações.
- Implementar processos de ingestão, transformação, modelagem, qualidade, validação e monitoramento de dados.
- Trabalhar com dados estruturados e não estruturados, incluindo documentos, logs, tabelas, eventos e bases transacionais.
- Apoiar a preparação de dados para uso por agentes, modelos, mecanismos de busca semântica e aplicações inteligentes.
- Implementar práticas de governança, linhagem, data contracts, versionamento e documentação.
- Tratar dados sensíveis com boas práticas de segurança, privacidade, anonimização e mascaramento.
- Trabalhar junto aos times de IA, Machine Learning, Plataforma, Produto e Full Stack para entregar dados no formato, tempo e qualidade necessários.
Requisitos
- ✓Experiência com engenharia de dados em ambientes cloud, híbridos ou corporativos.
- ✓Conhecimento sólido em SQL.
- ✓Conhecimento sólido em Python.
- ✓Experiência com Spark, Databricks, Airflow, dbt, Data Factory, Glue, Kafka ou ferramentas equivalentes.
- ✓Familiaridade com data lake, lakehouse, data warehouse e modelagem de dados.
- ✓Experiência com ETL, ELT, orquestração, monitoramento e tratamento de falhas.
- ✓Conhecimento em qualidade de dados, testes, performance e rastreabilidade.
- ✓Capacidade de trabalhar com múltiplas fontes e formatos de dados.
- ✓Atenção a segurança, LGPD, governança e controle de acesso.
- •Experiência com pipelines para RAG, embeddings, bases vetoriais e preparação de documentos para IA.
- •Conhecimento em pgvector, busca híbrida, busca semântica ou mecanismos de recuperação de contexto.
- •Vivência com catálogos de dados, linhagem, data observability e data contracts.
- •Experiência com CDC, arquitetura orientada a eventos ou streaming.
- •Conhecimento em DLP, classificação de informação, mascaramento e anonimização.
- •Experiência em ambientes com múltiplos sistemas legados e requisitos corporativos de segurança.
Benefícios
- ✓Reembolso BYOD para aquisição de máquina.
- ✓Auxílio BYOD para utilização de máquina própria.
- ✓Auxílio home office no cartão iFood Benefícios na categoria saldo livre.
- ✓TotalPass.
- ✓Pacote Colab+ com acesso a WellHub, Avus, Starbem e Dasa+ Saúde.
- ✓DIT - Diária de Incapacidade Temporária.
- ✓People Hub - Clube de Benefícios.
- ✓Day off de aniversário.
- ✓Treinamentos e Certificações.
Categorias
Sobre a Empresa
Mais vagas na Viaflow →A Viaflow é uma empresa especialista na Jornada de Hiperautomação de Negócios. Entregamos concepção, desenvolvimento e sustentação, que impulsionam a automação de sua área de negócios de maneira fluída e escalável, com foco em trazer redução de custos e melhores resultados para a empresa.[Ver Mais]
Informações Adicionais
Você será redirecionado para o site da empresa