Pessoa Analista de Testes

🌍 Remoto📍 Remoto

Descrição da Vaga

A Atlântico, um Instituto de Pesquisa e Desenvolvimento focado em inovação e tecnologia, busca uma Pessoa Analista de Testes Pleno para impulsionar a inovação. O profissional atuará em um ambiente descontraído e colaborativo, com foco na valorização de pessoas.

Responsabilidades

Realizar testes de API REST.
Atuar com CI/CD.
Utilizar GIT (GitHub, Gitlab, Bitbucket etc).
Trabalhar com linguagem SQL (Oracle, Postgres e MySql).
Realizar testes de agentes de IA Generativa.
Executar testes de guardrails.
Conduzir testes de segurança em aplicações de IA.
Efetuar testes de agentes transacionais e informacionais.
Realizar testes manuais e automatizados.
Escrever cenários de testes.
Elaborar relatórios executivos.
Fazer curadoria de testes e resultados.
Avaliar aplicações baseadas em LLMs e RAG com Ragas e/ou DeepEval.
Automatizar testes com PyTest.
Realizar testes de performance e benchmarking com PyTest-benchmark.
Conduzir testes de carga e performance com Locust.
Monitorar observabilidade de aplicações de IA com LangFuse e/ou Arize Phoenix.
Realizar testes de segurança, vulnerabilidades e robustez de aplicações de IA com Giskard.
Conduzir testes adversariais com TextAttack.
Monitorar métricas e performance com Prometheus e Grafana.

Requisitos

✓Graduação em andamento em Computação, Engenharia de Software, ou em áreas correlatas.
✓Sólida experiência em testes.
✓Conhecimento em BDD e padrões como POM.
✓Conhecimento em linguagem de scripting (Python).
•Desejável Docker.
•Desejável Computação em nuvem (preferencialmente AWS).
•Desejável TDD e Testes unitários.
•Desejável Conhecimentos em LLMOps/MLOps.
•Desejável Conhecimentos em avaliação, observabilidade e segurança de aplicações baseadas em LLMs.
•Inglês intermediário.

Categorias

QA Programação

Sobre a Empresa

Mais vagas na Atlântico →

O Atlântico é uma Instituição de Ciência e Tecnologia (ICT), estruturada na forma de uma Associação Civil de Direito Privado, sem fins lucrativos, voltada para a promoção da Inovação através da Pesquisa e Desenvolvimento em TIC.[Ver Mais]