Engenheiro de Qualidade Sênior
Empresa confidencial
Descrição da vaga
Criar frameworks para validar saídas de LLMs, combatendo alucinações, vieses e garantindo a aderência ao contexto.
Desenvolver e manter scripts de automação de testes (E2E, API e Integração) utilizando ferramentas como Playwright ou Cypress.
Atuar desde a fase de requisitos para garantir que a qualidade seja pensada no início do desenvolvimento.
Testes de Performance e Segurança: Validar a resiliência das integrações com modelos de IA e a segurança contra vulnerabilidades como prompt injection.
Definir e acompanhar métricas de qualidade e bugs, reportando resultados para o time global.
Formação em Tecnologia da Informação ou áreas correlatas.
Inglês Avançado: Capacidade de interagir e reportar resultados para times internacionais.
Experiência avançada em automação de testes e ferramentas de QA.
Conhecimento em Python (para scripts de teste e validação de dados).
Desejável: Experiência anterior testando aplicações que consomem APIs de LLM (OpenAI, AWS Bedrock).
