Engenheiro(a) de IA

Engenheiro(a) de IA 

PJ | Remoto | Atuação em engenharia de IA aplicada a software.
Foco em agentes, qualidade, avaliação e plataforma de desenvolvimento com LLMs.

Estamos em busca de uma pessoa Engenheira de IA Sênior para atuar na construção e evolução da plataforma que sustenta o uso de agentes e LLMs no desenvolvimento de software.

A posição exige uma combinação sólida entre engenharia de software e IA aplicada em produção. O desafio vai além da criação de prompts: envolve estruturar harnesses, orquestração de agentes, avaliações automatizadas, gates de qualidade, telemetria e mecanismos que tornem o uso de IA previsível, mensurável e escalável para todo o time.

O que você vai encontrar no desafio:

• Projetar e evoluir harnesses para execução e controle de agentes de IA
• Estruturar padrões de orquestração, uso de ferramentas e contexto
• Criar e versionar prompts com critérios claros de qualidade
• Desenvolver testes de regressão para comportamentos baseados em LLM
• Construir avaliações automatizadas (evals) para medir a qualidade das saídas
• Implementar telemetria e acompanhamento de performance e custos
• Transformar critérios de qualidade em gates automatizados
• Estruturar ferramentas reutilizáveis para os times de engenharia
• Investigar falhas e comportamentos inesperados dos modelos
• Contribuir para a evolução contínua da qualidade da frota de agentes

Requisitos técnicos:

Engenharia de Software e IA

• 5+ anos de experiência em Engenharia de Software
• 1+ ano de experiência construindo aplicações baseadas em LLM em produção
• Orquestração de agentes
• Tool use
• RAG
• Design e gerenciamento de contexto

Prompt Engineering

• Engenharia de prompt estruturada e disciplinada
• Versionamento de prompts
• Testes e regressão
• Avaliação sistemática de alterações

Avaliação e Observabilidade

• Construção de avaliações automatizadas (evals)
• Telemetria de aplicações baseadas em IA
• Monitoramento da qualidade das respostas
• Controle e acompanhamento de custo de tokens

Qualidade e Automação

• Construção de gates automatizados
• Tradução de critérios de qualidade em verificações objetivas
• Automação de validações capazes de bloquear entregas fora do padrão
• Desenvolvimento de ferramentas reutilizáveis para outros times

Benefícios FMX:

• Wellhub
• Starbem
• Avus (extensível para até 4 dependentes)
• Clube iFood
• Recesso remunerado conforme acordado
• Premiação mensal por desempenho e resultados via iFood Benefícios

 

Faça parte da FMX:
Conectamos pessoas, tecnologia e inovação para criar soluções que geram valor. Venha fazer parte de um time que acredita no aprendizado contínuo, na colaboração e no protagonismo profissional.