O QA que Testa a IA (Volume 2) | Coleção QA & IA Fundamentos, Estratégias e Frameworks para Testar LLMs, RAG e Agentes Inteligentes do Júnior ao Sênior
Testar sistemas com IA generativa não é "testar mais um pouco" — é uma disciplina nova, e a maioria dos QAs brasileiros ainda aplica checklist de sempre em chatbot, agente e RAG, sem perceber que está testando errado.
"O QA que Testa a IA" é o framework completo, prático e progressivo — do primeiro checklist manual até pipeline de eval automatizado rodando em CI/CD — pra levar você do Jr ao Sênior numa skill que o mercado brasileiro ainda não sabe contratar direito (e por isso paga bem quando encontra).
Em 41 capítulos, organizados em 5 blocos, você vai:
Abandonar o teste binário e adotar critérios de qualidade mensuráveis para IA generativa
Testar prompts, detectar alucinação e validar respostas sem "resultado esperado" fixo
Escrever evals automatizados, versionar prompt como artefato e integrar tudo no CI/CD
Testar RAG e Agentes de IA — cascading failures, loop infinito, tool misuse — com framework de 6 níveis
Dominar jailbreak, prompt injection e vazamento de dados
Desenhar human-in-the-loop sem virar gargalo, e estruturar auditoria e governança de decisões de IA
Aplicar o Framework ORBIT (Objective, Risk, Behavior, Injection, Telemetry) passo a passo
Comparar e escolher entre Ragas, DeepEval, Promptfoo, LangSmith, Langfuse, Arize Phoenix, Guardrails AI e frameworks de agentes como LangGraph e CrewAI
Posicionar essa skill em entrevista e CV, com templates prontos
Cada bloco traz um desafio prático no GitHub: você constrói, capítulo a capítulo, um portfólio real de testes de IA (o case FinBot), documentado e pronto pra mostrar em entrevista.
Escrito por Lilian Borba, QA Lead Sênior com 20+ anos de experiência, fundadora da QA Insider — resultados documentados: 91% de redução em ciclos de regressão, 75% de aceleração em time-to-market, plataformas com +260 mil usuários ativos.
Enquanto o mercado ainda discute se "a IA vai substituir o QA", este livro te coloca entre os poucos que já sabem testar os sistemas que essa IA roda.
