Aula 5 · 18 min
Piloto não é versão pequena do projeto: é um experimento com pergunta, prazo e regra de saída. Quando o critério de sucesso e o de parar são combinados antes de começar, ninguém discute depois se deu certo. E se a ferramenta sair de linha no meio do caminho, o plano já diz como trocar.
Começar a aula
Objetivo: desenhar um piloto de 30 dias em uma página, com métrica, limites do agente, critério de parar e plano de saída.
Cada semana tem uma entrega. Clique em cada uma.
Role a página: cada etapa abaixo acende a sua parte do diagrama.
Linha de base congelada (o número de antes), 5 a 10 casos reais escritos com o dono, regras e limites do agente aprovados, permissões mínimas configuradas. Nada fala com cliente ainda.
O agente roda nos casos de teste, por dentro. Uma pessoa confere cada saída. Se errar o que não pode errar (preço, desconto, dado de cliente), volta para a semana 1.
Com clientes reais, mas toda ação que vale dinheiro passa por uma pessoa antes. Tudo fica registrado: o que o agente propôs, quem aprovou, o que mudou.
Comparar com a linha de base e responder: seguir, ajustar ou parar. Parar também é resultado: você economizou o projeto grande.
Prepara, ensaia por dentro, roda com aprovação e decide contra a linha de base. Se algo grave acontece, desliga na hora e volta ao processo manual.
Uma equipe, um processo, uma métrica principal. Piloto que mexe em quatro áreas não ensina nada.
Quatro peças do plano de uma página.
"Um agente que rascunha o orçamento reduz o tempo de resposta sem aumentar o erro de preço?" Uma pergunta só, com número.
Corte o escopo até caber em 30 dias: uma categoria de produto, um vendedor, um canal. Integração manual é aceitável no piloto.
Só pedidos de reposição de clientes antigos, só no WhatsApp da Patrícia, por 30 dias.
Escreva o que o agente pode, o que só com aprovação e o que nunca. Desconto com teto, pedido acima de um valor com aprovação, sem apagar e sem enviar nada fora do fluxo.
Todas as ações registradas. Isso é o que o Auditor vai cobrar depois.
As falhas F5 (desconto sem teto) e F7 (sem registro e sem aprovação acima de R$ 5 mil) são exatamente o que o plano deve impedir.
Para na hora se cair uma proteção: erro de preço, desconto acima do teto, reclamação de cliente, dado pessoal exposto. Não se decide por "está ganhando" na primeira semana: amostra pequena engana.
Quem desliga tem nome, não cargo, e prazo para voltar ao manual (ex.: 2 horas).
Com menos de 30 casos no período, o resultado é "amostra insuficiente", não vitória.
Ferramentas de agente saem de linha. A OpenAI anunciou em 03/06/2026 que o Agent Builder será desligado em 30/11/2026, com migração para o Agents SDK ou para os Workspace Agents do ChatGPT.
Por isso as instruções, os casos de teste e os dados ficam em arquivos do cliente, fora da ferramenta.
"Se a ferramenta anunciar desativação, migramos em até 15 dias usando as instruções e os casos de teste guardados."
Preencha com o dono antes de começar. Assinado, vira o contrato do experimento.
PILOTO · <empresa> · <processo> · <data de início> a <data de fim (30 dias)> 1. PERGUNTA: <a mudança X melhora Y sem piorar Z?> 2. ESCOPO: <1 equipe>, <1 canal>, <1 tipo de caso>. Fora do piloto: <...> 3. LINHA DE BASE (medida em <data>, por <quem>, de <onde vem o número>): métrica principal: <valor hoje> meta: <valor> em 30 dias proteções (não pode piorar): <erro de preço>, <reclamações>, <desconto médio> 4. FERRAMENTA E FORNECEDOR: <qual>, custo teto do mês: R$ <...> dados que entram: <...> dados que NÃO entram: <CPF, ...> 5. LIMITES DO AGENTE: pode: <ler pedidos, rascunhar resposta> só com aprovação de <nome>: <enviar orçamento, pedido acima de R$ ...> nunca: <dar desconto acima de X%, apagar, enviar fora do fluxo> registro: toda ação com data, proposta, quem aprovou 6. SEMANAS: S1 preparar | S2 ensaiar por dentro | S3 rodar com aprovação | S4 decidir 7. CRITÉRIO DE SUCESSO: <métrica principal atinge X com N >= 30 casos e nenhuma proteção piora> 8. CRITÉRIO DE PARAR (na hora): <erro de preço>, <desconto acima do teto>, <reclamação>, <dado exposto> quem desliga: <nome> volta ao manual em: <2 horas> 9. PLANO DE SAÍDA: instruções, casos de teste e dados guardados em <pasta do cliente>; se a ferramenta anunciar desativação, migrar em <15 dias>. 10. DECISÃO NO DIA 30: [seguir] [ajustar e repetir] [parar] assinam: <dono> e <consultor>
Pergunta: o rascunho de orçamento pelo agente reduz o tempo entre a mensagem e o orçamento enviado, sem aumentar o erro de preço?
Linha de base: 50 pedidos medidos por Patrícia Lima: mediana de 3 h 40 min; 4 orçamentos com preço errado em 50.
Meta: mediana abaixo de 1 hora, com erro de preço igual ou menor.
Limites: desconto máximo de 5%; orçamento acima de R$ 5 mil só com aprovação de Patrícia; registro de todas as ações.
Parar: qualquer orçamento enviado com desconto acima de 5% ou reclamação de preço. Quem desliga: Rafael (TI), em até 2 h.
Escolha a oportunidade "Fazer já" da aula 3 com melhor custo por tarefa na aula 4.
Preencha os 10 blocos do modelo para a Horizonte. Use os limites que evitam as falhas F5 e F7 do laboratório.
Pronto quando: o plano cabe numa página e tem linha de base com data, meta, pelo menos 2 proteções, critério de parar com nome de quem desliga e plano de saída.
Peça a uma IA ou a um colega para ler o plano como um diretor desconfiado e listar 5 jeitos de o piloto dar errado. Ajuste o plano para cada um.
Pronto quando: cada um dos 5 riscos tem uma linha no plano (limite, proteção ou critério de parar) que trata dele.
A explicação aparece depois da sua resposta.
Pergunta 1 de 4
Na primeira semana com clientes, o agente parece ótimo em 12 casos. O que fazer?competência
Pergunta 2 de 4
Quando o critério de parar deve ser escrito?
Pergunta 3 de 4
Por que guardar instruções e casos de teste fora da ferramenta de agente?
Pergunta 4 de 4
O que a semana 3 tem que a semana 2 não tem?
Escolha uma alternativa. A explicação aparece depois da sua tentativa.