Aula 7 · 16 min
A tentação é dar autonomia cedo: as respostas parecem boas e alguém diz "deixa rodar sozinho". É promover o estagiário no segundo dia porque fez uma boa pergunta. Esta aula dá os quatro níveis, os números para subir e o caminho de volta.
Começar a aula
Objetivo: decidir quando subir ou descer o nível de autonomia de um agente usando acerto, volume de execuções e gravidade dos erros.
Uma tarefa por vez. Clique em cada nível para ver o critério de subida.
O critério para subir não é sugestão: é exigência. Sem os números, a promoção não acontece.
Oito métricas. As três primeiras são o mínimo.
Histórico de execuções naquele cenário e taxa de acerto por avaliação (humana ou automatizada).
Nem todo erro é igual: errar o tom de uma mensagem não é errar o valor de uma fatura. Quanto custa cada falha em dinheiro, tempo, reputação ou retrabalho?
A taxa se mantém ao longo do tempo ou oscila? Mantém a qualidade em cenários variados, não só nos simples? Com que frequência alguém precisa corrigir?
Se um agente no nível 3 começa a errar de um jeito novo (cenário mudou, regra desatualizada, integração quebrada), ele desce para o nível 2 até estabilizar.
A descida não é punição. É o ciclo funcionando.
Conversa simulada para treinar. Escolha a resposta que você daria; o comentário aparece logo depois.
Escolha a sua resposta. O comentário aparece logo depois e a conversa segue conforme a escolha.
Copie para a ficha do agente, uma tabela por tarefa.
## Autonomia — tarefa: <ex.: enviar follow-up> Nível atual: 1 (recomenda; humano decide e executa) desde: <data> Para subir ao nível 2 (executa com aprovação): - [ ] 50+ execuções avaliadas hoje: - [ ] acerto acima de 90% hoje: - [ ] zero erro grave em 2 semanas último erro grave: Erro grave nesta tarefa é: <ex.: preço, prazo ou destinatário errado> Desce um nível se: aparecer erro grave novo ou o acerto cair abaixo de <x>% Próxima revisão: <data>
Uma tarefa, um critério.
Escolha uma tarefa do seu agente (pessoal, Jarvis ou empresa) e preencha o critério de promoção. Defina o que é erro grave nela.
Pronto quando: a ficha tem o nível atual, os três números para subir, o que é erro grave e a regra de descida.
Faça a conversa simulada desta aula. Se não chegar ao placar máximo, leia os comentários e recomece.
Pronto quando: você terminou com o placar máximo e consegue dizer por que "preço errado" segurou o agente no nível 1.
4 perguntas.
Pergunta 1 de 4
Um agente tem 120 execuções avaliadas no nível 1, 93% de acerto e nenhum erro grave há três semanas. Pode subir?
Pergunta 2 de 4
Um agente no nível 3 começa a errar porque a integração com o CRM mudou. O que fazer?
Pergunta 3 de 4
Por que separar a gravidade do erro, e não só contar a taxa de acerto?
Pergunta 4 de 4
Qual é a diferença entre o nível 2 e o nível 3?competência
Escolha uma alternativa. A explicação aparece depois da sua tentativa.