Estabeleça uma configuração de referência
O que é
O walk it down começa com uma configuração capaz de cumprir a tarefa. Registre modelo, esforço disponível, ferramentas, versão da skill e casos usados. Essa é a referência contra a qual alternativas mais leves serão comparadas.
Por que aprender
Sem uma linha de base você não sabe se a queda de qualidade veio da configuração, dos dados ou da instrução. Os nomes e resultados citados no vídeo são exemplos daquele experimento, não uma hierarquia de preços ou desempenho garantida.
Conceitos-chave
Experimento E01
Skill: versão 1.0.0
Casos: C01 a C08
Modelo: identificador disponível na sua conta
Esforço: valor suportado pela interface
Registrar: aprovação, tempo, consumo e retrabalho.
✓ Faça assim
Use nomes e opções realmente disponíveis no ambiente.
✗ Evite este erro
Fixar no curso preços ou menus que podem mudar.
Pratique antes de revelar
Que informação falta em “o modelo B foi mais rápido”?
Ver resposta comentada
Casos, número de execuções, critérios de aceite, ferramentas, esforço e variação de tempo. Uma afirmação comparativa precisa dessas condições.
Compare uma variável por vez
O que é
Mantenha casos, skill e rubrica iguais ao mudar o modelo. Depois de escolher um candidato, teste outro nível de esforço se a interface oferecer esse controle. Não presuma que todos os modelos aceitam as mesmas opções.
Por que aprender
Trocar simultaneamente modelo, prompt e ferramenta impede atribuir a diferença a uma causa. Uma comparação simples e controlada vale mais que uma planilha grande cheia de condições incompatíveis.
Conceitos-chave
Rodada 1: modelo A vs B, esforço equivalente quando possível.
Rodada 2: melhor candidato, esforço alto vs médio.
Rodada 3: validar a escolha em casos reservados.
Se opções não forem equivalentes, registrar a diferença.
Do conceito à ação
- Modelo A: identificar a condição inicial.
- Mesmos casos: aplicar a decisão descrita.
- Modelo B: conferir o efeito no exemplo.
- Mesma rubrica: registrar a evidência de saída.
✓ Faça assim
Mantenha as entradas congeladas durante a comparação.
✗ Evite este erro
Melhorar a skill só para um candidato e chamar o teste de justo.
Pratique antes de revelar
Você mudou o prompt para ajudar B. O que fazer antes de comparar?
Ver resposta comentada
Executar novamente A com a mesma versão da skill, ou declarar que são dois sistemas diferentes. O importante é não atribuir ao modelo uma mudança de instrução.
Escolha casos que representem o trabalho real
O que é
No estudo visual do vídeo, um candidato foi melhor em certos recortes e pior em outros. Para descobrir o que serve ao seu trabalho, inclua exemplos de naturezas diferentes: demonstração de tela, fala com poucas imagens e conteúdo com gráficos.
Por que aprender
Um único exemplo favorece coincidências. Repita casos importantes e examine onde a configuração falha, não só sua média. Uma taxa alta de aprovação pode esconder um erro grave em um tipo raro, mas essencial.
Conceitos-chave
Relatório: normal, vazio, campo ausente, valor inválido.
Artigo: tutorial, entrevista, apresentação com gráficos.
Repetir os casos com maior risco e guardar resultados brutos.
✓ Faça assim
Divulgue o tamanho da amostra junto com a taxa de aprovação.
✗ Evite este erro
Generalizar desempenho de uma tarefa para todas as skills.
Pratique antes de revelar
Uma configuração passa em 9 de 10 casos, mas inventa valor no décimo. Pode vencer pela média?
Ver resposta comentada
Não se invenção de valores é bloqueante. A política de aceite precisa ser aplicada antes da comparação de custo; média não compensa uma falha crítica.
Calcule o custo por entrega aceita
O que é
O preço por chamada é apenas uma parte do custo. Inclua tentativas e correções. No exemplo didático, A gasta 12 unidades para 10 entregas aceitas; B gasta 8 para 5. A custa 1,20 por entrega aceita e B custa 1,60.
Por que aprender
A configuração nominalmente barata pode consumir mais recursos por causa do retrabalho. Registre tempo humano separadamente ou estabeleça uma forma explícita de monetizá-lo. Não misture custo de API com assinatura sem explicar o método.
Conceitos-chave
A: 12 unidades / 10 aceitas = 1,20 por aceite
B: 8 unidades / 5 aceitas = 1,60 por aceite
Se aceitas = 0: não existe custo finito por aceite.
Tempo de revisão humana: registrar em coluna separada.
✓ Faça assim
Some o custo das tentativas que falharam.
✗ Evite este erro
Excluir retries para fazer a alternativa parecer barata.
Pratique antes de revelar
C custa 9 unidades e aprova 6 saídas. Qual é o custo por aceite?
Ver resposta comentada
1,50 unidade por entrega aceita. Só compare com A e B se o critério de qualidade e o conjunto de casos forem equivalentes.
Quanto custa cada entrega aceita?
Inclua tentativas malsucedidas no custo. Esta simulação não consulta preços de serviços.
Reduza esforço com um portão de qualidade
O que é
Depois de encontrar um modelo adequado, experimente reduzir o esforço, quando esse controle existir. A decisão depende da qualidade observada, do tempo e do consumo. Mais esforço não é garantia de melhor resultado em toda tarefa.
Por que aprender
Uma skill com regras claras e script de cálculo pode precisar de menos deliberação do que uma revisão visual complexa. O portão de qualidade impede que a economia remova justamente a checagem que evita erros.
Conceitos-chave
Configuração atual → passa na suíte.
Esforço menor → executar a mesma suíte.
Passou sem regressões relevantes? Comparar tempo e custo.
Falhou? Voltar à referência ou investigar a skill.
Do conceito à ação
- Referência aprovada: identificar a condição inicial.
- Reduzir esforço: aplicar a decisão descrita.
- Reavaliar: conferir o efeito no exemplo.
- Adotar ou voltar: registrar a evidência de saída.
✓ Faça assim
Guarde a configuração anterior para reversão.
✗ Evite este erro
Pular revisão para reduzir tempo e chamar isso de otimização.
Pratique antes de revelar
A configuração leve funciona em resumo, mas falha em recorte visual. O que isso sugere?
Ver resposta comentada
Possivelmente dividir o fluxo e usar configurações diferentes por etapa, se o ambiente permitir. A decisão precisa de novo teste integrado; separar etapas também adiciona custo e complexidade.
Registre uma decisão que pode ser revista
O que é
O resultado do experimento deve dizer qual configuração foi escolhida, por quê, em quais casos e com quais limites. Inclua uma data de revisão ou eventos que justificam repetir a comparação: nova ferramenta, modelo, tipo de entrada ou mudança de contrato.
Por que aprender
Otimização é uma decisão situada. Uma atualização pode alterar comportamento ou disponibilidade. Guardar a evidência permite revisar a escolha sem começar de opiniões vagas ou da lembrança do melhor exemplo.
Conceitos-chave
Escolha: configuração B para resumos de texto.
Base: passou em 12 casos, 3 rodadas por caso.
Limite: não avaliada para edição de imagens.
Reavaliar: mudança de modelo, rubrica ou entrada.
✓ Faça assim
Diferencie medição, estimativa e informação não disponível.
✗ Evite este erro
Declarar “o melhor modelo” sem especificar tarefa e condições.
Pratique antes de revelar
Qual conclusão cabe após um piloto de apenas dois casos?
Ver resposta comentada
“O candidato merece uma avaliação maior.” Dois casos podem revelar um defeito, mas não sustentam uma promessa ampla de confiabilidade.
Confira seu entendimento
Qual número ajuda mais a escolher uma configuração econômica?
O que você leva deste módulo
Planejar uma comparação justa e calcular custo por entrega aceita.
- Estabeleça uma configuração de referência.
- Compare uma variável por vez.
- Escolha casos que representem o trabalho real.
- Calcule o custo por entrega aceita.
- Reduza esforço com um portão de qualidade.
- Registre uma decisão que pode ser revista.
Próxima ação: guarde o exercício no seu laboratório e registre o que ainda precisa de revisão.