← Construir e avaliar

MÓDULO 12 · TRÊS AULAS, SEIS ETAPAS

Projeto final

Entregar uma decisão de adoção fundamentada, inclusive quando a resposta for não automatizar.

Especificar Avaliar Decidir
0/72 etapas · 0%
Ajustar leitura e aparência
AULA 12.1 · CONCEITO

Especificar a triagem

O que é

Seu projeto final é uma triagem de atendimento em português. Comece descrevendo quem recebe os tickets, quais filas existem e qual problema deseja reduzir. Evite prometer automação total. A primeira entrega é uma especificação que outra pessoa consegue revisar.

Defina os critérios de cada alternativa, casos ambíguos e o tratamento de informação ausente. Acrescente cinco exemplos difíceis: negação, duas intenções, texto incompleto, sinônimo e instrução indevida dentro do ticket. Mostre como cada um deveria ser tratado e por quê.

Depois desenhe a política externa ao modelo. Ela define ações permitidas, revisão, falhas de contrato, prazo e limite de tentativas. Inclua orçamento e plano de avaliação. O projeto sem código pode usar planilha; o técnico deve acrescentar requisições, testes e relatório reproduzível. Ambos precisam separar fatos, hipóteses e resultados.

Por que aprender

Entregar uma decisão de adoção fundamentada, inclusive quando a resposta for não automatizar.

Conceitos-chave

Use o exemplo a seguir para distinguir os dados disponíveis, o julgamento solicitado e o que ainda precisa de comprovação.

AULA 12.1 · PRÁTICA

Aplicar: Especificar a triagem

Sua vez

Escreva uma frase que descreva o sucesso do seu piloto sem usar “IA mais inteligente”.

Conferir resposta comentada

Exemplo: reduzir o tempo de triagem mantendo o erro por fila dentro do limite acordado, com custo total menor e possibilidade de correção humana.

AULA 12.2 · CONCEITO

Avaliar a proposta

O que é

Apresente sua avaliação de modo que outra pessoa possa repeti-la. Identifique o dataset, sua origem, as partições e as configurações. Mostre a quantidade de casos por classe, os erros importantes e as limitações. Um gráfico de acurácia sem contexto não é suficiente.

Se executou apenas a baseline de regras, diga isso. Se usou respostas simuladas, marque-as como simulação. Se fez uma chamada real, registre o modelo e o uso reportado. Essas distinções não diminuem o projeto; tornam sua conclusão confiável e mostram qual etapa ainda falta.

A rubrica considera formulação, política, evidência, economia e reprodutibilidade. Um projeto que reconhece insuficiência de dados pode ser melhor que um projeto que anuncia sucesso com números inventados. Inclua exemplos em que o sistema errou e explique a menor correção proposta, sem ajustar e medir tudo no mesmo conjunto.

Por que aprender

Entregar uma decisão de adoção fundamentada, inclusive quando a resposta for não automatizar.

Conceitos-chave

Use o exemplo a seguir para distinguir os dados disponíveis, o julgamento solicitado e o que ainda precisa de comprovação.

AULA 12.2 · PRÁTICA

Aplicar: Avaliar a proposta

Sua vez

Que informação falta para transformar o relatório do exemplo em evidência de adoção do Jev?

Conferir resposta comentada

Execução real do Jev e alternativas, dados representativos revisados, política calibrada em conjunto separado, métricas finais e custo completo do fluxo.

AULA 12.3 · CONCEITO

Decidir adoção

O que é

A última etapa é uma decisão de projeto. Há três saídas legítimas: continuar com uma implantação limitada, coletar mais dados ou não adotar. A escolha depende de qualidade, custo, cobertura, esforço de revisão e capacidade operacional, não da popularidade do modelo.

Se decidir continuar, limite a primeira rota a uma ação reversível e acompanhe as correções. Se decidir coletar mais dados, diga exatamente qual dúvida falta resolver: uma classe rara, um idioma, um tipo de ambiguidade ou a diferença de custo. Se decidir não adotar, preserve a avaliação para evitar repetir o mesmo experimento sem aprender.

O princípio que atravessa o curso é simples: interpretação probabilística funciona melhor dentro de software que conhece seus limites. Modelos ajudam a julgar; critérios e evidências permitem avaliar; código restringe a execução; pessoas assumem as decisões que exigem responsabilidade. Uma arquitetura bem definida vale mais do que uma promessa isolada de velocidade.

Aprofundamento da versão 1.2.0

No projeto final, entregue um report.json e a análise dos erros, ou identifique claramente por que o resultado ainda é simulado. Defender coletar mais dados ou não adotar é uma conclusão válida. Qualidade, custo completo e cobertura devem sustentar a decisão.

Prática com os recursos atuais

Escolha um dos 17 pacotes como ponto de partida, sem confundir template executável com conector pronto. O piloto deve declarar quem coleta os eventos, quem revisa, onde ficam os registros, como medir descartes incorretos e quem autoriza ações. Mil classificações rápidas não demonstram mil decisões corretas.

Por que aprender

Entregar uma decisão de adoção fundamentada, inclusive quando a resposta for não automatizar.

Conceitos-chave

Use o exemplo a seguir para distinguir os dados disponíveis, o julgamento solicitado e o que ainda precisa de comprovação.

AULA 12.3 · PRÁTICA

Aplicar: Decidir adoção

Sua vez

Dê uma condição objetiva para cada saída: continuar, coletar mais dados e não adotar.

Conferir resposta comentada

Continuar: metas demonstradas com volume suficiente. Coletar: resultado inconclusivo em classes importantes. Não adotar: qualidade ou custo total não justificam a mudança após teste adequado.

Fechamento do módulo

  1. Recupere a decisão escolhida no início do curso.
  2. Compare sua resposta com os exemplos deste módulo.
  3. Registre uma alteração nos critérios e o teste necessário para aceitá-la.

Verificação rápida

A acurácia média melhorou, mas surgiram erros graves em uma classe. O piloto está aprovado?

Prática e continuidade

Abrir os laboratórios e gabaritos · Laboratório visual do projeto

# No repositório jev: demonstração offline, sem API
python3 -m pacotes.executar reunioes
python3 -m pacotes.qualidade reunioes

Estas saídas usam uma fixture fictícia. Para testar seus dados, use o roteiro de referência humana e o modo real explicitamente.