MODULO 1-2

๐Ÿง  O cerebro da coisa: o que e um LLM (sem jargao)

Por tras de todo Jarvis bate um cerebro: o LLM. Mas o que e isso, afinal? Neste modulo voce desmistifica o "modelo" sem nenhuma matematica โ€” entende como ele preve a proxima palavra, por que tem memoria curta, o que sao tokens, e a diferenca entre rodar na nuvem ou na sua maquina. No fim, voce vai saber exatamente o que ele consegue (e o que nao consegue) fazer.

6
Topicos
~35
Minutos
Basico
Nivel
Teoria
Tipo
1

๐Ÿ“– O que e um LLM

Quando voce conversa com o ChatGPT, com o Claude ou com o Gemini, esta falando com um LLM. A sigla vem do ingles Large Language Model โ€” em portugues, "Modelo de Linguagem Grande". Quebrando palavra por palavra: e um programa (modelo) que lida com texto (linguagem) e foi treinado em uma quantidade gigantesca de material (grande). Esse programa e o cerebro do seu Jarvis โ€” a parte que pensa, escreve e responde.

A ideia central e quase boba de tao simples: o LLM foi treinado para prever a proxima palavra. Voce digita "O ceu esta..." e ele calcula qual palavra tende a vir em seguida โ€” "azul", "limpo", "nublado". So que ele faz isso milhoes de vezes por segundo, palavra apos palavra, e o resultado parece raciocinio, conversa, ate criatividade. Foi lendo praticamente toda a internet, livros e codigo que ele aprendeu esses padroes.

๐Ÿง  O LLM em uma frase

Um LLM e um autocompletar gigante e muito bem treinado. O mesmo recurso que sugere a proxima palavra no teclado do celular, levado a um nivel em que ele escreve textos inteiros, resume documentos e responde perguntas โ€” porque aprendeu os padroes da linguagem humana lendo uma montanha de texto.

  • โ€ขLarge (grande): treinado em uma quantidade enorme de texto, com bilhoes de "ajustes internos".
  • โ€ขLanguage (linguagem): a materia-prima dele e texto โ€” entra texto, sai texto.
  • โ€ขModel (modelo): um programa que aprendeu padroes, nao um banco de respostas decoradas.

Novo aqui? LLM = "Modelo de Linguagem Grande", o tipo de programa de IA que roda atras de produtos como ChatGPT e Claude. Modelo, no jargao de IA, e simplesmente o "cerebro" treinado โ€” o arquivo de software que recebe texto e devolve texto. Sempre que voce ler "modelo" neste curso, pense "o cerebro de IA".

Conceitos-chave

LLM

Modelo de Linguagem Grande โ€” o cerebro de IA que pensa em texto.

Prever a proxima palavra

O mecanismo basico: ele escolhe, palavra a palavra, o que vem em seguida.

Treinamento

Aprendeu os padroes da lingua lendo uma quantidade gigante de texto.

Modelo = cerebro

No Jarvis, o LLM e a peca que raciocina; as outras dao maos e memoria.

2

๐Ÿ”ฎ Como ele "pensa"

Aqui vem a parte que mais confunde quem esta comecando: o LLM nao consulta um banco de dados e nao faz uma busca no Google antes de responder. Ele nao tem uma "tabela de fatos" onde procura a resposta certa. O que ele faz e previsao estatistica: a partir do que voce escreveu, ele estima qual e a continuacao mais provavel, baseado nos padroes que aprendeu no treino.

Isso explica as duas caras do LLM. De um lado, ele e criativo e flexivel: como nao esta copiando respostas decoradas, consegue escrever um poema novo, adaptar um texto ao seu tom, combinar ideias de jeitos ineditos. De outro lado, ele as vezes erra com toda a confianca do mundo โ€” inventa um fato, cita um livro que nao existe, da uma data errada โ€” e diz isso no mesmo tom seguro de quando acerta. Esse erro confiante tem nome: alucinacao.

๐Ÿ“Š Previsao, nao memoria fotografica

  • โ€ขNao e busca: ele nao "procura" a resposta; ele a gera palavra a palavra.
  • โ€ขNao e banco de dados: nao ha uma planilha de fatos guardada โ€” ha padroes aprendidos.
  • โ€ขE probabilidade: "qual palavra costuma vir aqui?" repetido milhares de vezes.
  • โ€ขPor isso varia: a mesma pergunta pode gerar respostas um pouco diferentes a cada vez.

โš ๏ธ Cuidado: alucinacao

Como o objetivo dele e sempre dar "a continuacao mais plausivel", as vezes a continuacao plausivel simplesmente nao e verdadeira. Ele pode inventar um numero de telefone, um artigo cientifico ou uma citacao โ€” e apresentar tudo com tom de certeza. Por isso, para qualquer fato que importe (data, valor, nome, lei), confira numa fonte. Nas proximas trilhas, ferramentas e memoria vao reduzir muito esse risco.

Novo aqui? Alucinacao e quando o LLM responde algo que parece certo, soa convincente, mas e falso. Nao e mentira no sentido humano โ€” e um efeito colateral de ele sempre tentar prever "o que costuma vir aqui", mesmo quando nao sabe a resposta de verdade.

Conceitos-chave

Previsao estatistica

Ele estima a continuacao mais provavel, nao consulta fatos guardados.

Alucinacao

Erro confiante: algo que soa certo mas e inventado.

Criatividade

Por nao decorar respostas, ele gera texto novo e adaptavel.

Conferir o que importa

Para fatos sensiveis, valide numa fonte confiavel.

3

๐Ÿงฉ Contexto = a memoria de trabalho

Se o LLM nao tem um banco de dados, como ele "lembra" do que voce disse no inicio da conversa? A resposta e o contexto. Tudo que o modelo "esta vendo agora" โ€” sua mensagem, as respostas anteriores da conversa, as instrucoes que voce deu, um arquivo que voce colou โ€” vive numa especie de mesa de trabalho chamada janela de contexto. E so dali que ele tira informacao na hora de responder.

A melhor analogia e a RAM do computador: e a memoria de curto prazo, rapida, mas limitada. Tudo que esta na janela, o modelo enxerga com nitidez. O que sai dela (porque a conversa ficou longa demais, ou porque voce fechou e abriu de novo) simplesmente desaparece โ€” como apagar a lousa. Por isso o ChatGPT "esquece" voce entre uma conversa e outra: cada nova conversa comeca com a mesa vazia.

O LLM como "kernel": o cerebro no centro de um pequeno sistema operacional LLM o cerebro que pensa janela de contexto = memoria de trabalho (RAM) ferramentas = perifericos (web, arquivos) voce manda texto, recebe texto Tudo que entra na janela, o LLM enxerga. O que sai dela, ele esquece.

No centro, o LLM e o cerebro. Em cima, a janela de contexto e a memoria de trabalho (como a RAM): rapida, mas limitada. Essa metafora โ€” LLM no centro, contexto como RAM, ferramentas como perifericos โ€” guia o curso inteiro e volta com forca no modulo 1-3.

Novo aqui? Janela de contexto e o "campo de visao" do modelo: tudo que ele consegue levar em conta agora. RAM e a memoria de curto prazo do computador, que esvazia ao desligar. A janela de contexto e exatamente isso para o LLM โ€” e por isso a memoria que dura (que veremos na Trilha 3) precisa ser construida por fora, em arquivos.

Conceitos-chave

Contexto

Tudo que o modelo esta "vendo agora": conversa + instrucoes + arquivos.

Janela de contexto

O espaco limitado onde esse contexto cabe.

Como a RAM

Memoria de trabalho: rapida, limitada, esvazia ao fechar.

Esquece ao sair

Cada conversa nova comeca com a mesa de trabalho vazia.

4

๐Ÿ”ค Tokens: a moeda do modelo

O LLM nao le "palavras" do jeito que voce le. Ele quebra o texto em pedacinhos chamados tokens. Um token pode ser uma palavra inteira ("gato"), um pedaco de palavra ("inacredit" + "avel"), ou ate so um sinal de pontuacao. Uma regra de bolso util: em portugues, cada token equivale a mais ou menos 4 caracteres, e 100 palavras dao por volta de 130 a 150 tokens. Toda a leitura e escrita do modelo acontece em tokens.

Por que isso importa para voce? Por dois motivos bem praticos. Primeiro: a janela de contexto se mede em tokens โ€” quando alguem diz "esse modelo tem contexto de 128 mil tokens", esta dizendo o tamanho da mesa de trabalho. Segundo: na nuvem, voce paga por token โ€” tanto pelos que entram (sua pergunta + o contexto) quanto pelos que saem (a resposta). Token e, literalmente, a moeda do LLM.

Como o modelo "ve" a frase: Meu Jarvis e incrivel! Meu Jarvis e incri vel ! "incrivel" virou 2 tokens 6 tokens no total โ€” e isso que entra na conta.

A frase vira 6 tokens. Repare que "incrivel" se parte em dois (incri + vel) e ate o "!" e um token. E nessa unidade que o modelo le, escreve, mede o contexto e โ€” na nuvem โ€” cobra.

๐Ÿ“Š Numeros que ajudam a ter nocao

  • โ€ข~4 caracteres = 1 token (em portugues, mais ou menos).
  • โ€ข100 palavras โ‰ˆ 130 a 150 tokens.
  • โ€ข1 pagina de livro โ‰ˆ 400 a 600 tokens.
  • โ€ขContexto de 128 mil tokens โ‰ˆ um livro inteiro de ~300 paginas cabendo na "mesa".

๐Ÿ’ก Dica pratica

Conversas longas custam mais e enchem a janela mais rapido โ€” porque o modelo reprocessa tudo a cada resposta. Para tarefas independentes, abrir uma conversa nova deixa o Jarvis mais rapido, mais barato e menos sujeito a se confundir com assuntos antigos. "Limpar a mesa" e uma boa pratica, nao um desperdicio.

Conceitos-chave

Token

O pedacinho de texto que o modelo le e escreve (palavra, fragmento ou sinal).

Contexto em tokens

O tamanho da janela e medido em tokens, nao em palavras.

Cobranca por token

Na nuvem, paga-se pelos tokens de entrada e de saida.

Regra de bolso

~4 caracteres por token; 100 palavras โ‰ˆ 130-150 tokens.

5

โ˜๏ธ Modelo local vs nuvem

Um LLM precisa rodar em algum lugar โ€” e existem dois lugares. Na nuvem, o modelo vive no servidor de uma empresa (Claude da Anthropic, GPT da OpenAI, Gemini do Google) e voce conversa com ele pela internet. No local, o modelo roda na sua propria maquina โ€” em geral via um programa chamado Ollama, que baixa e roda modelos abertos de graca. Os dois fazem o mesmo papel: ser o cerebro. Mudam o lugar, o custo e a privacidade.

โœ“ Nuvem (Claude, GPT, Gemini)

  • โœ“Os modelos mais potentes do mundo, sempre prontos.
  • โœ“Nao exige hardware forte โ€” roda ate no celular.
  • โœ“Zero instalacao: e so abrir e usar.
  • โœ—Paga por token e seus dados saem da maquina.

โœ“ Local (Ollama na sua maquina)

  • โœ“Gratis apos baixar: $0 por token, sem medidor.
  • โœ“Privado: nada sai da sua maquina, funciona offline.
  • โœ“Voce e dono do cerebro โ€” sem depender de ninguem.
  • โœ—Exige hardware (RAM/GPU) e modelos menores sao mais fracos.

A escolha nao e "um e melhor que o outro" โ€” e qual e melhor para esta tarefa. Um modelo local barato resolve um resumo simples sem custo nem vazamento. Um modelo de nuvem potente brilha numa tarefa dificil que exige o maximo de raciocinio. O melhor de tudo: o seu Jarvis vai poder trocar de cerebro conforme o caso โ€” algo que a Trilha 3 (modulo "Cerebros") mostra em detalhe.

Novo aqui? Ollama e um programa gratuito que instala e roda LLMs na sua propria maquina, com um comando simples. E o jeito mais comum de ter um "cerebro local". Voce vai ouvir falar muito dele nas trilhas praticas โ€” por ora, guarde: Ollama = rodar o LLM em casa, de graca.

Conceitos-chave

Nuvem

O modelo roda no servidor da empresa; potente, mas paga por uso.

Local

O modelo roda na sua maquina; gratis e privado, exige hardware.

Ollama

O programa que baixa e roda LLMs abertos localmente.

Trocar de cerebro

Usar local ou nuvem conforme a tarefa โ€” decisao por resposta.

6

๐Ÿšง Limites e como contornar

Agora que voce entende como o LLM funciona, da pra enxergar com clareza tres limites que vem de fabrica โ€” e, melhor ainda, como cada um deles e contornado. A boa noticia: nenhum desses limites e impeditivo. Eles sao exatamente o motivo pelo qual um Jarvis tem ferramentas e memoria por cima do modelo. O LLM sozinho e so o cerebro; o resto da o que falta.

1

Ele alucina

Limite: inventa fatos com confianca. Contorno: dar ferramentas (busca na web, leitura de arquivos) para ele consultar a realidade em vez de chutar.

2

Nao sabe do que e novo

Limite: o conhecimento dele para na data em que foi treinado (nao sabe da noticia de ontem). Contorno: ferramentas de busca trazem informacao atual para dentro do contexto.

3

Esquece fora do contexto

Limite: o que sai da janela some. Contorno: memoria persistente em arquivos e busca โ€” assim o Jarvis "lembra" entre conversas.

๐Ÿงฉ O cerebro nao trabalha sozinho

Repare no padrao: todo limite do LLM "puro" e resolvido adicionando algo ao redor dele. Ferramentas resolvem alucinacao e atualidade; memoria resolve o esquecimento. E exatamente por isso que um Jarvis e mais do que um LLM โ€” ele e o LLM mais as camadas que o tornam util no mundo real.

No modulo 1-3 voce ve o salto de "chatbot que responde" para "agente que age", e na Trilha 3 (Anatomia) cada uma dessas camadas vira um capitulo proprio.

Auto-checagem (opcional): qual frase descreve melhor o que e um LLM?

Conceitos-chave

Corte de treino

O conhecimento do modelo para na data em que ele foi treinado.

Ferramentas resolvem

Busca e leitura combatem alucinacao e desatualizacao.

Memoria persistente

Arquivos + busca dao ao Jarvis lembranca entre conversas.

LLM + camadas

Um Jarvis e o cerebro mais as camadas que o tornam util.

๐ŸŽฏ Resumo do modulo

โœ“
O que e um LLM โ€” o "cerebro" de IA, um programa que preve a proxima palavra apos ler uma montanha de texto.
โœ“
Como ele pensa โ€” previsao estatistica, nao busca; por isso e criativo e por isso, as vezes, alucina.
โœ“
Contexto e tokens โ€” a janela de contexto e a "RAM" (limitada, esvazia ao sair) e tudo se mede e se cobra em tokens.
โœ“
Local vs nuvem e limites โ€” mesmo cerebro, lugares diferentes; e os limites (alucinar, desatualizar, esquecer) viram ferramentas e memoria.

Proximo modulo:

Modulo 1-3 โ€” De chatbot a agente: quando a IA passa a agir