Technique Atualizado 2026-04

Token

Definição

Um token é a unidade básica processada por um LLM. É um fragmento de palavra, pontuação ou caractere que o modelo usa para entender e gerar texto.

Perguntas frequentes

Quantas palavras tem um token?
Em média, 1 token ≈ 0,75 palavra em inglês. A palavra 'hello' é 1 token, 'artificial' são 3 tokens. Idiomas não latinos consomem mais tokens por palavra.
Por que os tokens são importantes?
Os LLMs cobram pelo uso de tokens. A janela de contexto (o que o modelo consegue ler de uma vez) é medida em tokens. O Claude tem 200K tokens de contexto, o Gemini 1M.