Definição
Tokens são os pedaços sobre os quais um LLM opera. Um token pode ser uma palavra, parte de uma palavra, um número ou pontuação. Preços, janelas de contexto e limites de taxa são todos medidos em tokens. Como regra geral: 1.000 tokens são cerca de 750 palavras de inglês. Idiomas com escritas não latinas (chinês, japonês, árabe) podem usar significativamente mais tokens por palavra.
Exemplo
A frase "Vedwix constrói produtos de IA" é aproximadamente 7 tokens.
Como a Vedwix usa isto
Modelamos o uso de tokens antecipadamente para qualquer funcionalidade de IA para que surpresas de custo não aconteçam em escala.
Trabalhando em um projeto de Token?
Token.
Descreva seu projeto em três frases ou menos.
Iniciar um projeto