Token é a unidade de texto que um modelo de linguagem lê e escreve: um pedaço de palavra, uma palavra curta ou um sinal de pontuação. É também a unidade usada para cobrar o uso de modelos de I.A. por API.
Antes de processar um texto, o modelo o divide em tokens. Em inglês, um token corresponde em média a cerca de três quartos de uma palavra; em português, costuma ser preciso mais tokens para o mesmo conteúdo. Os provedores cobram separadamente os tokens de entrada (o que você envia, incluindo instruções e documentos) e os de saída (o que o modelo responde), por isso enxugar instruções e evitar reenviar documentos inteiros reduz o custo de um agente em produção.
Converse com a equipe SINOON e descubra qual produto, curso ou serviço faz mais sentido pro seu momento.