Glosario de IA
Token
Un token es el trozo de texto con el que un modelo de lenguaje lee y escribe: a menudo parte de una palabra, una palabra corta o un signo de puntuación.
Antes de que el modelo vea tu prompt, un tokenizador lo corta en tokens y da un número a cada uno. «Desafortunadamente» son varios tokens; «sol» suele ser uno.
Pagas y te limitan por tokens: una API cobra los tokens que envías y los que recibes, y la ventana de contexto se mide en tokens. Contarlos antes de la llamada mantiene el presupuesto a raya.
El español y el código suelen gastar más tokens por palabra que el inglés, así que un presupuesto calculado con texto en inglés puede quedarse corto.
Apréndelo con práctica
Estas lecciones gratuitas lo enseñan con órdenes para ejecutar en un laboratorio y tareas corregidas. Se leen completas sin cuenta.