Definición·
Fundamentos

Token

Unidad de texto (a menudo un fragmento de palabra) —un token— que un modelo de lenguaje maneja tanto en la entrada como en la salida.

Explicación detallada

Los LLM no leen palabras sino tokens —aprox. 3/4 de una palabra en inglés, más en francés. La facturación de las APIs y el tamaño de la ventana de contexto se miden en tokens. Contar los tokens permite predecir coste y límites.

Ejemplos

La palabra 'bonjour' ≈ 2 tokens
1 000 palabras ≈ 1 300-1 500 tokens en francés
GPT-4 facturado por millón de tokens

Preguntas frecuentes

¿Cómo contar mis tokens?

Con bibliotecas como tiktoken (OpenAI) o los utilitarios que proporciona cada proveedor.

Términos relacionados

Última actualización: 15/7/2026

Talent AI

Pasa de la teoría a la práctica

Publica una misión o únete a la comunidad de los mejores expertos en IA, Data y Machine Learning.