Explication détaillée
Les LLM ne lisent pas des mots mais des tokens — environ ¾ d'un mot en anglais, plus en français. La facturation des APIs et la taille de la fenêtre de contexte se mesurent en tokens. Compter les tokens permet de prédire coût et limites.
Exemples
Le mot 'bonjour' ≈ 2 tokens
1 000 mots ≈ 1 300-1 500 tokens en français
GPT-4 facturé au million de tokens
Questions fréquentes
Comment compter mes tokens ?
Avec des bibliothèques comme tiktoken (OpenAI) ou les utilitaires fournis par chaque éditeur.
Termes associés
Prompt
Instruction en langage naturel envoyée à un modèle d'IA générative pour obtenir une réponse.
Embedding
Représentation vectorielle d'un texte, d'une image ou d'un objet, capturant son sens dans un espace numérique.
LLM (Large Language Model)
Modèle de langage entraîné sur d'immenses corpus de texte pour comprendre et générer du langage naturel.
Fenêtre de contexte
Nombre maximal de tokens qu'un modèle peut considérer à la fois en entrée et en sortie.
Dernière mise à jour : 15/07/2026