
Fiche de révision
Token
Un token est un petit fragment de texte qu’une IA lit ou écrit. Un mot peut correspondre à un ou plusieurs tokens, et la ponctuation peut également compter. Les produits d’IA utilisent les tokens pour fixer des limites et mesurer l’utilisation : un token n’est donc pas la même chose qu’un mot.




