Qu'est-ce que Token / jeton ?

Plus petite unité de texte manipulée par un modèle : mot, fragment de mot ou caractère.