Concept LLM & agents
token
Que veut dire « token » dans le jargon de l’IA ?
L'unité élémentaire que manipule le modèle : un mot, un morceau de mot ou un signe. Tout se compte en tokens — le contexte, le coût, la vitesse.
Autres formes : token, Token, jeton.
Le token est l'unité de texte que le modèle compte et manipule réellement — un mot peut valoir un ou plusieurs tokens. Le budget de tokens consommés, restants et disponibles se rapporte typiquement à la fin d'une tâche pour suivre le coût réel d'une boucle agentique.
Exemple d’usage : Un rapport de fin de tâche mentionne systématiquement trois chiffres : tokens utilisés, budget alloué (ou « illimité »), tokens restants — pour suivre le coût réel d'une boucle agentique une fois l'objectif atteint.
Laisser un commentaire