Aller au contenu

Compteur de tokens : vois comment une IA découpe ton texte

Mis à jour le

Une IA ne lit pas des mots mais des tokens : des morceaux de mots. Tape ou colle ton texte ci-dessous pour voir combien il en contient et où passent les coupures. En français, compte en général un peu plus d'un token par mot, souvent entre 1,5 et 2.

Chargement du découpage…

Rien n'est envoyé : le calcul se fait dans ton navigateur, avec le découpage « o200k » publié par OpenAI. Les autres IA (Claude, Gemini, Mistral…) découpent un peu différemment : prends ce chiffre comme un ordre de grandeur.

Pour aller plus loin : le parcours « Les coulisses » (API, tokens, prix).

C'est quoi un token ?

Un token est un petit morceau de texte : un mot court entier, un bout de mot long, une ponctuation ou une espace. Les IA découpent tout ce que tu écris en tokens avant de le lire, et écrivent leur réponse token par token. Voir aussi le mot « token » dans notre lexique.

Pourquoi compter les tokens ?

Parce que tout se mesure en tokens : la longueur qu'une IA peut lire d'un coup (sa fenêtre de contexte), les limites des versions gratuites, et le prix quand on utilise une IA par API, facturé au million de tokens.

Pourquoi le français fait-il plus de tokens que l'anglais ?

Les découpages ont été construits surtout à partir de textes anglais : les mots anglais courants tiennent souvent en un seul token, alors que les mots français, avec leurs accents et leurs terminaisons, sont plus souvent coupés en plusieurs morceaux.

Le chiffre est-il le même pour ChatGPT, Claude et Gemini ?

Non. Chaque éditeur a son propre découpage. Ce compteur utilise celui publié par OpenAI (« o200k ») : pour Claude, Gemini ou Mistral, le nombre réel sera un peu différent, mais du même ordre.

Mon texte est-il envoyé quelque part ?

Non. Le calcul se fait entièrement dans ton navigateur : rien ne part sur Internet.