Mode d’emploi
- Collez le texte à envoyer. Les nombres de tokens, de caractères et de mots s’affichent aussitôt.
- Si c’est trop long, définissez le maximum de tokens ou de caractères par partie sous Découper en parties.
- Copiez chaque partie à tour de rôle dans le chat d’IA.
Explication des options
- Nombre de tokens
- Compté exactement avec le vocabulaire public o200k_base d’OpenAI, utilisé par GPT-4o, GPT-4.1, GPT-5 et la série o. Les tokeniseurs d’autres modèles donnent des nombres différents.
- Découpage
- Les coupures tombent d’abord entre les paragraphes, puis entre les phrases, et ne coupent à l’intérieur d’une phrase que si elle est trop longue à elle seule. La ligne Partie i/n compte dans la limite.
À quoi ressemblent les tokens, et la place que prennent les étiquettes de parties
Un token est un fragment de texte du vocabulaire du modèle, pas un mot. Nombres avec le vocabulaire o200k_base :
| Texte | Caractères | Tokens |
|---|---|---|
Hello, world! |
13 | 4 |
tokenization |
12 | 2 |
The quick brown fox jumps over the lazy dog. |
44 | 10 |
1234567890 |
10 | 4 |
https://example.com/a/b?c=d |
27 | 9 |
你好,世界 |
5 | 3 |
Les chiffres, les URL et le code se découpent en de nombreux tokens courts, et consomment donc davantage de votre limite qu’une prose ordinaire de même longueur.
Quand l’option « Ajouter une ligne « Partie 1/3 » au début de chaque partie » est activée, chaque partie commence par une ligne comme [Partie 2/3] suivie d’une ligne vide. L’outil réserve la place de la version la plus longue possible, [Partie 999/999] plus la ligne vide, qui coûte 7 tokens : le texte de chaque partie est donc coupé à votre Maximum par partie moins 7 tokens (ou moins 16 caractères quand on compte en caractères). Le chiffre affiché pour chaque partie inclut son étiquette, il ne dépasse donc jamais le maximum que vous avez défini.
Questions fréquentes
Combien de tokens fait un mot ?
En anglais, environ 0,75 mot par token en moyenne, mais cela varie. Les caractères par token affichés plus haut sont calculés d’après votre texte réel.
Les nombres pour Claude ou Gemini sont-ils exacts ?
Ils utilisent leurs propres tokeniseurs ; le nombre GPT affiché ici n’est donc qu’une indication, et c’est la consommation indiquée par la plateforme qui fait foi.
Mon texte est-il envoyé quelque part ?
Non. Le comptage et le découpage se font dans votre navigateur.
Confidentialité
Cet outil fonctionne entièrement dans votre navigateur. Vos fichiers et vos textes sont traités sur votre appareil et ne sont jamais envoyés à nos serveurs.