Aller au contenu
ToolMug

Compteur de tokens et découpeur de texte

Les chats d’IA ont une limite de longueur ; la dépasser tronque le texte ou provoque une erreur. Vérifiez d’abord le nombre de tokens ici ; si c’est trop long, découpez en parties libellées Partie 1/3 et envoyez-les une par une.

Fonctionne dans votre navigateur — rien de ce que vous saisissez n’est envoyé

Tokens GPT
Chargement…
Caractères
0
Mots
0
Caractères par token
—

Les tokens sont comptés exactement avec le vocabulaire o200k_base d’OpenAI (GPT-4o, GPT-4.1, GPT-5 et la série o). Claude, Gemini, DeepSeek, Qwen et d’autres modèles utilisent leurs propres tokeniseurs, leurs chiffres diffèrent donc : prenez ce résultat comme une indication.

Découper en parties

Le comptage se fait dans votre navigateur ; le texte n’est jamais envoyé.

Mode d’emploi

  1. Collez le texte à envoyer. Les nombres de tokens, de caractères et de mots s’affichent aussitôt.
  2. Si c’est trop long, définissez le maximum de tokens ou de caractères par partie sous Découper en parties.
  3. Copiez chaque partie à tour de rôle dans le chat d’IA.

Explication des options

Nombre de tokens
Compté exactement avec le vocabulaire public o200k_base d’OpenAI, utilisé par GPT-4o, GPT-4.1, GPT-5 et la série o. Les tokeniseurs d’autres modèles donnent des nombres différents.
Découpage
Les coupures tombent d’abord entre les paragraphes, puis entre les phrases, et ne coupent à l’intérieur d’une phrase que si elle est trop longue à elle seule. La ligne Partie i/n compte dans la limite.

À quoi ressemblent les tokens, et la place que prennent les étiquettes de parties

Un token est un fragment de texte du vocabulaire du modèle, pas un mot. Nombres avec le vocabulaire o200k_base :

Texte Caractères Tokens
Hello, world! 13 4
tokenization 12 2
The quick brown fox jumps over the lazy dog. 44 10
1234567890 10 4
https://example.com/a/b?c=d 27 9
你好,世界 5 3

Les chiffres, les URL et le code se découpent en de nombreux tokens courts, et consomment donc davantage de votre limite qu’une prose ordinaire de même longueur.

Quand l’option « Ajouter une ligne « Partie 1/3 » au début de chaque partie » est activée, chaque partie commence par une ligne comme [Partie 2/3] suivie d’une ligne vide. L’outil réserve la place de la version la plus longue possible, [Partie 999/999] plus la ligne vide, qui coûte 7 tokens : le texte de chaque partie est donc coupé à votre Maximum par partie moins 7 tokens (ou moins 16 caractères quand on compte en caractères). Le chiffre affiché pour chaque partie inclut son étiquette, il ne dépasse donc jamais le maximum que vous avez défini.

Questions fréquentes

Combien de tokens fait un mot ?

En anglais, environ 0,75 mot par token en moyenne, mais cela varie. Les caractères par token affichés plus haut sont calculés d’après votre texte réel.

Les nombres pour Claude ou Gemini sont-ils exacts ?

Ils utilisent leurs propres tokeniseurs ; le nombre GPT affiché ici n’est donc qu’une indication, et c’est la consommation indiquée par la plateforme qui fait foi.

Mon texte est-il envoyé quelque part ?

Non. Le comptage et le découpage se font dans votre navigateur.

Confidentialité

Cet outil fonctionne entièrement dans votre navigateur. Vos fichiers et vos textes sont traités sur votre appareil et ne sont jamais envoyés à nos serveurs.

Outils similaires