本文へスキップ
ToolMug

トークンカウンターとテキスト分割

AI チャットには入力の長さ制限があり、超えると文章が切り捨てられたりエラーになったりします。まずここでトークン数を確認し、長すぎる場合は「パート 1/3」と付けて分割し、順番に送りましょう。

ブラウザ内で動作 — 入力した内容はアップロードされません

GPT トークン数
読み込み中…
文字数
0
単語数
0
1 トークンあたりの文字数
—

トークン数は OpenAI の o200k_base 語彙(GPT-4o、GPT-4.1、GPT-5、o シリーズ)で正確に数えています。Claude、Gemini、DeepSeek、Qwen などは独自のトークナイザーを使うため数え方が異なります。目安としてご利用ください。

パートに分割

計算はお使いのブラウザ内で行われ、テキストがアップロードされることはありません。

使い方

  1. 送りたいテキストを貼り付けます。トークン数、文字数、単語数がすぐに表示されます。
  2. 長すぎる場合は、「パートに分割」で 1 パートあたりの上限(トークン数または文字数)を設定します。
  3. 各パートを順番に AI チャットへコピーします。

オプションの説明

トークン数
GPT-4o、GPT-4.1、GPT-5、o シリーズが使う OpenAI 公開の o200k_base 語彙で正確に数えます。ほかのモデルのトークナイザーでは数え方が異なります。
分割
まず段落の間、次に文の間で分け、それ自体が長すぎる文の途中だけで切ります。「パート i/n」の行も上限に含まれます。

トークンの見え方と、パート見出しが占める分量

トークンは、モデルの語彙に含まれるテキストのかたまりであり、単語ではありません。o200k_base 語彙での数え方は次のとおりです。

テキスト 文字数 トークン数
Hello, world! 13 4
tokenization 12 2
The quick brown fox jumps over the lazy dog. 44 10
1234567890 10 4
https://example.com/a/b?c=d 27 9
你好,世界 5 3

数字、URL、コードは短いトークンにたくさん分かれるため、同じ長さの普通の文章より上限を多く消費します。

「各パートの先頭に「パート 1/3」の行を追加」オプションをオンにすると、各パートの先頭に [パート 2/3] のような行と空行が付きます。ツールは、起こりうる最も長い形である [パート 999/999] と空行ぶんの領域を確保します。これは 7 トークンかかるため、各パートのテキストは「1 パートの上限」から 7 トークン(文字数で数える場合は 16 文字)を引いた長さに切り詰められます。各パートに表示される数値には見出しも含まれるので、設定した上限を超えることはありません。

よくある質問

1 単語は何トークンですか?

英語では平均しておよそ 1 トークンあたり 0.75 語ですが、テキストによって変わります。上に表示される「1 トークンあたりの文字数」は、実際に貼ったテキストから計算しています。

Claude や Gemini のトークン数も正確ですか?

それぞれ独自のトークナイザーを使うため、ここの GPT の数値は目安です。実際の使用量は各サービスの表示で確認してください。

テキストはアップロードされますか?

いいえ。カウントも分割もお使いのブラウザ内で行われます。

プライバシー

このツールはすべてブラウザ内で動作します。ファイルやテキストはお使いの端末上で処理され、当サイトのサーバーにアップロードされることはありません。

関連ツール