Cara menggunakan
- Tempel teks yang ingin Anda kirim. Jumlah token, karakter, dan kata langsung muncul.
- Jika terlalu panjang, atur “Maksimum per bagian” dalam token atau karakter di bawah “Bagi menjadi beberapa bagian”.
- Salin setiap bagian secara berurutan ke obrolan AI.
Penjelasan opsi
- Jumlah token
- Dihitung secara tepat dengan kosakata publik o200k_base milik OpenAI, yang dipakai GPT-4o, GPT-4.1, GPT-5, dan seri o. Tokenizer model lain memberi hasil berbeda.
- Pembagian
- Pemisahan dilakukan lebih dulu di antara paragraf, lalu di antara kalimat, dan hanya memotong di dalam kalimat yang terlalu panjang. Baris “Bagian i/n” ikut dihitung dalam batas.
Seperti apa token, dan seberapa banyak ruang yang dipakai label bagian
Token adalah potongan teks dari kosakata model, bukan kata. Jumlah dengan kosakata o200k_base:
| Teks | Karakter | Token |
|---|---|---|
Hello, world! |
13 | 4 |
tokenization |
12 | 2 |
The quick brown fox jumps over the lazy dog. |
44 | 10 |
1234567890 |
10 | 4 |
https://example.com/a/b?c=d |
27 | 9 |
你好，世界 |
5 | 3 |
Angka, URL, dan kode terpecah menjadi banyak token pendek, sehingga memakai lebih banyak batas Anda daripada prosa biasa dengan panjang yang sama.
Saat opsi “Tambahkan baris “Bagian 1/3” di awal setiap bagian” aktif, setiap bagian dimulai dengan baris seperti [Bagian 2/3] diikuti baris kosong. Alat ini mencadangkan ruang untuk versi terpanjang yang mungkin, [Bagian 999/999] ditambah baris kosong, yang memakan 7 token, sehingga teks tiap bagian dipotong menjadi Maksimum per bagian Anda dikurangi 7 token (atau dikurangi 16 karakter saat menghitung per karakter). Angka yang ditampilkan untuk tiap bagian sudah termasuk labelnya, sehingga tidak pernah melebihi maksimum yang Anda atur.
Pertanyaan yang sering diajukan
Satu kata itu berapa token?
Dalam bahasa Inggris rata-rata sekitar 0,75 kata per token, tetapi bervariasi. Angka “Karakter per token” dihitung dari teks Anda yang sebenarnya.
Apakah hitungan untuk Claude atau Gemini akurat?
Keduanya memakai tokenizer sendiri, jadi hitungan GPT di sini hanya panduan; yang berlaku adalah angka penggunaan dari platform itu sendiri.
Apakah teks saya diunggah?
Tidak. Penghitungan dan pembagian dilakukan di browser Anda.
Privasi
Alat ini berjalan sepenuhnya di browser Anda. File dan teks Anda diproses di perangkat Anda dan tidak pernah diunggah ke server kami.