طريقة الاستخدام
- الصق النص الذي تريد إرساله. تظهر أعداد التوكنات والأحرف والكلمات فورًا.
- إن كان طويلًا، حدّد الحد الأقصى للتوكنات أو الأحرف لكل جزء ضمن «تقسيم إلى أجزاء».
- انسخ كل جزء بالترتيب إلى دردشة الذكاء الاصطناعي.
شرح الخيارات
- عدد التوكنات
- يُحسب بدقة بمفردات o200k_base العامة من OpenAI، التي تستخدمها GPT-4o وGPT-4.1 وGPT-5 وسلسلة o. تعطي مجزّئات النماذج الأخرى أعدادًا مختلفة.
- التقسيم
- يقع التقسيم بين الفقرات أولًا، ثم بين الجمل، ولا يقطع داخل جملة إلا إذا كانت طويلة جدًا بمفردها. ويدخل سطر «الجزء i/n» ضمن الحد.
كيف تبدو التوكنات، وكم مساحة تأخذ تسميات الأجزاء
التوكن قطعة من النص من مفردات النموذج، وليس كلمة. أعداد التوكنات بمفردات o200k_base:
| النص | الأحرف | التوكنات |
|---|---|---|
Hello, world! |
13 | 4 |
tokenization |
12 | 2 |
The quick brown fox jumps over the lazy dog. |
44 | 10 |
1234567890 |
10 | 4 |
https://example.com/a/b?c=d |
27 | 9 |
你好，世界 |
5 | 3 |
تنقسم الأرقام وعناوين URL والكود إلى توكنات قصيرة كثيرة، فتستهلك من حدّك أكثر من النثر العادي بالطول نفسه.
عند تفعيل خيار إضافة سطر «الجزء 1/3» في أعلى كل جزء، يبدأ كل جزء بسطر مثل [Part 2/3] يليه سطر فارغ. وتحجز الأداة مساحة لأطول صيغة ممكنة، [Part 999/999] مع السطر الفارغ، وتكلف 7 توكنات، فيُقتطع نص كل جزء إلى الحد الأقصى لكل جزء ناقص 7 توكنات (أو ناقص 16 حرفًا عند العدّ بالأحرف). والرقم المعروض لكل جزء يشمل تسميته، فلا يتجاوز أبدًا الحد الأقصى الذي ضبطته.
الأسئلة الشائعة
كم توكنًا في الكلمة الواحدة؟
في الإنجليزية نحو 0.75 كلمة لكل توكن في المتوسط، لكن الرقم يختلف. أما «عدد الأحرف لكل توكن» المعروض أعلاه فمحسوب من نصك الفعلي.
هل الأعداد دقيقة لـ Claude أو Gemini؟
لكل منهما مجزّئ خاص به، لذا فعدد GPT هنا مجرد تقدير؛ والعبرة برقم الاستخدام الذي تعرضه المنصة نفسها.
هل يُرفع نصي؟
لا. العدّ والتقسيم يتمان داخل متصفحك.
الخصوصية
تعمل هذه الأداة بالكامل داخل متصفحك. تُعالَج ملفاتك ونصوصك على جهازك ولا تُرفع أبدًا إلى خوادمنا.