Chuyển đến nội dung
ToolMug

Đếm token và chia nhỏ văn bản

Khung chat AI có giới hạn độ dài; vượt quá thì văn bản bị cắt hoặc báo lỗi. Hãy kiểm tra số token ở đây trước; nếu quá dài, chia thành các phần có nhãn “Phần 1/3” và gửi lần lượt từng phần.

Chạy trong trình duyệt — không có dữ liệu nào bạn nhập bị tải lên

Token GPT
Đang tải…
Ký tự
0
Từ
0
Ký tự trên mỗi token
—

Token được đếm chính xác bằng bộ từ vựng o200k_base của OpenAI (GPT-4o, GPT-4.1, GPT-5 và dòng o). Claude, Gemini, DeepSeek, Qwen và các mô hình khác dùng bộ tách token riêng nên số đếm sẽ khác — hãy xem đây là con số tham khảo.

Chia thành nhiều phần

Việc đếm diễn ra ngay trong trình duyệt của bạn; văn bản không bao giờ được tải lên.

Cách sử dụng

  1. Dán văn bản bạn muốn gửi. Số token, ký tự và từ hiện ra ngay.
  2. Nếu quá dài, đặt “Tối đa mỗi phần” theo token hoặc ký tự trong mục “Chia thành nhiều phần”.
  3. Lần lượt sao chép từng phần vào khung chat AI.

Giải thích tùy chọn

Số token
Được đếm chính xác bằng bộ từ vựng công khai o200k_base của OpenAI, dùng cho GPT-4o, GPT-4.1, GPT-5 và dòng o. Bộ tách token của các mô hình khác cho số đếm khác.
Cách chia
Chỗ cắt ưu tiên nằm giữa các đoạn, rồi giữa các câu, và chỉ cắt giữa câu khi bản thân câu đó quá dài. Dòng “Phần i/n” cũng được tính vào giới hạn.

Token trông như thế nào, và nhãn các phần chiếm bao nhiêu chỗ

Token là một đoạn văn bản trong từ vựng của mô hình, không phải một từ. Số đếm với từ vựng o200k_base:

Văn bản Số ký tự Số token
Hello, world! 13 4
tokenization 12 2
The quick brown fox jumps over the lazy dog. 44 10
1234567890 10 4
https://example.com/a/b?c=d 27 9
你好,世界 5 3

Chữ số, URL và mã nguồn bị tách thành nhiều token ngắn, nên chúng tốn nhiều giới hạn của bạn hơn văn xuôi thông thường cùng độ dài.

Khi tùy chọn “Thêm dòng “Phần 1/3” ở đầu mỗi phần” được bật, mỗi phần bắt đầu bằng một dòng như [Part 2/3] theo sau là một dòng trống. Công cụ dành chỗ cho phiên bản dài nhất có thể, [Part 999/999] cộng dòng trống, tốn 7 token, nên văn bản của mỗi phần bị cắt còn Tối đa mỗi phần của bạn trừ 7 token (hoặc trừ 16 ký tự khi đếm theo ký tự). Con số hiển thị cho mỗi phần đã bao gồm nhãn của nó, nên không bao giờ vượt quá mức tối đa bạn đặt.

Câu hỏi thường gặp

Một từ là bao nhiêu token?

Với tiếng Anh, trung bình khoảng 0,75 từ mỗi token nhưng có thể thay đổi. Chỉ số “Ký tự trên mỗi token” được tính từ chính văn bản của bạn.

Số đếm cho Claude hay Gemini có chính xác không?

Chúng dùng bộ tách token riêng nên số GPT ở đây chỉ để tham khảo; con số do chính nền tảng đó hiển thị mới là con số tính phí.

Văn bản của tôi có bị tải lên không?

Không. Việc đếm và chia đều diễn ra trong trình duyệt của bạn.

Quyền riêng tư

Công cụ này chạy hoàn toàn trong trình duyệt của bạn. Tệp và văn bản được xử lý ngay trên thiết bị và không bao giờ được tải lên máy chủ của chúng tôi.

Công cụ liên quan