토큰 계산기와 텍스트 나누기

사용 방법

1. 보낼 텍스트를 붙여넣으세요. 토큰, 글자, 단어 수가 바로 표시돼요.
2. 너무 길면 여러 부분으로 나누기에서 부분당 최대 토큰 또는 글자 수를 정하세요.
3. 각 부분을 차례로 AI 채팅에 복사하세요.

옵션 설명

토큰 수

GPT-4o, GPT-4.1, GPT-5, o 시리즈가 쓰는 OpenAI 공개 o200k_base 어휘로 정확하게 세요. 다른 모델의 토크나이저는 수치가 달라요.

나누기

먼저 문단 사이, 그다음 문장 사이에서 나누고, 한 문장 자체가 너무 길 때만 문장 안을 잘라요. Part i/n 줄도 제한에 포함돼요.

토큰은 어떻게 생겼고, 부분 라벨은 얼마나 차지할까

토큰은 단어가 아니라 모델 어휘에 있는 텍스트 조각이에요. o200k_base 어휘로 센 결과는 다음과 같아요.

숫자, URL, 코드는 짧은 토큰 여러 개로 쪼개지므로 같은 길이의 일반 글보다 한도를 더 많이 써요.

“각 부분 맨 위에 “Part 1/3” 줄 추가” 옵션을 켜면 각 부분이 [Part 2/3] 같은 줄과 빈 줄로 시작해요. 도구는 가능한 가장 긴 형태인 [Part 999/999]와 빈 줄을 위해 공간을 확보하는데, 이는 7토큰이에요. 그래서 각 부분의 텍스트는 부분당 최대에서 7토큰을 뺀 길이(글자 수로 세면 16글자를 뺀 길이)로 잘려요. 각 부분에 표시되는 수치는 라벨을 포함하므로 설정한 최대를 넘지 않아요.

자주 묻는 질문

개인정보 보호

이 도구는 전적으로 브라우저에서 실행돼요. 파일과 텍스트는 기기에서 처리되며 서버로 업로드되지 않아요.