AI 토큰 도구
AI 토큰 카운터 — ChatGPT, Claude, Gemini 외 (무료)
주요 AI 모델의 토큰을 한 번에 셉니다. 텍스트를 붙여넣고 ChatGPT/GPT-4o, Claude, Gemini, DeepSeek, Llama를 나란히 비교하며 글자 수와 단어 수도 실시간으로 봅니다.
- 비교 모델
- GPT · Claude · Gemini · DeepSeek · Llama
- GPT 정확도
- 정확 (tiktoken)
- 개인정보
- 브라우저에서 실행
- 경험칙
- 1 토큰 ≈ 4자 ≈ ¾ 단어
이 도구 소개
대형 언어 모델은 텍스트를 토큰으로 읽습니다. 토큰 하나는 영어 단어의 약 ¾, 또는 약 4자입니다. 모델은 토큰 단위로 과금하고 컨텍스트 창 한도도 토큰으로 두므로, 토큰 수를 보면 프롬프트가 들어갈지와 비용이 얼마일지 알 수 있습니다.
이 카운터는 한 화면에서 여러 모델을 비교합니다. OpenAI(GPT) 수치는 정확합니다(tiktoken BPE 인코딩). Claude, Gemini, DeepSeek, Llama는 토크나이저가 브라우저용으로 공개되지 않아 근사 추정입니다. 모든 것이 로컬에서 동작하며 텍스트는 기기를 벗어나지 않습니다.
모델마다 같은 텍스트를 조금씩 다르게 토큰화하므로 표의 수치가 다릅니다. 예산과 컨텍스트 창 계획에는 실제로 쓰는 모델로 비교하세요.
토큰이란?
토큰은 모델이 한 단위로 처리하는 텍스트 조각으로, 흔한 단어 전체이기도 하고 더 길거나 드문 단어의 일부이기도 하며, 공백과 문장부호는 따로 셉니다. 기준으로 영어는 토큰당 약 4자이며, CJK 언어와 소스 코드는 더 밀도가 높아 토큰을 더 씁니다.
토큰 대 단어 대 글자
단어와 글자는 사람이 세기 쉽지만, 모델은 토큰으로 과금하고 제한합니다. 영어 1,000 단어는 약 1,300 토큰, 1,000 토큰은 약 750 단어입니다. 정확한 수는 어휘·언어·서식에 따라 다르니 실제 텍스트를 붙여넣으세요.
API 호출 전에 토큰을 세는 이유
먼저 세면 컨텍스트 창 안에 유지하고(답변 잘림 방지), 비용을 정확히 예측하며, 지나치게 긴 프롬프트를 줄일 수 있습니다. LLM 개발에서 품질과 비용을 동시에 관리하는 가장 빠른 방법입니다.
사용 방법
- 텍스트 붙여넣기 — 프롬프트, 글, 코드 등을 상자에 넣습니다.
- 모델 선택 — 대표 수치용 모델을 고르거나 표에서 전체를 비교합니다.
- 수치 활용 — 컨텍스트 창 안에 유지하고 API 호출 전에 비용을 추정합니다.
- 복사 또는 지우기 — 텍스트를 다른 곳에 복사하거나 지우고 새 프롬프트를 시도합니다.
자주 묻는 질문
AI에서 토큰이란?
토큰은 텍스트 조각이며 보통 단어의 일부입니다. 영어에서는 1 토큰 ≈ 4자 ≈ ¾ 단어이며, CJK와 코드는 더 밀도가 높습니다.
어떤 모델이 정확한 수치를 주나요?
OpenAI/GPT 모델은 정확한 tiktoken 인코딩을 씁니다. Claude, Gemini, DeepSeek, Llama는 토크나이저가 브라우저용으로 공개되지 않아 근사 추정입니다.
1,000 단어는 몇 토큰?
영어로 약 1,300 토큰입니다. 위에 텍스트를 붙여넣으면 모델별 정확한 수치를 볼 수 있습니다.
이 AI 토큰 카운터는 무료인가요?
네 — 완전 무료이며 가입과 설치가 필요 없고 브라우저에서 동작합니다.
오프라인·비공개로 동작하나요?
계산은 로컬에서 이뤄지고 텍스트는 업로드되지 않습니다. 정확한 GPT 인코더는 CDN에서 한 번 불러오며, 실패하면 추정을 사용합니다.
왜 모델마다 수치가 다른가요?
각 모델이 자체 토크나이저를 쓰므로 같은 텍스트도 다른 수의 토큰으로 나뉩니다. 실제로 쓰는 모델로 비교하세요.