토큰이 뭐길래 — 프롬프트 토큰 수 세고 비용 계산하는 법

AI API 요금표를 보면 항상 '토큰'이 등장합니다. 토큰을 모르면 비용을 가늠할 수 없습니다. 이 글에서 토큰의 개념과 세는 법, 그리고 비용 계산까지 한 번에 정리합니다.

토큰이란?

토큰은 모델이 텍스트를 처리하는 최소 단위로, 단어보다 작은 조각입니다. 대략적인 경험칙은:

• 영어: 1토큰 ≈ 4자 (0.25토큰/자)
• 한국어: 1자 ≈ 1.5토큰 (영어의 약 5~6배)

즉 같은 의미라도 한국어가 영어보다 토큰을 더 많이 소모합니다. 한글로 긴 프롬프트를 쓰면 영어보다 비용이 더 나올 수 있다는 뜻입니다.

토큰 수가 중요한 이유

API 비용은 입력 토큰 + 출력 토큰으로 계산됩니다. 프롬프트(입력)가 길수록, 답변(출력)이 길수록 비용이 올라갑니다. 특히 시스템 프롬프트나 긴 문맥을 매 요청마다 보내면 토큰이 누적되어 비용이 빠르게 늘어납니다.

비용을 줄이는 토큰 관리

1. 불필요한 문맥 제거: 반복되는 예시·지시문을 줄이면 입력 토큰 절감
2. 출력 길이 제한: max_tokens로 답변 길이를 제어(출력 단가가 비싸기 때문)
3. 프롬프트 캐싱: 동일한 시스템 프롬프트는 캐싱으로 입력 비용 절감

무료 토큰 카운터로 바로 확인

텍스트를 붙여넣으면 예상 토큰 수와 모델별 입력 비용을 추정합니다.

👉 프롬프트 토큰 카운터

전체 호출 비용은 AI API 비용 계산기에서 입력·출력 토큰을 함께 넣어 계산하세요. 토큰 수는 경험칙 추정으로 모델 토크나이저에 따라 ±30% 오차가 있을 수 있습니다.