플래시카드

토큰

토큰은 AI가 읽거나 쓰는 작은 텍스트 단위입니다. 단어 하나가 토큰 하나일 수도, 여러 개일 수도 있고 문장 부호도 토큰으로 셀 수 있습니다. AI 제품은 토큰을 기준으로 한도를 정하고 사용량을 측정하므로 토큰 수와 단어 수는 같지 않습니다.