토큰이란 무엇일까요?
Coddy AI Prompts 여정의 기초 섹션에 포함된 레슨. 23개 중 7번째.
AI는 여러분의 텍스트를 토큰이라는 더 작은 조각으로 나눕니다.
토큰을 AI가 글을 읽는 기본 단위라고 생각해 보세요. 여러분이 문장을 단어로 나누듯이, AI는 텍스트를 토큰으로 나눕니다.
그런데 반전이 있습니다. 토큰이 항상 완전한 단어인 것은 아닙니다. 토큰은 단어일 수도, 단어의 일부나 글자 하나일 수도 있습니다.
예를 들어 hello라는 단어는 보통 토큰 하나입니다. 하지만 uncomfortable 같은 긴 단어는 un, comfort, able처럼 여러 토큰으로 나뉠 수 있습니다. AI는 토큰의 순서를 기억하고, 각 토큰 앞에 있는 토큰들을 이용해 그 의미를 파악합니다. 응답은 한 번에 토큰 하나씩 작성합니다.
챌린지
채팅의 모든 응답에는 사용한 토큰 수가 표시됩니다. AI 답변 아래에 있는 출력 토큰 수를 확인해 보세요.
AI가 출력 토큰 10개 이하로 답하게 만들어 보세요. 무엇이든 물어봐도 되지만, AI의 답이 아주 짧아야 합니다.
AI의 응답은 다음 조건을 만족해야 합니다.
- 출력 토큰 10개 이하 사용
이 레슨에는 짧은 퀴즈가 포함되어 있습니다. 레슨을 시작해 문제를 풀고 진행 상황을 기록하세요.