トークンとは？
CoddyのAI Promptsジャーニー「基礎」セクションの一部。レッスン 7/23。
AIは、テキストをトークンと呼ばれる小さな単位に分割します。
トークンをAIが読み取る際の基本単位だと考えてください。文章を単語に分けるのと同じように、AIはテキストをトークンに分けます。
しかし、ここが意外な点です。トークンは必ずしも単語全体とは限りません。トークンは単語の場合もあれば、単語の一部、あるいはたった1文字の場合さえあります。
たとえば、hello という単語は通常、1つのトークンです。しかし、uncomfortable のような長い単語は、un、comfort、able という複数のトークンに分割されることがあります。AIは各トークンを1つずつ順番に処理します。
チャレンジ
AIに、各語が1音節 בלבדの4語以下で正確に応答させてください。応答は、完全な考えまたは陳述にしてください。
AIの応答は次の条件を満たす必要があります：
- 4語（またはそれ以下）を含むこと
- 末尾のピリオド1つを除き、句読点を一切含まないこと
CoddyのAIチューターとこのチャレンジを始めよう
腕試しこのレッスンには短いクイズがあります。レッスンを始めて解答し、進捗を記録しましょう。