トークンとは？
CoddyのAI Promptsジャーニー「基礎」セクションの一部。レッスン 7/23。
AIはテキストをトークンと呼ばれる小さな部分に分割します。
トークンをAIが読解するための基本単位と考えてみましょう。あなたが文章を単語に分解するのと同じように、AIはテキストをトークンに分解します。
しかし、ここにひねりがあります。トークンは常に単語全体であるとは限りません。トークンは、単語、単語の一部、あるいは単一の文字である場合もあります。
例えば、hello という単語は通常1つのトークンです。しかし、uncomfortable のような長い単語は、un、comfort、able といった複数のトークンに分割される場合があります。AIは各トークンを1つずつ順番に処理します。
チャレンジ
AIが4語以下、かつ各単語が1音節のみで回答するようにしてください。回答は完全な意見または文である必要があります。
AIの回答は以下の要件を満たす必要があります:
- 4語以下であること
- 文末の1つのピリオドを除き、句読点を含まないこと
CoddyのAIチューターとこのチャレンジを始めよう
腕試しこのレッスンには短いクイズがあります。レッスンを始めて解答し、進捗を記録しましょう。