トークンとは?
CoddyのAI Promptsジャーニー「基礎」セクションの一部。レッスン 7/23。
AIはテキストをトークンと呼ばれる小さな断片に分割します。
トークンは、AIが読み取る基本単位だと考えてください。文を単語に分けるのと同じように、AIはテキストをトークンに分けます。
しかし、ここが意外なところです。トークンは必ずしも単語全体とは限りません。トークンは単語の場合もあれば、単語の一部や、たった1文字の場合もあります。
たとえば、helloという単語は通常、1つのトークンです。しかし、uncomfortableのような長い単語は、複数のトークンに分割されることがあります。un、comfort、ableのように分割されます。AIは各トークンを1つずつ順番に処理します。
チャレンジ
チャットの各返信には、使用したトークン数が表示されます。AIの回答の下にある出力トークンの数を確認してください。
AIが出力トークンを最大10個使って回答するようにしてください。好きなことを何でも尋ねてかまいませんが、返信がとても短くなるようにしてください。
AIの回答は次の条件を満たす必要があります:
- 出力トークンを10個以下にする
このレッスンには短いクイズがあります。レッスンを始めて解答し、進捗を記録しましょう。