Qu'est-ce qu'un token ?
Fait partie de la section Fondamentaux du Journey AI Prompts de Coddy — leçon 7 sur 23.
L'IA divise votre texte en plus petits morceaux appelés jetons.
Considérez les jetons (tokens) comme l'unité de lecture de base de l'IA. Tout comme vous pourriez diviser une phrase en mots, l'IA divise le texte en jetons.
Mais voici la particularité : les tokens ne sont pas toujours des mots entiers. Un token peut être un mot, une partie de mot, ou même simplement un seul caractère.
Par exemple, le mot hello est généralement un seul jeton. Mais un mot plus long comme uncomfortable pourrait être divisé en plusieurs jetons : un, comfort, able. L'IA traite chaque jeton séparément, l'un après l'autre.
Défi
Faites en sorte que l'IA réponde avec exactement 4 mots ou moins, où chaque mot ne possède qu'une seule syllabe. La réponse doit être une pensée ou une déclaration complète.
La réponse de l'IA doit :
- Contenir 4 mots (ou moins)
- Ne contenir aucun signe de ponctuation, à l'exception d'un seul point final
Aide-mémoire
L'IA divise le texte en plus petits morceaux appelés tokens (jetons), qui sont l'unité de lecture de base de l'IA.
Les tokens ne sont pas toujours des mots entiers. Un token peut être :
- Un mot complet (par ex.,
hello) - Une partie d'un mot (par ex.,
uncomfortablepourrait être divisé enun,comfort,able) - Un seul caractère
L'IA traite chaque token séparément, l'un après l'autre.
Commencez ce défi avec le tuteur IA de Coddy
Testez-vousCette leçon comprend un petit quiz. Commencez la leçon pour y répondre et suivre votre progression.
Toutes les leçons de Fondamentaux
2Comment l'IA vous lit — Les Tokens
Qu'est-ce qu'un token ?Mots ≠ TokensPourquoi le nombre de tokens est importantLa fenêtre de contexteLes tokens dans d'autres languesLes tokens spéciaux que vous ne voyez jamais3Rédiger vos premiers prompts
L'IA parle Markdown (par défaut)Contrôler le format de sortieContrôler le ton et le styleQuand l'IA vous ignore