Menu
CoddyTech

Что такое токены?

Часть раздела Основы путешествия по AI Prompts на Coddy. Урок 7 из 23.

ИИ разбивает ваш текст на более мелкие части, называемые токенами.

Считайте токены базовыми единицами чтения для ИИ. Подобно тому как вы можете разбить предложение на слова, ИИ разбивает текст на токены.

Но вот в чём загвоздка: токены не всегда представляют собой целые слова. Токеном может быть слово, часть слова или даже всего один символ.

Например, слово hello обычно состоит из одного токена. Но более длинное слово, например uncomfortable, может быть разбито на несколько токенов: un, comfort, able. ИИ отслеживает порядок токенов и использует токены, стоящие перед каждым из них, чтобы определить его значение. Ответ он пишет по одному токену за раз.

challenge icon

Задание

Каждый ответ в чате показывает, сколько токенов он использовал. Найдите число выходных токенов под ответом ИИ.

Попросите ИИ ответить, используя не более 10 выходных токенов. Спрашивайте о чём угодно, но пусть ответ будет очень коротким.

Ответ ИИ должен:

  • Содержать не более 10 выходных токенов
bugsy Main icon

Начните это задание с ИИ-наставницей Coddy

Что такое Bugsy?
quiz iconПроверьте себя

В этом уроке есть небольшой тест. Начните урок, чтобы ответить на вопросы и сохранить прогресс.

Все уроки раздела Основы