Задание 8/11. Токен — это: 1) готовый ответ, сохранённый в памяти модели; 2) часть текста, для которой известны координаты в многомерном пространстве смыслов; 3) числовая оценка правильности ответа; 4) ссылка на интернет-источник.

Токен — единица текста, на которые языковая модель разбивает входные данные и ответы. Ни один из предложенных вариантов не даёт корректного определения: токеном может быть слово, часть слова, знак пунктуации или другой фрагмент текста.

Ответ: среди вариантов нет правильного; токен — фрагмент текста, обрабатываемый моделью.