Задание 11/11. Токен — это: а) готовый ответ, сохранённый в памяти модели; б) часть текста, для которой известны координаты в многомерном пространстве смыслов; в) числовая оценка правильности ответа; г) ссылка на интернет-источник.

Токен — это единица текста, на которые модель разбивает входные данные и ответы: это может быть слово, часть слова, знак препинания или другой фрагмент.

Ни один из предложенных вариантов не даёт точного определения. Ближе всего вариант б), однако координаты в многомерном пространстве относятся к представлениям токенов, а не к определению самого токена.