Задание 5/11. Токен — это: 1) готовый ответ, сохранённый в памяти модели; 2) часть текста, для которой известны координаты в многомерном пространстве смыслов; 3) числовая оценка правильности ответа; 4) ссылка на интернет-источник.

Правильный вариант — 2. В языковых моделях токен — это единица текста (например, слово, часть слова или символ), которой соответствует числовое представление, используемое моделью для обработки текста.