«Токен» - что это вообще такое и при чем тут большие языковые моделиПро интересное
«Токен» — что это вообще такое и при чем тут большие языковые модели
Слово «токен» в последнее время лезет отовсюду. Из нейросетей, из крипты, из корпоративной переписки, где кто-то вдруг «токенизирует процесс онбординга» — серьезно, слышал своими ушами. И везде оно означает разное. Но главная площадка, где токен сейчас рулит, — это, конечно, большие языковые модели.
Авторский проект Романа Гвоздикова