Токен

То́кен — найменша смислова одиниця тексту, що використовується для обробки природної мови, зокрема, великими мовними моделями.

Література

1. Словник термінів у сфері штучного інтелекту 2.0 / упорядники: Авдєєва Т., Андрієнко О., Артюхов А., Бистрицька А., Герасимяк В., Дубно О., Кобрін А., Кравець І., Краковецький О., Махачашвілі Р., Мішкін Д., Сіденко Є., Турута О., Чумаченко Д., Шабанов О. Київ : Міністерство цифрової трансформації України, 2026. 37 с.

Автор ВУЕ

• Редакція ВУЕ

Покликання на цю статтю: Токен // Велика українська енциклопедія. URL: https://vue.gov.ua/Токен (дата звернення: 11.10.2026).

Статус гасла: Оприлюднено
Оприлюднено: 22.06.2026