Алгоритми токенізації великих мовних моделей
Author
Довгань, О. А.
Овчинников, К. В.
Ovchynnykov, K. V.
Date
2025Metadata
Show full item recordCollections
Abstract
This work is dedicated to the review of algorithms for text tokenization of modern large language models Дана робота присвячена огляду алгоритмів текстової токенізації сучасних великих мовних моделей.
URI:
https://ir.lib.vntu.edu.ua//handle/123456789/43691

