Всё-таки не целые слова, а токены - это местами целые слова, а местами элементы слов. Если я правильно понимаю, то для визуальных нейронок всё проще, потому что там токен - всегда пиксель, а не группа пикселей.