Но на данный момент вершина технологии генерации текстов, это предсказание.
На основе обучения нейросети на существующих текстах.
То есть загружаются книги.
И нейросеть создает хэш-таблицу.
На основе которой генерирует текст.
То есть к примеру...
"А"
Нейросеть смотрит хеш таблицы.
Так, после "а" с вероятностью 90% следует ",".
Значит ставим ",".
И так далее, только смотрится не только "," но и "А" и так далее...