Каков самый простой способ «предсказать следующее слово»? Казалось бы — на человеческий взгляд — смоделировать, хотя бы грубо, самого автора. Его мотивы и личность.
Это ложное утверждение. Ну или в лучшем случае очень сомнительное недоказанное. Прикинь такая нейронка моделирует всё человечество, ага. Потому что обучается на стапятиста мильярдах текстов из инета, написанных миллиардом-другим разных людей. Нет, конечно, это так не работает.
2) что LLM на самом деле для предсказания текста всё-таки моделируют внутри маленького гомункулуса-автора, но не говорят об этом.
См. выше, чисто по инфосложности это так не работает.
1) что мы, действуя как тупые нейронки, моделируем предсказываемый нами объект абсолютно неправильно почти на всех уровнях;
1) Откуда-то взялось утверждение, что искусственные нейронки МОДЕЛИРУЮТ. С - сомнительно; это не значит, что они не могут получать результаты, схожие с тем, как если бы моделировали, просто берёшь стопицот нечётких если-то и...
2) На всех не на всех, но на многих уровнях мы моделируем мир неправильно.
#писательское
В общем, все было очень и очень плохо в последние дни, я нуждался в максимальном эскапизме, чтобы не истерить и не смотреть в сторону окна как возможного выхода из затруднения, а потому много читал.
Себя.
Никто лучше меня не напишет то, что мне нравится.
Так вот. Читал я мороженку... Точнее даже - брошенку.
В 20 году я отвлекся и в итоге забил на фик. Потом попытался продолжить, но лишь дописал кусочек главы - и всё.
И вот, всего-то 5 лет спустя...
Я написал главу!!!
*бежит по потолку*
Может, еще ща напишу!
Как мощны мои лапищи...