Оставляя оценки того, через сколько они научатся снимать полнометражное кино и сколько будут стоить эти мощности, в стороне (очень нескоро), я огорчу так: учатся нейросетки как раз на тех самых новых экранизациях в том числе, а учить их будут, что хорошо, а что плохо, люди, не считающие эти новые экранизации чем-то уж криминально плохим.

Lost-in-TARDIS
Дайте мне помечтать, не лишайте хотя бы надежды!

Возможно, для создания этого восьмиминутного ролика потребовались значительные вычислительные мощности. Я не знаю, сколько киловатт-часов было затрачено где-то в далёком Китае, но я не потратил на это ни копейки.

Я уверен, что я лишь один из десятков тысяч людей, которые одновременно обращаются к нейросетям со своими идеями или изображениями. Поэтому я думаю, что создание фильма с помощью нейросети уже стало реальностью. Просто нужно направить вычислительные мощности нейросетей не на сотни и тысячи пользователей, а на один фильм.

Что касается самого фильма, то нейросеть может превратить книгу в полноценный сценарий. Человек проверит и завизирует этот сценарий, а затем он будет превращён в набор кадров для формирования видео. Чтобы задать общий стиль, будут использованы сгенерированные ключевые кадры, как в мультипликации, определяющие положение героев и вид персонажей.

Это вопрос ближайшего будущего, и мне даже кажется, что киноделы будут активно сопротивляться тому, чтобы эти инструменты попали в руки любителей. Как художники сейчас сопротивляются засилью нейроартов, но активно используют их в качестве референсов или пробных изображений. 

А вот тут можно посмотреть, как картинки превратились в видосики.

https://fanfics.me/message712854

Jinger Beer
Причем, в отличие от художников, на чье бухтение в соцсетях всем насрать, кино - это серьезный бизнес серьезных людей. И серьезные люди, без сомнения, задействуют все доступные законные и незаконные рычаги.

Jinger Beer
Этот ролик может служить только примером того, какая бездна ещё лежит между нейросетями и рисованием кино.
Картинки превращаются в гифки по пару-тройку секунд без какого-либо движения камеры и достаточно коряво, при этом все картинки абсолютно разные и никакой изобразительной связи между ними нет.
Это сейчас критика конкретной работы, а не нейросеток в целом.
Есть, справедливости ради, рисователи гифок получше, но уже за денюжку.
И есть рисователи реалистичных кадров, да.
К примеру, есть модель гугл VEO2 text 2 video, которая умеет в реализм и движение камеры, https://fal.ai/models/fal-ai/veo2?share=19ff09d1-a809-4b96-901f-b2788eb16f80
стоит 0.5 доллара за секунду, бесплатно её никто не даст. Но у неё есть ограничения по длине видео, разрешению, есть ещё проблемы с отрисовкой, и главная проблема длина контекстного окна.
И как обычно, на промо висят лучшие результаты, а не худшие, так-то как обычно будет ебля с промтами, чтобы получить хорошее и нужное. А каждый запрос - денежка.

Короче, тут ещё есть тонна работы, нужно тренировать модели, особенно в рамках долгих видео, потому что нужны и датасеты, и бенчи, и метрики оценки какого-то долгого продукта по констистентности отрисовки, и так далее. Переход прямых от раскадровок к видео необязательно поможет, по крайней мере, без возможности задать модели предварительный контекст три-д моделью, чтобы она знала, как выглядит персонаж в каждом месте, а не придумывала заново на каждую раскадровку.
В общем, предстоит много интересных штук, как с точки зрения архитектуры, промт-инжинирнга и удержания контекста, так и создания сетов для обучения и валидации. Вопрос в том, получится ли, сколько это будет стоить, и не упрется ли оно в какой-то предел по стоимости. Зависимость между размером модели и качеством тут тоже - по крайней мере с моей не совсем глубокой в теме колокольни - не ясна; с какого-то момента может оказаться так, что увеличение числа параметров уже не дает такой сильный прирост, чтобы это было выгодно по деньгам. И где-то там вдалеке ещё маячат технические соображения по мощности и стоимости видеокарт...

Jinger Beer
Да, я видел, у вас прикольно получилось )

*Подумав* По сути, мне нужен даже не столько "фильм", сколько нечто вроде "видеокниги". Ну, есть же аудиокниги, которые начитываются? Причем некоторые даже не чтецами, а программой.
Вот мне бы такую "видеокнигу" - чтобы все персонажи выглядели точно так, как они описаны, чтобы костюмы были точно по эпохе... И чтобы сюжет шел слово в слово так, как написано автором!
Я готов смириться с тем, что это не будет каким-то супер-художественным решением, ибо нельзя не признать, что на супер-художественное решение сейчас вообще крайне мало что тянет (

*Это я тут просто прошлогоднюю экранизацию "Графа Монте-Кристо" на днях глянул... Все ищу хороший вариант - но сколько ни смотрел, ничего приличного... ( А в версии 2024 года из хорошего только виды и отсутствие негров.

Это какие нейросети умеют сейчас рисовать? Даже у самых лучших нейросетей на данный момент сплошная ерунда.

Lost-in-TARDIS
Конечно, это так. Но я помню статью в одном компьютерном журнале, в которой утверждалось, что максимальный объём жёсткого диска составляет около 500 гигабайт. И что физически невозможно преодолеть этот предел. Это была очень серьёзная статья, основанная на выводах физиков-теоретиков. Однако буквально через три года после выхода этой статьи этот предел был преодолён.

Пользователь ушёл
Угу, а кино сперва было немым и черно-белым. И снималось одной камерой. А о цифровых технологиях в кинематографе даже не подозревали.
Всё когда-то было в зачаточном состоянии. Всё проходило через этапы совершенствования. Только вот то, что когда-то занимало века и десятилетия, в наше время проносится буквально за года.

Я же не говорю "сегодня" или пусть даже "завтра".
Быть может, хотя бы лет через 20 я смогу позволить себе такое удовольствие. Это моя мечта - раз уж на "живой кинематограф" надежд почти не осталось...