![]() #фанфикс_знает_все #нейросети
И вновь обращаюсь к всезнающим. Я прям ноль нулевой в нейросетках. Встала задача - найти инструмент, который умеет взять фигуру нарисованного человека в определенной одежде и изменить позу. Чем дольше я гуглю, тем больше не понимаю. Сижу уже часа два. Вижу генеративные, которые с нуля нарисуют картинку по запросу. Или нашла те, кто может изменить стиль рисунка, а оно мне не надо. Может, я вообще не то ищу? Памагити. 19 февраля в 18:12
|
![]() |
|
Огненная страница
Я б сказал, задание по ЕГЭ математике со звёздочкой. Сетки успешно миксуют, как блендер, уже готовые арты, но вот фундаментальных понятий не имеют. Не понимают, например, что есть кости и как устроены суставы(отсюда и ужасные искажения анатомии). Заставить её только изменить позу... Она же не поймёт даже что за одежда и не повторит черты лица! |
![]() |
|
В артбридере была именно функция изменения позы. Но хз насколько для вас она качественно будет.
Только нужно с гугловской учёткой зарегистрироваться и все хотелки на английском вбивать. https://www.artbreeder.com/tools/poser Ешё можно рискнуть извратиться в определённых стилях (и если фона нет) превратить рисунок в 3д модель, а у той в нейронные же сгенерировать риги, и получится ли в нужную позу поставить, отскриншотить и запалить обратно в оригинальное изображение. Но тут без вариантов чересчур сложно, и анимация вроде как в тех нейронках - лишь по подписке. |
![]() |
Chiarra Онлайн
|
Вот на такое натыкалась, но не изучала вопрос, как это поднимать и где: https://vcai.mpi-inf.mpg.de/projects/DragGAN/
|
![]() |
Chiarra Онлайн
|
Или вот ещё. Не знаю, работает ли с позой, но позволяет покрутить лица точно - https://huggingface.co/spaces/jbilcke-hf/FacePoke
|
![]() |
|
Chiarra
DragGan выглядит многообещающе, но это пока только демо. Да и скачивать надо с гита... Боюсь, тс эта вещичка будет не по зубам. Тут и баш нужен, и настройка видеокарты... КСТАТИ на гите DragGan есть прямая ссылка на этот Hugging face, что-то мне подсказывает вы один и тот же проект скинули, просто с разных источников |
![]() |
Chiarra Онлайн
|
Fytase
Возможно, это один и тот же проект - просто для одной его части уже подкрутили веб-версию, а вторую только с танцем с бубнами устанавливать.) Мне самой просто не требовалось, так что я не разбиралась, но вспомнила, что на эту тему натыкалась в Threads и скинула ссылки, которые там давали.) |
![]() |
|
Fytase
Фокус точно не имеет таких инструментов, только если случайно сделает нечто максимально приближенное.Руконожка Действительно, проще в Фотошопе, добиваться товарного результата в нейронке есть смысл только ради исследовательского интереса. Огненная страница Я могу глупостей наговорить, но мне решение видится как применение сразу нескольких местах тожов контролнета. IPAdapter для референсности визуального стиля, OpenPose для задания позы, и что-то вроде InstantID для использования заданного лица, и шанс успешного результата даже не помножен на случайности, а возведен в степень. Но это так, мнение человека, который с контролнетом работал на уровне "потыкать и не суметь". |
![]() |
|
Дядюшка Ди
У Фокуса есть возможность использовать изображение как промпт(до четырёх за раз, каждое со своим весовым коэффициентом), плюс можно использовать изображение как базу. И это разные модули. Я ж и говорил: "гипотетически" можно выбить из этой падали позу с одного изображения (плюс "заземлить" его тремя одинаковыми) и взять всё остальное с другого. В несколько шагов, с множеством попыток, но это возможно. Да-да, одежда и лицо скорее всего изменится, пусть и не сильно. Вывод всё тот же - проще на колени н*ть. P.S. я тут приметил излишнюю негативную окраску, это случайность, я не имел ничего такого ввиду, просто так откровеннее всего, а излишняя мягкость весь смысл испортит |
![]() |
|
Fytase
Если правильно помню, то у фокуса четыре работы в режиме изображён в качестве аромата, все они это контролнет в очень упрощённой оболочке. Первый это собственно ImagePrompt, грубо говоря референс, если правильно помню то это IPAdapter. Второй PyraCanny, который по сути обводит исходное изображение. Третий CPDS работающий с маской глубины. И четвертый это мертвый FaceSwap, должен менять лица, но по ому и мертвый, что делает это отвратительно. Теоретически первый и второй могут помочь, но нужно готовиться к уступкам и компромиссам со своими ожиданиями. |