Ожившие чибики
Автор: Мария Bromden КозловаСбылась мечта и видеонейросети стали понимать рисунки!
Давно уже, на самом деле, просто я ушла из темы. Однако хочу поделиться.
Самая простая и удобная оболочка для работы с видео - WanGP, она подтягивает все доступные топовые модели (не только для видео, для изображений тоже). А ресурсы распределяет так, что комфи и не снилось, облегчая нагрузку на железо. Так что если вы хоитие что-то генерировать, но железо слабое (а для видео сейчас любое кажется слабым, честно), ставьте джипи.
https://github.com/deepbeepmeep/Wan2GP
Обещала показать ожившую себя и менестреля Эймара. Вот. Исходник и стопкадр из видео.
Сеть Wan прекрасно понимает, что это люди-чибики, что у них есть изначально невидимые ушки, а волосы - это волосы, которые двигаются как живые, а лютня - объёмный объект, и ее гриф должен отделяться от волос. А отрисовка глаз в перспективе поворота головы! Вы только посмотрите. Я в восторге.
Мы "говорим" очень быстро, за что прошу прощения, я начинающий клиподел.
И да, играют друзья, Lauda novella, популярнейшую песню 14 века Гильома де Машо. Почему меня укоряют за рыцарские романы... Ну... Ответ нарисован здесь: https://author.today/art/215766
Весь материал годичной давности и сделан в Wan. А сейчас же ещё и Minimax подтянулась, и вышла бесплатно, а я так ее любила вплоть до закрытия. Только она создавала хорошие видео по референсу лица. Остальные - бе. Надо посмотреть, реализовался ли в WanGP этот функционал. Наверное, я не рассказывала и не показывала, что там с этими референсами вышло. Для трейлера так и не придумала озвучку, но в группе ВК лежит пара роликов с ожившими персами. Показать что ли?
А уж про то, как я делала захват движения и заставила делать какую-то нелепую зарядку поочередно Симель и Сейтера я точно не рассказывала... И наверное не расскажу 