Jörmungandr, пираты и анимация

Ну, справедливости ради, бедолагам-пиратам Ёрмунганд, скорее, померещился. Но всё-таки. Это стихотворение Марии Ровной меня всегда завораживало - вообще одно из любимых моих стихотворений у неё. Поэтому-то, добравшись до всяких новых возможностей, я немедленно попросил у Марии Зиновьевны разрешения на эксперименты.

И мы с Векшей эти самые эксперименты устроили.

Первым делом в программе Suno я сгенерировал к стихам музыку.

Суно - настолько простая в обращении штука, что и объяснять нет никакого смысла. Просто закидываешь туда промт или текст - выдаёт песенку. Можно очень много контента генерировать бесплатно. В общем, в неё можно играть сколько угодно. Главная прелесть Суно в том, что она правильно ставит ударения, да и вообще - её пение намного выразительнее, чем чтение любого механического чтеца. Можно делать по-настоящему красивую озвучку для буктрейлеров, рекламных роликов, анимашек - да для чего угодно! Самое главное - не давать ей генерировать текст самой! Очень страшно. Тексты, сгенерированные машиной - вообще не для слабых духом, но в данном случае - просто уши отваливаются.

Зато хороший текст Суно превращает в очень славную песенку. Можно хоть весело, сурово или трогательно - картина Репина "Какой простор!" - а дополнительным плюсом эта нейросеть даёт скачивать видео. И его можно выкладывать ВКонтакт, в телеграм или на Ютуб, в общем - куда захотите. Правда, простенькое. Но всё равно интересно.

Первую версию я вообще не стал показывать: она не очень понравилась автору стихов. Звучала слишком романтично, печально и сентиментально - поэтому вот так теперь: лихая такая блатная песня, с мрачной иронией. И мы с Векшей с самого начала решили сделать ролик.

Вот этот - уже второй. Первый я здесь не показывал, повесил только ВКонтакт - там у нас был такой клип с картинками, которые генерировали несколько нейросетей приблизительно в одном стиле. На Ютубе вообще я видел такие клипы, то есть, наука это допущает - и оно вроде бы получилось неплохо. Но душа просила более прекрасного.

Мульта.

В клипе "В темноту" мы уже пробовали сделать несколько анимаций - и получилось что-то до такой степени занимательное, что аффтары в безумной гордыне своей решили анимировать вообще всё, что анимируется.

Дорогие друзья, любите ли вы мультфильмы так, как люблю их я?!

Для меня-то это - единственный вид визуализации текста, который дотягивает до самого текста по многослойности, символичности, метафоричности и прочим особым возможностям. Художественное кино, как ни крути, текст не воссоздаёт - и тексту не замена: оно создаёт свою собственную реальность. И нет в этой реальности того мерцания множества смыслов, как в тексте - она воспринимается определённой и абсолютной, безусловной, как и текущая реальность нашей жизни. 

Мульт - не то. Мульт - сплошные символы. Даже такими примитивными средствами, как нейросетевые генерации, можно создать довольно сложные цепочки метафор - что ж говорить о мультфильмах более сложных и качественно сделанных? Мультфильм - как кукольный театр на средневековой площади: феерическая смесь предельной простоты и странной сложности с человеческой душой.

Когда я пишу, вижу текст мультом. И периодически на меня находит желание мультфильма.

А дорогой товарищ Векша, похоже, потихоньку становится режиссёром.

Впервые у нас получился почти настоящий мульт. Раскрывающийся веером смыслов, визуальных и текстовых. Качество изображения, честно скажу, могло бы быть и лучше - но смысл, похоже, удалось поймать. Спасибо нейросети Gen-2.

Но я вам, дорогие друзья, сразу скажу: анимирующие нейросети - это настолько капризная, муторная, непредсказуемая, тяжёлая в работе штуковина, что лучше сразу залезть на стенку и там посидеть, чем пытаться выцепить из них годный контент! Тёмный ужас.

Если найдутся смельчаки с чугунной попой и ангельским терпением, которые рискнут повторить попытку аффтара, расскажу подробнее.

Значит, Gen-2 - нейросеть под девизом "и всё плывёт...".

Генераций, которые вы сможете сделать бесплатно, на ролик хватит. И всякую стихию, волны, ветер, цветочки-лепесточки и прочую подобную радость Ген-2 создаст достаточно эффектно. Тем более, что она даёт возможность управлять "движением камеры" - и можно разнообразно и интересно, в общем.

Но людей она не может. Вернее, может только издали - крупный план жутко искажает, лицо выглядит стекающим. Примерно одна генерация из десяти попыток выходит сносно, но всё равно не восхищает. Лучше природу делать в этой сети.

Лучше - Lumalabs. В ней люди выходят хорошо. По мне - она вообще самая интересная из всех анимирующих нейросетей. Это мы в ней делали рок-концерт. Мы там ещё, конечно, попробуем генерировать, когда понадобится прицельно изображать людей. Брака и глюков тоже очень много - но это нейросеть, тут уж ничего не поделаешь, не научились ещё.

Про нейросеть Genmo я бы ничего доброго не сказал, хоть считается, что это топовая нейросеть для анимации. Ну или я пока не понял, чего ей надо для счастья. Во всяком случае, пока у меня не получилось в Генмо ни единой гифки, на которую можно смотреть без содрогания. Ну, может, она просто не любит картинки и ей надо диктовать промтом... не знаю. Ещё посмотрим.

А PixVers  делает хорошие годные гифки, но с очень-очень простым движением. Может чуть-чуть подвигать, например, фигуру на фоне или сам фон. Что хорошо - не искажает. Что плохо - ничего сложнее, чем "фигура немного переместилась слева направо", делать не умеет.

И - да, гифки бывают по 2, 3 и 4 секунды. Собирать, монтировать, как-то создавать из них сюжет - это уже не нейросети дело, а человека. В общем, у анимирующих нейросетей тоже, как ни странно, не обнаружено кнопки "сделать зашибись".

В общем - вот. Краткий отчёт начинающих аниматоров об анимации в нейросетях.