Сэхсвет. Персонажи. Джил

Продолжаю рубрику э-э-э-э-эксперименты «мучаю нейросеть». StableDiffusion от Automatic1111 не перестаёт удивлять по мере того, как в неё погружаешься. В этот раз я попытался сгенерировать… ну как попытался, чего прибедняться – сгенерировал Джил. Третья из главных героев, студентка двадцати двух лет.

С Джил всё немного интереснее в плане референсов в реальности. Их нет. Кросс и Мэйтт имеют свои прототипы, на основе которых и базируется их внешность. Для Джил реального образа или человека не существует. Тем не менее, после нескольких часов генерации я нашёл почти идеальное попадание в мою интерпретацию образа. 

Знакомьтесь, Джил Форт:

Самые прозорливые могут обратить внимание, что изображения выглядят несколько неестественно. Слишком гладкая, кукольная кожа (это потому, что я, дурак, не убрал это из промпта). По сути, в этих изображениях я доволен двумя вещами – это взгляд и схожесть с образом в моей голове. Но нейросеть творит чудеса преображения. Ща покажу.

На генерации Мэйтта я уже научился расширять изображение, заставляя SD дорисовывать недостающие элементы фона на пустых местах. Сказано – сделано. Вот что получилось:

Всё ещё неестественно, кукольность никуда не делась, даже несмотря на то, что я немного обработал кожу. Да и фон какой-то… ну, никакой. В промпте я попросил нечто вроде бара. В «Сэхсвете» много баров. В барах происходит много действия. Мэйтт был в баре. Кросс дружит с барменом, и часто зависает в баре. Кульминация первой части происходит в баре.

Как вы поняли, я люблю бары. В них есть какая-то особая атмосфера. Но тут, повторюсь, фон просто как будто для того, чтобы был. Да, Джил тоже была в баре (и даже не в одном. Видите, как много баров? Обожаю бары)…

*Голос из соседней комнаты*

 – Может хватит про бары?

Пожалуй. Всё, больше никаких баров.

В общем, мне не хватило какой-то идеи. Что с этим делать, я придумал не сразу, а поэтому решил попробовать воспроизвести сцену из конца книги. Там Джил… а, нет, это спойлер. Просто покажу результат, без пояснений, что за ужас тут творится. Те, кто уже прочитал, поймут. Хотя, пожалуй, каждый по-своему.

Хочу подсветить одну вещь. Джил – самый важный человек «Сэхсвета». Самый. Она важнее всего и всех для определённого круга персонажей книги. Поэтому мне хотелось сделать что-то… особенное. Я потратил почти четыре дня на попытки добиться от нейросетки нужного результата. В основном, такое время затрачено из-за неопытности. В каких-то моментах я тыкался наугад, какие-то моменты оказались намного проще, знай я заранее, что делать. И всё равно, именно того, что хотелось, получить не вышло. Поэтому я считаю этот арт неким… концептуальным изображением, творческим переосмыслением, который, тем не менее, отражает суть.

Вот это нечто справа от Джил – вышло совершенно случайно. Я рандомно генерировал ту область, прокручивая варианты, и на одном из них появилась эта «голограмма». Более того, у «голограммы» было женское лицо. Его пришлось убрать, слишком чётким оно получилось, но вот остальное – просто находка. Кто это – прямо не хочу говорить, но намёков рассыпал достаточно. теги: женское лицо, название книги

Дальше вот эти молнии на лице. Будто дикая энергия бурлит в Джил, прорывая кожу светящимися трещинами. Это уже не случайность, но добиться этого стоило стольких нервов и усилий… Сначала простым перебором (да и ещё таким, который минимально меняет картинку, чтобы не потерять схожесть образа). Потом я нашёл в SD замечательный инструмент Sketch. Там можно схематично изобразить, что нужно, и нейросеть дорисует по этой схеме + промпт. Спасибо жене (тот самый голос из соседней комнаты), которая сейчас заулыбалась. Я ж вообще не умею рисовать, а она художник. Помогла нарисовать молнии. Да и вообще она зайка, так мне помогает, чтоб я без неё делал – ума не приложу.

После добавления молний захотелось больше хаоса. С учётом того, что там происходило… в дело пошёл инструмент Inpaint. Я закрашивал отдельные области, говорил «генерируй изображения только в них» и писал в промптах нечто вроде: «искры, размытие, сияние, гало, аура», комбинируя их так и сяк. По итогу получилось вот это:

Если на первом изображении процесс только начался, то здесь он едва ли не завершается. Энергия бурлит снаружи и внутри, само пространство искажается… кстати, можно заметить, что левая и правая части заднего фона как будто из разных мест. Так и есть, я нейрохудожник, я так вижу это концепт-арт, а не изображение сцены из книги. И по моему скромному мнению, получилось просто фантастически.

Кстати, ваш любимый еженедельный факт – для шлифовки этих артов пришлось пройти ускоренные курсы фотошопа. Дело в том, что в некоторых изображениях сгенерировались детали, которые хотелось бы видеть в основном арте (молнии и некоторые искорки). Пришлось вырезать их, перенести. Пришло понимание, что в связке с фотошопом возможности поистине безграничны.

Но это ещё не всё. Вернёмся к бару к предыдущему изображению. Мне понравились попытки в концептуальность. Не просто делать портрет персонажа, а вкладывать идею в арт. Пусть даже иногда идея вкладывается нейросетью посредством случайности. Кто я такой, чтобы спорить? Положимся на рандом нейросети, хех.

Я начал менять фон с большим параметром (Denoising strength), который позволяет сильно изменять картинку. И в какой-то из многих генераций выскочило вот это:

Честно, я в шоке. В планах этого не было, но рандом сам подкинул идею, вторящую идее книги, точнее – идее Джил, как персонажа. Просто находка. После совещания с голосом из соседней комнаты, было принято решение сделать это не таким… реальным. Начинаем генерировать левую часть, превращая её в эфемерность, воображение, метафизику, аниме. 

В процессе StableDiffusion ещё несколько раз удивил меня рандомом. Дело в том, что нейросетка очень любит женские лица почти так же, как я – бары. И при высоком разрешении и высоком параметре изменения картинки подсовывает эти лица при любом удобном случае, стоит только зазеваться. Пример:

Здарова)))0)

В данном случае, это только на руку. Итак. После нескольких часов получилось вот что:

Тут изображён момент, когда Джил только ушла от Старого Штрамма. Испуганная, потрёпанная, немного заплаканная. Я очень постарался передать это, детализировав глаза, лицо, синяк. И на данный момент я думаю, что это лучшее, что у меня получилось. В чём идея – по книге, Джил слышит голоса. Не спойлер, прям в аннотации так написано. Арт визуализирует это.

Сверху – подруга Джил, Элиза. Хотя тут у нас с голосом из соседней комнаты возникли разногласия. Она сказала, что Элиза – внизу слева. Что ж, не могу никому указывать, только напомню, ЧТО Я ТУТ АВТОР, МОЁ СЛОВО – КАНОН!

Извините.

И детали. Тут столько деталей… Даже крошечные шерстинки на свитере видны. Просто шок, как всё можно детализировать. Но особенно лицо Джил, оно вышло просто шикарным.

На Бусти есть побольше технической инфы, изображения в png (сюда не помещаются из-за ограничения по объёму фото) + небольшой бонус в виде нескольких доп. артов. Можно зайти, посмотреть, подписаться. Оказывается, когда на тебя кто-то подписывается, это сильно мотивирует, спасибо вам большое.

Итог. Я не устану повторять, что я в восторге. Чем глубже я погружаюсь в нейросеть, чем больше изучаю её возможности, тем больше приходит понимание, что можно делать с её помощью.

На этом с главными героями покончено (почти). Дальше – очередь второстепенных персонажей. Если честно, жду этого с нетерпением, потому что там есть очень колоритные товарищи, и хочется их увидеть.