Использование нейросетей на бюджетных(и не только) видеокартах от АМД для генерации картинок
Автор: Сергио ПетровНесколько дней назад вышло обновление программного обеспечения от АМД, которое весьма удобно и при генерации картинок для использования в ваших работах.
AMUSE ver 3.1.0
Данный софт имеет режим новичка, что крайне удобно и позволяет получить результат без получения магистерского диплома по использованию питона и прочего шаманства, которое просто не нужно.
Выглядит это следующим образом:
Нам доступно три способа использования режима: генерация, наложение фильтра и дизайн(та же генерация, но с некоторыми инструментами).
Можно генерировать сразу несколько изображений и для пробы нам предлагают генерацию милого енота играющего на гитаре на пляже. Включена галочка генерировать каждый раз новое изображение, что тоже полезно.
Вместо фото можно попробовать сгенерировать видео, но на старых карточках это может занять крайне много времени без какого либо вменяемого результата, особенно если делать видео в разрешении 1024*1024 а потом апскейлить его в 4 раза, а на версиях видеокарт с объёмом памяти меньше 16 гигабайт так и вовсе практически нереально. В настройках можно выбрать место для сохранения результата по дефолту.
Вот так выглядит экспертный мод:
Для возврата в упрощённое меню, необходимо ткнуть в кнопку по центру в верхней части интерфейса. Количество способов работы приложения увеличилось. Появилось множество различных тонких настроек как моделей и их поведения, так и самого приложения - можно например задать кто будет служить источником цифровых ресурсов при обработке: процессор или видеокарта - как правило процессор кратно проигрывает видеокарте, но зато ограниченная видеопамять не является ограничением.
Я буду использовать модели которые даже с апскейлером не выйдут за пределы минимальных объёмов видеопамяти на текущий момент = меньше 8 гигабайт.
Забегая вперёд хочу сказать, что из всех трёх моделей SD cамые плохие результаты показала модель без ControlNet и даже введение негативного промта ситуацию не спасло.
Изображения созданы на RX 590GME(8gb), RX 480 8Gb
AMD Radeon VII(16gb) и RX 9070 XT(16gb)(в связи с ограничением не более 5мб на картинку часть удачных образцов разместить не вышло)
Вот вариант пожатый с 18 мегабайт
Промт:
A photorealistic video game concept art of a young professional woman with a fair skin tone, light-colored eyes, and short light brown undercut hairstyle (buzzed sides, slightly longer textured top). She has distinctive symmetrical cybernetic scars or tattoo-like markings running from below her eyes to her jawline. Her expression is calm and confident.
She is wearing a fitted black blazer over a white ruffled collared shirt with vertical pleats, and a gold name tag on the lapel. Her posture is upright and professional.
Scene: Stylish office interior. On the left, a dark wooden cabinet with glass doors and subtle reflections; on the right, a large window with vertical blinds, bright sunlight streaming through, lens flares, and a blurred futuristic cityscape outside. Slightly blurred foreground element in bottom right for cinematic depth.
Lighting: Strong natural sunlight from the right for dramatic backlighting, soft fill light on the subject.
Composition: Medium shot, Rule of Thirds, sharp focus on her face and upper body.
Quality: Ultra-detailed, 4K, masterpiece, rendered in Octane, cinematic realism, high fidelity textures.
Так же вполне успешно можно генерировать простые промты, которые можно вставить через правую клавишу мыши в поле промт или негативный в поле негативного при его наличии.
Craft an image of a cozy mountain cabin surrounded by snowy peaks, with smoke rising from the chimney
А теперь добавим подсказку hyperrealism, photorealistic, High Resolution, 4k