Не-гайд о нейросетях, их мозгах и модификаторах.

Автор: Виктор Волков

Написал здоровенный комментарий о нейросетях, дублирую его в пост. Для полезной информации. Так как я вижу, что люди ими балуются. Вроде как это должно быть в "статьи"? 

Это не гайд. Это сваленная в кучу информация. 

Соответственно, техподдержки не будет. Для использования stable diffusion нужно знать английский язык, и обладать подходящим железом.
---

Какую используете нейросеть, если не секрет?

Stable Diffusion, сборка от auto1111.
https://github.com/AUTOMATIC1111/stable-diffusion-webui

И "мозги" из сети. Сейчас мне нравится lyriel, revAnimated, icbinp, хотя в инструментарии полезно иметь также clarity, deliberate, anything v5, protogen 2.2, плюс оригинальный мозг 1.5 Ну и toonyou очень многообщеюще выглядит.

Ещё желательно controlnet'ом научиться пользоваться, там уже вот так делать можно:


И текстовых инверсий понадёргать. Они смешиваются хорошо с icbinp. 

------

Что вы имеете в виду под "мозги"?

У нейросетки есть мозг - файлик от 2 до, хм, где-то 7 гигабайт, в котором хранится всё, что она знает. Коэффициенты сети. Это и есть то, что я называю "мозг", хотя на английском он называется "checkpoint", т.е. контрольная точка. Это вот сетку тренировали, в определённый момент остановили, и записали её состояние, чему она научилась. Это и есть "контрольная точка". Её можно воткнуть и использовать, можно пытаться дальше учить или переучить (что называется "finetuning"), и т.д. "мозг" определяет, что и в каком стиле нейросеть будет рисовать, и что она вообще знает.

"мозги" для сетки можно скачать в сети. Учтите, что в сети полно моделий, которые умеют и хотят генерить nsfw. Обнажёнка может подкрасться из-за угла, а в особо плохих случаях сеть может генерить крипоту. Лютейшую, причём.


Что значит "возьмите запрос и модификаторами его посыпьте"?

Добавьте слова, которые изменят результат картинки. К примеру. Вот я беру самый первый чекпоинт/мозг, который выпустили для stable diffusion. И начинаю использовать. Число, которое определяет изображение (seed), я замораживаю, просто добваляю слова, и делаю новый результат.

Пример ниже.

"mushroom girl" (девушка гриб или с грибами)

-----

"mushroom girl, illustration" (+иллюстрация)

----
"mushroom girl, cinematic illustration" (+cinematic, кинематографичная)

---
mushroom girl, intricate cinematic illustration (+intricate. Приблизительно означает детализированный, тщательно сделанный)

---
mushroom girl, intricate highly-detailed cinematic fantasy illustration (+highly-detailed, +fantasy. Высокодетализировання, фентезийная)

---
mushroom girl, intricate highly-detailed cinematic fantasy illustration, by sophie anderson (+by sophie anderson.
"автор - софи андерсон")

---
"mushroom girl, intricate highly-detailed cinematic fantasy illustration, by sophie anderson, mark arian" (+mark arian. "авторство софи андерсон, марк ариан")

Глаза закрыла. Ну, бывает. 

----

А теперь я заменяю мозг с чекпоинта по умолчанию, на другой. 

мозг: revAnimated
"mushroom girl"

---
мозг: "toonyou beta2"
"mushroom girl"

---
мозг: "clarity"
"mushroom girl"

---

А теперь я чёрную магию применяю, которая controlnet.

мозг: "clarity"
mushroom girl  style-of-marc-allante (текстовая инверсия. Нужен файл style-of-marc-allante .pt )

Или вот так: control net.
мозг: clarity v2
"mushroom girl"

---
Так вот. Окромя секции чёрной магии, это наглядно показывает эффект от добавления модификаторов (каждое слово - модификатор), и замена мозга сети. И это я ещё не весь инструментарий использовал.

Соответственно, товарищ вам посоветовал взять мой запрос, найти картинку по нему, которая более менее нравится, "заморозить" её число (seed), и попытаться добавить слов (модификаторов) которые её изменят в нужную сторону...


ЗЫ. Вот чем я, спрашивается, занимаюсь, вместо написания главы?

Краткое объяснение нейросетей: https://author.today/post/380060?c=19712496&th=19712496 

Пример частичной перерисовки: https://author.today/post/380060?c=19704288&th=19704288 

+3
307

6 комментариев, по

Только зарегистрированные пользователи могут оставлять комментарии. Войдите, пожалуйста.

Гардарик
#

Не знаю, почему кто-то минуснул, пост интересный и, самое главное, по делу. Виктор, а Вы программист или в смежной отрасли работаете?

раскрыть ветку  1
Виктор Волков автор
#

Я программист-самоучка, долго фрилансил по программированию.
 
C#/C++/Python (ну и парочка менее популярных на данный момент), 3д графика, игровые движки и т.д. На ИИ и нейросетях вот не специализируюсь - просто плотно и долго разбирался со Stable Diffusion, когда он вышел. 

раскрыть ветку  0
Альберт Садыков
#

А использование в написание текстов как?

раскрыть ветку  3
Виктор Волков автор
#

Stable Diffusion тексты не пишет. Но поскольку я в теме, отвечу.

В написании текста нейросети сейчас полная хрень. За то время, которое надо уламывать нейронку и объяснять, что хочешь проще написать самому, текст она выдаёт плохой и очень небольшими кусочками.

Добавим сюда, что мы с вами на русском общаемся, а сетки науськивают на английский. На русском они к своим проблемам в дополнение начинают на обе ноги хромать, и объёмы кусочков уменьшаются вдвое.

Но. Нейронки отлично работают в качестве говорящего справочника, собеседника, и с ними можно обсуждать самые безумные идеи, они не обижаются.

Работает как советник. В качестве литнегра - не работает. Ну и учитываем, что у нейронок очень узнаваемый стиль, который люди быстро начинают распознавать. 

раскрыть ветку  2
Написать комментарий
1 902 343 60
Последние комментарии
44 / 44
Андрей Уланов
М14 – история болезни.
4 / 4
Nil Магия и разум
Доброго утра, от Nil милые, дорогие, красивые!
6 / 6
Витиеватая
Апельсиновое лето
41 / 490K
Мерлин Маркелл
Флудилка
15 / 15
KiTa
Авантюризма дух неисчерпаем!По-прежнему легки мы на подъём..И вот уже мы к морю мчим вдвоём.
17 / 17
Зоя Орлова
Набор очарователя
52 / 52
Sango
Доброе утро от Санго
2 / 2
Валерий Столыпин
Мы - дети Земли!
6 / 6
Андрей Уланов
И еще про Великое и Страшное Останавливающее Действие Пули.
6 / 38
Стеклова Анастасия
Литературный Райтоберский салон
14 / 14
Горшенев Герман
гаргулью кормил?
4 / 4
Николай Zampolit Соболев
Bauhaus
25 / 25
Евгений Лукин
Прочёл в ленте о том...
21 / 26
Игорь Шкрадюк
Калишвили: послевкусие.
29 / 29
Катерина Алессандра
Ишмерай Алистер Праций. А как сильно вы любите своих героев?
1 / 1
NShVlog
Бытовуха
19 / 19
Антон Ярыгин
К вопросу о демографии.
6 / 6
Сибиряк
Товарищ Штирлиц 3.
7 / 7
Николай Берг
Машинки для набивки пулеметных лент Германии
74 / 74
Мари Пяткина
Что-то дописала
Наверх Вниз