Продолжим наши страсти по нейроарту — генерация по скетчу в реальном времени (интерактивный холст).

Хорошо тем, у кого навыки рисования на высоте — что угодно изобразить могут. А у кого на уровне Остапа Бендера с его бессмерным «Сеятелем»? 

Нейросети, конечно, в помощь всем, только генерят модели сугубо с опорой на обучающую выборку. То есть, ничего нового Вы сверх этого не получите. Модель подыщет в своём датасете то, что больше всего похоже на Ваш запрос, перетасует и выложит. В режиме слопозавода работают не только Алиса, chatGPT, Grok и Кандинский с Шедеврумом, но и модели из арсенала профессионалов. Волшебной кнопки «шедевр» нет в интерфейсах, и Вы закономерно будете опираться на предустановленные стили. Промпт это преодолевает не всегда, а часто в прекрасной во всех отношениях работе на самом видном месте окажется крокозябра, которую Вы будете зарисовывать в графическом редакторе и при этом изрекать непечатное - много и долго. Такова жизнь нейрохудожника, улыбаемся, машем.

Чтобы её облегчить, для нас сделали специальные инструменты — для врисовывания недостающего, исправления испорченного и дорисовывания за границами кадра. Первое и второе — инпейнтинг (частичная генерация по маске — замалёвываете то, где добавить и что убрать) и аутпейнтинг соответственно. Это добро (подмодели и специализированные модели) обязательно есть на любой платформе, которая обеспечивает доступ к моделям ИИ. Но вот беда: модель ведь опять опирается на свой опыт. Некоторые можно дообучить на собственном материале, даже те, которые живут в облаке. Но креативному человеку грустно от того, что он жуёт уже кем-то пережёванное.

К счастью, на переферии генеративного мира обитает группа моделей, которые частично свободны от этого ограничения. Это так называемые  холсты реального времени. На экране поле чата, куда Вы пишете промпт, он тут же появляется на правой половине экрана в виде генаративного эскиза. А слева при помощи мышки или на графическом планшете Вы рисуете то, что имели ввиду. Очень грубо и приблизительно. Для такого наброска у Вас будет короткий набор инструментов: выделение, кисть, ластик, палитра для выбора цвета, а также откат на шаг назад. Вслед за Вашим наброском будет меняться правая часть экрана. Вы можете до бесконечности перерисовывать, модель послушно перегенерит всё, что Вы изволили поменять и передумать. Когда подготовка закончена, Вы нажимаете волшебную кнопку «Сгенерить».  Оплата сего счастья происходит либо сразу в реальном времени, по мере работы над скетчем, либо после нажатия волшебной кнопки «Сгенерить». И получаете рисунок, в котором изначально, без захода в графический редактор, контроль над композицией и сюжетом не менее 70%. Если об автростве, то опять таки на идею оно 100%, на композицию до 70%. Строго говоря, это уже цифровая графика интеллектуальной кистью. 

Как видите, при рисовании на интерактивном холсте навыки графики и живописи не обязательны — модель служит костылями. Я нарочно рисовала мышкой, а не стилусом на планшете.

Кто в это умеет? Нет, не чатик. В это лучше всего умеет Google flow, если у Вас есть чистый аккаунт Google и Вы сможете купить и активировать подписку. По хорошему, нужен ещё чистый браузер Google,не имеющий российского цифрового следа. Пока братья-индусы не пофиксили дырку в системе безопасности их мобильного оператора Jio, под такую экосистему можно купить за смешные деньги подписку гугл на Yandex market, которая проживёт от 10 минут до полутора лет, чаще несколько месяцев. С «мохнатыми» аккаунтами не получится, это дурогонка.

Так что, живём честно, без читерства. В этом плане нам лучше всего поможет две платформы —Krea AI и Leonardo AI. Работают они по одному принципу и предлагают плюс-минус  набор моделей с одинаковыми возможностями и услуг одного спектра, но Leonardo даёт больше кредитов — маловероятно, что Вы успеете создать что-то внятное на суточном транше на бесплатном тарифе Krea, а просит она за подписку с куцым лимитом конкретных денег. Leonardo даёт в сутки 150 кредитов, которых Вам хватит на 10 работ. Не использованные кредиты в полночь сгорают, и Вам тут же начисляют 150 новых. Единственное ограничение — фотографию нарисовать не получится, в бесплатном режиме Вам доступны только лоры разнообразной графики — от аниме до живописи, как их поняли разработчики модели. Для иллюстратора, работающего над эскизом этого уже много. Да, модель перегрета! Сейчас объясню.

Поскольку под капотом у таких холстов чистая диффузионная модель, не связанная с большой лингвистической, как и во всём старой барыне журнале Вы можете напрямую влиять на вес промпта и датасета в генерации. Там волшебный ползунок есть. Тянем влево, модель оглядывается на промпт, вплоть до генерации только того, что указано словами, остывает, тянем вправо — начинает «фантазировать», то есть вываливать всё мало-мальски похожее с точки зрения алгоритма, вплоть до полных галлюцинаций - перегревается. Слова, поскольку модель их не понимает и не анализирует, каким-то образом пересчитываются в пикселы генерации. Вес, как я уже написала, контролируется, а вот качество перевода — развожу руками. Если модель не имеет в датасете образцов, связанных со словом «кокошник», досвидос: не будет его, зато где-то на картинке возникнет что-то, чего не спрашивали — глупость какая-то. Это нужно учитывать. Кокошник нельзя упоминать, его придётся врисовывать, чтобы не получить в углу кадра, например, велосипед, который не заказывали и даже не думали о нём.

И, наконец, счастливым обладателям компьютера с видеокартой хотя бы с видеокартой хотя бы на 12 Гб, а лучше 16–24 Гб, и 16 Гб оперативки, а лучше бы 32, можно эксплуатировать по крайней мере две модели в автономном настольном режиме, даже не умея тянуть макароны нодов и не понимая, как работает Комфи. Если Вы водрузите на свой аппарат Криту, а к Крите прикрутите  плагин искусственного интеллекта, у Вас в распоряжении в числе нескольких полезных инструментов будет генеративный холст, который по исполнительности на голову лучше, чем креатура Google – но, без экосистемы (Flow –полноценная студия, в которой по сути в одном интерфейсе Вы создаёте всё, от сценария и эскизов сцен до кино и законченного рекламного проекта, Крита — только графика и простейшая анимация). Но создателю обложек и концептов в нашем зоопарке не больно-то нужны такие навороты, как раскадровка и прочие киношные фокусы. Лично мне Leonardo AI с головой хватает в его облачном варианте. Но, если Вы уже потратились на железо, Крита даст Вам полностью бесплатную генерацию графики. Вы больше не будете платить никому за Ваши шедевры, и она умеет очень много - это специализированная программа для художников.

Маякните в комментах, если интересно в деталях, как рисовать на интерактивных холстах — готова показать принцип в Leonardo AI, а тонкости понимаются интуитивно.