Раскрашиваем картинки нейросетью

Автор: Алекс Кимен

Всем привет. 

Как знают мои постоянные читатели, у меня есть много иллюстраций к каждой книге, сделанных замечательным художником Валерием Шамсутдиновым. Часть иллюстраций выполнена в цвете, а часть - черно-белые. 

Конечно, цветные картинки - интереснее, но делать их дольше и сложнее. 

И найдя инструменты колоризации ч/б фото с помощью нейронных сетей, я не мог удержаться и не попробовать применить их к своим иллюстрациям. В качестве инструмента использовались сети: 

https://picwish.com/photo-colorizer

https://9may.mail.ru/restoration/

https://hotpot.ai/colorize-picture

И вот некоторые результаты:


Как видно, результат неплохой. Но (как всегда у АИ) зачастую страдают руки. Их нейронка красит под цвет одежды. 

Еще вариант:


Вариант с более общим планом:



(опять проблемы с руками)

Так же интересно сравнить как с подобной задачей справится живой человек. У меня есть одна картинка, которую Валерий Шамсутдинов раскрасил и дорисовал. Так что можно сравнить:

Исходное изображение.

Два варианта АИ:

Ну и вариант, предложенный Валерием:


Кончено результат настоящего художника гораздо интереснее. Но ведь всегда хочется большего. 

Так что я подключил нейронную сеть Dall-e 2 и попробовал дорисовать картинку:

В общем, интересный опыт. Мы живем в удивительное время и хочется верить, что все еще только начинается...

+128
2 941

31 комментарий, по

Только зарегистрированные пользователи могут оставлять комментарии. Войдите, пожалуйста.

 раскрыть ветвь  0
Лидия
#

Напрашивается вывод из увиденного: пока для того, чтобы картинка, нарисованная или обработанная программными средствами, была правдоподобной, к ней должен основательно приложить руку живой человек. Так что люди творческого труда могут не беспокоиться - машины ещё долго не смогут их заменить. 😉 

 раскрыть ветвь  6
aibolit
#

На.реддите недели две назад был челедж - нужно было отгадать фото настоящее или нейросеть. У моих двух фоток из нейронки 90% голосов было за то, что они настоящие 😃

 раскрыть ветвь  5
Ирина Минаева
#

Интересно, да.

 раскрыть ветвь  0
Данила Икрянников
#

хочется верить, что все еще только начинается...

В том, что начинается, сомнений нет. Хотелось бы, чтобы не начало заканчиваться.

 раскрыть ветвь  0
Boris
#

Приветствую Алекс, интересное исследование, но последняя иллюстрация как-бы не в фокусе. Я лично думаю что будущее за AI/ML, биг дата и все остальное. Мы сейчас просто делаем робкие шаги в этом направлении а народ разгоняет хайп на тему - это то что может нарисовать живой человек, а вот было бы вот так и этак, а не вот это вот все машинное... Нейронки делают уже шедевры с крохотных камер смартфонов, я думаю и иллюстрации подтянуться скоро!

 раскрыть ветвь  4
Алекс Кимен автор
#

Да. Чат GPT реально впечатляет. Боюсь представить, что будет в 4-ом поколении. 

 раскрыть ветвь  3
Эфери Тау
#

Но (как всегда у АИ) зачастую страдают руки

У нейросетей не руки страдают, у них просто напрочь отсутствует мало-мальски адекватная модель человека.

Представьте себе очень маленький и однобокий искусственный мозг, никогда не видевший реального трёхмерного мира. Вместо этого его кормили исключительно плоскими картинками из интернета – фото и рисунками, на большинстве которых люди видны не целиком, а только частично, в зависимости от позы и границ кадра.

Для него человек – это буквально плоский рисунок к одним лицом и переменным количеством всего остального,  особенно рук и пальцев, которые у нас вечно чем-то заняты, куда-то тянутся и расположены всегда по-разному и в разных местах.

Неудивительно, что в результате ОНО не может найти на картинке руки, не говоря о том, чтобы определить, чьи они. Тем более закономерно, что ЕГО собственные "творения", чаще всего, напоминают чьи-то безумные галлюцинации.

Не знаю, кто решил, что обучить инопланетных тараканов рисовать людей будет просто. По-моему, мы ещё действительно только в начале пути :)

 раскрыть ветвь  0
Вячеслав Осетров
#

Всё же не все программы для колоризации использованы и названы. 
Предпочитаю программу PhotoVintage.
Вот что получилось, хотя там есть и другие возможности.

 раскрыть ветвь  3
Алекс Кимен автор
#

Спасибо. Интересный вариант

 раскрыть ветвь  2
 раскрыть ветвь  0
Ingvar Ninson
#

Спасибо!

Как всегда очень интересно!

 раскрыть ветвь  0
Петр Борисов
#

А художник не обидится? У вас такие прекрасные иллюстрации И все же человек рисует лучше ИМНО

 раскрыть ветвь  0
Искандер г
#

Не пора ли уже новые серии писать?

 раскрыть ветвь  2
Алекс Кимен автор
#

Сейчас собираю и осмысливаю информацию про Древний Китай. Нужно время

 раскрыть ветвь  1
Владимир Лещенко
#

Постик убрали... Богатый хороший русский вероятно поспешиль😀  похоронить одного великого госдеятеля... Теперь бы изучить ядерную доктрину и ТТХ систем и понять что точка зрения Алекса на ядерную войну сугубо неверна...

 раскрыть ветвь  0
Дон Аквила
#

Мне кажется, первая иллюстрация даже лучше выглядит в монохроме. Фотографичность и документальность.

 раскрыть ветвь  0
Вячеслав Осетров
#

Подоспела свежая колоризация.

Это ChatGPT.

 раскрыть ветвь  0
Вячеслав Осетров
#

И ещё.

 раскрыть ветвь  1
Алекс Кимен автор
#

Спасибо. Очень здорово и интересно. Тоже немного поигрался. 

 раскрыть ветвь  0
Написать комментарий
15K 7 851 532
Последние комментарии
5 / 5
Хатбуллин Ленар Гиниятович
Муки творчества
4 / 4
Георгий Смородинский
Вторая книга закончена.
1 / 1
Агапитов Геннадий
День правды
35 / 35
Юлия Лиморенко
Короткой строкой
1 / 1
Гульнара Черепашка
Тест Бедхель - не пройден! Да и фиг с ним
6 / 34
Таша Янсу
майский челлендж а-ля "Путь героя"
26 / 26
Ари Видерчи
Тамара Циталашвили на приёме у Ари Видерчи
17 / 17
lightbrian
Картинки от 5 мая 25 года (некоторые с мини-сюжетом)
3 / 3
А.Д. Лотос
Мир Песочные часы
1 / 1
Филипп К.
О страдании
27 / 27
Наталья Грейш
Рецензия на сборник поэзии «Немного о жизни и любви...» — Любовь Семешко
71 / 71
Василий Панфилов
Секс стоя в гамаке
71 / 71
Василий Панфилов
Секс стоя в гамаке
5 / 5
Майк Гелприн
Как закончить роман
5 / 5
Майк Гелприн
Как закончить роман
20 / 20
Sango
Начнем неделю на веселой ноте
57 / 57
Владимир Палагин
Редколлегия у лит. альманаха
28 / 28
Владимир Чекмарев
А давайте сыграем в кенгуру
4 / 4
А. Таннер
Где автору черпать вдохновение, силы и новые идеи?
50 / 50
Elena Boyko
Вот такое у нас море:)
Наверх Вниз