Сделали мультик по мотивам произведения.. первые пробы в новых реалиях с лимитами ИИ...

ну небольшое повторение пройденного, из того, о чем рассказывал и ранее...

**

недавно с Игорем Каваевым играли в экспериментальном порядке лепили мульт про его Кошку. Уй я боюсь таких дел.. снимать прям так уж  кино по произведению с ИИ я пока очкую. 

Есть пара находок, могут показаться полезными, потому пишу про это почаще. 

https://author.today/post/859278

вот его пост про это там же и посмотреть наш пробный мультик 

как деляль! Сразу прошу прощения, что наверное пока возникает ощущение, что оно на коленке смонтировано. Видео можно и пересобрать, меня аудио больше заняло. 

***

Итак.. возможно раньше в плане создания видеоряда было веселее.. было достаточно бесплатных возможностей, например от Grok Imagine.. Правда там были ролики по 6 секунд. Оно и сейчас так в немногих оставшихся теперь свободных возможностях - FLOW от Labs Google, Flowmusic, та же Алиса AI, 5-8 сек. (не всегда со звуком, или он косячит, потому см. ниже, чо расскажу, для баннеров с движением на GIF звук то и не надо кстати, и длиные не нужно, вам Алисы хватит) 

Что для создания визуала для какой нибудь песенки ещё хватало коротких роликов. Ну там можно повторять сцены. Не особенно смотреть на то какая именно там под музыкой сценка. ну плюс-минус, а там сам зритель додумает... Про синхронизацию губ вообще пока не думал но появляются и такие сервисы, я пока не увлекался, а шел другим путём. 

Ну а всякие мелкие веселые видюшки а также буктрейлеры, (что нам особенно актуально для АТ) я лепил, сообщая в промте какой нибудь текст чтоб был сказан, и оно его прямо там говорило, ну чаще без косяков, хотя они были, если он слишком длинный, путает ударение... (его то знаком ударения надо ставить, то большой буквой иногда, так тож бывает у некоторых ИИ) - позже снова назрела необходимость делать и тут аудио отдельно дополнительно. 

Ну ... стало вот в том же Grok платно по подписке.. что боль, но... но зато например по 30 сек. хм... что в свою очередь неплохо (рано радуетесь, там хоть в принципе доп кредитов не требует, но чо то там за ограничения в день... как мне его чат выдал...десять или как то так, может уберут.. там  было раньше не в часы пик свободнее...)

 Можно делать уже и мультик.. ну согласитесь, из 6 секундных лепить кино - морока. Из 30 - уже что то поинтереснее

(снова рано не радуемся , походу оно тож хитрое и часто норовит налепить вам в тридцать секунд нарезки из коротких роликов, но это неточно пока, и тем не менее, допустим вы просите текст... ну все равно так уже проще..) 

про всякие очень уж чрезмерно дорогие сервисы вообще писать не стану, фу на них, "деньги дерут, а корицу жалеют" (с)

...

был у меня некий лимит на Pixverse, ну вот Игорь Каваев имел идею про мультик по мотивам его книг. Понятия не имею, как буду ему помогать далее, но попробовать - это было нужно. Решили пилотный. 

Решил я проверить этот Pixverse, купил такую коротенькую подписку, ну думаю посмотреть... там разные модели, Grok тож как раз было. Стал пробовать. Хотелось с длинными роликами. 

Блин во первых там макс. 15 сек в Pixverse... блин... а мы на тридцать написали сценки. Потом оказывается там "кредиты" а не просто подписка. Еле втиснул эти несколько сцен в то количество. Ой вот не люблю так, в стеснённых условиях. Они ещё и вот в аудио накосячило.... в одно месте так конкретно, потом ещё тараторило...втиснув тот текст в короткие... аааа... пару фраз оно вообще не сказало. 

Со слезами собрал из того что было. Наверное даже халатнее чем обычно стараюсь. Ну был морально отягощён. ‍

Однако - замедлил темп, подпиливал там звук эти косяки. "Что то сделал", но был не удовлетворен... Ладно с видео, его действительно можно в любое время перелепить.. но звук меня там эти склеечки не особо радовал.. да и пары слов не хватало...

Но у меня был мой ноу-хау! Как я недавно рассказывал уже, помните? Некоторое время назад я смог уговорить муз. ИИ (Suno) не петь, а говорить..  А ещё, однажды мне было недостаточно с выражением там сказано, а в генерации видео было очень красиво с экспрессией драматично ..(но с косяки по ударению) - тогда я уже попробовал сунуть тот косячокс как референс в Suno, и получил в результате правильно сказанное и с тем выражением, что подходило. 

Так же действовал и сейчас, сунул мой (прям видео, длилось дольше, но аудио переняло)..мой монтаж в Suno референсом...

ну и .. мои команды, плюс полный (!) текст 

ещё раз показываю нужные команды 

в поле текста: 

[spoken word], [spoken Lyric], [no music], [no melody], [no beat], [no rhythm], [no singing] [Cartoon, childlike]

[spoken word, no Musik, female Young Girl voice, энергично и радостно]

Привееее́т, мои бу́дущие космона́вты!

[spoken word, no Musik, female Young Girl voice, энергично и радостно]

— Меня зовут Катя! И да, у меня есть у́шки и хвост. Кру́то, правда? Я — Кот-Баю́н, только совреме́нная версия. Я очень любопытная, немного шкодли́вая и обожа́ю приключе́ния!

[spoken word, no Musik, female Young Girl voice, энергично и радостно]

— Я могу весь день валя́ться на кры́ше и смотреть на облака́… но сто́ит мне уви́деть что-то интересное — и я уже бегу́ туда́!

[spoken word, no Musik, female Young Girl voice, энергично и радостно]

Иногда из-за этого попадаю в заба́вные неприя́тности. Но зато я узнаю́ ку́чу всего́ но́вого и могу́ рассказа́ть об э́том вам!

[spoken word, no Musik, female Young Girl voice, энергично и радостно] [смеётся]

— Ви́дите? Я не идеа́льная. Но я очень стара́юсь быть хорошей ста́ршей сестро́й для вас!

[spoken word, no Musik, female Young Girl voice]

[загадочно и восторженно]

— А ещё я очень люблю смотреть на звёзды. Особенно ночью.

[spoken word, no Musik, female Young Girl voice]

[загадочно и восторженно]

Там, наверху́, целая огро́мная Солнечная Система! Плане́ты, лу́ны, ко́льца, коме́ты… столько всего́ интересного!

[spoken word, no Musik, female Young Girl voice, восторженно]

И я подумала: а почему бы нам не отправиться туда вместе?

[spoken word, no Musik, female Young Girl voice]

Я буду вашей проводни́цей! Буду рассказывать всё про́сто, ве́село и без ску́чных слов. С приключе́ниями, шу́тками и моим фи́рменным «мяу»

[spoken word, no Musik, female Young Girl voice,

загадочно и восторженно, призывно]

— Ну что, хотите полете́ть со мной? 

В сле́дующей се́рии мы отправимся к на́шей ближа́йшей сосе́дке — Луне́!

[spoken word, no Musik, female Young Girl voice,

загадочно и восторженно]

А потом полети́м да́льше — к Ма́рсу, к Сату́рну или даже посмо́трим на Со́лнце!

[spoken word, no Musik, female Young Girl voice,

восторженно]

Пишите в коммента́риях, куда́ вы хоти́те отпра́виться по́сле Луны́.

— Я буду ждать вас в сле́дующем вы́пуске!

[spoken word, no Musik, female Young Girl voice,

 восторженно]

До встре́чи, мои маленькие исследователи! Муррр...

полете́лии... 

***

в "окно стили"

spoken word, Cartoon Delivery, Young Girl voice no singing, say words joyful, variable tempo, minimalist  soundscape with nature sounds, Stars and Planet Bells, elements, emotive

[spoken word], [spoken Lyric], [no music], [no melody], [no beat], [no rhythm], [no singing] [girl voice] 

spoken word, no Musik, girl vocals

"spoken word, narration, clear voice, no music, no instruments , Cartoon style" "no beat, no melody, no rap, no singing"

произнести текст как в мультике, без посторонних звуков и без музыки, 

голос окрашенный эмоциями приключения, 

spoken word, narration, non-melodic, expressive storytelling, 

(накидал может быть слишком много, но суеверно не стираю ничего.. оно только - только ТАК сработало) 

вот так оно: 

https://suno.com/s/Bpb0jIlXbyegxBXU

теперь сказало все чистенько и полностью.. 

...

итак - подчеркну, это референс из аудио от сначала собранного видика, и плюс тот хитрый промт [и тэги в квадратных скобках] , что я показал, он работает, делает речь а не пение. Хоть все и говорили, что  это  маловероятно, ибо эти ИИ заточены на пение. Но случилось невозможное, и это интересно, ибо просто генераторы речи не так натуральны. А, как оказалось, музыкалка делает хорошую речь.

 Следим за хитро расставленной пунктуацией, ибо от нее тоже зависит кое что. Возможно некоторые абзацы или многоточия итд. стоит поменять, не так как в обычном вашем тексте, чтоб аудио вышло более качественно. Расставляем ударения. Помним, что иногда при знаке ударения всякие "голубоГо" так с Го и скажет.. там переписывать на "голубоВА" придется...  

в общем роман вы так легко не озвучите, но что покороче - получается. Вот буктрейлер - удачная идея, недлинный и эффектный. Для видоса можно и просто обложку оживить. 

С новым аудио я по быстрому немноооооого подвинул туда сюда видео, новое аудио получилось чуть длиннее. Ну в общем мы попробовали. В будущем буду лучше стараться.

....

а это проба в Flow от Google Labs, для андроид тож приложение есть. Насколько я знаю сайт в России открываться не хочет. Тут чисто по тексту (выше мы оживляли картинку) 

https://vk.ru/clip700675974_456240757?c=1

https://vk.ru/clip700675974_456240759?c=1

написал так 

Style: Cartoon als SW-Strichzeichnung, Im Style vom Zeichner Thomy

Location: Himmlische Gärten, Seelen mit Schaufeln schuften an Paradies- Apfelbäumen.. 

Personen: 

Gabriel - Flügel aus goldenen Federn, Tunika wie ein orientalische Bademantel aus Hamam, goldene Kette am Hals, Fresse bissl verweltlicht. Hat ein Heiligen Schein mit seltenen rötlichen Blitzer. Bartstoppeln und eine Zigarettenkippe im Mundwinkel 

EngelBote - kleiner, weiße Flügel, lange Badeshorts und T-Shirt mit Micky-Maus, Flip-Flops als Sandalen, sehr helle Haare,  Helle Heilige Schein 

Gabriel hört auf Engelboten, der im sagt:  "Achtung! der Alte hat ein Wesen erschaffen, Heißt Eva, ist komisch gebaut, Spielt mit der Schlange und frisst unsere Äpfel! Was tun?"

Gabriel ist wortlos und schockiert! 

***

перевод:

Стиль: Карикатура в виде черно-белого линейного рисунка, выполненная в манере художника Томи. (второй вариант)

 Место действия: Райские сады; души с лопатами усердно трудятся среди райских яблонь. Персонажи: Габриэль — крылья из золотых перьев; туника, напоминающая халат из восточного *хаммама*; золотая цепь на шее; лицо с несколько «земным» выражением. Его голову венчает нимб, от которого исходят редкие красноватые отблески. На подбородке — щетина, а в уголке рта зажата сигарета-«бычок».

 Ангел-вестник — невысокого роста; белые крылья; длинные плавательные шорты и футболка с изображением Микки Мауса; на ногах — вьетнамки; очень светлые волосы; яркий, сияющий нимб. ... 

Габриэль слушает Ангела-вестника, который обращается к нему со словами: «Внимание! Старик создал некое существо. Её зовут Ева; она довольно странно устроена; она играет со змеем и поедает наши яблоки! Что нам делать?» Габриэль лишился дара речи — он в полном шоке!

****

как видим - тут даже вот получилось чистенько по звуку и красивый ролик. Наверное потому что по немецки. С русским и тут бывает проруха. Но попробовать стоит, если прорвётесь, штуки четыре ролика в день получите и бесплатно. Но хрен туда попадешь, хотя возможно приложение Flow поставится.