AI-Story-To-Movie: когда галлюцинации нейросети не баг, а фича
Автор: Евгений ЗадорожныйПродолжаю тестировать свой пайплайн в режиме: INPUT(Song TXT) / OUTPUT(MusicVideo MP4).
Хорошо, когда песни нарративные, как у "Короля и Шута". А если там только идеи и образы?
Поэтому в этот раз я взял "Пикник": "Инкогнито" в духе психологического триллера, и "Египтянин" в духе городского шаманизма.
А здесь генерация спецэффектов, глюки и фантазия нейросеток оказались вполне уместны, добавляя нужный градус сюрреализма.
Оживлял нарезку и промпты из AI-Movie-To-Story в расширении для Chrome, чтобы не страдать копипастингом. Немного допилил https://github.com/allophylus/grok-imagine-loop , так что мне потребовалось только пять кликов чтобы загрузить animation_manifest JSON и все нарезанные панели.
Таймлайн создания на примере "Египтянина":
• 15 мин: проработка сценария и стиля (смесь нуара и Египта)
• 45 мин: рендеринг сложной анимации в Grok Imagine - просто ждал, пока расширение обработает и сохранит все клипы
• 30 мин: сведение в shotcut
Youtube:
Rutube: