AI-Story-To-Movie: "Самозванец", полный фильм

Это последнее баловство с моим PoC AI-Story-To-Movie

Источник: рассказ "Самозванец" (Impostor) Филипа К. Дика

Объём: 39 сцен 3x3, 351 кадр для оживления

Экранное время: 20 минут.

Тайминг создания:

• Генерация референсов: 10 минут - Gemini 2.5 Pro + Nano Banana Pro.
• Генерация сценария: часть - эпизод - сцены - 40 минут - Gemini 2.5 Pro.
• Генерация раскадровок: 40 минут - Nano Banana Pro.
• Перегенерация раскадровок: 13 сцен из 39 (30%) - по минуте на новый вариант, из-за сбоев по референсам - 30 минут, некоторые получились только со второго-третьего раза.
• Правки отдельных кадров: 20 кадров из 351 - по минуте на правку - Nano Banana Pro (API + CLI) - 20 минут
• Оживление: 9 пакетов по 36-45 сцен - Grok Imagine на подписке SuperGrok - 1 минута на видео, 4 дня из-за Rate Limit 100 RPD. Grok Imagine Loop Chrome extension для автоматизации вместо дорогого Veo.
• Перегенерация роликов: 10 из 351, некоторые по 5-6 вариантов - 40 минут всего.
• Озвучка: 9 запусков smart-dubbing - Gemini Flash TTS - по 5 минут на часть - 45 минут.
• Сборка фрагментов: 9 фрагментов, по 15-20 минут в shotcut для обрезки и подгонки озвучки - 3 часа
• OST: Suno
• Сборка двух частей: по 10 минут в shotcut
• Итоговая сборка: 10 минут в shotcut

Итого:

• автоматические скрипты: ~10 часов всего
• ручные правки и монтаж: ~6 часов всего за три вечера

Особенности:

• в этом ролике не было референсов для внутренностей шаттла, скафандров, локаций, интерфейсов, поэтому их детали плавают от сцены к сцене. лень переделывать.
• иногда видеогенераторы путаются, кто что говорит и делает, приходится уточнять в промпте
• сцены с ножом и телом робота валились на модерации, прошли после правок картинки и промптов
• для сцен, когда персонажа изначально нет в кадре, использовал Veo с референсами (кадр в начале)
• Grok Imagine, да и Veo часто с эмоциями переигрывают, слишком уж гримасничают

Результат:

Кроме моего самопального PoC, есть ещё интересные проекты для преобразования историй в видео:

• Pallaidium - киностудия на основе ИИ, встроенная в Blender Video Editor - https://github.com/tin2tin/Pallaidium
• ViMax - Agentic Video Generation - https://github.com/HKUDS/ViMax
• AutoMV - музыку в видео клип - https://arxiv.org/abs/2512.12196  https://dzen.ru/a/aVNHUbe7s2NNAwNO