Новогодний мультфильм через нейросеть с ребёнком в главной роли и раскадровкой

—

от автора

Мультик с ребёнком в главной роли удобнее делать через нейросеть короткими сценами. Сначала соберите один рисунок героя, у которого хорошо видны лицо и одежда. Потом оживите две-три сцены по очереди. Для первой пробы хватит нескольких секунд: по ним уже понятно, узнаётся ли ребёнок и сохраняются ли детали образа. Статичный кадр и анимацию можно подготовить в генераторе Umnik AI.

В условном примере шестилетняя Лера отправляет поздравление в игрушечный домик на бумажной лодке. Река вырезана из голубого картона, а вместо паруса в лодке торчит уголок открытки. В кукольной анимации Леру можно узнать по жёлтому свитеру и двум косичкам.

Почему герой меняется между сценами

При генерации отдельных кадров нейросеть заново собирает внешность, свет и одежду по подсказкам для каждого запуска. Если в первом запросе была «девочка у реки», во втором «ребёнок возле домика», а общего изображения не было, у модели мало оснований нарисовать одну и ту же Леру. Обращайте внимание и на одежду. Лицо может выглядеть похоже, а форма воротника и цвет рукавов изменятся прямо на склейке.

У Леры две короткие косички с синими резинками и жёлтый вязаный свитер. По этим деталям её можно узнать даже сбоку. Сохраните опорный кадр, где хорошо видны лицо, резинки и форма воротника. На общем плане у реки одежда и причёска помогут связать героиню с предыдущим кадром.

Один кадр решает одну задачу. Если в пяти секундах Лера складывает открытку, вставляет её в лодку и отпускает лодку, у монтажёра сразу несколько мест для возможных исправлений. Начнём с уже сложенной открытки. На первом плане её уголок виден в лодке, на втором лодка движется по реке, на третьем она причаливает к дому. Момент, где пальцы отпускают лодку, можно скрыть склейкой.

Для семейного ролика годится иллюстрированный герой, похожий на ребёнка через детали. Используйте снимки, которыми семья согласна поделиться для этой задачи. Для публичного примера соберите вымышленного персонажа со сходной одеждой. Из исходников уберите узнаваемые адреса, документы и школьные бейджи.

Где собрать кадр и оживить его в Umnik AI

В генераторе изображений и видео сначала подготовьте эталон героя. Добавьте один резкий портрет, если хотите добиться сходства, и опишите стиль. Нажмите «Создать» и посмотрите результат в полном размере. Скачайте одобренный кадр и подавайте его дальше как визуальную опору. Если ролик будет вертикальным, делайте исходное изображение сразу с запасом места в этой ориентации.

Для движения откройте Seedance 2.5 в генераторе и проверьте, какие референсы и параметры длительности доступны в вашем интерфейсе. Разработчик описывает поддержку визуальных референсов, а конкретные поля зависят от способа доступа. На первом коротком дубле проверьте, сохранила ли модель форму лодки и цвет открытки. Описание Seedance 2.5 у разработчика.

На скриншоте открыт общий генератор. Нужную модель для конкретного кадра выбирайте в его меню, а удачные дубли держите в «Моих генерациях».

Задача

Инструмент или приём

Что проверить

Нарисовать героя и общий стиль

Генератор изображений, один портрет и одно описание

Лицо открыто, одежда различима, кадр годится для обрезки

Написать короткую раскадровку

Чат и условие «одно действие на план»

Сюжет понятен даже с выключенным звуком

Оживить готовое изображение

Видеомодель с исходным кадром

Лодка и уголок открытки выглядят одинаково в начале и в конце

Добавить речь

Собственная запись или голос рассказчика через раздел «Аудио»

Слова слышны, паузы совпадают с монтажом

Раскадровка про открытку в бумажной лодке

Первый кадр с героиней у картонной реки

Общий план показывает Леру у ближнего берега, домик видно в правом углу. Лодка стоит у края картона. Красный уголок открытки легко заметить. При таком начале хватит одной реплики рассказчика: «У этой открытки будет свой корабль». Пальцы можно оставить за границей кадра.

Кадр из кукольной анимации. Девочка в жёлтом вязаном свитере с двумя косичками и синими резинками наклоняется над настольной рекой из голубого картона. У ближнего края белая бумажная лодка, внутри красный уголок открытки. В глубине справа игрушечный дом с белой крышей. Камера немного выше стола. Лицо видно в три четверти, руки ниже края кадра.

Второй кадр с движением лодки

Для первого дубля движения задайте в видеогенераторе один короткий путь. Покажите реку крупнее и сдвиньте лодку из левой части кадра в правую. Зритель уже знает, кто её отправил. Перед склейкой проверьте, что лодка сохранила форму, а открытка осталась на месте.

Возьми приложенный кадр лодки как начало. Статичная камера смотрит сбоку на голубую картонную реку. Белая бумажная лодка с красным уголком открытки ровно перемещается слева направо. Сохрани форму носа и наклон открытки. Картонные берега неподвижны. Один короткий план без смены ракурса.

Третий кадр у игрушечного дома

Покажите лодку у ступеньки игрушечного дома, затем коротко вернитесь к лицу Леры. Если нужен звук, положите тихий шорох бумаги на склейку. Движение уже было в предыдущем кадре. Финалу достаточно статичного плана, где видны дом и уголок открытки на переднем плане.

Что делать, если лицо плывёт в движении

Сравните кадр на старте, в середине и перед обрезкой. Посмотреть только первую секунду мало: у персонажа может измениться форма щёк или появиться другая чёлка ближе к финалу. Если удачная часть короткая, используйте её как вставку и уйдите склейкой на лодку. Проблемную сцену проще перезапустить из того же эталона, чем менять портрет посреди всего проекта.

Урезайте движение по одному действию. Если Лера смотрит на лодку, задайте небольшой наклон головы без обхода камеры. На общем плане сохраните свитер и причёску. Затем можно вставить одобренный крупный портрет как статичное изображение с мягким приближением. Для новых сцен сохраните отдельную копию исходника из генератора.

Если один план разваливается, сохраните само событие. В истории Леры можно скрыть одно действие склейкой, если зритель видит его результат в следующем кадре.

Проблемный план

Чем заменить

Что увидит зритель

Пальцы деформируются, когда Лера отпускает лодку

Склейка с лица Леры на лодку, уже плывущую по картонной реке

Лера отправила открытку

Форма лодки меняется в середине движения

Оставить короткий удачный участок и сразу перейти к домику

Лодка прошла по реке

Лицо теряется на общем плане

Показать причаливание без героини и вставить её опорный портрет

Открытка добралась до дома, Лера увидела результат

Как собрать звуковую дорожку

Сначала выставьте реплику рассказчика на монтажной шкале. Отведите пару секунд на движение лодки, где хватит шороха бумаги. Имя ребёнка лучше слышно в начале или в конце, где звуков меньше. Для чтения можно записать собственный голос или открыть вкладку «Озвучка» в разделе «Аудио».

Чек-лист семейного мультфильма

  1. Покажите одному человеку ролик без звука. Он должен понять, откуда взялась лодка и куда она привезла открытку.

  2. Сверьте одежду и причёску на стыках, особенно воротник свитера и синие резинки.

  3. Прослушайте речь поверх музыки на телефоне. Если слова тонут, сначала убавьте фон, затем повторите проверку.

  4. Скачайте ролик и исходники. Храните отдельно исходное фото, рисунок героя, короткие сцены и монтаж.

Частые вопросы

Как сделать мультик по фото ребёнка через нейросеть?

Соберите стилизованный эталон из фотографии, сохраните его и используйте как визуальный референс в каждой сцене. Сходство проверяйте на статике до анимации.

Можно ли сделать новогодний мультик без фотографии?

Да. Опишите возраст героя, причёску и две заметные детали одежды, затем сохраните первый рисунок. Имя и семейная история добавят персональности через озвучку.

Сколько сцен нужно для первого мультфильма?

Для маленькой истории достаточно трёх: вводим предмет, показываем действие, видим последствие. Для длинного ролика лучше дописывать новые эпизоды по одному.

Как сохранить одного персонажа во всех кадрах?

Дайте модели одобренный кадр героя и повторяйте фиксированные признаки одежды. Меняйте по одной переменной: план, фон или действие. Следующую сцену собирайте только после проверки предыдущей.

Почему руки ломаются, когда герой держит игрушку?

Контакт руки с мелким предметом усложняет движение. Сделайте план крупнее и проще. Можно показать предмет на столе и сменить кадр уже после условного действия героя.

Можно ли озвучить мультфильм после генерации видео?

Да. Сначала соберите немую раскадровку, потом наложите голос, фоновый звук и паузы по местам склеек. Сценарий можно сократить в чате, если реплика не помещается в кадр.

Как избежать скачка света между двумя планами?

В обоих запросах сохраните один источник света и его положение. Если планы сняты с разных сторон, вставьте крупный план лодки, где видны голубой картон и знакомый красный уголок. Такая деталь связывает соседние планы.

С чего начать

Сделайте рисунок Леры у картонной реки. Когда лицо и одежда прошли проверку, сгенерируйте плавное движение лодки и добавьте статичный финал у домика. Первый опорный кадр можно собрать в Umnik AI.

ссылка на оригинал статьи https://habr.com/ru/articles/1110082/