Как сохранить одного персонажа в нескольких ИИ-клипах

Каждый клип, который вы генерируете, это новый бросок кубика. Модель не помнит курьера в горчичном плаще из предыдущего клипа, она знает только то, что вы дали ей сейчас. Поэтому если во втором кадре плащ чуть желтее, а лицо чуть круглее, ничего не сломалось. Вы просто оставили модели место для догадок.

Так что постоянство - это не настройка. Это привычка каждый раз давать модели одну и ту же информацию, теми же словами и теми же картинками, и заранее знать, какие детали она всё равно исказит.

Начните с одного неизменного опорного кадра

Слова описывают персонажа приблизительно, а картинка закрепляет его. Сначала сделайте один чистый кадр героя: в полный рост или по пояс, простой фон, ровный свет, лицом к камере или чуть в сторону. Зафиксируйте эту картинку, прежде чем тратить что-то на движение. Для неё подойдёт модель текста в изображение, например модели изображений из каталога, а модель правки вроде Nano Banana 2.1 edit позволяет сменить цвет плаща или фон, не перерисовывая человека.

Затем начинайте каждый клип с этого кадра в модели изображения в видео, например Kling V4.0 image-to-video. Первый кадр задаёт лицо, одежду и палитру, а в промпте остаётся лишь описать, что происходит. Клип только по тексту каждый раз придумывает героя заново. Здесь хорошо работает схема из статьи черновик, фиксация, финал: сначала дёшево набросайте движение от кадра, а потом один раз потратьтесь на финальный рендер.

Напишите строку о персонаже один раз и вставляйте её

Рядом с картинкой держите одно предложение, которое называет героя. Напишите его один раз, в удобном вам порядке, и вставляйте без изменений в начало каждого промпта. Не перефразируйте ради разнообразия. «Горчичный плащ» в одном промпте и «жёлтая куртка» в другом для модели - две разные вещи.

• Зафиксируйте существительные и цвета. Выберите одно название для каждой вещи и одно слово для цвета и никогда их не меняйте. Конкретное лучше поэтичного: «горчичный» надёжнее, чем «золотистый».
• Пишите коротко. Пяти-шести черт достаточно: возрастная группа, волосы, одна главная вещь, один аксессуар, один цвет. Длинный список частично игнорируется.
• Сначала персонаж, потом действие. Строка остаётся неизменной, от клипа к клипу меняются только действие и камера.
• Не добавляйте лишнего. Каждая лишняя деталь - ещё одна вещь, которая может измениться между кадрами.

Лист персонажа надёжнее памяти

Перед вторым клипом запишите лист: опорный кадр, строку о персонаже, палитру из трёх цветовых слов, слова о свете и форму кадра (высокий или широкий). Храните его в той же заметке, что и список кадров, чтобы копировать из него, а не из последнего промпта, который вы помните. Список кадров задаёт порядок клипов, а лист даёт всем им один и тот же состав.

Если у вас есть несколько дополнительных кадров того же героя с других ракурсов, больше всего помогают вид сбоку и со спины, храните их вместе с листом. Модели, которые принимают несколько референсов, смогут их использовать, а в модели с одним изображением они служат вашей собственной проверкой: с ними можно сравнить результат.

Начинайте с кадра, на котором закончился прошлый клип

Когда два клипа идут друг за другом в монтаже, второй должен начаться там, где остановился первый. Откройте готовый клип в видеоредакторе, дойдите до последнего кадра, экспортируйте его как картинку и используйте как первый кадр следующего клипа. Поза, место в комнате и свет уже верны, и модели остаётся только продолжить.

• Выбирайте спокойный последний кадр. Кадр посреди моргания или шага даёт следующему клипу странное начало. Отступите на несколько кадров к устойчивому.
• Посмотрите на экспортированный кадр, прежде чем использовать. Если в конце лицо размылось или рука стала странной, следующий клип унаследует это. Возьмите кадр раньше или вернитесь к опорному.
• Не тяните цепочку бесконечно. Каждая генерация от сгенерированного кадра немного теряет в качестве. После двух-трёх звеньев начните заново с исходного опорного кадра и смонтируйте клипы вместе.
• Закрепляйте оба конца, когда можно. Vidu Q3 start-end-to-video и параметр последнего кадра в Kling V4.0 позволяют указать, где кадр начинается и где заканчивается, и короткий план остаётся с одним героем от начала до конца.

Держите свет одинаковым от клипа к клипу

Персонаж может быть безупречным и всё равно выглядеть другим человеком, если свет сместился от тёплого оконного к холодному верхнему. Используйте в каждом промпте сцены одни и те же два-три слова о свете и меняйте их, только когда история меняет место. «Мягкий серый пасмурный свет» остаётся на улице, на лестнице и в холле. Склейка с улицы в помещение - подходящий момент для смены, и монтаж прячет скачок. Если свет должен измениться внутри одного клипа, слова из статьи перемены света без мерцания сделают это плавно.

Форму кадра тоже оставляйте прежней. Герой, нарисованный для высокого кадра, а затем запрошенный в широком, компонуется заново, и лицо с одеждой обычно сдвигаются вместе с ним.

Что всё равно уплывает и как это обойти монтажом

Даже с опорным кадром, вставленной строкой и совпадающими кадрами кое-что смещается. Знайте это и планируйте кадры так, чтобы оно мешало меньше.

• Руки. Число пальцев и хват меняются от клипа к клипу. Держите руки маленькими в кадре, в карманах, за предметом или за кадром и уходите на другой план, пока они не делают ничего тонкого.
• Волосы. Причёска между дублями становится длиннее или короче, а хвост превращается в распущенные волосы, когда голова поворачивается. Выбирайте волосы, которые легко повторить: короткие, собранные или под капюшоном.
• Мелкие логотипы и узоры. Значки, полоски, надписи и пряжки рисуются каждый раз заново, а текст на одежде никогда не бывает стабильным. Берите простую одежду, а любую метку добавьте потом в редакторе.
• Украшения и очки. Серьги меняют сторону, а очки меняют форму. Не добавляйте их без необходимости для истории.
• Далёкие лица. Лицо, маленькое в кадре, собирается из нескольких пикселей и потому варьируется сильнее. Важные лица держите в средних и крупных планах.

Ответ - инструменты монтажа: режьте по действию, чтобы взгляд зрителя был на движении, показывайте затылок или плечо в кадрах, где лицо рискованно, вставляйте крупный план предмета между двумя дублями и делайте клипы короткими. Клип может длиться максимум 30 с, но чем короче клип, тем меньше времени у героя, чтобы измениться.

Чего студия не умеет

Она не может гарантировать, что на двух клипах изображён в точности один и тот же человек. Нет сохранённого персонажа, нет блокировки лица и нет общей памяти между запусками, а сид в модели, где он есть, повторяет результат для того же промпта и картинки, но не для новой сцены. Работу делают опорный кадр, вставленная строка и ваш монтаж. Когда дубль близок, но не точен, оставьте клип и уйдите от расхождения монтажом, а не платите за идеальный.