Jedna postava konzistentně napříč několika AI video klipy

Každý vygenerovaný klip je nový hod kostkou. Model si nepamatuje kurýra v hořčicovém pršiplášti z předchozího klipu; ví jen to, co mu dáte tentokrát. Když tedy druhý záběr ukáže plášť o něco žlutější a obličej o něco kulatější, nic není rozbité. Modelu prostě zůstal prostor hádat.

Konzistence proto není nastavení. Je to zvyk dávat modelu pokaždé stejné informace, stejnými slovy a stejnými obrázky, a vědět předem, které detaily bude stále zkazit.

Začněte jedním pevným referenčním obrázkem

Slova popisují postavu volně; obrázek ji přibije. Nejdřív vytvořte jeden čistý obrázek postavy: celou postavu nebo od pasu nahoru, prosté pozadí, rovnoměrné světlo, otočenou k objektivu nebo trochu bokem. Obrázek dokončete, než utratíte cokoli za pohyb. Hodí se na to model text na obrázek, například obrázkové modely v katalogu, a editační model jako Nano Banana 2.1 edit umožní změnit barvu kabátu nebo pozadí, aniž by se postava překreslila.

Pak začínejte každý klip z tohoto obrázku v modelu obrázek na video, například Kling V4.0 image-to-video. První snímek určí obličej, oblečení a paletu; prompt jen říká, co se děje. Klip jen z textu vymýšlí postavu pokaždé znovu. Postup koncept, zámek, dokončení tu funguje dobře: pohyb levně nacvičte z obrázku a pak jednou utraťte za finální render.

Řádku o postavě napište jednou a pak ji vkládejte

K obrázku mějte jednu větu, která postavu pojmenuje. Napište ji jednou, v pořadí, které se vám líbí, a vkládejte beze změny na začátek každého promptu. Nepřeformulovávejte ji pro změnu. „Hořčicový pršiplášť“ v jednom promptu a „žlutá bunda“ v dalším jsou pro model dva různé kabáty.

• Pevná podstatná jména a slova o barvě. Zvolte pro každý kus oděvu jedno jméno a jedno slovo o barvě a nikdy je nezaměňujte. Konkrétní poráží poetické: „hořčicový“ je lepší než „zlatavý“.
• Držte to krátké. Pět šest vlastností stačí: věkové rozmezí, vlasy, jeden hlavní oděv, jeden doplněk, jedna barva. Dlouhý seznam se částečně ignoruje.
• Postava první, akce druhá. Řádka je pevná část; z klipu na klip se mění jen akce a kamera.
• Vynechte, co nepotřebujete. Každý další detail je další věc, která se může mezi záběry změnit.

Karta postavy poráží paměť

Před druhým klipem si kartu zapište: referenční obrázek, řádku o postavě, paletu ve třech slovech o barvě, slova o světle a tvar záběru (na výšku nebo na šířku). Mějte ji ve stejné poznámce jako seznam záběrů, abyste z ní mohli vkládat místo z posledního promptu, který si pamatujete. Seznam záběrů dává pořadí klipů; karta dává každému z nich stejné obsazení.

Pokud máte pár dalších obrázků téže postavy z jiných úhlů, nejvíc pomáhá pohled z boku a zezadu, ukládejte je ke kartě. Modely, které přijímají více referenčních obrázků, je mohou použít; u modelu s jedním obrázkem slouží jako vaše vlastní kontrola, s níž lze výsledek porovnat.

Začněte na snímku, kde skončil poslední klip

Když po sobě ve střihu následují dva klipy, druhý by měl začít tam, kde první skončil. Otevřete hotový klip ve video editoru, posuňte se na jeho poslední snímek, exportujte ho jako obrázek a použijte jako první snímek dalšího klipu. Póza, poloha v místnosti a světlo jsou už správně a model musí jen pokračovat.

• Vyberte klidný poslední snímek. Snímek zachycený v půlce mrknutí nebo kroku dá dalšímu klipu divný začátek. Vraťte se o pár snímků k ustálenému.
• Exportovaný snímek si prohlédněte, než ho použijete. Pokud obličej na konci změkl nebo ruka zvláštně vypadá, další klip to zdědí. Zvolte dřívější snímek, nebo se vraťte k referenčnímu obrázku.
• Nezřetězujte donekonečna. Každé generování z vygenerovaného snímku trochu ztratí. Po dvou třech článcích začněte znovu od původního referenčního obrázku a klipy sestříhejte.
• Připněte oba konce, když to jde. Vidu Q3 start-end-to-video a volba posledního snímku u Kling V4.0 umožňují říct, kde záběr začíná a kde končí, což drží krátký záběr u jedné postavy od začátku do konce.

Držte světlo z klipu na klip stejné

Postava může být dokonalá a přesto vypadat jako jiný člověk, pokud se světlo změní z teplého okenního na studené stropní. Používejte v každém promptu jedné scény stejná dvě tři slova o světle a měňte je, jen když příběh změní místo. „Měkké šedé zatažené světlo“ zůstává na ulici, na schodech i v hale. Střih zvenku dovnitř je chvíle, kdy ho změnit, a střih skok skryje. Pokud se musí světlo změnit uvnitř jednoho klipu, udrží ho plynulé slova z článku o změnách světla bez blikání.

Držte stejný i tvar snímku. Postava nakreslená pro výšku a pak požadovaná na šířku se komponuje znovu a obličej i oblečení se s tím obvykle posunou.

Co stále ujíždí a jak to ostříhat

I s obrázkem, vloženou řádkou a navazujícími snímky se něco hýbe. Znejte to a záběry plánujte tak, aby na tom záleželo méně.

• Ruce. Počet prstů a úchopy se z klipu na klip mění. Držte ruce ve snímku malé, v kapsách, za předmětem nebo mimo záběr a odstřihněte dřív, než udělají něco jemného.
• Vlasy. Účes mezi pokusy získá nebo ztratí délku a culík se při otočení hlavy změní ve volné vlasy. Zvolte vlasy, které se snadno opakují: krátké, stažené dozadu nebo pod kapucí.
• Malá loga a vzory. Odznaky, proužky, vytištěná slova a přezky se pokaždé překreslují a text na oblečení nikdy není stálý. Zvolte jednoduché oblečení a případné označení přidejte dodatečně v editoru.
• Šperky a brýle. Náušnice mění strany a brýle tvar. Vynechte je, pokud je příběh nepotřebuje.
• Vzdálené obličeje. Obličej malý ve snímku se skládá z mála pixelů, takže víc kolísá. Důležité obličeje držte ve středních a blízkých záběrech.

Odpovědí jsou nástroje editoru: střihejte na akci, aby oko diváka sledovalo pohyb, ukažte zátylek nebo rameno v záběrech, kde by obličej byl riziko, vložte detail předmětu mezi dva pokusy a držte klipy krátké. Klip může trvat nanejvýš 30 sekund, ale čím je kratší, tím méně času má postava na toulání.

Co studio neumí

Nemůže zaručit, že dva klipy ukazují přesně tutéž osobu. Neexistuje uložená postava, zámek obličeje ani sdílená paměť mezi běhy, a seed u modelu, který ho nabízí, opakuje výsledek pro stejný prompt a obrázek, ne pro novou scénu. Práci odvádí referenční obrázek, vložená řádka a vaše střihy. Když je pokus blízko, ale ne přesný, klip ponechte a od rozdílu odstřihněte, místo abyste platili za dokonalý.