Kling 3.0 Motion Control: copiați mișcarea reală pe orice fotografie a personajului
Bottom Line Up Front (BLUF): Kling 3.0 Motion Control este un generator video AI construit în jurul transferului de mișcare. Dă-i o fotografie a unui personaj și un videoclip de referință cu cineva care se mișcă și redă un clip în care personajul tău realizează exact acele mișcări - dansul, mersul, gesturile. Aspectul vine din imagine, coregrafia vine din filmare. Aceasta este a treia și cea mai precisă generație a tehnologiei.
Ce face transferul de mișcare de fapt
Să presupunem că aveți nevoie de mascota dvs. ilustrată pentru a executa un dans la modă. Nimeni nu rezervă un studio de captare a mișcării pentru asta. În schimb, încărcați un clip cu o persoană reală care dansează ca referință, atașați imaginea mascotei și generați. Sistemul citește mișcarea corpului din videoclip și o repetă cu personajul tău, cadru cu cadru.
Acest lucru ocolește slăbiciunea de bază a videoclipurilor cu mesaje text: coregrafia este aproape imposibil de descris în cuvinte. Aici nu o descrii niciodată - o demonstrezi. Orice se întâmplă în referință se întâmplă în ieșire, executat de oricine este în imaginea ta: o persoană fotografiată, un personaj de marcă, un erou desenat manual.
Cum se îmbunătățește 3.0 față de versiunea 2.6
Ambele generații sunt disponibile pe site, iar decalajul dintre ele este real. Versiunea 3.0 păstrează mult mai bine identitatea personajului printr-o mișcare complexă, gestionează schimbările rapide de poziție cu mai puține mâini topite și fețe în derivă și, în general, are nevoie de mai puține reîncercări pentru a obține o imagine publicabilă. Pentru orice este menit să fie văzut de un public, începeți de aici.
De asemenea, introduce un control care îi lipsește predecesorului său: orientarea caracterului. Tu decizi dacă plasarea figurii și fața trebuie să urmeze videoclipul de referință sau să rămână fidele imaginii încărcate. Asta rezolvă durerea de cap clasică din vechea generație, în care un personaj încadrat în portret a fost înghesuit stânjenitor într-o scenă încadrată în peisaj.
Moduri de orientare, rezoluție și lungime a clipului
Alegerea „urmăriți videoclipul” vă aliniază personajul cu interpretul din referință și acceptă clipuri de până la 30 de secunde - suficient pentru o secțiune completă de dans sau o scenetă extinsă. Dacă alegeți „urmărește imaginea”, se păstrează încadrarea imaginii, dar se limitează la 10 secunde. Alegeți în funcție de dacă lungimea sau fidelitatea compoziției dvs. contează mai mult.
Rezoluția este un drop-down simplu: 720p pentru schițe rapide, 1080p pentru randarea finală pe care intenționați să o publicați. Un flux de lucru sensibil este să repetați ieftin la 720p până când împerecherea foto-plus-referință face clic, apoi regenerați câștigătorul în întregime HD. Rezultatele sunt stocate în istoric pentru descărcare sau extensie.
Alegerea unui videoclip de referință care funcționează
Cele mai bune referințe arată un interpret, complet în cadru, cu mișcare lizibilă și o cameră stabilă. Tăieturile dure, ocluziile și filmările tremurătoare încurcă urmărirea mișcării. Dacă împrumutați un dans de pe rețelele sociale, alegeți o imagine în care dansatorul rămâne vizibil din cap până în picioare din prima secundă până în ultima.
Imaginea personajului tău are cerințe paralele: arată silueta cel puțin cu talia în sus, într-o poziție din care mișcarea ar putea crește în mod plauzibil. Un personaj prăbușit într-un fotoliu nu se va lansa cu grație într-un salt ridicat de la referință. Potriviți aproximativ pozițiile de început, iar tranziția în mișcare rămâne lină.
Acolo unde aceasta își câștigă păstrarea
Specialiștii de marketing animă mascotele mărcii pentru campanii bazate pe tendințe, fără a angaja un animator. Ilustratorii se filmează pe un telefon și transmit mișcarea personajelor lor desenate. Creatorii produc clipuri cu avatarul lor realizând cascadorii pe care preferă să nu le încerce în persoană. În fiecare caz, filmarea de referință se ocupă de actorie, iar AI se ocupă de casting.
Există o regulă fermă: folosiți numai chipuri și filmări la care aveți drepturi. Pozele tale proprii, personajele tale, material licențiat. Respectând acest lucru, instrumentul transformă o singură imagine statică plus o mișcare împrumutată în animație finală în câteva minute și nu în săptămâni.
Întrebări frecvente
Prin ce diferă acest lucru de un model normal imagine-video?
Un model standard de imagine în video inventează mișcarea de la zero sau dintr-un mesaj text. Motion Control copiază mișcarea dintr-un videoclip pe care îl furnizați, oferindu-vă un control precis asupra coregrafiei pe care nicio solicitare scrisă nu îl poate egala.
Cât de lung poate fi clipul generat?
Până la 30 de secunde când orientarea caracterului urmează videoclipul de referință și până la 10 secunde când urmează imaginea dvs. Oricum, durata de ieșire este legată de materialul de referință pe care îl încărcați.
Ar trebui să folosesc 3.0 sau versiunea mai veche 2.6?
Implicit la 3.0: menține fețele și detaliile stabile prin mișcare solicitantă și adaugă controlul orientării. Versiunea 2.6 încă are sens pentru experimente rapide, cu mize mici, în care viteza de iterație contează mai mult decât lustruirea.