Kling 3.0 Bewegingsbediening: kopieer echte beweging naar elke karakterfoto
Bottom Line Up Front (BLUF): Kling 3.0 Motion Control is een AI-videogenerator die is opgebouwd rond bewegingsoverdracht. Geef hem een foto van een personage en een referentievideo van iemand die beweegt, en er wordt een fragment weergegeven waarin je personage precies die bewegingen uitvoert: de dans, de wandeling, de gebaren. Uiterlijk komt uit het beeld, choreografie komt uit het beeldmateriaal. Dit is de derde en meest nauwkeurige generatie van de technologie.
Wat bewegingsoverdracht eigenlijk doet
Stel dat je je geïllustreerde mascotte nodig hebt om een trenddansje uit te voeren. Niemand boekt daarvoor een motion-capture studio. In plaats daarvan upload je een clip van een echte persoon die de dans doet als referentie, voeg je de mascotteafbeelding toe en genereer je. Het systeem leest de lichaamsbeweging uit de video en voert deze frame voor frame opnieuw uit met je personage.
Dit omzeilt de kernzwakte van tekstgestuurde video: choreografie is bijna onmogelijk in woorden te beschrijven. Hier beschrijf je het nooit – je demonstreert het. Wat er in de referentie gebeurt, gebeurt ook in de output, uitgevoerd door degene die op je foto staat: een gefotografeerde persoon, een merkpersonage, een handgetekende held.
Hoe 3.0 verbetert ten opzichte van versie 2.6
Beide generaties zijn beschikbaar op de site en de kloof ertussen is reëel. Versie 3.0 behoudt de identiteit van het personage veel beter door middel van complexe bewegingen, kan snelle poseveranderingen aan met minder gesmolten handen en zwervende gezichten, en heeft over het algemeen minder nieuwe pogingen nodig om een publiceerbare versie te krijgen. Voor alles wat bedoeld is om gezien te worden door een publiek, begin hier.
Het introduceert ook een controle die zijn voorganger ontbeert: karakteroriëntatie. Jij beslist of de plaatsing en de richting van de figuur de referentievideo moeten volgen of trouw moeten blijven aan je geüploade afbeelding. Dat lost de klassieke hoofdpijn van de oude generatie op, waarbij een personage met een portretlijst onhandig in een scène met een landschapslijst werd gepropt.
Oriëntatiemodi, resolutie en cliplengte
Als u 'volg de video' kiest, wordt uw personage op één lijn gebracht met de artiest in de referentie en worden clips van maximaal 30 seconden ondersteund - genoeg voor een volledige danssectie of een uitgebreide sketch. Als u 'volg de afbeelding' kiest, blijft de kadrering van uw foto behouden, maar wordt de uitvoer beperkt tot 10 seconden. Kies op basis van de vraag of lengte of trouw aan uw compositie belangrijker is.
Resolutie is een eenvoudige vervolgkeuzelijst: 720p voor snelle concepten, 1080p voor de definitieve weergave die u wilt publiceren. Een verstandige workflow is om goedkoop te herhalen op 720p totdat de foto-plus-referentiekoppeling klikt, en vervolgens de winnaar volledig opnieuw te genereren op HD. Resultaten worden opgeslagen in uw geschiedenis om te downloaden of uit te breiden.
Een referentievideo kiezen die werkt
De beste referenties tonen één artiest, volledig in beeld, met leesbare bewegingen en een vaste camera. Harde sneden, occlusies en wankele beelden verwarren bewegingsregistratie. Als je een dans van sociale media leent, kies dan een take waarbij de danser van de eerste tot de laatste seconde van top tot teen zichtbaar blijft.
Je personagebeeld heeft parallelle vereisten: laat het figuur ten minste zijn middel zien, in een pose waar de beweging aannemelijk uit zou kunnen groeien. Een personage dat onderuitgezakt in een fauteuil zit, zal niet gracieus een sprong maken die uit de referentie is getild. Pas de starthoudingen ongeveer aan, en de overgang naar beweging blijft soepel.
Waar dit zijn brood verdient
Marketeers animeren merkmascottes voor trendgestuurde campagnes zonder een animator in te huren. Illustratoren filmen zichzelf met een telefoon en geven de beweging door aan hun getekende karakters. Makers maken clips van hun avatar die stunts uitvoert die ze liever niet persoonlijk proberen. In beide gevallen doet het referentiemateriaal het acteerwerk en doet de AI de casting.
Er is één vaste regel: gebruik alleen gezichten en beeldmateriaal waar je rechten op hebt. Je eigen foto's, je eigen personages, gelicentieerd materiaal. Als dat in acht wordt genomen, verandert de tool een enkel stilstaand beeld plus een geleende beweging in een voltooide animatie in slechts enkele minuten in plaats van weken.
Veelgestelde vragen
Hoe verschilt dit van een normaal beeld-naar-video-model?
Een standaard beeld-naar-video-model bedenkt beweging helemaal opnieuw of vanaf een tekstprompt. Motion Control kopieert beweging uit een video die u aanlevert, waardoor u een frame-nauwkeurige controle krijgt over de choreografie die geen enkele geschreven prompt kan evenaren.
Hoe lang mag de gegenereerde clip zijn?
Tot 30 seconden wanneer de karakteroriëntatie de referentievideo volgt, en tot 10 seconden wanneer deze uw afbeelding volgt. Hoe dan ook, de uitvoerduur is gekoppeld aan de referentiebeelden die u uploadt.
Moet ik 3.0 of de oudere 2.6 versie gebruiken?
Standaard ingesteld op 3.0: het houdt gezichten en details stabiel bij veeleisende bewegingen en voegt oriëntatiecontrole toe. Versie 2.6 is nog steeds zinvol voor snelle experimenten met lage inzetten waarbij de iteratiesnelheid belangrijker is dan de afwerking.