Kling 3.0 Rörelsekontroll: kopiera verklig rörelse till valfritt karaktärsfoto

Bottom Line Up Front (BLUF): Kling 3.0 Motion Control är en AI-videogenerator byggd kring rörelseöverföring. Mata den med ett foto av en karaktär och en referensvideo av någon som rör sig, och den återger ett klipp där din karaktär utför de exakta rörelserna – dansen, promenaden, gesterna. Utseendet kommer från bilden, koreografin kommer från filmen. Detta är den tredje och mest exakta generationen av tekniken.

En illustrerad maskot som utför en viral dans kopierad från verkliga mänskliga filmer

Vad rörelseöverföring faktiskt gör

Anta att du behöver din illustrerade maskot för att utföra en trenddans. Ingen bokar en motion-capture-studio för det. Istället laddar du upp ett klipp av en riktig person som gör dansen som referens, bifogar maskotbilden och skapar. Systemet läser av kroppsrörelsen från videon och utför den igen med din karaktär, ruta för ruta.

Detta kringgår kärnsvagheten hos textbaserad video: koreografi är nästan omöjlig att beskriva med ord. Här beskriver du det aldrig – du demonstrerar det. Vad som än händer i referensen händer i produktionen, utförd av den som är på din bild: en fotograferad person, en varumärkeskaraktär, en handritad hjälte.

Hur 3.0 förbättras på version 2.6

Båda generationerna är tillgängliga på sajten, och gapet mellan dem är verkligt. Version 3.0 bevarar karaktärens identitet genom komplexa rörelser mycket bättre, hanterar snabba posebyten med färre smälta händer och drivande ansikten, och behöver i allmänhet färre försök för att få en publicerbar take. För allt som är tänkt att ses av en publik, börja här.

Den introducerar också en kontroll som dess föregångare saknar: karaktärsorientering. Du bestämmer om figurens placering och ansikte ska följa referensvideon eller förbli trogen din uppladdade bild. Det fixar den klassiska gamla generationens huvudvärk där en porträttinramad karaktär på ett obekvämt sätt trängdes in i en landskapsinramad scen.

Generationsinställningar som visar upplösningsalternativ och teckenorienteringsväljaren

Orienteringslägen, upplösning och klipplängd

Om du väljer "följ videon" anpassas din karaktär till artisten i referensen och stöder klipp på upp till 30 sekunder — tillräckligt för en hel danssektion eller en utökad sketch. Om du väljer "följ bilden" behålls inramningen av din bild men begränsar utmatningen vid 10 sekunder. Välj baserat på om längd eller trohet mot din komposition är viktigare.

Upplösningen är en enkel rullgardinsmeny: 720p för snabbutkast, 1080p för den slutliga renderingen du tänker publicera. Ett vettigt arbetsflöde är att iterera billigt på 720p tills foto-plus-referens-parningen klickar, och sedan återskapa vinnaren i sin helhet HD. Resultaten lagras i din historik för nedladdning eller förlängning.

Att välja en referensvideo som fungerar

De bästa referenserna visar en artist, helt i ram, med läsbara rörelser och en stadig kamera. Hårda skärningar, ocklusioner och skakiga bilder förvirrar rörelsespårning. Om du lånar en dans från sociala medier, välj en take där dansaren förblir synlig från topp till tå från första sekund till sista.

Din karaktärsbild har parallella krav: visa figuren åtminstone i midjan, i en pose som rörelsen troligen skulle kunna växa ur. En karaktär som sjunker ihop i en fåtölj kommer inte graciöst att starta i ett hopp som lyfts från referensen. Matcha startpositionerna ungefär, och övergången till rörelse förblir mjuk.

Där detta tjänar sitt behåll

Marknadsförare animerar varumärkesmaskotar för trenddrivna kampanjer utan att anlita en animatör. Illustratörer filmar sig själva på en telefon och överlämnar rörelsen till sina ritade karaktärer. Skapare producerar klipp av sin avatar och utför stunts som de helst inte vill försöka personligen. I varje fall gör referensfilmen skådespeleriet och AI:n gör castingen.

Det finns en fast regel: använd bara ansikten och bilder du har rättigheter till. Dina egna foton, dina egna karaktärer, licensierat material. Med det respekterat förvandlar verktyget en enda stillbild plus en lånad rörelse till färdig animation på minuter snarare än veckor.

Vanliga frågor

Hur skiljer sig detta från en normal bild-till-video-modell?

En standardbild-till-video-modell uppfinner rörelse från början eller från en textuppmaning. Motion Control kopierar rörelse från en video som du tillhandahåller, vilket ger dig en ramexakt kontroll över koreografin som ingen skriftlig uppmaning kan matcha.

Hur långt kan det genererade klippet vara?

Upp till 30 sekunder när teckenriktningen följer referensvideon och upp till 10 sekunder när den följer din bild. Hur som helst är utdatatiden bunden till referensmaterialet du laddar upp.

Ska jag använda 3.0 eller den äldre versionen 2.6?

Standard till 3.0: det håller ansikten och detaljer stabila genom krävande rörelser och lägger till orienteringskontrollen. Version 2.6 är fortfarande vettigt för snabba experiment med låga insatser där iterationshastigheten är viktigare än polering.

Liknande modeller