Wan 2.2 Animate: ビデオから写真へのモーション転送

Bottom Line Up Front (BLUF): Wan 2.2 Animate は AI モーション転送ツールです。キャラクターの写真と誰かが動いているビデオを与えると、キャラクターがその正確な動きを実行します。モデルが即興で演奏する一般的な写真アニメーションとは異なり、ここでは自分で振り付けを指示します。リファレンスクリップで人物が何をするにしても、キャラクターが画面上で繰り返されます。

モーションがクリップからキャラクタに移動する仕組み

モデルは、リファレンスビデオを純粋なメカニズム (ポーズ、ジェスチャー、頭の回転、フレーム内での体の動き) まで取り除き、その骨格を写真内の人物に適用します。外観は静止画像から、動作は映像から得られ、両方のソースを完全にコントロールできます。

これが、独自の発明による穏やかな呼吸とランダムな微動を追加するワンクリック写真アニメーションとの主な違いです。ここでは即興ではなく方向性を得ることができます。 Wan特定のダンスを踊るイラスト付きヒーローはいませんか?携帯電話で踊る動画を撮影し、両方のファイルをモデルに渡します。

移動モード: キャラクターを動かします

2 つの操作モードのうちの 1 つ目では、キャラクターが新しいシーンにドロップされ、そこでリファレンスパフォーマンスが実行されます。スタジオやクリエイターは、イラスト、アバター、ブランドマスコットをアニメーション化するためにこれを使用します。アーティストがヒーローを一度描くと、その後は誰でも普通のカメラでそのヒーローの新しい役割を撮影できます。

リファレンスは、自撮りビデオのように控えめなものでも構いません。手を振ったり、肩をすくめたり、指をさしたり、回転したりすると、キャラクターがあなたを映します。アニメーターに数週間の時間を要していた作業が、モーションデザインのスキルがゼロの人でも実行できる、フィルムのアップロードと生成のループに崩壊します。

置換モード: 映像内の人物を入れ替えます

2 番目のモードは逆に動作します。新しいシーンにモーションを抽出するのではなく、元のビデオ (背景、照明、カメラワーク) をそのまま維持し、画面上の人物を写真のキャラクターに置き換えます。誰が演じているかを除いて、ショットに関するすべてが残ります。

これにより、実際に撮影されたセグメントを漫画のマスコットがホストしたり、さまざまな場所からの映像に同じキャラクターが登場したり、1 人の認識できるヒーローが主役のソーシャルシリーズ全体など、遊び心のある制作トリックが可能になります。これは、俳優を 2 回雇うことなく、一貫したキャラクター主導のコンテンツを実現する最速の方法です。

入力の準備と解像度の選択

インプットの質が結果の半分を決めます。写真は、モデルが体の構造を読み取ることができるように、理想的には穏やかな背景に対して、遮るもののないキャラクターの完全な姿を映す必要があります。フレーム内に 1 人の人物を入れ、照明を均一にし、適度に安定したカメラを使用してリファレンスを撮影します。

出力解像度は、480p、580p、720pの 3 段階です。最低の設定でドラフトを実行してモーションがどのように着地するかを確認し、その後、最高の設定で最終バージョンを作成します。コストは参照の長さと選択した解像度を追跡し、完成したクリップは生成履歴で待機します。

モーション転送で試してみる価値のあるアイデア

ダンストレンドが勝利を収めるのは明白です。あなたのブランドキャラクターは、撮影スタッフなしでバイラルな動きを成功させます。さらに、描かれたプレゼンターが主催するチュートリアル、マスコットの誕生日の挨拶、生き生きとした児童書のイラスト、単一のリグが存在する前に本物のような人間の動きで紹介されるゲームキャラクター。

家族のアーカイブという、より静かなニッチ分野もあります。ビンテージ写真は、手を振る、方向転換する、カメラに向かって微笑むなど、今日撮影されたジェスチャーを繰り返すように作成できます。これらのクリップは、その動きがまさに人間的であるからこそ、感情的に着地します。それは実在の人物からキャプチャされたものです。

Frequently asked questions

移動と置換の違いは何ですか?

Move は、写真のキャラクターを新しいシーンに配置し、参照モーションを実行します。 Replace は、元の映像 (セット、照明、カメラ) を保持し、その中の人物のみをキャラクターと交換します。

どのような写真が最も効果的ですか?

シンプルな背景と何も覆われていない全身ショット。実在の人物、イラストのヒーロー、マスコットはすべて機能します。モデルは体の構造を明確に認識して動きをマッピングするだけで済みます。

参考ビデオはどのようなものにすべきでしょうか?

フレーム内に 1 人が写っており、照明も均一で、無秩序な手ブレもありません。普通の電話録音で十分です。動きが明確に読み取れるほど、キャラクターはそれをより忠実に再現します。