Peta kedalaman untuk Seedance 2.5: cara melewati pemblokiran wajah

Seedance 2.5 menolak berfungsi jika ada wajah yang dikenali atau bagian film orang lain di dalam bingkai. Beginilah cara perusahaan melawan selebriti palsu, tetapi ini berlaku untuk orang biasa: seorang model terkadang bahkan menolak selfie Anda sendiri. Ada solusinya, dan ini bukan tentang peretasan. Model dengan mudah melewati peta kedalaman - gambar hitam putih di mana kecerahannya menunjukkan jarak ke kamera. Tidak ada wajah di atasnya, hanya geometri pemandangannya. Di bawah ini adalah cara membuat peta seperti itu dari video Anda secara gratis, langsung di browser, dan apa yang harus dilakukan jika generasinya masih menurun.

Mengapa seorang model melihat selebriti padahal sebenarnya tidak ada?

Filter Seedance dilatih pada wajah. Tugas mereka sederhana: mencegah pemalsuan penampilan orang terkenal. Masalahnya adalah mereka mendefinisikan "ketenaran" berdasarkan geometri wajahnya, dan bukan berdasarkan nama di kredit. Bentuk mata yang mirip, bentuk dagu yang sama - dan itu saja, penolakan.

Bahkan lebih mudah lagi dengan rekaman film: perlindungan hak cipta berlaku di sana. Model mengenali pemandangan tersebut dan tidak melewatkannya sepenuhnya, meskipun Anda hanya ingin mengulangi gerakan kamera.

Hasilnya: dua larangan berbeda, tetapi kelihatannya sama - kesalahan merah dan buang-buang waktu.

Peta kedalaman: geometri, bukan wajah

Peta kedalaman adalah video yang sama, hanya digambar ulang dalam skala abu-abu. Semakin dekat objek ke kamera, semakin terang pikselnya. Latar belakang memudar menjadi hitam, latar belakang menjadi putih. Tanpa tekstur, tanpa kulit, tanpa mata: yang tersisa hanyalah kelegaan pemandangan.

Ini adalah poin penting untuk filter. Tidak ada yang perlu diperiksa - tidak ada wajah. Dan untuk generasi, ada semua yang Anda butuhkan: di mana objek berada, ke mana arah kamera, bagaimana rencana berubah. Kami tidak menyalin bingkai orang lain, kami mengambil gerakan dan pengaturannya, dan model menggambar sendiri, dari awal.

Sejujurnya tentang batasannya: ini bukan tombol “lewati semuanya”. Jika Anda segera menanyakan langsung wajah aktor tertentu, penolakan akan datang lagi. Peta kedalaman memecahkan masalah geometri dan pergerakan, bukan substitusi kepribadian.

Cara membuat peta kedalaman dari video - gratis dan tanpa diunggah ke server

Di situs web kami ini adalah model terpisah di bagian video: Peta kedalaman (gratis). Itu ada dalam daftar model di bawah MiniMax. Anda memilih video, menekan tombol, dan semuanya dihitung di perangkat Anda.

Apa yang ada di dalamnya: model Depth Anything V2 Small (lisensi Apache 2.0) diputar langsung di browser melalui ONNX Runtime Web. Jika Anda memiliki WebGPU, kartu video dihitung, jika tidak, jalur cadangan pada prosesor berfungsi. Bingkai diuraikan melalui WebCodecs, lalu dirangkai kembali menjadi video dengan FPS asli dan resolusi maksimum yang dapat ditangani browser Anda.

Outputnya adalah MP4 atau WebM - yang didukung browser. Ada pratinjau hasilnya, tombol “Lebih Dekat - Lebih Terang / Lebih Dekat - Lebih Gelap” dan palet: nuansa abu-abu, Inferno, Viridis. Kemajuan pemrosesan terlihat bingkai demi bingkai; pemrosesan yang lama dapat dibatalkan.

Dua hal yang paling penting. Pertama: file tidak pergi ke mana pun - baik ke server kami, maupun ke server orang lain, semua pekerjaan dilakukan di perangkat. Kedua: token tidak dihapuskan untuk ini; tidak ada API berbayar sama sekali dalam model ini. Bobot model dan file mesin di-cache di browser, sehingga halaman dimulai lebih cepat untuk kedua kalinya.

Dimana itu akan menjadi tidak nyaman. Anda memerlukan Chrome atau Edge - WebCodecs tidak tersedia di semua tempat. Video panjang pada prosesor tidak dianggap cepat: satu menit materi sumber dapat memakan waktu beberapa menit. Dan lebih baik tidak menjalankan 4K pada laptop yang lemah - mulailah dengan 720p, lihat hasilnya, lalu naikkan resolusi.

Pengembangan karakter: dua kesalahan yang mematikan hasil

Teknik kedua dari video yang sama adalah pengembangan karakter yang benar. Ini adalah salah satu gambar dimana wajah dan pakaian ditampilkan secara terpisah. Tergantung bagaimana perakitannya, apakah mukanya akan mengapung turun-temurun atau tetap di tempatnya.

Kesalahan pertama: wajah dan pakaian digambar pada skala yang berbeda. Model tidak memahami bahwa ini adalah satu orang, dan mulai menyelesaikan proporsinya sendiri. Kesalahan kedua: pemindaian dikumpulkan dari potongan-potongan orang yang berbeda - kemudian hasilnya adalah rata-rata wajah alien, dan filter berfungsi kembali.

Opsi yang berfungsi adalah satu pemindaian, satu orang, cahaya dan sudut yang sama di kedua bagian.

Jika generasi masih gagal dengan kesalahan tentang orang yang dapat dikenali

Kebetulan peta kedalaman sudah ada, pemindaian dilakukan dengan benar, tetapi Seedance masih menolak. Artinya masalahnya ada di salah satu gambar, dan kita perlu menemukannya.

Caranya sederhana – metode eliminasi. Anda menghapus referensi satu per satu dan memulai lagi. Segera setelah generasi tersebut berlalu, gambar terakhir yang dihapuslah yang harus disalahkan. Kemudian Anda membangunnya kembali atau menggantinya dengan peta kedalaman.

Untuk waktu yang lama? Ya. Tapi tanpa menebak-nebak: dalam tiga atau empat kali Anda dapat melihat alasan pastinya.

Dan teknik kedua dari video yang sama: kisi-kisi biasa diterapkan pada gambar yang bersalah - kotak genap di seluruh wajah. Filter berhenti melihat seluruh wajah, tetapi untuk generasi fitur-fiturnya tetap dapat dibaca. Kisi-kisi tersebut ditempatkan di editor mana pun atau jaringan saraf hanya diminta untuk “meletakkan kisi-kisi persegi pada foto ini”.

Transfer pergerakan kamera dari film apa pun

Teknik yang sama bekerja tanpa mengganti bagian muka. Anda mengambil bingkai dari sebuah film, membuat peta kedalaman darinya, memberikannya kepada model beserta perintah Anda - dan Anda mendapatkan adegan Anda dengan gerakan kamera yang sama: pendekatan yang sama, putaran yang sama, ritme yang sama.

Beginilah cara pengambilan gambar trailer, parodi, dan iklan ketika perjalanan “sinematik” diperlukan, namun tidak ada anggaran untuk juru kamera dengan derek.

Apa selanjutnya

Urutannya adalah sebagai berikut: pertama peta kedalaman - gratis di peramban, tanpa mengunduh file dan tanpa menghapus token. Kemudian generasi itu sendiri - Seedance 2.5 di situs web kami, ada juga pengembangan karakter dan referensi.

Jika pertama kali sesuatu tidak berhasil, mulailah dengan klip pendek berdurasi 3-5 detik. Ini menunjukkan pergerakan kamera dan perilaku wajah, dan membutuhkan lebih sedikit waktu dan token.