Tiefenkarte für Seedance 2.5: So umgehen Sie die Gesichtsblockierung

Seedance 2.5 funktioniert nicht, wenn sich im Bild ein erkennbares Gesicht oder ein Stück des Films einer anderen Person befindet. So wehrt sich das Unternehmen gegen Fälschungen von Prominenten, doch es geht um ganz normale Menschen: Manchmal lehnt ein Model sogar das eigene Selfie ab. Es gibt einen Workaround, und dabei geht es nicht um Hacking. Das Modell passiert problemlos die Tiefenkarte – ein Schwarz-Weiß-Bild, bei dem die Helligkeit die Entfernung zur Kamera anzeigt. Es sind keine Gesichter darauf zu sehen, nur die Geometrie der Szene. Nachfolgend erfahren Sie, wie Sie aus Ihrem Video kostenlos eine solche Karte direkt im Browser erstellen und was zu tun ist, wenn die Generation immer noch ausfällt.

Warum sieht ein Model eine Berühmtheit, wo keine ist?

Filter Seedance werden auf Gesichter trainiert. Ihre Aufgabe ist einfach: zu verhindern, dass der Auftritt einer berühmten Person gefälscht wird. Das Problem ist, dass sie „Ruhm“ anhand der Gesichtsgeometrie definieren und nicht anhand des Namens im Abspann. Eine ähnliche Augenform, die gleiche Kinnform – und das war's, Ablehnung.

Bei Filmmaterial ist es noch einfacher: Dort funktioniert der Urheberrechtsschutz. Das Modell erkennt die Szene und übersieht sie nicht ganz, auch wenn man die Kamerabewegung nur wiederholen möchte.

Ergebnis: zwei unterschiedliche Verbote, aber es sieht gleich aus – ein roter Fehler und Zeitverschwendung.

Tiefenkarte: Geometrie statt Flächen

Eine Tiefenkarte ist dasselbe Video, nur in Graustufen neu gezeichnet. Je näher das Objekt an der Kamera ist, desto heller ist das Pixel. Der Hintergrund wird schwarz, der Hintergrund weiß. Keine Texturen, keine Haut, keine Augen: Alles, was bleibt, ist das Relief der Szene.

Dies ist ein wichtiger Punkt für den Filter. Es gibt nichts zu überprüfen – es gibt keine Gesichter. Und für Generation gibt es alles, was Sie brauchen: wo die Objekte waren, wohin die Kamera ging, wie sich der Plan änderte. Wir kopieren nicht den Rahmen eines anderen, wir übernehmen die Bewegung und Anordnung davon und das Modell zeichnet ihr eigenes Bild von Grund auf.

Ehrlich gesagt, was die Einschränkung betrifft: Es handelt sich nicht um eine „Alles umgehen“-Schaltfläche. Fragt man prompt direkt nach dem Gesicht eines bestimmten Schauspielers, kommt es erneut zu einer Absage. Die Tiefenkarte löst das Problem der Geometrie und Bewegung, nicht der Persönlichkeitssubstitution.

So erstellen Sie aus einem Video eine Tiefenkarte – kostenlos und ohne Hochladen auf den Server

Auf unserer Website ist dies ein separates Modell im Videobereich: Tiefenkarte (kostenlos). Es befindet sich in der Modellliste unter MiniMax. Sie wählen ein Video aus, drücken eine Taste und alles wird auf Ihrem Gerät berechnet.

Was ist drin: Modell Depth Anything V2 Small (Lizenz Apache 2.0) spielt direkt im Browser über ONNX Runtime Web. Wenn Sie WebGPU haben, zählt die Grafikkarte, wenn nicht, funktioniert der Backup-Pfad auf dem Prozessor. Die Frames werden durch WebCodecs analysiert und dann mit dem ursprünglichen FPS und der maximalen Auflösung, die Ihr Browser verarbeiten kann, wieder zu einem Video zusammengesetzt.

Die Ausgabe ist MP4 oder WebM – was der Browser unterstützt. Es gibt eine Vorschau des Ergebnisses, einen Schalter „Näher – heller / Näher – dunkler“ und Paletten: Grautöne, Inferno, Viridis. Der Verarbeitungsfortschritt ist Bild für Bild sichtbar; Eine lange Bearbeitung kann abgebrochen werden.

Zwei Dinge, die am wichtigsten sind. Erstens: Die Datei geht nirgendwo hin – weder auf unseren Server noch auf den eines anderen, alle Arbeiten finden auf dem Gerät statt. Zweitens: Token werden dafür nicht abgeschrieben; In diesem Modell gibt es überhaupt keine kostenpflichtige API. Die Modellgewichte und Engine-Dateien werden im Browser zwischengespeichert, sodass die Seite beim zweiten Mal schneller startet.

Wo es ungemütlich sein wird. Sie benötigen Chrome oder Edge – WebCodecs ist nicht überall verfügbar. Ein langes Video auf einem Prozessor gilt nicht als schnell: Eine Minute Quellmaterial kann mehrere Minuten dauern. Und es ist besser, 4K nicht auf einem schwachen Laptop auszuführen – beginnen Sie mit 720p, sehen Sie sich das Ergebnis an und erhöhen Sie dann die Auflösung.

Charakterentwicklung: Zwei Fehler, die das Ergebnis zerstören

Die zweite Technik aus demselben Video ist die korrekte Entwicklung des Charakters. Dies ist ein Bild, auf dem Gesicht und Kleidung getrennt dargestellt sind. Es hängt davon ab, wie es zusammengebaut wird, ob das Gesicht in der Generation schwebt oder an Ort und Stelle bleibt.

Der erste Fehler: Gesicht und Kleidung sind in unterschiedlichen Maßstäben gezeichnet. Das Model versteht nicht, dass es sich um eine Person handelt und beginnt, die Proportionen selbst zu vervollständigen. Fehler zwei: Der Scan wird aus Teilen verschiedener Personen zusammengesetzt – dann ist die Ausgabe ein gemitteltes Alien-Gesicht, und der Filter funktioniert wieder.

Die Arbeitsoption ist ein Scan, eine Person, das gleiche Licht und der gleiche Winkel auf beiden Teilen.

Wenn die Generierung immer noch mit einem Fehler bezüglich einer erkennbaren Person fehlschlägt

Es kommt vor, dass die Tiefenkarte vorhanden ist, der Scan korrekt zusammengestellt wurde, Seedance jedoch immer noch ablehnt. Das bedeutet, dass das Problem in einem der Bilder liegt und wir es finden müssen.

Die Methode ist einfach – die Eliminierungsmethode. Sie entfernen die Referenzen nacheinander und beginnen von vorne. Sobald die Generation vergeht, war das zuletzt entfernte Bild schuld. Dann erstellen Sie es entweder neu oder ersetzen es durch eine Tiefenkarte.

Für eine lange Zeit? Ja. Aber ohne zu raten: In drei, vier Durchgängen erkennt man den genauen Grund.

Und die zweite Technik aus demselben Video: Auf das Schuldbild wird ein regelmäßiges Raster aufgetragen – gleichmäßige Quadrate über dem Gesicht. Der Filter sieht nicht mehr das ganze Gesicht, aber für die Generierung bleiben die Merkmale lesbar. Das Raster wird in einem beliebigen Editor platziert oder das neuronale Netzwerk wird einfach aufgefordert, „ein quadratisches Raster auf dieses Foto zu legen“.

Übertragen Sie Kamerabewegungen von jedem Film

Die gleiche Technik funktioniert, ohne das Gesicht zu ersetzen. Sie nehmen ein Bild aus einem Film, erstellen daraus eine Tiefenkarte, geben es dem Modell zusammen mit Ihrer Eingabeaufforderung – und Sie erhalten Ihre Szene mit der gleichen Kamerabewegung: der gleichen Annäherung, der gleichen Drehung, dem gleichen Rhythmus.

So werden Trailer, Parodien und Werbespots gedreht, wenn eine „filmische“ Fahrt gefragt ist, aber kein Budget für einen Kameramann mit Kran vorhanden ist.

Was kommt als nächstes?

Die Reihenfolge ist wie folgt: Zuerst die Tiefenkarte - kostenlos im Browser, ohne eine Datei herunterzuladen und ohne Token abzuschreiben. Dann die Generation selbst - Seedance 2.5 auf unserer WebsiteAußerdem gibt es eine Charakterentwicklung und Referenzen.

Wenn etwas beim ersten Mal nicht funktioniert, beginnen Sie mit einem kurzen Clip von 3-5 Sekunden. Es zeigt sowohl Kamerabewegungen als auch Gesichtsverhalten und erfordert viel weniger Zeit und Token.