מפת עומק עבור Seedance 2.5: כיצד לעקוף חסימת פנים

Seedance 2.5 מסרב לעבוד אם יש פרצוף מזוהה או קטע מהסרט של מישהו אחר בפריים. כך נלחמת החברה נגד זיופים של מפורסמים, אבל זה מגיע לאנשים רגילים: דוגמנית לפעמים אפילו דוחה את הסלפי שלך. יש פיתרון, וזה לא קשור לפריצה. הדגם עובר בקלות דרך מפת העומק - תמונה בשחור לבן שבה הבהירות מראה את המרחק למצלמה. אין בו פרצופים, רק הגיאומטריה של הסצנה. להלן איך לעשות מפה כזו מהסרטון שלך בחינם, ישירות בדפדפן, ומה לעשות אם הדור עדיין יורד.

למה דוגמנית רואה סלבריטי איפה שאין?

מסננים Seedance מאומנים על הפנים. המשימה שלהם פשוטה: למנוע מהמראה של אדם מפורסם להיות מזויף. הבעיה היא שהם מגדירים "תהילה" לפי הגיאומטריה של הפנים, ולא לפי השם בקרדיטים. צורת עין דומה, אותה צורת סנטר - וזהו, סירוב.

זה אפילו יותר קל עם קטעי סרטים: הגנת זכויות יוצרים פועלת שם. הדוגמנית מזהה את הסצנה ולא מפספסת אותה לגמרי, גם אם רק רוצים לחזור על תנועת המצלמה.

התוצאה: שני איסורים שונים, אבל זה נראה אותו הדבר - טעות אדומה ובזבוז זמן.

מפת עומק: גיאומטריה במקום פרצופים

מפת עומק היא אותו סרטון, רק משורטט מחדש בגווני אפור. ככל שהאובייקט קרוב יותר למצלמה, כך הפיקסל בהיר יותר. הרקע דוהה לשחור, הרקע ללבן. בלי מרקמים, בלי עור, בלי עיניים: כל שנותר הוא ההקלה של הסצנה.

זוהי נקודת מפתח עבור המסנן. אין מה לבדוק - אין פרצופים. ולדור יש את כל מה שאתה צריך: איפה היו החפצים, לאן הלכה המצלמה, איך התוכנית השתנתה. אנחנו לא מעתיקים מסגרת של מישהו אחר, אנחנו לוקחים ממנה את התנועה והסידור, והדוגמנית מציירת תמונה משלה, מאפס.

בכנות לגבי המגבלה: זה לא "כפתור לעקוף הכל". אם תבקשו מיד ישירות את פניו של שחקן ספציפי, הסירוב יחזור. מפת העומק פותרת את בעיית הגיאומטריה והתנועה, לא החלפת אישיות.

איך עושים מפת עומק מסרטון - בחינם וללא העלאה לשרת

באתר שלנו זה דגם נפרד בקטע הווידאו: מפת עומק (חינם). זה נמצא ברשימת הדגמים תחת MiniMax. אתה בוחר סרטון, לוחץ על כפתור, והכל מחושב במכשיר שלך.

מה יש בפנים: דגם Depth Anything V2 Small (רישיון Apache 2.0) משחק ישירות בדפדפן דרך ONNX Runtime Web. אם יש לך WebGPU, כרטיס המסך נחשב, אם לא, נתיב הגיבוי במעבד עובד. הפריימים מנותחים דרך WebCodecs, ואז מורכבים חזרה לווידאו עם ה-FPS המקורי והרזולוציה המקסימלית שהדפדפן שלך יכול להתמודד איתה.

הפלט הוא MP4 או WebM - מה שהדפדפן תומך. יש תצוגה מקדימה של התוצאה, מתג "קרוב יותר - בהיר / קרוב יותר - כהה יותר" ופלטות: גוונים של אפור, Inferno, Viridis. התקדמות העיבוד נראית מסגרת אחר מסגרת; ניתן לבטל עיבוד ארוך.

שני דברים שהכי חשובים. ראשית: הקובץ לא עובר לשום מקום - לא לשרת שלנו, ולא של מישהו אחר, כל העבודה מתבצעת במכשיר. שנית: אסימונים לא נמחקים על כך; אין ממש API בתשלום במודל הזה. משקלי הדגם וקבצי המנוע נשמרים בדפדפן, כך שהדף מופעל מהר יותר בפעם השנייה.

איפה זה יהיה לא נוח. אתה צריך Chrome או Edge - WebCodecs לא זמין בכל מקום. סרטון ארוך על מעבד אינו נחשב למהיר: דקה של חומר מקור יכולה לקחת מספר דקות. ועדיף לא להפעיל 4K על מחשב נייד חלש - התחל עם 720p, ראה את התוצאה, ואז העלה את הרזולוציה.

פיתוח דמות: שתי טעויות שהורגות את התוצאה

הטכניקה השנייה מאותו סרטון היא התפתחות נכונה של הדמות. זוהי תמונה אחת שבה הפנים והבגדים מוצגים בנפרד. תלוי איך זה מורכב אם הפנים יצופו בדור או יישארו במקומם.

הטעות הראשונה: הפנים והבגדים מצוירים בקנה מידה שונה. הדוגמנית לא מבינה שמדובר באדם אחד, ומתחילה להשלים את הפרופורציות בעצמה. שגיאה שנייה: הסריקה מורכבת מחתיכות של אנשים שונים - ואז הפלט הוא פרצוף חייזר ממוצע, והפילטר עובד שוב.

אפשרות העבודה היא סריקה אחת, אדם אחד, אותו אור וזווית בשני החלקים.

אם הדור עדיין נכשל עם שגיאה על אדם מוכר

קורה שמפת העומק קיימת, הסריקה מורכבת נכון, אבל Seedance עדיין מסרב. זה אומר שהבעיה נמצאת באחת התמונות, ואנחנו צריכים למצוא אותה.

השיטה פשוטה - שיטת האלימינציה. אתה מסיר את ההפניות בזה אחר זה ומתחיל מחדש. מיד עם חלוף הדור, התמונה האחרונה שהוסרה הייתה אשמה. אז אתה בונה אותו מחדש או מחליף אותו במפת עומק.

להרבה זמן? כֵּן. אבל בלי לנחש: בשלוש או ארבע ריצות אפשר לראות את הסיבה המדויקת.

והטכניקה השנייה מאותו סרטון: רשת רגילה מוחלת על התמונה האשמה - אפילו ריבועים על הפנים. המסנן מפסיק לראות את כל הפנים, אבל במשך הדור התכונות נשארות קריאות. הרשת ממוקמת בכל עורך או שהרשת העצבית פשוט מתבקשת "לשים רשת מרובעת על התמונה הזו".

העבר את תנועת המצלמה מכל סרט

אותה טכניקה עובדת מבלי להחליף את הפנים. אתה לוקח פריים מסרט, מכין ממנו מפת עומק, נותן אותו לדגם יחד עם ההנחיה שלך - ומקבל את הסצנה שלך באותה תנועת מצלמה: אותה גישה, אותה פנייה, אותו קצב.

כך מצלמים טריילרים, פרודיות ופרסומות כשצריך נסיעה "קולנועית", אבל אין תקציב לצלם עם מנוף.

מה הלאה

הסדר הוא כדלקמן: ראשית מפת העומק - חינם בדפדפן, בלי להוריד קובץ ובלי למחוק אסימונים. ואז הדור עצמו - Seedance 2.5 באתר האינטרנט שלנו, יש גם פיתוח דמות והתייחסויות.

אם משהו לא עובד בפעם הראשונה, התחל עם קליפ קצר של 3-5 שניות. זה מראה גם את תנועת המצלמה וגם את התנהגות הפנים, ולוקח הרבה פחות זמן ואסימונים.