המדריך להחלפת דמויות בסרטונים עם AI

בטח ראיתם רילס שבהם מכניסים פוליטיקאי לסצנה מסרטון ויראלי. ניסיתי את זה בעצמי, על שגרת הבוקר המפורסמת של אשטון הול. הנה כל הדרך בצילומי מסך: איפה זה עבד ואיפה הכלי חסם אותי.

מה צריך

• ChatGPT, או כל כלי אחר שעורך תמונות לפי פרומפט
• חשבון Higgsfield עם קרדיטים, בשביל שלב הווידאו
• פריים מהסצנה, ו-2 עד 3 תמונות חדות של הדמות שנכנסת אליה

שלב 1: לוכדים פריים מהסצנה

עוצרים את הסרטון על פריים שבו הפנים גלויות, ומצלמים מסך. מה שעובד הכי טוב: דמות אחת, פנים גלויות, ובלי ידיים מול הפנים.

שלב 2: מכניסים את הדמות לפריים ב ChatGPT

מעלים את הפריים ושתי תמונות חדות של הדמות, עם פרומפט שאומר בדיוק מה מחליפים ומה משאירים:

Replace the face and head of the man in the first image with the face of the man in the second image, including his grey hair. Keep the black mouth tape, nose strip, body, gold chain, watch, pose, bathroom mirror and lighting unchanged. Photorealistic.

התוצאה הראשונה כמעט אף פעם לא מושלמת. כאן גוון העור של הפנים לא התאים לגוף, אז ביקשתי תיקון בהודעה נוספת. ממשיכים באותה שיחה, ככה ChatGPT זוכר את הדמות:

רוצים עוד פריים מאותו סרטון? מעלים אותו לאותה שיחה וכותבים "ואז גם בתמונה הזו". הדמות נשארת עקבית:

והתוצאה:

שלב 3: מריצים ב Higgsfield Genjutsu

כאן הופכים את הפריים לסרטון שבו הדמות עושה בדיוק את התנועה מהמקור.

1. ב Higgsfield נכנסים ל Video, ובלשונית Create Video בוחרים Higgsfield Genjutsu. יש שני מצבים: Motion transfer, ששומר את התנועה ובונה את הסצנה מחדש, ו-Objects swap, שמחליף רק את הדמות
2. בוחרים את הסרטון: לוחצים על התיבה Add a reference video (1), נפתחת ספריית ההעלאות, ובוחרים את הקליפ (2). אם הוא עוד לא שם, מעלים אותו דרך Upload media. אורך: 4 עד 30 שניות

3. בוחרים את התמונות: אחרי שהקליפ נכנס, לוחצים על התיבה Add your characters (3), ובוחרים מההעלאות את התמונות שיצאו מ ChatGPT (4). אפשר לבחור כמה תמונות, עד 30

4. מדליקים את Prompt. בתוך הפרומפט מסמנים את הקליפ כ @Video 1 ואת התמונה כ @Image 1:

Replace the main character in the video (@Video 1) with the person from the reference images. Keep the original motion, camera, timing and background. (@Image 1)

5. ב Quality בוחרים 720p. על כפתור Generate מופיע המחיר. אצלי, על קליפ קצר ב-720p, זה היה 175 קרדיטים

כאן הכלי חסם אותי

Genjutsu החזיר Protected content detected ו-Rejected due to copyright restrictions. הקרדיטים חזרו, אבל הסרטון לא נוצר. הוא זיהה שהקליפ של אשטון הול מוגן בזכויות יוצרים.

המסקנה: עם סצנה ויראלית של מישהו אחר, ChatGPT עוד יעבוד על תמונות סטילס, אבל כלי הווידאו יחסום.

מה הורס את הריאליזם

• גוון עור שלא מתאים בין הפנים לגוף. מתקנים בהודעה נוספת
• ידיים מול הפנים. הדמות "נמרחת" ברגע שהיד עוברת
• תאורה חזקה מהצד, או צל על חצי מהפנים
• תמונות רפרנס חלשות: מטושטשות, עם פילטר, או מזווית אחרת לגמרי

פרודיה מסומנת: מה חייבים לפני שמעלים

חשוב לדעת: זה מה שאני עושה ומה שאני ממליץ, לא ייעוץ משפטי.

• מתייגים AI בפלטפורמה. באינסטגרם מסמנים AI info בזמן ההעלאה. ביוטיוב מסמנים ב YouTube Studio שהתוכן שונה או נוצר באופן סינתטי
• אנשים פרטיים, רק בהסכמה.

שאלות נפוצות

כמה זה עולה? ChatGPT עובד גם בחשבון רגיל. ב Higgsfield, קליפ קצר ב-720p עלה לי 175 קרדיטים. כשההרצה נחסמה, הקרדיטים חזרו.

למה ChatGPT עבד ו Higgsfield חסם? החסימה הייתה על הקליפ, לא על הדמות. Higgsfield זיהה שהסרטון של אשטון הול מוגן. קליפ שצילמתם בעצמכם עובר.

מה ההבדל בין Objects swap ל Motion transfer? Objects swap מחליף רק את הדמות ומשאיר את הסצנה. Motion transfer משאיר רק את התנועה, ובונה את כל השאר מחדש מהתמונות.

לסיום

יש שאלה או תוצאה שלא יצאה טוב? כתבו לי ב [email protected].