Search
Lip sync Runway

כיצד ליצור סרטונים לסנכרון שפתיים עם Runway AI

עם ההכרזה האחרונה על כלי ה-Gen-3 Alpha שלהם, Runway אמורה לקחת את יצירת וידאו בינה מלאכותית לשלב הבא. בסוף המדריך הזה, תהיה לך הבנה ברורה כיצד להשתמש בכלי סינכרון השפתיים של Runway ותוכל להחליט אם זה הפתרון המתאים לצרכי יצירת הווידאו שלך.

כאחד המפתחים המוקדמים של פלטפורמת ייצור התמונות Stable Diffusion פורצת הדרך, Runway מביאה שפע של ניסיון לכל ההיבטים של יצירת תמונות ווידאו המופעלות על ידי AI. אחת התכונות הנגישות והפופולריות ביותר של Runway היא כלי סינכרון השפתיים של אודיו לווידאו. טכנולוגיה זו מאפשרת למשתמשים ליצור סרטוני ראש מדבר מציאותיים על ידי התאמת תנועות שפתיים לקלט אודיו. בין אם אתה יוצר תוכן, מחנך או מקצוען עסקי, כלי זה מציע מגוון יישומים לשיפור פרויקטי הווידאו שלך.

1. התחבר

היכנס מסלול המראה. אם זו הפעם הראשונה שאתה משתמש בפלטפורמת הבינה המלאכותית, תוכל להירשם באמצעות חשבון Gmail שלך.

2. ניווט בממשק

פונקציית סינכרון השפתיים של הווידאו נמצאת מתחת לתפריט האודיו בלוח המחוונים של חשבון Runway לצד כלי תלת מימד, ויצירת תמונות ווידאו. בחר את הקול המועדף עליך מהאפשרויות.

מה שיפה בממשק המשתמש הוא השימוש הליברלי בחומר הדרכה בכל שלב, מה שמרגיע למתחילים שמתחילים את מסע המדיה של AI.

3. הזן את ההנחיה שלך

דף סינכרון השפתיים עצמו פשוט ומנחם וקל לשימוש. הפינה השמאלית העליונה היא המקום לכניסות המשתמש. זה יכול להיות באמצעות בקשת טקסט, קובץ שמע שהועלה או כלי להקלטת אודיו תוך כדי תנועה.

אם תשדרג לתוכנית ה-Pro תמורת $35 לחודש, ואתה יכול אפילו להקליט את הקול המותאם אישית שלך לשימוש עם אווטאר.

4. בחר את הקול שלך

החלטתי להעלות אווטאר שנוצר על ידי AI שיצרתי קודם, ולשלב אותו עם סקריפט קצר כדי לבדוק את הדיוק של תנועות השפתיים.

יש מגוון גדול של קולות לבחירה, שכנראה משקף את ההיסטוריה של Runway של עבודה צמודה עם תעשיית הקולנוע, כך שיש משהו לכולם.

5. הפק את הסרטון שלך

לאחר שעשית את האודישן ובחירת הקולות, זה רק עניין של העלאת תסריט (או קליפ אודיו מוקלט מראש) ולחיצה על כפתור Generate.

התוכנית החינמית מייצרת בקצב איטי יותר מהתוכניות בתשלום, כך שעליך להמתין מספר דקות בתור לפני שהבקשה שלך תבוצע. כל התהליך לוקח בערך 3 עד 4 דקות תלוי באורך הסרטון ובטעינת השרת באותו זמן.

6. הבנת השימוש באשראי

טקסט לדיבור משתמש באשראי אחד עבור כל 50 תווי טקסט המומרים לדיבור, וסנכרון שפתיים צורך 5 קרדיטים לכל שנייה אחת של אודיו.

הסרטון הכולל משלב את שתי העלויות, מה שלמעשה גרם לכך שהסרטון שלי בן 38 שניות השתמש בסביבות 250 קרדיטים. כל זיכוי שווה $0.01 USD. משתמשי תוכנית רגילה מקבלים 625 זיכויים בכל חודש עבור המנוי שלהם ב-$15.

התוצאות…

דלג לשעה 3.25 כדי לצפות ביצירה הסופית למטה.

לאחר סיום יצירת הסרטון, תוכל לצפות בתצוגה מקדימה של התוצאות בצד ימין של דף האינטרנט. למשתמשים בחינם יש סימן מים מצורף לכל סרטון, אבל לפחות הוא לא מכוער מדי.

תוצאות הווידאו בפועל גם ממש טובות, אפילו באמצעות תמונה שהועלתה, מה שמצאתי מפתיע. השפתיים זזות במדויק במהלך הדיבור, ויש אפילו כמה תנועות פנים להתאים.

האפקט הכולל אינו מושלם, עדיין יש קצת 'עמק מוזר' בפעולה, אבל זה טוב מאוד לצרכים עסקיים כלליים. ישנן מספר אפשרויות זמינות לאחר יצירת הסרטון, כולל הורדה, יצירה מחדש, עריכת הסקריפט ואלמנטים נוספים.

זהו תהליך מהיר וללא כאבים מסביב, והתוצאות ממש ברמה הגבוהה ביותר כפי שניתן לצפות מחברה עם ייחוס זה.


יש קווי דמיון רבים בין Runway ו-Pika Labs, שחקן בולט נוסף בתחום יצירת וידאו בינה מלאכותית. למעשה, ל-Pika Labs יש תכונה דומה לסנכרון שפתיים, המשתמשת גם בקולות הנשמעים הטבעיים של ElevenLabs. ישנם הרבה מחוללי וידאו בינה מלאכותית בחוץ, כאשר הטובים ביותר מניבים תוצאות מרשימות.

דילוג לתוכן