Meta הכריזה היום (4 באוקטובר) על מחולל וידאו ואודיו חדש המופעל על ידי בינה מלאכותית שיתחרה בכאלה כמו הכלים הקוליים של OpenAI Sora ושל ElevenLabs. הוא נקרא Movie Gen, והוא יכול ליצור קטעי וידאו ואודיו בעלי מראה מציאותי המבוסס על הנחיות משתמש וכן לערוך קטעים קיימים או תמונות עם טקסט.
למרות שעדיין אין ציר זמן לגבי מתי Movie Gen יהיה זמין לציבור, דוגמאות מיצירותיו ששיתפו על ידי Meta הראו סרטונים של רעמים מתפצחים מעל הראש במדבר, בעלי חיים שוחים וילד רץ לאורך החוף עם עפיפון שנוצר על ידי הודעות טקסט .
חבילת התוכנה יכולה גם ליצור אודיו כמו רעשי סביבה, אפקטים קוליים ומוזיקת רקע שמסתנכרנת עם התמונות, אמרה Meta בפוסט בבלוג. Movie Gen יכול ליצור סרטוני 1080p באורך של עד 16 שניות ביחסי גובה-רוחב שונים, בעוד ששמע יכול להיות באורך של עד 45 שניות, אמר Meta.
בנוסף ליצירת קליפים חדשים, ניתן להשתמש ב- Movie Gen לעריכת קטעי וידאו קיימים גם כן. בסרטון אחד כזה, Meta ביקשה מהכלי להחליף פנס צף במחרוזת של בועות. באחר, הוא הכניס פונפונים לידיו של אדם שרץ במדבר, בעוד שלישי החליף את בגדיו בתחפושת מתנפחת של דינוזאור, והראה כיצד ניתן לבצע שינויים נוספים באמצעות הודעות טקסט. Meta גם הדגימה כיצד היא יכולה ליצור סרטון של אדם באמצעות תמונת סטילס בלבד והנחיית טקסט.
Meta Movie Gen נמצא במקום! מחקר בינה מלאכותית פורצת הדרך שלנו עבור מדיה מאפשר: – הפיכת טקסט לווידאו – יצירת עריכת וידאו מותאמת אישית – יצירת אודיו ולמרות שזה רק מחקר היום, אנחנו לא יכולים לחכות לראות את כל הדרכים שבהן אנשים משפרים… pic.twitter.com /I4Bq9if3eK4 באוקטובר 2024
כריס קוקס, מנהל מוצר ראשי ב- Meta Platforms, אמר שהשחרור המלא עדיין רחוק.
"אנחנו לא מוכנים לשחרר את זה כמוצר בזמן הקרוב – זה עדיין יקר וזמן הדור ארוך מדי – אבל רצינו לשתף איפה אנחנו נמצאים מכיוון שהתוצאות נעשות די מרשימות", כתב ב-Threads.
ההכרזה הופכת את Meta לחברת הטכנולוגיה הגדולה האחרונה שדוחפת את מלוא המהירות קדימה אל מרחב הבינה המלאכותית. בחודשים האחרונים, גם גוגל וגם אדובי חשפו מחוללי וידאו בינה מלאכותית כדי להתחרות בכלי וידאו בינה מלאכותית מהדור השלישי של סטארט-אפים מובילים מדור המדיה.
בהכרזה שלה, Meta שיתפה נתונים המציגים בדיקות עיוורות המצביעות על ביצועים חיוביים של Movie Gen בהשוואה להצעות של סטארט-אפים כמו Runway, OpenAI, ElevenLabs ו-Kling. אז בעוד שנצטרך לחכות ולראות אם Movie Gen מדורג ברשימת מחוללי הווידאו הטובים ביותר של AI, התוצאות המוקדמות מבטיחות.
