Runway, אחת מהפלטפורמות הראשונות ליצירת וידאו בינה מלאכותית שהושקה בפומבי, חשפה את הדור השלישי של הדגם שלה – וזה צעד ענק קדימה עבור הטכנולוגיה ויכול להיות אחד ממחוללי הווידאו בינה מלאכותית הטובים ביותר עד כה.
באותו אופן ש-OpenAI אומרת שהמטרה הסופית שלה היא בינה כללית מלאכותית, עבור Runway זה מודלים כלליים בעולם. זוהי מערכת AI שיכולה לבנות ייצוג פנימי של סביבה ולהשתמש בה כדי לדמות אירועים בתוך אותה סביבה.
Gen-3 Alpha, הדגם החדש מבית Runway הוא הקרוב ביותר שהסטארט-אפ הגיע להשגת השאיפה לטווח ארוך. החברה אומרת שהיא תפעיל את כל כלי התמונה והטקסט לווידאו בפלטפורמת Runway, כמו גם Motion Brush ותכונות אחרות כמו טקסט לתמונה.
מסלול המראה: במה שונה Gen-3 מ-Gen-2
הכירו את Gen-3 Alpha: דגם הבסיס החדש של Runway ליצירת וידאו. Gen-3 Alpha יכול ליצור סרטונים מפורטים ביותר עם שינויים מורכבים בסצנה, מגוון רחב של אפשרויות קולנועיות וכיווני אמנות מפורטים.https://t.co/YQNE3eqoWf( 1/10) pic.twitter.com/VjEG2ocLZ817 ביוני 2024
מסלול לא אמר מתי ייושם ה-Gen-3, ויחליף את דגמי ה-Gen-2 הנוכחיים, אך הוסיפו כי קיימים אמצעי הגנה חדשים עבור ה-Gen-3, לרבות מתינות חזותית משופרת ותקן C2PA אשר מקל על מעקב אחר מקורם של סוגי מדיה.
זהו הדור האחרון בדור חדש של דגמי וידאו AI, כל אחד עם קליפים ארוכים יותר ותנועה משופרת כולל OpenAI Sora, Luma Labs Dream Machine ו-Kling.
Runway אומר ש-Gen-3 הוא הראשון בסדרה של דגמים שהוכשרו על תשתית חדשה. זה נבנה במיוחד עבור אימון רב-מודאלי בקנה מידה גדול ומשפר את הנאמנות, העקביות והתנועה.
אחד הלקחים שנלמד מסורה הוא שקנה המידה חשוב מעל רוב הדברים האחרים, כך שהוספת עוד מחשוב ונתונים יכולה לשפר משמעותית את המודל.
איך נראה Gen-3?
קפיצת מדרגה זו בטכנולוגיה מייצגת אבן דרך משמעותית במחויבות שלנו להעצמת אמנים, וסוללת את הדרך לדור הבא של חדשנות יצירתית ואמנותית. Gen-3 Alpha יהיה זמין לכולם במהלך הימים הקרובים. הנחיה: דחיפה קולנועית איטית… pic.twitter.com/cLaZvGpeu617 ביוני 2024
הדגם החדש הוכשר על וידאו ותמונה בו זמנית, שלדברי Runway ישפר את האיכות החזותית מהודעות טקסט לווידאו.
הדגם החדש יפעיל גם כלים חדשים שיציעו שליטה עדינה יותר בדברים כמו מבנה, סגנון ותנועה.
לא הייתה לי הזדמנות לנסות את Gen-3 בעצמי והוא עדיין במצב אלפא, אבל נראה שהסרטונים מראים שיפור משמעותי בתנועה ועמידה מהירה.
אורכו של כל סרטון הוא כעשר שניות שאורכו בערך פי שניים מברירת המחדל של Luma ובאורך דומה לסרטוני Sora. זה גם כמעט פי שלושה מהאורך של סרטוני ה-Runway Gen-2 הנוכחיים.
1. נסיעה ברכבת
הנחיה: "השתקפויות עדינות של אישה על חלון רכבת שנעה במהירות יתר בעיר יפנית".
2. איש חלל בעיר
הנחיה: "אסטרונאוט רץ בסמטה בריו דה ז'ניירו".
3. קהילה תת ימית
הנחיה: "FPV עף דרך רחובות צבעוניים עם אלמוגים של שכונה תת-ימית בפרברים."
4. בלון אוויר חם
הנחיה: "צילום כף יד בלילה, בעקבות בלון כחול מלוכלך שצף מעל הקרקע ברחוב האירופי הישן הנטוש".
5. התמונה הגדולה
הנחיה: "צילום תקריב קיצוני של נמלה המגיחה מהקן שלה. המצלמה נסוגה וחושפת שכונה מעבר לגבעה".
6. אנשים מציאותיים
הנחיה: "התקרב צילום לפניה של אישה צעירה היושבת על ספסל באמצע חדר כושר ריק בבית הספר".
7. מזלפים דרך טירה
הנחיה: "רחפן FPV ירה דרך טירה על צוק."
