Lightricks, מפתחת האפליקציות שמאחורי LTX Studio, Facetune ו-Videoleap פרסמה את דגם הווידאו AI המותאם אישית הראשון שלה: LTX Video 0.9. זה קוד פתוח והחברה טוענת שהוא מסוגל לייצר חמש שניות של וידאו בינה מלאכותית בארבע שניות בלבד.
החברה אומרת שהדגם החדש יכול ליצור קליפים עם דרגות מרשימות של עקביות תנועה וריאליזם ולעשות זאת ביעילות רבה יותר מאשר חלופות אחרות בגודל דומה.
LTX Video זוכה לכינוי "יוצר וידאו בזמן אמת" שנבנה עם משוב ממשתמשי LTX Studio, פלטפורמה המאפשרת לך ליצור פרויקט מרובה קליפים מהנחיה אחת.
הווידאו של חמש שניות בתוך ארבע שניות נוצר באמצעות Nvidia H100 GPUs ועם רזולוציה של 768 x 512. הדגם ירוץ על Nvidia RTX 4090 סטנדרטי, אם כי ייקח לא מעט יותר מארבע שניות ליצור את הסרטון במקרה זה.
זאב פרבמן, מייסד שותף ומנכ"ל Lightricks אמר: "עם הרבה טכנולוגיות בינה מלאכותית שהופכות לקנייניות, אנו מאמינים שהגיע הזמן למודל וידאו בקוד פתוח שקהילת האקדמיה והמפתחים הגלובלית יכולה לבנות עליו ולעזור לעצב את העתיד של וידאו בינה מלאכותית. ”
איך LTX Video עובד?
LTX Video הוא קוד פתוח, בדומה למוצ'י-1 ולפי Lightricks הוא מסוגל לייצר סרטונים במהירות תוך שמירה על איכות וידאו ודיוק תנועה.
"בנינו את Lightricks עם חזון לדחוף את הגבולות של מה שאפשר ביצירתיות דיגיטלית כדי להמשיך לגשר על הפער הזה בין דמיון ויצירה – מה שמוביל בסופו של דבר ל-LTXV, שיאפשר לנו לפתח מוצרים טובים יותר שיענו על הצרכים של כל כך הרבה תעשיות תוך ניצול היתרון. מהכוח של AI", אמר פרבמן.
אנו נרגשים לראות כיצד חוקרים ומפתחים יבנו על המודל הבסיסי הזה.
היכולת להריץ דגם כזה בנוחות על מחשב גיימינג טוב היא עליית מדרגה גדולה עבור וידאו בינה מלאכותית ומביאה אותנו לנקודה שבה ניתן לשלב אותו במשחקים או בכלי עריכת וידאו לעיבוד ותצוגה מקדימה בזמן אמת.
החברה מבטיחה "עקביות תנועה ומבנה ללא תחרות" מארכיטקטורת שנאי הדיפוזיה של LTX Video. זה יכול להבטיח מעברים קוהרנטיים בין פריימים בודדים בתוך הסרטון של 5 שניות ליצור תנועה חלקה יותר ולהפחית מורפינג.
זה בתורו יקל על ההרחבה להפקת וידאו בצורת ארוכת יותר בעתיד, לדברי ירון אינגר, CTO של Lightricks. הוא אמר שזה יאפשר מגוון רחב יותר של מקרי שימוש ממה שמתאפשר כיום
אינגר אמרה: "היכולת ליצור סרטונים מהר יותר מאשר להפעיל אותם פותחת את האפשרות ליישומים מעבר ליצירת תוכן, כמו משחקים וחוויות אינטראקטיביות לקניות, למידה או מפגשים חברתיים. אנו נרגשים לראות כיצד חוקרים ומפתחים יבנו על המודל הבסיסי הזה".
עד כמה LTXV עובד?
ניסיתי LTX Video בתצוגה מקדימה מוקדמת והתרשמתי מאיכות התנועה כמו גם מהפלט הוויזואלי הכולל. זה לא טוב כמו Kling או Runway Gen-3, אבל עבור מודל קוד פתוח שמסוגל ליצור במהירות, הוא מתמודד רציני.
הוא זמין במצבי תמונה לווידאו וטקסט לווידאו. LTX Video גם ניתנת להתאמה לעבודה עם מגוון של אורכי וידאו ורזולוציות שהופכים אותו לשימושי בתרחישי הפקה.
לבסוף, קוד פתוח לחלוטין עם בסיס קוד ומשקולות מודלים מפתחים אחרים יכולים לשפר או לבנות על מודל הבסיס. ראינו את זה עם דגמי תמונה כמו Flux ו-Stable Diffusion, וכתוצאה מכך מגוון רחב יותר של יכולות ממה שחברה בודדת יכולה לפתח לבד.
כל הסרטונים במאמר זה נוצרו באמצעות LTX Video והיווצרו במהירות כפי שהיית מצפה. עדיין לא ניסיתי אותם במצב לא מקוון אבל זה זמין דרך ComfyUI אם יש לך מחשב גיימינג טוב מספיק זמין.
אם אין לך מחשב גיימינג הוא זמין דרך HuggingFace ו-FAL.ai.
