ByteDance, החברה הסינית שמאחורי TikTok ועורך הווידיאו הוויראלי CapCut, פרסמה את דגם הטקסט-לווידאו הראשון של AI שנועד להתחרות בסורה שטרם שוחררה מ-OpenAI – אך לעת עתה, הוא זמין רק בסין.
Jimeng AI נבנה על ידי Faceu Technology, חברה בבעלות ByteDance שמייצרת את אפליקציית עריכת הווידאו CaptCut וזמינה לאייפון ולאנדרואיד וגם באינטרנט.
כדי לקבל גישה יש להתחבר עם חשבון Douyin, הגרסה הסינית של TikTok שמציעה שאם היא אכן תגיע לאזורים אחרים היא תקושר ל-TikTok או CapCut. זה אפשרי, אך ספקולטיבי בלבד, שגרסה של Jimeng תהיה מובנית ב-CapCut בעתיד.
ByteDance היא לא החברה הסינית היחידה שמפתחת דגמי וידאו בינה מלאכותית. Kuaishou היא אחת מיישומי הווידאו הגדולים ביותר בסין ובחודש שעבר היא הפכה את וידאו Kling AI לזמין מחוץ לסין בפעם הראשונה. זהו אחד מכלי הבינה המלאכותית האהובים עלי עם איכות תנועה מרשימה וריאליזם וידאו.
מה זה Jimeng AI?
Jimeng AI הוא מודל טקסט לווידאו שהוכשר ומופעל על ידי Faceu Technology, החברה הסינית מאחורי עורך הווידאו CapCut. כמו Kling, Sora, Runway ו- Luma Labs Dream Machine, זה לוקח קלט טקסט ומייצר כמה שניות של תוכן וידאו ריאליסטי.
מיתוג עצמו כ"פלטפורמת יצירת בינה מלאכותית חד פעמית" אתה יכול ליצור וידאו מטקסט או תמונות וזה נותן לך שליטה על תנועת המצלמה וקלט הפריימים הראשון והאחרון. זה משהו שרוב מחוללי וידאו בינה מלאכותית מודרניים מציעים שבו אתה נותן לו שתי תמונות והוא ממלא את הרגעים ביניהם.
המיקוד של Faceu היה בהבטחת שהמודל שלו יכול להבין ולעקוב במדויק אחר הנחיות טקסט סיניות ולהמיר רעיונות מופשטים ליצירות ויזואליות.
איך משווה Jimeng AI?
מקטעי הווידאו שראיתי במדיה החברתית ובאתר Jimeng, נראה שהוא קרוב יותר ל-Runway Gen-2 או Pika Labs מאשר Sora, Gen-3 או אפילו Kling. תנועת וידאו נראית מעט מטושטשת או מטלטלת והפלט הוא יותר קומי מריאליזם.
מה שלא הצלחתי לאשר, מכיוון שהוא לא זמין מחוץ לסין, הוא כמה זמן כל סרטון וידאו נמצא בדור הראשוני או אם אתה יכול להאריך קליפ.
רוב הכלים, כולל קלינג, מתחילים ב-5 שניות, כאשר Runway הוא 10 שניות וסורה הוא על פי הדיווחים 15 שניות. רבים מהם מאפשרים גם הרחבות מרובות לאותו קליפ ראשוני.
אני חושב שג'ימנג הוא הראשון לנייד וקשור לאפליקציות כמו Douyin ו-CapCut שם את זה בקטגוריה אחרת כמו Kling ו-Dream Machine. זה עדיף בהשוואה לאלה של אפליקציית Captions או Diffuse בכך שהתוכן שלה מכוון בעיקר לווידאו חברתי מאשר להפקה.
