ניסיתי את Haiper 1.5 – דגם וידאו ה-AI המאתגר של Sora האחרון

Haiper, מעבדת הווידאו הבינה המלאכותית פרסמה את גרסה 1.5 של הדגם הגנרטיבי שלה, המציעה סרטונים ראשוניים של שמונה שניות ואיכות חזותית משופרת.

זהו העדכון האחרון ממספר הולך וגדל של פלטפורמות וידאו בינה מלאכותית שכולן רודפות אחר הריאליזם, התנועה הטבעית ויכולת משך הקליפ של דגם Sora של OpenAI שטרם שוחרר.

העמדתי את Haiper 1.5 למבחן עם סדרה של הנחיות וזה מרגיש יותר כמו שדרוג לדגם הדור הראשון מאשר שינוי צעד משמעותי שראינו בין Runway Gen-2 ל-Gen-3 או עם שחרורו של Luma Labs Dream Machine .

זה לא אומר שהייפר אינה דוגמנית מרשימה להפליא. זה ומציע כמה מהערך הטוב ביותר מכל פלטפורמות הווידאו AI. רק שהוא עדיין לא הגיע לאיכות התנועה של Runway Gen-3 או לפתור את בעיות השינוי והעיוות שנמצאו ב- Haiper 1.0.

מה מייחד את Haiper 1.5?

Haiper היא פרי יצירתם של חוקרי Google Deepmind לשעבר, ישו מיאו וזייו וואנג. ממוקמת בלונדון, החברה מתמקדת בבניית מודלים בסיסיים של AI ועבודה לקראת בינה כללית מלאכותית.

מודל הווידאו תוכנן להיות טוב במיוחד בהבנת תנועה, כך שהכלי לא נבנה עם פקדי תנועה כמו Runway או Pika Labs מכיוון שה-AI חוזה את הדרוש. מצאתי שזה טוב יותר אם תשאיר הוראות תנועה ספציפיות מההנחיה.

הסטארט-אפ יצא לראשונה מהתגנבות עם דגם מוכן לשימוש רק לפני ארבעה חודשים וכבר יש לו 1.5 מיליון משתמשים. אורך הסרטון המקסימלי הקודם היה 4 שניות, אבל עבור רוב המשתמשים, הוא הגיע ל-2 שניות בלבד – בעצם GIF. הדגם החדש יכול להתחיל עם קליפים של 8 שניות.

זהו אחד מדגמי הבינה המלאכותית הקלה ביותר לשימוש עם קהילה חזקה הבנויה סביב יצירה. הוא מציע מגוון דוגמאות ורעיונות מהירים וניתן להשתמש בו להנפשת טקסט או וידאו.

יצירת הנחיות לבדיקת Haiper 1.5

עם Haiper 1.5 קליפים יכולים להיות באורך של עד שמונה שניות, למרות ששמתי לב שהוא מאט מדי פעם את הצילומים במקום ליצור יותר תנועה.

כעת אתה יכול גם להפיק עד שמונה שניות קליפים בחדות גבוהה, כאשר בעבר ההגדרה הגבוהה הייתה שמורה לצילומים קצרים מאוד של שתי שניות.

כמו ב-Pika Labs אתה יכול. לשדרג או להרחיב כל אחד מהסרטונים שנוצרו באמצעות Haiper. כל דור מוסיף ארבע שניות למקור.

1. בריכת הקוי

המבחן הראשון הוא לראות עד כמה הוא מתמודד עם התנועה של מספר יוצר ואני אגיד שזה עשה עבודה מפתיעה לטובה. לא יותר מדי עיוות או מיזוג של הדג, למרות שנראה כאילו הוא שוחה מעל הבריכה.

הנחיה: "בריכת קוי שלווה בגן יפני, עם דגים צבעוניים השוחים מתחת לפרחי לוטוס צפים".

2. רחוב עיר בלילה

לאחר מכן היה מבחן של סביבה ויזואלית מורכבת, במקרה הזה עיר עמוסה עם אורות עזים והרבה אנשים, כמו גם מידת האנימציה. ה-GIF משקף כמה לאט האנשים נעו בסרטון הסופי. אתה צריך פי 2 מהמהירות.

זו הייתה הנחיה הפשוטה: "רחוב עירוני סואן בלילה, שלטי ניאון מהבהבים ואנשים ממהרים לחלוף בגשם".

3. הכנת סושי

ידיים הן סיוט עבור דגמי AI ולמרבה הצער, Haiper אינו שונה. אמנם בתחילה, זה נראה כאילו הוא פצח אותו, אבל חמש השניות הבאות אחרי מה שמוצג ב-Gif הופך לעיסה סיוטית מוזרה. הסרטון המלא באתר Haiper.

"תקריב של ידיו של שף מכין סושי, פורס בקפידה דגים ומגלגל אורז".

4. פרח פורח

זה היה הכישלון המוחלט היחיד בהנחיות הבדיקה. אני חושב שאולי היה צורך בהוראות ספציפיות יותר כדי ללכוד את התנועה או אפילו להוראות פשוטות יותר. כל דגם וידאו בינה מלאכותית עובד בצורה מעט שונה ולכן זו שיחה קשה.

ההנחיה שבה השתמשתי הייתה: "זמן-lapse של פרח פורח, עלי כותרת נפרשים בצבעים מרהיבים." ניסיתי את אותה הנחיה עם Luma Labs ולמרות שהתוצאה הייתה מציאותית יותר, היא גם לא הצליחה להראות את זמן-lapse.

5. אסטרונאוט בחלל

אני אוהב להשתמש בהנחיות החלל מכיוון שלעתים קרובות זה מבלבל מודלים בכל הנוגע לתנועה או שהוא יוצר מספר כדורי ארץ. הייפר עשה כאן עבודה טובה ואפילו הראה את האסטרונאוט זז באיטיות. שווה לצפות בסרטון המלא.

השתמשתי בהנחיה הזו: "אסטרונאוט מרחף בחלל, כשכדור הארץ נראה ברקע וכוכבים מנצנצים."

6. Steam punk city (תמונה)

המבחן הבא היה של דגם Haiper תמונה לווידאו ולא רק טקסט. התחלתי ביצירת תמונה של עיר סטימפאנק והצעתי אותה עם הנחיית תנועה להאיפר. זה עשה עבודה טובה בהצגת הסצנה יוצאת הדופן.

הנחיה ל-Ideogram, מחולל התמונות של AI: "נוף עירוני סטימפאנק עם ספינות אוויר ומנגנוני שעון". הנחיית התנועה של הייפר לצד התמונה: "הילוכים מסתובבים, ספינות אוויר נעות באיטיות על פני השמים".

7. הזוהר הצפוני (תמונה)

סוף סוף הזוהר הצפוני. זוהי בדיקה שימושית עבור כל דגמי הווידאו בינה מלאכותית ובדרך כלל כזו שבה אתה מתחיל עם טקסט, אבל רציתי לראות איך זה ייצור הנפשה של תמונה. זה עשה עבודה טובה מאוד והסרטון המלא של שמונה שניות שווה צפייה.

הנחיה ל-Ideogram, מחולל התמונות בינה מלאכותית: "אורות צפוניים רוקדים מעל נוף הררי מושלג." הנחית התנועה של הייפר לצד התמונה: "אורורה בוריאליס נע ומתערבל בשמי הלילה".

מחשבות אחרונות

Haiper 1.5 הוא שיפור ברור בהייפר 1.0 כמו גם בדגמים כמו Runway Gen-2 ו-Pika Labs 1.0 אבל זה מאוד שדרוג ביניים. אם הם השיגו את זה עם דגם 1.5, אני לא יכול לחכות לראות איך Haiper 2.0 נראה.

הקליפים היו מואטים לפעמים או סבלו ממורפינג, אבל בסך הכל זה היה שיפור גדול הן בפוטוריאליזם, בתנועה והן בעקביות. זה נבע בחלקו מהאורך הכפול של הקליפים.