Search
Hedra

ניסיתי את Hedra – כלי וידאו חדש בינה מלאכותית המאפשרת לך ליצור דמויות דוברות מונפשות, ונדהמתי

נראה שיש הודעת וידאו חדשה בינה מלאכותית בכל יום והאחרונה היא מבית הדרה, סטארט-אפ הנוקט בגישה של דמות ראשונה להוצאת רעיונות לפועל.

רק השבוע ראינו תכונות חדשות עבור Luma Labs Dream Machine ואת ההכרזה על הדור החדש דמוי Sora של Runway.

Character-1 הוא תצוגה מקדימה של מחקר של מודל הווידאו הבסיסי הקרוב שלהם, המעניק למשתמשים שליטה עדינה על האופן שבו דמויות וירטואליות מונפשות באמצעות AI.

בתצוגה המקדימה, אתה יכול לתת לו אודיו ותמונה ולצפות בזמן שהוא יוצר סרטון סינכרון שפתיים המראה את הדמות בתמונה שלך מדברת. בניגוד לכלי סינכרון שפתיים זה מוסיף רמות גבוהות יותר של הבעה ותנועה ממה שראיתי בעבר.

Hedra היא בחינם במהלך תצוגה מקדימה של מחקר זו ותוכל ליצור כל אורך של וידאו. החברה משתמשת בזה כדי לבדוק בעיות הן עם הדגם והן בכלי הניהול שלהם לפני הפעלת תכונות מתקדמות יותר.

כיצד פועלת דמות הדרה-1?

Character-1 הוא מודל AI בסיס חדש שנועד ליצור דמויות ניתנות לשליטה ומציאותיות באמצעות AI. החברה אומרת שהם יוכלו לעשות דיבור אקספרסיבי, לשיר ואפילו לראפ עם משכים פוטנציאליים אינסופיים.

כרגע השימוש בו הוא די פשוט. לאחר ההרשמה אתה מייצר אודיו מטקסט או נותן לו אודיו משלך ויוצר דמות. זה יכול להיות מתצלום, תמונת AI או מטקסט – יצירת התמונה בתוך הדרה. אז אתה פשוט לוחץ על צור וידאו ומחכה.

יש קווי דמיון של פונקציונליות לכמה פרויקטים בקוד פתוח, תצוגה מקדימה של מחקר ואפילו כלים לסינכרון שפתיים בפלטפורמות כמו Runway ו- Synclabs – אבל זו ההבטחה והביטוי העתידיים בסרטונים שגורמים להדרה לבלוט עבורי.

החברה אמרה על תוכניותיה לעתיד: "זהו הצעד הראשון במשימתה של הדרה לבנות סטודיו ליצירה מולטי-מודאלי הנגיש לכולם, המעניק ליוצרים שליטה מלאה בדיאלוג רגשי, תנועה ו(כן) עולמות שלמים".

עד כמה עובד Hedra Character-1?

זהו השלב הראשון של דגם חדש, אז היו כמה בעיות בקיעת שיניים, במיוחד עם הבינה המלאכותית המחמירה מדי, אבל לא היו לי בעיות עם הסרטונים שיצרתי.

כרגע הוא מוגבל ל-30 שניות, כך שאם, כמוני, יש לך קטע שמע ארוך יותר, תצטרך לעשות זאת בשני חלקים. נראה שזה עובד הכי טוב עם תמונות שנוצרו בהדרה, אבל אתה יכול להעלות תמונות משלך, רק וודא שהן דמויות אנושיות ופונות קדימה.

כרגע הוא מציע רק סרטוני וידאו בפורמט מרובע ולא מסך רחב או פורטרט והרזולוציה נמוכה יחסית. אבל זו תצוגה מקדימה של מחקר כדי להציג את היכולות במקום לייצר תוכן מוכן להפקה והיא באמת מראה את מה שעתיד לבוא.

כדי להעמיד את זה במבחן יצרתי סיפור קצר על פלישת חייזרים. זה נתן לי ליצור ארבע דמויות – שלושה חייזרים מהארמדה הגלקטית וגנרל אנושי. בעוד שבהשוואה למשחק אנושי זה מעץ כמו שהייתם מוצאים באופרת סבון של סטודנטים – עבור סינכרון שפתיים מבוסס בינה מלאכותית, זוהי עלייה מסיבית ממה שראיתי בעבר.

דילוג לתוכן