גוגל בדיוק יצאה נגד ה-GPT-4o של OpenAI עם Project Astra משלה. סוכן AI אוניברסלי זה נועד להיות העוזר שלך למשימות חיי היומיום וממנף את המצלמה והזיהוי הקולי של הטלפון שלך כדי לתת תגובות.
וגוגל הדגימה גם את Project Astra באמצעות משקפיים חכמות.
שיהיה ברור, אסטרה מגיעה תחילה לטלפונים, אך יש לה פוטנציאל לעבור לגורמי צורה אחרים לאורך זמן. אבל אני יכול לומר שההדגמה המוצגת ב-Google I/O 2024 מרשימה.
גוגל אומרת שפרויקט אסטרה יכול להבין את העולם ולהגיב אליו כמו שאנשים עושים – והוא יכול לקלוט ולזכור את מה שהוא רואה ושומע כדי להבין את ההקשר ולפעול. אתה יכול גם לדבר אליו באופן טבעי מבלי לחוות פיגור.
הסוכנים שמפעילים את Project Astra נבנו על מודל Gemini של גוגל ועל מודלים ספציפיים אחרים למשימה. זה יכול לעבד מידע מהר יותר על ידי עיבוד מתמשך של קלט וידאו ודיבור.
במהלך ההדגמה של Project Astra, אדם הרים טלפון אנדרואיד ושמר את הסרטון החי של המצלמה פתוח תוך שהוא שואל סדרה של שאלות. פרויקט אסטרה לא החמיץ פעימה.
לדוגמה, כשהיא מכוונת את מצלמת הטלפון לשולחן ושאלה מה עושה קול, אסטרה מצאה רמקול למחשב. ואז הקיפה האישה את החלק העליון של הדובר ושאלה את אסטרה מה זה. היא הגיבה נכונה בטוויטר.
משם, אסטרה הצליחה לספק אליטרציה יצירתית לגבי חבורה של עפרונות צבעוניים, לזהות מה חלק מהקוד עושה כשהוא מכוון אל צג מחשב וזיהה נכון את אזור קינגס קרוס בלונדון כשהמצלמה הופנתה מהחלון.
ואז דברים ממש התעניינו. עובדת גוגל הרכיבה זוג משקפיים חכמים והיא הסתכלה על לוח ושאלה מה זה מזכיר לך בזמן שאתה בוהה באיור. מה זה מזכיר לך? החתול של שרדינגר.
בעודו מחזיק נמר מפוחלץ ליד גולדן רטריבר, פרויקט אסטרה התבקש להמציא שם להקה תוך כדי תנועה. תשובה: פסי זהב.
בסך הכל, ההבנה המרחבית ועיבוד הווידאו של Project Astra נראים מרשימים, ואני נרגש לראות לאן גוגל לוקחת את סוכן ה-AI הזה. זה מגיע לאפליקציית Gemini מאוחר יותר השנה ואנחנו לא יכולים לחכות כדי לבדוק את זה.
