הידע הקליני וכישורי החשיבה של GPT-4 מתקרבים לרמה של רופאי עיניים מומחים, כך מצא מחקר בראשות אוניברסיטת קיימברידג'.
GPT-4 – 'מודל שפה גדול' – נבדק מול רופאים בשלבים שונים בקריירה שלהם, כולל רופאים זוטרים לא מתמחים, ורופאי עיניים מתלמדים ומומחים. לכל אחד מהם הוצגה סדרה של 87 תרחישים של מטופלים הכוללים בעיית עיניים ספציפית, והתבקשו לתת אבחנה או לייעץ לגבי טיפול על ידי בחירה מתוך ארבע אפשרויות.
GPT-4 קיבל ציון מובהק טוב יותר במבחן מאשר רופאים זוטרים לא מתמחים, אשר ניתנים להשוואה לרופאים כלליים ברמת הידע המומחית שלהם בעיניים.
GPT-4 השיג ציונים דומים לרופאי עיניים מתאמנים ומומחים – אם כי הרופאים עם הביצועים הטובים ביותר קיבלו ציון גבוה יותר.
החוקרים אומרים שמודלים שפות גדולים לא צפויים להחליף אנשי מקצוע בתחום הבריאות, אבל יש להם פוטנציאל לשפר את שירותי הבריאות כחלק מזרימת העבודה הקלינית.
לדבריהם, מודלים חדישים של שפות גדולות כמו GPT-4 יכולים להיות שימושיים למתן עצות, אבחון והצעות ניהול הקשורות לעיניים בהקשרים מבוקרים היטב, כמו ניסוי חולים, או היכן שהגישה לאנשי מקצוע רפואיים מומחים מוגבלת. .
"באופן מציאותי נוכל לפרוס בינה מלאכותית בטיפול בחולים עם בעיות עיניים כדי להחליט אילו מקרים הם מקרי חירום שצריכים להיבדק על ידי מומחה באופן מיידי, אשר ניתן לראות על ידי רופא משפחה, ואילו אינם זקוקים לטיפול", אמר ד"ר ארון ת'ירונאווקרסו. המחבר הראשי של המחקר, שביצע בעת שהיה סטודנט בבית הספר לרפואה קלינית של אוניברסיטת קיימברידג'
הוא הוסיף: "המודלים יכולים לעקוב אחר אלגוריתמים ברורים שכבר נמצאים בשימוש, וגילינו ש-GPT-4 טוב כמו רופאים מומחים בעיבוד תסמיני עיניים וסימנים כדי לענות על שאלות מורכבות יותר.
"עם פיתוח נוסף, מודלים גדולים של שפה יכולים גם לייעץ לרופאי משפחה שמתקשים לקבל ייעוץ מהיר מרופאי עיניים. אנשים בבריטניה מחכים יותר מתמיד לטיפול בעיניים.
דרושים כמויות גדולות של טקסט קליני כדי לעזור לכוונן ולפתח את המודלים הללו, ועבודה נמשכת ברחבי העולם כדי להקל על כך.
החוקרים אומרים שהמחקר שלהם עדיף על מחקרים קודמים דומים מכיוון שהם השוו את היכולות של AI לרופאים מתרגלים, במקום לקבוצות של תוצאות בדיקה.
"רופאים לא מתכננים מבחנים במשך כל הקריירה שלהם. רצינו לראות איך בינה מלאכותית מתמודדת מול הידע והיכולות במקום של רופאים מתרגלים, כדי לספק השוואה הוגנת", אמר Thirunavukarasu, שנמצא כעת רופא קרן אקדמית בבית החולים של אוניברסיטת אוקספורד NHS Foundation Trust.
הוא הוסיף: "אנחנו צריכים גם לאפיין את היכולות והמגבלות של דגמים זמינים מסחרית, שכן ייתכן שהמטופלים כבר משתמשים בהם – ולא באינטרנט – לייעוץ".
הבדיקה כללה שאלות על מגוון עצום של בעיות עיניים, כולל רגישות קיצונית לאור, ירידה בראייה, נגעים, עיניים מגרדות וכואבות, שנלקחו מספר לימוד המשמש לבדיקת רופאי עיניים מתלמדים. ספר לימוד זה אינו זמין באופן חופשי באינטרנט, מה שהופך את זה לא סביר שהתוכן שלו נכלל במערכי ההדרכה של GPT-4.
התוצאות מתפרסמות היום בכתב העת PLOS בריאות דיגיטלית.
"גם אם לוקחים בחשבון את השימוש העתידי בבינה מלאכותית, אני חושב שהרופאים ימשיכו להיות אחראים על הטיפול בחולים. הדבר החשוב ביותר הוא להעצים את המטופלים להחליט אם הם רוצים שמערכות מחשב יהיו מעורבות או לא. זה יהיה אינדיבידואלי החלטה שכל מטופל יקבל", אמר Thirunavukarasu.
GPT-4 ו-GPT-3.5 – או 'רובוטריקים מיומנים מראש' – מאומנים על מערכי נתונים המכילים מאות מיליארדי מילים ממאמרים, ספרים ומקורות אינטרנט אחרים. אלו שתי דוגמאות למודלים של שפה גדולים; אחרים בשימוש נרחב כוללים Pathways Language Model 2 (PaLM 2) ו-Large Language Model Meta AI 2 (LLaMA 2).
המחקר בדק גם את GPT-3.5, PaLM2 ו-LAMA עם אותה קבוצת שאלות. GPT-4 נתן תגובות מדויקות יותר מכולם.
GPT-4 מאפשר לצ'אטבוט המקוון ChatGPT לספק תשובות מותאמות אישית לשאילתות אנושיות. בחודשים האחרונים, ChatGPT משך תשומת לב משמעותית ברפואה על השגת ביצועים ברמה גבוהה בבדיקות של בתי ספר לרפואה, ומתן מסרים מדויקים ואמפתיים יותר מאשר רופאים אנושיים בתגובה לשאלות המטופלים.
התחום של מודלים של שפות גדולות אינטליגנטיות באופן מלאכותי נע במהירות רבה. מאז שנערך המחקר, יצאו מודלים מתקדמים יותר – שאולי קרובים אף יותר לרמה של רופאי עיניים מומחים.
