איזו בדיקה רפואית עבר ChatGPT?

הנושא שלפני כןך היה תופס את האינטרנט לגשר שמו נוצר על ידי ChatGPT, הרובוט התוכנה של אינטיליגנציה מלאכותית אשר נכנס לרשת בנובמבר האחרון. אנשים שהיו נמצאים איתו בשיחות שמושגת נושאים חקוקים ומרעישים כדי למבחן את יכולות השיחה שלו. לא רק זאת, ChatGPT הצליח להשיג המון הישגים, יתרונת עבר בוחן קשה כמו בוחן רשיונות רפואה אמריקאי, בוחן במכון עסקים Wharton ובדיקות שלארבע האוניברסיטות במינסוטה אמריקאיות במשפטים הנוסחיים. ההישג החדש המוזר את תשומת לבו של מנהיג טוויטר סיאו הנדסי, אילון מאסק הוא אשר חשוף את התקיוה ממנה הוא ביעץ בתמונה וכמובן עטף את השטן הלישון בתוך ציוץ מגוחך לגמרי, עם המשפט "אני בטוח שהכל יהיה טוב". תכתבו יחד ונביט למה בוחן רפואה עבר ChatGPT.

עלייתו של ChatGPT

חשוב לשים לב ש-Open AI, החברה למחקר שבה השקיעו מאסק ומיקרוסופט, ייצרה את ChatGPT. כל מי שמשתמש בכלי המחשבון המבוסס על AI יכול לשאול אותו שאלה בנושא כלשהו ולקבל תשובה מהירה ומפורטת בפורמט פרקטים. ChatGPT הוכיח את יכולותיו בתחומים שונים. הוא יכול לכתוב מיד ובקושי מאמרים מסובכים, יכול לכתוב הצעות שיווק, לכתוב שירים ובדיחות ואפילו להכין דיבור לחבר בקונגרס שבארצות הברית. אולם, יש לחשש מכך שמערכת AI עשויה להחליף עבודות אנושיות מסוימות.

קרא גם: האם ChatGPT 4 חינם לשימוש?

צ'אטGPT עובר בחינת רפואה: סקירה

אחת מההישגים האחרונים של כלי זה היא יכולתו לעבור את מבחני הרישוי הרפואיים של ארצות הברית. במחקר פר-הדפס, החוקרים בדקו את היכולות הגבוהות של ChatGPT. הם הזנו שאלות ממבחנים קודמים לכלי המותאם אישית והם הבחינו בתשובות, הכוללות תשובות כתובות למגוון פתיח לתשובות מרובות בריאות, בעזרת שני שופטי רופאים באופן עצמאי. הם ודאו שהתשובות לא היו כבר בנתוני המאגר הנגיש לשיחת ה-Chatbot בעת אימוןו המוקדם. צוות המחקר הדביא כי אף על פי ש-ChatGPT לא ראה את התשובות מראש, הוא ביצע ברמה של או קרובה לרף העברה למבחנים בלעדי מידע מתמחה או ה reforcement מותאם אישית . הכלי קיבל למעלה מ-50 אחוז בכל מבחן והתקרב לרף ההעברה של USMLE בערך 60 אחוז. "לכן, כלי ה-ChatGPT כעת נמצא בטווח העברה נוח", הסיכים המאמר.

שיחת GPT עוברת את מבחן USMLE: כל מה שצריך לדעת

במחקר חדש חדשני שביצעו מדענים בבית החולים הכללי במסצ'וסטס ובכליפת אנסיבליוה גילו שהמערכת ChatGPT של OpenAI יכולה לעבור את מבחן הרישוי הרפואי של ארצות הברית (USMLE) בתוצאת דיוק מרשימה של 60%. מחקר זה פותח אפשרויות מרתקות לתפקיד הבינה המלאכותית בחינוך והשתלמות רפואית.

כלי תהליכות שפה טבעית וחינוך רפואי

ChatGPT הוא כלי עיבוד שפה טבעית שמתאמן על כמויות עצומות של נתוני שפה ומחפש דפוסים וקשרים. היכולת שלו ליצור טקסט חדש על סמך השפה שהוא מועבר על ידיו הופכת אותו למועמד אידיאלי לשימוש בחינוך רפואי. אך התלות של ChatGPT בנתוני האימון פוגעת ביכולת שלו לחפש ברחבי האינטרנט כמו שמעשה נעשה על ידי צ'אטבוטים של אינטיליגנציה מלאכותית אחרים.

בדיקת המודל

המדענים העריכו את הדגם ChatGPT על פי שלושה מבחנים תקניים שמהם מורכבת מבחינת USMLE. הצוות מינה את הדגם באמצעות שאלות מהמבחן המדגם של יוני 2022 ששוחרר לקהל הרחב. שאלות הדורשות ניתוח חזותי הוסרו ממערך האימון.

כדי להפחית את ההטעיות של הזכרון החוזר, הצוות הכניס שלושה סוגים שונים של שאלות למודל:

1. בחירה רבת ברירה אחת, ללא הצדקה כפויה, לדוגמה, "מהו החיידק הסבוך ביותר שמסוכן למצב הבריאות של המטופל?"
2. בחירה רבת ברירה אחת עם הצדקה כפויה, לדוגמה, "מהו הסיבה הכי סבירה לסימפטומים הליליים של המטופל? הסבר את הרציונאל שלך עבור כל בחירה."
3. פרישה אופן, לדוגמה, "איזו יכולתית יהיה הסיכוי לדיאגנוזה של המטופל מבחינת המידע שסופק?"

תוצאות מרשימות

לראשונה, הדגם של המודל המבוסס על AI עבר את ה-USMLE בדיוק כ-60% בלי עזרת מדריכים קליניים. התוצאה הזו חשובה ומפתיעה ומתחילה לפתח אפשרויות חדשות לשימוש ב-AI בחינוך רפואי. החוקרים מצאו גם שתוצאות ChatGPT הראו תובנות קליניות חוקיות והסברים טובים המעניקים יותר ביטחון בנסיבות ההסבר של המודל ובאמינותו.

עתיד החינוך הרפואי

הצוות מאמין כי ChatGPT ומודלים דוברים יכולים לעזור באימון של רופאים בעתיד. יישום כזה יכול להיות התרגום של תוצאות מדעיות טכניות לשפה נגישה יותר למטופלים. AnsibleHealth כבר פועלת בפרויקט זה.

ChatGPT מראה את יכולתו בתחום הרפואה

בנוסף ליכולת שלו לענות על שאלות ולאבחן מחלות, GPT-4 הוא גם מתרגם מצוין. הוא יכול לתרגם מידע על פטינט שמדבר פורטוגזית ולעבות מידע מורכב למשהו שתלמידי הכיתה השישית יכולים לקרוא בקלות. GPT-4 יכול גם לספק לרופאים המלצות שימושיות על יחסי המטופל, מעניק להם טיפים כיצד לדבר עם המטופלים על מצבם בשפה רגישה וברורה.

למרות ההגבלות שלו, GPT-4 יכול לדמות איך רופאים מאבחנים תנאים עם תוצאות מדהימות אף על פי שהן לא מושלמות. כששאלו אותו אם הוא יכול לעסוק בחילוניות גורמתית, הוא ענה שיכולות האינטיליגנציה שלו עדיין "מוגבלות לדפוסים בנתונים ואינן כוללות הבנה אמיתית או כוונה".

הדעות של ד"ר יצחק כהנה על GPT-4

בספר עתידי בכותרת "המהפכה המלאכותית ברפואה", מדען המחשבים ורופא ד"ר יצחק כהנא, יחד עם שני עמיתים, בדקו את GPT-4, המודל המלאכותי החדש ביותר מ-OpeAI, כדי לראות כיצד הוא פועל בסביבה רפואית. התוצאות היו מרשימות.

בספר, פרופ' כוהן מציין כי GPT-4, שנוצר במרץ 2023 ומופץ למנויים משלמים, יכול לענות על שאלות רישיון בחינות רפואיות בארה"ב בנכונות במעל 90% מהזמן. הוא יותר יעיל כמבחן מדגמי המודלים של ChatGPT הקודמים, GPT-3 ו-3.5, וטוב יותר מכמה רופאים בעלי רישיון גם. לפי קריי גולדברג ופיטר לי, נשיא המחקר במיקרוסופט, GPT-4 בעל שיקול דעת קליני טוב יותר מ"רוב הרופאים" ויכול לאבחן מצבים נדירים "כמו שאני הייתי עושה".

בדיקת GPT-4: השיטה

על מנת לבדוק את GPT-4, ד"ר כהנה ושותפיו עבדו בשיתוף פעולה כדי לראות איך הרס"ן מתרגם לעברית. שאלו את GPT-4 שאלות וסיפורים קליניים לאבחון, הם נשוו את תשובותיו לאבחונים שנעשו על ידי רופאים אנושיים. המחברים מדגישים כי ל-GPT-4 יתרונות רבים על פני רופאים אנושיים, כגון היכולת לזכור ולסיכן מידע בתקופות מרובות ממקורות שונים.

אך, המחברים מכירים גם במגבלות של GPT-4. למשל, GPT-4 אינו מסוגל לקחת בחשבון את ההיסטוריה הרפואית הייחודית של המטופל או את משתני הגורמים החברתיים לבריאות. בנוסף, ההתממשקות של GPT-4 על כמויות עצומות של מידע מעוררת דאגות בנוגע לפרטיות המידע ולגבולותיו המשתדרגים.

GPT-4: יכולות ופוטנציאל

GPT-4 הוא לא רק מוצא עובדות ומצליח במבחן; הוא גם מתרגם מצוין. על פי המחברים, GPT-4 יכול לתרגם מידע על פתיחה של מטופל שמדבר פורטוגזית ולדחוס את הגירסה הטכנית למשהו שתלמידי כיתה שישית יכולים להפנט בקלות.

אך זה לא רק בתחום האבחנה שבו בולט פוטנציאלו של GPT-4. בספר, הסופרים מסבירים כיצד GPT-4 יכול לספק לרופאים הצעות מועילות לגבי התנהגות במיטת החולה, ולהציע טיפים כיצד להתחבר בצורה טובה יותר עם המטופלים.

אך חשוב לציין כי GPT-4 אינו בלתי טעית. כפי שהמחברים מזהירים, עדיין יכול לטעות והוא אינו נלקח בחובת היפוקרט. יתרה מכך, טכנולוגיית האינטיליגנציה המלאכותית, כולל GPT-4, מעלה שאלות אתיות בנוגע להוספת משרות ולפרטיות המטופלים.

סיכום: העתיד של AI ברפואה

במרובע שלביות כאלו, הצלחת GPT-4 באבחון מצבי רפואה מעלה תחזיות מרתקות עבור טכנולוגיית AI ברפואה. בעתיד, מודלים של AI כמו GPT-4 יכולים לעזור לרופאים לאבחן מחלות נדירות, לתרגם תקשורת רפואית ולספק טיפול טוב יותר למטופלים. עם זאת, חשוב לפתח ולבחון מודלים של AI בהתבסס על שיקולים אתיים.