תוכנת הצ'אט של OpenAI ChatGPT, אם תשתחרר בעולם, תזכה בציון בין B ל-B- בבחינת ניהול תפעול של בית הספר למנהל עסקים של וורטון, ותתקרב או תעלה על הציון הדרוש כדי לעבור את בחינת הרישוי הרפואי האמריקאי (USMLE).
למרות שזה עשוי לומר יותר על האופי הסטטי והממוקד במסמכים של חומרי בדיקה מאשר על התעוזה האינטלקטואלית של תוכנה, זה בכל זאת עניין של דאגה ועניין עבור מחנכים, וכמעט כל אחד אחר שחיים בעידן האוטומציה.
אנשי אקדמיה התרגזו שמערכות סיוע אוהבות ChatGPT ושל GitHub טייס (מבוסס על מודל OpenAI בשם Codex) ידרוש מהמורים להעריך מחדש את האופן שבו הם מלמדים ולסמן מבחנים מכיוון שטכנולוגיה מסייעת המבוססת על למידת מכונה הפכה להיות כל כך מסוגלת.
במסגרות חינוכיות, עצות בינה מלאכותית הופכות לדבר שבשגרה: ה-Stanford Daily פשוט דיווח, "מספר רב של תלמידים כבר השתמשו ב-ChatGPT בבחינות הגמר שלהם." על פי הערכות, 17 אחוז מהסטודנטים, בהתבסס על סקר אנונימי של 4,497 נשאלים, אמרו שהם השתמשו ב-ChatGPT כדי לסייע במטלות ובבחינות ברבעון הסתיו, כאשר 5 אחוז אמרו שהם הגישו חומר ישירות מ-ChatGPT ללא עריכה מועטה או ללא עריכה - וזה ככל הנראה הפרת קוד כבוד.
בנפרד, כריסטיאן טרוויש, פרופסור בבית הספר וורטון של אוניברסיטת פנסילבניה, וקבוצה של חוקרים רפואיים המזוהים בעיקר עם Ansible Health, החליטו לשים את ChatGPT, ניתן לטעון יועץ אוטומטי אמורלי ו מאותגר עובדתית מערכת מומחים, למבחן.
גם Terwiesch וגם ה-Ansible Health boffins הבהירו של-ChatGPT יש מגבלות ומטעה דברים. בסך הכל, הם נתנו לזה ציונים בינוניים אבל הם הבהירו שהם מצפים שמערכות מסייעות בינה מלאכותית ימצאו מקום בהוראה ובמגזרים אחרים.
המודל, בסופו של דבר, עבר הכשרה על אינספור קטעי כתיבה מעשה ידי אדם, ולכן היכולת שלו לנחש תשובה מספקת לשאלה מכל מה ששאף ידע ופקטואידים אינה בלתי צפויה.
"ראשית, הוא עושה עבודה מדהימה בשאלות בסיסיות של ניהול תפעול וניתוח תהליכים, כולל אלה המבוססות על מקרי מקרים," אמר טרוויש ב- העיתון שלו. "לא רק שהתשובות נכונות, אלא שההסברים מצוינים."
עם זאת, הוא הבחין ש-ChatGPT עושה טעויות מתמטיות פשוטות ומגשש שאלות מתקדמות של ניתוח תהליכים. עם זאת, מודל הבינה המלאכותית מגיב לרמזים מאנשים לגבי איך לשפר - הוא יכול לתקן את עצמו בהצלחה כאשר ניתן רמזים ממומחה אנושי.
הדרכה אנושית שימשה גם מקור לקלט זדוני, כפי שהוכח על ידי הצ'אטבוט Tay של מיקרוסופט ועל ידי מחקר עוקב.
רופא, רופא
קבוצת המחקר הרפואי שכתבה "ביצועים של ChatGPT ב-USMLE: פוטנציאל לחינוך רפואי בסיוע בינה מלאכותית באמצעות מודלים גדולים של שפה" כולל את "ChatGPT" כמחבר שותף.
"ChatGPT תרם לכתיבת מספר חלקים בכתב היד הזה", מצהירים המחברים הביולוגיים במאמרם.
שיוכים ארגוניים אחרים של המחברים כוללים: בית החולים הכללי של מסצ'וסטס, בית הספר לרפואה של הרווארד, בבוסטון, מסה; בית הספר לרפואה וורן אלפרט, אוניברסיטת בראון, בפרובידנס, רוד איילנד; והמחלקה לחינוך רפואי ב-UWorld, LLC, חברת למידה מתוקשבת בתחום הבריאות שבסיסה בדאלאס, טקסס.
המחברים - טיפאני קונג, מורגן צ'את'ם, ChatGPT, אריאל מדיניה, צ'ארינה סילוס, לורי דה לאון, קמיל אלפניו, מריה מדריאגה, רימל אגבאו, גיזל דיאז-קנדידו, ג'יימס מנינגו וויקטור טסנג - הגיעו למסקנה דומה לטרוויש של וורטון . באופן ספציפי, הם גילו ש-ChatGPT ביצע ביצועים סבירים - מעל סף המעבר המשתנה של כ-60 אחוז - בבחינת USMLE, אם ניתנת היתרון של תשובות בלתי מוגדרות. והם מצפים שמודלים של שפה גדולה (LLMs) ימלאו תפקיד הולך וגובר בחינוך הרפואי ובקבלת החלטות קליניות.
"ChatGPT מניב דיוק בינוני המתקרב לביצועים ב-USMLE", מצהירים המחברים במאמרם. "פריטי הבחינה הקודדו תחילה כשאלות פתוחות עם הנחיות מובילות משתנות. פורמט קלט זה מדמה דפוס שאילתת משתמש טבעי חופשי. עם תגובות בלתי מוגדרות מצונזרות/כלולות, דיוק ChatGPT עבור USMLE שלבים 1, 2CK ו-3 היה 68.0 אחוז/42.9 אחוז, 58.3 אחוז/51.4 אחוז ו-62.4 אחוז/55.7 אחוז, בהתאמה."
תיאור הביצועים של ChatGPT כ"מתקרב למעבר" הוא דרך נדיבה לנסח זאת, במיוחד כאשר ה-AI מקבל קרדיט על תשובות בלתי מוגדרות. הגעה למרפאה של רופא ורואה תעודה המפרסמת ציון D עשוי לעורר קצת יותר דאגה בקרב המטופלים.
אבל החוקרים טוענים שהדברים ש-ChatGPT אכן עשו נכון תאמו באופן הדוק לתשובות המקובלות ושמודל הבינה המלאכותית השתפר פלאים, לאחר שחודשים קודם לכן השיג שיעור הצלחה של כ-36.7 אחוזים בלבד.
מעניין לציין ש-ChatGPT הציג ביצועים טובים יותר מ-PubMedGPT, LLM המבוסס אך ורק על נתונים ביו-רפואיים שהצליחו להגיע לדיוק של כ-50.8 אחוז בלבד (בהתבסס על נתונים שלא פורסמו).
"אנו משערים שייתכן שהכשרה ספציפית לתחום יצרה אמביוולנטיות רבה יותר במודל ה-PubMedGPT, שכן הוא סופג טקסט מהעולם האמיתי משיח אקדמי מתמשך הנוטה להיות לא חד משמעי, סותר, או שמרני מאוד או לא מחויב בשפתו", קובעים המחברים. .
בעיקרו של דבר, נראה שהחומר הפחות מדעי והדעתני יותר שנכנס להכשרה של ChatGPT, כמו חוברות הסבר על מחלה מול חולים, הפך את ChatGPT לדעתנית יותר.
"ככל שה-AI הופכת מיומנת יותר ויותר, היא תהפוך בקרוב לכל מקום, ותשנה את הרפואה הקלינית בכל מגזרי הבריאות", מסכמים המחברים ומוסיפים שהקלינאים הקשורים ל-AnsibleHealth השתמשו ב-ChatGPT בתהליכי העבודה שלהם ודיווחו על הפחתה של 33 אחוז בזמן נדרש להשלים תיעוד ומשימות טיפול עקיפות בחולה.
זה אולי מסביר את ההחלטה של מיקרוסופט להעביר מיליארדים לתוך OpenAI עבור התוכנה העתידית שלה.
התועלת של ChatGPT בסביבה חינוכית - למרות העובדה שלעתים קרובות היא שגויה - הודגשה ב- בלוג פורסם ביום ראשון על ידי תומס ריד, פרופסור למחקרים אסטרטגיים והמנהל המייסד של מכון אלפרוביץ' ללימודי אבטחת סייבר.
Rid מתאר לאחרונה קורס ניתוח זדוני והנדסה לאחור שנמשך חמישה ימים שלמד חואן אנדרס גררו-סאדה.
"חמישה ימים לאחר מכן כבר לא היה לי ספק: הדבר הזה ישנה את ההשכלה הגבוהה", אמר ריד. "הייתי אחד מהתלמידים. ונדהמתי ממה שלמידת מכונה הצליחה לעשות עבורנו, בזמן אמת. ואני אומר את זה בתור מישהו שהיה קשוח ספקן של ההייפ של הבינה המלאכותית במשך שנים רבות. שימו לב שלא אמרתי טרנספורמציה 'סביר'. זה ישנה את ההשכלה הגבוהה".
גררו-סאדה, ב שרשור בטוויטר, מכיר בכך ש-ChatGPT טעה בדברים, אבל מתעקש שהכלי עזר לתלמידים למצוא תשובות טובות יותר. הוא מציע שזה יתפקד כמו עוזר הוראה אישי לכל תלמיד.
"אימה סביב בינה מלאכותית (או ציפיות מוגזמות לתפוקות מושלמות) מעיבים על ההכרה בכלי השירות המדהים הזה של LLM: כעוזר המסוגל לאחד במהירות מידע (נכון או לא) עם רלוונטיות קיצונית עבור אינטליגנציה (המשתמש) נבון יותר לעבוד איתה, ” הוא כתב.
Rid טוען שבעוד שיש לטפל בחששות לגבי AI כמנגנון לגניבת דעת ובגידה בחינוך, השיחה החשובה יותר קשורה לאופן שבו כלים בינה מלאכותית יכולים לשפר את התוצאות החינוכיות. ®
- הפצת תוכן ויחסי ציבור מופעל על ידי SEO. קבל הגברה היום.
- Platoblockchain. Web3 Metaverse Intelligence. ידע מוגבר. גישה כאן.
- מקור: https://go.theregister.com/feed/www.theregister.com/2023/01/24/chatgpt_exam_study/
- 1
- 7
- 9
- a
- יכולת
- יכול
- אודות
- מֵעַל
- אקדמי
- דיוק
- הושג
- לרוחב
- מתקדם
- פרסום
- עצה
- יועץ
- כלולה
- זיקות
- לאחר
- AI
- תעשיות
- כְּבָר
- מדהים
- אמזון בעברית
- בין
- אנליזה
- ו
- אנונימי
- לענות
- תשובות
- גישה
- מתקרב
- מתווכח
- סביב
- המגיעים
- מלאכותי
- בינה מלאכותית
- לעזור
- עוזר
- המשויך
- מחברים
- אוטומטי
- אוטומציה
- מבוסס
- בסיסי
- כי
- להיות
- הופך להיות
- התהוות
- להיות
- תועלת
- מוטב
- בֵּין
- מיליארדים
- ביו-רפואי
- קצת
- בוסטון
- אוניברסיטת בראון
- עסקים
- בית ספר למנהל עסקים
- נקרא
- מסוגל
- אשר
- מקרה
- מקרים לדוגמא
- ChatGPT
- רמאות
- ברור
- קליני
- קלינאים
- מקרוב
- ענן
- מחבר שותף
- קוד
- איך
- להשלים
- דְאָגָה
- דאגות
- מסכם
- מסקנה
- שמרני
- תרם
- שיחה
- קורס
- נוצר
- אשראי
- אבטחת סייבר
- יומי
- דאלאס
- נתונים
- ימים
- החליט
- החלטה
- קבלת החלטות
- מופגן
- מַחלָקָה
- למרות
- DID
- ישירות
- מְנַהֵל
- מַחֲלָה
- תיעוד
- ספק
- E-Learning
- כל אחד
- מוקדם יותר
- חינוך
- חינוך
- מחנכים
- הנדסה
- מוערך
- Ether (ETH)
- כולם
- בחינה
- עולה על
- מצוין
- לצפות
- הציפיות
- מומחה
- מסביר
- הסבר
- קיצוני
- ליפול
- סופי
- פירמה
- ראשון
- פוּרמָט
- מצא
- מייסד
- חופשי
- החל מ-
- פונקציות
- עתיד
- כללי
- נדיב
- לקבל
- GitHub
- נתן
- ציון
- יותר
- קְבוּצָה
- גדל
- הרווארד
- יש
- בְּרִיאוּת
- בריאות
- עזר
- גבוה יותר
- השכלה גבוהה
- מאוד
- רמזים
- בית חולים
- איך
- איך
- אולם
- HTTPS
- בן אנוש
- התלהבות
- חשוב
- לשפר
- משופר
- in
- באחר
- לכלול
- כולל
- כולל
- יותר ויותר
- מידע
- קלט
- מכון
- אִינטֶלֶקְטוּאַלִי
- מוֹדִיעִין
- אינטרס
- אי
- IT
- פריטים
- עצמו
- עבודה
- ידע
- שפה
- גָדוֹל
- למידה
- רישוי
- סביר
- מגבלות
- קְצָת
- חי
- LLC
- עוד
- מכונה
- למידת מכונה
- עשוי
- לתחזק
- עושה
- עשייה
- תוכנות זדוניות
- הצליח
- ניהול
- רב
- סימן
- מסה
- מסצ'וסטס
- חוֹמֶר
- מתמטיקה
- דבר
- מנגנון
- רפואי
- מחקר רפואי
- רפואה
- מיקרוסופט
- יכול
- טעויות
- מודל
- מודלים
- חודשים
- יותר
- מורגן
- טבעי
- טבע
- צורך
- נחוץ
- מספר
- Office
- ONE
- מתמשך
- OpenAI
- תפעול
- דוֹגמָטִי
- אִרְגוּנִי
- אחר
- מקיף
- מאמר
- במיוחד
- חולף
- חולה
- טיפול בחולה
- חולים
- תבנית
- פנסילבניה
- אֲנָשִׁים
- אָחוּז
- ביצועים
- אוּלַי
- אישי
- רופא
- חתיכות
- מקום
- אפלטון
- מודיעין אפלטון
- אפלטון נתונים
- לְשַׂחֵק
- בו
- פוטנציאל
- תהליך
- פרופסור
- תְעוּזָה
- לאור
- גם
- רובע
- שאלה
- שאלות
- מהירות
- ציון
- ממשי
- עולם אמיתי
- זמן אמת
- לאחרונה
- הכרה
- הרלוונטיות
- דווח
- לדרוש
- נדרש
- מחקר
- קבוצת מחקר
- חוקרים
- תגובה
- להפוך
- להיפטר
- תפקיד
- אמר
- בית ספר
- סעיפים
- מגזרים
- ראות
- הצבה
- הגדרות
- כמה
- דומה
- פָּשׁוּט
- So
- תוכנה
- בקרוב
- מָקוֹר
- במיוחד
- סטנפורד
- מדינה
- צעדים
- אסטרטגי
- סטודנט
- סטודנטים
- מחקרים
- הוגש
- הצלחה
- בהצלחה
- מציע
- מערכת
- מערכות
- שיחות
- משימות
- מורים
- הוראה
- טכנולוגיה
- מבחן
- בדיקות
- טקסס
- השמיים
- העולם
- שֶׁלָהֶם
- דבר
- דברים
- סף
- דרך
- טיפאני
- זמן
- ל
- כלי
- כלים
- מְאוּמָן
- הדרכה
- לשנות
- הפיכה
- נמצא בכל מקום
- לא צפוי
- אוניברסיטה
- אוניברסיטת פנסילבניה
- us
- משתמש
- תועלת
- הֲפָרָה
- מקום צפוף מאוד
- וורטון
- מה
- אשר
- בזמן
- מי
- יצטרך
- תיק עבודות
- זרימות עבודה
- עוֹלָם
- היה
- כתיבה
- טעות
- שנים
- תשואות
- זפירנט