Το λογισμικό συνομιλίας του OpenAI ChatGPT, εάν αφεθεί ελεύθερο στον κόσμο, θα βαθμολογούσε μεταξύ Β και Β- στις εξετάσεις Operations Management της σχολής επιχειρήσεων Wharton και θα πλησίαζε ή θα υπερέβαινε τη βαθμολογία που απαιτείται για να περάσετε τις εξετάσεις ιατρικής άδειας στις ΗΠΑ (USMLE).
Αν και αυτό μπορεί να λέει περισσότερα για τη στατική, με επίκεντρο τα έγγραφα φύση του υλικού δοκιμών παρά για την πνευματική ικανότητα του λογισμικού, είναι ωστόσο θέμα ανησυχίας και ενδιαφέροντος για τους εκπαιδευτικούς και σχεδόν όλους τους άλλους που ζουν στην εποχή του αυτοματισμού.
Οι ακαδημαϊκοί ανησυχούν για τα υποστηρικτικά συστήματα ChatGPT και του GitHub Δεύτερος πιλότος (βασισμένο σε ένα μοντέλο OpenAI που ονομάζεται Codex) θα απαιτήσει από τους εκπαιδευτικούς να επαναξιολογήσουν τον τρόπο διδασκαλίας και να βαθμολογήσουν τις εξετάσεις επειδή η υποστηρικτική τεχνολογία που βασίζεται στη μηχανική μάθηση έχει γίνει τόσο ικανή.
Σε εκπαιδευτικά περιβάλλοντα, οι συμβουλές AI γίνονται συνηθισμένες: The Stanford Daily just αναφερθεί, "ένας μεγάλος αριθμός μαθητών έχει ήδη χρησιμοποιήσει το ChatGPT στις τελικές τους εξετάσεις." Υπολογίζεται ότι το 17 τοις εκατό των μαθητών, με βάση μια ανώνυμη δημοσκόπηση 4,497 ερωτηθέντων, δήλωσε ότι είχε χρησιμοποιήσει το ChatGPT για να βοηθήσει στις εργασίες και τις εξετάσεις του φθινοπώρου τριμήνου, με το 5 τοις εκατό να λέει ότι είχε υποβάλει υλικό απευθείας από το ChatGPT με ελάχιστη ή καθόλου επεξεργασία - κάτι που πιθανώς είναι παραβίαση του κώδικα τιμής.
Ξεχωριστά, ο Christian Terwiesch, καθηγητής στη Σχολή Wharton του Πανεπιστημίου της Πενσυλβάνια, και μια ομάδα ιατρικών ερευνητών που συνδέονται κυρίως με το Ansible Health, αποφάσισαν να βάλουν το ChatGPT, ένα αναμφισβήτητα ανήθικο αυτοματοποιημένο σύμβουλο και αμφισβητείται πραγματικά έμπειρο σύστημα, στη δοκιμή.
Τόσο ο Terwiesch όσο και οι boffins του Ansible Health κατέστησαν σαφές ότι το ChatGPT έχει περιορισμούς και κάνει τα πράγματα λάθος. Συνολικά, του έδωσαν μεσαίους βαθμούς, αλλά κατέστησαν σαφές ότι αναμένουν ότι τα υποστηρικτικά συστήματα τεχνητής νοημοσύνης θα βρουν θέση στη διδασκαλία και σε άλλους τομείς.
Το μοντέλο έχει, εξάλλου, εκπαιδευτεί σε αμέτρητα κομμάτια ανθρωπογενούς γραφής, και έτσι η ικανότητά του να μαντεύει μια ικανοποιητική απάντηση σε μια ερώτηση από όλη αυτή τη γνώση και τα γεγονότα δεν είναι απροσδόκητη.
«Πρώτον, κάνει καταπληκτική δουλειά σε ερωτήσεις διαχείρισης βασικών λειτουργιών και ανάλυσης διαδικασιών, συμπεριλαμβανομένων εκείνων που βασίζονται σε μελέτες περιπτώσεων», είπε ο Terwiesch στο το χαρτί του. «Όχι μόνο οι απαντήσεις είναι σωστές, αλλά οι εξηγήσεις είναι εξαιρετικές».
Τούτου λεχθέντος, παρατήρησε ότι το ChatGPT κάνει απλά μαθηματικά λάθη και υποσκάπτει ερωτήσεις προηγμένης ανάλυσης διαδικασίας. Ωστόσο, το μοντέλο AI ανταποκρίνεται σε υποδείξεις από ανθρώπους σχετικά με το πώς να βελτιωθεί – μπορεί να διορθωθεί επιτυχώς όταν δίνονται υποδείξεις από έναν άνθρωπο ειδικό.
Η ανθρώπινη καθοδήγηση έχει επίσης χρησιμεύσει ως πηγή κακόβουλης εισροής, όπως αποδεικνύεται από Το chatbot Tay της Microsoft και με επακόλουθη έρευνα.
Γιατρός, γιατρός
Η ομάδα ιατρικής έρευνας που έγραψε «Απόδοση του ChatGPT στο USMLE: Δυνατότητα για Ιατρική Εκπαίδευση υποβοηθούμενη από AI με χρήση μοντέλων μεγάλων γλωσσών" περιλαμβάνει το "ChatGPT" ως συν-συγγραφέα.
«Το ChatGPT συνέβαλε στη συγγραφή πολλών τμημάτων αυτού του χειρογράφου», αναφέρουν οι βιολογικοί συγγραφείς στην εργασία τους.
Άλλες οργανωτικές σχέσεις των συγγραφέων περιλαμβάνουν: Γενικό Νοσοκομείο Μασαχουσέτης, Ιατρική Σχολή Χάρβαρντ, Βοστώνη, Μασαχουσέτη. Warren Alpert Medical School, Brown University, στο Providence, Rhode Island. και Τμήμα Ιατρικής Εκπαίδευσης στο UWorld, LLC, μια εταιρεία ηλεκτρονικής μάθησης υγείας με έδρα το Ντάλας του Τέξας.
Οι συγγραφείς – Tiffany Kung, Morgan Cheatham, ChatGPT, Arielle Medenilla, Czarina Sillos, Lorie De Leon, Camille Elepaño, Maria Madriaga, Rimel Aggabao, Giezel Diaz-Candido, James Maningo και Victor Tseng – κατέληξαν σε παρόμοιο συμπέρασμα με το Wharton's . Συγκεκριμένα, διαπίστωσαν ότι το ChatGPT απέδωσε ικανοποιητικά – πάνω από το μεταβλητό όριο επιτυχίας περίπου 60 τοις εκατό – στην εξέταση USMLE, αν τους δοθεί το πλεονέκτημα των απροσδιόριστων απαντήσεων. Και αναμένουν ότι τα μεγάλα γλωσσικά μοντέλα (LLM) θα διαδραματίσουν αυξανόμενο ρόλο στην ιατρική εκπαίδευση και στη λήψη κλινικών αποφάσεων.
"Το ChatGPT αποδίδει μέτρια ακρίβεια προσεγγίζοντας την απόδοση μετάδοσης στο USMLE", αναφέρουν οι συγγραφείς στην εργασία τους. «Τα στοιχεία της εξέτασης κωδικοποιήθηκαν αρχικά ως ερωτήσεις ανοιχτού τύπου με μεταβλητές προτροπές εισόδου. Αυτή η μορφή εισαγωγής προσομοιώνει ένα δωρεάν φυσικό μοτίβο ερωτήματος χρήστη. Με απροσδιόριστες απαντήσεις λογοκριμένες/συμπεριλαμβανόμενες, η ακρίβεια ChatGPT για τα Βήματα USMLE 1, 2CK και 3 ήταν 68.0 τοις εκατό/42.9 τοις εκατό, 58.3 τοις εκατό/51.4 τοις εκατό και 62.4 τοις εκατό/55.7 τοις εκατό, αντίστοιχα."
Η περιγραφή της απόδοσης του ChatGPT ως «προσεγγίζοντας το πέρασμα» είναι ένας γενναιόδωρος τρόπος διατύπωσής της, ιδιαίτερα με την τεχνητή νοημοσύνη να αναγνωρίζεται για απροσδιόριστες απαντήσεις. Το να φτάσετε στο ιατρείο και να δείτε ένα δίπλωμα που διαφημίζει βαθμό D μπορεί να προκαλέσει λίγο μεγαλύτερη ανησυχία στους ασθενείς.
Ωστόσο, οι ερευνητές υποστηρίζουν ότι τα πράγματα που έκανε το ChatGPT συνάδουν με τις αποδεκτές απαντήσεις και ότι το μοντέλο τεχνητής νοημοσύνης έχει βελτιωθεί εντυπωσιακά, αφού μήνες νωρίτερα πέτυχε ποσοστό επιτυχίας μόνο περίπου 36.7%.
Είναι ενδιαφέρον ότι παρατήρησαν ότι το ChatGPT είχε καλύτερη απόδοση από το PubMedGPT, ένα LLM που βασίζεται αποκλειστικά σε βιοϊατρικά δεδομένα που διαχειριζόταν ακρίβεια μόνο περίπου 50.8 τοις εκατό (βάσει αδημοσίευτων δεδομένων).
«Υποθέτουμε ότι η εκπαίδευση σε συγκεκριμένο τομέα μπορεί να έχει δημιουργήσει μεγαλύτερη αμφιθυμία στο μοντέλο PubMedGPT, καθώς απορροφά πραγματικό κείμενο από συνεχή ακαδημαϊκό λόγο που τείνει να είναι ασαφής, αντιφατική ή εξαιρετικά συντηρητική ή μη δεσμευτική στη γλώσσα του», αναφέρουν οι συγγραφείς. .
Ουσιαστικά, το λιγότερο επιστημονικό, περισσότερο γνωμικό υλικό που μπήκε στην εκπαίδευση του ChatGPT, όπως τα φυλλάδια επεξήγησης ασθενειών που αντιμετωπίζουν ασθενείς, φαίνεται να έχουν κάνει το ChatGPT πιο γνωμικό.
«Καθώς η τεχνητή νοημοσύνη γίνεται ολοένα και πιο ικανή, θα γίνει σύντομα πανταχού παρούσα, μεταμορφώνοντας την κλινική ιατρική σε όλους τους τομείς της υγειονομικής περίθαλψης», καταλήγουν οι συγγραφείς, προσθέτοντας ότι οι κλινικοί γιατροί που σχετίζονται με το AnsibleHealth χρησιμοποιούν το ChatGPT στις ροές εργασίας τους και έχουν αναφέρει μείωση του χρόνου κατά 33%. απαιτείται για την ολοκλήρωση της τεκμηρίωσης και των έμμεσων εργασιών φροντίδας ασθενών.
Αυτό ίσως εξηγεί την απόφαση της Microsoft για διοχέτευση δισεκατομμυρίων στο OpenAI για το μελλοντικό της λογισμικό.
Η χρησιμότητα του ChatGPT σε ένα εκπαιδευτικό περιβάλλον – παρά το γεγονός ότι είναι συχνά λάθος – υπογραμμίστηκε σε ανάρτηση που δημοσιεύτηκε την Κυριακή από τον Thomas Rid, καθηγητή στρατηγικών σπουδών και ιδρυτή διευθυντή του Alperovich Institute for Cybersecurity Studies.
Ο Rid περιγράφει ένα πρόσφατο πενθήμερο μάθημα ανάλυσης κακόβουλου λογισμικού και αντίστροφης μηχανικής που διδάχθηκε από τον Juan Andres Guerrero-Saade.
«Πέντε μέρες αργότερα δεν είχα πλέον καμία αμφιβολία: αυτό το πράγμα θα μεταμορφώσει την τριτοβάθμια εκπαίδευση», είπε ο Ριντ. «Ήμουν ένας από τους μαθητές. Και έμεινα έκπληκτος από το τι ήταν σε θέση να κάνει για εμάς η μηχανική μάθηση, σε πραγματικό χρόνο. Και το λέω αυτό ως κάποιος που ήταν σκληραγωγημένος σκεπτικιστής της τεχνητής νοημοσύνης εδώ και πολλά χρόνια. Σημειώστε ότι δεν είπα "πιθανός" μετασχηματισμός. Θα μεταμορφώσει την τριτοβάθμια εκπαίδευση».
Guerrero-Saade, in ένα νήμα Twitter, αναγνωρίζει ότι το ChatGPT έκανε τα πράγματα λάθος, αλλά επιμένει ότι το εργαλείο βοήθησε τους μαθητές να βρουν καλύτερες απαντήσεις. Προτείνει να λειτουργεί σαν προσωπικός βοηθός διδασκαλίας για κάθε μαθητή.
«Ο φόβος γύρω από την τεχνητή νοημοσύνη (ή τις υπερμεγέθεις προσδοκίες για τέλεια αποτελέσματα) θολώνει την αναγνώριση αυτού του εκπληκτικού βοηθητικού προγράμματος LLM: ως βοηθός που μπορεί να συνδυάσει γρήγορα πληροφορίες (σωστές ή λάθος) με εξαιρετική συνάφεια για μια πιο απαιτητική νοημοσύνη (τον χρήστη) για να εργαστεί, ” έγραψε.
Ο Rid υποστηρίζει ότι ενώ οι ανησυχίες σχετικά με την τεχνητή νοημοσύνη ως μηχανισμό λογοκλοπής και εξαπάτησης στην εκπαίδευση πρέπει να αντιμετωπιστούν, η πιο σημαντική συζήτηση έχει να κάνει με το πώς τα εργαλεία AI μπορούν να βελτιώσουν τα εκπαιδευτικά αποτελέσματα. ®
- SEO Powered Content & PR Distribution. Ενισχύστε σήμερα.
- Platoblockchain. Web3 Metaverse Intelligence. Ενισχύθηκε η γνώση. Πρόσβαση εδώ.
- πηγή: https://go.theregister.com/feed/www.theregister.com/2023/01/24/chatgpt_exam_study/
- 1
- 7
- 9
- a
- ικανότητα
- Ικανός
- Σχετικα
- πάνω από
- ακαδημαϊκής
- ακρίβεια
- επιτευχθεί
- απέναντι
- προηγμένες
- Διαφήμιση
- συμβουλές
- σύμβουλος
- Συνδεδεμένος
- συνδέσεις
- Μετά το
- AI
- Όλα
- ήδη
- καταπληκτικό
- Amazon
- μεταξύ των
- ανάλυση
- και
- ανώνυμος
- απάντηση
- απαντήσεις
- πλησιάζω
- προσεγγίζοντας
- Υποστηρίζει
- γύρω
- φθάνουν
- τεχνητός
- τεχνητή νοημοσύνη
- βοηθήσει
- Βοηθός
- συσχετισμένη
- συγγραφείς
- Αυτοματοποιημένη
- Αυτοματοποίηση
- βασίζονται
- βασικός
- επειδή
- γίνονται
- γίνεται
- να γίνει
- είναι
- όφελος
- Καλύτερα
- μεταξύ
- δισεκατομμύρια
- βιοϊατρικής
- Κομμάτι
- boston
- Πανεπιστήμιο Brown
- επιχείρηση
- Business School
- που ονομάζεται
- ικανός
- ο οποίος
- περίπτωση
- Μελέτες Περιπτώσεων
- ChatGPT
- εξαπάτησης
- καθαρός
- Κλινικός
- κλινικούς ιατρούς
- στενά
- Backup
- Συν-Συγγραφέας
- κωδικός
- Ελάτε
- πλήρης
- Ανησυχία
- Πιθανά ερωτήματα
- καταλήγω
- συμπέρασμα
- συντηρητικός
- συνέβαλε
- Συνομιλία
- πορεία
- δημιουργήθηκε
- μονάδες
- Κυβερνασφάλεια
- καθημερινά
- Ντάλας
- ημερομηνία
- Ημ.
- αποφάσισε
- απόφαση
- Λήψη Αποφάσεων
- κατέδειξε
- Τμήμα
- Παρά
- DID
- κατευθείαν
- Διευθυντής
- Νόσος
- τεκμηρίωση
- αμφιβάλλω
- E-Learning
- κάθε
- Νωρίτερα
- Εκπαίδευση
- εκπαιδευτικών
- εκπαιδευτικούς
- Μηχανική
- αναμενόμενη
- Αιθέρας (ΕΤΗ)
- όλοι
- εξέταση
- υπερβαίνω
- έξοχος
- αναμένω
- προσδοκίες
- εμπειρογνώμονας
- Εξηγεί
- εξήγηση
- άκρο
- Πτώση
- τελικός
- Εύρεση
- Εταιρεία
- Όνομα
- μορφή
- Βρέθηκαν
- ιδρυτής
- Δωρεάν
- από
- λειτουργίες
- μελλοντικός
- General
- γενναιόδωρος
- παίρνω
- GitHub
- δεδομένου
- βαθμός
- μεγαλύτερη
- Group
- Μεγαλώνοντας
- Harvard
- που έχει
- Υγεία
- υγειονομική περίθαλψη
- βοήθησε
- υψηλότερο
- Ανώτερη εκπαίδευση
- υψηλά
- υποδείξεις
- Νοσοκομείο
- Πως
- Πώς να
- Ωστόσο
- HTTPS
- ανθρώπινος
- Hype
- σημαντικό
- βελτίωση
- βελτιωθεί
- in
- Σε άλλες
- περιλαμβάνουν
- περιλαμβάνει
- Συμπεριλαμβανομένου
- όλο και περισσότερο
- πληροφορίες
- εισαγωγή
- Ινστιτούτο
- διανοούμενος
- Νοημοσύνη
- τόκος
- νησί
- IT
- αντικειμένων
- εαυτό
- Δουλειά
- γνώση
- Γλώσσα
- large
- μάθηση
- αδειοδότηση
- Πιθανός
- περιορισμούς
- λίγο
- ζουν
- LLC
- πλέον
- μηχανή
- μάθηση μηχανής
- που
- διατηρήσουν
- ΚΑΝΕΙ
- Κατασκευή
- malware
- διαχειρίζεται
- διαχείριση
- πολοί
- σημάδι
- Μάζα
- Μασαχουσέτη
- υλικό
- μαθηματικά
- ύλη
- μηχανισμός
- ιατρικών
- ιατρική έρευνα
- ιατρική
- Microsoft
- ενδέχεται να
- λάθη
- μοντέλο
- μοντέλα
- μήνες
- περισσότερο
- Morgan
- Φυσικό
- Φύση
- Ανάγκη
- που απαιτούνται
- αριθμός
- Office
- ONE
- συνεχή
- OpenAI
- λειτουργίες
- Δογματικός
- οργανωτικός
- ΑΛΛΑ
- φόρμες
- Χαρτί
- ιδιαίτερα
- Πέρασμα
- ασθενής
- φροντίδα ασθενούς
- pacientes
- πρότυπο
- Πενσυλβάνια
- People
- τοις εκατό
- τέλειος
- επίδοση
- ίσως
- προσωπικός
- γιατρός
- κομμάτια
- Μέρος
- Πλάτων
- Πληροφορία δεδομένων Plato
- Πλάτωνα δεδομένα
- Δοκιμάστε να παίξετε
- ψηφοφορία
- δυναμικού
- διαδικασια μας
- Δάσκαλος
- ανδρεία
- δημοσιεύθηκε
- βάζω
- Τέταρτο
- ερώτηση
- Ερωτήσεις
- γρήγορα
- Τιμή
- πραγματικός
- πραγματικό κόσμο
- σε πραγματικό χρόνο
- πρόσφατος
- αναγνώριση
- συνάφεια
- αναφέρθηκαν
- απαιτούν
- απαιτείται
- έρευνα
- ερευνητική ομάδα
- ερευνητές
- ανταποκρίνονται
- αντιστρέψει
- Απαλλάσσω
- Ρόλος
- Είπε
- Σχολείο
- τμήματα
- Τομείς
- βλέποντας
- τον καθορισμό
- ρυθμίσεις
- διάφοροι
- παρόμοιες
- Απλούς
- So
- λογισμικό
- Σύντομα
- Πηγή
- ειδικά
- stanford
- Κατάσταση
- Βήματα
- Στρατηγική
- Φοιτητής
- Φοιτητές
- μελέτες
- υποβάλλονται
- επιτυχία
- Επιτυχώς
- Προτείνει
- σύστημα
- συστήματα
- συνομιλίες
- εργασίες
- δασκάλους
- Διδασκαλία
- Τεχνολογία
- δοκιμή
- Δοκιμές
- Τέξας
- Η
- ο κόσμος
- τους
- πράγμα
- πράγματα
- κατώφλι
- Μέσω
- Tiffany
- ώρα
- προς την
- εργαλείο
- εργαλεία
- εκπαιδευμένο
- Εκπαίδευση
- Μεταμορφώστε
- μετασχηματίζοντας
- Τουίτερ
- πανταχού παρών
- Απροσδόκητος
- πανεπιστήμιο
- Πανεπιστήμιο της Πενσυλβάνια
- us
- Χρήστες
- χρησιμότητα
- ΠΑΡΑΒΑΣΗ
- λαβύρινθος
- wharton
- Τι
- Ποιό
- ενώ
- Ο ΟΠΟΊΟΣ
- θα
- Εργασία
- ροές εργασίας
- κόσμος
- θα
- γραφή
- Λανθασμένος
- χρόνια
- αποδόσεις
- zephyrnet