Az OpenAI ChatGPT csevegőszoftvere, ha szabadon engedi a világot, B és B- közötti pontszámot érne el a Wharton Business School Operations Management vizsgáján, és megközelítené vagy meghaladná a US Medical Licensing Exam (USMLE) teljesítéséhez szükséges pontszámot.
Noha ez többet mond el a tesztelési anyagok statikus, dokumentumközpontúságáról, mint a szoftverek intellektuális képességeiről, ennek ellenére ez aggodalomra és érdeklődésre tart számot az oktatók és szinte mindenki más számára, akik az automatizálás korában élnek.
Az akadémikusok aggódnak, hogy a segítő rendszerek szeretik ChatGPT és a GitHub Másodpilóta (a Codex nevű OpenAI-modell alapján) megköveteli majd a tanároktól, hogy újraértékeljék, hogyan tanítanak, és értékeljék a vizsgákat, mert a gépi tanuláson alapuló kisegítő technológia ennyire alkalmassá vált.
Az oktatási környezetben az AI-tanácsok általánossá válnak: a Stanford Daily csak jelentett, „nagyszámú diák használta már a ChatGPT-t a záróvizsgákon.” Egy 17 válaszadó anonim közvélemény-kutatása alapján a hallgatók 4,497 százaléka nyilatkozott úgy, hogy a ChatGPT segítségével segítette az őszi negyedéves feladatokat és vizsgákat, 5 százalékuk pedig azt mondta, hogy közvetlenül a ChatGPT-től küldte be az anyagot kevés szerkesztéssel vagy anélkül – ami feltehetően így van. a becsületkódex megsértése.
Külön-külön Christian Terwiesch, a Pennsylvaniai Egyetem Wharton School professzora és egy orvoskutatók egy csoportja, akik többnyire az Ansible Health-hez kapcsolódnak, úgy döntöttek, hogy a ChatGPT-t egy vitathatatlanul amorális automatizált tanácsadó és tényszerűen megtámadva szakértői rendszer, a tesztre.
Terwiesch és az Ansible Health boffin is világossá tette, hogy a ChatGPT-nek vannak korlátai, és félrevezeti a dolgokat. Összességében közepes pontszámot adtak rá, de egyértelművé tették, hogy elvárják, hogy az AI-segítő rendszerek helyet kapjanak a tanításban és más szektorokban.
A modellt végül is számtalan ember alkotta írásra képezték ki, így nem váratlan az a képessége, hogy egy kérdésre kielégítő választ találjon ki a belélegzett tudásból és tényekből.
„Először is csodálatos munkát végez az alapvető műveletirányítási és folyamatelemzési kérdésekben, beleértve azokat is, amelyek esettanulmányokon alapulnak” – mondta Terwiesch a papírját. „Nemcsak a válaszok helyesek, de a magyarázatok is kiválóak.”
Ennek ellenére megfigyelte, hogy a ChatGPT egyszerű matematikai hibákat követ el, és haladó folyamatelemzési kérdéseket feszeget. Az AI-modell azonban reagál az emberek tanácsaira a fejlesztésről – sikeresen korrigálja magát, ha egy humán szakértő tanácsait ad.
Az emberi útmutatás rosszindulatú bemenetek forrásaként is szolgált, amint azt a A Microsoft Tay chatbotja és későbbi kutatás.
Doktor, doktor
Az orvosi kutatócsoport, amely azt írta,A ChatGPT teljesítménye az USMLE-n: A mesterséges intelligencia által támogatott orvosoktatás lehetőségei nagy nyelvi modelleket használva” tartalmazza a „ChatGPT” társszerzőt.
"A ChatGPT hozzájárult a kézirat több részének megírásához" - állítják a biológiai szerzők közleményükben.
A szerzők egyéb szervezeti vonatkozásai a következők: Massachusetts General Hospital, Harvard School of Medicine, Boston, Mass; Warren Alpert Medical School, Brown Egyetem, Providence, Rhode Island; és a texasi dallasi székhelyű egészségügyi e-learning cég, az UWorld, LLC Orvosi Oktatási Tanszéke.
A szerzők – Tiffany Kung, Morgan Cheatham, ChatGPT, Arielle Medenilla, Czarina Sillos, Lorie De Leon, Camille Elepaño, Maria Madriaga, Rimel Aggabao, Giezel Diaz-Candido, James Maningo és Victor Tseng – hasonló következtetésre jutottak, mint Wharton Terwieschje. . Konkrétan azt találták, hogy a ChatGPT megfelelõen teljesített – a változó megfelelési küszöb felett, körülbelül 60 százalékos – az USMLE vizsgán, ha a határozatlan válaszok elõnyét látjuk. Arra számítanak, hogy a nagy nyelvi modellek (LLM) egyre nagyobb szerepet fognak játszani az orvosképzésben és a klinikai döntéshozatalban.
"A ChatGPT mérsékelt pontosságot ad, megközelítve a passzív teljesítményt az USMLE-n" - állítják a szerzők közleményükben. „A vizsgatételeket először nyílt végű kérdésekként kódolták változó bevezető promptokkal. Ez a beviteli formátum egy ingyenes természetes felhasználói lekérdezési mintát szimulál. Határozatlan válaszok cenzúrázva/beleértve, a ChatGPT pontossága az USMLE 1., 2CK és 3. lépésében 68.0 százalék/42.9 százalék, 58.3 százalék/51.4 százalék, illetve 62.4 százalék/55.7 százalék volt.”
Ha a ChatGPT teljesítményét „elhaladáshoz közeledő”-ként írjuk le, ez egy nagylelkű megfogalmazás, különösen, ha az AI-t a határozatlan válaszok miatt becsülik meg. Egy orvosi rendelőbe érkezés és egy D fokozatot hirdető oklevél meglátása némileg nagyobb aggodalmat válthat ki a betegekben.
A kutatók azonban azt állítják, hogy a ChatGPT helyessége szorosan összhangban volt az elfogadott válaszokkal, és az AI-modell figyelemreméltóan javult, mivel hónapokkal korábban mindössze 36.7 százalékos sikerarányt ért el.
Érdekes módon megfigyelték, hogy a ChatGPT jobban teljesített, mint a PubMedGPT, egy kizárólag orvosbiológiai adatokon alapuló LLM, amely csak körülbelül 50.8 százalékos pontosságot tudott elérni (nem publikált adatok alapján).
„Azt gyanítjuk, hogy a szakterület-specifikus képzés nagyobb ambivalenciát teremthetett a PubMedGPT modellben, mivel a valós szöveget elnyeli a folyamatban lévő tudományos diskurzusból, amely általában nem meggyőző, ellentmondásos, illetve erősen konzervatív vagy nem elkötelezett nyelvezetű” – állítják a szerzők. .
Lényegében úgy tűnik, hogy a ChatGPT képzésébe bekerült kevésbé tudományos, véleményt formáló anyagok, mint például a betegeknek szóló betegségmagyarázó brosúrák, úgy tűnik, hogy a ChatGPT-t véleményesebbé tették.
„Ahogy a mesterséges intelligencia egyre gyakoribbá válik, hamarosan mindenütt jelen lesz, átalakítva a klinikai orvoslást az összes egészségügyi ágazatban” – összegezték a szerzők, hozzátéve, hogy az AnsibleHealth-hez kapcsolódó klinikusok a ChatGPT-t használták munkafolyamataik során, és 33 százalékkal csökkentették az időt. dokumentációs és közvetett betegellátási feladatok elvégzéséhez szükséges.
Talán ez magyarázza a Microsoft döntését milliárdokat csatornázni az OpenAI-ba jövőbeli szoftveréhez.
A ChatGPT oktatási környezetben való hasznosságát – annak ellenére, hogy gyakran hibás – hangsúlyozták egy blogbejegyzés Thomas Rid, a stratégiai tanulmányok professzora és az Alperovich Institute for Cybersecurity Studies alapító igazgatója tette közzé vasárnap.
Rid ismerteti a közelmúltban lezajlott ötnapos malware-elemzési és visszafejtési tanfolyamot, amelyet Juan Andres Guerrero-Saade tartott.
„Öt nappal később már nem volt kétségem afelől, hogy ez átalakítja a felsőoktatást” – mondta Rid. „Az egyik diák voltam. És le voltam nyűgözve attól, hogy a gépi tanulás mit tudott tenni értünk, valós időben. És ezt úgy mondom, mint aki megkeményedett szkeptikus a mesterséges intelligencia sok éves felhajtásáról. Vegye figyelembe, hogy nem azt mondtam, hogy „valószínű” átalakítás. Ez átalakítja a felsőoktatást.”
Guerrero-Saade, be egy Twitter szál, elismeri, hogy a ChatGPT rosszul csinálta a dolgokat, de kitart amellett, hogy az eszköz segített a diákoknak jobb válaszokat találni. Azt javasolja, hogy minden diák számára személyes tanársegédként működjön.
„A mesterséges intelligencia körüli félelemkeltés (vagy a tökéletes kimenetekre vonatkozó túlméretezett elvárások) elhomályosítja az LLM-ek megdöbbentő segédprogramjának felismerését: mint asszisztens, aki képes gyorsan egyesíteni a rendkívül fontos információkat (jó vagy rossz) egy igényesebb intelligencia (a felhasználó) számára, amellyel dolgozni lehet. ” írt.
Rid azzal érvel, hogy bár foglalkozni kell a mesterséges intelligenciával, mint a plágium és az oktatási csalás mechanizmusával kapcsolatos aggályokkal, a fontosabb beszélgetés arról szól, hogy az AI-eszközök hogyan javíthatják az oktatási eredményeket. ®
- SEO által támogatott tartalom és PR terjesztés. Erősödjön még ma.
- Platoblockchain. Web3 metaverzum intelligencia. Felerősített tudás. Hozzáférés itt.
- Forrás: https://go.theregister.com/feed/www.theregister.com/2023/01/24/chatgpt_exam_study/
- 1
- 7
- 9
- a
- képesség
- Képes
- Rólunk
- felett
- egyetemi
- pontosság
- elért
- át
- fejlett
- Hirdetés
- tanács
- tanácsadó
- Társult
- hovatartozás
- Után
- AI
- Minden termék
- már
- elképesztő
- amazon
- között
- elemzés
- és a
- Névtelenül
- válasz
- válaszok
- megközelítés
- közeledik
- azt állítja,
- körül
- érkező
- mesterséges
- mesterséges intelligencia
- segít
- Helyettes
- társult
- szerzők
- Automatizált
- Automatizálás
- alapján
- alapvető
- mert
- válik
- válik
- egyre
- hogy
- haszon
- Jobb
- között
- milliárd
- orvosbiológiai
- Bit
- Boston
- Brown University
- üzleti
- Üzleti iskola
- hívott
- képes
- ami
- eset
- Esettanulmányok
- ChatGPT
- csalás
- világos
- Klinikai
- klinikusok
- szorosan
- felhő
- Társszerző
- kód
- hogyan
- teljes
- Vonatkozik
- aggodalmak
- megállapítja,
- következtetés
- konzervatív
- hozzájárultak
- Beszélgetés
- tanfolyam
- készítette
- hitel
- Kiberbiztonság
- napi
- Dallas
- dátum
- Nap
- határozott
- döntés
- Döntéshozatal
- igazolták
- osztály
- Ellenére
- DID
- közvetlenül
- Igazgató
- betegség
- dokumentáció
- kétlem
- E-Learning
- minden
- Korábban
- Oktatás
- nevelési
- pedagógusok
- Mérnöki
- becsült
- Eter (ETH)
- mindenki
- vizsgálat
- haladja meg
- kiváló
- vár
- várakozások
- szakértő
- Elmagyarázza
- magyarázat
- szélső
- Esik
- utolsó
- Találjon
- Cég
- vezetéknév
- formátum
- talált
- alapító
- Ingyenes
- ból ből
- funkciók
- jövő
- általános
- nagylelkű
- kap
- GitHub
- adott
- fokozat
- nagyobb
- Csoport
- Növekvő
- Harvard
- tekintettel
- Egészség
- egészségügyi
- segített
- <p></p>
- Felsőoktatás
- nagyon
- tanácsok
- Kórház
- Hogyan
- How To
- azonban
- HTTPS
- emberi
- hype
- fontos
- javul
- javított
- in
- Más
- tartalmaz
- magában foglalja a
- Beleértve
- egyre inkább
- információ
- bemenet
- Intézet
- szellemi
- Intelligencia
- kamat
- sziget
- IT
- tételek
- maga
- Munka
- tudás
- nyelv
- nagy
- tanulás
- Engedélyezés
- Valószínű
- korlátozások
- kis
- élő
- LLC
- hosszabb
- gép
- gépi tanulás
- készült
- fenntartása
- KÉSZÍT
- Gyártás
- malware
- sikerült
- vezetés
- sok
- jel
- Tömeg
- Massachusetts
- anyag
- matematikai
- Anyag
- mechanizmus
- orvosi
- orvosi kutatás
- orvostudomány
- microsoft
- esetleg
- hibákat
- modell
- modellek
- hónap
- több
- Morgan
- Természetes
- Természet
- Szükség
- szükséges
- szám
- Office
- ONE
- folyamatban lévő
- OpenAI
- Művelet
- Nagyképű
- szervezeti
- Más
- átfogó
- Papír
- különösen
- Múló
- beteg
- betegellátás
- betegek
- Mintás
- Pennsylvania
- Emberek (People)
- százalék
- tökéletes
- teljesítmény
- talán
- személyes
- orvos
- darabok
- Hely
- Plató
- Platón adatintelligencia
- PlatoData
- játszani
- szavazás
- potenciális
- folyamat
- Egyetemi tanár
- bátorság
- közzétett
- tesz
- Negyed
- kérdés
- Kérdések
- gyorsan
- Arány
- igazi
- való Világ
- real-time
- új
- elismerés
- relevancia
- Számolt
- szükség
- kötelező
- kutatás
- kutatócsoport
- kutatók
- fogékony
- fordított
- megszabadít
- Szerep
- Mondott
- Iskola
- szakaszok
- ágazatok
- látás
- beállítás
- beállítások
- számos
- hasonló
- Egyszerű
- So
- szoftver
- Nemsokára
- forrás
- kifejezetten
- Stanford
- Állami
- Lépései
- Stratégiai
- diák
- Diákok
- tanulmányok
- benyújtott
- siker
- sikeresen
- javasolja,
- rendszer
- Systems
- Talks
- feladatok
- tanárok
- Tanítási
- Technológia
- teszt
- Tesztelés
- Texas
- A
- a világ
- azok
- dolog
- dolgok
- küszöb
- Keresztül
- Fátyolszövet
- idő
- nak nek
- szerszám
- szerszámok
- kiképzett
- Képzések
- Átalakítás
- transzformáló
- mindenütt jelenlevő
- Váratlan
- egyetemi
- University of Pennsylvania
- us
- használó
- hasznosság
- Sértés
- nyúlkert
- wharton
- Mit
- ami
- míg
- WHO
- lesz
- Munka
- munkafolyamatok
- világ
- lenne
- írás
- Rossz
- év
- hozamok
- zephyrnet