Phần mềm trò chuyện ChatGPT của OpenAI, nếu được phổ biến rộng rãi trên thế giới, sẽ đạt điểm từ B đến B- trong kỳ thi Quản lý Hoạt động của trường kinh doanh Wharton và sẽ đạt hoặc vượt quá số điểm cần thiết để vượt qua Kỳ thi Cấp phép Y tế Hoa Kỳ (USMLE).
Mặc dù điều này có thể nói nhiều hơn về bản chất tĩnh, tập trung vào tài liệu của tài liệu kiểm tra hơn là năng lực trí tuệ của phần mềm, nhưng đây vẫn là vấn đề đáng quan tâm và quan tâm của các nhà giáo dục cũng như của tất cả những người khác sống trong thời đại tự động hóa.
Các học giả đã băn khoăn rằng các hệ thống hỗ trợ như ChatGPT và GitHub's Phi công phụ (dựa trên mô hình OpenAI có tên là Codex) sẽ yêu cầu giáo viên đánh giá lại cách họ dạy và chấm bài kiểm tra vì công nghệ hỗ trợ dựa trên học máy đã trở nên có khả năng như vậy.
Trong môi trường giáo dục, lời khuyên về AI đang trở nên phổ biến: The Stanford Daily chỉ báo cáo, “một số lượng lớn sinh viên đã sử dụng ChatGPT trong kỳ thi cuối kỳ của họ.” Ước tính có khoảng 17% sinh viên, dựa trên một cuộc thăm dò ý kiến ẩn danh của 4,497 người được hỏi, cho biết họ đã sử dụng ChatGPT để hỗ trợ làm bài tập và bài kiểm tra quý mùa thu, với 5% cho biết họ đã gửi tài liệu trực tiếp từ ChatGPT mà không cần hoặc chỉnh sửa rất ít – điều này có lẽ là vi phạm quy tắc danh dự.
Một cách riêng biệt, Christian Terwiesch, giáo sư tại Trường Wharton thuộc Đại học Pennsylvania, và một nhóm các nhà nghiên cứu y tế chủ yếu liên kết với Ansible Health, đã quyết định đưa ChatGPT, một người được cho là cố vấn tự động phi đạo đức và thử thách thực tế hệ chuyên gia, để kiểm tra.
Cả Terwiesch và Ansible Health boffins đều nói rõ rằng ChatGPT có những hạn chế và làm sai mọi thứ. Nhìn chung, họ cho điểm ở mức trung bình nhưng họ nói rõ rằng họ mong đợi các hệ thống hỗ trợ AI sẽ tìm được chỗ đứng trong giảng dạy và trong các lĩnh vực khác.
Rốt cuộc, mô hình đã được đào tạo trên vô số bài viết do con người tạo ra, và do đó, khả năng đoán ra câu trả lời thỏa đáng cho một câu hỏi từ tất cả kiến thức và dữ kiện đã được hít vào của nó không phải là điều bất ngờ.
Terwiesch cho biết: “Đầu tiên, nó hoàn thành xuất sắc các câu hỏi về quản lý hoạt động cơ bản và phân tích quy trình, bao gồm cả những câu hỏi dựa trên các nghiên cứu điển hình. giấy của anh ấy. “Không chỉ các câu trả lời đúng, mà những lời giải thích cũng rất xuất sắc.”
Điều đó nói rằng, anh ấy đã quan sát thấy rằng ChatGPT mắc các lỗi toán học đơn giản và lúng túng trong các câu hỏi phân tích quy trình nâng cao. Tuy nhiên, mô hình AI phản hồi nhanh các gợi ý từ mọi người về cách cải thiện – nó có thể tự sửa lỗi thành công khi nhận được gợi ý từ một chuyên gia về con người.
Hướng dẫn của con người cũng đóng vai trò là nguồn đầu vào độc hại, như đã được chứng minh bởi Chatbot Tay của Microsoft và bởi nghiên cứu tiếp theo.
Bác sĩ, bác sĩ
Nhóm nghiên cứu y tế đã viết “Hiệu suất của ChatGPT trên USMLE: Tiềm năng cho Giáo dục Y tế được AI hỗ trợ bằng các Mô hình Ngôn ngữ Lớn” bao gồm “ChatGPT” với tư cách là đồng tác giả.
“ChatGPT đã đóng góp vào việc viết một số phần của bản thảo này,” các tác giả sinh học nêu trong bài báo của họ.
Các chi nhánh tổ chức khác của các tác giả bao gồm: Bệnh viện Đa khoa Massachusetts, Trường Y Harvard, ở Boston, Mass; Trường Y khoa Warren Alpert, Đại học Brown, ở Providence, Rhode Island; và Bộ Giáo dục Y tế tại UWorld, LLC, một công ty đào tạo trực tuyến về sức khỏe có trụ sở tại Dallas, Texas.
Các tác giả – Tiffany Kung, Morgan Cheatham, ChatGPT, Arielle Medenilla, Czarina Sillos, Lorie De Leon, Camille Elepaño, Maria Madriaga, Rimel Aggabao, Giezel Diaz-Candido, James Maningo và Victor Tseng – đã đưa ra kết luận tương tự như Terwiesch của Wharton . Cụ thể, họ nhận thấy rằng ChatGPT đã thực hiện khá tốt – trên ngưỡng vượt qua có thể thay đổi khoảng 60 phần trăm – trong bài kiểm tra USMLE, nếu được hưởng lợi từ các câu trả lời không xác định. Và họ mong đợi các mô hình ngôn ngữ lớn (LLM) sẽ đóng một vai trò ngày càng tăng trong giáo dục y tế và trong việc ra quyết định lâm sàng.
“ChatGPT mang lại độ chính xác vừa phải khi tiếp cận hiệu suất vượt qua USMLE,” các tác giả nêu trong bài báo của họ. “Các mục thi lần đầu tiên được mã hóa dưới dạng câu hỏi mở với lời nhắc dẫn dắt thay đổi. Định dạng đầu vào này mô phỏng mẫu truy vấn người dùng tự nhiên miễn phí. Với các phản hồi không xác định được kiểm duyệt/bao gồm, độ chính xác của ChatGPT cho USMLE Bước 1, 2CK và 3 lần lượt là 68.0%/42.9%, 58.3%/51.4% và 62.4%/55.7%.
Mô tả hiệu suất của ChatGPT là “sắp vượt qua” là một cách diễn đạt hào phóng, đặc biệt với việc AI được công nhận cho các câu trả lời không xác định. Đến văn phòng bác sĩ và nhìn thấy bằng tốt nghiệp quảng cáo điểm D có thể khiến bệnh nhân lo lắng hơn một chút.
Nhưng các nhà nghiên cứu khẳng định rằng những điều mà ChatGPT đã làm phù hợp chặt chẽ với các câu trả lời được chấp nhận và mô hình AI đã được cải thiện đáng kể, có nhiều tháng trước đó chỉ đạt được tỷ lệ thành công khoảng 36.7%.
Thật thú vị, họ quan sát thấy rằng ChatGPT hoạt động tốt hơn PubMedGPT, một LLM chỉ dựa trên dữ liệu y sinh quản lý độ chính xác chỉ khoảng 50.8 phần trăm (dựa trên dữ liệu chưa được công bố).
“Chúng tôi suy đoán rằng đào tạo theo lĩnh vực cụ thể có thể đã tạo ra sự mâu thuẫn lớn hơn trong mô hình PubMedGPT, vì nó tiếp thu văn bản trong thế giới thực từ diễn ngôn học thuật đang diễn ra có xu hướng không thuyết phục, mâu thuẫn hoặc rất bảo thủ hoặc không phổ biến trong ngôn ngữ của nó,” các tác giả cho biết .
Về cơ bản, tài liệu ít khoa học hơn, nhiều quan điểm hơn được đưa vào chương trình đào tạo của ChatGPT, chẳng hạn như các cuốn sách nhỏ giải thích về bệnh mà bệnh nhân phải đối mặt, dường như đã khiến ChatGPT trở nên quan điểm hơn.
“Khi AI ngày càng trở nên thành thạo, nó sẽ sớm trở nên phổ biến, biến đổi y học lâm sàng trên tất cả các lĩnh vực chăm sóc sức khỏe,” các tác giả kết luận, đồng thời cho biết thêm rằng các bác sĩ lâm sàng liên kết với AnsibleHealth đã sử dụng ChatGPT trong quy trình làm việc của họ và đã báo cáo rằng thời gian đã giảm 33%. cần thiết để hoàn thành tài liệu và các nhiệm vụ chăm sóc bệnh nhân gián tiếp.
Điều này có lẽ giải thích quyết định của Microsoft chuyển hàng tỷ đô la vào OpenAI cho phần mềm tương lai của nó.
Tiện ích của ChatGPT trong môi trường giáo dục - mặc dù thực tế là nó thường sai - đã được nhấn mạnh trong một blog đăng bài được xuất bản vào Chủ nhật bởi Thomas Rid, giáo sư nghiên cứu chiến lược và là giám đốc sáng lập của Viện Nghiên cứu An ninh mạng Alperovich.
Rid mô tả khóa học Kỹ thuật đảo ngược và Phân tích phần mềm độc hại kéo dài XNUMX ngày gần đây do Juan Andres Guerrero-Saade giảng dạy.
Rid nói: “Năm ngày sau, tôi không còn nghi ngờ gì nữa: điều này sẽ thay đổi giáo dục đại học. “Tôi là một trong những sinh viên. Và tôi đã bị choáng ngợp bởi những gì máy học có thể làm cho chúng ta, trong thời gian thực. Và tôi nói điều này với tư cách là một người đã từng cứng rắn không tin của sự cường điệu về trí tuệ nhân tạo trong nhiều năm. Lưu ý rằng tôi không nói biến đổi 'có khả năng'. Nó sẽ biến đổi giáo dục đại học.”
Guerrero-Saade, trong một chủ đề Twitter, thừa nhận rằng ChatGPT có sai sót nhưng khẳng định công cụ này đã giúp học sinh đưa ra câu trả lời tốt hơn. Ông gợi ý rằng nó hoạt động giống như một trợ lý giảng dạy cá nhân cho mỗi học sinh.
“Nỗi sợ hãi xung quanh AI (hoặc kỳ vọng quá mức về kết quả đầu ra hoàn hảo) che mờ sự công nhận về tiện ích đáng kinh ngạc của LLM này: với tư cách là một trợ lý có thể nhanh chóng kết hợp thông tin (đúng hoặc sai) với mức độ liên quan cực kỳ cao để một trí thông minh sáng suốt hơn (người dùng) làm việc cùng, ” ông đã viết.
Rid lập luận rằng trong khi những lo ngại về AI như một cơ chế đạo văn và gian lận trong giáo dục cần được giải quyết, thì cuộc trò chuyện quan trọng hơn liên quan đến cách các công cụ AI có thể cải thiện kết quả giáo dục. ®
- Phân phối nội dung và PR được hỗ trợ bởi SEO. Được khuếch đại ngay hôm nay.
- Platoblockchain. Web3 Metaverse Intelligence. Khuếch đại kiến thức. Truy cập Tại đây.
- nguồn: https://go.theregister.com/feed/www.theregister.com/2023/01/24/chatgpt_exam_study/
- 1
- 7
- 9
- a
- có khả năng
- Có khả năng
- Giới thiệu
- ở trên
- học tập
- chính xác
- đạt được
- ngang qua
- tiên tiến
- Quảng cáo
- tư vấn
- cố vấn
- Liên kết
- đảng phái
- Sau
- AI
- Tất cả
- Đã
- tuyệt vời
- đàn bà gan dạ
- trong số
- phân tích
- và
- Nặc Danh
- trả lời
- câu trả lời
- phương pháp tiếp cận
- tiếp cận
- Tranh luận
- xung quanh
- đến
- nhân tạo
- trí tuệ nhân tạo
- hỗ trợ
- Trợ lý
- liên kết
- tác giả
- Tự động
- Tự động hóa
- dựa
- cơ bản
- bởi vì
- trở nên
- trở thành
- trở thành
- được
- hưởng lợi
- Hơn
- giữa
- tỷ
- y sinh
- Một chút
- boston
- Đại học Brown
- kinh doanh
- Trường học kinh doanh
- gọi là
- có khả năng
- mà
- trường hợp
- Nghiên cứu điển hình
- ChatGPT
- gian lận
- trong sáng
- Lâm sàng
- bác sĩ lâm sàng
- chặt chẽ
- đám mây
- Đồng tác giả
- mã
- Đến
- hoàn thành
- Liên quan
- Mối quan tâm
- kết luận
- phần kết luận
- bảo thủ
- đóng góp
- Conversation
- khóa học mơ ước
- tạo ra
- tín dụng
- An ninh mạng
- tiền thưởng
- Dallas
- dữ liệu
- Ngày
- quyết định
- quyết định
- Ra quyết định
- chứng minh
- bộ
- Mặc dù
- ĐÃ LÀM
- trực tiếp
- Giám đốc
- Bệnh
- tài liệu hướng dẫn
- nghi ngờ
- E-Learning
- mỗi
- Sớm hơn
- Đào tạo
- Tư vấn Giáo dục
- giáo dục
- Kỹ Sư
- ước tính
- Ether (ETH)
- mọi người
- kỳ thi
- quá
- tuyệt vời
- mong đợi
- mong đợi
- chuyên gia
- Giải thích
- giải thích
- cực
- Rơi
- cuối cùng
- Tìm kiếm
- Công ty
- Tên
- định dạng
- tìm thấy
- người sáng lập
- Miễn phí
- từ
- chức năng
- tương lai
- Tổng Quát
- hào phóng
- được
- GitHub
- được
- cấp
- lớn hơn
- Nhóm
- Phát triển
- harvard
- có
- cho sức khoẻ
- chăm sóc sức khỏe
- đã giúp
- cao hơn
- Giáo dục đại học
- cao
- gợi ý
- Bệnh viện
- Độ đáng tin của
- Hướng dẫn
- Tuy nhiên
- HTTPS
- Nhân loại
- Hype
- quan trọng
- nâng cao
- cải thiện
- in
- Mặt khác
- bao gồm
- bao gồm
- Bao gồm
- lên
- thông tin
- đầu vào
- Viện
- trí tuệ
- Sự thông minh
- quan tâm
- đảo
- IT
- mặt hàng
- chính nó
- Việc làm
- kiến thức
- Ngôn ngữ
- lớn
- học tập
- Cấp phép
- Có khả năng
- hạn chế
- ít
- sống
- LLC
- còn
- máy
- học máy
- thực hiện
- duy trì
- LÀM CHO
- Làm
- phần mềm độc hại
- quản lý
- quản lý
- nhiều
- dấu
- Thánh Lễ
- massachusetts
- vật liệu
- toán học
- chất
- cơ chế
- y khoa
- nghiên cứu y học
- y học
- microsoft
- Might
- sai lầm
- kiểu mẫu
- mô hình
- tháng
- chi tiết
- Morgan
- Tự nhiên
- Thiên nhiên
- Cần
- cần thiết
- con số
- Office
- ONE
- đang diễn ra
- OpenAI
- Hoạt động
- Khăng khăng
- tổ chức
- Nền tảng khác
- tổng thể
- Giấy
- đặc biệt
- Đi qua
- bệnh nhân
- chăm sóc bệnh nhân
- bệnh nhân
- Họa tiết
- Pennsylvania
- người
- phần trăm
- hoàn hảo
- hiệu suất
- có lẽ
- riêng
- bác sĩ
- miếng
- Nơi
- plato
- Thông tin dữ liệu Plato
- PlatoDữ liệu
- Play
- bỏ phiếu
- tiềm năng
- quá trình
- Giáo sư
- sức mạnh
- công bố
- đặt
- Quý
- câu hỏi
- Câu hỏi
- Mau
- Tỷ lệ
- thực
- thế giới thực
- thời gian thực
- gần đây
- công nhận
- sự liên quan
- Báo cáo
- yêu cầu
- cần phải
- nghiên cứu
- nhóm nghiên cứu
- nhà nghiên cứu
- đáp ứng
- đảo ngược
- Thoát khỏi
- Vai trò
- Nói
- Trường học
- phần
- Ngành
- nhìn thấy
- thiết lập
- thiết lập
- một số
- tương tự
- Đơn giản
- So
- Phần mềm
- Chẳng bao lâu
- nguồn
- đặc biệt
- stanford
- Tiểu bang
- Các bước
- Chiến lược
- Sinh viên
- Sinh viên
- nghiên cứu
- trình
- thành công
- Thành công
- Gợi ý
- hệ thống
- hệ thống
- Các cuộc đàm phán
- nhiệm vụ
- ครูผู้สอน
- Giảng dạy
- Công nghệ
- thử nghiệm
- Kiểm tra
- texas
- Sản phẩm
- thế giới
- cung cấp their dịch
- điều
- điều
- ngưỡng
- Thông qua
- vải mõng
- thời gian
- đến
- công cụ
- công cụ
- đào tạo
- Hội thảo
- Chuyển đổi
- biến đổi
- phổ cập
- Bất ngờ
- trường đại học
- Đại học Pennsylvania
- us
- người sử dang
- tiện ích
- SỰ VI PHẠM
- chổ nuôi thỏ
- wharton
- Điều gì
- cái nào
- trong khi
- CHÚNG TÔI LÀ
- sẽ
- Công việc
- Luồng công việc
- thế giới
- sẽ
- viết
- Sai
- năm
- sản lượng
- zephyrnet