ChatGPT đã tham gia kỳ thi MBA. Đây là cách nó đã làm

Một giáo sư tại Wharton, Đại học Pennsylvania đã cho ChatGPT điểm B lý thuyết sau khi đánh dấu các câu trả lời mà nó tạo ra cho bài kiểm tra cuối kỳ trong một khóa học MBA điển hình.

Christian Terwiesch, giáo sư quản lý hoạt động tại Wharton, cho biết ChatGPT thực hiện "công việc tuyệt vời đối với các câu hỏi phân tích quy trình và quản lý hoạt động cơ bản."

"Không chỉ các câu trả lời đúng, mà cả những lời giải thích cũng rất xuất sắc," ông viết trong một tờ giấy trắng mới.

Ngoài ra: Cách bắt đầu sử dụng ChatGPT

Nhưng anh ấy nói thêm rằng chatbot mắc "những lỗi đáng ngạc nhiên trong các phép tính tương đối đơn giản ở cấp độ Toán lớp 6" và hiện tại nó không thể xử lý các câu hỏi phân tích quy trình nâng cao hơn. Mặt khác, phiên bản hiện tại của ChatGPT có thể sửa đổi câu trả lời của nó theo gợi ý của con người để đi đến giải pháp chính xác.

Terwiesch viết: "Xét về hiệu suất này, Chat GPT3 sẽ nhận được điểm từ B đến B trong bài kiểm tra".

Một số câu hỏi của Terwiesch nhằm mục đích kiểm tra xem ChatGPT có thể xác định nút cổ chai trong hoạt động xử lý với nhiều máy có công suất thông lượng khác nhau hay không.

Tuy nhiên, ChatGPT đã "mắc một sai lầm nghiêm trọng" khi tính toán với số học ở mức trung bình.

Thật thú vị, ChatGPT ban đầu đã trả lời sai một trong những câu hỏi của Terwiesch về phân tích hàng đợi. Anh ấy đã nhắc nó bằng một gợi ý để có câu trả lời hay hơn và ChatGPT đã cải thiện câu trả lời của nó. Ngày hôm sau, giáo sư đã hỏi nó cùng một câu hỏi xếp hàng ban đầu mà không có gợi ý -- và ChatGPT đã trả lời đúng trong lần thử đầu tiên.

"Nó có khả năng học hỏi từ những phản hồi trong quá khứ hoặc tôi chỉ gặp may," ông lưu ý, đồng thời cho biết thêm rằng dường như có một số sự ngẫu nhiên trong chất lượng câu trả lời của nó.

Terwiesch cũng nhận thấy ChatGPT có thể đặt ra những câu hỏi thông minh và hài hước mà anh ấy có thể sử dụng trong các kỳ thi sau này. Tuy nhiên, chatbot cũng đưa ra những sai sót nhỏ trong một số câu hỏi khiến họ không thể trả lời được.

Ngoài ra: ChatGPT 'thiếu chiều sâu và cái nhìn sâu sắc', các biên tập viên tạp chí khoa học uy tín cho biết

Terwiesch cảnh báo những người khác nên chú ý đến các khả năng và hạn chế của ChatGPT. Anh ấy nói rằng anh ấy "phải lòng" ChatGPT sau khi đọc câu trả lời cho câu hỏi đầu tiên của anh ấy, nhưng cảnh báo rằng nó "đã phạm sai lầm nghiêm trọng trong một số tình huống khá đơn giản."

"Chúng tôi vẫn còn cách xa điểm A+ đối với các vấn đề phức tạp và chúng tôi vẫn cần một con người trong vòng lặp," ông viết.

"Theo quan điểm của tôi về giáo dục, một học sinh tiểu học vẫn cần học rằng 7 x 7 = 49 và thủ đô của Pennsylvania là Harrisburg, mặc dù máy tính đã được sử dụng rộng rãi hơn 50 năm và học sinh có thể sử dụng Google Wikipedia để tìm câu trả lời đối với hầu hết các câu hỏi thực tế. Đó là bản chất của các kỹ năng cơ bản mà họ được yêu cầu để hiểu các chủ đề nâng cao hơn."

Terwiesch đồng ý rằng các nhà giáo dục nên lo ngại rằng học sinh K-12 có thể sử dụng ChatGPT để gian lận trong bài tập và bài kiểm tra. Ví dụ: Bộ Giáo dục Thành phố New York gần đây đã cấm chatbot vì các bài kiểm tra đáng tin cậy rất quan trọng trong việc giảng dạy, trong khi chứng chỉ kỹ năng không nên bị ảnh hưởng vì công nghệ mới. Ông lưu ý, một học sinh sử dụng ChatGPT giống như có thể gọi một người bạn có "học lực trung bình" để hoàn thành bài kiểm tra cho họ.

Nhưng anh ấy cũng lập luận rằng ChatGPT và các công nghệ tương tự có khả năng đóng vai trò của một "nhà tư vấn thông minh" -- một người đưa ra những câu trả lời hay nhưng đôi khi sai, mà anh ấy tin rằng đó là "nơi đào tạo hoàn hảo" để phát triển kỹ năng cho những sinh viên MBA cần để đánh giá nghiêm túc các phương án thay thế được đề xuất.