أخذ ChatGPT امتحان ماجستير في إدارة الأعمال. إليك كيف حدث ذلك

منح أستاذ في وارتون ، جامعة بنسلفانيا ، تمريرة نظرية من الدرجة B إلى ChatGPT بعد وضع علامة على الإجابات التي يولدها لامتحان نهائي في دورة نموذجية لماجستير إدارة الأعمال.

قال كريستيان تيرويش ، أستاذ إدارة العمليات في وارتن ، إن ChatGPT تقوم "بعمل رائع في إدارة العمليات الأساسية وأسئلة تحليل العمليات."

وكتب في ورقة بيضاء جديدة: "ليست الإجابات صحيحة فحسب ، بل إن التفسيرات ممتازة".

أيضًا: كيف تبدأ في استخدام ChatGPT

لكنه أضاف أن روبوت الدردشة يرتكب "أخطاء مفاجئة في العمليات الحسابية البسيطة نسبيًا على مستوى رياضيات الصف السادس" ، وأنه لا يمكنه حاليًا التعامل مع المزيد من أسئلة تحليل العمليات المتقدمة. من ناحية أخرى ، يمكن للإصدار الحالي من ChatGPT تعديل إجاباته استجابة لتلميحات بشرية للوصول إلى الحل الصحيح.

كتب Terwiesch: "بالنظر إلى هذا الأداء ، فإن Chat GPT3 كانت ستحصل على درجة B إلى B- في الامتحان".

تهدف العديد من أسئلة Terwiesch إلى اختبار ما إذا كان ChatGPT يمكنه تحديد عنق الزجاجة في عملية المعالجة باستخدام أجهزة متعددة ذات قدرات إنتاجية مختلفة.

ومع ذلك ، فإن ChatGPT "ارتكب خطأً فادحًا على نطاق واسع" عند حسابه بمستوى حسابي متوسط.

ومن المثير للاهتمام ، أن ChatGPT أجاب في البداية بشكل غير صحيح على أحد أسئلة Terwiesch بخصوص تحليل قائمة الانتظار. لقد دفع بها مع تلميح للحصول على إجابة أفضل وقام ChatGPT بتحسين إجابته. في اليوم التالي ، سأله الأستاذ نفس السؤال الأولي في قائمة الانتظار بدون تلميح - وأجاب ChatGPT بشكل صحيح في محاولته الأولى.

"إما أنها قادرة على التعلم من ردود الفعل السابقة أو أنني كنت محظوظًا للتو" ، كما يلاحظ ، مضيفًا أنه يبدو أن هناك بعض العشوائية في جودة إجاباتها.

وجد Terwiesch أيضًا أن ChatGPT كان قادرًا على صياغة أسئلة ذكية وروح الدعابة يمكنه استخدامها في الاختبارات المستقبلية. ومع ذلك ، فإن الشات بوت قد أدخل أيضًا عيوبًا طفيفة في بعض الأسئلة التي جعلت الإجابة عليها مستحيلة.

أيضًا: قال محررو المجلات العلمية المرموقون إن ChatGPT "يفتقر إلى العمق والبصيرة"

يحذر Terwiesch الآخرين من الانتباه لقدرات وقيود ChatGPT. يقول إنه "وقع في حب" ChatGPT بعد قراءة إجابته على سؤاله الأول ، لكنه يحذر من أنها "ارتكبت أخطاء كبيرة في بعض المواقف البسيطة إلى حد ما".

يكتب: "ما زلنا بعيدين عن المستوى A + للمشكلات المعقدة وما زلنا بحاجة إلى إنسان في الحلقة".

"من وجهة نظري في التعليم ، لا يزال طالب المدرسة الابتدائية بحاجة إلى معرفة أن 7 × 7 = 49 وأن عاصمة ولاية بنسلفانيا هي هاريسبرج ، على الرغم من استخدام الآلات الحاسبة على نطاق واسع لأكثر من 50 عامًا ويمكن للطلاب استخدام Google Wikipedia للعثور على إجابات بالنسبة لمعظم الأسئلة الواقعية. إن طبيعة المهارات الأساسية هي المطلوبة لفهم موضوعات أكثر تقدمًا. "

يوافق Terwiesch على أن المعلمين يجب أن يشعروا بالقلق من أن طلاب K-12 قد يستخدمون ChatGPT للغش في الواجبات والامتحانات. على سبيل المثال ، حظرت إدارة التعليم بمدينة نيويورك مؤخرًا برنامج الدردشة الآلي لأن الاختبارات الموثوقة مهمة في التدريس ، بينما لا ينبغي المساس بشهادة المهارات بسبب التكنولوجيا الجديدة. ويشير إلى أن الطالب الذي يستخدم ChatGPT يشبه القدرة على الاتصال بصديق لديه "كفاءة أكاديمية متوسطة" لإكمال الاختبار بالنسبة له.

لكنه يجادل أيضًا بأن ChatGPT والتقنيات المماثلة لديها القدرة على لعب دور "المستشار الذكي" - الشخص الذي ينتج إجابات أنيقة ولكن غالبًا ما تكون خاطئة ، والذي يعتقد أنه "أرضية تدريب مثالية" لتطوير المهارات بين طلاب ماجستير إدارة الأعمال الذين يحتاجون لتقييم البدائل المقترحة بشكل نقدي.