Key points are not available for this paper at this time.
إن الاستخدام الواسع لـ ChatGPT، وهو نموذج لغة ذكاء اصطناعي، لديه القدرة على إحداث تغييرات كبيرة في البحث، والتعليم، وتعلم اللغات الأجنبية. تهدف هذه الدراسة إلى الاستفادة من هذه التكنولوجيا لتنفيذ تقييمات المقالات الآلي (AES) وتقييم موثوقيتها ودقتها. بشكل محدد، استخدمنا نموذج GPT-3 text-davinci-003 لتقييم جميع المقالات البالغ عددها 12,100 الموجودة في مجموعة ETS للنصوص المكتوبة باللغة الإنجليزية من غير الناطقين بها (TOEFL11) وقارنّا هذه التقييمات بمستويات المعايير المرجعية. كما استكشفت الدراسة مدى تأثير الميزات اللغوية على AES باستخدام GPT. أظهرت النتائج أن AES باستخدام GPT لديه مستوى معين من الدقة والموثوقية ويمكن أن يوفر دعماً قيماً للتقييمات البشرية. علاوة على ذلك، كشف التحليل أن استخدام الميزات اللغوية يمكن أن يعزز دقة التقييم. تشير هذه النتائج إلى أن نماذج اللغة الذكية، مثل ChatGPT، يمكن استخدامها بشكل فعال كأدوات AES، مما قد يحدث ثورة في طرق تقييم الكتابة والتعليقات في كل من البحث والممارسة. تختتم الورقة بمناقشة الآثار العملية لاستخدام GPT في AES واستكشاف الاعتبارات المستقبلية المحتملة.
قام ميزوموتو وزملاؤه (الأربعاء) بدراسة هذا السؤال.