درجه بندی هوش مصنوعی به این معنی است که ارزیابی های دانشگاه از نظر تئوری هرگز توسط یک انسان قابل خواندن نیست
یک سناریوی روز رستاخیز وجود دارد که در آن دانشجویان دانشگاه کارهای تولید شده توسط هوش مصنوعی (AI) را تحویل میدهند که سپس توسط هوش مصنوعی درجهبندی میشود و ارزیابی دانشگاه دیگر اصلا شامل هیچ انسانی نمیشود.
ویرایش شده توسط Sadie Harley، بررسی توسط Andrew Zinin
این مقاله با توجه به روند و سیاستهای ویرایشی Science X بررسی شده است. ویراستاران ضمن اطمینان از اعتبار محتوا، ویژگی های زیر را برجسته کرده اند:
یک سناریوی روز رستاخیز وجود دارد که در آن دانشجویان دانشگاه کارهای تولید شده توسط هوش مصنوعی (AI) را تحویل میدهند که سپس توسط هوش مصنوعی درجهبندی میشود و ارزیابی دانشگاه دیگر اصلا شامل هیچ انسانی نمیشود.
همچنین یک مدینه فاضله جایگزین وجود دارد که در آن معلمان از هوش مصنوعی برای فرار از بار و فشار زمانی انبوه بی پایان درجه بندی استفاده می کنند. در این دنیای درخشان جدید "با هوش مصنوعی"، از تعصب در برابر تفاوت های دانش آموزان اجتناب می شود و کارکنان از وقت آزاد اضافی برای شرکت در آموزش و تحقیق با کیفیت بالا استفاده می کنند.
بنابراین با درجه بندی هوش مصنوعی در دانشگاه های استرالیا چه اتفاقی می افتد؟
اکثر مردم نمی دانند که درجه بندی هوش مصنوعی حداقل از سال 1998 به صورت تجاری توسعه یافته است. ناشر آموزشی پیرسون گزارش می دهد که سیستم های آموزش ویژه آن 39 میلیون پاسخ از جمله مقالات، پاسخ های کوتاه و معادلات را به دست آورده اند.
در دهههای گذشته، فناوری یک محصول تخصصی گرانقیمت بود که دسترسی به آن برای دانشگاهها آسان نبود. اما با در دسترس بودن هوش مصنوعی این موضوع تغییر کرده است.
مدلهای هوش مصنوعی، مانند ChatGPT، با مقایسه الگوهای متنی کار دانشآموز با سایر متون قدیمی، پیشبینی میکنند که چه نمرهای باید به آن تعلق گیرد. اگر هوش مصنوعی بر روی بسیاری از متون مشابه با کار ارزیابی آموزش دیده باشد، پیشبینیهای آن به احتمال زیاد به پاسخ انسان نزدیکتر است.
با یک هوش مصنوعی در دسترس، مانند ChatGPT یا Claude، یک معلم می تواند یک مقاله و یک عنوان را آپلود کند و از هوش مصنوعی بخواهد که مقاله را نمره دهد و بازخورد ارائه کند.
دانشگاه ها به طور کلی رویکردهای خود را برای درجه بندی هوش مصنوعی تبلیغ نمی کنند. اما خطمشیها توسط مقررات قوی حفظ حریم خصوصی هدایت میشوند. برخی از دانشگاه ها بیان می کنند که چگونه این با هوش مصنوعی تلاقی می کند.
به عنوان مثال، دانشگاه دیکین معلمان را از آپلود داده ها و اطلاعات دانشگاه در هوش مصنوعی های آزاد در دسترس منع می کند. این شامل تکالیف دانشآموزان نیز میشود، زیرا انجام این کار ممکن است دادههای خصوصی آنها را در معرض ذخیرهسازی دادههای فراساحلی قرار دهد، که فراتر از مقررات حفظ حریم خصوصی استرالیا است.
علاوه بر این، دانشگاهها معمولا تأکید میکنند که انسانها باید مسئولیت قضاوتهای خود را هنگام درجهبندی ارزیابیها با کمک هوش مصنوعی تأیید شده توسط دانشگاه بر عهده بگیرند. به عنوان مثال، دانشگاه ملبورن به معلمان اجازه می دهد از هوش مصنوعی تایید شده «برای حمایت از ارزیابی خود از کار دانش آموزان» استفاده کنند، اما آنها را از تکیه بر هوش مصنوعی برای تعیین نمرات یا نمرات منع می کند.
ارزیابی تقریبا همیشه شامل بازخورد متنی یا ویدیویی، در کنار نمره یا نمره است. به نظر میرسد که دانشگاهها معمولا استفاده از هوش مصنوعی را برای کمک به ارائه نظرات بازخورد به دانشجویان بیشتر میپذیرند، اگرچه نظارت انسانی مجددا مورد نیاز است.
تحقیقات نشان می دهد که پاسخ منفی است، حداقل در حال حاضر نه.
یک مطالعه دانشگاه ملبورن و دانشگاه کاردیف، که در ماه اوت منتشر شد، به بررسی این موضوع پرداخت که آیا نسخههای بعدی نرمافزار هوش مصنوعی ChatGPT میتوانند به طور موثری از نمرات دانشآموزان انسانی در هنگام درجهبندی 50 مقاله علوم زیستی در مقطع کارشناسی تقلید کنند.
محققان دریافتند که در نمرات کلی مقاله همسویی وجود دارد، اما به این نتیجه رسیدند که ChatGPT نمیتواند برای تخصیص و توضیح نمرات به آن اعتماد کرد. به ویژه با توجه به معیارهای درجه بندی فردی، مانند مناسب بودن محتوای مقاله و شواهد حمایتی کافی، ضعیف بود. محققان همچنین دریافتند که ChatGPT به طور متوسط تمایل داشت مقالات دانش آموزان را بالاتر از انسان ها نمره دهد. این نشان می دهد که هوش مصنوعی چگونه کار می کند - ارزیابی نمی کند. پیش بینی می کند.
خطر آشکار دیگر این است که درجه بندی هوش مصنوعی می تواند بر روابط دانش آموز و معلم تأثیر منفی بگذارد.
تحقیقات من، با بررسی دیدگاههای دانشآموزان و معلمان درباره بازخورد و هوش مصنوعی، نشان میدهد که هوش مصنوعی ممکن است بین دانشآموزان و معلمان فاصله ایجاد کند. به عنوان مثال، دانشآموزان اکنون میتوانند برای دریافت بازخورد ابتدا به هوش مصنوعی مراجعه کنند، در صورتی که ممکن است در غیر این صورت به یک معلم خصوصی مراجعه کنند.
تحقیقات دیگر توضیح می دهد که چگونه دانش آموزان از شناخت شخصی که با نظرات ارائه شده توسط یک معلم انسانی به دست می آید، سود می برند. بازخورد مسائل یادگیری خود را به دانش آموز نشان می دهد.
پیشفرض درجهبندی هوش مصنوعی همچنین میتواند به این معنا باشد که معلمان فرصتهای مهمی را برای بهبود کلاسهای خود از دست میدهند. به عنوان مثال، اگر 40 مقاله دانش آموز همگی سوءتفاهم یکسانی را از یک مفهوم نشان دهند، معلمی که تکالیف را به طور ایده آل نمره می دهد متوجه می شود که در نحوه تدریس آن موضوع مشکلی وجود دارد.
در پاسخ به هوش مصنوعی، اکنون تلاش زیادی برای اصلاح ارزیابی در دانشگاههای استرالیا انجام میشود. با این حال، تحقیقات نشان میدهد که بسیاری از دانشگاهها با توجه کمی به درجهبندی یا نمرات نهایی حاصل از این درجهبندی، ارزیابیهای خود را مجددا بررسی میکنند.
اما فرصتی برای بررسی سایر گزینه های درجه بندی در همان زمان وجود دارد. تحقیقات نقدهای طولانی مدتی را از درجه بندی عددی ارائه می کند که اکثر دانشگاه ها از آن استفاده می کنند. این نقدها نشان میدهد که چگونه نمرات عددی میتوانند تفکر مستقل را به دلیل تمرکز بر "توافق به علامت" تضعیف کنند. نمرات همچنین رقابت غیرضروری را در بین دانش آموزان تشویق می کند.
حذف نمرات و نمرات عددی می تواند یک راه رو به جلو باشد - اگرچه این همه پاسخ ها را ارائه نمی دهد.
دانشگاه نیو ساوت ولز به طور آزمایشی حذف نمرات عددی در برخی از موضوعات را اجرا کرده است. در عوض، معلمان دانشآموزان را در مورد اینکه آیا در برابر نتایج تعریفشده توانمند هستند یا خیر، ارزیابی میکنند. دانشگاه می گوید که این تمرکز به سمت یادگیری دانشجویان تغییر می کند.
در حالی که این تغییرات در پاسخ به هوش مصنوعی انجام نشده است، این رویکرد همچنان سرنخ هایی را در مورد چگونگی تغییر نمرات و نمرات در دنیای هوش مصنوعی ارائه می دهد. این نشان میدهد که آینده لزوما بحث فناوری در مقابل هیچ فناوری نیست.
در عوض، دانشگاه ها می توانند بر سیستم های ارزیابی تمرکز کنند که دانش آموزان و معلمان را به هم نزدیکتر می کند. دانش آموزان بازخورد معنی دار می خواهند، نه تمرین های فنی چک کردن جعبه. با نگرانی در مورد روشهایی که هوش مصنوعی میتواند رتبهبندی انسان را تکرار کند، ممکن است آنچه در ارزیابی اهمیت دارد را از دست بدهیم.
کارشناسی علوم زیستی و اکولوژی. پیشینه آزمایشگاه میکروبیولوژی با تجربه اخبار دارویی در صنایع نفت، گاز و تجدیدپذیر. نمایه کامل →
فوق لیسانس فیزیک با تجربه تحقیق. علاقه مندان به اخبار علمی طولانی مدت. نقش کلیدی در موفقیت سرمقاله Science X ایفا می کند. نمایه کامل →
این مقاله از The Conversation تحت مجوز Creative Commons بازنشر شده است. مقاله اصلی را بخوانید.
متن اصلی (انگلیسی)
AI grading means university assessments could theoretically never be read by a human
There's a doomsday scenario where university students hand in work generated by artificial intelligence (AI), which is then graded by AI and university assessment no longer involves any humans at all.