A ChatGPT megküzdött a szingapúri 6. osztályos vizsgákkal - Sikerült?

Az OpenAI által kifejlesztett ChatGPT nemrég megbukott a szingapúri hatodik osztályos vizsgák kérdéseiben, amelyek minden 12 éves számára kötelezőek. A 2020-2022-es PSLE matematika, természettudomány és angol tesztek kérdéseit táplálták be a ChatGPT-be. A bot kudarcához az vezetett, hogy nem tudta megérteni az ábrákat és a grafikonokat. A ChatGPT az egyszerű szöveges kérdésekkel is küzdött, páldául több szám összeadásakor helytelen választ adott a megfelelő összeg helyett.

Napokkal később azonban ismét tesztelték a ChatGPT-t, és hasonló kérdésekre helyes választ adott. A tudományos cikkek átlagpontszáma 100-ból 21-re emelkedett, és a ChatGPT általános teljesítménye is javult. Az angol teszteken a ChatGPT a három vizsgán a 20-ból 11-es átlagpontszámmal ment át. A több jelentéssel bíró kifejezéseket használó kérdésekkel azonban még mindig küszködött. Példaként az "érték" kifejezést használták, és a ChatGPT pénzbeli értékként értelmezte, holott a kérdező erkölcsi meggyőződésére utalt.

Mivel aggódnak amiatt, hogy a botokat csalásra használják, az iskolák elkezdték felülvizsgálni a teszteket, ami több szóbeli vizsgát, csoportos projektet és kézzel írott munkát eredményezhet. Néhány iskola blokkolta a ChatGPT használatát, például New York, Los Angeles, Seattle és Fairfax megye állami iskolái. Az OpenAI vezérigazgatója, Sam Altman viszont amellett érvel, hogy az iskoláknak nem kell aggódniuk emiatt.