GPT-4o közel egy ponttal emeli a hallgatók jegyét a Bocconi üzleti feladatában
Több mint ezer friss egyetemi hallgató részt vett a kísérletben, amelyben a GPT-4o használata közel egy ponttal növelte az átlagos értékelést egy ötpontos skálán.
A 2025. novemberében zajló kísérlet a Bocconi University bevezető menedzsment kurzusának 13 szekcióját négy csoportba osztotta: kontroll, causal reasoning lecke, GPT-4o hozzáférés, illetve mindkettő kombinációja. A hallgatók egy 180 szavas marketingajánlást írtak az egyetemi ajándékbolt számára. — írja a The Decoder
GPT-4o hatása a pontszámokra
A GPT-4o-val dolgozó diákok átlagosan majdnem egy teljes ponttal értek el jobb eredményt az 1-5-ös skálán. Válaszaikban körülbelül két ötletet adtak meg többet, logikailag koherensebbek voltak, és jobban egyeztek a három szakértő ajánlásaival. A kutatók a jobb tartalomminőséget, nem pedig a tudásbővülést tartották a teljesítményjavulás fő okának.
Causal reasoning lecke hatása
A rövid causal reasoning órát kapó hallgatók átlagos pontszáma enyhén alacsonyabb volt, de gyakrabban magyarázták el, miért működhet egy javasolt intézkedés, és milyen feltételek mellett bukhat. Emellett ötletdiverzitásuk és a megoldások eredetisége jelentősen meghaladta a többi csoportot.
A két beavatkozás kombinációja nem hozott további pontszám-emelést, de a két megközelítés egymást kiegészítve javította a dolgozatok minőségét: a GPT-4o a tartalmi szintet emelte, a lecke pedig a gondolkodás mélységét.
A felhasznált értékelési rubrika a hagyományos, jól strukturált válaszokat jutalmazta, míg a részletes falszifikációs magyarázatok és a nagy eltérés a társaiktól alacsonyabb pontszámot eredményeztek. Ez azt jelzi, hogy a jelenlegi rendszerek könnyen kihasználhatók az AI által generált, de valójában nem tanulást tükröző munkák által.
A kutatók megjegyzik, hogy a tanulmány nem tartalmazott utólagos tesztet, amely a hallgatók tényleges tudását mérte volna AI nélkül, ezért a tanulási hatás továbbra is nyitott kérdés. Tomislav Bezmalinović és kollégái a november 2025-es kísérlet adatait a The Decoder közölték.