Ça va bien: AI toppresterar på gymnasieprov visar experiment

För bra för att vara sant.

Så kände lärarna när de rättade gymnasieprover som i hemlighet besvarats av AI.

Det var för att testa ChatGTPs gymnasiekunskaper i språk och matematik som finska public service-bolaget Yle lät Reaktor ta fram ett gymnasietest för generativ AI.

Vilket betyg skulle ChatGTP få i matematik, franska och finska? Det ville Yle ta reda på och tillsammans med design- och tech-företaget Reaktor gjorde de ett experiment där de lät AI skriva svaren på tre studentexamenprov i matematik, finska och franska. Reaktor stod för utvecklingen av den AI som användes för att besvara proven, sen bad Yle lärare att rätta dessa prov – utan att dessa fick veta att det var en AI som låg bakom svaren.

Både Reaktors AI-experter och lärarna blev förvånade över det goda resultatet – i  matematik och franska fick AI högsta betyg. Däremot blev resultatet för textförståelse i finska något sämre. Här visade AI på god förståelse för språklogik och ordförråd, men saknade istället mänsklighet och personlig ton i svaren.

– Vårt experiment syftade till att testa hur väl en maskin skulle klara en klassisk studentexamen. Vi kan konstatera att AI:n här lyckades konkurrera som att den var en människa, eftersom lärarna inte insåg att de rättade en AI:s svar, säger Marko Aalto ai-strateg på Reaktor.

En av lärarna som deltog i testet inom matematik tror nu att AI kommer att överträffa människor i matematikundervisning inom två år. Svenska Skolverket menar att potentialen för AI inom bedömning är stor, men att man behöver vara medveten  om riskerna. Exempelvis ställs frågan om hur väl vi lita på AI, vems bedömning som väger tyngst om om AI och lärare inte är överens eller hur relationen mellan lärare och elever påverkas om lärarna inte rättar proven själva. Två fördelar som Skolverket lyfter med att använda AI för att rätta prov är att det dels kan ge lärare större utrymme att fokusera på exempelvis planeringen av undervisningen, dels att det kan minska risken för mänskliga fördomar i provbedömningen och därmed göra rättningen mer rättvis.