Generativ AI och undervisning – råd för lärare

Är det möjligt att på ett tillförlitligt sätt upptäcka AI-skrivet arbete?

Det finns inga verktyg tillgängliga på marknaden som tillförlitligt kan upptäcka AI-skrivna texter (Webb, 2023; Weber-Wulff et al, 2023). Det finns indikationer på att sådana verktyg tenderar att felaktigt flagga studenter som skriver på ett andra språk som fuskare (Liang et al, 2023). Om studenters arbeten lämnas in till AI-tjänster (som KI saknar avtal med) för att kontrollera fusk överlåts studenternas arbete till en tredje part som sedan kan godtyckligt kan använda materialet. Som det ser ut nu använder KI Ouriginal (Urkund) och iThenticate för att upptäcka eventuella plagiat. Dessa erbjuder inte AI-detektion. 

Det bör också noteras att generativa AI-tjänster inte är konstruerade för att svara på frågor som "Har du skrivit den här texten?".

Hur kan jag anpassa min bedömningspraktik?

Eftersom det för närvarande inte finns någon teknik för att på ett tillförlitligt sätt upptäcka AI-genererat arbete, och då studenter kommer att behöva använda AI in sina framtida yrken, rekommenderar vi att studenterna stöttas i användningen av AI i sina studier när det bedöms som lämpligt eller användbart, samt i att utveckla sin AI-kompetens som helhet.

I skriftliga bedömningar använder vi ofta SOLO-taxonomin (Biggs, 2011). I vissa kurser måste vi se till att studenterna kan grunderna innan de börjar på nästa nivå - deklarativ kunskap.  Ett förslag kan vara att be studenterna att inte använda externa resurser (böcker och AI) under bedömningen. Däremot för att nå de "relationella" och "utvidgade abstrakta" nivåerna kan någon form av AI vara användbart för att hjälpa studenterna att först organisera sin deklarativa kunskap och därefter försöka göra den mer funktionell. Eftersom giltigheten i den information som AI producerar inte alltid är korrekt behöver studenter kunna analysera och bedöma resultaten, och uppmanas att använda AI med försiktighet.

Syftet med bedömningen

Du kan använda diagrammet (nedan) som hjälp för att besluta om hur du ska formge bedömningar. Om syftet är att bedöma grundläggande begrepp som studenter bör komma ihåg och förstå är det mest tillförlitligt att genomföra bedömningen i en examinationssal utan tillgång till internet. Alternativt behöver vi anpassa och förändra hur bedömningen genomförs så att denna kan fungera i en situation där generativ AI annars skulle kunna påverka utfallet.

Man kan till exempel ställa andra smartare frågor än vi gjort tidigare och frågor som kräver kännedom om något specifikt sammanhang. En annan möjlighet är att ändra eller komplettera en skriftlig tentamen till att omfatta muntlig examination. En nackdel är att muntliga examinationer kan bidra till ökad arbetsbörda, samt påverka tillförlitligheten i en examination.

Fundera över syftet med bedömningen. Vilken kunskap är det du vill ha belägg för? Reflektera över den nuvarande utformningen av bedömningen och om användningen av AI skulle snedvrida resultaten. Om du upplever att examinationen behöver göras om, tänk på lärandemålen (vad du behöver evidens för) och fundera på alternativa sätt att få syn på studentens lärande. För uppsatser och kortsvarsfrågor i hemtentor kan du överväga att lägga till transparent användning av AI som en del av den bedömda uppgiften. 

Hur påverkar generativ AI studenters lärande?

Hur generativ AI påverkar studenternas lärande när de skriver beror helt på hur studenterna använder AI-verktyg. 

Om studenterna använder AI-verktyg för att skapa långa stycken eller till och med hela texter utan ytterligare reflektion kommer det sannolikt påverka lärandet negativt. AI-resultat ofta innehåller felaktigheter eller är kraftigt partiska (Ho, 2023), och inte ens om AI-resultatet är korrekt skulle kopiering och inklistring vara ett effektivt sätt att lära sig något.

Å andra sidan, om studenterna använder AI-verktyg till exempel som hjälp med idéer eller som ett bollplank för att putsa på sina argument, samtidigt som de noggrant överväger varje föreslagen förändring innan de genomför eller förkastar den. I detta fall kan de lära sig lika mycket som de gjorde när de skrev på mer traditionella sätt – om inte mer.

Dessutom, om studenterna använder AI-verktyg på ett klokt sätt, kan bedömningen potentiellt bli mer rättvis. Att använda AI-verktyg för att göra grundläggande aspekter i skrivandet mer effektiva kan vara fördelaktigt för studenter som skriver på andra språk än sitt modersmål (Nordling, 2023). Enkla uppgifter som stavning och basala grammatiska fel kan enkelt åtgärdas med hjälp av AI-verktyg (Huang & Tan, 2023) – även om studenterna naturligtvis fortfarande måste kontrollera eventuella AI-förslag. Detta skulle också kunna frigöra tid för att lägga på mer avancerade aspekter av skrivandet, till exempel analys. Det är ett exempel hur stöd av AI kan skapa möjligheter studenter att använda sin tid mer effektivt.

Att använda AI-verktyg kan också hjälpa studenterna att hantera skrivkramp (Nordling, 2023). En student som stressar över att inte kunna börja skriva kan be ett AI-verktyg att ta fram några ord om ämnet, och på så sätt slippa börja skriva på en tom sida.

För att studenterna ska kunna använda AI-verktyg på ett bra sätt måste de veta vad bra skrivande är. Studenterna behöver vara medvetna om flera aspekter av skrivandet, till exempel hur en akademisk text ska struktureras, vad det innebär att anpassa sin text till en avsedd publik, hur man använder ämnesspecifik terminologi och att ordförrådet alltid är kontextuellt; att ordens betydelse kan förändras beroende på sammanhanget.

För att säkerställa att studenterna använder AI-verktyg på ett klokt sätt – som utvecklar kritiska färdigheter och som främjar lärande – måste vi hjälpa studenterna att göra bra val (van Dis et al, 2023). Vi behöver nyansera diskussionen om AI-verktyg och undvika kategoriska påståenden som "det är förbjudet att använda AI-verktyg". Istället kan vi ge tydliga exempel på möjliga och acceptabla sätt att använda AI, och potentiellt olämpliga sätt. Vi behöver också vara tydliga med om, och på vilka sätt, studenter får använda AI-verktyg i examinationer.

Dessutom behöver vi sträva efter öppen kommunikation om AI, så att studenterna känner sig bekväma med att ställa frågor och ha en dialog med sina lärare. Om budskapet är att all användning av AI är förbjuden och att all användning per automatik är lika med fusk förlorar du möjligheten att bli inbjuden till diskussioner med studenterna, och du kommer inte att kunna påverka dina studenters användning av AI.

En del av att främja kloka sätt för studenter att använda AI-verktyg är att lära dem att vara så transparenta i sin användning av generativa AI-verktyg.  Det gör att du kommer kunna se hur studenterna använde AI-verktyg i varje text, och du kommer att kunna bedöma det aktuella arbetet på ett rättvist sätt. Du kan naturligtvis fortfarande berätta för studenten att hen inte har uppfyllt kurskriterierna och därför behöver göra om examinationen. Dessutom kommer du att få chansen att ha ännu en diskussion om effektiv AI-användning.