Didaktiska laboratoriet

 Hej! I Didaktiska laboratoriets miniserie "Five with Feke and Frayer", där jag använder Frayermodellen för att utforska diverse engelska ord och uppmuntrar andra till att göra detsamma.

Dagens ord är: affect

Se filmen här: https://youtu.be/RbV4n-eTWGI

Hur skulle er Frayermodell av ordet se ut? Dela gärna med er!

Hej och välkomna till Didaktiska laboratoriet som i detta inlägg redogör för ämnet rättssäkra bedömningar. I inlägget kan ni läsa om 1), vad är rättssäkra bedömningar?, 2) Varför är det viktigt att diskutera bedömningar? och 3) mitt tips om att jämföra frågan med med att ta körkort.

Nyckelord: bedömningar, rättssäkerhet, betyg

Vad är rättssäkra bedömningar?

Har du som jag tänkt på hur du ska utveckla din undervisning inför att chatbotar gör entré i skolans värld? Hur kan vi säkerställa att det är elevernas kunskaper vi faktiskt bedömer?

I Skolverkets Betyg och betygssättning från 2018 skriver de att “Betygssättningen ska vara rättssäker för eleverna samt vila på vetenskaplig grund och beprövad erfarenhet.” (6)

På min skola har vi ett övergripande verksamhetsmål med att jobba med rättssäkra bedömningar. Rättssäkra bedömningar syftar till att säkerställa att bedömningsprocessen och resultaten är valida, tillförlitliga och likvärdiga, inför, under och efter betygssättning.

Validitet innebär att prov faktiskt mäter det man vill mäta och vi kan uppnå transparens genom att tydligt kommunicera bedömningskriterierna och förväntningarna för eleverna i förväg. Vi kan närma oss likvärdighet när alla elever får samma förutsättningar för en rättssäker bedömning - tänk om jag skulle använda hemuppgifter som underlag för betygssättning medan en annan lärare inte gör det?

Det handlar om att garantera att eleverna bedöms på ett sätt som visar deras kunskaper och att det är elevens egna kunskaper och förmågor som ligger till underlag till betyget - inte en vän, släkting eller chatbot.

Varför är det viktigt att diskutera bedömningar?

I börja av varje läsår försöker jag att blicka bakåt - hur gick det? - och sedan framåt  - vad kan jag göra annorlunda i år utifrån dessa lärdomar? - för att utveckla min undervisning. 

Skolverket skriver att “Läraren behöver på ett systematiskt sätt följa upp hur ändamålsenliga olika bedömningssituationer har varit” och att “resultaten av analysen kan användas för att utveckla de egna formerna för bedömning och dokumentation” (Källa: https://www.skolverket.se/skolutveckling/leda-och-organisera-skolan/systematiskt kvalitetsarbete/uppfoljning-av-betyg-och-nationella-provbetyg)

I ett av mina ämneslag har vi detta läsår valt att ägna våra möten åt erfarenhetsutbyten rörande hur vi skapar förutsättningar för att främja rättvisande och likvärdiga betyg. Det finns flera anledningar, och jag tror många av oss kan känna igen oss i:

• Elever som visat anmärkningsvärda skillnader mellan prov, nationella provbetyg och kursbetyg
• Skillnader i språklig nivå mellan, eller inom, uppsatser
• Svårt för lärare att avgöra om elevernas arbete är original eller är gjorda av någon annan eller en chatbot

Jag har inspirerats av mina kollegor och har bestämt att göra en rad filmer på temat rättssäkra bedömningar. Men jag behöver även förklara för mina elever varför skolan har förändrats i och med tillgången till chatbotar.

Tidigare kunde lärare behöva använda Urkund för att se om elever plagierat men idag fångar inte sådana verktyg upp AI-skrivet material. Det är därför jag använder mig uteslutande av skriftliga och muntliga för bedömning.

Tips: jämförelse med att ta körkort

Många av mina elever vill använda hemuppgifter, inlämningar eller liknande som underlag för sina betyg, varpå de brukar tycka att jag inte är tillmötesgående när jag säger nej. Jag förklarar då mina elever att lärande, prov och betyg påminner mycket om att ta körkort.

Liknelse med att lära sig köra bil finner jag pedagogiskt briljant eftersom alla vet hur slutresultatet ser ut. Det är ett lysande exempel på ett lärandemål: du kör bil, följer (förhoppningsvis) teorin och trafikregler för att köra säkert och miljövänligt. Det är ett konkret exempel på en kombination av kunskaper och förmågor

Utöver målets pedagogiska kvaliteter hjälper körkortsutbildning oss med att skilja på övning och prov. Tänk hur man övningskör, kanske i samma område med sin handledare, för att öva upp förmågan att köra, känna igen skyltar eller backa runt hörn. Men sen kommer uppkörningen och man vet inte vart examinatorn ber oss att köra. Samma gäller vissa av de kunskaper och förmågor som jag undervisar i mina kurser där eleverna förväntas att kunna applicera kunskaperna i liknande, men nya, sammanhang

I mina ämnen, engelska och religionskunskap, får eleverna skriva prov, uppsatser, hålla tal, visa sina kunskaper om abrahamitiska religioner, analysera etiska problem, etcetera. Inför dessa tillfällen får de testa på liknande upplägg, till exempel övar eleverna på att skriva uppsatser i olika sammanhang och sedan får de visa vad de kan vid ett nytt prov, såsom nationella prov. Likt uppkörningen vet inte eleven vart sitt skrivande kommer att ta den, men att de ska kunna visa vad de själva kan. Syftet med undervisningen är att leda dem dit. Jämför vi då med körkortsutbildnignen med hemuppgifter märker vi att bedömningen inte blir rättssäker.

Föreställ dig att jag vill ta körkort och kommer med en film som visar hur jag sitter i bilen och kör. Examinatorn ska då ta den som ett underlag för bedömning, likt en elev som skriver uppsatser eller prov på egen hand eller utan lärares närvaro. Filmen kan egentligen innehålla någon annan som kör bilen men det är mitt ansikte som syns med hjälpa av smart redigering. Tankarna för mig direkt till en text som kan vara plagierad eller skriven av en chatbot.

Som bedömande lärare som även sätter betyg vill jag ha ett säkert kvitto på att det är elevens kunskaper och förmågor det är jag ser. Kopierat innehåll, lånade argument eller stavningshjälp reflekterar inte vad eleven egentligen kan. Jag rekommenderar att använda liknelsen med körkortet när du förklarar för dina elever varför du som lärare vill använda rättssäkra bedömningsaktiviteter så såsom slutna provplattformer

Ok, så hur gör vi då? Mina tips är:

• Bygg din undervisning för att stegvis nå lärandemålet. Jag använder alltid 12 lektioner i en modul där vi bygger kunskap genom läxförhör, prov för kunskaper och förmågor. Målet ska alltid vara i sikte.
• Öva, öva en gång till och öva ytterligare en gång på att testa kunskaper och förmågor i slutna provplattformar. Låt eleverna bli bekanta med verktyget.
• Vi lärare behöver anpassa oss efter hur tiderna förändras och prov i sig är inte farliga och mina erfarenheter är att elevernas osäkerhet eller olust kan bekämpas med tydlighet. Likt målet med att köra bil kan vi stötta eleverna med att visa vart de ska med hjälp av elevexempel.

Sammanfattningsvis:

• Jag kommer att göra filmer på temat rättssäkra bedömningar, med fokus på inför betygssättning, hur jag informerar om betyg och betygssättning och sedan följer upp dem.
• Som lärare ska jag på ett systematiskt sätt följa upp mina bedömningsaktiviteter och utveckla dessa. Ta tillfälle i akt att reflektera rörande hur du skaffar dig ett underlag rörande elevernas kunskaper på att säkert vis
• Jämför övning, prov och betyg med att ta körkortet, där eleverna uppmuntras till att öva och att det är vid din “uppkörning” som de själva visar vad de kan

Eder tillgivne, 

Feke

Källor:

Skolverket (2018). Betyg och betygsättning. https://www.skolverket.se/download/18.6bfaca41169863e6a65d5c2/1553968119879/pdf4000.pdf

Skolverket (2023). Uppföljning av betyg och nationella provbetyg. https://www.skolverket.se/skolutveckling/leda-och-organisera-skolan/systematiskt-kvalitetsarbete/uppfoljning-av-betyg-och-nationella-provbetyg

Hej och välkomna till Didaktiska laboratoriet. Det här är en film i en serie om hur jag som undervisande lärare kan använda ChatGPT i min undervisning. Den här filmen handlar om hur jag kan använda mig av AIn ChatGPT för att skapa prov och test.

I den här filmen kommer jag att beskriva:

- En kort forskningsöversikt rörande provens effekt på lärande

- Hur man kan använda ChatGPT för att skapa prov

- Mina erfarenheter

Kort forskningsöversikt rörande provens effekt på lärande

I artikeln What Does the Research Say About Testing? (2019) sammanfattar Carly Berwick fördelarna med att använda prov och tester, bland annat för att:

• Återkalla tidigare information, till exempel i början av lektioner.

• Repetera centrala begrepp, gärna tre gånger för ökad effekt

• Gör testen inom en vecka från när de lärde sig

• Låga insatser om man inte lyckas

• Möjligheten till att revidera och lära sig av sina svar

Hur kan man använda ChatGPT för att skapa prov?

Nedan följer min och ChatGPTs konversation om hur man kan använda AIn för provskapande.

Fekes fråga

Hej ChatGPT! Jag ska göra en Youtube-film om hur man som lärare kan använda sig av dig för att göra prov. Vad tycker du att jag ska prata om i den filmen?

ChatGPTs svar:

Hej där! Det låter som ett spännande ämne för din YouTube-film. När du diskuterar hur man som lärare kan använda mig för att skapa prov, kan du fokusera på följande punkter:

• Introduktion till AI i utbildning: Förklara vad artificiell intelligens (AI) är och hur det används inom utbildning. Diskutera fördelarna med att använda AI i provskapande processen.
• Automatiserad rättning: Berätta om möjligheten att använda mig för att automatisera rättningen av prov. Förklara att jag kan analysera och utvärdera elevernas svar baserat på förprogrammerade kriterier och ge snabba och objektiva resultat.
• Tidsbesparing: Diskutera hur användningen av mig kan spara lärarens tid och energi. Genom att överlåta rättningen till mig kan läraren fokusera på att ge återkoppling och planera framåt istället för att spendera timmar på att rätta prov.
• Skräddarsydda prov: Förklara hur du kan använda mig för att skapa skräddarsydda prov. Du kan nämna att jag kan generera frågor utifrån specifika ämnen, anpassa svårighetsgraden och skapa varierande prov för att passa olika nivåer och behov.
• Dataanalys: Diskutera fördelarna med att använda mig för att analysera resultat och data från prov. Genom att använda mig kan lärare identifiera mönster, svaga områden och individuella framsteg hos eleverna för att kunna anpassa undervisningen mer effektivt.
• Etiska överväganden: Ta upp frågor om etik och integritet kring användningen av AI i utbildning. Förklara att det är viktigt att använda teknologin på ett rättvist och ansvarsfullt sätt, och att lärare fortfarande spelar en central roll i att bedöma och stödja eleverna.
• Exempel och erfarenheter: Dela med dig av dina egna erfarenheter av att använda mig i provskapandet. Berätta om fördelarna du har sett och eventuella utmaningar som kan uppstå, samt ge exempel på positiva resultat du har uppnått.
• Slutligen kan du avsluta filmen genom att sammanfatta fördelarna med att använda mig som verktyg för provskapande och betona att jag kan vara ett värdefullt komplement till lärarens arbete för att skapa en mer effektiv och rättvis bedömning.

Fekes följdfråga:

Tack, vilka bra förslag! Vilka olika typer av prov kan du skapa?

ChatGPTs svar:

Som en AI-baserad assistent kan jag hjälpa till att skapa olika typer av prov. Här är några exempel på provtyper som du kan nämna i din YouTube-film:

• Multiple Choice (flervalsfrågor): Jag kan generera flervalsfrågor med flera alternativ och rätta svaren automatiskt. Detta sparar tid för läraren och ger snabba resultat.
• Fill in the Blanks (sätt in ord): Jag kan skapa prov där eleverna behöver fylla i saknade ord i en mening eller en text. Jag kan analysera svaren och bedöma om de är korrekta eller inte.
• True/False (sant/falskt): Jag kan generera påståenden där eleverna ska avgöra om de är sanna eller falska. Jag kan bedöma elevernas svar baserat på de korrekta svaren.
• Short Answer (korta svar): Jag kan skapa prov där eleverna behöver ge korta svar på specifika frågor. Jag kan utvärdera svaren baserat på nyckelord eller specifika kriterier.
• Essay (uppsats): Även om bedömning av uppsatser är mer komplext, kan jag hjälpa till med att generera ämnesförslag och bedöma strukturen och grammatiken i elevernas svar. Bedömningen av innehållet och den kreativa aspekten av uppsatsen ligger dock vanligtvis utanför min förmåga.
• Numerical/Equation-based (numeriska/equation-baserade frågor): Om provet innehåller matte- eller fysikrelaterade frågor kan jag hjälpa till att generera numeriska eller ekvationsbaserade frågor och bedöma elevernas svar.

Dessa är några exempel på provtyper jag kan hjälpa till att skapa och bedöma. Du kan anpassa listan utifrån dina specifika behov och ämnesområden som du vill fokusera på i din YouTube-film.

Fekes följdfråga:

Hej igen! Tidigare skrev du så här:

Som en AI-baserad assistent kan jag hjälpa till att skapa olika typer av prov. Här är några exempel på provtyper som du kan nämna i din YouTube-film:

• Multiple Choice (flervalsfrågor): Jag kan generera flervalsfrågor med flera alternativ och rätta svaren automatiskt. Detta sparar tid för läraren och ger snabba resultat.
• Fill in the Blanks (sätt in ord): Jag kan skapa prov där eleverna behöver fylla i saknade ord i en mening eller en text. Jag kan analysera svaren och bedöma om de är korrekta eller inte.
• True/False (sant/falskt): Jag kan generera påståenden där eleverna ska avgöra om de är sanna eller falska. Jag kan bedöma elevernas svar baserat på de korrekta svaren.
• Short Answer (korta svar): Jag kan skapa prov där eleverna behöver ge korta svar på specifika frågor. Jag kan utvärdera svaren baserat på nyckelord eller specifika kriterier.
• Essay (uppsats): Även om bedömning av uppsatser är mer komplext, kan jag hjälpa till med att generera ämnesförslag och bedöma strukturen och grammatiken i elevernas svar. Bedömningen av innehållet och den kreativa aspekten av uppsatsen ligger dock vanligtvis utanför min förmåga.
• Numerical/Equation-based (numeriska/equation-baserade frågor): Om provet innehåller matte- eller fysikrelaterade frågor kan jag hjälpa till att generera numeriska eller ekvationsbaserade frågor och bedöma elevernas svar.

Kan du skapa ett exempelprov som innehåller tre flervalsfrågor, tre sätta in ord-frågor och tre sant/falskt-frågor. 

ChatGPTs svar:

Absolut! Här är ett exempel på ett prov som innehåller tre flervalsfrågor, tre "sätt in ord"-frågor och tre sant/falskt-frågor:

**Prov: Matematik**

1. Flervalsfrågor:

   a. Vad är resultatet av 5 + 7?

      1. 10

      2. 12

      3. 14

      4. 16

   b. Vad är roten ur 64?

      1. 4

      2. 6

      3. 8

      4. 10

   c. Vad är 3/4 som decimaltal?

      1. 0,25

      2. 0,5

      3. 0,75

      4. 1

2. "Sätt in ord"-frågor:

   a. Den __________ triangeln har tre lika långa sidor.

   b. En rektangel har fyra __________.

   c. En cirkel har ingen __________.

3. Sant/falskt-frågor:

   a. En kvadrat har fyra räta vinklar. (Sant/Falskt)

   b. 12 är ett udda tal. (Sant/Falskt)

   c. Pi är ett irrationellt tal. (Sant/Falskt)

Notera att det här bara är ett exempelprov och svaren inte finns angivna. Du kan ange svaren baserat på de rätta alternativen eller svaren som du anser vara korrekta för varje fråga.

Detta är bara en liten del av de provtyper som jag kan hjälpa till med att skapa. Du kan anpassa provet ytterligare genom att lägga till fler frågor eller använda andra provtyper som jag nämnde tidigare.

Mina erfarenheter

Mina erfarenheter av att använda ChatGPT är mycket goda och har gjort det i flera olika provformer. Det viktiga är att alltid läsa igenom de svar du får, anpassa dem efter det eleverna lärt sig och försöka justera formuleringar så att det blir helt rätt. Samma gäller när eleverna har genomfört proven och du kan behöva se om eleverna gett andra svar än de som AIn gett som rätta svar. Ett mänskligt öga behövs alltid för att försegla de sista stegen i processen!

Tack för att ni visade intresse i denna fråga. Hör gärna av er med frågor och funderingar - jag ser alltid fram emot att få prata med mina läsare och tittare.

Eder tillgivne, 

Feke

Källor:

https://www.edutopia.org/article/what-does-research-say-about-testing/

Länk till mina frågor och ChatGPTs svar: https://docs.google.com/document/d/1Ot6eO51tSw7N0VTn-tPhH1D5g29SooJQ1r4JtOzVhw0/edit?usp=sharing

https://chat.openai.com/

Hej och välkomna till Didaktiska laboratoriet som i detta inlägg pratar om AI i skolan. Den här bloggen är för oss som är intresserade av skolfrågor och pedagogisk forskning, där jag delar med mig av mina erfarenheter av dessa från min egen yrkesvardag som lärare och kvalitetssamordnare.

I den här filmen kommer vi att prata om:

• AI - vad är ChatGPT?
• Vad finns för forskning om AI i skolan?
• Mina reflektioner - vilka användningsområden och farhågor ser jag?

Vad är en AI och ChatGPT? Så här säger AIn själv när jag frågade den: "ChatGPT är en stor språkmodell som tränats av OpenAI, baserad på GPT-3.5-arkitekturen. Den är utformad för att förstå och generera mänskligt språk på ett sätt som liknar hur människor tänker och kommunicerar."

Tack för att ni tog del av innehållet! Vad önskar ni att veta mer om rörande AI i skolan? Jag anpassar gärna mina filmer efter era önskemål. Tveka inte att höra av er - jag är alltid intresserad av att höra vad ni tycker.


Eder tillgivne,

Feke

Bakgrunden till intervjuserien

Förankring i forskning

En uppmaning till er att ställa frågor

Mina utvecklingsområden vårterminen 2023