Doorgaan naar hoofdcontent

GLAT: The generative AI literacy assessment test


Generatieve AI stormt het hoger onderwijs binnen, maar zonder een heldere meetinstrument blijven zowel docenten als beleidsmakers in het duister tasten. Hoe weet je of studenten en docenten echt de vaardigheden beheersen om tools als ChatGPT, Gemini of Claude verantwoord en effectief in te zetten? Het antwoord ligt in een nieuw ontwikkeld instrument: de Generative AI Literacy Assessment Test (GLAT). Deze blogpost schetst waarom GLAT een game‑changer is en wat het betekent voor onderwijspraktijk en -beleid.

Eerst en vooral biedt GLAT een prestatie‑gebaseerde manier om generatieve AI‑geletterdheid te meten. In tegenstelling tot de gangbare zelf‑rapportage‑vragenlijsten, die vaak vertekend zijn doordat respondenten hun eigen vaardigheden overschatten, bestaat GLAT uit 20 multiple‑choice‑items die de daadwerkelijke kennis, toepassingsvaardigheden, kritische evaluatie en ethische overwegingen van generatieve AI testen. De test is grondig gevalideerd met meer dan 350 studenten uit het hoger onderwijs. Psychometrische analyses – zowel klassiek als item‑response‑theoretisch – bevestigen een solide tweeparameter‑logistisch model (Cronbach's alpha = 0.80, omega = 0.81) en een robuuste factorstructuur (RMSEA = 0.03, CFI = 0.97). Cruciaal is dat GLAT‑scores beter voorspellen hoe goed leerlingen presteren in AI‑ondersteunde taken dan zelfgerapporteerde 'ChatGPT‑competentie', waarmee de externe validiteit en praktische relevantie duidelijk worden aangetoond.

Wat betekent dit voor ons als beleidsadviseurs en onderwijsexperts? Ten eerste maakt GLAT het mogelijk om gericht diagnostisch inzicht te krijgen in welke studenten extra ondersteuning nodig hebben bij het omgaan met generatieve AI. Zo kunnen curricula en professionaliseringsprogramma's fijn afgestemd worden op concrete leemtes, van prompt‑formulering tot het herkennen van hallucinaties en bias. Ten tweede biedt de test een betrouwbaar instrument om de effectiviteit van beleidsinitiatieven en trainingsinterventies te evalueren – een data‑gedreven aanpak die verder gaat dan anecdote en intuïtie. Ten slotte onderstreept de nul‑waardering van zelf‑rapportage dat vertrouwen moet komen van daadwerkelijk bewezen competentie, niet van zelfperceptie.

Kortom, GLAT levert een meetlat die zowel academisch rigoureus als direct toepasbaar is. Door generatieve AI‑geletterdheid systematisch te beoordelen, kunnen we onderwijspraktijken future‑proof maken en beleid baseren op harde bewijzen. In een wereld waarin AI steeds meer de leeromgeving vormt, vraagt het succes van onze studenten niet alleen om toegang tot de tools – maar vooral om de vaardigheid om ze kritisch, ethisch en creatief te benutten. Het is tijd om de GLAT te omarmen, het gesprek rondom AI‑onderwijs te verankeren in validatie en om zo samen een AI‑versterkte toekomst te bouwen.

---------------------------------------------------
Generatieve AI Literacy Assessment Test (GLAT)

Waarom hebben we een meetinstrument nodig?  
Generatieve AI, zoals ChatGPT, Gemini en Claude, wordt steeds vaker gebruikt in het hoger onderwijs. Docenten en beleidsmakers weten echter vaak niet goed of studenten en docenten de vaardigheden echt beheersen. Zonder een goede test blijft het gissen.

Hoe werkt de GLAT?  
De GLAT meet de daadwerkelijke kennis en vaardigheden van studenten op het gebied van generatieve AI.  
* De test bestaat uit 20 meerkeuze‑vragen.  
* De vragen gaan over kennis, het toepassen van AI, kritisch denken en ethische overwegingen.  
* De test is getest bij meer dan 350 studenten en laat goede resultaten zien (Cronbach's alpha = 0,80, omega = 0,81).  
* De scores van de GLAT voorspellen beter hoe goed studenten AI‑ondersteunde taken uitvoeren dan zelfgerapporteerde "ChatGPT‑competentie".

Wat betekent dit voor beleid en onderwijs?  
1. **Gericht inzicht** – Met de GLAT zien we welke studenten extra hulp nodig hebben, bijvoorbeeld bij het formuleren van prompts of het herkennen van hallucinaties en bias.  
2. **Evaluatie van acties** – De test biedt een betrouwbare manier om de werking van beleidsmaatregelen en training te meten. Zo kunnen we beslissingen baseren op cijfers in plaats van gevoelens.  
3. **Echte competentie** – Zelfinschatting is vaak te hoog. De GLAT laat zien of iemand echt de vaardigheden heeft.

Conclusie  
De GLAT is een meetlat die zowel wetenschappelijk onderbouwd als praktisch bruikbaar is. Door generatieve AI‑geletterdheid systematisch te meten, kunnen we het onderwijs beter voorbereiden op de toekomst. Het gaat niet alleen om toegang tot AI‑tools, maar vooral om het kritisch, ethisch en creatief kunnen gebruiken ervan. Het is tijd om de GLAT te gebruiken, het gesprek over AI‑onderwijs op een stevige basis te leggen en samen een AI‑versterkte toekomst te bouwen.

Reacties

Populaire posts van deze blog

Verschil tussen blogs en messageboards In deze post bespreekt Lee Lefever de volgens hem kenmerkende verschillen tussen een weblog en een messageboard. Het bijbehorende plaatje maakt duidelijk dat volgens hem het belangrijkste verschil zit in de "controle" die het/een individu (weblog) dan wel de/een groep heeft over het proces en de inhoud. Zijn constatering over het verschil in 'locus of control' en het aanreiken van nieuwe onderwerpen lijkt er op te wijzen dat een weblog bij voorkeur geen communitytool is. Dat brengt me op het punt van gebruik van weblogs in onderwijs- dan wel leersituaties. Een aantal Nederlandse edubloggers (naast vele Angelsaksische en met name Amerikaanse edubloggers) heeft het met enige regelmaat over het gebruik van weblogs in een onderwijscontext. (Overigens niet te verwarren met het gebruik van diezelfde weblogs door onderwijsmensen/edubloggers die het dan vooral over het gebruik van weblogs in het onderwijs hebben maar vervolgens weini...

Developing and validating an artificial intelligence ethical awareness scale for secondary and university students: Cultivating ethical awareness through problem-solving with artificial intelligence tools

De kunstmatige‑intelligentie (AI) stroomt steeds sneller onze scholen binnen, maar met die technologische kansen komen ook belangrijke ethische dilemma's. Hoe zorgen we ervoor dat leerlingen niet alleen leren programmeren, maar ook leren nadenken over de impact van hun AI‑toepassingen op mens‑autonomie, welvaart en rechtvaardigheid? Een recent onderzoek uit Hong Kong biedt een praktisch handvat: een multidimensionale AI‑Ethical Awareness Scale (AIEAS) die ethisch bewustzijn meet én versterkt door probleem­oplossend leren met AI‑tools. Allereerst toont de studie dat een project‑gebaseerde leeromgeving (PBL) de brug slaat tussen theorie en praktijk. Studenten kregen de opdracht een real‑world probleem te definiëren, een AI‑model te trainen en vervolgens de ethische gevolgen te evalueren. Door reflectieve opdrachten en groepsdiscussies werden de drie kernprincipes – menselijke autonomie, weldoen (beneficence) en eerlijkheid – expliciet in de projectfase geïntegreerd. Het resultaa...