Week 7, ‘Heb lef, vernieuw je onderwijs’ riep ik eerder al. Eigenlijk zou dat gevolgd moeten worden door ‘en blijf je onderwijs verbeteren’. Stilstaan is achteruitgaan. De vraag is: hoe helpt Canvas ons hierbij?
Analytics geven inzicht
Als ik de cursusstatistieken bekijk, zie ik dat studenten met name de dag voor het responsiecollege in Canvas actief zijn. Het aantal pageviews laat week op week daar een piek zien. De individuele formatieve toetsen worden door circa 70% van de studenten op tijd gemaakt. De bespreking van die formatieve toetsen in het kader van de groepsopdracht wordt daarentegen door nog geen 50% van de studenten ingeleverd. Het team based learning komt daardoor helaas onvoldoende uit de verf. Als verbeterpunt voor volgend jaar heb ik daarom genoteerd om aan de groepsopdrachten ook twee face-to-face summatieve toetsen toe te voegen om zo het team-based learning te stimuleren. Voor de online voorbereiding (het flipped classroom deel) houd ik dan mijn formatieve toetsen zoals ik die nu ook heb. Hiermee denk ik weer een mooie kwaliteitsimpuls te kunnen geven aan het onderwijs.
Hoe goed is de vraag?
Ook de inhoud van de toetsen is onderwerp voor verbetering. Canvas biedt via de toetsstatistieken de mogelijkheid om ook die (automatisch) te beoordelen. Zo kan ik naar de RIT-waarde kijken (die in Canvas onder ‘discriminatie index’ genoemd staat) die iets zegt over hoe goed de vraag is (meer info: http://onlineexamineren.nl/rit-waarde-op-de-rit/). Zo krijg ik dus ook weer voldoende suggesties voor die gewenste kwaliteitsimpuls.
Waarde statistics
Al die statistische gegevens zijn prachtig, maar de valkuil is dat we er teveel waarde aan toekennen. Zo zijn de gegevens over hoe lang iemand actief was troebel te noemen (je kan immers ook inloggen en weglopen) en hoe betrouwbaar is het aantal (tijdige) submissies als mensen in groepsverband (wat je wilt aanmoedigen) met de formatieve toetsen bezig zijn? Bovendien heb ik een relatief kleine groep studenten, dus wat zeggen mijn resultaten? Hoewel wellicht niet alles even ‘significant’ is geeft het mij wel degelijk een indicatie. Net als bij onderwijsverbeteringen geldt hierbij: het is een richting, geen punt.
Onderwijsoverdenkingen 