zondag 3 april 2011

Statistiek een hot item?

Nu de statistiek van QMP steeds meer gebruikt wordt op Prinsentuin, komen er weer andere ideeën naar boven over hoe een vraag opgebouwd moet zijn. Om een inzichtelijke statistisch rapport te hebben, moeten er een aantal kenmerken in de uitkomsten zitten. Dat betekent toch weer een flinke pak werk, want tienduizenden vragen zouden hierop gescreend moeten worden en bovendien moeten er dan goede afspraken over komen.

Neem bijvoorbeeld een meerkeuzevraag. In het rapport is altijd wel te vinden hoeveel deelnemers het juiste antwoord gekozen hebben, maar niet altijd is het zichtbaar welk fout antwoord ze hebben genomen. Dat kan eenvoudig aangepast worden.
Als je kijkt naar een meervoudig antwoordvraag dan zijn er nog een hele partij "oude versies" uit een grijs verleden in omloop. Deze hebben een enorme partij uitkomsten en dat maakt de statistiek niet bruikbaar. Deze vragen zouden voorzien moeten worden van uitkomsten die overzichtelijk zijn.
Ook de naamgeving van de uitkomsten zou nog eens goed bekeken moeten worden, zodat deze eenduidig zijn.

De afgelopen jaren zijn we vooral bezig geweest met kwantiteit van het aantal vragen en de kwaliteit van de vraagstelling. Nu is het tijd om er verder in te duiken. Want nu komt de sterke kant van QMP om de hoek kijken. Dat we daar zeker gebruik van moeten maken is zonder meer duidelijk. Uitgebreide statistieken van een schoolexamen waren enkele jaren geleden ondenkbaar (als je met papierenversies werkt). Gezien de onstwikkelingen met digitale examens, schoolexamens en verantwoording naar directie, inspectie, enzovoort kunnen we er gewoon niet omheen.

Statistiek een hot item? Wat mij betreft wel!

dinsdag 29 maart 2011

Corrigeren van vragen

Na de analyses van de schoolexamens krijg ik meestal een hele wensenlijst met "aanpassingen" van mijn collega's. Een paar geleden pasten we deze dan met een paar collega's toe. Helaas hebben veranderingen binnen ons team er toe geleid dat het sinds enige tijd erop neer komt dat ik het moet doen. Helaas een onhoudbare zaak.
Maar gelukkig, veranderingen kunnen ook weer voor een frisse wind zorgen. Dus sinds kort zijn er weer een aantal collega's "in opleiding" om mij werk uit handen te kunnen gaan nemen.
Vandaag was het zover dat een collega economie-vragen m.b.v. de software aan ging passen. Het ging al snel heel goed! Heerlijk is dat ... en ook voor mijn collega. Want een item dat verbeterd wordt, is meteen weer in orde voor de volgende afname. Niet alleen voor de Prinsentuin, maar voor alle AOC's in Nederland. Het is goed om samen aan de toetsenbank te werken, daar heeft iedereen profijt van.

maandag 21 maart 2011

Vergadering expertiseteam

Vandaag was het weer zover: het expertiseteam kwam bij elkaar om te overleggen. Het kan er heet aan toen gaan tijdens de bijeenkomsten, want onze inzichten kunnen nog weleens van elkaar verschillen. Maar vandaag, met de lente in ons hoofd, ging het allemaal goed.
Een belangrijk onderwerp wat we besproken hebben is de feedback op de items die in de vragenbank staan. Als er iets aan een item mankeert, dan krijgt iemand van ons een mailtje en die gaat vervolgens z.s.m. aan de slag. Maar wat echt mooi zou zijn is een tool waarin dit aangemeld en geregistreerd kan worden. En nog mooier zou het zijn als we deze tool ook zouden kunnen gebruiken voor feedback uit het veld.
Gelukkig hebben we Alex! Vandaag hebben we een proefversie gezien. Ik hoop dat met een paar weken het helemaal goed draait en dat het in Toetsplaza geïntegreerd kan worden. Want ... de database wordt steeds sterker en beter en daarbij is beoordeling en commentaar uit het veld hard nodig!

zondag 20 maart 2011

Analyse van de schoolonderzoeken

Meer genieten van het lekkere weer en het buitenleven?
Stap over op digitaal toetsen, meld je bij Toetsplaza!
Op mijn school zijn de schoolexamens weer afgerond en dus ook de digitale schoolexamens.Omdat de kwaliteit van onze schoolexamens moeten verbeteren, hebben we de opdracht gekregen om statistiek op de resultaten los te laten. Mijn collega's die de schoolexamens schriftelijk hebben afgenomen zien ze zich voor een enorme bult werk geplaatst en zijn niet echt in juigstemming. Mijn collega's die de schoolexamens digitaal met QMP hebben afgenomen, hebben een Question Statistics Report van mij gekregen. Nadat ze het in de vakgroep besproken hebben, hebben ze het schoolexamen voor volgend jaar alvast verbeterd.
Enkele conclusies waren:
  • foutjes in de vraag: spelling of telling
  • vraag behoort niet goed bij de lesstof en moet dus verplaatst worden naar een ander schoolexamen
  • lesstof is niet goed genoeg behandeld: moet volgend jaar meer aandacht aan besteed worden
  • leerlingen zijn in dit onderdeel niet goed onderlegd: er moet extra training voor ontwikkeld worden
Al met al een mooi en vooral ook nuttig resultaat! De rapporten en de conclusies hebben we opgeslagen voor het volgende inspectierapport. Wat betreft de docenten die digitaal getoetst hebben: laat ze maar komen!

dinsdag 15 maart 2011

Eindtoetsen WPS digitaal afgenomen.

Het was vandaag weer druk op de PC-pleinen. De leerlingen van Prinsentuin VMBO-Breda hebben de eindtoetsen van de praktijkvakken (WPS) digitaal gemaakt. Een aantal jaren geleden hebben de praktijkdocenten van Prinsentuin heel veel proefwerkvragen ingevoerd in de QMP. Dit jaar hebben zij m.b.v. deze materialen nieuwe eindtoetsen samengesteld. De eindtoetsen worden dit jaar gedifferentieerd naar leerweg. Naast het eigen materiaal is voor deze toetsen geput uit de enorme hoeveelheid materiaal die door Toetsplaza in QMP is gezet.