Stap 2 - Inzichten in de vragen

In de vorige stap heb je geleerd hoe je de overzichtspagina van de inzichten van je digitale toets in kunt zien. In deze stap leer je hoe je de inzichten van de vragen kunt bekijken.

Om inzichten te verkrijgen in de vragen van je digitale toets klik je op analytics Inzichten vanuit je digitale toets. Je wordt dan doorverwezen naar de overzichtspagina van de inzichten. Klik vervolgens op Vragen in het blok aan de linkerkant, waar de volgende onderdelen in zijn opgenomen:

Waardering

Onder elke vraag zie je een uitklapmenu waarin Telt mee staat. Dit is de standaard instelling. Dit uitklapmenu stelt je in staat om te kiezen in hoeverre de vraag meetelt in de berekening van het resultaat. De overige opties hierin zijn Bonus, Volle punten of Geschrapt. Voordat je een keuze maakt, krijg je een voorspeling te zien over hoe dit de inzichten van de vraag/opgave zal beïnvloeden.

Telt mee
Dit is de standaard instelling; de vraag telt mee in het cijfer van de student.

Bonus
De vraag telt niet mee in de maximum score die behaald kan worden, maar de vraag telt wel mee als een bonus voor de studenten die deze vraag correct beantwoord hebben.

Volle punten
Elke student krijgt het maximum aantal punten dat te behalen is bij deze vraag.

Geschrapt
De vraag en het aantal punten die behaald kunnen worden met de vraag, worden uit de toets geschrapt en niet meegerekend in het cijfer.

Analyse van de vragen

Vraagkwaliteit
Het eerste gedeelte van het blok laat de vraagkwaliteit zien. De kwaliteiten zijn onderverdeeld in: Goed, Makkelijk, Moeilijk en Aandacht nodig . Als je op het uitklapmenu aan de bovenkant van de pagina klikt, heb je de mogelijk om de vragen aan de hand van de kwaliteit te filteren.

• Goed: Alle waardes vallen binnen het gedefinieerde bereik.
• Makkelijk: De p- en p'-waarden zijn waarschijnlijk te hoog.
• Moeilijk: De p- en p'-waarden zijn waarschijnlijk te laag.
• Aandacht nodig: De Rit- en/of Rir-waarden kunnen te laag zijn (< 0.30). De vraag is niet representatief voor de opgave.

Naast de vraagkwaliteit zijn er vijf elementen in relatie tot de kwaliteit van de vragen:

p, p', Rit, Rir, en Rk

P-waarde
De p-waarde geeft een indicatie over de moeilijkheidsgraad van de vraag. Deze wordt berekend door het aantal studenten dat het maximum aantal punten heeft gehaald te delen door het totaal aantal studenten. Een p-waarde dicht bij de 0 betekent dat een vraag moeilijk is, terwijl een p-waarde dichter bij 1 betekent dat een vraag makkelijk is.

Rit-waarde
De Rit-waarde geeft de correlatie tussen het cijfer van de vraag en het totale cijfer weer. Het laat zien tot op welke hoogte een onderdeel bijdraagt aan het isoleren van goede kandidaten ten opzichte van de gehele groep studenten dat de digitale toets gemaakt heeft. In andere woorden: het demonstreert de discriminerende eigenschappen van het onderdeel en het zegt iets over de prestatie van het onderdeel ten opzichte van de toets in het geheel. Dus als een student met een hoog cijfer laag scoort op een specifieke vraag, terwijl studenten met een laag cijfer relatief hoog scoren op dat onderdeel, krijg je een lage (of zelfs negatieve) Rit-waarde. Onthoud dat de Rit- en Rir-waarde niet kunnen worden berekend als je gebruik maakt van flow.

Rir-waarde
De Rir-waarde is vergelijkbaar met Rit-waarde maar dan preciezer omdat het cijfer van de vraag zelf niet wordt meegenomen. Onthoud dat de Rit- en Rir-waarde niet kunnen worden berekend als je gebruik maakt van Flow.

P'-waarde
Moeilijkheidsgraad gecorrigeerd op gokeffect
De p'-waarde is het percentage van studenten dat de vraag weet. Deze waarde zou tussen 0.25 en 0.9 moeten liggen. Als de waarde 0.5 is, kan er gezegd worden dat er een maximale discriminatie tussen goed scorende en slecht scorende studenten is gevonden.

Rk-waarde
Gecorrigeerde gokeffect
In een vraag met bijvoorbeeld 4 opties en 1 correct antwoord, is er een 1 in 4-of 25%-kans dat het antwoord correct gegokt wordt. Als de vraag bijvoorbeeld 1 volle punt waard is, dan wordt de student 0.25 punten toegewezen voor het correct gokken. Dit weerspiegelt niet inherent de beheersing van de kennis die van de student vereist wordt.
Rk is het gecorrigeerde gokeffect, waar, binnen de berekening van het cijfer, de keuzes van andere studenten zijn meegenomen zodat deze informatie nauwkeuriger berekend kan worden.

Duur: De duur geeft een weergave van de gemiddelde tijd die een student aan een vraag heeft gespendeerd.

Volgende stap: Stap 3- Inzichten in de leerdoelen