Beoordelen in het mbo 3

• pedagogiek
• HBO
• Studiejaar 1

Beoordelen in het mbo

Bijeenkomst 3

Martijn Dozy en Susan Coevert

Mededelingen

Programma

Terugblik vorige les

Lesdoelen 

Betrouwbaarheid en validiteit

Theorie: Taalniveaus 

Werkvorm: Analyse meegenomen toets d.m.v. betrouwbaarheid, validiteit en taal. Uitvoerbaarheid van toetsen

Terugblik

Volgende keer

Vorige les

Wat was constructive aligment?

Mentimeter

Lesdoelen

Je kunt een toets selecteren om te gebruiken voor werkvormen op basis van argumenten.

Je kan toetsen analyseren met behulp van de taalniveaus

Je kan beoordelen of de toets betrouwbaar en valide is

Je kan de uitvoerbaarheid van de toets beoordelen

Je kan beoordelen of de toets voldoet aan de kwaliteitseisen

Eindopdracht

Eindopdracht deel A: Je analyseert het toetsbeleid

Eindopdracht deel B: Je selecteert een toets uit de praktijk waarbij verbetering wenselijk is en je onderbouwt je keuze voor de betreffende toets.

Opdracht A

Je analyseert het toetsbeleid:

• Vanuit meerdere invalshoeken het toetsbeleid onderzoeken.
  
• Toetsbeleid van de organisatie is inzichtelijk.
  

              - Belangrijke kwaliteitsborgingsprincipes.

              - Functie(s) van toetsen.

               - Borgen eindniveau.

Opdracht B

• Je selecteert een toets uit de praktijk waarbij verbetering wenselijk is en je onderbouwt je keuze voor de betreffende toets
• De keuze van de toets uit de verzameling toetsen van de intervisiegroep wordt onderbouwd door middel van:
  

• Betrouwbaarheid.

• Laag slagingspercentage.

• Niet in lijn met toetsbeleid.

• Lage validiteit.

• Negatieve feedback van studenten.

• Feedbackfunctie.

Kwaliteitseisen toets

validiteit, betrouwbaarheid, specificiteit, moeilijkheid, discriminerend vermogen, transparantie, beschikbare tijd en (taal)technische kwaliteit.

Specificiteit: Een toets of opdracht is specifiek als een student pas een goede prestatie kan leveren als hij de vastgestelde leerdoelen heeft bereikt, met andere woorden: als hij de leerstof beheerst.

Discriminerend vermogen: De toetst maakt het verschil zichtbaar tussen studenten die de stof beheersen en studenten die de stof niet beheersen en tussen 'goede' en 'minder goede' studenten.

https://www.slo.nl/handreikingen/vmbo/handreiking-se-gesch-vmbo/toetsen-schoolexamen/eisen-goede-toets/

Betrouwbaarheid en validiteit

Meet je wat je wilt meten?

- De kernpunten uit de aangeboden leerstof op het gewenste       niveau.

Is de toets representatief?

- Aantal vragen is gerelateerd aan omvang en belang van het onderdeel in de lesstof

Metafoor

Validiteit

=Meet je wat je wilt meten

- Je wilt de omtrek van een appel meten en je gebruikt daarvoor een weegschaal

Betrouwbaarheid

= krijg je door de meting steeds dezelfde uitslag?

- Je wilt de omtrek van een appel meten en je gebruikt daarvoor een elastisch meetlint.

Iedere appel heeft een andere omtrek

Validiteit toets verhogen: Taxonomieën

Voordeel

- Nadenken over wat er met de kennis gedaan moet worden

- Geeft structuur aan de toets, maakt toetsen afwisselend

- Hulp validiteit.

Nadeel

- Vaak geen onderliggend bewijs/redenering, niet altijd helemaal wetenschappelijk waterdicht.

- Subjectieve indeling, overlap.

- Noodzakelijke volgorde: onthouden, begrijpen, toepassen.

Bron: https://score.hva.nl/Bronnen/Overzicht%20taxonomieën.pdf

Link op mijn hva.nl -> Taxonomieën zijn hot en handig

Taxonomieën

Kwaliteit van een toets – Uitvoerbaarheid

Efficiency

Kies, met behoud van de andere kwaliteitseisen, voor een toets(vorm) die studenten en docenten zo min mogelijk tijd kost

Eerlijkheid

Iedere student krijgt een even grote kans om zijn competentie te demonstreren.

Beschikbare tijd

Er is voldoende tijd om de toets te maken.

Geen speedtest van maken.

Taal technische kwaliteit: Taalniveaus

MEIJERINK

basisonderwijs	1 F
vmbo en mbo-1, mbo-2 en mbo-3	2 F
havo en mbo-4	3 F
vwo	4 F

Oefenen met taalniveaus

Lees de tekst en beoordeel bij welk niveau deze hoort.

https://www.slo.nl/publish/pages/5901/referentiekader_taal_en_rekenen_referentieniveaus.pdf

Taalniveaus

Lees de tekst en beoordeel bij welk niveau deze hoort.

https://www.slo.nl/publish/pages/5901/referentiekader_taal_en_rekenen_referentieniveaus.pdf

Feedback functie van de toets

Evaluatieve functie: Toetsen geven informatie over de kwaliteit van de opleiding/vak zelf.

In hoeverre is de toets een:

Leermiddel (sturing van het leerproces)

Voortgangscontrole (de toets geeft docent en student informatie over de voortgang van de student in het verwerven van de leerdoelen)

https://www.ru.nl/docenten/onderwijs/toetsen-en-beoordelen/toetsen/

Feedbackfunctie van de toets

John Hattie

Visible learning for teachers​

​

Van te voren zelf je cijfer bedenken​ 

Formatieve toetsing​

Feedback belangrijk​

​

beoordelen toets

Feedback geven

Formatief interpreteren/evalueren

Formatief evalueren (interpreteren) is een doelbewust gepland proces gericht op het verzamelen van informatie. De informatie helpt de leraar en de student bij twee typen formatieve beslissingen: 

1) het versterken/aanpassen van de instructiestrategie en 

2) het versterken/aanpassen van de leerstrategie van de student. 

De informatie kan pas ingezet worden voor formatieve doeleinden als deze informatie:

-Inzicht geeft in wat de student nog niet begrijpt of nog niet goed doet (misvattingen blootlegt), zodat de leraar ruimte in kan bouwen om te kunnen inspringen op de misvattingen of problemen die hij constateert.

https://wij-leren.nl/formatief-evalueren-waarom-belangrijk.php

Feedback

FEEDBACK REGELS VOLGENS HATTIE​

Feedback model van Hattie & Timperly, 2007, p. 87 geraadpleegd op 9 oktober 2017, van:​ 

http://histoforum.net/2013/feedback.htmlst

Beoordelen toets

Beoordeel je toets op:

Betrouwbaarheid en validiteit

Specificiteit, moeilijkheid, discriminerend vermogen, transparantie, beschikbare tijd

Taalniveau  (op juiste niveau vragen gesteld?)

Feedbackfunctie van de toets

Volgende keer

Toetsmatrijs