Beoordelen in het mbo 2

• pedagogiek
• HBO
• Studiejaar 1

Beoordelen in het mbo

Bijeenkomst 2

Martijn Dozy en Susan Coevert

Welke acties heb je ondernomen sinds de vorige bijeenkomst om te starten?

Programma

Terugblik vorige les

Deel A: 

-Vorderingen & delen info. 

Deel B: 

-Theorie: Constructive alignment.

-Theorie: Taxonomie Bloom, Miller.

Afronding:

-Terublik.

-Vooruitbl.: werkvorm vw. analyse evt meegenomen toets d.m.v. taxonomieën.

Eindopdracht

Eindopdracht deel A: Je analyseert het toetsbeleid

Eindopdracht deel B: Je selecteert een toets uit de praktijk waarbij verbetering wenselijk is en je onderbouwt je keuze voor de betreffende toets.

CHECK: wie heeft al een toets mee?

Opdracht A

Je analyseert het toetsbeleid:

• Vanuit meerdere invalshoeken het toetsbeleid onderzoeken.
  
• Toetsbeleid van de organisatie is inzichtelijk.
  

              - Belangrijke kwaliteitsborgingsprincipes.

              - Functie(s) van toetsen.

               - Borgen eindniveau.

Opdracht A

• Het toetsbeleid wordt zowel beschreven door gebruik te maken van documenten als interviews met betrokkenen.  
• Uit de beschrijving van het toetsbeleid worden de volgende overtuigend onderwerpen beschreven: belangrijke kwaliteitsborgingsprincipes, de (didactische) functie van toetsen en het borgen van het eindniveau van de opleiding. De beschrijving wordt expliciet ondersteund met theorie (dmv. van een APA-referentie). Hieruit blijkt een kritische blik.
  

Wat ben je te weten gekomen over het toetsbeleid van jouw ROC?

Toetsbeleid

Bekijk de opbouw van kwaliteitspiramide voor toetsen op: http://www.open.ou.nl/dbr/uitlegpiramide.html

Onderzoek & vergelijk

Hoe ziet de organisatie rondom het examineren eruit?

Wat zijn de richtlijnen voor de summatieve en formatieve toetsen?

Is er een toetsconstructeur in het team?

Heeft het team een formatief toetsbeleid?

Kan je daar iets van vinden op intranet?

Wat heb je gevonden in het OER?

Pauze

Opdracht B

• Je selecteert een toets uit de praktijk waarbij verbetering wenselijk is en je onderbouwt je keuze voor de betreffende toets
• De keuze van de toets uit de verzameling toetsen van de intervisiegroep wordt onderbouwd door middel van:
  

• Betrouwbaarheid.

• Laag slagingspercentage.

• Niet in lijn met toetsbeleid.

• Lage validiteit.

• Negatieve feedback van studenten.

• Feedbackfunctie.

Opdracht B

De keuze wordt onderbouwd door de keuze van de toets op minimaal vier van de criteria correct te baseren. Hierbij wordt naar literatuur verwezen en/of naar concrete feedback van studenten.

Theorie deel B  C

Doelen

Je kunt een toets selecteren om te gebruiken voor werkvormen op basis van argumenten.

Je kan bepalen of er sprake is van constuctive alignment tussen de lesmethode, doelen en de toetsing.

Je kan toetsen analyseren met behulp van het competentieprofiel van Miller

Je kan leerdoelen en toetsvragen analyseren met behulp van de taxonomie van Bloom.

Constructive aligment

Constructive Alignment

Toetsproces

Stappen:

1. Ontwerpen
(welke leerdoelen ga je toetsen)

2. Construeren toetsmatrijs

3. Construeren toets

4. Afnemen

5. Nakijken en beoordelen

6. Analyseren en

7. Evalueren en verbeteren

Bron: toetscyclus van Milius 2007

Taxonomieën

Voordeel

- Nadenken over wat er met de kennis gedaan moet worden

- Geeft structuur aan de toets, maakt toetsen afwisselend

- Hulp validiteit.

Nadeel

- Vaak geen onderliggend bewijs/redenering, niet altijd helemaal wetenschappelijk waterdicht.

- Subjectieve indeling, overlap.

- Noodzakelijke volgorde: onthouden, begrijpen, toepassen.

Bron: https://score.hva.nl/Bronnen/Overzicht%20taxonomieën.pdf

Link op mijn hva.nl -> Taxonomieën zijn hot en handig

Taxonomieën

Taxonomie van Miller

https://tauu.uu.nl/wp-content/uploads/2015/03/Handout-1a-Wanneer-kiezen-voor-Multiple-Choice.pdf

Miller

Indeling van toetsen volgens de competentiedriehoek van Miller

Knows:                    Kennistoets:

                                    open en gesloten vragen, antwoordmodel.

Knows how:           Casustoets, vaardigheidstoets,

                                     antwoordmodel, gedragscriteria.

Shows how:           Casustoets, simulaties, project, BPV-opdracht

                                    rubrics, gedragscriteria.

Does:                        Praktijkexamens, afstudeeronderzoek

                                    rubrics, gedragscriteria, CGI Triangulatie essentieel

Taxonomie van Bloom

Van der Kamp (2016)

http://www.expertisecentrum-kunsttheorie.nl/cms_data/bloom.pdf

Optie 1: Aan de slag

• In groepjes aan het werk
• Bekijk elkaars toetsen en selecteer er één en geef aan waarom (op basis van criterea opdracht deel B).
• Ga in je groepje de toets die je hebt geselecteerd en bijbehorende leeractviteiten beoordelen op constructive aligment
• Doel: analyseren mate van constructive alignement van toetsen.

Optie 2: Analyseren onderliggende taxonomieën toets 20 min

Kies gezamenlijk in ieder geval 1 toets die het meest leerzaam is om te analyseren op dit gebied. Geef expliciet aan waarom deze het meeste interessant is om te analyseren.

Miller.           Op welke niveaus van Miller heeft de toets b etrekking?.

Bloom.         Bepaal op welk(e) niveau(s) de doelen zijn geformuleerd. Eerst hoge vs. lage orde,                                dan specifiek een niveau.

                        Bepaal op welk(e) niveau (s) de vragen zijn geformuleerd. Eerst hoge vs. lage orde,                              dan specifiek een niveau.

Bedenk een mogelijke verbeteractie nav. de inzichten die je hebt opgedaan.

Optie 3:

Bespreek met elkaar welke stappen er nodig zijn om verder te komen met de opdracht. 

Terugkoppelen

Wat is jullie opgevallen?

Volgende keer

-Toetsmatrijs.

-Lees info literatuur.