Post on 01-Jul-2015
Formatieve Toetsing in het MBOWorkshop ROC van FlevolandJan Kees Meindersma (j.meindersma@kennisnet.nl)
Belangrijk?????
Visible learning; a synthesis of over 800 meta-analyses relating to achievement.
“[…] it soon became clear that feedback was among the most powerful influences on achievement”
“The major message is for teachers to pay attention to the formative effects of their teaching …”
Professor John Hattie (2009)University of Auckland
Opbouw
Inleiding Overzicht en samenhang Vormen van diagnostische toetsing Voortgang geregistreerd en in beeld Groepsdiscussie Acties
14-04-2023
Overzicht en samenhang
14-04-2023
Meten
Meet wat je wilt meten, zodat je voldoende informatie hebt om een beslissing te kunnen nemen met als doel– inzicht (formatief / diagnostisch)– oordeel (summatief)
14-04-2023
14-04-2023
Knows
Shows how
Knows how
Does
Weten
Weten hoe
Tonen hoe
Doenen zijn
Piramide van beroepsbekwaamheden van Miller
Wat wil je meten ?
Toetsing in de opleiding?
14-04-2023
Kwalificatiedossier
EindToets(-en)
Onderwijsprogramma
Diagnostischetoets(en)
…..de Koninklijke weg…..
Kwalificatiedossier
14-04-2023
Beoordelen
Oordeel over competenties– oordeel over bewijsstukken in portfolio– oordeel over proeve van bekwaamheid
Oordeel komt tot stand door:– nakijken– observeren– interviewen
14-04-2023
Wie beoordeelt er?
Leerlingen zelf Andere leerlingen Praktijkbegeleider Instructeur Docent Externe assessor …………
14-04-2023
http://www.bureau-ice.nl/upload/files/rapport_2.pdf
Wat beïnvloedt de kwaliteit?
Toetsvormen
Knows
Shows how
Knows how
Does
Weten
Weten hoe
Tonen hoe
Doenen zijn
ToetsvormenObservatie op werkplek
3600 Assessment
Peer AssessmentPraktijksimulatie
computersimulatiecasustoetsen
open vragengesloten vragen
auth
entic
iteit
hogere authenticiteitlagere betrouwbaarheid/bruikbaarheid
lagere authenticiteithogere betrouwbaarheid/bruikbaarheid
Model van Miller
Casustoets Een probleem of gevalsbeschrijving die ontleent
is aan de beroepspraktijk die een student moet oplossen
De beroepsspecifieke vaardigheden en kennis worden getoetst
Toetsresultaat in de vorm van antwoorden op vragen, een verslag of eventueel een presentatie
ICT ondersteuning:– multimediale casusbeschrijving– (automatische) correctie antwoorden– nieuwe vormen van verslag leggen of
presentatievormen14-04-2023
Multimediaal Casustoets
14-04-2023
Situationele Beoordelingstest
14-04-2023
http://www.t-station.nl/e-cartoon-sjt-114.html
test voor sociale competenties BPV - 15 interactieve situaties- waarin leerlingen moeten
omgaan met leidinggevenden, collega's en klanten en waarmee leerlingen moeite hebben.
- testtijd is ongeveer 1 uur
Opleiding Toerisme
Wat: Casustoets
Waarom?
Doel: Inzicht krijgen in eigen kennis en vaardigheden
Hoe: Op basis van casus zelf ontwikkelen website die beoordeeld werd aan de hand van vooraf gestelde criteria
Extra voordelen: - Past bij toekomst beroep- Meer soorten materiaal
Tools: Open website omgevingenMeer weten? Klik hier
Nieuwe vormen van verslaglegging
Computer simulatie
De student demonstreert of hij bepaalde beroepsvaardigheden via een computersimulatie correct en adequaat uitvoert
Computer gesimuleerde omgeving
14-04-2023
Simulatie in gezondheidszorg
14-04-2023
Opleiding Haven
Wat: Computersimulatie
Waarom?
Doel: Toetsen of een student kan aantonen hoe hij of zij een kraan kan bedienen
Hoe: 3D simulatie van een kraanmachinist
Voordeel: -Toetssituaties simuleren van complexe omgevingen- Toetssituaties creëren die (in de stage-)praktijk beperkt voorkomen; Tools: Verschillende simulatoren STC
Meer weten? Klik hier
Computersimulatie in VR
Onderzoek bij computersimulaties Leerprestaties hangen samen met mate van
activiteit en planningsvermogen van studenten Computersimulaties moeten echt betekenisvol en
aantrekkelijk zijn; veel studenten vinden praktijkopdrachten nuttiger en leuker
Motivatie van studenten kan bij teveel gebruik van computersimulatie teruglopen
http://onderzoek.kennisnet.nl/naar-de-onderzoeken/mbo
14-04-2023
Praktijksimulatie
De student demonstreert of hij bepaalde beroepsvaardigheden in de gesimuleerde praktijk correct en adequaat uitvoert
Practicum of handelingsopdracht die je uitvoert in een gesimuleerde praktijkomgeving
Eventueel gekoppeld aan een reflectieopdracht
Standaard beoordelingsformulieren
14-04-2023
Opleiding Horeca
Wat: Praktijksimulatie
Waarom?
Doel: Inzicht in en reflectie op eigen vaardigheden
Hoe: Vastleggen van handelingen studenten met behulp van flipcamera
Voordeel: - Reflectie op competenties- Goedkoop en eenvoudig
Tools: FlipcameraMeer weten?
Video bij praktijksimulatie
Peer Assessment en zelfevaluatie
14-04-2023
Geven van beoordelingen aan jezelf als student en aan je medestudenten
Meestal over een product, prestatie of project
Drie vormen van beoordeling:– Ranking (van beste tot slechtste)
– Pot verdelen (een pot punten of geld door het team onderling laten verdelen)
– Aan de hand van opgestelde criteria studenten elkaar laten beoordelen (bijvoorbeeld via rubrics)
Beoordelingslijst (rubrics) (I)
14-04-2023
Beoordelingslijst (rubrics) (II)
14-04-2023
Via online vragenlijst aan medestudenten (I)
Self
Peer
Via online vragenlijst aan medestudenten (II)
Via online vragenlijst aan medestudenten (III)
Opleiding: Laboratorium- Milieu- & Procestechniek
Wat: Zelf evaluatie en peer assessment
Waarom?
Doel: Leren van een expert
Hoe: handeling van expert in beeld gebracht, waarna student zelfde handeling uitvoert en ook in beeld wordt gebracht, daarna zelfevaluatie en peer-assessment
Voordeel: - Reflectie op eigen handelen- Toename transparantie over uitvoeren van handelingen
Tools: Digitale videocamera, Moviemaker, Pinnacle StudioMeer weten? Klik hier
Video vergelijking
3600 Assessment
In de praktijk taken uitvoeren en daarbij het competentieniveau demonstreren
Verschillende soorten beoordelaars geven hun feedback en oordeel
Aan de hand van vooraf opgestelde indicatoren die per groep kunnen verschillen
14-04-2023
Opleiding Groen:
Wat: 360 graden Assessment
Waarom?
Doel: Beoordelen van de student aan de hand van observatielijsten
Hoe: Via elektronische vragenlijsten aan verschillende groepen beoordeleaars
Voordeel: -tijdsbesparing-valide proces
Tools: Toetsplaza (QuestionMarkPerception)Meer weten? Klik hier en Toetsplaza
360 graden feedback (I)
360 graden feedback (II)
Observatie op de werkplek
Zowel op de werkplek als via proeve van bekwaamheid
Werken met gekwalificeerde observatoren Vooraf opgestelde indicatoren
14-04-2023
Online observatie formulieren
Observatielijsten op de mobiel
Registreren en Voortgang
14-04-2023
Resultaten in portfolio
• een doelgerichte verzameling van materialen waarmee een individu verslag doet van geleverde inspanningen en activiteiten en inzicht geeft in zijn voortgang of prestaties
Soorten portfolio ontwikkelingsgericht portfolio
sturen van leerprocesreflecteren op eigen handelen
beoordelingsportfolio (examendossier)beoordelen van bewijzen van leerresultaten
presentatieportfolio (showcase)laten zien wie je bent of wat je kan
Beoordelen van portfolio
• analytisch (ontwikkelingsportfolio)
• holistisch (beoordelingsportfolio)
Resultaten in leerlingvolgsysteem
Via portfolio Via andere toetsvormen
14-04-2023
Online competentievolgsysteem (I)
Online competentievolgsysteem (II)
Online competentievolgsysteem (III)
Online competentievolgsysteem (IV)
Competentie voortgang (I)
14-04-2023
Competentie voortgang (II)
Groepsdiscussie
14-04-2023
Maak nieuwe combinaties (I)
Vakinhoud Didactische vormen (toetsing) Technologie
- groepjes 3-4 personen- max. 5 minuten per combinatie- min. 4 voorstellen
14-04-2023
Maak nieuwe combinaties (II)
Vakinhoud ToetsvormenTechnologie
Werkstroom Observatie werkplek videoVaardigheid 3600 Assessment weblogHouding Peer Assessment mobieltje …… Praktijksimulatie online survey
Computersimulatie digitale camera
Casustoetsen wikitwitter…..
14-04-2023
Acties
Wat moet er morgen gebeuren?– concreet, kort
Wat kun je daar zelf aanbijdragen?
14-04-2023
Acties
14-04-2023
Meer weten
14-04-2023