Formatieve Toetsing in het MBOWorkshop ROC van FlevolandJan Kees Meindersma (j.meindersma@kennisnet.nl)

Belangrijk?????

Visible learning; a synthesis of over 800 meta-analyses relating to achievement.

“[…] it soon became clear that feedback was among the most powerful influences on achievement”

“The major message is for teachers to pay attention to the formative effects of their teaching …”

Professor John Hattie (2009)University of Auckland

Opbouw

Inleiding Overzicht en samenhang Vormen van diagnostische toetsing Voortgang geregistreerd en in beeld Groepsdiscussie Acties

14-04-2023

Overzicht en samenhang

14-04-2023

Meten

Meet wat je wilt meten, zodat je voldoende informatie hebt om een beslissing te kunnen nemen met als doel– inzicht (formatief / diagnostisch)– oordeel (summatief)

14-04-2023

14-04-2023

Knows

Shows how

Knows how

Does

Weten

Weten hoe

Tonen hoe

Doenen zijn

Piramide van beroepsbekwaamheden van Miller

Wat wil je meten ?

Toetsing in de opleiding?

14-04-2023

Kwalificatiedossier

EindToets(-en)

Onderwijsprogramma

Diagnostischetoets(en)

…..de Koninklijke weg…..

Kwalificatiedossier

14-04-2023

Beoordelen

Oordeel over competenties– oordeel over bewijsstukken in portfolio– oordeel over proeve van bekwaamheid

Oordeel komt tot stand door:– nakijken– observeren– interviewen

14-04-2023

Wie beoordeelt er?

Leerlingen zelf Andere leerlingen Praktijkbegeleider Instructeur Docent Externe assessor …………

14-04-2023

http://www.bureau-ice.nl/upload/files/rapport_2.pdf

Wat beïnvloedt de kwaliteit?

Toetsvormen

Knows

Shows how

Knows how

Does

Weten

Weten hoe

Tonen hoe

Doenen zijn

ToetsvormenObservatie op werkplek

3600 Assessment

Peer AssessmentPraktijksimulatie

computersimulatiecasustoetsen

open vragengesloten vragen

auth

entic

iteit

hogere authenticiteitlagere betrouwbaarheid/bruikbaarheid

lagere authenticiteithogere betrouwbaarheid/bruikbaarheid

Model van Miller

Casustoets Een probleem of gevalsbeschrijving die ontleent

is aan de beroepspraktijk die een student moet oplossen

De beroepsspecifieke vaardigheden en kennis worden getoetst

Toetsresultaat in de vorm van antwoorden op vragen, een verslag of eventueel een presentatie

ICT ondersteuning:– multimediale casusbeschrijving– (automatische) correctie antwoorden– nieuwe vormen van verslag leggen of

presentatievormen14-04-2023

Multimediaal Casustoets

14-04-2023

Situationele Beoordelingstest

14-04-2023

http://www.t-station.nl/e-cartoon-sjt-114.html

test voor sociale competenties BPV - 15 interactieve situaties- waarin leerlingen moeten

omgaan met leidinggevenden, collega's en klanten en waarmee leerlingen moeite hebben.

- testtijd is ongeveer 1 uur

Opleiding Toerisme

Wat: Casustoets

Waarom?

Doel: Inzicht krijgen in eigen kennis en vaardigheden

Hoe: Op basis van casus zelf ontwikkelen website die beoordeeld werd aan de hand van vooraf gestelde criteria

Extra voordelen: - Past bij toekomst beroep- Meer soorten materiaal

Tools: Open website omgevingenMeer weten? Klik hier

Nieuwe vormen van verslaglegging

Computer simulatie

De student demonstreert of hij bepaalde beroepsvaardigheden via een computersimulatie correct en adequaat uitvoert

Computer gesimuleerde omgeving

14-04-2023

Simulatie in gezondheidszorg

14-04-2023

Opleiding Haven

Wat: Computersimulatie

Waarom?

Doel: Toetsen of een student kan aantonen hoe hij of zij een kraan kan bedienen

Hoe: 3D simulatie van een kraanmachinist

Voordeel: -Toetssituaties simuleren van complexe omgevingen- Toetssituaties creëren die (in de stage-)praktijk beperkt voorkomen; Tools: Verschillende simulatoren STC

Meer weten? Klik hier

Computersimulatie in VR

Onderzoek bij computersimulaties Leerprestaties hangen samen met mate van

activiteit en planningsvermogen van studenten Computersimulaties moeten echt betekenisvol en

aantrekkelijk zijn; veel studenten vinden praktijkopdrachten nuttiger en leuker

Motivatie van studenten kan bij teveel gebruik van computersimulatie teruglopen

http://onderzoek.kennisnet.nl/naar-de-onderzoeken/mbo

14-04-2023

Praktijksimulatie

De student demonstreert of hij bepaalde beroepsvaardigheden in de gesimuleerde praktijk correct en adequaat uitvoert

Practicum of handelingsopdracht die je uitvoert in een gesimuleerde praktijkomgeving

Eventueel gekoppeld aan een reflectieopdracht

Standaard beoordelingsformulieren

14-04-2023

Opleiding Horeca

Wat: Praktijksimulatie

Waarom?

Doel: Inzicht in en reflectie op eigen vaardigheden

Hoe: Vastleggen van handelingen studenten met behulp van flipcamera

Voordeel: - Reflectie op competenties- Goedkoop en eenvoudig

Tools: FlipcameraMeer weten?

Video bij praktijksimulatie

Peer Assessment en zelfevaluatie

14-04-2023

Geven van beoordelingen aan jezelf als student en aan je medestudenten

Meestal over een product, prestatie of project

Drie vormen van beoordeling:– Ranking (van beste tot slechtste)

– Pot verdelen (een pot punten of geld door het team onderling laten verdelen)

– Aan de hand van opgestelde criteria studenten elkaar laten beoordelen (bijvoorbeeld via rubrics)

Beoordelingslijst (rubrics) (I)

14-04-2023

Beoordelingslijst (rubrics) (II)

14-04-2023

Via online vragenlijst aan medestudenten (I)

Self

Peer

Via online vragenlijst aan medestudenten (II)

Via online vragenlijst aan medestudenten (III)

Opleiding: Laboratorium- Milieu- & Procestechniek

Wat: Zelf evaluatie en peer assessment

Waarom?

Doel: Leren van een expert

Hoe: handeling van expert in beeld gebracht, waarna student zelfde handeling uitvoert en ook in beeld wordt gebracht, daarna zelfevaluatie en peer-assessment

Voordeel: - Reflectie op eigen handelen- Toename transparantie over uitvoeren van handelingen

Tools: Digitale videocamera, Moviemaker, Pinnacle StudioMeer weten? Klik hier

Video vergelijking

3600 Assessment

In de praktijk taken uitvoeren en daarbij het competentieniveau demonstreren

Verschillende soorten beoordelaars geven hun feedback en oordeel

Aan de hand van vooraf opgestelde indicatoren die per groep kunnen verschillen

14-04-2023

Opleiding Groen:

Wat: 360 graden Assessment

Waarom?

Doel: Beoordelen van de student aan de hand van observatielijsten

Hoe: Via elektronische vragenlijsten aan verschillende groepen beoordeleaars

Voordeel: -tijdsbesparing-valide proces

Tools: Toetsplaza (QuestionMarkPerception)Meer weten? Klik hier en Toetsplaza

360 graden feedback (I)

360 graden feedback (II)

Observatie op de werkplek

Zowel op de werkplek als via proeve van bekwaamheid

Werken met gekwalificeerde observatoren Vooraf opgestelde indicatoren

14-04-2023

Observatie proeve van bekwaamheid

14-04-2023

Online observatie formulieren

Observatielijsten op de mobiel

Registreren en Voortgang

14-04-2023

Resultaten in portfolio

• een doelgerichte verzameling van materialen waarmee een individu verslag doet van geleverde inspanningen en activiteiten en inzicht geeft in zijn voortgang of prestaties

Soorten portfolio ontwikkelingsgericht portfolio

sturen van leerprocesreflecteren op eigen handelen

beoordelingsportfolio (examendossier)beoordelen van bewijzen van leerresultaten

presentatieportfolio (showcase)laten zien wie je bent of wat je kan

Beoordelen van portfolio

• analytisch (ontwikkelingsportfolio)

• holistisch (beoordelingsportfolio)

Resultaten in leerlingvolgsysteem

Via portfolio Via andere toetsvormen

14-04-2023

Online competentievolgsysteem (I)

Online competentievolgsysteem (II)

Online competentievolgsysteem (III)

Online competentievolgsysteem (IV)

Competentie voortgang (I)

14-04-2023

Competentie voortgang (II)

Groepsdiscussie

14-04-2023

Maak nieuwe combinaties (I)

Vakinhoud Didactische vormen (toetsing) Technologie

- groepjes 3-4 personen- max. 5 minuten per combinatie- min. 4 voorstellen

14-04-2023

Maak nieuwe combinaties (II)

Vakinhoud ToetsvormenTechnologie

Werkstroom Observatie werkplek videoVaardigheid 3600 Assessment weblogHouding Peer Assessment mobieltje …… Praktijksimulatie online survey

Computersimulatie digitale camera

Casustoetsen wikitwitter…..

14-04-2023

Acties

Wat moet er morgen gebeuren?– concreet, kort

Wat kun je daar zelf aanbijdragen?

14-04-2023

Acties

14-04-2023

Meer weten

14-04-2023